BRPI0706306A2 - método e aparelho para a sintetização de um sinal de áudio binaural; método;.método para sintetização de um sinal de áudio estéreo; decodificador de áudio paramétrico; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para processar um sinal de aúdio parametricamente codificado que compreende, ao menos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informação correspondentes que descrevem uma imagem sonora de canal múltiplo; método para gerar um sinal de áudio parametricamente codificado; codificador de áudio paramétrico para gerar um sinal áudio parametricamente codificado; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para gerar um sinal de áudio parametricamente codificado - Google Patents
método e aparelho para a sintetização de um sinal de áudio binaural; método;.método para sintetização de um sinal de áudio estéreo; decodificador de áudio paramétrico; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para processar um sinal de aúdio parametricamente codificado que compreende, ao menos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informação correspondentes que descrevem uma imagem sonora de canal múltiplo; método para gerar um sinal de áudio parametricamente codificado; codificador de áudio paramétrico para gerar um sinal áudio parametricamente codificado; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para gerar um sinal de áudio parametricamente codificado Download PDFInfo
- Publication number
- BRPI0706306A2 BRPI0706306A2 BRPI0706306-7A BRPI0706306A BRPI0706306A2 BR PI0706306 A2 BRPI0706306 A2 BR PI0706306A2 BR PI0706306 A BRPI0706306 A BR PI0706306A BR PI0706306 A2 BRPI0706306 A2 BR PI0706306A2
- Authority
- BR
- Brazil
- Prior art keywords
- signal
- audio signal
- audio
- channel
- secondary information
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/0204—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/022—Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
- H04S3/004—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/03—Application of parametric coding in stereophonic audio systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Mathematical Physics (AREA)
- Stereophonic System (AREA)
Abstract
MéTODO E APARELHO PARA A SINTETIZAçãO DE UM SINAL DE áUDIO BINAURAL; MéTODO PARA SINTETIZAçãO DE UM SINAL DE áUDIO ESTéREO; DECODIFICADOR DE áUDIO PARAMETRICO; PRODUTO DE PROGRAMA DE COMPUTADOR, ARMAZENADO EM UMA MìDIA LEGìVEL POR COMPUTADOR E EXECUTáVEL EM UM DISPOSITIVO DE PROCESSAMENTO DE DADOS, PARA PROCESSAR UM SINAL DE áUDIO PARAMETRICAMENTE CQDIFICADO QUE COMPREENDE, AO MENOS, UM SINAL COMBINADO DE UMA PLURALIDADE DE CANAIS DE áUDIO E UM OU MAIS CONJUNTOS DE INFORMAçãO CORRESPONDENTES QUE DESCREVEM UMA IMAGEM SONORA 1DE CANAL MULTIPLO; MéTODO PARA GERAR UM SINAL DE áUDIO PARAMETRICAMENTE CODIFICADO; CODIFICADOR DE áUDIO PARAMETRICO PARA GERAR UM SINAL DE áUDIO PARAMETRICAMENTE CODIFICADO; PRODUTO DE PROGRAMA DE COMPUTADOR, ARMAZENADO EM UMA MìDIA LEGìVEL POR COMPUTADOR E EXECUTáVEL EM UM DISPOSITIVO DE PROCESSAMENTO DE DADOS, PARA GERAR UM SINAL DE áUDIO PARAMETRICAMENTE CODIFICADO. Trata-se de um método para sintetizar um sinal de áudio binaural, sendo que o método compreende: inserir um sinal de áudio parametricamente codificado em, ao menos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informações secundárias que descrevem uma imagem sonora de canal múltiplo; e aplicar um conjunto pré-determinado de filtros de função de transferência relacionados à cabeça para, ao menos, um sinal combinado em proporção determinada pelo conjunto de informações secundárias correspondentes para sintetizar um sinal de áudio binaural. São descritos, ainda, um decodificador de áudio paramétrico, um codificador de áudio paramétrico, um produto de programa de computador e um aparelho para sintetização de um sinal de áudio binaural.
Description
"MÉTODO E APARELHO PARA A SINTETIZAÇÃO DE UM SINALDE ÁUDIO BINAURAL; MÉTODO PARA SINTETIZAÇÃO DE UM SINAL DEÁUDIO ESTÉREO; DECODIFICADOR DE ÁUDIO PARAMÉTRICO; PRODUTODE PROGRAMA DE COMPUTADOR, ARMAZENADO EM UMA MÍDIALEGÍVEL POR COMPUTADOR E EXECUTÁVEL EM UM DISPOSITIVO DEPROCESSAMENTO DE DADOS, PARA PROCESSAR UM SINAL DE ÁUDIOPARAMETRICAMENTE CODIFICADO QUE COMPREENDE, AO MENOS, UMSINAL COMBINADO DE UMA PLURALIDADE DE CANAIS DE ÁUDIO E UMOU MAIS CONJUNTOS DE INFORMAÇÃO CORRESPONDENTES QUEDESCREVEM UMA IMAGEM SONORA DE CANAL MÚLTIPLO; MÉTODOPARA GERAR UM SINAL DE ÁUDIO PARAMETRICAMENTE CODIFICADO;CODIFICADOR DE ÁUDIO PARAMÉTRICO PARA GERAR UM SINAL DEÁUDIO PARAMETRICAMENTE CODIFICADO; PRODUTO DE PROGRAMA DECOMPUTADOR, ARMAZENADO EM UMA MÍDIA LEGÍVEL PORCOMPUTADOR E EXECUTÁVEL EM UM DISPOSITIVO DEPROCESSAMENTO DE DADOS, PARA GERAR UM SINAL DE ÁUDIOPARAMETRICAMENTE CODIFICADO"
Pedidos Relacionados
Este pedido reivindica prioridade de um pedido internacional nos termos doPCT/FI2006/050014, depositado no dia 9 de janeiro de 2006 e de um pedido n° U.S.11/334.041, depositado no dia 17 de janeiro de 2006.
Campo da Invenção
A presente invenção refere-se à codificação de áudio espacial e, maisparticularmente, à decodificação de sinais de áudio binaurais.
Antecedentes da Invenção
Em codificação de áudio especial, um sinal de áudio de canal duplo oumúltiplo é processado de forma que os sinais de áudio a serem reproduzidos em diferentescanais de áudio sejam diferentes uns dos outros, fornecendo, assim, aos ouvintes, aimpressão de um efeito espacial ao redor da fonte de áudio. O efeito espacial pode sercriado através da gravação do áudio diretamente em formatos adequados para reproduçãode canal múltiplo ou binaural ou o efeito espacial pode ser criado artificialmente emqualquer sinal de áudio de canal duplo ou múltiplo, o que é conhecido comoespacialização.
Sabe-se, geralmente, que, para reprodução por fones de ouvido, umaespacialização artificial pode ser realizada por filtragem de HRTF (Função deTransferência Relativa à Cabeça), a qual produz sinais binaurais para o ouvido esquerdo edireito do ouvinte. Os sinais de fonte de som são filtrados com filtros derivados dasHRTFs correspondentes a sua direção de origem. Uma HRTF é a função de transferênciamedida a partir de uma fonte de som em campo livre à audição humana ou uma cabeçaartificial dividida pela função de transferência para um microfone que substitui a cabeça eé situado no meio da cabeça. O efeito artificial de sala (por exemplo, reflexões iniciaise/ou reverberação tardia) pode ser adicionado aos sinais de espacialização para melhorar aexternalização e a naturalidade da fonte.
Enquanto uma variedade de dispositivos de interação e de escuta de áudioaumenta, compatibilidade se torna mais importante. Dentre os formatos de áudio espacial,aspira-se à compatibilidade através de técnicas de técnicas de aumento de canais e reduçãode canais. Sabe-se, geralmente, que há algoritmos para conversão de um sinal de áudio decanal múltiplo para formato estéreo, como Dolby Digital® e Dolby Ambiente® e para umaconversão adicional de um sinal estéreo em sinal binaural. Entretanto, neste tipo deprocesso, a imagem especial do sinal de áudio de canal múltiplo original não pode sercompletamente reproduzida. Uma melhor maneira de converter um sinal de áudio de canalmúltiplo para escuta por fone de ouvido é substituir os alto-falantes originais empregando-se a filtragem de HRTF e executar os sinais de canal do alto-falante através daqueles (porexemplo, Dolby Headphone®). Porém, o dito processo tem a desvantagem de que, paragerar um sinal binaural, um mix de canais múltiplos é sempre primeiramente necessário.
Ou seja, os sinais de canal múltiplo (por exemplo, canais 5 + 1) são primeiramentedecodificados e sintetizados e as HRTFs são, então, aplicadas a cada sinal para formar umsinal binaural. Esta é, de forma computacional, uma abordagem intensa quandocomparada à decodificação direta a partir do formato de canal múltiplo comprimido emformato binaural.Binaural Cue Coding (BCC) é um método de codificação de áudio espacialparamétrico altamente desenvolvido. A BBC representa um sinal de canal múltiploespecial como um único (ou diversos) canal de áudio com redução de canais e umconjunto de diferenças de intercanal relevante de forma perceptiva estimado como umafunção de freqüência e tempo a partir do sinal original. O método permite que um sinal deáudio especial seja mixado para um planejamento de alto-falante arbitrário a serconvertido para qualquer outro alto-falante, que consiste no mesmo ou em um númerodiferente de alto-falantes.
Consequentemente, a BBC é projetada para sistemas de alto-falante de canalmúltiplo. Entretanto, gerar um sinal binaural a partir de um sinal mono processado porBBC e suas informações secundárias exige que uma representação de canal múltiplo sejaprimeiramente sintetizada com base no sinal mono e nas informações secundárias e,somente depois, é possível gerar um sinal binaural para a reprodução espacial em alto-falantes, a partir da representação de canal múltiplo. Fica evidente que tal abordagem nãoé otimizada em vista de gerar um sinal binaural.
Sumário da Invenção
Atualmente, foi inventado um método e equipamento técnicos aperfeiçoadosque executam o método, através do qual é permitida a geração de um sinal binaural apartir de um sinal de áudio parametricamente codificado. Diversos aspectos da invençãoincluem um método de decodificação, um decodificador, um aparelho, um método decodificação, um codificador e programas de computadores, os quais são caracterizadospelo o que é afirmado nas reivindicações independentes. Diversas modalidades dainvenção são apresentadas nas reivindicações dependentes.
De acordo com um primeiro aspecto, um método, de acordo com ainvenção, é baseado na idéia de sintetização de um sinal de áudio binaural, de modo queum sinal de áudio parametricamente codificado que compreende, ao menos, um sinalcombinado de uma pluralidade de canais de áudio e um ou mais conjuntos correspondentesdas informações secundárias que descreve uma imagem sonora de canal múltiplo éprimeiramente inserido. Então, um conjunto pré-determinado filtros de função detransferência relacionados à cabeça é aplicado a, ao menos, um sinal combinado emproporção determinada pelo dito conjunto de informações secundárias correspondente parasintetizar um sinal de áudio binaural.
De acordo com uma modalidade, a partir do conjunto pré-determinado defiltros de função de transferência relacionados à cabeça, um par esquerdo-direito de filtrosde função de transferência relacionados à cabeça correspondente a cada direção de alto-falante do planejamento do alto-falante de canal múltiplo original é escolhido para seraplicado.
De acordo com uma modalidade, o dito conjunto de informaçõessecundárias compreende um conjunto de estimativas de ganho para os sinais de canal doáudio de canal múltiplo, descrevendo-se a imagem sonora original.
De acordo com uma modalidade, as estimativas de ganho do áudio de canalmúltiplo original são determinadas como uma função de tempo e freqüência; e os ganhospara cada canal de alto-falante são ajustados de maneira que a soma dos quadrados de cadavalor de ganho é igual a um.
De acordo com uma modalidade, ao menos, um sinal combinado é divididoem quadros de tempo de um comprimento de quadro empregado, tais quadros são, então,providos de janelas; e, ao menos, um sinal combinado é transformado no domínio defreqüência anterior à aplicação dos filtros de função de transferência relacionados àcabeça.
De acordo com uma modalidade, ao menos, um sinal combinado é divididono domínio de freqüência em uma pluralidade de bandas de freqüência motivadas psico-acusticamente, como as bandas de freqüência que cumprem com a escala de Largura deBanda Retangular Equivalente (ERB), antes de aplicar os filtros de função de transferênciarelacionados à cabeça.
De acordo com uma modalidade, as saídas dos filtros de função detransferência relacionados à cabeça para cada banda de freqüência para um sinal de ladoesquerdo e um sinal de lado direito são somadas separadamente; e o sinal de ladoesquerdo somado e o sinal de lado direito somado são transformados no domínio de tempopara criar um componente de lado esquerdo e um componente de lado direito de um sinalde áudio binaural.Um Segundo aspecto fornece um método para gerar um sinal de áudioparametricamente codificado, o método compreende: inserir um sinal de áudio de canalmúltiplo que compreende uma pluralidade se canais de áudio; gerar, ao menos, um sinalcombinado da pluralidade de canais de áudio; e gerar um ou mais conjuntoscorrespondentes de informações secundárias que incluem estimativas de ganho para apluralidade de canais de áudio.
De acordo com uma modalidade, as estimativas de ganho são calculadasatravés da comparação do nível de ganho de cada canal individual ao nível de ganhoacumulado do sinal combinado.
A disposição, de acordo com a invenção, fornece vantagens significantes.Uma grande vantagem é a simplicidade e a baixa complexidade computacional doprocesso de decodifícação. O decodifícador também é flexível no sentido de que realiza asíntese binaural de forma completa com base nos parâmetros espaciais e codificadoresdados pelo codificador. Além disso, uma espacialidade equivalente ao sinal original émantida na conversão. Já para as informações secundárias, um conjunto de estimativas deganho do mix original é suficiente. De modo mais significante, a invenção permite umaexploração aperfeiçoada do estado intermediário compressivo fornecido na codificação deáudio paramétrico, aprimorando a eficiência de transmissão, bem como da armazenagemdo áudio.
Os aspectos adicionais da invenção incluem diversos aparelhos dispostospara desenvolver as etapas inventivas dos métodos acima.
Breve Descrição dos Desenhos
A seguir, diversas modalidades da invenção serão descritas em maioresdetalhes com referência aos desenhos em anexo, nos quais:
A Figura 1 mostra um esquema de Binaural Cue Coding (BCC) genérico,de acordo com uma técnica anterior;
A Figura 2 mostra a estrutura geral de um esquema de síntese de BBC, deacordo com uma técnica anterior;
A Figura 3 mostra um diagrama em bloco do decodifícador binaural, deacordo com uma modalidade da invenção; eA Figura mostra um dispositivo eletrônico, de acordo com uma modalidadeda invenção, em um gráfico em bloco reduzido.
Descrição das Modalidades
A seguir, a invenção será ilustrada através de referências ao Binaural CueCoding (BCC) como uma plataforma exemplificativa para executar o esquema dedecodificação, de acordo com as modalidades. Pode-se observar, no entanto, que ainvenção não se limita somente aos métodos de codificação de áudio espacial do tipo BBC,porém pode ser executada em qualquer esquema de codificação de áudio que forneça, aomenos, um sinal de áudio combinado a partir do conjunto original de um ou mais canaisde áudio e informações secundárias espaciais apropriadas.
Binaural Cue Coding (BCC) é um conceito geral para representaçãoparamétrica de áudio especial, que transfere saída de canal múltiplo com um númeroarbitrário de canais a partir de um único canal de áudio, além de algumas informaçõessecundárias. A Figura 1 ilustra tal conceito. Diversos canais de áudio de entrada (M) sãocombinados em um único sinal de saída (S; "soma") por um processo de redução decanais. Em paralelo, os indicadores de intercanal mais notáveis que descrevem a imagemde som de canal múltiplo são extraídas a partir dos canais de entrada e codificadas deforma compacta como as informações secundárias de BBC. Tanto o sinal de soma quantoa informações secundárias são, então, transmitidos ao lado receptor, possivelmenteusando-se um esquema de codificação de áudio de baixa taxa de transferência paracodificar o sinal de soma. Finalmente, o decodificador de BBC gera um sinal de saída de(N) de canal múltiplo para alto-falantes a partir do sinal de soma transmitido e ainformação de indicador especial através da re-sintetização de canais de saída de canal, osquais podem transportar os indicadores de intercanal relevantes, como Diferença deTempo de Intercanal (ICTD), Diferença de Nível de Intercanal (ICLD) e Coerência deIntercanal (ICC). Consequentemente, a informações secundárias de BBC, isto é, osindicadores de intercanal, é escolhida em vista da otimização da reconstrução do sinal deáudio de canal múltiplo particularmente para reprodução por alto-falantes.
Há dois esquemas de BBC, a saber, BBC para Renderização Flexível (BBCdo tipo I), a qual tem o propósito de transmitir um número de sinais de fonte separadoscom o objetivo de renderização no receptor, e BCC para Renderização Natural (BBC dotipo II), a qual tem o propósito para transmissão de um número de canais de áudio de sinalestéreo ou ambiente. A BCC para Renderização Flexível exige sinais de fonte de áudioseparados (por exemplo, sinais de fala, instrumentos gravados separadamente, gravação demúltiplas trilhas) como entrada. A BCC para Renderização Natural, por sua vez, exige umsinal de canal múltiplo ou estéreo de "mix final" como entrada (por exemplo, áudio deCD, ambiente de DVD). Caso tais processos sejam realizados através de técnicas decodificação convencionais, as escalas de taxa de transferência proporcionalmente ou, aomenos, de maneira quase proporcional ao número de canais de áudio, por exemplo,transmitir os seis canais de áudio do sistema de canal múltiplo 5.1. exige uma taxa detransferência de aproximadamente seis vezes do canal de áudio. Portanto, ambos osesquemas de BBC resultam em uma taxa de transferência, a qual é somente ligeiramentemais alta do que a taxa de transferência exigida para a transmissão de um canal de áudio,já que a informações secundárias de BBC exige somente uma taxa de transferência muitobaixa (e.g. 2kb/s).
A Figura 2 mostra a estrutura geral de um esquema de síntese de BBC. Osinal mono transmitido ("soma") é primeiramente provido de janelas no domínio de tempoem quadros e, então, mapeados para uma representação espectral de sub-bandas adequadaspor um processo de FFT (Transformação de Fourier Rápida) e um banco de filtros FB.Ao invés dos processos na FFT e FB, um processo de banco de filtro de QMF (FiltroEspelhado em Quadratura) pode ser usado para realizar uma decomposição do sinal. Nocaso geral de canais de reprodução, a ICLD e a ICTD são consideradas em cada sub-banda entre pares de canais, isto é, para cada canal relativo a um canal de referência. Assub-bandas são selecionadas de maneira que uma resolução de freqüência suficientementealta é alcançada, por exemplo, uma largura de sub-banda igual ao dobro da escala ERB(Largura de Banda Retangular Equivalente) é considerada tipicamente adequada. Paracada canal de saída a ser gerado, a ICTD de atraso de tempo individuais e a ICLD dediferenças de nível são impostas nos coeficientes espectrais, seguidas por um processo desíntese de coerência que reintroduz os aspectos mais relevantes de coerência e/oucorrelação (ICC) entre os canais de áudio sintetizados. Finalmente, todos os canais desaída sintetizados são convertidos em uma representação de domínio de tempo através deum processo de IFFT (FFT Inverso), que resulta na saída de canal múltiplo. Para umadescrição mais detalhada da abordagem de BCC, uma referência é feita a: F. Baumgarte eC. Faller: "Binaural Cue Coding - Part I: Psychoacoustic Fundamentais and DesignPrincipies"·, IEEE Transactions on Speech and Audio Processing, Vol. 11, N9 6,novembro de 2003, and to: C. Faller and F. Baumgarte: "Binaural Cue Coding - Part II:Schemes and Applications", IEEE Transactions on Speech and Audio Processing, Yol. 11,No. 6, novembro de 2003.
A BCC é um exemplo de esquemas de codificação, a qual fornece umaplataforma adequada para executar o esquema de decodificação, de acordo com asmodalidades. O decodificador binaural, de acordo com uma modalidade, recebe o sinalmonofônico e a informações secundárias como entradas. A idéia é substituir cada alto-falante no mix original por um par de HRTFs que correspondem à direção do alto-falanteem relação à posição de escuta. Cada canal de freqüência do sinal monofônico éalimentado para cada par de filtros que executa as HRTFs na proporção imposta por umconjunto de valores de ganho, os quais podem ser calculados com base na informaçõessecundárias. Consequentemente, o processo pode ser considerado como a execução de umconjunto de alto-falantes virtuais, correspondentes aos originais, na cena de áudiobinaural. Desta forma, a invenção adiciona valor à BCC através da permissão para, alémde sinais de áudio para canais múltiplos para diversos planejamentos de alto-falante,também um sinal de áudio binaural a ser derivado diretamente a partir de sinal de áudioespacial parametricamente codificado sem nenhum processo de síntese de BCCintermediário.
Algumas modalidades da invenção são ilustradas a seguir com referência àFigura 3, a qual mostra um diagrama em bloco de um decodificador binaural, de acordocom um aspecto da invenção. O decodificador 300 compreende uma primeira entrada 302para o sinal monofônico e uma segunda entrada 304 para a informações secundárias. Asentradas 302, 304 são mostradas como entradas distintivas com o objetivo de ilustrar asmodalidades, porém uma pessoa versada na técnica certifica-se de que, em implantaçãoprática, o sinal monofônico e a informações secundárias podem ser fornecidos através damesma entrada.
De acordo com uma modalidade, a informações secundárias não tem queincluir os mesmos indicadores de intercanal como nos esquemas de BBC, isto é, Diferençade Tempo de Intercanal (ICTD), Diferença de Nível de Intercanal (ICLD) e Coerência deIntercanal (ICC), porém somente um conjunto de estimativas de ganho que definem adistribuição de pressão de som entre os canais do mix original a cada banda de freqüênciasão suficientes. Além das estimativas de ganho, a informações secundárias inclui, depreferência, o número e locais dos alto-falantes do mix original em relação à posição deescuta, bem como o comprimento do quadro empregado. De acordo com uma modalidade,ao invés de transmitir as estimativas de ganho como uma parte da informações secundáriasa partir de um codificador, as estimativas de ganho são computadas no decodificador apartir dos indicadores de intercanal dos esquemas de BBC, por exemplo, a partir da ICLD.
O decodificador 300 compreende, ainda, uma unidade de janelas 306, emque o sinal monofônico é primeiramente dividido em quadros de tempo do comprimentode tempo empregado, e, então, os quadros são divididos em janelas adequadamente, porexemplo, janelas senoidais. Um comprimento de quadro adequado deve ser ajustado demodo que os quadros sejam longos o suficiente para transformação discreta de Fourier(DFT), enquanto é, simultaneamente, curto o suficiente para conduzir rápidas variaçõesno sinal. Experimentos mostraram que o comprimento de quadro adequado é de cerca de50 ms. Consequentemente, se a freqüência de amostra de 44,1 kHz (comumente usada emdiversos esquemas de codificação de áudio) é usada, então, o quadro pode compreender,por exemplo, 2048 amostras que resultam no comprimento de quadro de 46,4 ms. Aformação das janelas é feita, de preferência, de modo que janelas adjacentes estãosobrepostas por 50% para uniformizar as transições causadas por modificações espectrais(nível e atraso).
Com o propósito de computar de modo eficiente o sinal com domínio emfreqüência, o sinal é alimentado no banco de filtro 310, o qual divide o sinal em bandas defreqüência psico-acusticamente motivadas. De acordo com uma modalidade, o banco defiltro 310 é projetado de tal forma que está disposto para dividir o sinal em 32 bandas defreqüência, de acordo com a escala, comumente conhecida como largura de banda retan-gular equivalente (ERB), resultando em componentes de sinal xo,..., X3i nas ditas 32 ban-das de freqüência.
Como uma alternativa para os blocos 306, 308 e 310, o sinal com domíniotempo-freqüência que processa o sinal monofônico pode ser executado em uma unidadeQMF de banco-filtro que desempenha a decomposição do sinal. Uma pessoa versada natécnica se certifica que, além do processamento FFT ou um processamento de banco-filtrode QMF, qualquer outro método adequado para executar o processamento do domíniotempo-freqüência desejado, pode ser usado.
O decodificador 300 compreende um conjunto de HRTFs 312, 314 comoinformação pré-armazenada, da qual um par de esquerda-direita de HRTFs correspondentea cada direção do alto-falante, é selecionado. Em consideração à ilustração, dois conjuntosde HRTFs 312, 314 são mostrados na Figura 3, um para o sinal de lado esquerdo e umpara o sinal de lado direito, mas é evidente que na implantação prática, um conjunto deHRTFs será suficiente. Para ajustar os pares de HRTFs esquerdo-direita escolhidos paracorresponder a cada nível de som do canal de alto-falante, os valores de ganho G são pre-feri velmente estimados. Como foi mencionado acima, as estimativas de ganho podem serincluídas na informação secundário recebida a partir do codificador ou podem ser calcula-das no decodificador com base na informação secundário BBC. Consequentemente, umganho é estimado por cada canal do alto-falante como uma função de tempo e freqüência epara preservar o nível de ganho da mix original, os ganhos para cada canal de alto-falantesão ajustados preferivelmente de forma que a soma dos quadrados de cada valor dos ga-nhos seja igual a um, o que fornece a vantagem que, caso N seja o número dos canais aser virtualmente gerada, então apenas as estimativas de ganho de N-I precisam ser trans-mitidas a partir de um codificador e a perda de valor de ganho pode ser calculada com ba-se nos valores de ganho N-I. Uma pessoa versada na técnica, entretanto, se certifica que aoperação da invenção não precisa de ajuste da soma dos quadrados de cada valor de ganhopara ser igual a um, mas o codificador pode fazer a escala dos quadrados dos valores deganho de forma que a soma seja igual a um.Portanto, cada par esquerdo-direita dos filtros HRTF 312, 314 são ajustadosna proporção ditada pelo conjunto dos ganhos G, resultando na adição dos filtros HRTF312', 314'. Mais uma vez, nota-se que na prática, a escala das magnitudes do filtro origi-nal HRTF 312, 314 é meramente determinada, de acordo com os valores de ganho, porémem consideração à ilustração das modalidades, os conjuntos adicionais de HRTFs 312',314' são mostrados na Figura 3.
Para cada banda de freqüência, os componentes de sinal mono xo,..., X31 a-limentam cada par esquerdo-direita dos filtros HRTF 312', 314' ajustados. As saídas dofiltro para o sinal de lado esquerdo e para o sinal de lado direito são, então, somados emunidades de soma 316, 318 para ambos os lados dos canais binaurais. Os sinais binauraissomados são providos com janelas senoidais novamente e transformados mais uma vez nodomínio de tempo por um processo inverso FFT executado nas unidades IFFT 320, 322.No caso dos filtros de análise não somarem um ou suas respostas de fase não serem linea-res, um banco de filtro de síntese adequada é então, preferivelmente usado para evitar dis-torção nos sinais finais binaurais Br e Bl. Mais uma vez, se uma unidade banco-filtroQMF é usada na decomposição do sinal como foi descrito acima, as unidades IFFT 320,322 são preferencialmente substituídas pelas unidades de banco-filtro (IQMF inverso).
De acordo com uma modalidade, de maneira a intensificar a externalização,isto é, a localização fora da cabeça do sinal binaural e uma resposta de ambiente modera-do podem ser adicionadas ao sinal binaural. Com este propósito, o decodificador podecompreender uma unidade de reverberação, localizada, preferivelmente, entre as unidadesde soma 316, 318 e as unidades IFFT 320, 322. A resposta de ambiente moderado imita oefeito do ambiente em uma situação de escuta por alto-falante. O tempo de reverberaçãonecessário é, entretanto, curto o bastante para que a complexidade computacional não sejaconsideravelmente intensificada.
O decodificador binaural 300 descrito na Figura 3 também permite que umcaso especial de um decodificador estéreo redução de canais, no qual a imagem espacial éreduzido. A operação do decodificador 300 é emendada de forma que cada filtro HRTFajustável 312, 314, em que nas modalidades que tiveram suas escalas meramente determi-nadas, de acordo com os valores de ganho, foram substituídos por um ganho pré-determinado. Conseqüentemente, o sinal monofônico é processado através de filtros deHRTF constantes que consistem em um único ganho multiplicado pelo conjunto de valoresde ganho calculado com base na informação secundária. Como resultado, o áudio especialé misturado a um sinal estéreo. Esse caso especial fornece a vantagem que um sinal esté-reo pode ser criado a partir do sinal combinado, usando-se a informação secundária espa-cial sem que se tenha a necessidade de decodificar o áudio espacial, onde o procedimentoda decodificação do estéreo é mais simples que a síntese convencional BCC. A estruturado decodificador binaural 300 permanece, de qualquer forma, a mesma nas Figura 3, ape-nas os filtros ajustáveis de HRTF 312, 314 são substituídos por filtros dotados de ganhospré-determinados para pelo estéreo redução de canais.
Caso o decodificador binaural compreender filtros de HRTF, por exemplo,por uma configuração de áudio ambiente 5.1, e então no caso espacial para decodificaçãoda redução de canais estéreo, os ganhos constantes dos filtros de HRTF podem ser, porexemplo, como definidos na Tabela 1.
<table>table see original document page 13</column></row><table>
Tabela 1, filtros de HRTF para estéreo redução de canais.
A disposição de acordo com a invenção fornece vantagem. Uma vantagemainda maior é a simplicidade e a baixa complexidade computacional do processo de deco-dificação. O decodificador também é flexível no que diz respeito ao desempenho completodo aumento de canais binaural com base nos parâmetros espaciais e de decodificação. A-lém disso, com referência ao espaço, o sinal original é mantido na conversão. Quanto àinformação secundária, um conjunto da estimativa de ganho do mix original é suficiente.Do ponto de vista da transmissão ou armazenamento de áudio, a vantagem mais signifi-cante é obtida através da eficiência aprimorada ao se utilizar o estado compressivo inter-mediário fornecido na codificação de áudio paramétrica.
Um profissional versado na técnica se certifica que, desde que os HRTFssejam altamente individuais e obter a média é impossível, a re-espacialização pode apenasser alcançada pela medição do único conjunto HRTFs do próprio ouvinte. Consequente-mente, o uso de HRTFs inevitavelmente coloriza o sinal de forma que a qualidade do áu-dio processado não é equivalente a do original. De qualquer forma, uma vez que a medi-ção de cada HRTFs dos ouvintes seja uma opção inviável, o melhor resultado possível se-rá alcançado, quando tanto os conjuntos moldados quanto um conjunto medido por umacabeça artificial ou uma pessoa com uma cabeça de tamanho médio e de notável simetria,será usado.
Como foi determinado anteriormente, de acordo com uma modalidade, asestimativas de ganho podem ser incluídas na informação secundária recebida a partir docodificador. Consequentemente, um aspecto da invenção refere-se a um codificador parasinal de áudio especial de canal múltiplo que estima um ganho para cada canal de alto-falante como uma função de freqüência e tempo e inclui as estimativas de ganho na infor-mação secundário a serem transmitidas junto com um (ou mais) canal(is) combinado(s). Ocodificador pode ser, por exemplo, um codificador de BCC conhecido como tal, que estádisposto mais adiante, para calcular as estimativas de ganho, ambos que em adição e aoinvés disso, os indicadores de intercanal ICTD, ICLD e ICC descrevendo a imagem dosom de canal múltiplo. Portanto, ambas as somas do sinal e da informação secundário,que compreendem, ao menos, as estimativas de ganho, são transmitidas ao lado do recep-tor, usando-se preferivelmente um esquema adequado de codificação de áudio de baixa ta-xa de transferência adequada, transmitido ao lado receptor, usando preferencialmente umesquema adequado de codificação de áudio de baixa taxa de transferência para codificar osinal de soma.
De acordo com uma modalidade, se as estimativas de ganho são calculadas no codificador, o cálculo é executado por meio de uma comparação do nível de ganho decada canal individual com o nível de ganho acumulado do canal combinado; isto é, se de-nominarmos os níveis de ganho como X, os canais individuais do projeto do alto falanteoriginal como "m" e exemplos como "k" e então, para cada canal, a estimativa de ganhoé calculada como Λ.πι (k)| / |XsOMA(k)|. Consequentemente, a estimativa de ganho de-termina a magnitude do ganho proporcional de cada canal individual em comparação àmagnitude do ganho total de todos os canais.
De acordo com uma modalidade, se as estimativas de ganho são calculadasno codificador com base da informação secundário BCC, o cálculo pode ser efetuado, porexemplo, na base dos valores do Diferença de Níveis do Canal Interno ICLD. Consequen-temente, se N é o número de "alto-falantes" a serem virtualmente gerados, então as equa-ções N-1, que compreende N-I desconhecidas variam, são primeiramente compostas combase dos valores ICLD. Portanto, a soma dos quadrados de cada equação dos alto-falantesé igual a 1, de forma que a estimativa de ganho de um canal individual pode ser resolvidae com base da estimativa de ganho resolvida, o resto das estimativas de ganho podem serresolvidas a partir das equações N-I.
Por exemplo, se o número de canais gerado virtualmente for 5, (N=5), asequações N-I podem ser formadas como a seguir: L2=L1+ICLD1, L3=L1+ICLD2,L4=L1+ICLD3 e L5=L1+ICLD4. Daí em diante, a soma dos quadrados é igual a 1:Ll2 + (LI+ICLDl)2 + (L1+ICLD2)2 + (L1+ICLD3)2 + (L1+ICLD4)2 = 1. O valorde Ll pode então, ser resolvido e com base em LI, o resto dos valores dos níveis de ga-nho L2 - L5 podem ser resolvidos.
De modo a simplificar, os exemplos anteriores são descritos de tal formaque os canais de entrada (M) são submetidos à redução de canais no codificador para for-mar um único canal combinado (por exemplo, mono). De qualquer forma, as modalidadessão igualmente aplicáveis em implantações alternativas, onde os múltiplos canais de entra-da (M) são reduzidos para formar dois ou mais canais separados (S), dependendo da apli-cação particular de processamento de áudio. Se a redução de canais gera múltiplos canaiscombinados, os dados de canal combinados podem ser transmitidos usando técnicas con-vencionais de transmissão de áudio. Por exemplo, se dois canais combinados são gerados,técnicas convencionais de transmissão estéreo serão empregadas. Nesse caso, um decodi-ficador BCC pode extrair e usar os códigos BCC para sintetizar um sinal binaural a partirdos dois canais combinados.De acordo com uma modalidade, o número (N) dos "alto-falantes" geradosvirtualmente no sinal binaural sintetizado podem ser diferentes (maiores ou menores) queo número dos canais de entrada (M), dependendo da aplicação particular. Por exemplo, oáudio de entrada pode corresponder a 7,1 som ambiente e a saída binaural de áudio podeser sintetizada para corresponder a 5,1 de som ambiente ou vice versa.
As modalidades acima podem ser generalizadas de al forma que as modali-dades da invenção permitem a conversão M de canais de áudio em canais de áudio combi-nados S e um ou mais conjuntos correspondentes de informação secundário, onde M>S, ea geração de canais de saída de áudio e os conjuntos correspondentes de informações late-rais, onde N>S, e N pode ser igual ou diferente de M.
Já que a taxa de transferência é requerida para a transmissão do canal com-binado e a informação secundário necessária é muito lenta, a invenção é especialmentebem aplicável nos sistemas, onde a largura de banda disponível é um recurso escasso, tan-to quanto em sistemas de comunicação. Consequentemente, as modalidades são especial-mente disponíveis em terminais móveis ou em outros dispositivos portáteis são especial-mente aplicáveis em terminais móveis ou em outros dispositivos portáteis tipicamente des-provido dos alto-falantes de alta qualidade, onde as características de som ambiente de ca-nais múltiplos podem ser introduzidos através de fones de ouvido, ouvindo o sinal binauralde áudio de acordo com as modalidades. Um campo adicional de aplicações viáveis incluiserviços de teleconferência, em que os participantes de teleconferência podem ser facil-mente diferenciados, dando a impressão aos ouvintes, que os participantes da chamada deteleconferência estão em diferentes locais da sala de conferências.
A Figura 4 ilustra um estrutura simplificada do dispositivo de processamen-to de dados (TE), onde o sistema binaural de decodificação,o de acordo com a invençãopode ser implantada. O dispositivo de processamento (TE) pode ser, por exemplo, umterminal móvel, um dispositivo PDA ou um computador pessoal (PC). A unidade de pro-cessamento de dados (TE) compreende meios I/O (I/O), uma unidade central de proces-samento (CPU) e memória (MEM). A memória (MEM) compreende i,a porção ROM dememória somente leitura e uma porção regravável, tal qual uma memória de acesso alea-tório RAM e memória FLASH. A informação usada para comunicar-se com partes exter-nas diferentes, por exemplo, um CD-ROM, outros dispositivos e o usuário, é transmitidoatravés dos meios I/O (I/O) a para/a partir de, a unidade de processamento central (CPU).
Se o dispositivo de processamento de dados for implantado como uma estação móvel, issoinclui tipicamente um transceptor Tx/Rx, que se comunica com uma rede sem fio, tipica-mente com uma estação de transceptor base (BTS) através de uma antena. O equipamentoda Interface do usuário (UI) normalmente inclui um visor, um teclado, um microfone emeios de conexão para fones de ouvido. O dispositivo de processamento de dados podecompreender adicionalmente, meios de conexão MMC, tal qual uma entrada de forma pa-drão, para vários módulos de hardware ou como circuitos integrados IC, que podem for-necer várias aplicações a serem executadas no dispositivo de processamento de dados.
Consequentemente, o sistema de decodificação binaural de acordo com ainvenção, pode ser executado em uma unidade central de processamento CPU ou em umprocessador de sinais digitais exclusivo DSP (um processador de código paramétrico) dodispositivo de processamento de dados em que o dispositivo de processamento de dadosrecebe um sinal de áudio parametricamente codificado que compreende ao menos um sinalcombinado de vários canais de áudio e um ou mais conjuntos de informações laterais cor-respondentes, descrevendo uma imagem sinal de áudio de canal múltiplo. O sinal de áudioparametricamente codificado pode ser recebido a partir de um meio de memória, por e-xemplo, um CD-ROM ou a partir de uma rede sem fio através da antena e o transceptorTx/Rx. O dispositivo de processamento de dados, compreende adicionalmente um bancode filtro adequado e um conjunto de filtros de função de transferência relacionados à cabe-ça pré-determinados, em que o dispositivo de processamento de dados transforma o sinalcombinado no domínio da freqüência e aplica uns pares esquerdo-direita adequados filtrosde função de transferência relacionados à cabeça em proporção de sinal combinado deter-minado pelo conjunto correspondente da informação secundário para sintetizar um sinal deáudio binaural, que é então reproduzido via fones de ouvido.
Da mesma forma, o sistema de codificação de acordo com a invenção podetambém ser executada na unidade central de processamento ou em um processador de si-nais digitais exclusivo DSP do dispositivo de processamento de dados, em que o dispositi-vo de processamento de dados gera um sinal de áudio codificado parametricamente, com-preendendo, ao menos, um sinal combinado de uma pluralidade de canais de áudio e oumais conjuntos de informações laterais incluindo estimativas de ganho para os sinais decanal do áudio de canal múltiplo.
As funcionalidades da invenção podem ser implantadas em um dispositivoterminal, tal qual uma estação móvel, também como um programa de computador que,quando executado em uma unidade de processamento central CPU ou em um processadorde sinais digitais DSP, afeta o dispositivo terminal para implantar os procedimentos da in-venção. As funções do programa de computador SW podem ser distribuídos em várioscomponentes de programas separados, comunicando-se entre si. O software do computa-dor pode ser armazenado em quaisquer meios de memória, como por exemplo, o disco rí-gido de um PC ou um disco de CD-ROM, do qual, ele pode ser carregado na memória doterminal móvel. O software do computador pode também ser carregado através de umarede, por exemplo, usando uma pilha de protocolo TCP/IP.
Também é possível que se use as soluções de hardware ou uma combinaçãode soluções de hardware e software para implantar os meios inventivos. Consequentemen-te, o produto de computador pode ser, ao menos parcialmente implantados como uma so-lução de hardware, por exemplo como os circuito ASIC ou FPGA, em um módulo dehardware compreendendo os meios de conexão para conectar um dispositivo de módulo aum dispositivo eletrônico ou como um ou mais circuitos integrados IC, o módulo dehardware ou os ICs incluem adicionalmente vários meios para desempenhar as tarefas decódigo de programa, os ditos meios sendo implantados como hardware ou software..
Fica evidente que a presente invenção não se limita somente às modalidadesapresentadas acima, porém elas podem ser modificadas com o escopo das reivindicaçõesanexadas.
Claims (33)
1. Método para a sintetização de um sinal de áudio binaural, sendo que ométodo é caracterizado pelo fato de que compreende:inserir um sinal de áudio parametricamente codificado que compreende, aomenos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjun-tos de informações secundárias correspondentes que descrevem uma imagem sonora decanal múltiplo, eaplicar um conjunto pré-determinado de filtros de função de transferênciarelacionados à cabeça a, ao menos, um sinal combinado em proporção determinada pelomencionado conjunto de informações secundárias correspondente para sintetizar um sinalde áudio binaural.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato deque compreende adicionalmente:aplicar, a partir do conjunto pré-determinado de filtros de função de trans-ferência relacionados à cabeça, um par esquerdo-direito de filtros de função de transferên-cia relacionados à cabeça que correspondem a cada direção do alto-falante do áudio de ca-nal múltiplo original.
3. Método, de acordo com a reivindicação 1 ou 2, caracterizado pelo fatode que:o dito conjunto de informações secundárias compreende um conjunto de es-timativas de ganho para os sinais de canal do áudio de canal múltiplo que descrevem a i-magem de som original.
4. Método, de acordo com a reivindicação 3, caracterizado pelo fato deque:o dito conjunto de informações secundárias compreende, adicionalmente, onúmero e locais de alto-falantes da imagem de som de canal múltiplo original em relação auma posição de escuta e um comprimento de quadro empregado.
5. Método, de acordo com a reivindicação 1 ou 2, caracterizado pelo fatode que:o dito conjunto de informações secundárias compreende indicadores de in-tercanal usados em um esquema de Binaural Cue Coding (BCC), como Diferença deTempo de Intercanal (ICTD), Diferença de Nível de Intercanal (ICLD) e Coerência de In-tercanal (ICC), o método compreende adicionalmente:calcular um conjunto de estimativas de ganho do áudio de canal múltiplo o-riginal com base em, ao menos, um dos ditos indicadores de intercanal do esquema deBCC.
6. Método, de acordo com quaisquer das reivindicações de 3 a 5, caracte-rizado pelo fato de que compreende adicionalmente:determinar o conjunto de estimativas de ganho do áudio de canal múltiplooriginal como uma função de tempo e freqüência, eajustar os ganhos para cada canal de alto-falante de modo que a soma dosquadrados de cada valor de ganho seja igual a um.
7. Método, de acordo com quaisquer das reivindicações precedentes, carac-terizado pelo fato de que compreende adicionalmente:dividir, ao menos, um sinal combinado em quadros de tempo de um com-primento de quadro empregado, tais quadros são, então, submetidos à formação de jane-las; etransformar, ao menos, um sinal combinado em domínio de freqüência an-terior à aplicação dos filtros de função de transferência relacionados à cabeça.
8. Método, de acordo com a reivindicação 7, caracterizado pelo fato deque compreende adicionalmente:dividir, ao menos, um sinal combinado no domínio de freqüência em umapluralidade de bandas de freqüência psico-acusticamente motivadas anterior à aplicaçãodos filtros de função de transferência relacionados à cabeça.
9. Método, de acordo com a reivindicação 8, caracterizado pelo fato deque compreende adicionalmente:dividir, ao menos, um sinal combinado no domínio de freqüência em 32bandas de freqüência que estão de acordo com a escala de Largura de Banda RetangularEquivalente (ERB).
10. Método, de acordo com quaisquer das reivindicações de 7 a 9, caracte-rizado pelo fato de que:a etapa de transformação de, ao menos, um sinal combinado no domínio defreqüência é realizada usando-se filtros QMF para decompor , ao menos, um sinal combi-nado.
11. Método de acordo com quaisquer das reivindicações de 8 a 10, caracte-rizado pelo fato de que compreende adicionalmente:somar saídas dos filtros de função de transferência relacionados à cabeçapara cada uma das ditas bandas de freqüência para um sinal de lado esquerdo e um sinalde lado direito separadamente; etransformar o sinal de lado esquerdo somado e o sinal de lado direito soma-do no domínio de tempo para criar um componente de lado esquerdo e um componente delado direito de um sinal de áudio binaural.
12. Método para sintetização de um sinal de áudio estéreo, sendo que o mé-todo é caracterizado pelo fato de compreende:inserir um sinal de áudio parametricamente codificado que compreende, aomenos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjun-tos de informações secundárias correspondente que descrevem uma imagem sonora de ca-nal múltiplo; eaplicar um conjunto de filtros de redução de canais dotados de valores deganho pré-determinados a, ao menos, um sinal combinado em proporção determinada pelodito conjunto de informações secundárias correspondente para sintetizar um sinal de áudioestéreo.
13. Decodificador de áudio paramétrico, caracterizado pelo fato de quecompreende:um processador de código paramétrico para processamento de um sinal deáudio parametricamente codificado que compreende, ao menos, um sinal combinado deuma pluralidade de canais de áudio e um ou mais conjuntos de informações secundáriascorrespondentes que descrevem uma imagem sonora de canal múltiplo; eum sintetizador para aplicar um conjunto de filtros de função de transferên-cia relacionados à cabeça pré-determinados a, ao menos, i, sinal combinado em proporçãodeterminada pelo dito conjunto de informações secundárias correspondente para sintetizarum sinal de áudio binaural.
14. Decodificador, de acordo com a reivindicação 13, caracterizado pelofato de que:o dito sintetizador é disposto para aplicar, a partir do conjunto de filtros defunção de transferência relacionados à cabeça pré-determinados, um par esquerdo-direitode filtros de função de transferência relacionados à cabeça correspondentes a cada direçãode alto-falante do áudio de canal múltiplo original.
15. Decodificador, de acordo com a reivindicação 13 ou 14, caracterizadopelo fato de que:o dito conjunto de informações secundárias compreende um conjunto de es-timativas de ganho para sinais de canal do áudio de canais múltiplos que descrevem a ima-gem sonora original.
16. Decodificador, de acordo com a reivindicação de 13 ou 14, caracteri-zado pelo fato de que:o dito conjunto de informações secundárias compreende indicadores de in-tercanal usados em um esquema de Binaural Cue Coding (BCC), como Diferença deTempo de Intercanal (ICTD), Diferença de Nível de Intercanal (ICLD) e Coerência de In-ter- Canal (ICC), o decodificador é organizado para:calcular um conjunto de estimativas de ganho do áudio de canal múltiplo o-riginal com base em, ao menos, tais indicadores de intercanal do esquema de BCC.
17. Decodificador, de acordo com quaisquer das reivindicações de 13 a 16,caracterizado pelo fato de que compreende adicionalmente:um meio para dividir, ao menos, um sinal combinado em quadros de tempode um comprimento de quadro empregado,um meio para formar as janelas dos quadros; eum meio para transformar, ao menos, um sinal combinado no domínio defreqüência anterior à aplicação dos filtros de função de transferência relacionados à cabeça.
18. Decodificador, de acordo com a reivindicação 17, caracterizado pelofato de que compreende adicionalmente:um meio para dividir, ao menos, um sinal combinado no domínio de fre-qüência em uma pluralidade de bandas de freqüência motivadas psico-acusticamente ante-rior à aplicação dos filtros de função de transferência relacionados à cabeça.
19. Decodificador, de acordo com a reivindicação 18, caracterizado pelofato de que:o dito meio para dividir, ao menos, um sinal combinado na freqüência dedomínio que compreende um banco de filtro disposto para dividir, ao menos, um sinalcombinado em 32 bandas de freqüência que estão de acordo com a escala de Largura deBanda Retangular Equivalente (ERB).
20. Decodificador, de acordo com as reivindicações de 17 a 19, caracteri-zado pelo fato de que:o meio para transformar, ao menos, um sinal combinado no domínio defreqüência compreende filtros de QMF dispostos para decompor, ao menos, um sinalcombinado.
21. Decodifícador, de acordo com quaisquer das reivindicações precedentesde 17 a 20, caracterizado pelo fato de que compreende adicionalmente:uma unidade de soma para somar saídas dos filtros de função de transferên-cia relacionados à cabeça para cada uma das ditas bandas de freqüência para um sinal delado esquerdo e um sinal de lado direito separadamente; euma unidade de transformação para transformar o sinal de lado esquerdosomado e o sinal de lado direito somado em domínio de tempo para criar um componentede lado direito de um sinal de áudio binaural.
22. Decodifícador de áudio paramétrico, caracterizado pelo fato de quecompreende:um processador de código paramétrico para processamento de um sinal deáudio parametricamente codificado que compreende, ao menos, um sinal combinado deuma pluralidade de canais de áudio e um ou mais conjuntos de informações secundáriascorrespondentes que descrevem uma imagem sonora de canal múltiplo; eum sintetizador para aplicar um conjunto de filtros de redução de canais do-tados de valores de ganho pré-determinados para, ao menos, um sinal combinado em pro-porção determinada pelo dito conjunto de informação correspondente para sintetizar umsinal de áudio estéreo.
23. Produto de programa de computador, armazenado em uma mídia legívelpor computador e executável em um dispositivo de processamento de dados, para proces-sar um sinal de áudio parametricamente codificado que compreende, ao menos, um sinalcombinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informaçãocorrespondentes que descrevem uma imagem sonora de canal múltiplo, sendo que o pro-duto de programa de computador é caracterizado pelo fato de que compreende:uma sessão de código de programa de computador para controlar a trans-formação de, ao menos, um sinal combinado no domínio de freqüência; euma sessão de código de programa de computador para aplicar um conjuntode filtros de função de transferência relacionados à cabeça pré-determinados para, ao me-nos, um sinal combinado em proporção determinada pelo dito conjunto de informações se-cundárias correspondente para sintetizar um sinal de áudio binaural.
24. Aparelho para a sintetização de um sinal de áudio binaural, sendo que oaparelho é caracterizado pelo fato de compreende:um meio para inserir um sinal de áudio parametricamente codificado quecompreende, ao menos, um sinal combinado de uma pluralidade de canais de áudio e umou mais conjuntos de informações secundárias correspondentes que descrevem uma ima-gem sonora de canal múltiplo;um meio para aplicar um conjunto pré-determinado de filtros de função detransferência relacionados à cabeça para, ao menos, um sinal combinado em proporçãodeterminada pelo dito conjunto de informações secundárias correspondente para sintetizarum sinal de áudio binaural; eum meio para fornecer o sinal de áudio binaural no meio de reprodução dáudio.
25. Aparelho, de acordo com a reivindicação 24, caracterizado pelo fatode que o dito aparelho é um terminal móvel, um dispositivo de PDA ou um computadorpessoal.
26. Método para gerar um sinal de áudio parametricamente codificado, sen-do que o método é caracterizado pelo fato de que compreende:inserir um sinal de áudio de canal múltiplo que compreende uma pluralidadede canais de áudio;gerar, ao menos, um sinal combinado da pluralidade de canais de áudio; egerar um ou mais conjuntos de informações secundárias correspondentesque incluem estimativas de ganho para a pluralidade de canais de áudio.
27. Método, de acordo com a reivindicação 26, caracterizado pelo fato deque compreende adicionalmente:calcular as estimativas de ganho comparando-se o nível de ganho de cadacanal individual para o nível de ganho acumulado do sinal combinado.
28. Método, de acordo com a reivindicação 26 ou 27, caracterizado pelofato de que:o dito conjunto de informações secundárias compreende, ainda, o número elocais de alto-falantes de uma imagem sonora de canal múltiplo original em relação à po-sição de escuta e um comprimento de quadro empregado.
29. Método, de acordo com quaisquer das reivindicações de 26 a 28, carac-terizado pelo fato de que:o dito conjunto de informações secundárias compreende, ainda, indicadoresde intercanal usados em um esquema de Binaural Cue Coding (BCC), como Diferença deTempo de Intercanal (ICTD), Diferença de Nível de Intercanal (ICLD) e Coerência de In-tercanal (ICC).
30. Método, de acordo com quaisquer das reivindicações de 26 a 29, carac-terizado pelo fato de que compreende adicionalmente:determinar o conjunto de estimativas de ganho do áudio de canal múltiplooriginal como uma função de tempo e freqüência; eajustar os ganhos para cada canal de alto-falante de modo que a soma dosquadrados de cada valor de ganho seja igual a um.
31. Codificador de áudio paramétrico para gerar um sinal de áudio parame-tricamente codificado, sendo que o codificador é caracterizado pelo fato de compreende:um meio para inserir um sinal de áudio de canal múltiplo que compreendeuma pluralidade de canais de áudio;um meio para gerar, ao menos, um sinal combinado da pluralidade de ca-nais de áudio; eum meio para gerar um ou mais conjuntos de informações secundárias cor-respondentes que incluem estimativas de ganho para a pluralidade de canais de áudio.
32. Codificador, de acordo com a reivindicação 31, caracterizado pelo fatode que compreende adicionalmente:um meio para calcular as estimativas de ganho comparando-se o nível deganho acumulado do sinal combinado.
33. Produto de programa de computador, armazenado em uma mídia legívelpor computador e executável em um dispositivo de processamento de dados, para gerarum sinal de áudio parametricamente codificado, sendo que o produto de programa decomputador é caracterizado pelo fato de compreende:uma sessão de código de programa de computador para inserir um sinal deáudio de canal múltiplo que compreende uma pluralidade de canais de áudio;uma sessão de código de programa de computador para gerar, ao menos,um sinal combinado da pluralidade de canais de áudio; euma sessão de código de programa de computador para gerar um ou maisconjuntos de informações secundárias correspondentes que incluem estimativas de ganhopara a pluralidade de canais de áudio.
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/FI2006/050014 WO2007080211A1 (en) | 2006-01-09 | 2006-01-09 | Decoding of binaural audio signals |
| FIPCT/FI06/050014 | 2006-01-09 | ||
| US11/334,041 US20070160218A1 (en) | 2006-01-09 | 2006-01-17 | Decoding of binaural audio signals |
| US11/334,041 | 2006-01-17 | ||
| PCT/FI2007/050004 WO2007080224A1 (en) | 2006-01-09 | 2007-01-04 | Decoding of binaural audio signals |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| BRPI0706306A2 true BRPI0706306A2 (pt) | 2011-03-22 |
Family
ID=38232768
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| BRPI0706306-7A BRPI0706306A2 (pt) | 2006-01-09 | 2007-01-04 | método e aparelho para a sintetização de um sinal de áudio binaural; método;.método para sintetização de um sinal de áudio estéreo; decodificador de áudio paramétrico; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para processar um sinal de aúdio parametricamente codificado que compreende, ao menos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informação correspondentes que descrevem uma imagem sonora de canal múltiplo; método para gerar um sinal de áudio parametricamente codificado; codificador de áudio paramétrico para gerar um sinal áudio parametricamente codificado; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para gerar um sinal de áudio parametricamente codificado |
| BRPI0722425-7A2A BRPI0722425A2 (pt) | 2006-01-09 | 2007-01-04 | Método para sintetizar um sinal de áudio binaural; decodificador de áudio paramétrico; produto para programa de computador, armazenado em meio legível por computador e operável em um dispositivo de processamento de dados, destinado a processar um sinal de áudio parametricamente codificado, compreendendo pelo menos um sinal combinado de diversoso canais de áudio, e um ou mais conjuntos correspondentes de informações auxiliares descrevendo uma imagem sonora de canal múltiplo; aparelho para sintetizar um sinal de áudio binaural |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| BRPI0722425-7A2A BRPI0722425A2 (pt) | 2006-01-09 | 2007-01-04 | Método para sintetizar um sinal de áudio binaural; decodificador de áudio paramétrico; produto para programa de computador, armazenado em meio legível por computador e operável em um dispositivo de processamento de dados, destinado a processar um sinal de áudio parametricamente codificado, compreendendo pelo menos um sinal combinado de diversoso canais de áudio, e um ou mais conjuntos correspondentes de informações auxiliares descrevendo uma imagem sonora de canal múltiplo; aparelho para sintetizar um sinal de áudio binaural |
Country Status (11)
| Country | Link |
|---|---|
| US (2) | US20070160218A1 (pt) |
| EP (2) | EP1971979A4 (pt) |
| JP (2) | JP2009522895A (pt) |
| KR (3) | KR20110002491A (pt) |
| CN (2) | CN101366081A (pt) |
| AU (2) | AU2007204332A1 (pt) |
| BR (2) | BRPI0706306A2 (pt) |
| CA (2) | CA2635024A1 (pt) |
| RU (2) | RU2409911C2 (pt) |
| TW (2) | TW200746871A (pt) |
| WO (1) | WO2007080211A1 (pt) |
Families Citing this family (94)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4988716B2 (ja) | 2005-05-26 | 2012-08-01 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号のデコーディング方法及び装置 |
| WO2006126844A2 (en) * | 2005-05-26 | 2006-11-30 | Lg Electronics Inc. | Method and apparatus for decoding an audio signal |
| KR100803212B1 (ko) | 2006-01-11 | 2008-02-14 | 삼성전자주식회사 | 스케일러블 채널 복호화 방법 및 장치 |
| WO2007083952A1 (en) * | 2006-01-19 | 2007-07-26 | Lg Electronics Inc. | Method and apparatus for processing a media signal |
| KR100902899B1 (ko) * | 2006-02-07 | 2009-06-15 | 엘지전자 주식회사 | 부호화/복호화 장치 및 방법 |
| CN101390443B (zh) | 2006-02-21 | 2010-12-01 | 皇家飞利浦电子股份有限公司 | 音频编码和解码 |
| KR100773560B1 (ko) * | 2006-03-06 | 2007-11-05 | 삼성전자주식회사 | 스테레오 신호 생성 방법 및 장치 |
| KR100754220B1 (ko) * | 2006-03-07 | 2007-09-03 | 삼성전자주식회사 | Mpeg 서라운드를 위한 바이노럴 디코더 및 그 디코딩방법 |
| US8392176B2 (en) | 2006-04-10 | 2013-03-05 | Qualcomm Incorporated | Processing of excitation in audio coding and decoding |
| JP2009539132A (ja) * | 2006-05-30 | 2009-11-12 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | オーディオ信号の線形予測符号化 |
| US8027479B2 (en) | 2006-06-02 | 2011-09-27 | Coding Technologies Ab | Binaural multi-channel decoder in the context of non-energy conserving upmix rules |
| FR2903562A1 (fr) * | 2006-07-07 | 2008-01-11 | France Telecom | Spatialisation binaurale de donnees sonores encodees en compression. |
| USRE50721E1 (en) * | 2006-07-07 | 2025-12-30 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Concept for combining multiple parametrically coded audio sources |
| WO2008009175A1 (en) * | 2006-07-14 | 2008-01-24 | Anyka (Guangzhou) Software Technologiy Co., Ltd. | Method and system for multi-channel audio encoding and decoding with backward compatibility based on maximum entropy rule |
| KR100763920B1 (ko) * | 2006-08-09 | 2007-10-05 | 삼성전자주식회사 | 멀티채널 신호를 모노 또는 스테레오 신호로 압축한 입력신호를 2채널의 바이노럴 신호로 복호화하는 방법 및 장치 |
| FR2906099A1 (fr) * | 2006-09-20 | 2008-03-21 | France Telecom | Procede de transfert d'un flux audio entre plusieurs terminaux |
| EP2118888A4 (en) * | 2007-01-05 | 2010-04-21 | Lg Electronics Inc | METHOD AND DEVICE FOR PROCESSING AN AUDIO SIGNAL |
| KR101379263B1 (ko) * | 2007-01-12 | 2014-03-28 | 삼성전자주식회사 | 대역폭 확장 복호화 방법 및 장치 |
| US9197977B2 (en) * | 2007-03-01 | 2015-11-24 | Genaudio, Inc. | Audio spatialization and environment simulation |
| US8295494B2 (en) * | 2007-08-13 | 2012-10-23 | Lg Electronics Inc. | Enhancing audio with remixing capability |
| US8428957B2 (en) | 2007-08-24 | 2013-04-23 | Qualcomm Incorporated | Spectral noise shaping in audio coding based on spectral dynamics in frequency sub-bands |
| US8126172B2 (en) * | 2007-12-06 | 2012-02-28 | Harman International Industries, Incorporated | Spatial processing stereo system |
| JP5243554B2 (ja) * | 2008-01-01 | 2013-07-24 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号の処理方法及び装置 |
| US8654994B2 (en) * | 2008-01-01 | 2014-02-18 | Lg Electronics Inc. | Method and an apparatus for processing an audio signal |
| US9025775B2 (en) * | 2008-07-01 | 2015-05-05 | Nokia Corporation | Apparatus and method for adjusting spatial cue information of a multichannel audio signal |
| KR101230691B1 (ko) * | 2008-07-10 | 2013-02-07 | 한국전자통신연구원 | 공간정보 기반의 다객체 오디오 부호화에서의 오디오 객체 편집 방법 및 그 장치 |
| CN102138176B (zh) * | 2008-07-11 | 2013-11-06 | 日本电气株式会社 | 信号分析装置、信号控制装置及其方法 |
| EP3002750B1 (en) | 2008-07-11 | 2017-11-08 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder and decoder for encoding and decoding audio samples |
| KR101614160B1 (ko) * | 2008-07-16 | 2016-04-20 | 한국전자통신연구원 | 포스트 다운믹스 신호를 지원하는 다객체 오디오 부호화 장치 및 복호화 장치 |
| US8315396B2 (en) | 2008-07-17 | 2012-11-20 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for generating audio output signals using object based metadata |
| US8798776B2 (en) * | 2008-09-30 | 2014-08-05 | Dolby International Ab | Transcoding of audio metadata |
| EP2175670A1 (en) * | 2008-10-07 | 2010-04-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Binaural rendering of a multi-channel audio signal |
| KR101499785B1 (ko) | 2008-10-23 | 2015-03-09 | 삼성전자주식회사 | 모바일 디바이스를 위한 오디오 처리 장치 및 그 방법 |
| WO2010058931A2 (en) * | 2008-11-14 | 2010-05-27 | Lg Electronics Inc. | A method and an apparatus for processing a signal |
| US20100137030A1 (en) * | 2008-12-02 | 2010-06-03 | Motorola, Inc. | Filtering a list of audible items |
| RU2011130551A (ru) * | 2008-12-22 | 2013-01-27 | Конинклейке Филипс Электроникс Н.В. | Формирование выходного сигнала посредством обработки сенд-эффектов |
| KR101496760B1 (ko) * | 2008-12-29 | 2015-02-27 | 삼성전자주식회사 | 서라운드 사운드 가상화 방법 및 장치 |
| CN105225667B (zh) | 2009-03-17 | 2019-04-05 | 杜比国际公司 | 编码器系统、解码器系统、编码方法和解码方法 |
| CN101556799B (zh) * | 2009-05-14 | 2013-08-28 | 华为技术有限公司 | 一种音频解码方法和音频解码器 |
| CN102804806A (zh) * | 2009-06-23 | 2012-11-28 | 诺基亚公司 | 用于处理音频信号的方法及装置 |
| US20100324915A1 (en) * | 2009-06-23 | 2010-12-23 | Electronic And Telecommunications Research Institute | Encoding and decoding apparatuses for high quality multi-channel audio codec |
| US8434006B2 (en) * | 2009-07-31 | 2013-04-30 | Echostar Technologies L.L.C. | Systems and methods for adjusting volume of combined audio channels |
| ES2531013T3 (es) | 2009-10-20 | 2015-03-10 | Fraunhofer Ges Forschung | Codificador de audio, decodificador de audio, método para codificar información de audio, método para decodificar información de audio y programa de computación que usa la detección de un grupo de valores espectrales previamente decodificados |
| ES3051141T3 (en) * | 2009-10-21 | 2025-12-26 | Dolby Int Ab | Oversampling in a combined transposer filter bank |
| BR122021008581B1 (pt) * | 2010-01-12 | 2022-08-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Codificador de áudio, decodificador de áudio, método de codificação e informação de áudio, e método de decodificação de uma informação de áudio que utiliza uma tabela hash que descreve tanto valores de estado significativos como limites de intervalo |
| US20130166307A1 (en) * | 2010-09-22 | 2013-06-27 | Dolby Laboratories Licensing Corporation | Efficient Implementation of Phase Shift Filtering for Decorrelation and Other Applications in an Audio Coding System |
| WO2012093352A1 (en) * | 2011-01-05 | 2012-07-12 | Koninklijke Philips Electronics N.V. | An audio system and method of operation therefor |
| BR112013020324B8 (pt) | 2011-02-14 | 2022-02-08 | Fraunhofer Ges Forschung | Aparelho e método para supressão de erro em fala unificada de baixo atraso e codificação de áudio |
| MY165853A (en) | 2011-02-14 | 2018-05-18 | Fraunhofer Ges Forschung | Linear prediction based coding scheme using spectral domain noise shaping |
| WO2012110448A1 (en) | 2011-02-14 | 2012-08-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for coding a portion of an audio signal using a transient detection and a quality result |
| KR101699898B1 (ko) * | 2011-02-14 | 2017-01-25 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | 스펙트럼 영역에서 디코딩된 오디오 신호를 처리하기 위한 방법 및 장치 |
| EP2676267B1 (en) | 2011-02-14 | 2017-07-19 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Encoding and decoding of pulse positions of tracks of an audio signal |
| TWI564882B (zh) | 2011-02-14 | 2017-01-01 | 弗勞恩霍夫爾協會 | 利用重疊變換之資訊信號表示技術(一) |
| US20140056450A1 (en) * | 2012-08-22 | 2014-02-27 | Able Planet Inc. | Apparatus and method for psychoacoustic balancing of sound to accommodate for asymmetrical hearing loss |
| WO2014111765A1 (en) | 2013-01-15 | 2014-07-24 | Koninklijke Philips N.V. | Binaural audio processing |
| WO2014111829A1 (en) * | 2013-01-17 | 2014-07-24 | Koninklijke Philips N.V. | Binaural audio processing |
| DK2981963T3 (en) | 2013-04-05 | 2017-02-27 | Dolby Laboratories Licensing Corp | COMPRESSION APPARATUS AND PROCEDURE TO REDUCE QUANTIZATION NOISE USING ADVANCED SPECTRAL EXTENSION |
| WO2014171791A1 (ko) | 2013-04-19 | 2014-10-23 | 한국전자통신연구원 | 다채널 오디오 신호 처리 장치 및 방법 |
| KR102150955B1 (ko) | 2013-04-19 | 2020-09-02 | 한국전자통신연구원 | 다채널 오디오 신호 처리 장치 및 방법 |
| BR112015030672B1 (pt) | 2013-06-10 | 2021-02-23 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V | aparelho e método de codificação, processamento e decodificação de envelope de sinal de áudio por divisão do envelope de sinal de áudio empregando codificação e quantização de distribuição |
| SG11201510162WA (en) | 2013-06-10 | 2016-01-28 | Fraunhofer Ges Forschung | Apparatus and method for audio signal envelope encoding, processing and decoding by modelling a cumulative sum representation employing distribution quantization and coding |
| US9319819B2 (en) | 2013-07-25 | 2016-04-19 | Etri | Binaural rendering method and apparatus for decoding multi channel audio |
| EP3293734B1 (en) | 2013-09-12 | 2019-05-15 | Dolby International AB | Decoding of multichannel audio content |
| TWI774136B (zh) * | 2013-09-12 | 2022-08-11 | 瑞典商杜比國際公司 | 多聲道音訊系統中之解碼方法、解碼裝置、包含用於執行解碼方法的指令之非暫態電腦可讀取的媒體之電腦程式產品、包含解碼裝置的音訊系統 |
| KR102159990B1 (ko) | 2013-09-17 | 2020-09-25 | 주식회사 윌러스표준기술연구소 | 멀티미디어 신호 처리 방법 및 장치 |
| US9143878B2 (en) * | 2013-10-09 | 2015-09-22 | Voyetra Turtle Beach, Inc. | Method and system for headset with automatic source detection and volume control |
| US10580417B2 (en) | 2013-10-22 | 2020-03-03 | Industry-Academic Cooperation Foundation, Yonsei University | Method and apparatus for binaural rendering audio signal using variable order filtering in frequency domain |
| EP4421617A3 (en) | 2013-10-31 | 2024-11-06 | Dolby Laboratories Licensing Corporation | Binaural rendering for headphones using metadata processing |
| CN104681034A (zh) | 2013-11-27 | 2015-06-03 | 杜比实验室特许公司 | 音频信号处理 |
| KR101627657B1 (ko) | 2013-12-23 | 2016-06-07 | 주식회사 윌러스표준기술연구소 | 오디오 신호의 필터 생성 방법 및 이를 위한 파라메터화 장치 |
| KR102356012B1 (ko) | 2013-12-27 | 2022-01-27 | 소니그룹주식회사 | 복호화 장치 및 방법, 및 프로그램 |
| CN107835483B (zh) | 2014-01-03 | 2020-07-28 | 杜比实验室特许公司 | 响应于多通道音频通过使用至少一个反馈延迟网络产生双耳音频 |
| CN104768121A (zh) | 2014-01-03 | 2015-07-08 | 杜比实验室特许公司 | 响应于多通道音频通过使用至少一个反馈延迟网络产生双耳音频 |
| KR101782917B1 (ko) | 2014-03-19 | 2017-09-28 | 주식회사 윌러스표준기술연구소 | 오디오 신호 처리 방법 및 장치 |
| KR102428066B1 (ko) * | 2014-04-02 | 2022-08-02 | 주식회사 윌러스표준기술연구소 | 오디오 신호 처리 방법 및 장치 |
| KR101856540B1 (ko) | 2014-04-02 | 2018-05-11 | 주식회사 윌러스표준기술연구소 | 오디오 신호 처리 방법 및 장치 |
| US9860666B2 (en) | 2015-06-18 | 2018-01-02 | Nokia Technologies Oy | Binaural audio reproduction |
| WO2017035281A2 (en) | 2015-08-25 | 2017-03-02 | Dolby International Ab | Audio encoding and decoding using presentation transform parameters |
| JP6797187B2 (ja) | 2015-08-25 | 2020-12-09 | ドルビー ラボラトリーズ ライセンシング コーポレイション | オーディオ・デコーダおよびデコード方法 |
| ES2818562T3 (es) * | 2015-08-25 | 2021-04-13 | Dolby Laboratories Licensing Corp | Descodificador de audio y procedimiento de descodificación |
| US10152977B2 (en) * | 2015-11-20 | 2018-12-11 | Qualcomm Incorporated | Encoding of multiple audio signals |
| CN105611481B (zh) * | 2015-12-30 | 2018-04-17 | 北京时代拓灵科技有限公司 | 一种基于空间声的人机交互方法和系统 |
| GB2572650A (en) * | 2018-04-06 | 2019-10-09 | Nokia Technologies Oy | Spatial audio parameters and associated spatial audio playback |
| EP3550561A1 (en) | 2018-04-06 | 2019-10-09 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Downmixer, audio encoder, method and computer program applying a phase value to a magnitude value |
| ES2966686T3 (es) | 2018-04-27 | 2024-05-29 | Sherpa Europe S L | Asistente digital |
| EP3588495A1 (en) | 2018-06-22 | 2020-01-01 | FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. | Multichannel audio coding |
| CN110956973A (zh) * | 2018-09-27 | 2020-04-03 | 深圳市冠旭电子股份有限公司 | 一种回声消除方法、装置及智能终端 |
| GB2580360A (en) * | 2019-01-04 | 2020-07-22 | Nokia Technologies Oy | An audio capturing arrangement |
| MX2021015314A (es) | 2019-06-14 | 2022-02-03 | Fraunhofer Ges Forschung | Codificacion y decodificacion de parametros. |
| WO2020253941A1 (en) | 2019-06-17 | 2020-12-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder with a signal-dependent number and precision control, audio decoder, and related methods and computer programs |
| US11212631B2 (en) * | 2019-09-16 | 2021-12-28 | Gaudio Lab, Inc. | Method for generating binaural signals from stereo signals using upmixing binauralization, and apparatus therefor |
| JP7286876B2 (ja) | 2019-09-23 | 2023-06-05 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 変換パラメータによるオーディオ符号化/復号化 |
| CN111031467A (zh) * | 2019-12-27 | 2020-04-17 | 中航华东光电(上海)有限公司 | 一种hrir前后方位增强方法 |
| AT523644B1 (de) * | 2020-12-01 | 2021-10-15 | Atmoky Gmbh | Verfahren für die Erzeugung eines Konvertierungsfilters für ein Konvertieren eines multidimensionalen Ausgangs-Audiosignal in ein zweidimensionales Hör-Audiosignal |
Family Cites Families (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5173944A (en) * | 1992-01-29 | 1992-12-22 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Head related transfer function pseudo-stereophony |
| DE4236989C2 (de) * | 1992-11-02 | 1994-11-17 | Fraunhofer Ges Forschung | Verfahren zur Übertragung und/oder Speicherung digitaler Signale mehrerer Kanäle |
| JP3286869B2 (ja) * | 1993-02-15 | 2002-05-27 | 三菱電機株式会社 | 内部電源電位発生回路 |
| US5521981A (en) * | 1994-01-06 | 1996-05-28 | Gehring; Louis S. | Sound positioner |
| JP3498375B2 (ja) * | 1994-07-20 | 2004-02-16 | ソニー株式会社 | ディジタル・オーディオ信号記録装置 |
| US6072877A (en) * | 1994-09-09 | 2000-06-06 | Aureal Semiconductor, Inc. | Three-dimensional virtual audio display employing reduced complexity imaging filters |
| JP4627880B2 (ja) * | 1997-09-16 | 2011-02-09 | ドルビー ラボラトリーズ ライセンシング コーポレイション | リスナーの周囲にある音源の空間的ひろがり感を増強するためのステレオヘッドホンデバイス内でのフィルタ効果の利用 |
| GB9726338D0 (en) * | 1997-12-13 | 1998-02-11 | Central Research Lab Ltd | A method of processing an audio signal |
| US6442277B1 (en) * | 1998-12-22 | 2002-08-27 | Texas Instruments Incorporated | Method and apparatus for loudspeaker presentation for positional 3D sound |
| RU2144222C1 (ru) * | 1998-12-30 | 2000-01-10 | Гусихин Артур Владимирович | Способ сжатия звуковой информации и система для его реализации |
| US20030035553A1 (en) * | 2001-08-10 | 2003-02-20 | Frank Baumgarte | Backwards-compatible perceptual coding of spatial cues |
| US7644003B2 (en) * | 2001-05-04 | 2010-01-05 | Agere Systems Inc. | Cue-based audio coding/decoding |
| US7583805B2 (en) * | 2004-02-12 | 2009-09-01 | Agere Systems Inc. | Late reverberation-based synthesis of auditory scenes |
| US7006636B2 (en) * | 2002-05-24 | 2006-02-28 | Agere Systems Inc. | Coherence-based audio coding and synthesis |
| US7116787B2 (en) * | 2001-05-04 | 2006-10-03 | Agere Systems Inc. | Perceptual synthesis of auditory scenes |
| EP1500084B1 (en) * | 2002-04-22 | 2008-01-23 | Koninklijke Philips Electronics N.V. | Parametric representation of spatial audio |
| US7039204B2 (en) * | 2002-06-24 | 2006-05-02 | Agere Systems Inc. | Equalization for audio mixing |
| WO2004008806A1 (en) * | 2002-07-16 | 2004-01-22 | Koninklijke Philips Electronics N.V. | Audio coding |
| ES2259158T3 (es) * | 2002-09-19 | 2006-09-16 | Matsushita Electric Industrial Co., Ltd. | Metodo y aparato decodificador audio. |
| FI118247B (fi) * | 2003-02-26 | 2007-08-31 | Fraunhofer Ges Forschung | Menetelmä luonnollisen tai modifioidun tilavaikutelman aikaansaamiseksi monikanavakuuntelussa |
| SE0301273D0 (sv) * | 2003-04-30 | 2003-04-30 | Coding Technologies Sweden Ab | Advanced processing based on a complex-exponential-modulated filterbank and adaptive time signalling methods |
| US7447317B2 (en) * | 2003-10-02 | 2008-11-04 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V | Compatible multi-channel coding/decoding by weighting the downmix channel |
| US7949141B2 (en) * | 2003-11-12 | 2011-05-24 | Dolby Laboratories Licensing Corporation | Processing audio signals with head related transfer function filters and a reverberator |
| SE527670C2 (sv) * | 2003-12-19 | 2006-05-09 | Ericsson Telefon Ab L M | Naturtrogenhetsoptimerad kodning med variabel ramlängd |
| US7394903B2 (en) * | 2004-01-20 | 2008-07-01 | Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. | Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal |
-
2006
- 2006-01-09 WO PCT/FI2006/050014 patent/WO2007080211A1/en not_active Ceased
- 2006-01-17 US US11/334,041 patent/US20070160218A1/en not_active Abandoned
- 2006-02-13 US US11/354,211 patent/US20070160219A1/en not_active Abandoned
-
2007
- 2007-01-04 CA CA002635024A patent/CA2635024A1/en not_active Abandoned
- 2007-01-04 BR BRPI0706306-7A patent/BRPI0706306A2/pt not_active IP Right Cessation
- 2007-01-04 AU AU2007204332A patent/AU2007204332A1/en not_active Abandoned
- 2007-01-04 BR BRPI0722425-7A2A patent/BRPI0722425A2/pt not_active IP Right Cessation
- 2007-01-04 AU AU2007204333A patent/AU2007204333A1/en not_active Abandoned
- 2007-01-04 CN CNA2007800020681A patent/CN101366081A/zh active Pending
- 2007-01-04 CN CNA2007800020893A patent/CN101366321A/zh active Pending
- 2007-01-04 EP EP07700270A patent/EP1971979A4/en not_active Withdrawn
- 2007-01-04 JP JP2008549032A patent/JP2009522895A/ja active Pending
- 2007-01-04 EP EP07700269A patent/EP1972180A4/en not_active Withdrawn
- 2007-01-04 KR KR1020107026739A patent/KR20110002491A/ko not_active Ceased
- 2007-01-04 KR KR1020087016569A patent/KR20080074223A/ko not_active Ceased
- 2007-01-04 RU RU2008127062/09A patent/RU2409911C2/ru not_active IP Right Cessation
- 2007-01-04 KR KR1020087016638A patent/KR20080078882A/ko not_active Ceased
- 2007-01-04 RU RU2008126699/09A patent/RU2409912C9/ru not_active IP Right Cessation
- 2007-01-04 JP JP2008549031A patent/JP2009522894A/ja active Pending
- 2007-01-04 CA CA002635985A patent/CA2635985A1/en not_active Abandoned
- 2007-01-08 TW TW096100650A patent/TW200746871A/zh unknown
- 2007-01-08 TW TW096100651A patent/TW200727729A/zh unknown
Also Published As
| Publication number | Publication date |
|---|---|
| US20070160219A1 (en) | 2007-07-12 |
| KR20080078882A (ko) | 2008-08-28 |
| WO2007080211A1 (en) | 2007-07-19 |
| US20070160218A1 (en) | 2007-07-12 |
| RU2409911C2 (ru) | 2011-01-20 |
| AU2007204332A1 (en) | 2007-07-19 |
| RU2008126699A (ru) | 2010-02-20 |
| EP1972180A4 (en) | 2011-06-29 |
| JP2009522895A (ja) | 2009-06-11 |
| KR20080074223A (ko) | 2008-08-12 |
| CN101366321A (zh) | 2009-02-11 |
| CN101366081A (zh) | 2009-02-11 |
| RU2409912C9 (ru) | 2011-06-10 |
| KR20110002491A (ko) | 2011-01-07 |
| TW200746871A (en) | 2007-12-16 |
| BRPI0722425A2 (pt) | 2014-10-29 |
| RU2409912C2 (ru) | 2011-01-20 |
| AU2007204333A1 (en) | 2007-07-19 |
| EP1972180A1 (en) | 2008-09-24 |
| EP1971979A4 (en) | 2011-12-28 |
| RU2008127062A (ru) | 2010-02-20 |
| EP1971979A1 (en) | 2008-09-24 |
| CA2635024A1 (en) | 2007-07-19 |
| CA2635985A1 (en) | 2007-07-19 |
| JP2009522894A (ja) | 2009-06-11 |
| TW200727729A (en) | 2007-07-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| BRPI0706306A2 (pt) | método e aparelho para a sintetização de um sinal de áudio binaural; método;.método para sintetização de um sinal de áudio estéreo; decodificador de áudio paramétrico; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para processar um sinal de aúdio parametricamente codificado que compreende, ao menos, um sinal combinado de uma pluralidade de canais de áudio e um ou mais conjuntos de informação correspondentes que descrevem uma imagem sonora de canal múltiplo; método para gerar um sinal de áudio parametricamente codificado; codificador de áudio paramétrico para gerar um sinal áudio parametricamente codificado; produto de programa de computador, armazenado em uma mìdia legìvel por computador e executável em um dispositivo de processamento de dados, para gerar um sinal de áudio parametricamente codificado | |
| JP4944902B2 (ja) | バイノーラルオーディオ信号の復号制御 | |
| TWI415111B (zh) | 空間解碼器單元、空間解碼器裝置、音訊系統、消費型電子裝置、產生一對雙耳輸出聲道之方法及電腦可讀媒體 | |
| KR101358700B1 (ko) | 오디오 인코딩 및 디코딩 | |
| ES2461601T3 (es) | Procedimiento y aparato para generar una señal de audio binaural | |
| RU2407226C2 (ru) | Генерация пространственных сигналов понижающего микширования из параметрических представлений мультиканальных сигналов | |
| BRPI0608036B1 (pt) | Dispositivo e método para a geração de um sinal estéreo codificado de uma peça de áudio ou fluxo de dados de áudio | |
| WO2007080225A1 (en) | Decoding of binaural audio signals | |
| JP5483813B2 (ja) | マルチチャネル音声音響信号符号化装置および方法、並びにマルチチャネル音声音響信号復号装置および方法 | |
| KR20080078907A (ko) | 양 귀 오디오 신호들의 복호화 제어 | |
| WO2007080224A1 (en) | Decoding of binaural audio signals | |
| JP2007104601A (ja) | マルチチャンネル符号化における頭部伝達関数をサポートするための装置 | |
| MX2008008829A (en) | Decoding of binaural audio signals | |
| MX2008008424A (es) | Decodificacion de señales de audio binaurales | |
| HK1126617A (en) | Decoding of binaural audio signals | |
| HK1129535A (en) | Decoding of binaural audio signals |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| B08F | Application dismissed because of non-payment of annual fees [chapter 8.6 patent gazette] |
Free format text: REFERENTE A 5A ANUIDADE. |
|
| B08K | Patent lapsed as no evidence of payment of the annual fee has been furnished to inpi [chapter 8.11 patent gazette] |
Free format text: REFERENTE AO DESPACHO 8.6 PUBLICADO NA RPI 2161 DE 05/06/2012. |