BRPI0711104A2

BRPI0711104A2 - métodos e aparelhos para codificar e decodificar sinais de áudio com base em objeto

Info

Publication number: BRPI0711104A2
Application number: BRPI0711104-5A
Authority: BR
Inventors: Sung Yong Yoon; Hee Suk Pang; Hyun Kook Lee; Dong Soo Kim; Jae Hyun Lim
Original assignee: Lg Eletronics Inc
Priority date: 2006-09-29
Filing date: 2007-10-01
Publication date: 2011-08-23
Also published as: KR20090013177A; AU2007300813B2; KR20090026121A; KR101069266B1; US20080140426A1; CA2646045C; KR100987457B1; CA2645910A1; WO2008039041A1; EP2071563A4; EP2070080A1; JP2010505142A; AU2007300810A1; CA2645908A1; JP5238706B2; US9792918B2; JP4787362B2; AU2007300812A1; US20090164221A1; US7987096B2

Abstract

MéTODOS E APARELHOS PARA CODIFICAR E DECODIFICAR SINAIS DE áUDIO COM BASE EM OBJETO São fornecidos um método e um aparelho de codificação de áudio e um método e um aparelho de decodificação de áudio. O método de decodificação de sinal áudio inclui extrair um sinal de mistura descendente e informação complementar com base em objeto de um sinal de áudio; gerar um sinal de mistura descendente modificado com base no sinal de mistura descendente e na informação extraída, que é extraída da informação complementar com base em objeto; gerar informação complementar com base em canal com base na informação complementar com base em objeto e nos dados de controle para renderizar o sinal de mistura descendente; e gerar um sinal de áudio multicanais com base no sinal de mistura descendente modificado e na informação complementar com base em canal.

Description

"MÉTODOS E APARELHOS PARA CODIFICAR E DECODIFICAR SINAIS DEÁUDIO COM BASE EM OBJETO"

CAMPO TÉCNICO

A presente invenção diz respeito a um método e aparelho de codificação de áudio ea um método e aparelho de decodificação de áudio, nos quais imagens podem serlocalizadas em qualquer posição desejada para cada sinal de áudio de objeto.

ANTECEDENTES DA INVENÇÃO

No geral, em técnicas de codificação e de decodificação de áudio multicanais, érealizada conversão para menos canais de inúmeros sinais de canal de um sinal multicanaisem menos sinais de canal, informação complementar considerando os sinais de canaloriginais é transmitida, e um sinal multicanais com tantos canais quanto o sinal multicanaisoriginal é restaurado.

Basicamente, técnicas de codificação e de decodificação de áudio com base emobjeto são similares às técnicas de codificação e de decodificação de áudio multicanais emtermos de fazer conversão para menos canais de diversas fontes de som em menos sinaisde fonte de som e de transmitir informação complementar considerando as fontes de somoriginais. Entretanto, em técnicas de codificação e de decodificação de áudio com base emobjeto, sinais de objetos, que são elementos básicos (por exemplo, o som de uminstrumento musical ou de uma voz humana) de um sinal de canal, são tratados da mesmaforma que os sinais de canal em técnicas de codificação e de decodificação de áudiomulticanais e, assim, podem ser codificados.

Em outras palavras, em técnicas de codificação e de decodificação de áudio combase em objeto, cada sinal de objeto é considerado a entidade a ser codificada. Nesteaspecto, técnicas de codificação e de decodificação de áudio com base em objeto sãodiferentes das técnicas de codificação e de decodificação de áudio multicanais nas quaisuma operação de codificação de áudio multicanais é realizada simplesmente com base eminformação intercanais, independente do número de elementos de um sinal de canal a sercodificado.

DIVULGAÇÃO DA INVENÇÃO

PROBLEMA TÉCNICO

A presente invenção fornece um método e um aparelho de codificação de áudio eum método e um aparelho de decodificação de áudio nos quais sinais de áudio podem sercodificados ou decodificados para que imagens de som possam ser localizadas em qualquerposição desejada para cada sinal de áudio de objeto.

SOLUÇÃO TÉCNICA

De acordo com um aspecto da presente invenção, é fornecido um método dedecodificação de áudio que inclui extrair um sinal convertido para menos canais ecomplementar com base em objeto de um sinal de áudio; gerar um sinal de misturadescendente modificado com base no sinal de mistura descendente e na informaçãoextraída, que é extraída da informação complementar com base em objeto; gerar informaçãocomplementar com base em canal com base na informação complementar com base emobjeto e nos dados de controle para renderizar o sinal de mistura descendente; e gerar umsinal de áudio multicanais com base no sinal de mistura descendente modificado e nainformação complementar com base em canal.

De acordo com um outro aspecto da presente invenção, é fornecido um aparelho dedecodificação de áudio que inclui um demultiplexador que extrai um sinal de misturadescendente e informação complementar com base em objeto de um sinal de áudio; umdecodificador de objeto que gera um sinal de mistura descendente modificado com base nosinal de mistura descendente e em informação pré-determinada e que gera informaçãocomplementar com base em canal com base na informação complementar com base emobjeto e em dados de controle para renderizar o sinal de mistura descendente, a informaçãopré-determinada sendo extraída da informação complementar com base em objeto; e umdecodificador multicanais que gera um sinal de áudio multicanais com base no sinal demistura descendente modificado e na informação complementar com base em canal.

De acordo com um outro aspecto da presente invenção, é fornecida uma mídia degravação legível por computador com um programa de computador nela gravado paraexecutar um método de decodificação de sinal de áudio, o método de decodificação de sinalde áudio incluindo extrair um sinal de mistura descendente e informação complementar combase em objeto de um sinal de áudio; gerar um sinal de mistura descendente modificadocom base no sinal de mistura descendente e em informação pré-determinada que é extraídada informação complementar com base em objeto; gerar informação complementar combase em canal com base na informação complementar com base em objeto e em dados decontrole para renderizar o sinal de mistura descendente; e gerar um sinal de áudiomulticanais com base no sinal de mistura descendente modificado e na informaçãocomplementar com base em canal.

De acordo com um outro aspecto da presente invenção, é fornecida uma mídia degravação legível por computador com um programa de computador nela gravado paraexecutar um método de decodificação de áudio, o método de codificação de áudio incluindogerar um sinal de mistura descendente pela realização de mistura descendente de um sinalde áudio de objeto; gerar informação complementar com base em objeto pela extração deinformação que considera o sinal de áudio de objeto e inserindo informação pré-determinadapara modificar o sinal de mistura descendente na informação complementar com base emobjeto; e gerar um fluxo contínuo de bits pela combinação da informação complementar combase em objeto com a informação pré-determinada inserida e no sinal de misturadescendente.

EFEITOS VANTAJOSOS

O método de decodificação de sinal de áudio inclui extrair um sinal de misturadescendente e uma informação complementar com base em objeto de um sinal de áudio;

gerar um sinal de mistura descendente modificado com base no sinal de misturadescendente e em informação extraída, que é extraída da informação complementar combase em objeto; gerar informação complementar com base em canal com base nainformação complementar com base em objeto e em dados de controle para renderizar osinal de mistura descendente; e gerar um sinal de áudio multicanais com base no sinal demistura descendente modificado e na informação complementar com base em canal.

DESCRIÇÃO RESUMIDA DOS DESENHOS

A presente invenção será mais completamente entendida a partir da descriçãodetalhada dada aqui a seguir e dos desenhos anexos, que são dados para ilustraçãosomente, e, assim, não são Iimitantes da presente invenção, e em que:

a figura 1 é um diagrama de blocos de um sistema típico de codificação /decodificação de áudio com base em objeto;

a figura 2 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma primeira modalidade da presente invenção;

a figura 3 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma segunda modalidade da presente invenção;

a figura 4 é um gráfico para explicar a influência de uma diferença de amplitude ede uma diferença de tempo, que são independentes entre si, na localização das imagens dosom;

a figura 5 é um gráfico de funções que considera a correspondência entrediferenças de amplitude e diferenças de tempo que são exigidas para localizar imagens desom em uma posição pré-determinada;

a figura 6 ilustra o formato de dados de controle que incluem informação harmônica;

a figura 7 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma terceira modalidade da presente invenção;

a figura 8 é um diagrama de blocos de um módulo de ganhos de misturadescendente artística (ADG) que pode ser usado no aparelho de decodificação de áudioilustrado na figura 7;

a figura 9 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma quarta modalidade da presente invenção;

a figura 10 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma quinta modalidade da presente invenção;

a figura 11 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma sexta modalidade da presente invenção;

a figura 12 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma sétima modalidade da presente invenção;

a figura 13 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma oitava modalidade da presente invenção;

a figura 14 é um diagrama para explicar a aplicação de informação tridimensional(3D) em um quadro pelo aparelho de decodificação de áudio ilustrado na figura 13;

a figura 15 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma nona modalidade da presente invenção;

a figura 16 é um diagrama de blocos de um aparelho de decodificação de áudio deacordo com uma décima modalidade da presente invenção;

as figuras 17 até 19 são diagramas para explicar um método de decodificação deáudio de acordo com uma modalidade da presente invenção; e

a figura 20 é um diagrama de blocos de um aparelho de codificação de áudio deacordo com uma modalidade da presente invenção.

MELHOR MODO PARA REALIZAR A INVENÇÃO

A presente invenção será descrita com detalhes a seguir em relação aos desenhosanexos nos quais modalidades exemplares da invenção são mostradas.

Um método e um aparelho de codificação de áudio e um método e um aparelho dedecodificação de áudio de acordo com a presente invenção podem ser aplicados emoperações de processamento de áudio com base em objeto, mas a presente invenção não érestrita a isto. Em outras palavras, o método e aparelho de codificação de áudio e o métodoe aparelho de decodificação de áudio podem ser aplicados a várias operações deprocessamento de sinal diferentes das operações de processamento de áudio com base emobjeto.

A figura 1 é um diagrama de blocos de um sistema típico de codificação /decodificação de áudio com base em objeto. No geral, sinais de áudio inseridos em umaparelho de codificação de áudio com base em objeto não correspondem a canais de umsinal multicanais, mas são sinais de objetos independentes. Neste aspecto, um aparelho decodificação de áudio com base em objeto é diferenciado de um aparelho de codificação deáudio multicanais no qual sinais de canal de um sinal multicanais são inseridos.

Por exemplo, sinais de canal, tais como sinal de canal frontal esquerdo e sinal decanal frontal direito de um sinal de 5.1 canais podem ser inseridos em um sinal de áudiomulticanais, enquanto que sinal de áudio de objeto, tais como uma voz humana ou o som deum instrumento musical (por exemplo, o som de um violino ou de um piano), que sãoentidades menores do que sinais de canal, pode ser inserido em um aparelho de codificaçãode áudio com base em objeto.Em relação à figura 1, o sistema de codificação / decodificação de áudio com baseem objeto inclui um aparelho de codificação de áudio com base em objeto e um aparelho dedecodificação de áudio com base em objeto. O aparelho de codificação de áudio com baseem objeto inclui um codificador de objeto 100, e o aparelho de decodificação de áudio combase em objeto inclui um decodificador de objeto 111 e um renderizador 113.

O codificador de objeto 100 recebe N sinais de áudio de objeto e gera um sinal demistura descendente com base em objeto com um ou mais canais e informaçãocomplementar incluindo inúmeras partes de informação extraídas dos N sinais de áudio deobjeto, tais como diferença de energia, diferença de fase e valor de correlação. Ainformação complementar e o sinal de mistura descendente com base em objeto sãoincorporados em um único fluxo contínuo de bits, e o fluxo contínuo de bits é transmitido aoaparelho de decodificação com base em objeto.

A informação complementar pode incluir um indicador que indica se deve-serealizar codificação de áudio com base em canal ou codificação de áudio com base emobjeto e, assim, pode-se determinar se deve ser realizada codificação de áudio com baseem canal ou codificação de áudio com base em objeto com base no indicador da informaçãocomplementar. A informação complementar também pode incluir informação de envelope,informação de agrupamento, informação de período em silêncio, e informação de atrasoconsiderando sinais de objetos. A informação complementar também pode incluirinformação de diferenças de nível de objeto, informação de correlação cruzada interobjetos,informação de ganho de mistura descendente, informação de diferença de nível de canal demistura descendente e informação de energia de objeto absoluta.

O decodificador de objeto 111 recebe o sinal de mistura descendente com base emobjeto e a informação complementar do aparelho de codificação de áudio com base emobjeto e restaura sinais de objetos com propriedades similares daquelas dos N sinais deáudio de objeto com base no sinal de mistura descendente com base em objeto e nainformação complementar. Os sinais de objetos gerados pelo decodificador de objeto 111ainda não foram alocados em nenhuma posição em um espaço multicanais. Assim, orenderizador 113 aloca cada um dos sinais de objetos gerados pelo decodificador de objeto111 em uma posição pré-determinada em um espaço multicanais e determina os níveis dossinais de objetos para que os sinais de objetos possam ser reproduzidos a partir derespectivas posições correspondentes designadas pelo renderizador 113 com respectivosníveis correspondentes determinados pelo renderizador 113. Informação de controleconsiderando cada um dos sinais de objetos gerados pelo decodificador de objeto 111 podevariar durante o tempo e, assim, posições espaciais e os níveis dos sinais de objetosgerados pelo decodificador de objeto 111 podem variar de acordo com a informação decontrole.A figura 2 é um diagrama de blocos de um aparelho de decodificação de áudio 120de acordo com uma primeira modalidade da presente invenção. Em relação à figura 2, oaparelho de decodificação de áudio 120 inclui um decodificador de objeto 121, umrenderizador 123 e um conversor de parâmetro 125. O aparelho de decodificação de áudio120 também pode incluir um demultiplexador (não mostrado) que extrai um sinal de misturadescendente e informação complementar de um fluxo contínuo de bits nele inserido, e istose aplicará a todos os aparelhos de decodificação de áudio de acordo com outrasmodalidades da presente invenção.

O decodificador de objeto 121 gera inúmeros sinais de objetos com base em umsinal de mistura descendente e em informação complementar modificada fornecida peloconversor de parâmetro 125. O renderizador 123 aloca cada um dos sinais de objetosgerados pelo decodificador de objeto 121 em uma posição pré-determinada em um espaçomulticanais e determina os níveis dos sinais de objetos gerados pelo decodificador de objeto121 de acordo com a informação de controle. O conversor de parâmetro 125 gera ainformação complementar modificada pela combinação da informação complementar e dainformação de controle. Então, o conversor de parâmetro 125 transmite a informaçãocomplementar modificada ao decodificador de objeto 121.

O decodificador de objeto 121 pode ser capaz de realizar decodificação adaptativapela análise da informação de controle na informação complementar modificada.

Por exemplo, se a informação de controle indicar que um primeiro sinal de objeto eum segundo sinal de objeto estão alocados na mesma posição em um espaço multicanais etêm o mesmo nível, um aparelho de decodificação de áudio típico pode decodificar osprimeiro e segundo sinais de objetos separadamente e, então, arranjá-los em um espaçomulticanais por meio de uma operação de conversão de canais / renderização.

Por outro lado, o decodificador de objeto 121 do aparelho de decodificação deáudio 120 aprende a partir da informação de controle na informação complementarmodificada que os primeiro e segundo sinais de objetos estão alocados na mesma posiçãoem um espaço multicanais e têm o mesmo nível se eles eram uma única fonte de som.Dessa maneira, o decodificador de objeto 121 decodifica os primeiro e segundo sinais deobjetos tratando-os como uma única fonte de som sem decodificá-los separadamente. Emdecorrência disto, a complexidade da decodificação diminui. Além do mais, em função deuma diminuição no número de fontes de som que precisam ser processadas, acomplexidade da conversão de canais / renderização também diminui.

O aparelho de decodificação de áudio 120 pode ser efetivamente usado na situaçãoem que o número de sinais de objetos é maior do que o número de canais de saída emvirtude de ser altamente provável que uma pluralidade de sinais de objetos esteja alocadana mesma posição espacial.Alternativamente, o aparelho de decodificação de áudio 120 pode ser usado nasituação em que o primeiro sinal de objeto e o segundo sinal de objeto são alocados namesma posição em um espaço multicanais, mas têm diferentes níveis. Neste caso, oaparelho de decodificação de áudio 120 decodifica os primeiro e segundo sinais de objetospelo tratamento dos primeiro e segundo sinais de objetos com um único sinal, em vez dedecodificar os primeiro e segundo sinais de objetos separadamente e transmitir os primeiroe segundo sinais de objetos decodificados ao renderizador 133. Mais especificamente, odecodificador de objeto 121 pode obter informação considerando a diferença entre os níveisdos primeiro e segundo sinais de objetos da informação de controle na informaçãocomplementar modificada, e pode decodificar os primeiro e segundo sinais de objetos combase na informação obtida. Em decorrência disto, mesmo se os primeiro e segundo sinaisde objetos tiverem níveis diferentes, os primeiro e segundo sinais de objetos podem serdecodificados como se eles fossem uma única fonte de som.

Ainda alternativamente, o decodificador de objeto 121 pode ajustar os níveis dossinais de objetos gerados pelo decodificador de objeto 121 de acordo com a informação decontrole. Então, o decodificador de objeto 121 pode decodificar os sinais de objetos cujosníveis são ajustados. Dessa maneira, o renderizador 123 não precisa ajustar os níveis dossinais de objetos decodificados fornecidos pelo decodificador de objeto 121, massimplesmente arranja os sinais de objetos decodificados fornecidos pelo decodificador deobjeto 121 em um espaço multicanais. Em resumo, já que o decodificador de objeto 121ajusta os níveis dos sinais de objetos gerados pelo decodificador de objeto 121 de acordocom a informação de controle, o renderizador 123 pode arranjar prontamente os sinais deobjetos gerados pelo decodificador de objeto 121 em um espaço multicanais sem anecessidade de ajustar adicionalmente os níveis dos sinais de objetos gerados pelodecodificador de objeto 121. Portanto, é possível reduzir a complexidade de conversão decanais / renderização.

De acordo com a modalidade da figura 2, o decodificador de objeto do aparelho dedecodificação de áudio 120 pode realizar adaptativamente uma operação de decodificaçãopor meio da análise da informação de controle, desse modo, reduzindo a complexidade dadecodificação e a complexidade da conversão de canais / renderização. Uma combinaçãodos métodos supradescritos realizados pelo aparelho de decodificação de áudio 120 podeser usada.

A figura 3 é um diagrama de blocos de um aparelho de decodificação de áudio 130de acordo com uma segunda modalidade da presente invenção. Em relação à figura 3, oaparelho de decodificação de áudio 130 inclui um decodificador de objeto 131 e umrenderizador 133. O aparelho de decodificação de áudio 130 é caracterizado por fornecerinformação complementar não somente ao decodificador de objeto 131, mas também aorenderizador 133.

O aparelho de decodificação de áudio 130 pode realizar efetivamente umaoperação de decodificação mesmo quando há um sinal de objeto correspondente a umperíodo em silêncio. Por exemplo, os segundo até quarto sinais de objetos podemcorresponder a um período de reprodução de música durante o qual um instrumento musicalé tocado, e um primeiro sinal de objeto pode corresponder a um período em silêncio duranteo qual um acompanhamento é tocado. Neste caso, informação que indica qual de umapluralidade de sinais de objetos corresponde a um período em silêncio pode ser incluída nainformação complementar, e a informação complementar pode ser fornecida ao renderizador133, bem como ao decodificador de objeto 131.

O decodificador de objeto 131 pode minimizar a complexidade da decodificaçãopela não decodificação de um sinal de objeto correspondente a um período em silêncio. Odecodificador de objeto 131 ajusta um sinal de objeto correspondente a um valor de 0 etransmite o nível do sinal de objeto ao renderizador 133. No geral, sinais de objetos com umvalor de 0 são tratados da mesma forma que os sinais de objetos com um valor diferente de0 e, assim, são sujeitos a uma operação de conversão de canais / renderização.

Por outro lado, o aparelho de decodificação de áudio 130 transmite informaçãocomplementar que inclui informação que indica qual de uma pluralidade de sinais de objetoscorresponde a um período em silêncio ao renderizador 133 e, assim, pode impedir que umsinal de objeto correspondente a um período em silêncio seja sujeito a uma operação deconversão de canais/renderização realizada pelo renderizador 133. Portanto, o aparelho dedecodificação de áudio 130 pode impedir um aumento desnecessário na complexidade daconversão de canais/renderização.

O renderizador 133 pode usar informação de parâmetro de conversão de canaisque está incluída na informação de controle para localizar uma imagem de som de cadasinal de objeto em uma cena estéreo. A informação de parâmetro de conversão de canaispode incluir informação de amplitude somente ou tanto informação de amplitude quantoinformação de tempo. A informação de parâmetro de conversão de canais afeta nãosomente a localização das imagens de som estéreo, mas também a percepçãopsicoacústica de uma qualidade espacial de som por um usuário.

Por exemplo, mediante comparação de duas imagens de som que são geradasusando um método de variação de tempo e um método de variação de amplitude,respectivamente, e reproduzidas no mesmo local usando um alto-falante estéreo de 2canais, percebe-se que o método de variação de amplitude pode contribuir para uma precisalocalização das imagens de som, e que o método de variação de tempo pode fornecer sonsnaturais com uma profunda sensação de espaço. Assim, se o renderizador 133 usarsomente o método de variação de amplitude para arranjar sinais de objetos em um espaçomulticanais, o renderizador 133 pode ser capaz de localizar precisamente cada imagem desom, mas pode não ser capaz de fornecer uma sensação de som tão profunda quantodurante o uso do método de variação de tempo. Algumas vezes, usuários podem preferiruma precisa localização das imagens de som em relação a uma profunda sensação do somou vice-versa, de acordo com o tipo das fontes de som.

As figuras 4(a) e 4(b) explicam a influência da intensidade (diferença de amplitude)e de uma diferença de tempo na localização das imagens de som realizada na reproduçãodos sinais com um alto-falante estéreo de 2 canais. Em relação às figuras 4(a) e 4(b), umaimagem de som pode ser localizada em um ângulo pré-determinado de acordo com umadiferença de amplitude e uma diferença de tempo que são independentes entre si. Porexemplo, uma diferença de amplitude de cerca de 8 dB ou uma diferença de tempo de cercade 0,5 ms, que é equivalente à diferença de amplitude de 8 dB, podem ser usadas a fim delocalizar uma imagem de som em um ângulo de 20 Portanto, mesmo se somente umadiferença de amplitude for fornecida como informação de parâmetro de conversão decanais, é possível obter vários sons com diferentes propriedades pela conversão dadiferença de amplitude em uma diferença de tempo, que é equivalente à diferença deamplitude, durante a localização das imagens de som.

A figura 5 ilustra funções que consideram a correspondência entre as diferenças deamplitude e as diferenças de tempo que são exigidas para localizar imagens de som emângulos de 10° 20 ° e 30°. A função ilustrada na figura 5 pode ser obtida com base nasfiguras 4(a) e 4(b). Em relação à figura 5, várias combinações de diferença de amplitude -diferença de tempo podem ser fornecidas para localização de uma imagem de som em umaposição pré-determinada. Por exemplo, considere que uma diferença de amplitude de 8 dBé fornecida como informação de parâmetro de conversão de canais a fim de localizar umaimagem de som em um ângulo de 20 De acordo com a função ilustrada na figura 5, umaimagem de som também pode ser localizada no ângulo de 20° usando a combinação deuma diferença de amplitude de 3 dB e de uma diferença de tempo de 0,3 ms. Neste caso,não somente a informação de diferença de amplitude, mas também a informação dediferença de tempo pode ser fornecida como informação de parâmetro de conversão decanais, desse modo, melhorando a sensação de espaço.

Portanto, a fim de gerar sons com propriedades desejadas por um usuário duranteuma operação de conversão de canais / renderização, informação de parâmetro deconversão de canais pode ser apropriadamente convertida para que qualquer que seja avariação de amplitude e variação de tempo que é adequada ao usuário possa ser realizada.Isto é, se a informação de parâmetro de conversão de canais incluir somente informação dediferença de amplitude e o usuário desejar sons com uma profunda sensação de espaço, ainformação de diferença de amplitude pode ser convertida em informação de diferença detempo equivalente à informação de diferença de amplitude em relação aos dadospsicoacústicos. Alternativamente, se o usuário desejar ambos os sons com uma profundasensação de espaço e uma precisa localização de imagens de som, a informação dediferença de amplitude pode ser convertida na combinação de informação de diferença deamplitude e de informação de diferença de tempo equivalente à informação de amplitudeoriginal. Alternativamente, se a informação de parâmetro de conversão de canais incluirsomente informação de diferença de tempo e um usuário preferir uma precisa localização deimagens de som, a informação de diferença de tempo pode ser convertida em informaçãode diferença de amplitude equivalente à informação de diferença de tempo, ou pode serconvertida na combinação de informação de diferença de amplitude e de informação dediferença de tempo que pode satisfazer a preferência do usuário pela melhoria tanto daprecisão da localização de imagens de som quanto da sensação de espaço.

Ainda alternativamente, se a informação de parâmetro de conversão de canaisincluir tanto informação de diferença de amplitude quanto informação de diferença de tempo,e um usuário preferir uma precisa localização das imagens de som, a combinação dainformação de diferença de amplitude e da informação de diferença de tempo pode serconvertida em informação de diferença de amplitude equivalente à combinação dainformação de diferença de amplitude original e da informação de diferença de tempo. Poroutro lado, se a informação de parâmetro de conversão de canais incluir tanto informação dediferença de amplitude quanto informação de diferença de tempo e um usuário preferir amelhoria da sensação de espaço, a combinação da informação de diferença de amplitude eda informação de diferença de tempo pode ser convertida em informação de diferença detempo equivalente à combinação da informação de diferença de amplitude e à informaçãode diferença de tempo original. Em relação à figura 6, a informação de controle pode incluirinformação de conversão de canais / renderização e informação harmônica considerandoum ou mais sinais de objetos. A informação harmônica pode incluir pelo menos umainformação de altura, informação de freqüência fundamental e informação de banda defreqüência dominante considerando um ou mais sinais de objetos, e descrições da energia edo espectro de cada sub-banda de cada um dos sinais de objetos.

A informação harmônica pode ser usada para processar um sinal de objeto duranteuma operação de renderização em virtude de a resolução de um renderizador que realizasua operação em unidades de sub-bandas ser insuficiente.

Se a informação harmônica incluir informação de altura considerando um ou maissinais de objetos, o ganho de cada um dos sinais de objetos pode ser ajustado pelaatenuação ou intensificação de um domínio de freqüência pré-determinado usando um filtrocombo ou um filtro combo invertido. Por exemplo, se um de uma pluralidade de sinais deobjetos for um sinal vocal, os sinais de objetos podem ser usados como um karaokê pelaatenuação somente do sinal vocal. Alternativamente, se a informação harmônica incluirinformação de domínio de freqüência dominante considerando um ou mais sinais de objetos,um processo para atenuar ou intensificar um domínio de freqüência dominante pode serrealizado. Ainda alternativamente, se a informação harmônica incluir informação de espectro considerando um ou mais sinais de objetos, o ganho de cada um dos sinais de objetos podeser controlado pela realização de atenuação ou de reforço sem ser restrito por nenhum doslimites de sub-banda.

A figura 7 é um diagrama de blocos de um aparelho de decodificação de áudio 140de acordo com uma outra modalidade da presente invenção. Em relação à figura 7, o aparelho de decodificação de áudio 140 usa um decodificador multicanais 141, em vez deum decodificador de objeto e um renderizador, e decodifica inúmeros sinais de objetosdepois que os sinais de objetos forem apropriadamente arranjados em um espaçomulticanais.

Mais especificamente, o aparelho de decodificação de áudio 140 inclui o decodificador multicanais 141 e um conversor de parâmetro 145. O decodificadormulticanais 141 gera um sinal multicanais cujos sinais de objetos já foram arranjados em umespaço multicanais com base em um sinal de mistura descendente e em informação deparâmetro espacial, que é informação complementar com base em canal fornecida peloconversor de parâmetro 145. O conversor de parâmetro 145 analisa informação complementar e informação de controle transmitidas por um aparelho de codificação deáudio (não mostrado) e gera a informação de parâmetro espacial com base no resultado daanálise. Mais especificamente, o conversor de parâmetro 145 gera a informação deparâmetro espacial pela combinação da informação complementar e da informação decontrole que inclui informação de ajuste de reprodução e informação de conversão de canais. Isto é, o conversor de parâmetro 145 realiza a conversão da combinação dainformação complementar e da informação de controle em dados espaciais correspondentesa uma caixa Um-Para-Um (OTT) ou a uma caixa Dois-Para-Três (TTT).

O aparelho de decodificação de áudio 140 pode realizar uma operação dedecodificação multicanais na qual uma operação de decodificação com base em objeto e uma operação de conversão de canais / renderização são incorporadas e, assim, pode pulara decodificação de cada sinal de objeto. Portanto, é possível reduzir a complexidade dadecodificação e/ou da conversão de canais / renderização.

Por exemplo, quando há 10 sinais de objetos e um sinal multicanais obtido combase nos 10 sinais de objetos dever ser reproduzido por um sistema de reprodução de alto- falante de 5.1 canais, um aparelho típico de decodificação de áudio com base em objetogera sinais decodificados respectivamente correspondentes aos 10 sinais de objetos combase em um sinal de mistura descendente e em informação complementar e, então, geraum sinal de 5.1 canais arranjando apropriadamente os 10 sinais de objetos em um espaçomulticanais para que os sinais de objetos possam ficar adequados para um ambiente dealto-falante de 5.1 canais. Entretanto, ele é ineficiente para gerar 10 sinais de objetosdurante a geração de um sinal de 5.1 canais, e este problema fica mais severo à medidaque a diferença entre o número de sinais de objetos e o número de canais de um sinalmulticanais a ser gerado aumenta.

Por outro lado, de acordo com a modalidade da figura 7, o aparelho dedecodificação de áudio 140 gera informação de parâmetro espacial adequada para um sinalde 5.1 canais com base na informação complementar e na informação de controle, e fornecea informação de parâmetro espacial e um sinal de mistura descendente ao decodificadormulticanais 141. Então, o decodificador multicanais 141 gera um sinal de 5.1 canais combase na informação de parâmetro espacial e no sinal de mistura descendente. Em outraspalavras, quando o número de canais a ser transmitido é 5.1 canais, o aparelho dedecodificação de áudio 140 pode gerar prontamente um sinal de 5.1 canais com base emum sinal de mistura descendente sem a necessidade de gerar 10 sinais de objetos e, assim,é mais eficiente do que um aparelho de decodificação de áudio convencional em termos decomplexidade.

O aparelho de decodificação de áudio 140 é considerado eficiente quando aquantidade de computação exigida para calcular informação de parâmetro espacialcorrespondente a cada uma de uma caixa OTT e de uma caixa TTT por meio da análise dainformação complementar e da informação de controle transmitidas por um aparelho decodificação de áudio for menor do que a quantidade de computação exigida para realizaruma operação de conversão de canais / renderização depois da decodificação de cada sinalde objeto.

O aparelho de decodificação de áudio 140 pode ser obtido simplesmente pelaadição de um módulo para gerar informação de parâmetro espacial por meio da análise dainformação complementar e da informação de controle em um aparelho típico dedecodificação de áudio multicanais e, assim, pode manter a compatibilidade com umaparelho típico de decodificação de áudio multicanais. Também, o aparelho dedecodificação de áudio 140 pode melhorar a qualidade de som usando ferramentasexistentes de um aparelho típico de decodificação de áudio multicanais, tais como umformador de envelope, uma ferramenta de processamento temporal de sub-banda (STP) eum decorrelator. Dado tudo isto, conclui-se que todas as vantagens de um método típico dedecodificação de áudio multicanais podem ser prontamente aplicadas a um método dedecodificação de áudio objeto.

Informação de parâmetro espacial transmitida ao decodificador multicanais 141 peloconversor de parâmetro 145 pode ter sido comprimida para ser adequada para sertransmitida. Alternativamente, a informação de parâmetro espacial pode ter o mesmoformato daquela dos dados transmitidos por um aparelho típico de codificação multicanais.Isto é, a informação de parâmetro espacial pode ter sido sujeita a uma operação dedecodificação Huffman ou a uma operação de decodificação piloto e, assim, pode sertransmitida a cada módulo como dados espaciais marcados não comprimidos. O anterior éadequado para transmitir a informação de parâmetro espacial a um aparelho dedecodificação de áudio multicanais em um local remoto, e este último é conveniente emvirtude de não haver necessidade de um aparelho de decodificação de áudio multicanaispara converter dados espaciais marcados comprimidos em dados espaciais marcados nãocomprimidos que podem ser prontamente usados em uma operação de decodificação.

A configuração da informação de parâmetro espacial com base na análise dainformação complementar e na informação de controle pode ocasionar um atraso entre umsinal de mistura descendente e a informação de parâmetro espacial. A fim de abordar esteproblema, um armazenamento temporário adicional pode ser fornecido tanto para um sinalde mistura descendente quanto para a informação de parâmetro espacial para que o sinalde mistura descendente e a informação de parâmetro espacial possam ser sincronizadosentre si. Entretanto, estes métodos são inconvenientes em virtude da exigência de fornecerum armazenamento temporário adicional. Alternativamente, a informação complementarpode ser transmitida à frente de um sinal de mistura descendente em consideração dapossibilidade de ocorrência de um atraso entre um sinal de mistura descendente e ainformação de parâmetro espacial. Neste caso, a informação de parâmetro espacial obtidapela combinação da informação complementar e da informação de controle não precisa serajustada, mas pode ser prontamente usada.

Se uma pluralidade de sinais de objetos de um sinal de mistura descendente tiverdiferentes níveis, um módulo de ganhos de mistura descendente artística (ADG), que podecompensar diretamente o sinal de mistura descendente, pode determinar os níveis relativosdos sinais de objetos, e cada um dos sinais de objetos pode ser alocado em uma posiçãopré-determinada em um espaço multicanais usando dados espaciais marcados, tais comoinformação de diferença de nível de canal, informação de correlação intercanais (ICC), einformação de coeficiente de prognóstico de canal (CPC).

Por exemplo, se informação de controle indicar que um sinal de objeto pre-determinado deve ser alocado em uma posição pré-determinada em um espaço multicanaise tiver um nível superior ao dos outros sinais de objetos, um decodificador multicanais típicopode calcular a diferença entre as energias dos canais de um sinal de mistura descendentee dividir o sinal de mistura descendente em inúmeros canais de saída com base nosresultados do cálculo. Entretanto, um decodificador multicanais típico não pode aumentar oureduzir o volume de certo som em um sinal de mistura descendente. Em outras palavras, umdecodificador multicanais típico simplesmente distribui um sinal de mistura descendente ainúmeros canais de saída e, assim, não pode aumentar ou reduzir o volume de um som nosinal de mistura descendente.

É relativamente fácil alocar cada um dos inúmeros sinais de objetos de um sinal demistura descendente gerado por um codificador de objeto em uma posição pré-determinadaem um espaço multicanais de acordo com a informação de controle. Entretanto, técnicasespaciais são exigidas para aumentar ou reduzir a amplitude de um sinal de objeto pre-determinado. Em outras palavras, se um sinal de mistura descendente gerado por umcodificador de objeto for usado como ele é, é difícil reduzir a amplitude de cada sinal deobjeto do sinal de mistura descendente.

Portanto, de acordo com uma modalidade da presente invenção, as amplitudesrelativas dos sinais de objetos podem variar de acordo com a informação de controle usandoum módulo ADG 147 ilustrado na figura 8. Mais especificamente, a amplitude de qualquerum de uma pluralidade de sinais de objetos de um sinal de mistura descendente transmitidopor um codificador de objeto pode ser aumentada ou reduzida usando o módulo ADG 147.Um sinal de mistura descendente obtido pela compensação realizada pelo módulo ADG 147pode ser sujeita à decodificação multicanais.

Se as amplitudes relativas dos sinais de objetos de um sinal de misturadescendente forem apropriadamente ajustadas usando o módulo ADG 147, é possívelrealizar decodificação de objeto usando um decodificador multicanais típico. Se um sinal demistura descendente gerado por um codificador de objeto for um sinal mono ou estéreo ouum sinal multicanais com três ou mais canais, o sinal de mistura descendente pode serprocessado pelo módulo ADG 147. Se um sinal de mistura descendente gerado por umcodificador de objeto tiver dois ou mais canais, e um sinal de objeto pré-determinado queprecisa ser ajustado pelo módulo ADG 147 existir somente em um dos canais do sinal demistura descendente, o módulo ADG 147 pode ser aplicado somente no canal que inclui osinal de objeto pré-determinado em vez de ser aplicado em todos os canais do sinal demistura descendente. Um sinal de mistura descendente processado pelo módulo ADG 147da maneira supradescrita pode ser prontamente processado usando um decodificadormulticanais típico sem a necessidade de modificar a estrutura do decodificador multicanais.

Mesmo quando um sinal de saída final não for um sinal multicanais que pode serreproduzido por um alto-falante multicanais, mas for um sinal binaural, o módulo ADG 147pode ser usado para ajustar as amplitudes relativas dos sinais de objetos do sinal de saídafinal.

Alternativamente ao uso do módulo ADG 147, informação de ganho que especificaum valor de ganho a ser aplicado em cada sinal de objeto pode ser incluído na informaçãode controle durante a geração de inúmeros sinais de objetos. Para isto, a estrutura de umdecodificador multicanais típico pode ser modificada. Mesmo embora exija a modificaçãopara a estrutura de um decodificador multicanais existente, este método é conveniente emtermos de redução da complexidade da decodificação pela aplicação de um valor de ganhopara cada sinal de objeto durante a operação de decodificação sem a necessidade decalcular ADG e para compensar cada sinal de objeto.

A figura 9 é um diagrama de blocos de um aparelho de decodificação de áudio 150de acordo com uma quarta modalidade da presente invenção. Em relação à figura 9, oaparelho de decodificação de áudio 150 é caracterizado pela geração de um sinal binaural.

Mais especificamente, o aparelho de decodificação de áudio 150 inclui umdecodificador binaural multicanais 151, um primeiro conversor de parâmetro 157 e umsegundo conversor de parâmetro 159.

O segundo conversor de parâmetro 159 analisa a informação complementar e ainformação de controle que são fornecidas por um aparelho de codificação de áudio econfigura informação de parâmetro espacial com base no resultado da análise. O primeiroconversor de parâmetro 157 configura informação de parâmetro binaural que pode serusada pelo decodificador binaural multicanais 151 pela adição de informação tridimensional(3D), tais como parâmetros de função de transferência relacionada a cabeçalho (HRTF), nainformação de parâmetro espacial. O decodificador binaural multicanais 151 gera um sinaltridimensional (3D) virtual pela aplicação da informação de parâmetro 3D virtual em um sinalde mistura descendente.

O primeiro conversor de parâmetro 157 e o segundo conversor de parâmetro 159podem ser substituídos por um único módulo, isto é, um módulo de conversão de parâmetro155 que recebe a informação complementar, a informação de controle e os parâmetrosHRTF, e configura a informação de parâmetro binaural com base na informaçãocomplementar, na informação de controle e nos parâmetros HRTF.

Convencionalmente, a fim de gerar um sinal binaural para a reprodução de um sinalde mistura descendente que inclui 10 sinais de objetos com um fone de ouvido, um sinal deobjeto deve gerar 10 sinais decodificados respectivamente correspondentes aos 10 sinaisde objetos com base no sinal de mistura descendente e na informação complementar.Posteriormente, um renderizador aloca cada um dos 10 sinais de objetos em uma posiçãopré-determinada em um espaço multicanais em relação à informação de controle para seadequar a um ambiente de alto-falante de 5 canais. Posteriormente, o renderizador gera umsinal de 5 canais que pode ser reproduzido usando um alto-falante de 5 canais.Posteriormente, o renderizador aplica parâmetros HRTF em um sinal de 5 canais, dessemodo, gerando um sinal de 2 canais. Em resumo, o método convencional de decodificaçãode áudio supramencionado inclui reproduzir 10 sinais de objetos, converter os 10 sinais deobjetos em um sinal de 5 canais, e gerar um sinal de 2 canais com base no sinal de 5 canaise, assim, é ineficiente.

Por outro lado, o aparelho de decodificação de áudio 150 pode gerar prontamenteum sinal binaural que pode ser reproduzido usando um fone de ouvido com base em sinaisde áudio de objeto. Além do mais, o aparelho de decodificação de áudio 150 configurainformação de parâmetro espacial por meio da análise de informação complementar e deinformação de controle e, assim, pode gerar um sinal binaural usando um decodificadorbinaural multicanais típico. Além do mais, o aparelho de decodificação de áudio 150 aindapode usar um decodificador binaural multicanais típico mesmo quando é equipado com umconversor de parâmetro incorporado que recebe informação complementar, informação decontrole e parâmetros HRTF, e configura informação de parâmetro binaural com base nainformação complementar, na informação de controle e nos parâmetros HRTF.

A figura 10 é um diagrama de blocos de um aparelho de decodificação de áudio160 de acordo com uma quinta modalidade da presente invenção. Em relação à figura 10, oaparelho de decodificação de áudio 160 inclui um processador de mistura descendente 161,um decodificador multicanais 163 e um conversor de parâmetro 165. O processador demistura descendente 161 e o conversor de parâmetro 163 podem ser substituídos por umúnico módulo 167.

O conversor de parâmetro 165 gera informação de parâmetro espacial, que podeser usada pelo decodificador multicanais 163, e informação de parâmetro, que pode serusada pelo processador de mistura descendente 161. O processador de misturadescendente 161 realiza uma operação de pré-processamento em um sinal de misturadescendente e transmite um sinal de mistura descendente resultante da operação de pré-processamento ao decodificador multicanais 163. O decodificador multicanais 163 realizauma operação de decodificação no sinal de mistura descendente transmitido peloprocessador de mistura descendente 161, desse modo, transmitindo um sinal estéreo, umsinal estéreo binaural ou um sinal multicanais. Exemplos da operação de pré-processamento realizada pelo processador de mistura descendente 161 incluem amodificação ou conversão de um sinal de mistura descendente em um domínio temporal ouem um domínio de freqüência usando filtragem.

Se um sinal de mistura descendente inserido no aparelho de decodificação deáudio 160 for um sinal estéreo, o sinal de mistura descendente pode ter que ser sujeito aopré-processamento de mistura descendente realizado pelo processador de misturadescendente 161 antes de ser inserido no decodificador multicanais 163 em virtude de odecodificador multicanais 163 não poder mapear um componente do sinal de misturadescendente correspondente a um canal esquerdo, que é um dos múltiplos canais, até umcanal direito, que é um outro dos múltiplos canais. Posteriormente, a fim de deslocar aposição de um sinal de objeto classificado no canal esquerdo até a direção do canal direito,o sinal de mistura descendente inserido no aparelho de decodificação de áudio 160 pode serpré-processado pelo processador de mistura descendente 161, e o sinal de misturadescendente pré-processado pode ser inserido no decodificador multicanais 163.

O pré-processamento de um sinal de mistura descendente estéreo pode serrealizado com base na informação de pré-processamento obtida da informaçãocomplementar e da informação de controle.

A figura 11 é um diagrama de blocos de um aparelho de decodificação de áudio170 de acordo com uma sexta modalidade da presente invenção. Em relação à figura 11, oaparelho de decodificação de áudio 170 inclui um decodificador multicanais 171, umprocessador de canal 173 e um conversor de parâmetro 175.

O conversor de parâmetro 175 gera informação de parâmetro espacial, que podeser usada pelo decodificador multicanais 173, e informação de parâmetro, que pode serusada pelo processador de canal 173. O processador de canal 173 realiza uma operação depós-processamento em um sinal transmitido pelo decodificador multicanais 173. Exemplosdo sinal transmitido pelo decodificador multicanais 173 incluem um sinal estéreo, um sinalestéreo binaural e um sinal multicanais.

Exemplos da operação de pós-processamento realizada pelo pós-processador 173incluem a modificação e conversão de cada canal ou de todos os canais de um sinal desaída. Por exemplo, se a informação complementar incluir informação de freqüênciafundamental considerando um sinal de objeto pré-determinado, o processador de canal 173pode remover componentes harmônicos do sinal de objeto pré-determinado em relação àinformação de freqüência fundamental. Um método de decodificação de áudio multicanaispode não ser eficiente o suficiente para ser usado em um sistema de karaokê. Entretanto, seinformação de freqüência fundamental considerando sinais de objetos vocais for incluída nainformação complementar e componentes harmônicos dos sinais de objetos vocais foremremovidos durante uma operação de pós-processamento, é possível realizar um sistema dekaraokê de alto desempenho usando a modalidade da figura 11. A modalidade da figura 11também pode ser aplicada a sinais de objetos diferentes dos sinais de objetos vocais. Porexemplo, é possível remover o som de um instrumento musical pré-determinado usando amodalidade da figura 11. Também, é possível amplificar componentes harmônicos pre-determinados usando informação de freqüência fundamental considerando sinais de objetosusando a modalidade da figura 11.

O processador de canal 173 pode realizar processamento de efeito adicional emum sinal de mistura descendente. Alternativamente, o processador de canal 173 podeadicionar um sinal obtido pelo processamento de efeito adicional em um sinal transmitidopelo decodificador multicanais 171. O processador de canal 173 pode mudar o espectro deum objeto ou modificar um sinal de mistura descendente sempre que necessário. Se não forapropriado realizar diretamente uma operação de processamento de efeito, tal comoreverberação em um sinal de mistura descendente, e transmitir um sinal obtido pelaoperação de processamento de efeito ao decodificador multicanais 171, o processador demistura descendente 173 pode adicionar o sinal obtido pela operação de processamento deefeito na saída do decodificador multicanais 171, em vez de realizar processamento deefeito no sinal de mistura descendente.

O aparelho de decodificação de áudio 170 pode ser projetado para incluir nãosomente o processador de canal 173, mas também um processador de misturadescendente. Neste caso, o processador de mistura descendente pode ficar disposto nafrente do decodificador multicanais 173, e o processador de canal 173 pode ficar dispostoatrás do decodificador multicanais 173.

A figura 12 é um diagrama de blocos de um aparelho de decodificação de áudio210 de acordo com uma sétima modalidade da presente invenção. Em relação à figura 12, oaparelho de decodificação de áudio 210 usa um decodificador multicanais 213, em vez deum decodificador de objeto.

Mais especificamente, o aparelho de decodificação de áudio 210 inclui odecodificador multicanais 213, um transcodificador 215, um renderizador 217 e uma base dedados de informação 3D 217.

O renderizador 217 determina as posições 3D de uma pluralidade de sinais deobjetos com base na informação 3D correspondente aos dados de índice incluídos nainformação de controle. O transcodificador 215 gera informação complementar com base emcanal sintetizando informação de posição considerando inúmeros sinais de áudio de objetonos quais a informação 3D é aplicada pelo renderizador 217. O decodificador multicanais213 transmite um sinal 3D pela aplicação de informação complementar com base em canalem um sinal de mistura descendente.

Uma função de transferência relacionada a cabeçalho (HRTF) pode ser usadacomo a informação 3D. Uma HRTF é uma função de transferência que descreve atransmissão de ondas sonoras entre uma fonte de som em uma posição arbitrária e otímpano, e retorna um valor que varia de acordo com a direção e a altitude da fonte de som.Se um sinal sem diretividade for filtrado usando a HRTF, o sinal pode ser ouvido como seele fosse reproduzido a partir de uma certa direção.

Quando um fluxo contínuo de bits de entrada for recebido, o aparelho dedecodificação de áudio 210 extrai um sinal de mistura descendente com base em objeto einformação de parâmetro com base em objeto a partir do fluxo contínuo de bits de entradausando um demultiplexador (não mostrado). Então, o renderizador 217 extrai dados deíndice da informação de controle, que são usados para determinar as posições de umapluralidade de sinais de áudio de objeto, e retira informação 3D correspondente aos dadosde índice extraídos da base de dados de informação 3D 219.

Mais especificamente, informação de parâmetro de conversão de canais, que éincluída na informação de controle que é usada pelo aparelho de decodificação de áudio210, pode incluir não somente informação de nível, mas também dados de índicenecessários para buscar informação 3D. A informação de parâmetro de conversão de canaistambém pode incluir informação de tempo considerando a diferença de tempo entre canais,informação de posição e um ou mais parâmetros obtidos pela apropriada combinação dainformação de nível e da informação de tempo.

A posição de um sinal de áudio de objeto pode ser determinada inicialmente deacordo com informação de parâmetro de conversão de canais padrão, e pode ser mudadaposteriormente pela aplicação de informação 3D correspondente a uma posição desejadapor um usuário no sinal de áudio de objeto. Alternativamente, se o usuário desejar aplicarum efeito 3D somente em alguns sinais de áudio de objeto, informação de nível einformação de tempo considerando outros sinais de áudio de objeto nos quais o usuáriodeseja não aplicar um efeito 3D podem ser usadas como informação de parâmetro deconversão de canais.

O transcodificador 217 gera informação complementar com base em canalconsiderando M canais sintetizando informação de parâmetro com base em objetoconsiderando N sinais de objetos transmitidos por um aparelho de codificação de áudio einformação de posição de inúmeros sinais de objetos nos quais informação 3D, tal comouma HRTF, é aplicada pelo renderizador 217.

O decodificador multicanais 213 gera um sinal de áudio com base em um sinal demistura descendente e na informação complementar com base em canal fornecida pelotranscodificador 217, e gera um sinal multicanais 3D pela realização de uma operação derenderização 3D usando informação 3D incluída na informação complementar com base emcanal.

A figura 13 é um diagrama de blocos de um aparelho de decodificação de áudio220 de acordo com uma oitava modalidade da presente invenção. Em relação à figura 13, oaparelho de decodificação de áudio 220 é diferente do aparelho de decodificação de áudio210 ilustrado na figura 12 em que o transcodificador 225 transmite informaçãocomplementar com base em canal e informação 3D separadamente a um decodificadormulticanais 223. Em outras palavras, o transcodificador 225 do aparelho de decodificaçãode áudio 220 obtém informação complementar com base em canal considerando M canaisda informação de parâmetro com base em objeto considerando N sinais de objetos, etransmite a informação complementar com base em canal e informação 3D, que é aplicadaem cada um dos N sinais de objetos, ao decodificador multicanais 223, enquanto que otranscodificador 217 do aparelho de decodificação de áudio 210 transmite informaçãocomplementar com base em canal, incluindo informação 3D, ao decodificador multicanais213.

Em relação à figura 14, informação complementar com base em canal e informação3D podem incluir uma pluralidade de índices de quadro. Assim, o decodificador multicanais223 pode sincronizar a informação complementar com base em canal e a informação 3D emrelação aos índices de quadro de cada uma da informação complementar com base emcanal e da informação 3D e, assim, pode aplicar informação 3D em um quadro de um fluxocontínuo de bits correspondente à informação 3D. Por exemplo, informação 3D com índice 2pode ser aplicada no início do quadro 2 com o índice 2.

Já que tanto informação complementar com base em canal quanto informação 3Dincluem índices de quadro, é possível determinar efetivamente uma posição temporal dainformação complementar com base em canal na qual a informação 3D deve ser aplicada,mesmo se a informação 3D for atualizada durante o tempo. Em outras palavras, otranscodificador 225 inclui informação 3D e inúmeros índices de quadro na informaçãocomplementar com base em canal e, assim, o decodificador multicanais 223 podesincronizar facilmente a informação complementar com base em canal e a informação 3D.

O processador de mistura descendente 231, o transcodificador 235, o renderizador237 e a base de dados de informação 3D podem ser substituídos por um único módulo 239.

A figura 15 é um diagrama de blocos de um aparelho de decodificação de áudio230 de acordo com uma nona modalidade da presente invenção. Em relação à figura 15, oaparelho de decodificação de áudio 230 é diferenciado do aparelho de decodificação deáudio 220 ilustrado na figura 14 pela inclusão adicional de um processador de misturadescendente 231.

Mais especificamente, o aparelho de decodificação de áudio 230 inclui umtranscodificador 235, um renderizador 237, uma base de dados de informação 3D 239, umdecodificador multicanais 233 e o processador de mistura descendente 231. Otranscodificador 235, o renderizador 237, a base de dados de informação 3D 239 e odecodificador multicanais 233 são os mesmos das suas respectivas contrapartes ilustradasna figura 14. O processador de mistura descendente 231 realiza uma operação de pré-processamento em um sinal de mistura descendente estéreo para ajuste de posição. A basede dados de informação 3D 239 pode ser incorporada no renderizador 237. Um módulo paraaplicar um efeito pré-determinado em um sinal de mistura descendente também pode serfornecido no aparelho de decodificação de áudio 230.

A figura 16 ilustra um diagrama de blocos de um aparelho de decodificação deáudio 240 de acordo com uma décima modalidade da presente invenção. Em relação àfigura 16, o aparelho de decodificação de áudio 240 é diferenciado do aparelho dedecodificação de áudio 230 ilustrado na figura 15 pela inclusão de um combinador deunidade de controle multipontos 241.

Isto é, o aparelho de decodificação de áudio 240, como o aparelho de decodificaçãode áudio 230, inclui um processador de mistura descendente 243, um decodificadormulticanais 244, um transcodificador 245, um renderizador 247 e uma base de dados deinformação 3D 249. O combinador de unidade de controle multipontos 241 combina umapluralidade de fluxos contínuos de bits obtida pela codificação com base em objeto, dessemodo, obtendo um único fluxo contínuo de bits. Por exemplo, quando um primeiro fluxocontínuo de bits para um primeiro sinal de áudio e um segundo fluxo contínuo de bits paraum segundo sinal de áudio forem inseridos, o combinador de unidade de controlemultipontos 241 extrai um primeiro sinal de mistura descendente do primeiro fluxo contínuode bits, extrai um segundo sinal de mistura descendente do segundo fluxo contínuo de bits egera um terceiro sinal de mistura descendente pela combinação dos primeiro e segundosinais convertidos para menos canais. Além do mais, o combinador de unidade de controlemultipontos 241 extrai a primeira informação complementar com base em objeto do primeirofluxo contínuo de bits, extrai a segunda informação complementar com base em objeto dosegundo fluxo contínuo de bits, e gera a terceira informação complementar com base emobjeto pela combinação da primeira informação complementar com base em objeto e dasegunda informação complementar com base em objeto. Posteriormente, o combinador deunidade de controle multipontos 241 gera um fluxo contínuo de bits pela combinação doterceiro sinal de mistura descendente e da terceira informação complementar com base emobjeto, e transmite o fluxo contínuo de bits gerado.

Portanto, de acordo com a décima modalidade da presente invenção, é possívelprocessar eficientemente sinais uniformes transmitidos por dois ou mais parceiros decomunicação, se comparado com o caso da codificação e decodificação de cada sinal deobjeto.

A fim de que o combinador de unidade de controle multipontos 241 incorpore umapluralidade de sinais convertidos para menos canais, que são respectivamente extraídos deuma pluralidade de fluxos contínuos de bits e são associados com diferentes codecs decompressão, em um único sinal de mistura descendente, os sinais convertidos para menoscanais podem precisar ser convertidos em sinais de modulação por código de pulso (PCM)ou sinais em um domínio de freqüência pré-determinado de acordo com os tipos de codecsde compressão dos sinais convertidos para menos canais, os sinais PCM ou os sinaisobtidos pela conversão podem precisar ser juntamente combinados, e um sinal obtido pelacombinação pode precisar ser convertido usando um codec de compressão pré-determinado. Neste caso, pode ocorrer um atraso de acordo com se os sinais convertidospara menos canais estão incorporados em um sinal PCM ou em um sinal no domínio defreqüência pré-determinado. Entretanto, o atraso pode não ser capaz de serapropriadamente estimado por um decodificador. Portanto, o atraso pode precisar serincluído em um fluxo contínuo de bits e transmitido juntamente com o fluxo contínuo de bits.O atraso pode indicar o número de amostras de atraso em um sinal PCM ou o número deamostras de atraso no domínio de freqüência pré-determinado.

Durante a operação de codificação de áudio com base em objeto, algumas vezes,um número considerável de sinais de entrada pode precisar ser processado, se comparadocom o número de sinais de entrada, no geral, processados durante uma operação típica decodificação multicanais (por exemplo, uma operação de codificação de 5.1 canais ou de 7.1canais). Portanto, um método de codificação de áudio com base em objeto exige taxas debit muito maiores do que as de um método típico de codificação de áudio multicanais combase em canal. Entretanto, já que um método de codificação de áudio com base em objetoenvolve o processamento de sinais de objetos que são menores do que os sinais de canal, épossível gerar sinais de saída dinâmicos usando um método de codificação de áudio combase em objeto.

Um método de codificação de áudio de acordo com uma modalidade da presenteinvenção será descrito com detalhes a seguir em relação às figuras 17 até 20.

Em um método de codificação de áudio com base em objeto, sinais de objetospodem ser definidos para representar sons individuais, tais como a voz de um ser humanoou o som de um instrumento musical. Alternativamente, sons com características similares,tais como os sons de instrumentos musicais de cordas (por exemplo, um violino, uma viola eum violoncelo), sons que pertencem à mesma faixa de freqüência ou sons classificados namesma categoria de acordo com as direções e ângulos das suas fontes de som, podem serjuntamente agrupados e definidos pelos mesmos sinais de objetos. Ainda alternativamente,sinais de objetos podem ser definidos usando a combinação dos métodos supradescritos.

Inúmeros sinais de objetos podem ser transmitidos como um sinal de misturadescendente e informação complementar. Durante a criação da informação a sertransmitida, a energia ou potência de um sinal de mistura descendente ou de cada um deuma pluralidade de sinais de objetos do sinal de mistura descendente são originalmentecalculadas com o propósito de detectar o envelope do sinal de mistura descendente. Osresultados do cálculo podem ser usados para transmitir os sinais de objetos ou o sinal demistura descendente ou para calcular a taxa dos níveis dos sinais de objetos.

Um algoritmo de codificação preditiva linear (LPC) pode ser usado em taxas de bitmais baixas. Mais especificamente, inúmeros coeficientes LPC, que representam o envelopede um sinal, são gerados por meio da análise do sinal, e os coeficientes LPC sãotransmitidos, em vez de transmitir informação de envelope relacionada ao sinal. Estemétodo é eficiente em termos de taxas de bit. Entretanto, já que é muito provável que oscoeficientes LPC sejam discrepantes do envelope atual do sinal, este método exige umprocesso adicional, tal como correção de erro. Em resumo, um método que envolvetransmitir informação de envelope de um sinal pode garantir uma alta qualidade de som,mas resulta em um considerável aumento na quantidade de informação que precisa sertransmitida. Por outro lado, um método que envolve o uso dos coeficientes LPC pode reduzira quantidade de informação que precisa ser transmitida, mas exige um processo adicional,tal como correção de erro, e resulta em uma diminuição na qualidade do som.

De acordo com uma modalidade da presente invenção, uma combinação destesmétodos pode ser usada. Em outras palavras, o envelope de um sinal pode serrepresentado pela energia ou pela potência do sinal ou por um valor de índice ou por umoutro valor, tal como um coeficiente LPC correspondente à energia ou à potência do sinal.

Informação de envelope relacionada a um sinal pode ser obtida em unidades deseções temporais ou de seções de freqüência. Mais especificamente, em relação à figura17, informação de envelope relacionada a um sinal pode ser obtida em unidades de quadro.Alternativamente, se um sinal for representado por uma estrutura de faixa de freqüênciausando um banco de filtro, tal como um banco de filtro em espelho de quadratura (QMF),informação de envelope relacionada a um sinal pode ser obtida em unidades de sub-bandasde freqüência, de partições de sub-banda de freqüência, que são entidades menores do quesub-bandas de freqüência, de grupos de sub-bandas de freqüência ou de grupos departições de sub-banda de freqüência. Ainda alternativamente, uma combinação do métodocom base em quadro, do método com base em sub-banda de freqüência, e do método combase em partição de sub-banda de freqüência pode ser usada no escopo da presenteinvenção.

Ainda alternativamente, dado que, no geral, os componentes de baixa freqüênciade um sinal têm mais informação do que os componentes de alta freqüência do sinal,informação de envelope relacionada aos componentes de baixa freqüência de um sinal podeser transmitida como ela está, enquanto que informação de envelope relacionada aoscomponentes de alta freqüência do sinal pode ser representada pelos coeficientes LPC oupor outros valores, e os coeficientes LPC ou outros valores podem ser transmitidos em vezda informação de envelope relacionada aos componentes de alta freqüência do sinal.Entretanto, componentes de baixa freqüência de um sinal podem, não necessariamente, termais informação do que componentes de alta freqüência do sinal. Portanto, o métodosupradescrito deve ser flexivelmente aplicado de acordo com as circunstâncias.

De acordo com uma modalidade da presente invenção, informação de envelope oudados de índice correspondentes a uma parte (doravante referida como a parte dominante)de um sinal que aparece dominante em um eixo geométrico de tempo / freqüência podemser transmitidos, e nenhum da informação de envelope e dos dados de índicecorrespondentes a uma parte não dominante do sinal pode ser transmitido.Alternativamente, valores (por exemplo, coeficientes LPC) que representam a energia e apotência da parte dominante do sinal podem ser transmitidos, e nenhum de tais valorescorrespondentes à parte não dominante do sinal pode ser transmitido. Aindaalternativamente, informação de envelope ou dados de índice correspondentes à partedominante do sinal podem ser transmitidos, e valores que representam a energia ou apotência da parte não dominante do sinal podem ser transmitidos. Ainda alternativamente,informação relacionada somente à parte dominante do sinal pode ser transmitida para que aparte não dominante do sinal possa ser estimada com base na informação relacionada àparte dominante do sinal. Ainda alternativamente, uma combinação dos métodossupradescritos pode ser usada.

Por exemplo, em relação à figura 18, se um sinal for dividido em um períododominante e em um período não dominante, informação relacionada ao sinal pode sertransmitida de quatro maneiras diferentes, indicadas por (a) até (d).

A fim de transmitir inúmeros sinais de objetos como a combinação de um sinal demistura descendente e de informação complementar, o sinal de mistura descendenteprecisa ser dividido em uma pluralidade de elementos como parte de uma operação dedecodificação, por exemplo, em consideração à taxa dos níveis dos sinais de objetos. A fimde garantir independência entre os elementos do sinal de mistura descendente, umaoperação de decorrelação precisa ser adicionalmente realizada.

Outros sinais, que são as unidades de codificação em um método de codificaçãocom base em objeto, têm mais independência do que sinais de canal, que são as unidadesde codificação em um método de corpo de medição. Em outras palavras, um sinal de canalinclui inúmeros sinais de objetos e, assim, precisa ser decorrelacionado. Por outro lado,sinais de objetos são independentes entre si e, assim, a separação de canal pode serfacilmente realizada simplesmente pelo uso das características dos sinais de objetos semuma exigência de uma operação de decorrelação.

Mais especificamente, em relação à figura 19, sinais de objetos A, B e C alternamentre si para aparecer dominantes em um eixo geométrico de freqüência. Neste caso, nãohá necessidade de dividir um sinal de mistura descendente em inúmeros sinais de acordocom a taxa de níveis dos sinais de objetos A, B e C e de realizar decorrelação. Em vez disto,informação relacionada aos períodos dominantes dos sinais de objetos A, B e C pode sertransmitida, ou um valor de ganho pode ser aplicado em cada componente de freqüência decada um dos sinais de objetos A, B e C, desse modo, pulando a decorrelação. Portanto, épossível reduzir a quantidade de computação e reduzir a taxa de bit pela quantidade que,em outras circunstâncias, teriam sido exigidas pela informação complementar necessáriapara decorrelação.

Em resumo, a fim de pular a decorrelação, que é realizada para garantirindependência entre inúmeros sinais obtidos pela divisão de um sinal de misturadescendente de acordo com a taxa das taxas dos sinais de objetos do sinal de misturadescendente, informação relacionada a um domínio de freqüência que inclui cada sinal deobjeto pode ser transmitida como informação complementar. Alternativamente, diferentesvalores de ganho podem ser aplicados a um período dominante, durante o qual cada sinalde objeto aparece dominante, e um período não dominante, durante o qual cada sinal deobjeto aparece menos dominante, e, assim, informação relacionada ao período dominantepode ser fornecida principalmente como informação complementar. Ainda alternativamente,a informação relacionada ao período dominante pode ser transmitida como informaçãocomplementar, e nenhuma informação relacionada ao período não dominante pode sertransmitida. Ainda alternativamente, uma combinação dos métodos supradescritos, que sãoalternativas a um método de decorrelação, pode ser usada.

Os métodos supradescritos, que são alternativas a um método de decorrelação,podem ser aplicados a todos os sinais de objetos ou somente a alguns sinais de objetoscom períodos dominantes facilmente distinguíveis. Também, os métodos supradescritos,que são alternativas a um método de decorrelação, podem ser variavelmente aplicados emunidades de quadros.

A codificação dos sinais de áudio de objeto usando um sinal residual será descritacom detalhes a seguir.

No geral, em um método de codificação de áudio com base em objeto, inúmerossinais de objetos são codificados, e os resultados da codificação são transmitidos como acombinação de um sinal de mistura descendente e de informação complementar. Então,inúmeros sinais de objetos são restaurados a partir do sinal de mistura descendente pormeio de decodificação de acordo com a informação complementar, e os sinais de objetosrestaurados são apropriadamente convertidos, por exemplo, na solicitação de um usuário deacordo com a informação de controle, desse modo, gerando um primeiro sinal de canal. Nogeral, um método de codificação de áudio com base em objeto alveja variar livremente umsinal de canal de saída de acordo com a informação de controle com o auxílio de umconversor de canais. Entretanto, um método de codificação de áudio com base em objetotambém pode ser usado para gerar uma saída de canal de uma maneira pré-definida,independente da informação de controle.

Para isto, informação complementar pode incluir não somente informaçãonecessária para obter inúmeros sinais de objetos de um sinal de mistura descendente, mastambém informação de parâmetro de conversão de canais necessária para gerar um sinalde canal. Assim, é possível gerar um sinal de saída de canal final sem o auxílio de umconversor de canais. Neste caso, um algoritmo, tal como codificação residual, pode serusado para melhorar a qualidade do som.Um método típico de codificação residual inclui codificar um sinal e codificar o erroentre o sinal codificado e o sinal original, isto é, um sinal residual. Durante uma operação dedecodificação, o sinal codificado é decodificado durante a compensação do erro entre osinal codificado e o sinal original, desse modo, restaurando um sinal que é tão similar aosinal original quanto possível. Já que, no geral, o erro entre o sinal codificado e o sinaloriginal é insignificante, é possível reduzir a quantidade de informação adicionalmentenecessária para realizar codificação residual.

Se uma saída de canal final de um decodificador for fixa, não somente a informaçãode parâmetro de conversão de canais necessária para gerar um sinal de canal final, mastambém informação de codificação residual, pode ser fornecida como informaçãocomplementar. Neste caso, é possível melhorara qualidade do som.

A figura 20 é um diagrama de blocos de um aparelho de codificação de áudio 310de acordo com uma modalidade da presente invenção. Em relação à figura 20, o aparelhode codificação de áudio 310 é caracterizado pelo uso de um sinal residual.

Mais especificamente, o aparelho de codificação de áudio 310 inclui um codificador311, um decodificador 313, um primeiro conversor de canais 315, um segundo conversor decanais 319, um somador 317 e um gerador de fluxo contínuo de bits 321.

O primeiro conversor de canais 315 realiza uma operação de conversão de canaisem um sinal original, e o segundo conversor de canais 319 realiza uma operação deconversão de canais em um sinal obtido pela realização de uma operação de codificação e,então, uma operação de decodificação no sinal original. O somador 317 calcula um sinalresidual entre uma saída de sinal pelo primeiro conversor de canais 315 e uma saída desinal pelo segundo conversor de canais 319. O gerador de fluxo contínuo de bits 321adiciona o sinal residual à informação complementar e transmite o resultado da adição.Desta maneira, é possível melhorar a qualidade do som.

O cálculo de um sinal residual pode ser aplicado a todas as partes de um sinal ousomente às partes de baixa freqüência de um sinal. Alternativamente, o cálculo de um sinalresidual pode ser variavelmente aplicado somente em domínios de freqüência que incluemsinais dominantes em uma base quadro a quadro. Ainda alternativamente, uma combinaçãodos métodos supradescritos pode ser usada.

Já que a quantidade de informação complementar que inclui informação de sinalresidual é muito maior do que a quantidade de informação complementar que não incluinenhuma informação de sinal residual, o cálculo de um sinal residual pode ser aplicadosomente a algumas partes de um sinal que afeta diretamente a qualidade do som, dessemodo, impedindo um aumento excessivo na taxa de bit. A presente invenção pode serrealizada como um código legível por computador escrito em uma mídia de gravação legívelpor computador. A mídia de gravação legível por computador pode ser qualquer tipo dedispositivo de gravação no qual dados são armazenados de uma maneira legível porcomputador. Exemplos da mídia de gravação legível por computador incluem uma ROM,uma FRAM1 um CD-ROM, uma fita magnética, um disco flexível, um armazenamento ótico dedados e uma onda portadora (por exemplo, transmissão de dados por meio da Internet). Amídia de gravação legível por computador pode ser distribuída por uma pluralidade desistemas de computador conectada em uma rede para que o código legível por computadorseja ali escrito e executado a partir dali de uma maneira descentralizada. Programas, códigoe segmentos de código funcionais necessários para realizar a presente invenção podem serfacilmente interpretados pelos versados na técnica.

APLICABILIDADE INDUSTRIAL

Da forma descrita anteriormente, de acordo com a presente invenção, imagens desom são localizadas para cada sinal de áudio de objeto pelo benefício proveniente dasvantagens dos métodos de codificação e de decodificação de áudio com base em objeto.Assim, é possível oferecer sons mais realísticos por meio da reprodução dos sinais de áudiode objetos. Além do mais, a presente invenção pode ser aplicada a jogos interativos e,assim, pode fornecer a um usuário experiência de realidade virtual mais realística.

Embora a presente invenção tenha sido particularmente mostrada e descrita emrelação às suas modalidades exemplares, versados na técnica entendem que váriasmudanças na forma e nos detalhes podem ser feitas sem fugir do espírito e do escopo dapresente invenção, definidos pelas seguintes reivindicações.

Claims

1. Método de decodificação de áudio, CARACTERIZADO pelo fato de quecompreende:extrair um sinal de mistura descendente e informação complementar com base emobjeto de um sinal de áudio;gerar um sinal de mistura descendente modificado com base no sinal de misturadescendente e em informação extraída da informação complementar com base em objeto;gerar informação complementar com base em canal com base na informaçãocomplementar com base em objeto e em dados de controle para renderizar o sinal demistura descendente; egerar um sinal de áudio multicanais com base no sinal de mistura descendentemodificado e na informação complementar com base em canal.

2. Método de decodificação de áudio, de acordo com a reivindicação 1,CARACTERIZADO pelo fato de que a informação complementar com base em objetocompreende pelo menos uma da informação de diferenças de nível de objeto, da informaçãode correlação cruzada interobjetos, da informação de ganho de mistura descendente, dainformação de diferença de nível de canal de mistura descendente e da informação deenergia de objeto absoluta.

3. Método de decodificação de áudio, de acordo com a reivindicação 1,CARACTERIZADO pelo fato de que a informação extraída compreende pelo menos uma dainformação de envelope, da informação de agrupamento, da informação de ganho, dainformação de período em silêncio, da informação de diferença de nível e da informação desinal residual dos sinais de objetos.

4. Método de decodificação de áudio, de acordo com a reivindicação 3,CARACTERIZADO pelo fato de que a informação de envelope compreende pelo menosuma de informação de coeficiente de codificação preditiva linear (LPC), informação deenergia e informação de potência.

5. Método de decodificação de áudio, de acordo com a reivindicação 3,CARACTERIZADO pelo fato de que a informação de envelope compreende informaçãorelacionada a envelopes de partes dos sinais de objetos que aparecem dominantes em umeixo geométrico de tempo / freqüência.

6. Método de decodificação de áudio, de acordo com a reivindicação 1,CARACTERIZADO pelo fato de que a informação complementar com base em objetocompreende informação relacionada a um atraso entre o sinal de mistura descendente e ainformação complementar com base em objeto.

7. Método de decodificação de áudio, de acordo com a reivindicação 1,CARACTERIZADO pelo fato de que a informação complementar com base em objetocompreende informação que indica se o sinal de áudio foi produzido por codificação combase em objeto ou por codificação com base em canal.

8. Aparelho de decodificação de áudio, CARACTERIZADO pelo fato de quecompreende: um demultiplexador que extrai um sinal de mistura descendente e informaçãocomplementar com base em objeto de um sinal de áudio;um decodificador de objeto que gera um sinal de mistura descendente modificadocom base no sinal de mistura descendente e em informação pré-determinada, e que gerainformação complementar com base em canal com base na informação complementar com base em objeto e nos dados de controle para renderizar o sinal de mistura descendente, ainformação pré-determinada sendo extraída da informação complementar com base emobjeto; eum decodificador multicanais que gera um sinal de áudio multicanais com base nosinal de mistura descendente modificado e na informação complementar com base em canal.

9. Aparelho de decodificação de áudio, de acordo com a reivindicação 8,CARACTERIZADO pelo fato de que a informação complementar com base em objetocompreende pelo menos uma da informação de diferenças de nível de objeto, da informaçãode correlação cruzada interobjetos, da informação de ganho de mistura descendente, da informação de diferença de nível de canal de mistura descendente e da informação deenergia de objeto absoluta.

10. Aparelho de decodificação de áudio, de acordo com a reivindicação 8,CARACTERIZADO pelo fato de que a informação pré-determinada compreende pelo menosuma da informação de envelope, da informação de agrupamento, da informação de ganho, da informação de período em silêncio, da informação de diferença de nível, da informaçãode sinal residual e da informação de atraso dos sinais de objetos.

11. Aparelho de decodificação de áudio, de acordo com a reivindicação 10,CARACTERIZADO pelo fato de que a informação de envelope compreende pelo menosuma da informação de coeficiente de codificação preditiva linear (LPC), da informação de energia e da informação de potência.

12. Aparelho de decodificação de áudio, de acordo com a reivindicação 8,CARACTERIZADO pelo fato de que a informação complementar com base em objetocompreende informação relacionada a um atraso entre o sinal de mistura descendente e ainformação complementar com base em objeto.

13. Aparelho de decodificação de áudio, de acordo com a reivindicação 8,CARACTERIZADO pelo fato de que a informação complementar com base em objetocompreende informação relacionada a um atraso entre o sinal de mistura descendente e ainformação complementar com base em objeto.

14. Método de codificação de áudio, CARACTERIZADO pelo fato de quecompreende:gerar um sinal de mistura descendente pela mistura descendente de um sinal deáudio de objeto;gerar informação complementar com base em objeto pela extração de informaçãorelacionada ao sinal de áudio de objeto, e inserir informação pré-determinada para modificaro sinal de mistura descendente na informação complementar com base em objeto; egerar um fluxo contínuo de bits pela combinação da informação complementar combase em objeto com a informação pré-determinada ali inserida e do sinal de misturadescendente.

15. Método de codificação de áudio, de acordo com a reivindicação 14,CARACTERIZADO pelo fato de que a informação para modificar o sinal de misturadescendente compreende informação de envelope, informação de agrupamento, informaçãode período em silêncio e informação de sinal residual dos sinais de objetos.

16. Método de codificação de áudio, de acordo com a reivindicação 14,CARACTERIZADO pelo fato de que a informação para modificar o sinal de misturadescendente compreende informação relacionada a um atraso entre o sinal de misturadescendente e a informação complementar com base em objeto.

17. Método de codificação de áudio, de acordo com a reivindicação 14,CARACTERIZADO pelo fato de que compreende adicionalmente inserir informação queindica que o sinal de áudio de objeto foi codificado por meio de codificação com base emobjeto no fluxo contínuo de bits.

18. Mídia de gravação legível por computador com um programa de computadornela gravado para executar um método de decodificação de áudio, CARACTERIZADA pelofato de que o método de decodificação de áudio compreende:extrair um sinal de mistura descendente e informação complementar com base emobjeto de um sinal de áudio;gerar um sinal de mistura descendente modificado com base no sinal de misturadescendente e em informação pré-determinada que é extraída da informação complementarcom base em objeto;gerar informação complementar com base em canal com base na informaçãocomplementar com base em objeto e na informação de controle para renderizar o sinal demistura descendente; e gerar um sinal de áudio multicanais com base no sinal de mistura descendentemodificado e na informação complementar com base em canal.

19. Mídia de gravação legível por computador com um programa de computadornela gravado para executar um método de codificação de áudio, CARACTERIZADA pelofato de que o método de decodificação de áudio compreende:gerar um sinal de mistura descendente pela mistura descendente de um sinal deáudio de objeto;gerar informação complementar com base em objeto pela extração de informaçãorelacionada ao sinal de áudio de objeto, e inserir informação pré-determinada para modificaro sinal de mistura descendente na informação complementar com base em objeto; egerar um fluxo contínuo de bits pela combinação da informação complementar combase em objeto com a informação pré-determinada ali inserida e o sinal de misturadescendente.