JP2010518655A - ダイアログ増幅技術 - Google Patents
ダイアログ増幅技術 Download PDFInfo
- Publication number
- JP2010518655A JP2010518655A JP2009527925A JP2009527925A JP2010518655A JP 2010518655 A JP2010518655 A JP 2010518655A JP 2009527925 A JP2009527925 A JP 2009527925A JP 2009527925 A JP2009527925 A JP 2009527925A JP 2010518655 A JP2010518655 A JP 2010518655A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- channel
- gain
- virtual center
- signals
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/05—Generation or adaptation of centre channel in multi-channel audio systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/03—Application of parametric coding in stereophonic audio systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/07—Synergistic effects of band splitting and sub-band processing
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
- Medicines Containing Material From Animals Or Micro-Organisms (AREA)
- Preparation Of Compounds By Using Micro-Organisms (AREA)
- Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
- Separation By Low-Temperature Treatments (AREA)
- Electrotherapy Devices (AREA)
- Manufacture, Treatment Of Glass Fibers (AREA)
- Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)
- Electrophonic Musical Instruments (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Image Processing (AREA)
Abstract
複数のチャネルのオーディオ信号(例えば、ステレオオーディオ)は、他の信号(反射または屈折される音)と比較して推定されるダイアログ(例えば、映画で俳優が話すダイアログ)のゲイン(例えば、ボリュームレベルまたは騷音程度)を調節する手順を進行する。一部の実施例において、分類器は、複数のチャネル信号で成分信号または推定されるダイアログを分類するのに使用される。一部の実施例において、ダイアログは、複数のチャネルのオーディオ信号または他の成分信号と比較して理想的に維持されるべきである。
本発明の直接的な実現方法、システム及びコンピュータ読取可能記録媒体を含む他の具体例が開示される。
【選択図】図1
本発明の直接的な実現方法、システム及びコンピュータ読取可能記録媒体を含む他の具体例が開示される。
【選択図】図1
Description
本発明は、現在係属中の下記の米国仮出願を優先権として主張する。
−2006年9月14日に出願された発明の名称“Method of Separately Controlling Dialogue Volume”、米国仮出願番号60/844,806、代理人管理番号19819−047P01
−2007年1月11日に出願された発明の名称“Separate Dialogue Volume(SDV)”、米国仮出願番号60/884,594、代理人管理番号19819−120P01、及び
−2007年6月11日に出願された発明の名称“Enhancing Stereo Audio with Remix Capability and Separate Dialogue”、米国仮出願番号60/943,268、代理人管理番号19819−160P01
前記各仮出願は、全体が参照により本明細書に統合される。
本発明は、一般的な信号処理に関するものである。
オーディオ増幅技術は、しばしば家庭内の娯楽システム、立体音響及びその他の消費者の電子機器で低周波信号を増幅させ、多様な聴取環境(例えば、コンサートホール)を具現化するために使用される。例えば、一部の技術は、高周波信号を挿入することで、映画ダイアログ(せりふ)をより明確にするために使用される。しかしながら、如何なる技術においても、ダイアログを周辺環境や他の成分の信号と比較して相対的に増幅させる技術を開示していない。
本発明の目的は、ダイアログを周辺環境や他の成分の信号と比較して相対的に増幅させる技術を提供することにある。
上記の目的を達成するための本発明に係るダイアログ増幅技術は、第1の複数チャネルオーディオ信号を獲得する段階と、ゲインを獲得する段階と、前記第1の複数チャネルオーディオ信号がセンターチャネル信号を含む場合、前記ゲインによって前記センターチャネル信号の現在のゲインを修正する段階と、前記第1の複数チャネルオーディオ信号がセンターチャネル信号を含まない場合、仮想センターチャネル信号を推定し、前記ゲインによって前記仮想センターチャネル信号にゲインを適用する段階を含むことを特徴とする。
本発明によると、ダイアログを周辺環境や他の成分の信号と比較して相対的に増幅させる技術を提供することができる。
<ダイアログ増幅技術>
図1は、二つのスピーカを使用して仮想音源の位置の関数としてチャネルゲインを表すモデルを示した図である。一部の実施例において、オーディオ/ビデオ信号に含まれているダイアログのボリュームのみを調節する方法によると、テレビジョン受信機、デジタルマルチメディア放送(DMB)プレーヤ、またはパーソナルマルチメディアプレーヤ(PMP)を含むオーディオ信号を再生する多様な装置でユーザの要求に応じてダイアログを効率的に調節することができる。
図1は、二つのスピーカを使用して仮想音源の位置の関数としてチャネルゲインを表すモデルを示した図である。一部の実施例において、オーディオ/ビデオ信号に含まれているダイアログのボリュームのみを調節する方法によると、テレビジョン受信機、デジタルマルチメディア放送(DMB)プレーヤ、またはパーソナルマルチメディアプレーヤ(PMP)を含むオーディオ信号を再生する多様な装置でユーザの要求に応じてダイアログを効率的に調節することができる。
背景雑音または伝送雑音が発生しない環境で対話体信号のみが伝送される場合、聴取者は、伝送されたダイアログを容易に聴取することができる。伝送されるダイアログのボリュームが小さい場合、聴取者は、ボリュームを増加させることでダイアログを聴取することができる。ダイアログが映画、ドラマ、またはスポーツを再生する劇場またはテレビジョン受信機で多様な音響効果と一緒に再生されるとき、音楽、音響効果及び/または背景または伝送雑音によって、聴取者は、ダイアログを聴取するのに困難さを経験することがある。このとき、ダイアログのボリュームを増加させるために全体のボリュームを増加させる場合、背景雑音、音楽、音響効果のボリュームも大きくなるので、耳障りな音が発生する。
一部の実施例において、伝送される複数のチャネルのオーディオ信号がステレオ信号である場合、センターチャネルは仮想的に生成され、仮想センターチャネルにゲインが適用され、仮想センターチャネルは、複数のチャネルのオーディオ信号の左右(L/R)のチャネルに加えられる。前記仮想センターチャネルは、左チャネルと右チャネルとの結合によって生成される。
ここで、LinとRinは左右のチャネルの入力信号を意味し、LoutとRoutは左右のチャネルの出力信号を意味し、CvirtualとCoutは、中間過程で使用される値として、それぞれ仮想センターチャネル及び加工された仮想センターチャネルの出力信号を意味し、Gcenterは、仮想センターチャネルのレベル決定に使用されるゲイン値を意味し、GLとGRは、左右のチャネルの入力値に適用されるゲイン値を意味する。本例において、GLとGRは1と仮定する。
さらに、仮想センターチャネルにゲインを適用する方法のみならず、特定の周波数を増幅または減衰させるために一つまたはそれ以上のフィルタ(例えば、バンドパスフィルタ)を適用する方法が使用される。この場合、関数fcenterを用いてフィルタを適用することができる。Gcenterを用いて仮想センターチャネルのボリュームを増加させる場合、ダイアログ信号が増幅されると同時に、左右のチャネルに含まれた音楽または音響効果のような他の成分が増幅されるという限界がある。fcenterを用いたバンドパスフィルタが使用される場合、ダイアログの発音が明瞭になるが、ダイアログ、音楽及び背景音のような信号が耳障りな音に歪曲される。
以下で説明するように、一部の実施例において、上記のように説明された問題点は、伝送されるオーディオ信号に含まれたダイアログのボリュームを調節することで効率的に解消される。
<ダイアログのボリュームを調節する方法>
一般的に、ダイアログは、マルチチャネル信号環境下でセンターチャネルに集中されている。例えば、5.1、6.1または7.1チャネルサラウンドシステムで、ダイアログは、一般的にセンターチャネルに割り当てられる。受信されるオーディオ信号が複数のチャネルの信号である場合、センターチャネルのゲインのみを調節することで充分な効果を得ることができる。オーディオ信号にセンターチャネルが含まれていない場合(例えば、ステレオ信号)、複数のチャネルのオーディオ信号のチャネルのうちダイアログが集中すると推定されるセンター領域(以下、ダイアログ領域とも呼ばれる。)に所定のゲインを適用するための方法が要求される。
一般的に、ダイアログは、マルチチャネル信号環境下でセンターチャネルに集中されている。例えば、5.1、6.1または7.1チャネルサラウンドシステムで、ダイアログは、一般的にセンターチャネルに割り当てられる。受信されるオーディオ信号が複数のチャネルの信号である場合、センターチャネルのゲインのみを調節することで充分な効果を得ることができる。オーディオ信号にセンターチャネルが含まれていない場合(例えば、ステレオ信号)、複数のチャネルのオーディオ信号のチャネルのうちダイアログが集中すると推定されるセンター領域(以下、ダイアログ領域とも呼ばれる。)に所定のゲインを適用するための方法が要求される。
(センターチャネルを含むマルチチャネル入力信号)
前記5.1、6.1または7.1チャネルサラウンドシステムはセンターチャネルを含む。このようなシステムのもとでは、センターチャネルのゲインのみを調整することで所望の効果を充分に得ることができる。この場合、前記センターチャネルは、ダイアログが割り当てられるチャネルを示す。しかし、本明細書で開示されたダイアログ増幅技術はセンターチャネルに制限されない。
前記5.1、6.1または7.1チャネルサラウンドシステムはセンターチャネルを含む。このようなシステムのもとでは、センターチャネルのゲインのみを調整することで所望の効果を充分に得ることができる。この場合、前記センターチャネルは、ダイアログが割り当てられるチャネルを示す。しかし、本明細書で開示されたダイアログ増幅技術はセンターチャネルに制限されない。
<出力チャネルがセンターチャネルを含む場合>
この場合、センターチャネルがC_outで、入力センターチャネルがC_inであり、下記の式2が得られる。
この場合、センターチャネルがC_outで、入力センターチャネルがC_inであり、下記の式2が得られる。
ここで、G_centerは所定のゲインを表し、f_centerはセンターチャネルに適用されるフィルタ(関数)を表し、これは用途によって構成される。場合によって、G_centerは、f_centerが適用された後で適用される。
<出力チャネルがセンターチャネルを含まない場合>
出力チャネルがセンターチャネルを含まない場合、C_out(ゲインが上述した方法によって調節された)は左右のチャネルに適用される。これは、下記の式によって得られる。
出力チャネルがセンターチャネルを含まない場合、C_out(ゲインが上述した方法によって調節された)は左右のチャネルに適用される。これは、下記の式によって得られる。
信号パワーを得るために、C_outは所定のゲイン(例えば、1/sqrt(2))を用いて計算される。
(センターチャネルを含まない複数のチャネルの入力信号)
複数のチャネルのオーディオ信号が前記センターチャネルを含まない場合、ダイアログが集中されると推定されるダイアログ信号(これも、仮想センターのチャネル信号と呼ばれる。)が複数のチャネルのオーディオ信号から獲得され、前記推定されるダイアログ領域に所定のゲインが適用される。例えば、2007年9月14日に出願された米国特許出願番号、"Dialogue Enhancement Technique(ダイアログ増幅技術)"、代理人管理番号19819−120001に開示されたように、オーディオ信号特性(例えば、レベル、左右のチャネル信号の間の連関関係、スペクトル成分)がダイアログを推測するのに使用され、上記の特許出願は、全体が参照により本出願に統合される。
複数のチャネルのオーディオ信号が前記センターチャネルを含まない場合、ダイアログが集中されると推定されるダイアログ信号(これも、仮想センターのチャネル信号と呼ばれる。)が複数のチャネルのオーディオ信号から獲得され、前記推定されるダイアログ領域に所定のゲインが適用される。例えば、2007年9月14日に出願された米国特許出願番号、"Dialogue Enhancement Technique(ダイアログ増幅技術)"、代理人管理番号19819−120001に開示されたように、オーディオ信号特性(例えば、レベル、左右のチャネル信号の間の連関関係、スペクトル成分)がダイアログを推測するのに使用され、上記の特許出願は、全体が参照により本出願に統合される。
図1を再び参照すると、正弦法則によって、音源(例えば、図1での仮想ソース)が音像の如何なるポジションに位置するとしても、前記チャネルのゲインは、二つのスピーカを用いる音像内での音源の位置を表示するために調節される。
サイン関数の他に、タンジェント関数も使用可能であることを明らかにする。
これと対照的に、二つのスピーカに入力される信号のレベル、すなわち、g1及びg2が既知の場合、信号入力の音源位置を知ることができる。センタースピーカが含まれていない場合、センタースピーカに含まれる音の再生を前面の左スピーカ及び右スピーカに許容することで仮想センターチャネルを獲得することができる。この場合、音のセンター領域に類似したゲイン、すなわち、g1、g2を与える二つのスピーカを許容することで、仮想ソースが音像のセンター領域に存在する効果を得ることができる。正弦法則方程式で、g1、g2が類似した値を有する場合、右辺の値はほぼ0になる。したがって、sinφ値は0に近い値を有する必要があり、φは0に近い値を有し、これによって、仮想音源はセンターに位置するようになる。仮想音源がセンター領域に位置する場合、仮想センターチャネルを構成する二つのチャネル(例えば、左右のチャネル)は類似したゲインを有し、センター領域(すなわち、ダイアログ領域)のゲインは、仮想センターチャネルの推定される信号のゲイン値を調節することで調節される。
チャネルのレベル情報と各チャネルの間の相関関係は、ダイアログを含むと仮定される仮想センターチャネル信号の推定に使用される。例えば、左右のチャネルの相関関係が低い場合(例えば、入力信号が音像の何れかの地点に集中されておらずに広がっている場合)、前記信号がダイアログでない可能性が高い。その逆に、前記左右のチャネルの相関関係が高い場合(例えば、入力信号が空間の一点に集中されている場合)、前記信号がダイアログまたは音響効果(例えば、ドアを閉める音)である可能性が高い。
上記のように、前記チャネルのレベル情報と前記各チャネルの間の相関関係を一緒に使用すると、ダイアログを効果的に推定することができる。ダイアログの周波数帯域は、100Hz乃至8kHzが一般的であるので、この周波数帯域で追加的な情報を用いてダイアログを推定することができる。
一般的な複数のチャネルのオーディオ信号は、ダイアログ、音楽、音響効果のような多様な信号を含むことができる。これによって、ダイアログを推定する前に伝送された信号がダイアログであるか、音楽であるか、それとも他の信号であるかを決定する分類器を配置し、ダイアログの推定効率を向上させることができる。前記分類器は、参照された図5A乃至図5Cに示すように、ダイアログの推定が行われた後で適用されることもある。
<時間ドメインでの調節>
図2は、ダイアログ推定器200とオーディオコントローラ202の例を示したブロック図である。図2に示すように、ダイアログは、入力信号を用いてダイアログ推定器200で推定される。所定のゲイン(例えば、ユーザによって設定された)は、前記オーディオコントローラ202を用いて推定されるダイアログに適用されることで出力を獲得する。ゲインを調節するための追加的な情報は、ダイアログ推定器200で生成される。ユーザ調節情報は、ダイアログボリューム調節情報を含むことができる。オーディオ信号は、音楽、ダイアログ、反響音及び背景雑音を確認するために分析され、このような信号のレベルと特性は前記オーディオコントローラ202によって調節される。
図2は、ダイアログ推定器200とオーディオコントローラ202の例を示したブロック図である。図2に示すように、ダイアログは、入力信号を用いてダイアログ推定器200で推定される。所定のゲイン(例えば、ユーザによって設定された)は、前記オーディオコントローラ202を用いて推定されるダイアログに適用されることで出力を獲得する。ゲインを調節するための追加的な情報は、ダイアログ推定器200で生成される。ユーザ調節情報は、ダイアログボリューム調節情報を含むことができる。オーディオ信号は、音楽、ダイアログ、反響音及び背景雑音を確認するために分析され、このような信号のレベルと特性は前記オーディオコントローラ202によって調節される。
<サブバンド基盤処理>
図3は、入力信号のダイアログを強化するダイアログ推定器302とオーディオコントローラ304、オーディオ信号でサブバンドを生成する分析フィルタバンク300、及びサブバンドからオーディオ信号を合成する合成フィルタバンク306を含む例を示したブロック図である。入力オーディオ信号の全体帯域に対してダイアログを推定または調節することより、一部の例で、入力オーディオ信号を前記分析フィルタバンク300を通して複数のサブバンドに分割し、各サブバンド別に前記ダイアログ推定器302を通してダイアログを推定することがより効率的である。いくつかの場合において、ダイアログが、入力されるオーディオ信号の特定の周波数帯域に集中されることもあり、特定の周波数帯域に存在しないこともある。この場合、ダイアログを含む入力オーディオ信号の周波数帯域のみがダイアログ領域を推定するのに使用される。サブバンド信号を獲得するためには、多相のフィルタバンク、QMF(quadrature mirror filterbank)、ハイブリッドフィルタバンク、DFT(discrete Fourier transform)、及びMDCT(modified discrete cosine transform)を含むが、これらに限定されず、多様な公知の方法が使用可能である。
図3は、入力信号のダイアログを強化するダイアログ推定器302とオーディオコントローラ304、オーディオ信号でサブバンドを生成する分析フィルタバンク300、及びサブバンドからオーディオ信号を合成する合成フィルタバンク306を含む例を示したブロック図である。入力オーディオ信号の全体帯域に対してダイアログを推定または調節することより、一部の例で、入力オーディオ信号を前記分析フィルタバンク300を通して複数のサブバンドに分割し、各サブバンド別に前記ダイアログ推定器302を通してダイアログを推定することがより効率的である。いくつかの場合において、ダイアログが、入力されるオーディオ信号の特定の周波数帯域に集中されることもあり、特定の周波数帯域に存在しないこともある。この場合、ダイアログを含む入力オーディオ信号の周波数帯域のみがダイアログ領域を推定するのに使用される。サブバンド信号を獲得するためには、多相のフィルタバンク、QMF(quadrature mirror filterbank)、ハイブリッドフィルタバンク、DFT(discrete Fourier transform)、及びMDCT(modified discrete cosine transform)を含むが、これらに限定されず、多様な公知の方法が使用可能である。
一部の実施例において、ダイアログは、第1の複数チャネルのオーディオ信号をフィルタリングして左右のチャネル信号を提供し、前記左右のチャネル信号を周波数ドメインに変換し、変換された左右のチャネル信号を用いてダイアログを推定することで推定される。
<分類器の利用>
図4は、オーディオ信号に含まれたオーディオコンテンツを分類する分類器を含み、入力信号のダイアログを強化するダイアログ推定器402及びオーディオコントローラ404の例を示したブロック図である。一部の実施例において、前記分類器400は、入力オーディオの統計的または知覚的特性を分析し、入力されるオーディオ信号をカテゴリー別に分類するのに使用される。例えば、前記分類器400は、入力オーディオ信号がダイアログ、音楽、音響効果または消音であるかを決定することができ、決定された結果を出力することができる。他の例として、前記分類器400は、2007年9月14日に出願された米国特許出願番号、"Dialogue Enhancement Technique(ダイアログ増幅技術)"、代理人管理番号19819−120001に開示されたように、交差相互関係を用いてモノまたはモノ類似オーディオ信号を実質的に検出するのに使用される。この技術を用いて、ダイアログ増幅技術は、入力オーディオ信号が実質的に前記分類器400の出力に基づいたモノでない場合、入力オーディオ信号に適用される。
図4は、オーディオ信号に含まれたオーディオコンテンツを分類する分類器を含み、入力信号のダイアログを強化するダイアログ推定器402及びオーディオコントローラ404の例を示したブロック図である。一部の実施例において、前記分類器400は、入力オーディオの統計的または知覚的特性を分析し、入力されるオーディオ信号をカテゴリー別に分類するのに使用される。例えば、前記分類器400は、入力オーディオ信号がダイアログ、音楽、音響効果または消音であるかを決定することができ、決定された結果を出力することができる。他の例として、前記分類器400は、2007年9月14日に出願された米国特許出願番号、"Dialogue Enhancement Technique(ダイアログ増幅技術)"、代理人管理番号19819−120001に開示されたように、交差相互関係を用いてモノまたはモノ類似オーディオ信号を実質的に検出するのに使用される。この技術を用いて、ダイアログ増幅技術は、入力オーディオ信号が実質的に前記分類器400の出力に基づいたモノでない場合、入力オーディオ信号に適用される。
前記分類器400の出力は、ダイアログまたは音楽のような硬判定出力、あるいは、入力オーディオ信号にダイアログが含まれる可能性またはパーセンテージのような軟判定出力である。分類器の例として、ナイーブベイズ分類器、ベイジアンネットワーク、線形分類器、ベイジアンインタフェース、ファジー理論、ロジスティック回帰、神経ネットワーク、予測分析学、パーセプトロン、SVMs(support vector machines)などが含まれるが、これらに限定されない。
図5A乃至図5Cは、ダイアログ増幅プロセス内の分類器502の多様な構造可能性を示したブロック図である。図5Aにおいて、分類器502によって信号にダイアログが含まれたと決定される場合、504、506、508及び510の後続プロセス段階が行われ、信号にダイアログが含まれていないと決定される場合、前記後続プロセス段階は省略される。前記ユーザ調節情報が前記ダイアログよりもオーディオ信号のボリュームと関連している場合(例えば、前記ダイアログボリュームが維持される間、前記音楽ボリュームが大きくなる場合)、前記分類器502は、前記信号が音楽信号であると決定し、前記音楽ボリュームは、504、506、508、510の後続プロセス段階を通して調節される。
図5Bにおいて、前記分類器502は、前記分析フィルタバンク504の後に適用される。前記分類器502は、何れかの時点で周波数帯域(各サブバンド)によって分類された互いに異なる出力を有することができる。ユーザ調節情報によって再生される前記オーディオ信号の前記各特性(例えば、前記ダイアログボリュームの増幅、反響音の減衰など)が調節される。
図5Cにおいて、前記分類器502は、前記ダイアログ推定器506の後に適用される。この構造は、前記音楽信号が音像のセンターに集中されており、ダイアログ領域が認識されない場合に効果的である。例えば、前記分類器502は、前記推定される仮想センターチャネル信号が音声成分信号を含むか否かを決定することができる。前記仮想センターチャネル信号が音声成分信号を含む場合、ゲインは推定される仮想センターチャネル信号に適用される。一方、前記推定される仮想センターチャネル信号が音楽または他の非音性成分に分類される場合、ゲインは適用されない。その他に、分類器と関連した他の構造も可能である。
<自動ダイアログボリューム調節機能>
図6は、自動調節情報生成器608を含むダイアログ増幅システムを例示するブロック図である。図6において、説明の便宜のために、前記分類器のブロックは示していない。しかし、図4〜図5と同様に、図6に分類器が含まれることは自明である。前記分析フィルタバンク600と合成フィルタバンク606(逆変換)は、サブバンドが使用されない場合には含まれない。
図6は、自動調節情報生成器608を含むダイアログ増幅システムを例示するブロック図である。図6において、説明の便宜のために、前記分類器のブロックは示していない。しかし、図4〜図5と同様に、図6に分類器が含まれることは自明である。前記分析フィルタバンク600と合成フィルタバンク606(逆変換)は、サブバンドが使用されない場合には含まれない。
一部の実施例において、前記自動調節情報生成器608は、仮想センターチャネル信号と複数のチャネルオーディオ信号の比率を比較する。前記比率が第1臨界値より低い場合、前記仮想センターチャネル信号は増幅される。そして、前記比率が第2臨界値より高い場合、前記仮想センターチャネル信号は減衰される。例えば、前記P_dialogueが前記ダイアログ領域信号の前記レベルを表示し、P_inputが前記入力信号の前記レベルを表示する場合、前記ゲインは下記の方程式によって自動的に補正される。
ここで、前記P_ratioはP_dialogue/P_inputと定義され、P_thresholdは既に決定された値であり、G_dialogueは、前記ダイアログ領域(以前に説明されたG_centerと同じ概念である。)に適用されるゲイン値である。P_thresholdは、ユーザ(男性/女性)の趣向によって前記ユーザによって設定される。
他の実施例において、前記相対的なレベルは、下記の方程式を用いて既に決定された値より小さく維持される。
前記自動調節情報の生成は、再生されたオーディオ信号によってユーザが望む相対的な値のダイアログボリュームのみならず、前記背景音楽のボリューム、反響音のボリューム及び空間のキューを持続させる。例えば、前記ユーザは、騒々しい環境下では、前記伝送された信号より高いボリュームのダイアログを聴取することができ、静かな環境下では、前記伝送された信号と同じかそれより小さいボリュームでダイアログを聴取することができる。
<前記ダイアログのボリュームを効率的に調節する方法>
一部の実施例において、ユーザによって調節される情報を前記ユーザにフィードバックするコントローラ及び方法を説明する。例えば、説明の便宜のために、テレビジョン受信機のリモコンが記述される。しかし、前記開示された実施例は、オーディオ装置のリモコン、デジタルマルチメディア放送(DMB)プレーヤ、ポータブルメディアプレーヤ(PMP)、DVDプレーヤ、自動車オーディオプレーヤ、テレビジョン受信機及びオーディオ装置を調節する方法に適用されることが自明である。
一部の実施例において、ユーザによって調節される情報を前記ユーザにフィードバックするコントローラ及び方法を説明する。例えば、説明の便宜のために、テレビジョン受信機のリモコンが記述される。しかし、前記開示された実施例は、オーディオ装置のリモコン、デジタルマルチメディア放送(DMB)プレーヤ、ポータブルメディアプレーヤ(PMP)、DVDプレーヤ、自動車オーディオプレーヤ、テレビジョン受信機及びオーディオ装置を調節する方法に適用されることが自明である。
(独立的な調節装置の構造#1)
図7は、ダイアログボリュームを調整するための個別的な入力信号調整部(例えば、キー、ボタン)を含み、ダイアログボリュームを処理可能な一般的なテレビジョン受信機または他の装置との通信を行うリモコンを示した例示図である。
図7は、ダイアログボリュームを調整するための個別的な入力信号調整部(例えば、キー、ボタン)を含み、ダイアログボリュームを処理可能な一般的なテレビジョン受信機または他の装置との通信を行うリモコンを示した例示図である。
図7に示すように、前記リモコン700は、チャネルを制御(例えば、情報探索)可能なチャネル調節キー702と、主音量(例えば、全体信号のボリューム)を増加または減少させる主音量調節キー704とを含む。また、例えば、図4乃至図5を参照して説明したように、ダイアログ推定器を通して計算されるダイアログ信号のような特定のオーディオ信号のボリュームを増加または減少させるダイアログボリューム調節キー706を含む。
一部の実施例において、前記リモコン700は、2007年9月14日に出願された米国特許出願番号、"Dialogue Enhancement Technique"、代理人管理番号19819−120001に説明されたダイアログ増幅技術と共に使用される。この場合、前記リモコン700は、所定のゲインGd及び/またはゲインファクターg(i,k)を提供することができる。ダイアログボリュームを調節するのに個別的なダイアログボリューム調節キー706を使用することで、ユーザは、リモコン700を用いてダイアログのボリュームのみを便利かつ効率的に調節することができる。
図8は、オーディオ信号の主音量とダイアログボリュームを調節するプロセスを示したブロック図である。説明の便宜のために、図2〜図10を参照して説明したダイアログ増幅プロセス段階は省略され、必要な構成要素のみが図8に開示されている。例えば、図8の構造で、ダイアログ推定器800は、オーディオ信号を受信し、センター、左右のチャネル信号を推定する。前記センターチャネル(例えば、推定されたダイアログ領域)は増幅器810に入力され、左右のチャネルは合成器812,814を用いて増幅器810の出力信号にそれぞれ加えられる。前記合成器812,814の出力信号は、左右のチャネル(主音量)のボリュームをそれぞれ調節するために増幅器816,818にそれぞれ入力される。
一部の実施例において、前記ダイアログボリュームは、ダイアログゲインファクターG_Dialogueを出力するゲイン生成器806と結合されるダイアログボリューム調節キー802によって調節される。前記左右のボリュームは、マスターゲインG_Masterを提供するゲイン生成器808と結合される主音量調節キー804によって調節される。前記ゲインファクターG_DialogueとG_Masterは、ダイアログと主音量のゲインを調整するために増幅器810,816,818で使用される。
(独立的な調節装置の構造#2)
図9は、チャネル調節キー902、ボリューム調節キー904及びダイアログボリューム調節選択キー906を含むリモコン900を示した例示図である。前記ダイアログボリューム調節選択キー906は、ダイアログボリューム調節機能をターンオンまたはターンオフするときに使用される。前記ダイアログボリューム調節選択機能がターンオンされた場合、ダイアログ領域の信号ボリュームは、ボリューム調節キー904を用いて段階的な方法(例えば、漸進的に)で増加または減少する。例えば、ダイアログボリューム調節選択キー906が押されたり、他の方法で作動して前記ダイアログボリューム調節機能が動作した場合、前記ダイアログ領域信号は、既に設定されたゲイン値(例えば、6dB)に増加することができる。前記ダイアログボリューム調節選択キー906が再び押された場合、前記ボリューム調節キー904は主音量を調節するのに使用される。
図9は、チャネル調節キー902、ボリューム調節キー904及びダイアログボリューム調節選択キー906を含むリモコン900を示した例示図である。前記ダイアログボリューム調節選択キー906は、ダイアログボリューム調節機能をターンオンまたはターンオフするときに使用される。前記ダイアログボリューム調節選択機能がターンオンされた場合、ダイアログ領域の信号ボリュームは、ボリューム調節キー904を用いて段階的な方法(例えば、漸進的に)で増加または減少する。例えば、ダイアログボリューム調節選択キー906が押されたり、他の方法で作動して前記ダイアログボリューム調節機能が動作した場合、前記ダイアログ領域信号は、既に設定されたゲイン値(例えば、6dB)に増加することができる。前記ダイアログボリューム調節選択キー906が再び押された場合、前記ボリューム調節キー904は主音量を調節するのに使用される。
選択的に、前記ダイアログボリューム調節選択キー906がターンオンされた場合、図6を参照して説明したように、自動ダイアログ調節機能(例えば、自動調節情報生成器608)が動作する。前記ボリューム調節キー904が押されたり、他の方法で作動するとき、前記ダイアログゲインは、例えば、0、3dB、6dB、12dB、0の順に一定の単位毎に連続的に増加しながら循環するように作動することができる。このような調節方法によって、ユーザはダイアログボリュームを直観的に調節することができる。
前記リモコン900は、ダイアログボリュームを調節する装置の一例である。他の装置としてタッチ方式のディスプレイ装置を含むことができるが、これに限定されない。前記リモコン900は、ダイアログゲインを調節するために公知の通信チャネル(例えば、赤外線、ラジオ周波数、ケーブル)を用いて如何なるメディア装置(例えば、テレビジョンメディアプレーヤ、コンピュータ、携帯電話、セットトップボックス、DVDプレーヤ)とも通信することができる。
一部の実施例において、前記ダイアログボリューム調節選択キー906がターンオンされるとき、前記選択事項がスクリーンに出力されるか、ダイアログボリューム調節選択キー906の色相やシンボルが変化するか、ボリューム調節キー904の色相やシンボルが変化するか、及び/またはダイアログボリューム調節選択キー906の高さが変化するといった方法でボリューム調節キー904の機能変化をユーザに通知することができる。音または力フィードバック、あるいは、リモコン画面またはテレビジョンスクリーン、モニターなどにテキストメッセージや絵を表示するなどのリモコンでの選択をユーザに知らせる他の多様な方法も実現可能である。
上記のような調節方法の利点は、ユーザがボリュームを直観的に調節することができ、ダイアログ、背景音楽、反響音などのようなオーディオ信号の多様な特性を調節するために前記リモコンでボタンとキーとが増加するのを防止できるという点にある。多様なオーディオ信号が制御されるとき、調節されるべきオーディオ信号の特別な成分信号は前記ダイアログボリューム調節選択キー906を用いて選択される。このような成分信号は、ダイアログ信号、背景音楽、音響効果などを含むことができるが、これに限定されない。
<ユーザに調節情報を通知する方法>
(OSDを用いた方法#1)
下記の例で、テレビジョン受信機のOSD(On Screen Display)を説明する。しかし、本発明は、増幅器のOSD、PMPのOSD、増幅器/PMPのLCD表示窓などのように、装置の状態を出力可能なメディアの他の形態に適用されることは自明である。
(OSDを用いた方法#1)
下記の例で、テレビジョン受信機のOSD(On Screen Display)を説明する。しかし、本発明は、増幅器のOSD、PMPのOSD、増幅器/PMPのLCD表示窓などのように、装置の状態を出力可能なメディアの他の形態に適用されることは自明である。
図10は、一般的なテレビジョン受信機1002のOSD1000を示す。ダイアログボリューム内の変化は、数字で表現されるか、図12に示すようにバー1004の形態で表現される。一部の実施例において、ダイアログボリュームは、相対的なレベル(図10)や、図11に示すように主音量または他の成分信号との割合で出力される。
図11は、主音量とダイアログボリュームの図式的な客体(例えば、バー、ライン)をディスプレイする方法を例示する。図11の例において、前記バーは主音量を示し、バーの中間領域に描かれたラインの長さは、ダイアログボリュームのレベルを示す。例えば、バー1100内のライン1106は、ユーザにダイアログボリュームが調節されていないことを知らせる。ボリュームが調節されていない場合、前記ダイアログボリュームは主音源と同一の値を有するようになる。バー1102内の前記ライン1108は、ユーザに前記ダイアログボリュームが増加したことを知らせ、バー1104内の前記ライン1110は、ユーザに前記ダイアログボリュームが減少したことを知らせる。
図11を参照して記述された出力方法は、ユーザが前記ダイアログボリュームの相対的な値を知ることができるので、前記ダイアログボリュームをより効率的に調節できるという長所を有する。さらに、ダイアログボリュームバーが主音量バーと一緒に出力されるので、OSD1000を効率的かつ一貫的に実現することができる。
前記開示された実施例は、図11に示すようにバー形式の出力に制限されない。むしろ、主音量と調節されるべき特定のボリューム(例えば、前記ダイアログボリューム)を同時に出力するか、調節されるべきボリュームと主音量との間の相対的な対比を提供する何らかの図式的な客体が使用される。例えば、二つのバーが個別的にディスプレイされるか、互いに異なる色相及び/または広さを有するオーバーラップされたバーが一緒に出力される。
調節されるボリュームの形式の数が二つ以上である場合、前記ボリュームは、上記で直接説明した方法によって出力される。しかし、調節されるボリュームの形式の数が三つ以上である場合、ユーザの混同を防止するために、現在調節されるボリューム情報のみを出力する方法が使用される。例えば、反響音ボリューム及びダイアログボリュームが調節されるが、ダイアログが現在の大きさに維持される間に反響音のボリュームのみが調節される場合には、例えば、上述した方法を用いて主音量と反響音のボリュームのみが表示される。本例において、前記主音量と反響音のボリュームは、互いに異なる色相または形状を有し、直観的に確認されることがより好ましい。
(OSDを用いた方法#2)
図12は、装置1200(例えば、テレビジョン受信機)のOSD1202にダイアログボリュームを表示する方法の例を示した図である。一部の実施例において、ダイアログレベル情報1206は、ボリュームバー1204と別個に出力される。前記ダイアログレベル情報1206は、多様なサイズ、フォント、色相、明るさレベル、フラッシングまたは他の視覚的装飾または標識で出力される。このような出力方法は、図9を参照して説明したように、前記ボリュームが段階的に循環されるように調節されるとき、より効果的に使用される。一部の実施例において、ダイアログボリュームは、相対的なレベルや、前記主音量または他の成分信号との比として出力される。
図12は、装置1200(例えば、テレビジョン受信機)のOSD1202にダイアログボリュームを表示する方法の例を示した図である。一部の実施例において、ダイアログレベル情報1206は、ボリュームバー1204と別個に出力される。前記ダイアログレベル情報1206は、多様なサイズ、フォント、色相、明るさレベル、フラッシングまたは他の視覚的装飾または標識で出力される。このような出力方法は、図9を参照して説明したように、前記ボリュームが段階的に循環されるように調節されるとき、より効果的に使用される。一部の実施例において、ダイアログボリュームは、相対的なレベルや、前記主音量または他の成分信号との比として出力される。
図13に示すように、ダイアログボリュームの分離指示器1306は、装置1300のOSD1302で調節されるボリュームの形態を出力する代わりに、またはこれに加えて使用される。このような出力方式の長所は、スクリーンで見られるコンテンツが、ディスプレイされるボリューム情報によって受ける影響(例えば、不明瞭な)が比較的少ないことにある。
<調節装置の出力>
一部の実施例において、前記ダイアログボリューム調節選択キー906(図9)が選択されるとき、ボリュームキーの機能変化をユーザに通知するために、前記ダイアログボリューム調節選択キー906の色相が変化する。選択的に、前記ダイアログボリューム調節選択キー906が活性化されるとき、前記ボリューム調節キー904の色相や高さを変化させることが利用される。
一部の実施例において、前記ダイアログボリューム調節選択キー906(図9)が選択されるとき、ボリュームキーの機能変化をユーザに通知するために、前記ダイアログボリューム調節選択キー906の色相が変化する。選択的に、前記ダイアログボリューム調節選択キー906が活性化されるとき、前記ボリューム調節キー904の色相や高さを変化させることが利用される。
<デジタルテレビジョンシステムの例>
図14は、図1〜図13を参照して記述した機能とプロセスが行われるデジタルテレビジョンシステム1400の例を示したブロック図である。デジタルテレビジョン(DTV)は、デジタル信号の手段によって動画像及び音を受信して放送する遠隔通信システムである。デジタルテレビジョンは、デジタル的に圧縮され、特別にデザインされたテレビジョンセット、セットトップボックスが備わった標準受信機、またはテレビジョンカードが備わったPCによって復号化されることが要求されるデジタル変調データを使用する。図14のシステムがデジタルテレビジョンシステムに関するものであるが、前記ダイアログ増幅のために開示された各実施例は、ダイアログ増幅が必要なアナログテレビジョンシステムまたはその他のシステムに適用される。
図14は、図1〜図13を参照して記述した機能とプロセスが行われるデジタルテレビジョンシステム1400の例を示したブロック図である。デジタルテレビジョン(DTV)は、デジタル信号の手段によって動画像及び音を受信して放送する遠隔通信システムである。デジタルテレビジョンは、デジタル的に圧縮され、特別にデザインされたテレビジョンセット、セットトップボックスが備わった標準受信機、またはテレビジョンカードが備わったPCによって復号化されることが要求されるデジタル変調データを使用する。図14のシステムがデジタルテレビジョンシステムに関するものであるが、前記ダイアログ増幅のために開示された各実施例は、ダイアログ増幅が必要なアナログテレビジョンシステムまたはその他のシステムに適用される。
一部の実施例において、前記システム1400は、インタフェース1402、デモジュレータ1404、デコーダ1406、オーディオ/ビデオ出力部1408、ユーザ入力インタフェース1410、一つまたはそれ以上のプロセッサ1412(例えば、Intel(登録商標) processors)、一つまたはそれ以上のコンピュータ読取可能媒体1414(例えば、RAM、ROM、SDRAM、ハードディスク、光ディスク、フラッシュメモリ、SANなど)を含むことができる。このような各要素は、一つまたはそれ以上の通信チャネル1416(例えば、バス)と結合される。一部の実施例において、前記インタフェース1402は、オーディオ信号または結合されたオーディオ/ビデオ信号を獲得するための多様な回路を含む。例えば、アナログテレビジョンシステムで、インタフェースは、アンテナ装置、チューナ、ミキサー、ラジオ周波数(RF)増幅器、ローカルオシレーター、IF(intermediate frequency)増幅器、一つまたはそれ以上のフィルタ、デモジュレータ、オーディオ増幅器などを含むことができる。これに付加または限定される構成要素を有する実施例を含むシステム1400の他の実施例が実現可能である。
前記チューナ1402は、ビデオとオーディオコンテンツを含むデジタルテレビジョン信号を受信するデジタルテレビジョンチューナである。前記デモジュレータ1404は、前記デジタルテレビジョン信号からビデオ及びオーディオ信号を抽出する。ビデオとオーディオ信号が符号化された場合(例えば、MPEG符号化)、前記デコーダ1406は、その信号を復号化する。前記オーディオ/ビデオ出力はビデオを出力し、オーディオを再生可能な如何なる装置(例えば、テレビジョンディスプレイ、コンピュータモニタ、LCD、スピーカ、オーディオ・システム)でも出力される。
一部の実施例において、前記ユーザ入力インタフェースは、リモコン(例えば、図9のリモコン900)から生成された赤外線通信または無線通信信号を受信して復号化する回路素子及び/またはソフトウェアを含むことができる。
一部の実施例において、前記一つまたはそれ以上のプロセッサは、図1〜図13を参照して説明したように、前記特性と機能1418,1420,1422及び1426を行う前記コンピュータ読取可能媒体1414に保存されているコードを実行することができる。
前記コンピュータ読取可能媒体は、オペレーティングシステム1418、分析/合成フィルタバンク1420、ダイアログ推定器1422、分類器1424及び自動情報生成器1426をさらに含む。前記"コンピュータ読取可能媒体"は、不揮発性媒体(例えば、光学または磁気ディスク)、揮発性媒体(例えば、メモリ)及び伝送媒体を含むが、これに限定されることなく、実行のためにプロセッサ1412に命令を提供するのに関係する媒体を意味する。伝送媒体は、同軸ケーブル、銅線及び光ファイバを含むが、これに限定されることはない。伝送媒体は、前記音波、光波または高周波の形態を受信することができる。
前記オペレーティングシステム1418は、マルチユーザ、マルチプロセッシング、マルチタスキング、マルチスレッディング、リアルタイムなどが可能である。前記オペレーティングシステム1418は、前記ユーザ入力インタフェース1410からの入力信号認識と、トラック維持、及びコンピュータ読取可能媒体1414(例えば、メモリまたは保存装置)でのファイルまたはディレクトリ管理と、周辺装置の制御と、前記一つまたはそれ以上の通信チャネル1416の疎通管理とを含むが、これに限定されることなく、上記のような基本的な機能を行う。
上記のように説明した特徴は、少なくとも一つ以上の入力装置と出力装置とを有するデータ保存システムからデータ及び命令を受信し、データ及び命令を伝送する少なくとも一つ以上のプログラム化可能なプロセッサを含むプログラミングシステムで実行される一つまたはそれ以上のコンピュータプログラムで好適に実施される。コンピュータプログラムは、特定の行為を行うか、特定の結果をもたらすコンピュータで直接または間接的に使用される命令の集合である。コンピュータプログラムは、コンパイルまたは機械語を含む如何なるプログラミング言語(例えば、Objective−C、Java(登録商標))の形態でも書き込まれ、独立したプログラムと同一の形態、モジュール、コンポーネント及びサブルーチンの形態、またはコンピュータ環境下でユーザに適した他のユニットを含む如何なる形態にも構成される。
前記命令のプログラムの遂行のための適正なプロセッサは、例えば、何らかの種類のコンピュータの一般的または特別な目的のマイクロプロセッサのみならず、単独プロセッサ、マルチプルプロセッサまたはコアを含む。一般的に、プロセッサは、ROM、RAMまたはこれら二つから命令及びデータを受信する。前記コンピュータの必須要素は、命令を行うプロセッサと、命令及びデータを保存するための一つまたはそれ以上のメモリである。一般的に、コンピュータは、データファイルを保存するための一つまたはそれ以上の大容量保存装置を含むか、通信して動作可能に連結される。このような保存装置は、内部ハードディスクとデータ削除可能なディスクのような磁気ディスク、磁気光ディスク及び光ディスクを含む。コンピュータプログラム命令及びデータを実体的に具体化するのに適した保存装置は、不揮発性メモリの全ての形態、例えば、EPROM、EEPROM、フラッシュメモリ装置のような半導体メモリ装置、内部ハードディスクとデータ削除可能なディスクのような磁気ディスク、磁気光ディスク、及びCD−ROM、DVD−ROMディスクを含む。前記プロセッサとメモリは、ASIC(application−specific integrated circuits)によってまたはASICと一体化して補強される。
ユーザとの相互作用を提供するために、前記各特性は、前記ユーザに情報を出力するCRTまたはLCDモニターのようなディスプレイ装置と、ユーザがコンピュータに命令を入力できるキーボード及びマウスまたはトラックボールのようなポインティング装置とが備わったコンピュータで実行される。
前記各特性は、データサーバのようなバックエンドコンポーネントを含むか、アプリケーションサーバまたはインターネットサーバのようなミドルウェアーコンポーネントを含むか、グラフィックユーザインタフェース、インターネットブラウザまたはこれらの結合を備えるクライアントコンピュータのようなフロントエンドコンポーネントを含むコンピュータシステムで実行される。前記システムの各成分は、通信ネットワークのようなデジタルデータ通信の如何なる形態または媒体とも連結される。通信ネットワークの例として、LAN、WANなどを含み、前記コンピュータとネットワークはインターネットを構成する。
前記コンピュータシステムは、クライアントとサーバを含むことができる。クライアントとサーバは、一般的に互いに遠く離れており、概してネットワークを通して互いに通信する。前記クライアントとサーバの関係は、それぞれのコンピュータで動作し、互いにクライアント−サーバ関係を有するコンピュータプログラムによって生じる。
以上、多数の実施例を説明したが、これに限定されることなく、多様な変形例が可能であることを理解すべきである。例えば、一つまたはそれ以上の実施例を構成する構成要素は、他の実施例を形成するために結合、省略、変形または追加される。他の例として、図面に描写された論理フローは、所望の結果を得るために示された特別な順序や順次的な順序が要求されない。さらに、説明されたフローで他の段階が追加または省略されることもあり、説明されたシステムで他の成分が追加または省略されることもある。したがって、他の実施例も、下記の請求項の権利範囲内に含まれる。
Claims (25)
- 第1の複数チャネルオーディオ信号を獲得する段階と、
ゲインを獲得する段階と、
前記第1の複数チャネルオーディオ信号がセンターチャネル信号を含む場合、前記ゲインによって前記センターチャネル信号の現在のゲインを修正する段階と、
前記第1の複数チャネルオーディオ信号がセンターチャネル信号を含まない場合、仮想センターチャネル信号を推定し、前記ゲインによって前記仮想センターチャネル信号にゲインを適用する段階と、
を含むことを特徴とする方法。 - 前記仮想センターチャネル信号を推定する段階は、
前記第1の複数チャネルオーディオ信号の左右のチャネルの間の相関度、前記第1の複数チャネルオーディオ信号のレベル及び前記第1の複数チャネルオーディオ信号のスペクトル成分のうち少なくとも何れか一つを用いる、請求項1に記載の方法。 - 前記仮想センターチャネル信号を推定し、前記仮想センターチャネル信号にゲインを適用する段階は、
前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合する段階と、
前記結合された左右のチャネル信号をフィルタリングする段階と、
前記フィルタリングされ、結合された左右のチャネル信号の現在のゲインを前記ゲインによって修正する段階と、
をさらに含む、請求項1または2に記載の方法。 - 前記仮想センターチャネル信号を推定し、前記仮想センターチャネル信号にゲインを適用する段階は、
前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合する段階と、
前記ゲインによって前記結合された左右のチャネル信号の現在のゲインを修正する段階と、
前記修正され、結合された左右のチャネル信号をフィルタリングする段階と、
をさらに含む、請求項1または2に記載の方法。 - 仮想センターチャネル信号を推定する段階は、
前記第1の複数チャネルオーディオ信号をフィルタリングし、左右のチャネル信号を提供する段階と、
前記左右のチャネル信号を周波数ドメインに変換する段階と、
前記変換された左右のチャネル信号を用いて仮想センターチャネル信号を推定する段階と、
をさらに含む、請求項1または2に記載の方法。 - 前記修正されたチャネル信号または前記修正された仮想センターチャネル信号と前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合し、第2オーディオ信号を提供する段階をさらに含む、請求項1乃至5のうち何れか1項に記載の方法。
- 前記第1の複数チャネルオーディオ信号は、5.1、6.1及び7.1チャネル信号のうちの一つである、請求項1乃至6のうち何れか1項に記載の方法。
- 前記第1の複数チャネルオーディオ信号を周波数サブバンド別に分割する段階と、
前記サブバンドによって前記仮想センターチャネル信号を推定する段階と、
をさらに含む、請求項1乃至7のうち何れか1項に記載の方法。 - 前記仮想センターチャネル信号を推定する段階は、
前記第1の複数チャネルオーディオ信号の一つ以上の成分信号を分類する段階と、
前記分類に基づいて前記仮想センターチャネル信号にゲインを適用する段階と、
をさらに含む、請求項1乃至8のうち何れか1項に記載の方法。 - 前記推定された仮想センターチャネル信号の一つ以上の成分信号を分類し、前記推定された仮想センターチャネル信号が音声成分信号を含むか否かを決定する段階と、
前記推定された仮想センターチャネル信号が音声成分信号を含む場合、前記仮想センターチャネル信号を修正する段階と、
をさらに含む、請求項1乃至9のうち何れか1項に記載の方法。 - 前記仮想センターチャネル信号と前記複数のチャネルオーディオ信号の比率を比較する段階と、
前記比率が第1臨界値より低い場合、前記仮想センターチャネル信号を増幅する段階と、
をさらに含む、請求項1乃至10のうち何れか1項に記載の方法。 - 第1の複数チャネルオーディオ信号及びゲインを獲得するために構成される少なくとも一つ以上のインタフェースと、
前記インタフェースと連結され、仮想センターチャネル信号を推定し、前記ゲインによって前記仮想センターチャネル信号にゲインを適用するように構成されるプロセッサと、
を含むことを特徴とする装置。 - 前記仮想センターチャネル信号を推定する場合において、
前記第1の複数チャネルオーディオ信号の左右のチャネルの間の相関度、前記第1の複数チャネルオーディオ信号のレベル及び前記第1の複数チャネルオーディオ信号のスペクトル成分のうち少なくとも何れか一つをさらに用いる、請求項12に記載の装置。 - 前記仮想センターチャネル信号を推定し、前記仮想センターチャネル信号にゲインを適用する場合において、さらに、
前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合し、
結合された前記左右のチャネル信号をフィルタリングし、
前記ゲインによって前記フィルタリングされ、結合された左右のチャネル信号の現在のゲインを修正する、請求項12または13に記載の装置。 - 前記仮想センターチャネル信号を推定し、前記仮想センターチャネル信号にゲインを適用する場合において、さらに、
前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合し、
前記ゲインによって前記結合された左右のチャネル信号の現在のゲインを修正し、
前記修正され、結合された左右のチャネル信号をフィルタリングする、請求項12または13に記載の装置。 - 前記プロセッサは、
前記第1の複数チャネルオーディオ信号をフィルタリングして左右のチャネル信号を提供し、
前記左右のチャネル信号を周波数ドメインに変換し、
前記変換された左右のチャネル信号を用いて仮想センターチャネル信号を推定するように形成される、請求項12または13に記載の装置。 - 前記プロセッサは、
前記修正されたチャネル信号または前記修正された仮想センターチャネル信号と前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合し、第2オーディオ信号を提供するようにさらに形成される、請求項12乃至16のうち何れか1項に記載の装置。 - 前記第1の複数チャネルオーディオ信号は、5.1、6.1及び7.1チャネル信号のうち一つである、請求項12乃至17のうち何れか1項に記載の装置。
- 前記第1の複数チャネルオーディオ信号を周波数サブバンド別に分割するように形成されるフィルタバンクをさらに含み、
前記プロセッサは、前記サブバンドによって前記仮想センターチャネル信号を推定する、請求項12乃至18のうち何れか1項に記載の装置。 - 前記第1の複数チャネルオーディオ信号の一つ以上の成分信号を分類するように形成される分類器をさらに含み、
前記プロセッサは、前記分類に基づいて前記仮想センター信号にゲインを適用する、請求項12乃至19のうち何れか1項に記載の装置。 - 前記仮想センターチャネル信号の一つ以上の成分信号を分類し、前記仮想センターチャネル信号が正確に推定されたか否かを決定する分類器をさらに含む、請求項12乃至20のうち何れか1項に記載の装置。
- 前記仮想センターチャネル信号と前記複数のチャネルオーディオ信号の比率を自動的に比較し、
前記比率が第1臨界値より低い場合、前記仮想センターチャネル信号を増幅するように形成される自動コントロール情報生成器をさらに含む、請求項12乃至21のうち何れか1項に記載の装置。 - 第1の複数チャネルオーディオ信号を獲得する段階と、
ゲインを表す入力を獲得する段階と、
前記第1の複数チャネルオーディオ信号がセンターチャネル信号を含む場合、前記ゲインによって前記センターチャネル信号の現在のゲインを修正する段階と、
前記第1の複数チャネルオーディオ信号がセンターチャネル信号を含まない場合、仮想センターチャネル信号を推定し、前記ゲインによって前記仮想センターチャネル信号にゲインを適用する段階と、
を行うようにプロセッサを制御する命令を含むコンピュータ読取可能媒体。 - 前記修正されたチャネル信号または前記修正された仮想センターチャネル信号と前記第1の複数チャネルオーディオ信号の左右のチャネル信号を結合し、第2オーディオ信号を提供する段階をさらに含んで行われる、請求項23に記載のコンピュータ読取可能媒体。
- 複数のチャネルオーディオ信号を獲得する手段と、
ゲインを表す入力信号を獲得する手段と、
前記複数のチャネルオーディオ信号がセンターチャネル信号を含む場合、前記ゲインによって前記センターチャネル信号のゲインを修正する手段と、
前記複数のチャネルオーディオ信号がセンターチャネル信号を含まない場合、仮想センターチャネル信号を推定する手段と、
前記ゲインによって前記仮想センターチャネル信号のゲインを修正する手段と、
を含むことを特徴とするシステム。
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US84480606P | 2006-09-14 | 2006-09-14 | |
| US88459407P | 2007-01-11 | 2007-01-11 | |
| US94326807P | 2007-06-11 | 2007-06-11 | |
| PCT/IB2007/003789 WO2008035227A2 (en) | 2006-09-14 | 2007-09-14 | Dialogue enhancement techniques |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2010518655A true JP2010518655A (ja) | 2010-05-27 |
Family
ID=38853226
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009527920A Pending JP2010515290A (ja) | 2006-09-14 | 2007-09-14 | ダイアログエンハンスメント技術のコントローラ及びユーザインタフェース |
| JP2009527747A Pending JP2010504008A (ja) | 2006-09-14 | 2007-09-14 | ダイアログ増幅技術 |
| JP2009527925A Pending JP2010518655A (ja) | 2006-09-14 | 2007-09-14 | ダイアログ増幅技術 |
Family Applications Before (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009527920A Pending JP2010515290A (ja) | 2006-09-14 | 2007-09-14 | ダイアログエンハンスメント技術のコントローラ及びユーザインタフェース |
| JP2009527747A Pending JP2010504008A (ja) | 2006-09-14 | 2007-09-14 | ダイアログ増幅技術 |
Country Status (11)
| Country | Link |
|---|---|
| US (3) | US8238560B2 (ja) |
| EP (3) | EP2064915B1 (ja) |
| JP (3) | JP2010515290A (ja) |
| KR (3) | KR101061132B1 (ja) |
| AT (2) | ATE487339T1 (ja) |
| AU (1) | AU2007296933B2 (ja) |
| BR (1) | BRPI0716521A2 (ja) |
| CA (1) | CA2663124C (ja) |
| DE (1) | DE602007010330D1 (ja) |
| MX (1) | MX2009002779A (ja) |
| WO (3) | WO2008035227A2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017533459A (ja) * | 2014-12-12 | 2017-11-09 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | マルチチャネルオーディオ信号内の音声成分を強調するための信号処理装置 |
| JP2019161672A (ja) * | 2019-06-27 | 2019-09-19 | マクセル株式会社 | システム |
Families Citing this family (59)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2008035227A2 (en) | 2006-09-14 | 2008-03-27 | Lg Electronics Inc. | Dialogue enhancement techniques |
| AU2009274456B2 (en) | 2008-04-18 | 2011-08-25 | Dolby Laboratories Licensing Corporation | Method and apparatus for maintaining speech audibility in multi-channel audio with minimal impact on surround experience |
| CN102113315B (zh) * | 2008-07-29 | 2013-03-13 | Lg电子株式会社 | 用于处理音频信号的方法和装置 |
| JP4826625B2 (ja) | 2008-12-04 | 2011-11-30 | ソニー株式会社 | 音量補正装置、音量補正方法、音量補正プログラムおよび電子機器 |
| JP4844622B2 (ja) * | 2008-12-05 | 2011-12-28 | ソニー株式会社 | 音量補正装置、音量補正方法、音量補正プログラムおよび電子機器、音響装置 |
| JP5120288B2 (ja) | 2009-02-16 | 2013-01-16 | ソニー株式会社 | 音量補正装置、音量補正方法、音量補正プログラムおよび電子機器 |
| JP5564803B2 (ja) * | 2009-03-06 | 2014-08-06 | ソニー株式会社 | 音響機器及び音響処理方法 |
| JP5577787B2 (ja) * | 2009-05-14 | 2014-08-27 | ヤマハ株式会社 | 信号処理装置 |
| JP2010276733A (ja) * | 2009-05-27 | 2010-12-09 | Sony Corp | 情報表示装置、情報表示方法および情報表示プログラム |
| WO2011039413A1 (en) * | 2009-09-30 | 2011-04-07 | Nokia Corporation | An apparatus |
| WO2011095913A1 (en) | 2010-02-02 | 2011-08-11 | Koninklijke Philips Electronics N.V. | Spatial sound reproduction |
| TWI459828B (zh) * | 2010-03-08 | 2014-11-01 | Dolby Lab Licensing Corp | 在多頻道音訊中決定語音相關頻道的音量降低比例的方法及系統 |
| US8538035B2 (en) | 2010-04-29 | 2013-09-17 | Audience, Inc. | Multi-microphone robust noise suppression |
| US8473287B2 (en) | 2010-04-19 | 2013-06-25 | Audience, Inc. | Method for jointly optimizing noise reduction and voice quality in a mono or multi-microphone system |
| US8781137B1 (en) | 2010-04-27 | 2014-07-15 | Audience, Inc. | Wind noise detection and suppression |
| JP5736124B2 (ja) * | 2010-05-18 | 2015-06-17 | シャープ株式会社 | 音声信号処理装置、方法、プログラム、及び記録媒体 |
| CN102907120B (zh) * | 2010-06-02 | 2016-05-25 | 皇家飞利浦电子股份有限公司 | 用于声音处理的系统和方法 |
| US8447596B2 (en) | 2010-07-12 | 2013-05-21 | Audience, Inc. | Monaural noise suppression based on computational auditory scene analysis |
| US8761410B1 (en) * | 2010-08-12 | 2014-06-24 | Audience, Inc. | Systems and methods for multi-channel dereverberation |
| EP2609592B1 (en) * | 2010-08-24 | 2014-11-05 | Dolby International AB | Concealment of intermittent mono reception of fm stereo radio receivers |
| US8611559B2 (en) | 2010-08-31 | 2013-12-17 | Apple Inc. | Dynamic adjustment of master and individual volume controls |
| US9620131B2 (en) | 2011-04-08 | 2017-04-11 | Evertz Microsystems Ltd. | Systems and methods for adjusting audio levels in a plurality of audio signals |
| US20120308042A1 (en) * | 2011-06-01 | 2012-12-06 | Visteon Global Technologies, Inc. | Subwoofer Volume Level Control |
| FR2976759B1 (fr) * | 2011-06-16 | 2013-08-09 | Jean Luc Haurais | Procede de traitement d'un signal audio pour une restitution amelioree. |
| JP5591423B1 (ja) | 2013-03-13 | 2014-09-17 | パナソニック株式会社 | オーディオ再生装置およびオーディオ再生方法 |
| US9729992B1 (en) | 2013-03-14 | 2017-08-08 | Apple Inc. | Front loudspeaker directivity for surround sound systems |
| CN104683933A (zh) * | 2013-11-29 | 2015-06-03 | 杜比实验室特许公司 | 音频对象提取 |
| EP2945303A1 (en) * | 2014-05-16 | 2015-11-18 | Thomson Licensing | Method and apparatus for selecting or removing audio component types |
| JP6683618B2 (ja) * | 2014-09-08 | 2020-04-22 | 日本放送協会 | 音声信号処理装置 |
| UA120372C2 (uk) | 2014-10-02 | 2019-11-25 | Долбі Інтернешнл Аб | Спосіб декодування і декодер для посилення діалогу |
| MX2017010433A (es) * | 2015-02-13 | 2018-06-06 | Fideliquest Llc | Complementacion de audio digital. |
| JP6436573B2 (ja) * | 2015-03-27 | 2018-12-12 | シャープ株式会社 | 受信装置、受信方法、及びプログラム |
| CA3281204A1 (en) * | 2015-06-17 | 2025-10-31 | Sony Corporation | Transmitting device, transmitting method, receiving device, and receiving method |
| US10251016B2 (en) | 2015-10-28 | 2019-04-02 | Dts, Inc. | Dialog audio signal balancing in an object-based audio program |
| US10225657B2 (en) | 2016-01-18 | 2019-03-05 | Boomcloud 360, Inc. | Subband spatial and crosstalk cancellation for audio reproduction |
| EP4307718A3 (en) | 2016-01-19 | 2024-04-10 | Boomcloud 360, Inc. | Audio enhancement for head-mounted speakers |
| CN108702582B (zh) | 2016-01-29 | 2020-11-06 | 杜比实验室特许公司 | 用于双耳对话增强的方法和装置 |
| GB2547459B (en) * | 2016-02-19 | 2019-01-09 | Imagination Tech Ltd | Dynamic gain controller |
| US10375489B2 (en) * | 2017-03-17 | 2019-08-06 | Robert Newton Rountree, SR. | Audio system with integral hearing test |
| US10258295B2 (en) | 2017-05-09 | 2019-04-16 | LifePod Solutions, Inc. | Voice controlled assistance for monitoring adverse events of a user and/or coordinating emergency actions such as caregiver communication |
| US10313820B2 (en) | 2017-07-11 | 2019-06-04 | Boomcloud 360, Inc. | Sub-band spatial audio enhancement |
| EP3662470B1 (en) | 2017-08-01 | 2021-03-24 | Dolby Laboratories Licensing Corporation | Audio object classification based on location metadata |
| US10511909B2 (en) * | 2017-11-29 | 2019-12-17 | Boomcloud 360, Inc. | Crosstalk cancellation for opposite-facing transaural loudspeaker systems |
| US10764704B2 (en) | 2018-03-22 | 2020-09-01 | Boomcloud 360, Inc. | Multi-channel subband spatial processing for loudspeakers |
| CN108877787A (zh) * | 2018-06-29 | 2018-11-23 | 北京智能管家科技有限公司 | 语音识别方法、装置、服务器及存储介质 |
| US11335357B2 (en) * | 2018-08-14 | 2022-05-17 | Bose Corporation | Playback enhancement in audio systems |
| FR3087606B1 (fr) * | 2018-10-18 | 2020-12-04 | Connected Labs | Decodeur televisuel ameliore |
| US10587439B1 (en) * | 2019-04-12 | 2020-03-10 | Rovi Guides, Inc. | Systems and methods for modifying modulated signals for transmission |
| US10841728B1 (en) | 2019-10-10 | 2020-11-17 | Boomcloud 360, Inc. | Multi-channel crosstalk processing |
| EP4128223B1 (en) * | 2020-04-02 | 2025-01-01 | Dolby Laboratories Licensing Corporation | Systems and methods for enhancing audio in varied environments |
| EP3935636B1 (en) * | 2020-05-15 | 2022-12-07 | Dolby International AB | Method and device for improving dialogue intelligibility during playback of audio data |
| US11288036B2 (en) | 2020-06-03 | 2022-03-29 | Microsoft Technology Licensing, Llc | Adaptive modulation of audio content based on background noise |
| US12205582B2 (en) | 2020-10-08 | 2025-01-21 | Mastercard International Incorporated | System and method for implementing a virtual caregiver |
| US11410655B1 (en) | 2021-07-26 | 2022-08-09 | LifePod Solutions, Inc. | Systems and methods for managing voice environments and voice routines |
| US11404062B1 (en) | 2021-07-26 | 2022-08-02 | LifePod Solutions, Inc. | Systems and methods for managing voice environments and voice routines |
| CN114023358B (zh) * | 2021-11-26 | 2023-07-18 | 掌阅科技股份有限公司 | 对话小说的音频生成方法、电子设备及存储介质 |
| US20240406651A1 (en) * | 2023-06-02 | 2024-12-05 | Apple Inc. | Adjustments for Dialogue Enhancement Based on Volume |
| CN119889331A (zh) * | 2023-10-24 | 2025-04-25 | 哈曼国际工业有限公司 | 智能动态语音增强的方法及系统 |
| US20250191593A1 (en) * | 2023-12-08 | 2025-06-12 | Samsung Electronics Co., Ltd. | Audio Codec Bitrate Using Directional Loudness |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH03285500A (ja) * | 1990-03-31 | 1991-12-16 | Mazda Motor Corp | 音響装置 |
| JPH04249484A (ja) * | 1991-02-06 | 1992-09-04 | Hitachi Ltd | テレビジョン受信機用音声回路 |
| JPH05183997A (ja) * | 1992-01-04 | 1993-07-23 | Matsushita Electric Ind Co Ltd | 効果音付加自動判別装置 |
| JPH0670400A (ja) * | 1992-08-19 | 1994-03-11 | Nec Corp | 前方3chマトリクス・サラウンド・プロセッサ |
| JPH06253398A (ja) * | 1993-01-27 | 1994-09-09 | Philips Electron Nv | オーディオ信号処理装置 |
| JPH07115606A (ja) * | 1993-10-19 | 1995-05-02 | Sharp Corp | 音声モード自動切替装置 |
| JP2001245237A (ja) * | 2000-02-28 | 2001-09-07 | Victor Co Of Japan Ltd | 放送受信装置 |
| JP2002078100A (ja) * | 2000-09-05 | 2002-03-15 | Nippon Telegr & Teleph Corp <Ntt> | ステレオ音響信号処理方法及び装置並びにステレオ音響信号処理プログラムを記録した記録媒体 |
| JP2003084790A (ja) * | 2001-09-17 | 2003-03-19 | Matsushita Electric Ind Co Ltd | 台詞成分強調装置 |
| JP2005086462A (ja) * | 2003-09-09 | 2005-03-31 | Victor Co Of Japan Ltd | オーディオ信号再生装置のボーカル音帯域強調回路 |
Family Cites Families (52)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| NL278131A (ja) * | 1961-05-08 | 1900-01-01 | ||
| GB1522599A (en) | 1974-11-16 | 1978-08-23 | Dolby Laboratories Inc | Centre channel derivation for stereophonic cinema sound |
| NL8200555A (nl) * | 1982-02-13 | 1983-09-01 | Rotterdamsche Droogdok Mij | Spaninrichting. |
| US4897878A (en) * | 1985-08-26 | 1990-01-30 | Itt Corporation | Noise compensation in speech recognition apparatus |
| JPH03118519A (ja) | 1989-10-02 | 1991-05-21 | Hitachi Ltd | 液晶表示素子 |
| JPH03118519U (ja) * | 1990-03-20 | 1991-12-06 | ||
| US5142403A (en) | 1991-04-01 | 1992-08-25 | Xerox Corporation | ROS scanner incorporating cylindrical mirror in pre-polygon optics |
| JPH05292592A (ja) | 1992-04-10 | 1993-11-05 | Toshiba Corp | 音質補正装置 |
| US5572591A (en) * | 1993-03-09 | 1996-11-05 | Matsushita Electric Industrial Co., Ltd. | Sound field controller |
| JPH06335093A (ja) * | 1993-05-21 | 1994-12-02 | Fujitsu Ten Ltd | 音場拡大装置 |
| JP3118519B2 (ja) | 1993-12-27 | 2000-12-18 | 日本冶金工業株式会社 | 排気ガス浄化用メタルハニカム担体及びその製造方法 |
| JPH08222979A (ja) | 1995-02-13 | 1996-08-30 | Sony Corp | オーディオ信号処理装置、およびオーディオ信号処理方法、並びにテレビジョン受像機 |
| US5737331A (en) * | 1995-09-18 | 1998-04-07 | Motorola, Inc. | Method and apparatus for conveying audio signals using digital packets |
| KR100206333B1 (ko) | 1996-10-08 | 1999-07-01 | 윤종용 | 두개의 스피커를 이용한 멀티채널 오디오 재생장치및 방법 |
| US5912976A (en) * | 1996-11-07 | 1999-06-15 | Srs Labs, Inc. | Multi-channel audio enhancement system for use in recording and playback and methods for providing same |
| US7085387B1 (en) * | 1996-11-20 | 2006-08-01 | Metcalf Randall B | Sound system and method for capturing and reproducing sounds originating from a plurality of sound sources |
| US7016501B1 (en) * | 1997-02-07 | 2006-03-21 | Bose Corporation | Directional decoding |
| US6243476B1 (en) * | 1997-06-18 | 2001-06-05 | Massachusetts Institute Of Technology | Method and apparatus for producing binaural audio for a moving listener |
| US5890125A (en) | 1997-07-16 | 1999-03-30 | Dolby Laboratories Licensing Corporation | Method and apparatus for encoding and decoding multiple audio channels at low bit rates using adaptive selection of encoding method |
| US6111755A (en) * | 1998-03-10 | 2000-08-29 | Park; Jae-Sung | Graphic audio equalizer for personal computer system |
| JPH11289600A (ja) | 1998-04-06 | 1999-10-19 | Matsushita Electric Ind Co Ltd | 音響装置 |
| WO1999053721A1 (en) * | 1998-04-14 | 1999-10-21 | Hearing Enhancement Company, L.L.C. | Improved hearing enhancement system and method |
| US6311155B1 (en) * | 2000-02-04 | 2001-10-30 | Hearing Enhancement Company Llc | Use of voice-to-remaining audio (VRA) in consumer applications |
| AU750605B2 (en) * | 1998-04-14 | 2002-07-25 | Hearing Enhancement Company, Llc | User adjustable volume control that accommodates hearing |
| US6990205B1 (en) * | 1998-05-20 | 2006-01-24 | Agere Systems, Inc. | Apparatus and method for producing virtual acoustic sound |
| US6170087B1 (en) * | 1998-08-25 | 2001-01-09 | Garry A. Brannon | Article storage for hats |
| JP2000115897A (ja) | 1998-10-05 | 2000-04-21 | Nippon Columbia Co Ltd | 音響処理装置 |
| GB2353926B (en) | 1999-09-04 | 2003-10-29 | Central Research Lab Ltd | Method and apparatus for generating a second audio signal from a first audio signal |
| US6879864B1 (en) | 2000-03-03 | 2005-04-12 | Tektronix, Inc. | Dual-bar audio level meter for digital audio with dynamic range control |
| JP4474806B2 (ja) | 2000-07-21 | 2010-06-09 | ソニー株式会社 | 入力装置、再生装置及び音量調整方法 |
| US6813600B1 (en) * | 2000-09-07 | 2004-11-02 | Lucent Technologies Inc. | Preclassification of audio material in digital audio compression applications |
| US7010480B2 (en) * | 2000-09-15 | 2006-03-07 | Mindspeed Technologies, Inc. | Controlling a weighting filter based on the spectral content of a speech signal |
| JP3755739B2 (ja) | 2001-02-15 | 2006-03-15 | 日本電信電話株式会社 | ステレオ音響信号処理方法及び装置並びにプログラム及び記録媒体 |
| US6804565B2 (en) * | 2001-05-07 | 2004-10-12 | Harman International Industries, Incorporated | Data-driven software architecture for digital sound processing and equalization |
| US7346175B2 (en) * | 2001-09-12 | 2008-03-18 | Bitwave Private Limited | System and apparatus for speech communication and speech recognition |
| DE10242558A1 (de) * | 2002-09-13 | 2004-04-01 | Audi Ag | Audiosystem insbesondere für ein Kraftfahrzeug |
| US20040131192A1 (en) * | 2002-09-30 | 2004-07-08 | Metcalf Randall B. | System and method for integral transference of acoustical events |
| JP4694763B2 (ja) * | 2002-12-20 | 2011-06-08 | パイオニア株式会社 | ヘッドホン装置 |
| US7076072B2 (en) * | 2003-04-09 | 2006-07-11 | Board Of Trustees For The University Of Illinois | Systems and methods for interference-suppression with directional sensing patterns |
| JP2004343590A (ja) * | 2003-05-19 | 2004-12-02 | Nippon Telegr & Teleph Corp <Ntt> | ステレオ音響信号処理方法、装置、プログラムおよび記憶媒体 |
| US7307807B1 (en) * | 2003-09-23 | 2007-12-11 | Marvell International Ltd. | Disk servo pattern writing |
| JP4317422B2 (ja) * | 2003-10-22 | 2009-08-19 | クラリオン株式会社 | 電子機器、及び、その制御方法 |
| JP4765289B2 (ja) * | 2003-12-10 | 2011-09-07 | ソニー株式会社 | 音響システムにおけるスピーカ装置の配置関係検出方法、音響システム、サーバ装置およびスピーカ装置 |
| US20070211910A1 (en) * | 2004-04-06 | 2007-09-13 | Naoki Kurihara | Sound Volume Control Circuit, Semiconductor Integrated Circuit And Sound Source Device |
| KR20060003444A (ko) * | 2004-07-06 | 2006-01-11 | 삼성전자주식회사 | 모바일 기기에서 크로스토크 제거 장치 및 방법 |
| US7383179B2 (en) * | 2004-09-28 | 2008-06-03 | Clarity Technologies, Inc. | Method of cascading noise reduction algorithms to avoid speech distortion |
| CA2531206A1 (en) * | 2004-12-23 | 2006-06-23 | Brytech Inc. | Colorimetric device and colour determination process |
| SG124306A1 (en) * | 2005-01-20 | 2006-08-30 | St Microelectronics Asia | A system and method for expanding multi-speaker playback |
| JP2006222686A (ja) | 2005-02-09 | 2006-08-24 | Fujitsu Ten Ltd | オーディオ装置 |
| KR100608025B1 (ko) | 2005-03-03 | 2006-08-02 | 삼성전자주식회사 | 2채널 헤드폰용 입체 음향 생성 방법 및 장치 |
| WO2007068257A1 (en) * | 2005-12-16 | 2007-06-21 | Tc Electronic A/S | Method of performing measurements by means of an audio system comprising passive loudspeakers |
| WO2008035227A2 (en) | 2006-09-14 | 2008-03-27 | Lg Electronics Inc. | Dialogue enhancement techniques |
-
2007
- 2007-09-14 WO PCT/IB2007/003789 patent/WO2008035227A2/en not_active Ceased
- 2007-09-14 US US11/855,576 patent/US8238560B2/en active Active
- 2007-09-14 JP JP2009527920A patent/JP2010515290A/ja active Pending
- 2007-09-14 AT AT07858967T patent/ATE487339T1/de not_active IP Right Cessation
- 2007-09-14 JP JP2009527747A patent/JP2010504008A/ja active Pending
- 2007-09-14 AU AU2007296933A patent/AU2007296933B2/en not_active Ceased
- 2007-09-14 BR BRPI0716521-8A2A patent/BRPI0716521A2/pt not_active IP Right Cessation
- 2007-09-14 EP EP07825374.7A patent/EP2064915B1/en not_active Not-in-force
- 2007-09-14 JP JP2009527925A patent/JP2010518655A/ja active Pending
- 2007-09-14 WO PCT/EP2007/008028 patent/WO2008031611A1/en not_active Ceased
- 2007-09-14 DE DE602007010330T patent/DE602007010330D1/de active Active
- 2007-09-14 KR KR1020097007407A patent/KR101061132B1/ko not_active Expired - Fee Related
- 2007-09-14 US US11/855,570 patent/US8184834B2/en not_active Expired - Fee Related
- 2007-09-14 EP EP07802317A patent/EP2070389B1/en not_active Not-in-force
- 2007-09-14 CA CA2663124A patent/CA2663124C/en not_active Expired - Fee Related
- 2007-09-14 AT AT07802317T patent/ATE510421T1/de not_active IP Right Cessation
- 2007-09-14 KR KR1020097007408A patent/KR101137359B1/ko not_active Expired - Fee Related
- 2007-09-14 US US11/855,500 patent/US8275610B2/en active Active
- 2007-09-14 WO PCT/IB2007/003073 patent/WO2008032209A2/en not_active Ceased
- 2007-09-14 MX MX2009002779A patent/MX2009002779A/es not_active Application Discontinuation
- 2007-09-14 KR KR1020097007409A patent/KR101061415B1/ko not_active Expired - Fee Related
- 2007-09-14 EP EP07858967A patent/EP2070391B1/en not_active Not-in-force
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH03285500A (ja) * | 1990-03-31 | 1991-12-16 | Mazda Motor Corp | 音響装置 |
| JPH04249484A (ja) * | 1991-02-06 | 1992-09-04 | Hitachi Ltd | テレビジョン受信機用音声回路 |
| JPH05183997A (ja) * | 1992-01-04 | 1993-07-23 | Matsushita Electric Ind Co Ltd | 効果音付加自動判別装置 |
| JPH0670400A (ja) * | 1992-08-19 | 1994-03-11 | Nec Corp | 前方3chマトリクス・サラウンド・プロセッサ |
| JPH06253398A (ja) * | 1993-01-27 | 1994-09-09 | Philips Electron Nv | オーディオ信号処理装置 |
| JPH07115606A (ja) * | 1993-10-19 | 1995-05-02 | Sharp Corp | 音声モード自動切替装置 |
| JP2001245237A (ja) * | 2000-02-28 | 2001-09-07 | Victor Co Of Japan Ltd | 放送受信装置 |
| JP2002078100A (ja) * | 2000-09-05 | 2002-03-15 | Nippon Telegr & Teleph Corp <Ntt> | ステレオ音響信号処理方法及び装置並びにステレオ音響信号処理プログラムを記録した記録媒体 |
| JP2003084790A (ja) * | 2001-09-17 | 2003-03-19 | Matsushita Electric Ind Co Ltd | 台詞成分強調装置 |
| JP2005086462A (ja) * | 2003-09-09 | 2005-03-31 | Victor Co Of Japan Ltd | オーディオ信号再生装置のボーカル音帯域強調回路 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017533459A (ja) * | 2014-12-12 | 2017-11-09 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | マルチチャネルオーディオ信号内の音声成分を強調するための信号処理装置 |
| US10210883B2 (en) | 2014-12-12 | 2019-02-19 | Huawei Technologies Co., Ltd. | Signal processing apparatus for enhancing a voice component within a multi-channel audio signal |
| JP2019161672A (ja) * | 2019-06-27 | 2019-09-19 | マクセル株式会社 | システム |
| JP7001639B2 (ja) | 2019-06-27 | 2022-01-19 | マクセル株式会社 | システム |
Also Published As
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101061415B1 (ko) | 다이알로그 증폭 기술을 위한 컨트롤러 및 사용자 인터페이스 | |
| CN101518098B (zh) | 用于对话增强技术的控制器和用户界面 | |
| CN114830233B (zh) | 基于噪声指标和语音可懂度指标来调整音频和非音频特征 | |
| US10362433B2 (en) | Electronic device and control method thereof | |
| CN114747233B (zh) | 内容和环境感知的环境噪声补偿 | |
| KR101061129B1 (ko) | 오디오 신호의 처리 방법 및 이의 장치 | |
| CN102113315B (zh) | 用于处理音频信号的方法和装置 | |
| CN117877496A (zh) | 空间增强 | |
| US10972849B2 (en) | Electronic apparatus, control method thereof and computer program product using the same | |
| CN111133775A (zh) | 音响信号处理装置以及音响信号处理方法 | |
| EP4636762A1 (en) | System and method to provide personalized audio streaming and rendering | |
| JP2025134096A (ja) | コンテンツボイス/サウンド処理装置、コンテンツボイス/サウンド再生装置、コンテンツボイス/サウンド処理方法、ならびに、コンテンツボイス/サウンド処理プログラムおよびそれが記録された記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110406 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110412 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111004 |
