JP3231908U - 自動ノイズリダクション機能を有するディスプレイ装置 - Google Patents

自動ノイズリダクション機能を有するディスプレイ装置 Download PDF

Info

Publication number
JP3231908U
JP3231908U JP2021000608U JP2021000608U JP3231908U JP 3231908 U JP3231908 U JP 3231908U JP 2021000608 U JP2021000608 U JP 2021000608U JP 2021000608 U JP2021000608 U JP 2021000608U JP 3231908 U JP3231908 U JP 3231908U
Authority
JP
Japan
Prior art keywords
audio signal
audio
noise reduction
display device
microphone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2021000608U
Other languages
English (en)
Inventor
浩鎧 黄
浩鎧 黄
成龍 林
成龍 林
秋旗 楊
秋旗 楊
芝成 黄
芝成 黄
周漢 ▲ごん▼
周漢 ▲ごん▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Giga Byte Technology Co Ltd
Original Assignee
Giga Byte Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Giga Byte Technology Co Ltd filed Critical Giga Byte Technology Co Ltd
Application granted granted Critical
Publication of JP3231908U publication Critical patent/JP3231908U/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers
    • H04R3/005Circuits for transducers for combining the signals of two or more microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166Microphone arrays; Beamforming

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

【課題】自動ノイズリダクション機能を有するディスプレイ装置を提供する。【解決手段】ディスプレイ装置は、ローカルユーザーから発された音声信号を捕捉して、それぞれ、第一オーディオ信号11および第二オーディオ信号12を生成する第一マイクロフォンおよび第二マイクロフォンと、第一オーディオ信号および第二オーディオ信号に対し、ビーム形成処理を実行して、第三オーディオ信号13を生成する第一オーディオノイズリダクションチップ282と、第三オーディオ信号に対し、オーディオノイズリダクションプロセスを実行して、ノイズリダクション音声信号14を生成する第二オーディオノイズリダクションチップ283と、ノイズリダクション音声信号に対し、音声エンコードプロセスを実行して、エンコードされたオーディオ信号15を生成するとともに、ディスプレイ装置のUSBハブにより、エンコードされたオーディオ信号をホストに送信するオーディオ処理チップ285とを有する。【選択図】図1

Description

本考案は、ディスプレイ装置に関するものであって、特に、自動ノイズリダクション機能(automatic noise-reduction function)を有するディスプレイ装置に関するものである。
コンピュータゲームのプレーヤーがイヤフォンとマイクロフォンを装着して、チームメイトとプレイするとき、プレーヤーとチームメイトは、常に、環境ノイズに悩まされ、且つ、プレーヤーは、時に、大音量にしないと、チームメイトとの対話ができないので、プレーヤーはイヤフォン音量を上げる必要があり、長期の使用で、耳の調子が悪くなり、聴力が損傷する恐れがある。現在、市販のディスプレイ装置の機能は多様化し、且つ、プレーヤーは、外部マイクロフォンを挿入できるが、従来のディスプレイ装置は、プレーヤーが発した音声信号を、直接、ホストに送信することができるだけであり、環境ノイズの改善には役に立たない。
よって、自動ノイズリダクション機能を有するディスプレイ装置を提供し、上述の問題を解決する必要がある。
本考案は、自動ノイズリダクション機能を有するディスプレイ装置を提供することを目的とする。
本考案は、自動ノイズリダクション機能を有するディスプレイ装置を提供し、ディスプレイ装置は、ホストに電気的に接続される。ディスプレイ装置は、ディスプレイパネルと、ディスプレイパネルの表示画面を制御するディスプレイコントローラーと、ディスプレイ装置のハウジングに設置されて、ローカルユーザーから発された音声信号を捕捉して、それぞれ、第一オーディオ信号、および、第二オーディオ信号を生成する第一マイクロフォン、および、第二マイクロフォンと、第一オーディオ信号、および、第二オーディオ信号に対して、ビーム形成処理を実行して、第三オーディオ信号を生成する第一オーディオノイズリダクションチップと、第三オーディオ信号に対して、オーディオノイズリダクションプロセスを実行して、ノイズリダクション音声信号を生成する第二オーディオノイズリダクションチップと、ノイズリダクション音声信号に対して、音声エンコードプロセスを実行して、エンコードされたオーディオ信号を生成するとともに、ディスプレイ装置のユニバーサルシリアルバス(USB)ハブにより、エンコードされたオーディオ信号をホストに送信するオーディオ処理チップと、を有する。
一実施形態において、第一マイクロフォン、および、第二マイクロフォンは、指向性マイクロフォン、あるいは、無指向性マイクロフォンである。
一実施形態において、第一オーディオノイズリダクションチップは、第一オーディオ信号、および、第二オーディオ信号にしたがって、ローカルユーザーから発された音声信号の発信元方位を計算するとともに、第一AIモデルを使用して、発信元方位で、ビーム形成処理を実行し、且つ、第二オーディオノイズリダクションチップは、第二AIモデルを使用して、第三オーディオ信号に対し、オーディオノイズリダクションプロセスを実行して、第三オーディオ信号中の雑音、および、環境ノイズをフィルタリングして、ノイズリダクション音声信号を生成する。
一実施形態において、ディスプレイ装置は、さらに、オーディオ入力インターフェースを有して、外部マイクロフォンがオーディオ入力インターフェースに挿入されているか否かを検出して、挿入判断信号を生成する。オーディオ入力インターフェースが、外部マイクロフォンがオーディオ入力インターフェースに挿入されていることを検出していない場合に、挿入判断信号は高ロジック状態にある。
一実施形態において、ホストは、ネットワークにより、エンコードされたオーディオ信号を、その他のホストに送信して、オーディオデコードを実行させて、ノイズリダクション音声信号を得て再生する。
本考案は更に、自動ノイズリダクション機能を有するディスプレイ装置を提供し、ディスプレイ装置は、ホストに電気的に接続される。ディスプレイ装置は、ディスプレイパネルと、ディスプレイパネルの表示画面を制御するディスプレイコントローラーと、ディスプレイ装置のハウジングに設置されて、ディスプレイ装置の環境ノイズを捕捉して、それぞれ、第一オーディオ信号、および、第二オーディオ信号を生成する第一マイクロフォン、および、第二マイクロフォンと、ローカルユーザーから発された音声信号を捕捉して外部オーディオ信号を生成する外部マイクロフォンに電気的に接続されるオーディオ入力インターフェースと、第一オーディオ信号、および、第二オーディオ信号に対して、ビーム形成処理を実行して、第三オーディオ信号を生成する第一オーディオノイズリダクションチップと、外部オーディオ信号から第三オーディオ信号を除去して、第四オーディオ信号を得るとともに、第四オーディオ信号に対して、オーディオノイズリダクションプロセスを実行して、ノイズリダクション音声信号を生成する第二オーディオノイズリダクションチップと、ノイズリダクション音声信号に対して、音声エンコードプロセスを実行して、エンコードされたオーディオ信号を生成するとともに、ディスプレイ装置のユニバーサルシリアルバス(USB)ハブにより、エンコードされたオーディオ信号をホストに送信するオーディオ処理チップと、を有する。
本考案のディスプレイ装置は、外部マイクロフォンが挿入されている状況下でも、挿入されていない状況下でも、自動ノイズリダクション機能を提供することができる。このほか、ディスプレイ装置中のオーディオノイズリダクションチップは、AIモデルを使用して、ビーム形成処理、および、オーディオノイズリダクションプロセスを実行することができるので、ディスプレイ装置の雑音、および、環境ノイズをさらに減少させるとともに、音声通話の品質を向上させて、ユーザーエクスペリエンスを増進することができる。
本考案の一実施形態中のディスプレイシステムの機能ブロック図である。 本考案の一実施形態による第一状況におけるディスプレイ装置の配置を示す図である。 本考案の一実施形態による第二状況中のディスプレイ装置の配置を示す図である。
以下の説明は、本考案を完成させる好ましい実施形態であり、その目的は、本考案の基本精神を描写することであり、実際の考案の内容は請求項範囲を参照しなければならない。
理解すべきことは、本明細書中で使用される「有する」、「含む」等の用語は、特定の技術特徴、数値、方法工程、作業処理、素子、および/または、部品を表示するのに用いられているが、さらに多くの技術特徴、数値、方法工程、作業処理、素子、および/または、部品、あるいは、それらの任意の組み合わせを加えることを排除しない。
請求項中で使用される「第一」、「第二」、「第三」等の用語は、請求項中の素子を修飾するために用いられ、それらの間の優先順序、先行関係、一素子がもう一つの素子の前にあることや、工程実行時の前後順序を表示するものではなく、同じ名称の素子を区別するためだけに用いられる。
図1は、本考案の一実施形態中のディスプレイシステムのブロック図である。
図1に示されるように、ディスプレイシステム1は、ホスト100、および、ディスプレイ装置200を有する。ホスト100は、たとえば、パソコン、あるいは、サーバである。ホスト100は、たとえば、処理ユニット110、グラフィック処理ユニット120、メモリユニット130、ストレージデバイス140、伝送インターフェース150、151、および、ネットワークインターフェース170を有する。処理ユニット110、グラフィック処理ユニット120、メモリユニット130、ストレージデバイス140、伝送インターフェース150、および、ネットワークインターフェース170は、システムバス111により、互いに結合される。処理ユニット110は、たとえば、中央処理装置(CPU)、汎用プロセッサ(general-purpose processor)等であるが、本考案は、これに限定されない。グラフィック処理ユニット120は、たとえば、グラフィックスカード上のグラフィック処理ユニット、あるいは、処理ユニット110中に整合されるグラフィック処理ユニットである。
メモリユニット130は、ランダムアクセスメモリ、たとえば、ダイナミックRAM(DRAM)、あるいは、スタティックRAM(SRAM)であるが、本考案は、これに限定されない。ストレージデバイス140は、不揮発性メモリ(non-volatile memory)、たとえば、ハードディスクドライブ(hard disk drive)、ソリッドステートディスク(solid-state disk)、フラッシュメモリ(flash memory)、あるいは、リードオンリメモリ (read-only memory)であるが、本考案は、これに限定されない。
たとえば、ストレージデバイス140は、アプリケーションプログラム141、オペレーティングシステム142(たとえば、Windows、Linux(登録商標)、MacOS等である)を保存し、且つ、処理ユニット110は、アプリケーションプログラム141、および、オペレーティングシステム142を、メモリユニット130に読み取らせて実行する。アプリケーションプログラム141は、たとえば、音声通信機能を有し、且つ、ネットワーク30により、その他のホストの使用者と音声通信を実行することができる。
グラフィック処理ユニット120は、たとえば、処理ユニット110により実行されるアプリケーションプログラムのグラフィック処理を実行して、一枚以上のイメージを有するイメージ信号を生成するとともに、伝送インターフェース151により、イメージ信号を、ディスプレイ装置200の伝送インターフェース251に送信する。伝送インターフェース151、251の間のチャネルは、イメージ伝送チャネルと称することができる。伝送インターフェース151、251は、有線伝送インターフェース、および/または、無線伝送インターフェースであり、有線伝送インターフェースは、高解像度マルチメディアインターフェース(High Definition Multimedia Interface、HDMI(登録商標))、ディスプレイポート(DisplayPort、DP)インターフェース、組込ディスプレイポート(embedded DisplayPort、eDP)、低電圧差動信号伝送(low voltage differential signaling、LVDS)インターフェース、ユニバーサルシリアルバス(Universal Serial Bus、USB)インターフェース、USB Type-Cインターフェース、サンダーボルト(Thunderbolt)インターフェース、デジタルビデオインターフェース(DVI)、ビデオグラフィックスアレイ(VGA)インターフェース、汎用入出力(GPIO)インターフェース、非同期シリアル通信(UART)インターフェース、シリアルペリフェラルインタフェース(SPI)インターフェース、アイスクエアドシー(I2C)インターフェース、あるいは、その組み合わせを有し、且つ、無線伝送インターフェースは、ブルートゥース(Bluetooth(登録商標))、Wi-Fi、近距離無線通信(NFC)インターフェース等を有するが、本考案は、これに限定されない。
このほか、処理ユニット110は、たとえば、伝送インターフェース150により、データを、ディスプレイ装置200の伝送インターフェース250に伝送し、伝送インターフェース150、および、250は、たとえば、USBインターフェースやUSB Type-Cインターフェースであり、且つ、USB 3.1、および/あるいは、USB 2.0プロトコルをサポートすることができる。伝送インターフェース150、および、250の間のチャネルは、データ伝送チャネルと称する。
ディスプレイ装置200は、ホスト100に電気的に接続される。ディスプレイ装置200は、ディスプレイコントローラー210、ディスプレイモジュール220、ストレージユニット230、イメージバッファ240、伝送インターフェース250〜251、オーディオ入力インターフェース255、入力インターフェース260、USBハブ270、マイクロフォン281Lおよび281R、オーディオノイズリダクションチップ282および283、並びに、オーディオ処理チップ285を有する。
ディスプレイコントローラー210は、たとえば、特定用途向け集積回路(application-specific integrated circuit)、システムオンチップ (System-on-chip)、プロセッサ、あるいは、マイクロコントローラー (microcontroller)であるが、本考案は、これに限定されない。
ディスプレイモジュール220は、たとえば、液晶(liquid crystal)パネル、発光ダイオード(light-emitting diode)パネル、有機発光ダイオード一 (organic light-emitting diode)パネル、陰極線管 (cathode ray tube)、Eインク(E-Ink)ディスプレイモジュール、エレクトロルミネセンス(electroluminescent)ディスプレイモジュール、プラズマ(Plasma)ディスプレイモジュール、プロジェクション(projection)ディスプレイモジュール、量子ドット(Quantum Dot)ディスプレイモジュールであるが、本考案は、これに限定されない。
ストレージユニット230は、たとえば、不揮発性メモリ、たとえば、リードオンリメモリ (ROM)、消去可能なPROM(EPROM)、書き換え可能な読み取り専用メモリ(EEPROM)である。ストレージユニット230は、ディスプレイ装置200に関連するファームウェア231を保存するのに用いられる。ストレージユニット230は、たとえば、ディスプレイコントローラー210の外部に位置するか、あるいは、ディスプレイコントローラー210中に整合される。
ファームウェア231は、たとえば、ディスプレイ装置200のスクリーン上で表示されるインターフェースのディスプレイ設定、および、拡張ディスプレイ識別データ(Extended Display Identification Data、EDID)、ディスプレイ設定、および、一つ以上のスクリーン上で表示されるインターフェース(on-screen-display(OSD) interface)232を有する。拡張ディスプレイ識別データは、たとえば、ディスプレイ装置200のメーカー、製品名、解像度、フレームレート等を有する。ディスプレイ設定は、たとえば、ディスプレイ装置200の輝度、コントラスト、シャープネス、色温度等の設定を有する。このほか、ファームウェア231は、更に、ディスプレイ装置200のOSDインターフェース232を制御する。
一実施形態において、ディスプレイコントローラー210は、バス(たとえば、I2Cバス)により、ストレージユニット230中に保存されたファームウェア231、および、OSDインターフェース232のプログラムコードを読み取るとともに、相関するディスプレイパラメータを設定する。このほか、ディスプレイコントローラー210は、伝送インターフェース250、あるいは、251(たとえば、それぞれ、イメージ伝送チャネル、あるいは、データ伝送チャネル)により、ディスプレイ装置200の拡張ディスプレイ識別データを、ホスト100に送信して、ホスト100中の処理ユニット110、および、グラフィック処理ユニット120が、出力するイメージ信号の解像度、および、相関する同期信号を設定できるようにする。OSDインターフェース232は、たとえば、オンスクリーンディスプレイメニュー(OSD Menu)、および、オプション、情報ダッシュボード(information dashboard)、タイマー、カウンター、照準線(crosshair)、特定符号、特定色、特定文字、あるいは、その組み合わせを有するが、本考案は、これに限定されない。一実施形態において、オンスクリーンディスプレイメニューは、オーディオノイズリダクション機能リストを有する。
イメージバッファ240は、たとえば、揮発性メモリ(たとえば、ダイナミックRAM)、あるいは、不揮発性メモリ(たとえば、フラッシュメモリ)であり、ディスプレイモジュール220上で再生したい出力イメージを保存するのに用いられ、ホスト100、あるいは、ディスプレイコントローラー210は、ホスト100により生成されたスクリーン上で示されるイネーブル信号に基づいて、一つ以上のOSDインターフェース232によって、イメージバッファ240中に保存されているイメージ信号の特定領域を被覆して、出力イメージを生成する。
入力インターフェース260は、ディスプレイ装置200のオンスクリーンディスプレイメニューを制御するのに用いられる。入力インターフェース260は、たとえば、五方向制御棒262、あるいは、五個の物理的ボタン261により実現されて、上、下、左、右、および、確認等の指令を実現する。ホスト100は、伝送インターフェース150、および、250(たとえば、USBインターフェース)により、USBハブ270を通じて、データをディスプレイコントローラー210に送信し、且つ、ディスプレイコントローラー210も同様に、伝送インターフェース150、および、250により、USBハブ270を通じて、データをホスト100に送信する。
図2Aは、本考案の一実施形態による第一状況におけるディスプレイ装置の配置を示す図である。
図1、および、図2Aを同時に参照する。図2Aに示されるように、たとえば、マイクロフォン281L、および、281Rが、ディスプレイ装置200のハウジング上に設置され、且つ、両者は、所定距離(たとえば、4センチ、6センチ、あるいは、10センチであるが、これらに限定されない)で隔てられている。マイクロフォン281L、および、281Rは、オーディオノイズリダクションチップ282に電気的に接続され、マイクロフォン281L、および、281Rは、どちらも、指向性(directional)マイクロフォンであり、且つ、範囲50内に、良好な感度(sensitivity)を有する。一実施形態において、マイクロフォン281L、および、281Rは、どちらも、無指向性(omnidirectional)マイクロフォンであり、且つ、同一のマイクロフォンモジュールに整合される。
第一状況において、マイクロフォン20は、ディスプレイ装置200のオーディオ入力インターフェース255に接続されていない。オーディオ入力インターフェース255は、たとえば、3.5mmの端子ホールで、且つ、検出回路256を有して、マイクロフォンがオーディオ入力インターフェース255に挿入されているか否かを検出する。検出回路256が、マイクロフォンがオーディオ入力インターフェース255に挿入されていることを検出していないとき、検出回路が出力する挿入判断信号17は、たとえば、高ロジック状態(high logic state)にある。検出回路256が、マイクロフォンがオーディオ入力インターフェース255に挿入されていることを検出したとき、検出回路が出力する挿入判断信号17は、たとえば、低ロジック状態(low logic state)にある。
マイクロフォン281L、および、281Rは、それぞれ、ローカルユーザー60から発されたオーディオ信号を受信して、第一オーディオ信号11、および、第二オーディオ信号12を生成するとともに、第一オーディオ信号11、および、第二オーディオ信号12を、オーディオノイズリダクションチップ282に送信する。第一状況において、挿入判断信号17が高ロジック状態であるとき、オーディオノイズリダクションチップ282、および、283は、第一ノイズリダクションモードに進入し、且つ、オーディオノイズリダクションチップ282は、第一AIモデル(AI model)を使用して、第一オーディオ信号11、および、第二オーディオ信号12に対して、ビーム形成(beamforming)処理を実行して、第三オーディオ信号13を生成する。ビーム形成処理は、たとえば、第一パラメータ集合を使用する。
たとえば、ローカルユーザー60が発した音声信号が、マイクロフォン281L、および、281Rに到達する時間は若干の差異があるので、オーディオノイズリダクションチップ282は、第一パラメータ集合を使用して、ローカルユーザー60が発した音声信号の発信元方位(orientation)を計算するとともに、発信元方位で、ビーム形成処理を実行する。すなわち、上述の発信元方位以外のその他の方位のオーディオ信号(雑音や環境ノイズを含む)であれば、フィルタリングされるか、あるいは、ごくわずかな音声ゲインを有する。注意すべきことは、ビーム形成処理後に生成された第三オーディオ信号13は依然として、上述の発信元方位の環境ノイズ、および、雑音を有することである。
続いて、オーディオノイズリダクションチップ283は、第二AIモデルを使用して、第三オーディオ信号13に対して、オーディオノイズリダクション(audio noise reduction)処理を実行して、ノイズリダクション音声信号14を生成する。上述の第一AIモデル、および、第二AIモデルは、たとえば、異なる完全接続(full connected)のディープニューラルネットワーク(deep neural network、DNN)である。
マイクロフォン281L、および、281Rにより生成された第一オーディオ信号11、および、第二オーディオ信号12は、通常、ローカルユーザー60の音声、および、環境ノイズ/雑音を有し、オーディオノイズリダクションチップ282、および、283は、機器学習を実行するために、極度に大量の音声データサンプルを有するので、ディープニューラルネットワークにより、各オーディオ信号に最適なモデルパラメータを快速に探し出すことができ、たとえば、自主的に、各種の雑音状況を識別することができ、オーディオ信号中の雑音、および、環境ノイズを消去して、音声信号を残して、最適なノイズリダクション效果を達成する(たとえば、信号対雑音比SNRを大幅に向上させる)ことができる。一実施形態において、オーディオノイズリダクションチップ282、および、283は、たとえば、同一のオーディオノイズリダクションチップ284に整合されているが、本考案は、これに限定されない。
よって、第一状況において、ディスプレイ装置200は、マイクロフォン281L、および、281Rにより生成された第一オーディオ信号11、および、第二オーディオ信号12を用いて、上述のビーム形成処理、および、オーディオノイズリダクションプロセスを実行することができる。オーディオノイズリダクションチップ283により生成されたノイズリダクション音声信号14は、バス(たとえば、I2Sバス)により、オーディオ処理チップ285に送信されて、音声エンコードプロセス(audio encoding process)が実行されて、エンコードされたオーディオ信号15が生成される。エンコードされたオーディオ信号15は、USBハブ270により、ホスト100に送信される。ホスト100は、そのネットワークインターフェース170により、エンコードされたオーディオ信号15を、ネットワーク30上のその他のホストに送信して、オーディオデコード処理を実行させる。よって、その他のホストの使用者は、ディスプレイ装置200からのローカルユーザー60の音声をはっきりと聞くことができる。
図2Bは、本考案の一実施形態による第二状況中のディスプレイ装置の配置を示す図である。
図1、および、図2Bを同時に参照する。図2Bは、図2Aに類似し、その差異は、第二状況において、マイクロフォン20が、ディスプレイ装置200のオーディオ入力インターフェース255に接続されていることである。たとえば、マイクロフォン20は、ディスプレイ装置200の外部マイクロフォンと見なすこともでき、たとえば、ローカルユーザー60が装着するイヤフォンマイクロフォン、あるいは、単独で設置されるマイクロフォンである。
第二状況において、ローカルユーザー60は、おもに、マイクロフォン20を使用して、音声信号を入力し、且つ、マイクロフォン20が、ローカルユーザー60から発された音声信号を捕捉した後、外部オーディオ信号16を生成するとともに、オーディオ入力インターフェース255により、外部オーディオ信号16を、オーディオノイズリダクションチップ283に送信する。このほか、マイクロフォン281L、および、281Rは、主に、ディスプレイ装置200の環境ノイズを検出して、第一オーディオ信号11、および、第二オーディオ信号12を生成するとともに、第一オーディオ信号11、および、第二オーディオ信号12を、オーディオノイズリダクションチップ282に送信する。
第二状況において、挿入判断信号17が低ロジック状態にある場合に、オーディオノイズリダクションチップ282、および、283は、第二ノイズリダクションモードに進入し、且つ、オーディオノイズリダクションチップ282は、第一AIモデル(AI model)を使用して、第一オーディオ信号11、および、第二オーディオ信号12に対し、ローカルユーザー60の発信元方位で、ビーム形成(beamforming)処理を実行して、第三オーディオ信号13を生成し、上述のビーム形成処理は、たとえば、第二パラメータ集合を使用し、且つ、第二パラメータ集合は、第一パラメータ集合と異なる。一実施形態において、第一パラメータ集合、および、第二パラメータ集合は、オーディオノイズリダクションチップ282、および、283中の不揮発性メモリ(たとえば、フラッシュメモリ)に保存され、且つ、オーディオノイズリダクションチップ282、および、283中の演算ユニット(図示しない)は、挿入判断信号のロジック状態に基づいて、不揮発性メモリから、第一パラメータ集合、あるいは、第二パラメータ集合を読み取る。
たとえば、オーディオノイズリダクションチップ282は、第二パラメータ集合を使用して、ローカルユーザー60の方位(orientation)を計算するとともに、ビーム形成処理を実行する。すなわち、上述の発信元方位以外の方位の雑音、および、環境ノイズはどれも、フィルタリングされるか、あるいは、ごくわずかな音声ゲインを有する。
続いて、オーディオノイズリダクションチップ283は、まず、外部オーディオ信号16から第三オーディオ信号13を除去して、第四オーディオ信号を得る。第二状況中の第三オーディオ信号13は、主に環境ノイズであるので、外部オーディオ信号16から第三オーディオ信号13を除去した後、得られた第四オーディオ信号には、主な音声成分が残っている。この時、オーディオノイズリダクションチップ283はさらに、第二AIモデルを用いて、第四オーディオ信号に対して、オーディオノイズリダクション(audio noise reduction)処理を実行して、ノイズリダクション音声信号14を生成し、且つ、さらに、ノイズリダクション音声信号14中の雑音/環境ノイズ成分をフィルタリングする。
マイクロフォン281L、および、281Rにより生成された第一オーディオ信号11、および、第二オーディオ信号12は、通常、ローカルユーザー60の音声、および、環境ノイズ/雑音を有し、オーディオノイズリダクションチップ282、および、283は、機器学習を実行するために、極度に大量の音声データサンプルを有するので、ディープニューラルネットワークにより、各段のオーディオ信号に最適なモデルパラメータを快速に探し出すことができ、たとえば、自主的に、各種雑音状況を識別することができ、オーディオ信号中の雑音、および、環境ノイズを消去して、音声信号を残して、最適なノイズリダクション效果を達成する(たとえば、信号対雑音比SNRを大幅に向上させる)ことができる。
よって、第二状況において、ディスプレイ装置200は、マイクロフォン281L、および、281Rにより生成された第一オーディオ信号11、および、第二オーディオ信号12を使用して、上述のビーム形成処理を実行することができる。オーディオノイズリダクションチップ283は、外部オーディオ信号16から第三オーディオ信号13を除去して、第四オーディオ信号を得た後、さらに、第四オーディオ信号に対して、オーディオノイズリダクションプロセスを実行して、ノイズリダクション音声信号14を得る。オーディオノイズリダクションチップ283は、バス(たとえば、I2Sバス)により、ノイズリダクション音声信号14を、オーディオ処理チップ285に送信して、音声エンコードプロセスを実行させて、エンコードされたオーディオ信号15を生成するとともに、エンコードされたオーディオ信号15を、USBハブ270によりホスト100に送信する。ホスト100は、そのネットワークインターフェース170により、エンコードされたオーディオ信号15を、ネットワーク30上のその他のホストに送信して、オーディオデコード処理を実行させることができる。よって、その他のホストの使用者は、ディスプレイ装置200からのローカルユーザー60の音声をはっきりと聞くことができる。
総合すると、第一状況でも、第二状況でも、本考案のディスプレイ装置200は、オーディオノイズリダクションプロセスを実行して、品質のよい音声信号を得て、ローカルユーザー60とネットワーク30上のその他の使用者のオーディオ通信を便利にするとともに、ユーザーエクスペリエンスを増加させることができる。
図1を参照すると、一実施形態において、ストレージデバイス140はさらに、ノイズリダクション設定プログラム143を保存し、且つ、ローカルユーザー60は、ホスト100で、ノイズリダクション設定プログラム143を実行して、ユーザーインターフェースを表示させる。よって、ローカルユーザー60は、上述のユーザーインターフェースで、相応のオプションを選択して、ディスプレイ装置200のオーディオノイズリダクション強度を調整するとともに、マイクロフォン20のマイクロフォン距離にしたがって、異なるノイズリダクション設定、あるいは、ディスプレイ装置200のノイズリダクション功能のオン/オフを選択する。たとえば、ホスト100は、ノイズリダクション設定プログラム143のユーザーインターフェース上で選択されたオプションに相応する制御信号を、データ伝送チャネル31により、ディスプレイ装置200に送信するので、オーディオノイズリダクションチップ282、および、283は、相関するノイズリダクション設定を調整することができる。一実施形態において、ローカルユーザー60は、ディスプレイ装置200のOSDインターフェース232中のオーディオノイズリダクション機能リストにより、上述のノイズリダクション設定を調整することができる。
総合すると、本考案は、ディスプレイ装置を提供し、外部マイクロフォンを挿入した状況下でも、あるいは、挿入しない状況下でも、自動ノイズリダクション機能を提供することができる。このほか、ディスプレイ装置中のオーディオノイズリダクションチップは、AIモデルを使用して、ビーム形成、および、オーディオノイズリダクションプロセスを実行することができるので、ディスプレイ装置の雑音、および、環境ノイズをさらに減少させるとともに、音声通話の品質を向上させて、ユーザーエクスペリエンスを増進することができる。
本考案では好ましい実施例を前述の通り開示したが、これらは決して本考案に限定するものではなく、当該技術を熟知する者なら誰でも、本考案の思想を脱しない範囲内で各種の変形を加えることができる。
1…ディスプレイシステム
11…第一オーディオ信号
12…第二オーディオ信号
13…第三オーディオ信号
14…ノイズリダクション音声信号
15…エンコードされたオーディオ信号
16…外部オーディオ信号
17…挿入判断信号
20…マイクロフォン
30…ネットワーク
31、32…データ伝送チャネル
50…範囲
60…ローカルユーザー
100…ホスト
110…処理ユニット
111…システムバス
120…グラフィック処理ユニット
130…メモリユニット
140…ストレージデバイス
141…アプリケーションプログラム
142…オペレーティングシステム
143…ノイズリダクション設定プログラム
150、151…伝送インターフェース
160…周辺装置
170…ネットワークインターフェース
200…ディスプレイ装置
210…ディスプレイコントローラー
220…ディスプレイモジュール
230…ストレージユニット
231…ファームウェア
232…OSDインターフェース
240…イメージバッファ
255…オーディオ入力インターフェース
256…検出回路
260…入力インターフェース
261…物理的ボタン
262…五方向制御棒
270…USBハブ
281L、281R…マイクロフォン
282、283、284…オーディオノイズリダクションチップ
285…オーディオ処理チップ

Claims (10)

  1. ホストに電気的に接続されるディスプレイ装置であって、
    ディスプレイパネルと、
    前記ディスプレイパネルの表示画面を制御するディスプレイコントローラーと、
    前記ディスプレイ装置のハウジングに設置されて、ローカルユーザーから発された音声信号を捕捉して、それぞれ、第一オーディオ信号、および、第二オーディオ信号を生成する第一マイクロフォン、および、第二マイクロフォンと、
    前記第一オーディオ信号、および、前記第二オーディオ信号に対して、ビーム形成処理を実行して、第三オーディオ信号を生成する第一オーディオノイズリダクションチップと、
    前記第三オーディオ信号に対して、オーディオノイズリダクションプロセスを実行して、ノイズリダクション音声信号を生成する第二オーディオノイズリダクションチップと、
    前記ノイズリダクション音声信号に対して、音声エンコードプロセスを実行して、エンコードされたオーディオ信号を生成するとともに、前記ディスプレイ装置のユニバーサルシリアルバス(USB)ハブにより、前記エンコードされたオーディオ信号を前記ホストに送信するオーディオ処理チップと、
    を有することを特徴とする自動ノイズリダクション機能を有するディスプレイ装置。
  2. 前記第一マイクロフォン、および、前記第二マイクロフォンは共に、指向性マイクロフォン、あるいは、無指向性マイクロフォンであることを特徴とする請求項1に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  3. 前記第一オーディオノイズリダクションチップは、前記第一オーディオ信号、および、前記第二オーディオ信号にしたがって、前記ローカルユーザーから発された前記音声信号の発信元方位を計算するとともに、第一AIモデルを使用して、前記発信元方位で、前記ビーム形成処理を実行し、
    前記第二オーディオノイズリダクションチップは、第二AIモデルを使用して、前記第三オーディオ信号に対して、前記オーディオノイズリダクションプロセスを実行して、前記第三オーディオ信号中の雑音、および、環境ノイズをフィルタリングして、前記ノイズリダクション音声信号を生成することを特徴とする請求項1に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  4. 更に、オーディオ入力インターフェースを有し、
    前記オーディオ入力インターフェースは、外部マイクロフォンが前記オーディオ入力インターフェースに挿入されているか否かを検出して、挿入判断信号を生成し、
    前記オーディオ入力インターフェースが、前記外部マイクロフォンが前記オーディオ入力インターフェースに挿入されていることを検出していない場合に、前記挿入判断信号は、高ロジック状態にあることを特徴とする請求項1に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  5. 前記ホストは、ネットワークにより、前記エンコードされたオーディオ信号を、その他のホストに送信して、オーディオデコードを実行させて、前記ノイズリダクション音声信号を得て再生することを特徴とする請求項1に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  6. ホストに電気的に接続されるディスプレイ装置であって、
    ディスプレイパネルと、
    前記ディスプレイパネルの表示画面を制御するディスプレイコントローラーと、
    前記ディスプレイ装置のハウジングに設置されて、前記ディスプレイ装置の環境ノイズを捕捉して、それぞれ、第一オーディオ信号、および、第二オーディオ信号を生成する第一マイクロフォン、および、第二マイクロフォンと、
    ローカルユーザーから発された音声信号を捕捉して外部オーディオ信号を生成する外部マイクロフォンに電気的に接続されるオーディオ入力インターフェースと、
    前記第一オーディオ信号、および、前記第二オーディオ信号に対して、ビーム形成処理を実行して、第三オーディオ信号を生成する第一オーディオノイズリダクションチップと、
    前記外部オーディオ信号から、前記第三オーディオ信号を除去して、第四オーディオ信号を得るとともに、前記第四オーディオ信号に対して、オーディオノイズリダクションプロセスを実行して、ノイズリダクション音声信号を生成する第二オーディオノイズリダクションチップと、
    前記ノイズリダクション音声信号に対して、音声エンコードプロセスを実行して、エンコードされたオーディオ信号を生成するとともに、前記ディスプレイ装置のユニバーサルシリアルバス(USB)ハブにより、前記エンコードされたオーディオ信号を前記ホストに送信するオーディオ処理チップと、
    を有することを特徴とする自動ノイズリダクション機能を有するディスプレイ装置。
  7. 前記第一マイクロフォン、および、前記第二マイクロフォンはともに、指向性マイクロフォン、あるいは、無指向性マイクロフォンであることを特徴とする請求項6に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  8. 前記第一オーディオノイズリダクションチップは、前記第一オーディオ信号、および、前記第二オーディオ信号にしたがって、前記ローカルユーザーから発された前記音声信号の発信元方位を計算するとともに、第一AIモデルを使用して、前記発信元方位で、前記ビーム形成処理を実行し、
    前記第二オーディオノイズリダクションチップは、第二AIモデルを使用して、前記第三オーディオ信号に対して、前記オーディオノイズリダクションプロセスを実行して、前記第三オーディオ信号中の雑音、および、環境ノイズをフィルタリングして、前記ノイズリダクション音声信号を生成することを特徴とする請求項6に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  9. 前記オーディオ入力インターフェースが、前記外部マイクロフォンが前記オーディオ入力インターフェースに挿入されていることを検出した場合に、前記オーディオ入力インターフェースにより生成された挿入判断信号は、低ロジック状態にあることを特徴とする請求項6に記載の自動ノイズリダクション機能を有するディスプレイ装置。
  10. 前記ホストは、ネットワークにより、前記エンコードされたオーディオ信号をその他のホストに送信して、オーディオデコードを実行させて、前記ノイズリダクション音声信号を得ることを特徴とする請求項6に記載の自動ノイズリダクション機能を有するディスプレイ装置。
JP2021000608U 2020-12-21 2021-02-24 自動ノイズリダクション機能を有するディスプレイ装置 Expired - Fee Related JP3231908U (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW109216835 2020-12-21
TW109216835U TWM612163U (zh) 2020-12-21 2020-12-21 具有自動降噪功能之顯示裝置

Publications (1)

Publication Number Publication Date
JP3231908U true JP3231908U (ja) 2021-05-06

Family

ID=75709577

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021000608U Expired - Fee Related JP3231908U (ja) 2020-12-21 2021-02-24 自動ノイズリダクション機能を有するディスプレイ装置

Country Status (3)

Country Link
JP (1) JP3231908U (ja)
KR (1) KR200496852Y1 (ja)
TW (1) TWM612163U (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113936698A (zh) * 2021-09-26 2022-01-14 度小满科技(北京)有限公司 音频数据的处理方法、装置以及电子设备
CN114286217A (zh) * 2021-12-21 2022-04-05 深圳飞音时代网络通讯技术有限公司 一种电话机的音频处理电路和电话机
WO2023024016A1 (zh) * 2021-08-26 2023-03-02 深圳市显盈科技股份有限公司 多功能收音设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI846439B (zh) * 2023-04-21 2024-06-21 邁萪科技股份有限公司 具有降噪機制的顯示卡與散熱裝置組合結構

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100602719B1 (ko) * 2002-09-26 2006-07-20 주식회사 팬택앤큐리텔 이어잭 자동 감지 회로 및 방법
US20080163195A1 (en) * 2006-12-27 2008-07-03 Samsung Electronics Co., Ltd. Display apparatus and driving method of display apparatus
KR102454761B1 (ko) * 2015-06-15 2022-10-13 엘지전자 주식회사 영상표시장치의 동작 방법
KR102600989B1 (ko) * 2019-01-29 2023-11-13 삼성전자주식회사 디스플레이 패널 및 이를 포함하는 디스플레이 장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023024016A1 (zh) * 2021-08-26 2023-03-02 深圳市显盈科技股份有限公司 多功能收音设备
CN113936698A (zh) * 2021-09-26 2022-01-14 度小满科技(北京)有限公司 音频数据的处理方法、装置以及电子设备
CN114286217A (zh) * 2021-12-21 2022-04-05 深圳飞音时代网络通讯技术有限公司 一种电话机的音频处理电路和电话机
CN114286217B (zh) * 2021-12-21 2025-08-26 深圳飞音时代网络通讯技术有限公司 一种电话机的音频处理电路和电话机

Also Published As

Publication number Publication date
TWM612163U (zh) 2021-05-21
KR200496852Y1 (ko) 2023-05-11
KR20220001537U (ko) 2022-06-28

Similar Documents

Publication Publication Date Title
JP3231908U (ja) 自動ノイズリダクション機能を有するディスプレイ装置
CN112449229B (zh) 一种音画同步处理方法及显示设备
JP5335309B2 (ja) 通信装置
KR20190028043A (ko) 이어폰을 통한 어플리케이션별 오디오 출력 제어 방법 및 이를 구현한 전자 장치
WO2011125905A1 (ja) テレビ受信機の動作モード自動設定装置、動作モード自動設定装置を備えたテレビ受信機、動作モード自動設定方法
TW201344597A (zh) 顯示裝置控制方法、控制器及多媒體系統
EP3147895A1 (en) Display apparatus and method for controlling display apparatus thereof
US20130321714A1 (en) Electronic apparatus, control method of an electronic apparatus, and control program of an electronic apparatus
US20140270199A1 (en) Notification control device, notification control method and storage medium
US12067327B2 (en) Display apparatus and method for adjusting headphone volume
JP2006005418A (ja) 情報受信・再生装置、情報受信・再生方法、情報受信・再生プログラム及びプログラム記録媒体
CN112424744B (zh) 电子设备和电子设备的音量调节方法
US20250203289A1 (en) Electronic device for processing sound differently according to mode, and control method thereof
CN111124353B (zh) 一种控制方法及电子设备
US12474784B2 (en) Electronic apparatus and controlling method thereof
EP3846485A1 (en) Electronic device and display method of on-screen-display interface
US11113850B2 (en) Electronic apparatus and control method thereof
TW202301100A (zh) 模式切換方法及其顯示設備
CN113794919B (zh) 一种显示设备及出声设备的设置方法
EP3573282B1 (en) Communication device, generated data size control method, and program
KR20210105636A (ko) 전자장치 및 그 제어방법
KR20090038660A (ko) 미디어 싱크 디바이스 및 그 제어방법
CN117857863A (zh) 一种显示设备及设置菜单的显示方法
EP3837850B1 (en) Display apparatus, server, electronic apparatus and control methods thereof
CN110248050B (zh) 一种摄像头模组及移动终端

Legal Events

Date Code Title Description
R150 Certificate of patent or registration of utility model

Ref document number: 3231908

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees