JP2017193207A

JP2017193207A - 車室内会話支援装置

Info

Publication number: JP2017193207A
Application number: JP2016083134A
Authority: JP
Inventors: 家田　清一; Seiichi Ieda; 清一家田; 一平菅江; Ippei Sugae
Original assignee: Aisin Seiki Co Ltd
Current assignee: Aisin Corp
Priority date: 2016-04-18
Filing date: 2016-04-18
Publication date: 2017-10-26
Also published as: WO2017183372A1

Abstract

【課題】より明確に、発話者の音声を聞き手に伝えることができる車室内会話支援装置を提供すること。【解決手段】モニタＥＣＵ３０は、集音マイク４とともに集音部を構成して車室内の音情報ＩＳを収集する。また、乗員検知部としてのモニタＥＣＵ３０は、カメラ３が映す撮影画像ＩＰに基づき車室内の乗員を検知する。更に、会話判定部及び発話者特定部としてのモニタＥＣＵ３０は、収集した音情報ＩＳが乗員の会話を示すものであるか否かを判定し、その音情報ＩＳが乗員の会話を示すものである場合には該会話の発話者を特定する。そして、モニタＥＣＵ３０は、その音情報ＩＳが乗員の会話を示すものである場合には、車室内に設けられた上記集音マイク４及びスピーカー５とともに選択収集出力部を形成することで、その発話者の音声を選択的に収集して出力する構成になっている。【選択図】図４

Description

本発明は、車室内会話支援装置に関するものである。

従来、車室内で集音された乗員の音声をスピーカーにより拡声する車室内会話補助装置がある。例えば、特許文献１に記載の車室内会話補助装置は、車両の前部座席側及び後部座席側において、それぞれ、その車室の天井部に設けられた集音マイク及びスピーカーを備えている。そして、これにより、前部座席側の集音マイクが拾う音を後部座席側のスピーカーから出力し、及び後部座席側の集音マイクが拾う音を前部座席側のスピーカーから出力することで、その前部座席に着座する乗員と後部座席に着座する乗員との間の会話を補助する構成になっている。

また、この従来例において、前部座席側の集音マイクは、その前部座席側のスピーカーよりも前方側に設けられ、後部座席側の集音マイクは、その後部座席側のスピーカーよりも後方側に設けられている。そして、前部座席側の集音マイクは、車両前方側に指向する集音領域を有し、後部座席側の集音マイクは、車両後方側に指向する集音領域を有している。

即ち、このような構成を採用することで、集音マイクがスピーカーの出力を拾い難くなる。そして、これにより、ハウリングの発生を抑えてクリアな音出力を実現することが可能になっている。

特許第５１２２４１４号公報

しかしながら、現実の車両においては、その車室内に設けられた集音マイクが車両内外の様々な音を拾うことになる。そして、上記従来技術の構成では、未だ、これらの雑音が、その会話の妨げとなる可能性を残していることから、この点において、なお改善の余地を残すものとなっていた。

本発明は、上記問題点を解決するためになされたものであって、その目的は、より明確に発話者の音声を聞き手に伝えることのできる車室内会話支援装置を提供することにある。

上記課題を解決する車室内会話支援装置は、車室内の音情報を収集する集音部と、前記車室内の乗員を検知する乗員検知部と、前記音情報が前記車室内に検知された乗員の会話を示すものであるか否かを判定する会話判定部と、前記音情報が前記乗員の会話を示すものである場合に該会話の発話者を特定する発話者特定部と、前記発話者の音声を選択的に収集して出力する選択収集出力部と、を備えることが好ましい。

上記構成によれば、車両内外の音が会話の妨げとなるような状況においても、より明確に、発話者の音声を聞き手に伝えることができる。そして、これにより、乗員の利便性を向上させることができる。

上記課題を解決する車室内会話支援装置は、前記車室内における前記乗員の着座位置を特定する着座位置特定部と、前記音情報の音源を特定する音源特定部と、前記音情報の音源が前記車室内に検知された何れかの乗員の前記着座位置と一致するか否かを判定する音源乗員一致判定部と、を備え、前記発話者特定部は、前記音情報の音源が前記何れかの乗員の着座位置と一致する場合に、該乗員を前記会話の発話者として特定することが好ましい。

上記構成によれば、精度よく、会話の発話者を特定することができる。そして、これにより、より明確に、その発話者となる乗員の音声を聞き手に伝えることができる。
上記課題を解決する車室内会話支援装置は、互いに異なる方向を向いた状態で前記車室内に設けられた複数の指向性マイクを備え、前記選択収集出力部は、前記発話者の方向を向いた前記指向性マイクを選択して前記発話者の音声を収集することが好ましい。

上記構成によれば、精度よく、発話者の音声を選択的に収集することができる。
上記課題を解決する車室内会話支援装置は、互いに異なる方向を向いた状態で前記車室内に設けられた複数の指向性スピーカーを備え、前記選択収集出力部は、前記選択的に収集した前記発話者の音声を、前記車室内に検知された前記発話者以外の乗員の方向を向いた前記指向性スピーカーから出力することが好ましい。

上記構成によれば、効率よく、発話者の音声を聞き手となる他の乗員に伝えることができる。
上記課題を解決する車室内会話支援装置は、前記音情報に含まれる音声以外の雑音を減衰するノイズフィルタを備えることが好ましい。

上記構成によれば、より明確に、発話者の音声を聞き手に伝えることができる。

本発明によれば、より明確に、発話者の音声を聞き手に伝えることができる。

車室内に設けられたモニタユニット（カメラ、集音マイク及びスピーカー）を示す説明図。カメラが映す撮影画像の説明図（乗員なし）。モニタユニットの概略構成図（下面図）。車室内会話支援装置の概略構成図。カメラが映す撮影画像の説明図（乗員あり）。車室内会話支援制御の開始手順を示すフローチャート。車室内会話支援制御の処理手順を示すフローチャート。

以下、車室内会話支援装置の一実施形態を図面に従って説明する。
図１に示すように、本実施形態の車両１には、車室２内の画像を映すカメラ３が設けられている。具体的には、本実施形態の車両１において、このカメラ３は、集音マイク４及びスピーカー５と一体化されたモニタユニット１０を構成する。そして、本実施形態の車両１は、このモニタユニット１０が、その車室２の天井部２ａにおける略中央部、前部座席７ｆと後部座席７ｒとの間の位置に配置された構成になっている。

詳述すると、図２及び図３に示すように、本実施形態のモニタユニット１０には、そのカメラ３として、車室２に設けられた全ての座席７及び全ての車窓２０を撮影する全方位カメラ２３が設けられている。

尚、図２に示す撮影画像ＩＰ中、左下に映る座席７が右前部座席（運転席）７ｆａであり、右下に映る座席７が左前部座席（助手席）７ｆｂである。また、上側に映る各座席７が、それぞれ右後部座席７ｒａ及び左後部座席７ｒｂである。そして、この図２に示す撮影画像ＩＰには、その車窓２０として、これら各座席７の側方に位置する各ウィンドガラス２０ｆａ，２０ｆｂ，２０ｒａ，２０ｒｂ、並びに車両１のフロントガラス２０ｆｃ及びリアガラス２０ｒｃが映っている。

また、図３に示すように、このモニタユニット１０には、その集音マイク４として、異なる方向を向いた複数の指向性マイク２４（２４ａ〜２４ｄ）を備えたマイクアレイ２４Ｘが設けられている。そして、このモニタユニット１０には、そのスピーカー５として、同じく異なる方向を向いた複数の指向性スピーカー２５（２５ａ〜２５ｄ）を備えるスピーカーアレイ２５Ｘが設けられている。

具体的には、本実施形態のモニタユニット１０において、マイクアレイ２４Ｘは、その全方位カメラ２３が設けられた位置を中心に、各指向性マイク２４を放射状に配置した構成になっている。そして、スピーカーアレイ２５Ｘも同様に、その指向性スピーカー２５を放射状に配置した構成になっている。

図４に示すように、本実施形態の車両１において、このモニタユニット１０は、モニタＥＣＵ３０に接続されている。また、本実施形態のモニタＥＣＵ３０は、そのカメラ３が映す撮影画像ＩＰ、及び集音マイク４により集められた音情報ＩＳを解析する。尚、本実施形態のモニタＥＣＵ３０は、図示しない車内ネットワークを介して接続された認証ＥＣＵが携帯機（電子キー）との無線通信により車両１に対する人の近接を検知した場合に、その画像解析処理及び音情報解析処理を開始する。更に、このモニタＥＣＵ３０は、そのスピーカー５を介した音出力を実行する。そして、本実施形態の車両１においては、これにより、このモニタユニット１０の機能を用いた車室内会話支援装置３１が形成されている。

詳述すると、図２及び図５に示すように、本実施形態のモニタＥＣＵ３０は、車室２内に設けられたカメラ３の撮影画像ＩＰを解析することにより、車両１に乗車した乗員４０の有無、及びその着座位置を検出する。具体的には、このモニタＥＣＵ３０は、例えば、撮影画像ＩＰに「人の顔が映っていると判定可能な部分」があるか否か等、周知の人認証ロジックを用いて車室２内の乗員４０を検知する。そして、これにより、例えば、図５に示す例においては、その車両１の右前部座席（運転席）７ｆａに着座する第１の乗員４１、及び左後部座席７ｒｂに着座する第２の乗員４２が検知される構成になっている。

また、本実施形態のモニタＥＣＵ３０は、マイクアレイ２４Ｘを構成する各指向性マイク２４の入力レベル、即ち集音量の比較に基づいて、その集音マイク４を用いて収集した音情報ＩＳの音源を特定する。そして、このモニタＥＣＵ３０は、音情報ＩＳの音源が車室２内に検知された何れかの乗員４０の着座位置と一致するか否かを判定する。

具体的には、本実施形態のモニタＥＣＵ３０は、そのマイクアレイ２４Ｘを備えたモニタユニット１０が設けられた位置、即ち天井部２ａの略中央部を基準とした音情報ＩＳの音源方向を特定する。そして、その音源方向に乗員４０の着座する座席７がある場合に、その乗員４０の着座位置が音源に一致するものと判定する。

また、本実施形態のモニタＥＣＵ３０は、集音マイク４を用いて収集した音情報ＩＳが乗員４０の会話を示すものであるか否かを判定する。尚、本実施形態の車両１において、このモニタＥＣＵ３０は、周知の音声認識機能を有している。更に、本実施形態のモニタＥＣＵ３０は、車室２内の音情報ＩＳが乗員４０の会話を示すものであり、且つ当該音情報ＩＳの音源が何れかの乗員４０の着座位置と一致する場合に、この乗員４０を会話の発話者５１として特定する。そして、この発話者５１の音声を選択的に収集して、その発話者５１以外の聞き手５２となる乗員４０に向かって出力すべく、モニタユニット１０の作動を制御する。

例えば、図５に示す例において、車両１の右前部座席７ｆａに着座する第１の乗員４１が発話している場合、そのマイクアレイ２４Ｘを構成する各指向性マイク２４ａ〜２４ｄのうち、この第１の乗員４１が着座する右前部座席７ｆａの方向を向いた指向性マイク２４ａの入力レベル（集音量）が最大となる（図３参照）。尚、図３は、天井部２ａに設けられたモニタユニット１０を下方から見た図であり、同図中、上側が車両前方側、左側が車両右側になる。そして、本実施形態のモニタＥＣＵ３０は、これにより、その第１の乗員４１を会話の発話者５１として特定する。

また、本実施形態のモニタＥＣＵ３０は、この発話者５１に特定された第１の乗員４１の方向を向いた指向性マイク２４ａを用いて収集した音情報ＩＳＴ、即ち発話者５１の音声を、第２の乗員４２が着座する左後部座席７ｒｂの方向を向いた指向性スピーカー２５ｄから、即ち、その発話者５１以外の聞き手５２となる乗員４０に向かって出力する。更に、本実施形態のモニタＥＣＵ３０は、その集音マイク４を用いて収集した音情報ＩＳに含まれる音声以外の雑音を減衰するノイズフィルタ５５を備えている。そして、本実施形態の車室内会話支援装置３１は、これにより、発話者５１の音声を、その聞き手５２となる他の乗員４０に対して明確に伝えることが可能になっている。

次に、本実施形態のモニタＥＣＵ３０が実行する車室内会話支援制御の開始手順及びその実行手順について説明する。
図６のフローチャートに示すように、本実施形態のモニタＥＣＵ３０は、カメラ３が映す車室２内の撮影画像ＩＰについて画像解析を実行すると（ステップ１０１）、その解析結果に基づいて、車室２内に乗員４０がいるか否かを判定する（ステップ１０２）。そして、車室２内に乗員４０がいると判定した場合（ステップ１０２：ＹＥＳ）に、発話者５１となる乗員４０の音声を選択的に収集して出力すべく、その車室内会話支援制御を実行する構成になっている（ステップ１０３）。

また、本実施形態のモニタＥＣＵ３０は、上記ステップ１０２において、車室２内に乗員４０がいないと判定した場合（ステップ１０２：ＮＯ）、続いて、その車両１がドアロック状態、即ち施錠された状態にあるか否かを判定する（ステップ１０４）。そして、車両１がドアロック状態にあると判定した場合（ステップ１０４：ＹＥＳ）には、そのカメラ３が映す車両１周辺の撮影画像ＩＰを用いて画像解析に基づく車両１のセキュリティ制御を実行する構成になっている（ステップ１０５）。

さらに詳述すると、図７のフローチャートに示すように、本実施形態のモニタＥＣＵ３０は、その車室内会話支援制御（図６参照、ステップ１０３）において、先ず、画像解析により検知した乗員４０の着座位置、即ち乗員４０が着座する座席７を特定する（ステップ２０１）。次に、モニタＥＣＵ３０は、モニタユニット１０の集音マイク４を用いて収集した車室２内の音情報ＩＳを解析する（ステップ２０２）。そして、その解析結果に基づいて、音情報ＩＳの音源を特定、詳しくは、集音マイク４が設けられた位置を基準とした音源方向を特定する（ステップ２０３）。

次に、モニタＥＣＵ３０は、上記ステップ２０１において特定した何れかの乗員４０の着座位置と上記ステップ２０３において特定した音情報ＩＳの音源とが一致するか否かを判定する（ステップ２０４）。更に、モニタＥＣＵ３０は、その音情報ＩＳの音源が何れかの乗員４０の着座位置に一致する場合（ステップ２０４：ＹＥＳ）、当該音情報ＩＳが乗員４０の会話を示すものであるか否かを判定する（ステップ２０５）。そして、この音情報ＩＳが乗員４０の会話を示すものである場合（ステップ２０５：ＹＥＳ）には、その音情報ＩＳの音源に一致する乗員４０を会話の発話者５１として特定する（ステップ２０６）。

次に、モニタＥＣＵ３０は、この発話者５１として特定された乗員４０の音声を選択的に収集する（ステップ２０７）。即ち、モニタユニット１０のマイクアレイ２４Ｘを構成する各指向性マイク２４（２４ａ〜２４ｄ）のうち、発話者５１が着座する座席７の方向を向いた指向性マイク２４を選択して、その音情報ＩＳＴ、つまりは発話者５１の音声を収集する。また、本実施形態のモニタＥＣＵ３０は、ノイズフィルタ５５を用いることにより（図４参照）、この発話者５１が着座する座席７の方向を向いた指向性マイク２４により収集した音情報ＩＳＴに含まれる音声以外の雑音を減衰する（ノイズフィルタ処理、ステップ２０８）。更に、本実施形態のモニタＥＣＵ３０は、モニタユニット１０のスピーカーアレイ２５Ｘを構成する各指向性スピーカー２５（２５ａ〜２５ｄ）のうち、その発話者５１以外の聞き手５２となる乗員４０が着座する座席７の方向を向いた指向性スピーカー２５を選択する。そして、この選択された指向性スピーカー２５から、そのノイズフィルタ処理後の音情報ＩＳＴ、つまりは雑音を減衰した状態で、その発話者５１の音声を出力する構成になっている（ステップ２０９）。

以上、本実施形態によれば、以下のような効果を得ることができる。
（１）モニタＥＣＵ３０は、集音マイク４とともに集音部を構成して車室２内の音情報ＩＳを収集する。また、乗員検知部としてのモニタＥＣＵ３０は、カメラ３が映す撮影画像ＩＰに基づき車室２内の乗員４０を検知する。更に、会話判定部及び発話者特定部としてのモニタＥＣＵ３０は、収集した音情報ＩＳが乗員４０の会話を示すものであるか否かを判定し、その音情報ＩＳが乗員４０の会話を示すものである場合には該会話の発話者５１を特定する。そして、モニタＥＣＵ３０は、その音情報ＩＳが乗員４０の会話を示すものである場合には、車室２内に設けられた上記集音マイク４及びスピーカー５とともに選択収集出力部を形成することで、その発話者５１の音声を選択的に収集して出力する構成になっている。

上記構成によれば、車両１内外の音が会話の妨げとなるような状況においても、より明確に、発話者５１の音声を聞き手５２に伝えることができる。そして、これにより、乗員４０の利便性を向上させることができる。加えて、そのカメラ３が映す撮影画像ＩＰについて画像解析を行うことにより、車両１のセキュリティ制御を実行することができる。

（２）着座位置特定部としてのモニタＥＣＵ３０は、カメラ３が映す撮影画像ＩＰに基づき車室２内における乗員４０の着座位置（着座する座席７）を特定する。また、音源特定部としてのモニタＥＣＵ３０は、車室２内の集音マイク４を用いて収集した音情報ＩＳを解析することにより、その音情報ＩＳの音源を特定する。更に、音源乗員一致判定部としてのモニタＥＣＵ３０は、その特定した音情報ＩＳの音源が車室２内に検知された何れかの乗員４０の着座位置と一致するか否かを判定する。そして、発話者特定部としてのモニタＥＣＵ３０は、その音情報ＩＳの音源が何れかの乗員４０の着座位置と一致する場合に、この乗員４０を会話の発話者５１として特定する。

上記構成によれば、精度よく、その会話の発話者５１を特定することができる。そして、これにより、より明確に、その発話者５１となる乗員４０の音声を聞き手５２に伝えることができる。

（３）車室２内には、異なる方向を向いた複数の指向性マイク２４（２４ａ〜２４ｄ）を有するマイクアレイ２４Ｘが設けられる。そして、選択収集出力部としてのモニタＥＣＵ３０は、発話者５１の方向を向いた指向性マイク２４を選択して、その発話者５１の音声を収集する。このような構成を採用することで、精度よく、発話者５１の音声を選択的に収集することができる。

（４）音源特定部及び音源乗員一致判定部としてのモニタＥＣＵ３０は、各指向性マイク２４の入力レベルに基づいて、マイクアレイ２４Ｘが設けられた位置を基準とした音情報ＩＳの音源方向を特定し、及びその音情報ＩＳの音源方向に乗員４０の着座位置がある場合に、この乗員４０の着座位置が音情報ＩＳの音源に一致すると判定する。これにより、精度よく、集音マイク４を用いて収集した音情報ＩＳの音源が車室２内に検知された何れかの乗員４０の着座位置と一致するか否かを判定することができる。

（５）車室２内には、異なる方向を向いた複数の指向性スピーカー２５（２５ａ〜２５ｄ）を有するスピーカーアレイ２５Ｘが設けられる。そして、選択収集出力部としてのモニタＥＣＵ３０は、その選択的に収集した発話者５１の音声を、聞き手５２となる発話者５１以外の乗員４０の方向を向いた指向性スピーカー２５から出力する。これにより、効率よく、発話者５１の音声を聞き手５２となる他の乗員４０に伝えることができる。

（６）発話者音情報出力部としてのモニタＥＣＵ３０は、その集音マイク４を用いて収集した音情報ＩＳに含まれる音声以外の雑音を減衰するノイズフィルタ５５を備える。これにより、より明確に、発話者５１の音声を聞き手５２に伝えることができる。

なお、上記実施形態は以下のように変更してもよい。
・上記実施形態では、カメラ３は、集音マイク４及びスピーカー５と一体化されたモニタユニット１０を構成する。そして、車室２の天井部２ａにおける略中央部に配置されることとした。しかし、これに限らず、カメラ３は、必ずしも集音マイク４やスピーカー５と一体に設けられるものでなくともよく、その配置についてもまた、例えば、天井部２ａの前方側や後方側、或いはセンターピラー等、任意に変更してもよい。また、必ずしも全方位カメラ２３のような広角カメラを用いる構成でなくともよく、そのカメラ数もまた任意に変更してもよい。そして、集音マイク４やスピーカー５の配置や構成、及びその数についてもまた、任意に変更してもよい。

具体的には、集音マイク４にマイクアレイ２４Ｘを用いない構成、或いはスピーカー５にスピーカーアレイ２５Ｘを用いない構成であってもよい。例えば、互いに異なる方向を向いた複数の指向性マイク２４を有するとともに、これらの各指向性マイク２４がマイクアレイ２４Ｘを形成しない状態で車室２内に配置される構成であってもよい。このような構成を採用した場合においても、各指向性マイク２４の入力レベルに基づいて、その音情報ＩＳの音源を特定することができる。そして、互いに異なる方向を向いた複数の指向性スピーカー２５を有するとともに、これらの各指向性スピーカー２５がスピーカーアレイ２５Ｘを形成しない状態で車室２内に配置される構成であってもよい。

・また、必ずしも指向性マイク２４や指向性スピーカー２５を有しない構成であってもよい。例えば、車室２内の複数箇所に集音マイク４が設けられた構成においては、その複数の集音マイク４のうち、発話者５１に特定された乗員４０の近傍に配置されたものを選択して、発話者５１の音声を収集する構成としてもよい。また、聞き手５２となる乗員４０の近傍に配置されたスピーカー５を選択して、発話者５１の音声を出力する構成としてもよい。そして、選択的に収集された発話者５１の音声を出力する段階においては、必ずしも、その音声出力が聞き手５２となる発話者５１以外の乗員４０に向けたものでなくともよい。

・上記実施形態では、認証ＥＣＵが携帯機（電子キー）との無線通信により車両１に対する人の近接を検知した場合に、車室内会話支援制御に用いられる画像解析処理及び音情報解析処理が開始されることとした。しかし、これに限らず、例えば、車両１の電源投入時（ＩＧオン）等、カメラ３や集音マイク４の起動トリガを含め、その画像解析処理及び音情報解析処理の開始タイミングは任意に設定してもよい。

・上記実施形態では、集音マイク４を用いて収集した音情報ＩＳの音源と乗員４０の着座位置との一致判定後、その音情報ＩＳが会話を示すものであるか否かの判定を実行することとした（図７参照、ステップ２０４，２０５）。しかし、これに限らず、会話判定後に、その音源と乗員４０の着座位置との一致判定を行う構成としてもよい。そして、これにより、予め「会話」についてのスクリーニングをかけることで、より精度よく、会話の発話者５１を特定することができる。

・上記実施形態では、車室２内に設けられたカメラ３の撮影画像ＩＰを解析することにより、車両１に乗車した乗員４０の有無、及びその着座位置を検出することとした。しかし、これに限らず、車両シートに設けられた着座センサを用いて乗員検知を行う構成としてもよい。尚、着座センサの形式は、例えば、メンブレンスイッチや歪みゲージ等を用いた感圧式、静電容量式等、どのようなものであってもよい。そして、これにより、簡素な構成にて、高い演算処理能力を必要とせず、精度よく、その車室２内における乗員４０の有無、及びその着座位置を検出することができる。

・上記実施形態では、音情報ＩＳの音源が何れかの乗員４０の着座位置と一致する場合に、この乗員４０を会話の発話者５１として特定することとしたが、発話者５１の特定方向については、任意に変更してもよい。例えば、カメラ３の撮影画像ＩＰを解析することにより、車室２内の乗員４０について、その口元の動きを検出する。そして、これにより、その乗員４０が会話の発話者５１であるか否かを判定する等としてもよい。

・上記実施形態では、選択的に収集された発話者５１の音声を車室２内に検知された聞き手５２となる他の乗員４０に向かって出力することとした。しかし、これに限らず、カメラ３の撮影画像ＩＰを解析することにより、車窓２０越しに車両１周辺の人検知を実行する。そして、その会話の聞き手５２が車外に検知された人であると判定される場合（例えば、車室２内に検知された乗員４０が一人である場合等）、この車外の聞き手５２に向かって発話者５１の音声を出力する構成としてもよい。

例えば、上記実施形態と同様のスピーカーアレイ２５Ｘが車室２内に設けられた構成においては、そのスピーカーアレイ２５Ｘを形成する各指向性マイク２４のうち、カメラ３の撮影画像ＩＰに基づく人検知において、車外の人が映っていると判定された車窓２０の方向を向いたものを選択して発話者５１の音声を出力するとよい。そして、この場合、車室２外に設けられたスピーカー５を用いて車外の聞き手５２に音声出力を行う構成であってもよい。

・上記実施形態では、ノイズフィルタ５５を用いて雑音を減衰した状態で、その発話者５１の音声を出力することとしたが、このような雑音の減衰処理は必ずしも行わなくてもよい。

次に、以上の実施形態から把握することのできる技術的思想を効果とともに記載する。
（イ）異なる方向を向いた複数の指向性マイクを有して前記車室内に設けられたマイクアレイを備え、前記音源特定部は、前記各指向性マイクの入力レベルに基づき前記マイクアレイが設けられた位置を基準とした前記音情報の音源方向を特定し、前記音源乗員一致判定部は、前記音情報の音源方向に前記乗員の着座位置がある場合に、該乗員の着座位置が前記音源に一致すると判定すること、を特徴とする車室内会話支援装置。これにより、精度よく、集音マイクを用いて収集した音情報の音源が車室内に検知された何れかの乗員の着座位置と一致するか否かを判定することができる。

（ロ）前記乗員検知部は、車室内に設けられたカメラが映す撮影画像に基づいて車室内の乗員を検知すること、を特徴とする車室内会話支援装置。これにより、その撮影画像を車両のセキュリティ制御と共用することができる。

１…車両、２…車室、２ａ…天井部、３…カメラ（乗員検知部、発話者特定部、着座位置特定部、及び音源乗員一致判定部）、４…集音マイク（集音部、発話者特定部、音源乗員一致判定部、及び選択収集出力部）、５…スピーカー（選択収集出力部）、７…座席、７ｆ…前部座席、７ｒ…後部座席、７ｆａ…右前部座席、７ｒｂ…左後部座席、１０…モニタユニット、２０…車窓、２３…全方位カメラ、２４（２４ａ〜２４ｄ）…指向性マイク、２４Ｘ…マイクアレイ、２５（２５ａ〜２５ｄ）…指向性スピーカー、２５Ｘ…スピーカーアレイ、３０…モニタＥＣＵ（集音部、乗員検知部、会話判定部、発話者特定部、着座位置特定部、音源特定部、音源乗員一致判定部、及び選択収集出力部）、３１…車室内会話支援装置、４０…乗員、４１…第１の乗員、４２…第２の乗員、５１…発話者、５２…聞き手、５５…ノイズフィルタ、ＩＰ…撮影画像、ＩＳ，ＩＳＴ…音情報。

Claims

車室内の音情報を収集する集音部と、
前記車室内の乗員を検知する乗員検知部と、
前記音情報が前記車室内に検知された乗員の会話を示すものであるか否かを判定する会話判定部と、
前記音情報が前記乗員の会話を示すものである場合に該会話の発話者を特定する発話者特定部と、
前記発話者の音声を選択的に収集して出力する選択収集出力部と、
を備える車室内会話支援装置。
請求項１に記載の車室内会話支援装置において、
前記車室内における前記乗員の着座位置を特定する着座位置特定部と、
前記音情報の音源を特定する音源特定部と、
前記音情報の音源が前記車室内に検知された何れかの乗員の前記着座位置と一致するか否かを判定する音源乗員一致判定部と、を備え、
前記発話者特定部は、前記音情報の音源が前記何れかの乗員の着座位置と一致する場合に、該乗員を前記会話の発話者として特定すること、を特徴とする車室内会話支援装置。
請求項１又は請求項２に記載の車室内会話支援装置において、
互いに異なる方向を向いた状態で前記車室内に設けられた複数の指向性マイクを備え、
前記選択収集出力部は、前記発話者の方向を向いた前記指向性マイクを選択して前記発話者の音声を収集すること、を特徴とする車室内会話支援装置。
請求項１〜請求項３の何れか一項に記載の車室内会話支援装置において、
互いに異なる方向を向いた状態で前記車室内に設けられた複数の指向性スピーカーを備え、
前記選択収集出力部は、前記選択的に収集した前記発話者の音声を、前記車室内に検知された前記発話者以外の乗員の方向を向いた前記指向性スピーカーから出力すること、
を特徴とする車室内会話支援装置。
請求項１〜請求項４の何れか一項に記載の車室内会話支援装置において、
前記音情報に含まれる音声以外の雑音を減衰するノイズフィルタを備えること、
を特徴とする車室内会話支援装置。