JPH06110486A - 音声入力手段を持つマルチメディア装置 - Google Patents

Abstract

(57)【要約】 【目的】利用者による音声入力のための一連の操作が、
種々のメディアとの協調により容易に且つ確実に行え、
使い勝手が向上できるようにする。 【構成】本装置の表示部２の直前に利用者が立つと、接
近検知部５を構成するセンサ５１〜５４およびフックス
イッチ５５のうち、表示部２の表示画面近傍に設けられ
たセンサ５１がオンする。すると制御部７は、ハンドセ
ット型の音声入力部１の受話器を耳に当てる旨のメッセ
ージの表示と音声出力とを、表示部２と、音声入力部１
の外部に設けられた第１の音声出力部３を用いて行う。
ここで、音声入力部１の各部に設けられたセンサ５２〜
５４およびフックスイッチ５５の状態により、受話器が
耳に当てられたことが検知されると、制御部７は例えば
注文のための発声を要求するメッセージの表示と音声出
力を、表示部２と、音声入力部１に内蔵の第２の音声出
力部４を用いて行う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、音声を入力するための
音声入力手段を持ち、複数のメディアで入出力が可能な
マルチメディア装置に関する。

【０００２】

【従来の技術】近年、音声入力の操作性向上のために、
ハンドセット型の音声入力装置が開発されている。この
種の音声入力装置に、特願昭６３−２７４６９２号で示
されるようなものがある。この特願昭６３−２７４６９
２号記載の音声入力装置は、同入力装置の握り部などに
設けた接近検知手段（センサ）により、入力装置の状態
と利用者の動作を検知することで、音声入力を受付ける
タイミングを決定して、周囲雑音等が入力されるのを防
ぐようにしたものである。

【０００３】

【発明が解決しようとする課題】しかし、上記した従来
のハンドセット型の音声入力装置では、周囲雑音等の入
力は防げるものの、利用者にとっては、いつ音声入力装
置を持って、いつ音声を入力したらよいのか、また、い
つ音声入力装置を置いたらよいのかも分からず、使い勝
手が悪いという問題があった。

【０００４】本発明は上記事情に鑑みてなされたもので
その目的は、利用者による音声入力のための一連の操作
が、種々のメディアとの協調により容易に且つ確実に行
える、使い勝手のよいマルチメディア装置を提供するこ
とにある。

【０００５】

【課題を解決するための手段】本発明のマルチメディア
装置は、利用者が発声した音声を入力するためのハンド
セット型の音声入力手段と、利用者の存在および音声入
力手段を利用者が利用する際の利用者の各種動作を検知
するための検知手段と、この検知手段の検知内容をもと
に、利用者の動作に従う表示メッセージを表示手段に表
示させると共に、利用者の動作に従う音声メッセージを
音声出力手段から出力させる制御手段とを備えたことを
特徴とする。

【０００６】また本発明は、音声出力手段を、音声入力
手段の筐体外に設けられた第１の音声出力手段と、音声
入力手段を利用者が利用する際に利用者の耳元近傍に位
置するように同入力手段の筐体に内蔵された第２の音声
出力手段とにより構成し、音声メッセージの出力先が切
替えられるようにしたことをも特徴とする。

【０００７】

【作用】上記の構成においては、検知手段により検知さ
れた利用者の存在の有無と、利用者が存在する場合の利
用者の動作状態に従って、表示手段に表示される表示メ
ッセージの内容、あるいは音声出力手段から出力される
音声メッセージの内容が、制御手段により変えられる。
このように、利用者の動作に従って表示メッセージの内
容および音声メッセージの内容が切替えられるため、利
用者は、自身の動作状態によって切り替わる表示メッセ
ージあるいは音声メッセージに従い、ハンドセット型の
音声入力手段の適切な保持、発声、表示画面の確認など
の動作を確実に且つ容易に行うことが可能となる。

【０００８】また、第１の音声出力手段と、第２の音声
出力手段との２種の音声出力手段を用いた構成では、検
知手段により検知される利用者の動作状態に従って、音
声メッセージの出力先が切替えられる。このため、利用
者が本装置に接近した場合には、音声入力手段の筐体外
に設けられた第１の音声出力手段からメッセージを音声
出力し、利用者が音声入力手段を持った後は、利用者の
耳元に位置するように同入力手段の筐体に内蔵された第
２の音声出力手段からメッセージを音声出力することに
より、音声メッセージが騒音として音声入力手段により
入力されることを防止したり、他人に聞かれることを防
ぐ一方、必要な情報が利用者に確実に届くようにするこ
とが可能となる。

【０００９】

【実施例】以下、本発明の一実施例について、ハンバー
ガショップの注文機に用いるマルチメディア装置に適用
した場合を例に、図面を参照して説明する。図１は、同
実施例におけるマルチメディア装置の構成を概略的に示
すブロック図である。

【００１０】図１に示すマルチメディア装置は、音声入
力部１、表示部２、第１の音声出力部３、第２の音声出
力部４、接近検知部５、音声認識部６および制御部７か
ら構成される。

【００１１】音声入力部１は、利用者が発声した音声を
入力するのに用いられる。表示部２はメニューやメッセ
ージ等の表示に用いられるもので、ＣＲＴディスプレイ
や液晶ディスプレイなどである。

【００１２】第１の音声出力部３は、利用者が本装置に
接近した際に音声によるメッセージ等の出力に用いられ
るスピーカ（外部スピーカ）であり、音声入力部１の筐
体から離して設けられる。第２の音声出力部は、利用者
が音声入力部１（の筐体）を持った状態での利用者の動
作内容に応じた音声によるメッセージ等の出力に用いら
れるスピーカ（内部スピーカ）であり、音声入力部１の
筐体に内蔵されている。

【００１３】接近検知部５は、利用者の存在および音声
入力部１を利用者が利用する際の利用者の各種動作を検
知するためのもので、光学的なセンサ５１，５２，５
３，５４およびフックスイッチ５５から構成される。セ
ンサ５１は表示部２の表示画面近傍に設けられ、利用者
が表示部２の前に立ったことを検出するのに用いられ
る。センサ５２〜５４は、図２を参照して後述するよう
に、音声入力部１の本体部分（入力部１１）の筐体に設
けられる。またフックスイッチ５５は、図３を参照して
後述するように、音声入力部１の本体部分（入力部１
１）が置かれる支持台（１２）に設けられる。

【００１４】音声認識部６は音声入力部１により入力さ
れた音声の認識を司る。制御部７は接近検知部５による
検知内容をもとに、利用者の動作に従う表示メッセージ
を表示部２に表示させると共に、利用者の動作に従う音
声メッセージを第１の音声出力部３または第２の音声出
力部４から出力させる。また制御部７は、接近検知部５
による検知内容をもとに、音声認識部６による認識開始
可能タイミングを決定する。この制御部７は、表示部２
と共に、装置本体の筐体内に設けられている。音声入力
部１は、この音声入力部１の本体部分をなす図２の外観
図に示す入力部１１と、この入力部１１が置かれる図３
の外観図に示す支持台１２とから構成される。

【００１５】入力部１１の筐体構造は、図２に示すよう
に、電話機の送受話器型（ハンドセット型）に形成され
ており、握り部１１１と、この握り部１１１の両端に形
成された耳当て部１１２および口当て部１１３を有して
構成される。

【００１６】握り部１１１は、図１に示すマルチメディ
ア装置の利用者が入力部１１を持つための部分であり、
その背面の幾分耳当て部１１２に寄った位置にはセンサ
５２が、同じく口当て部１１３に寄った位置にはセンサ
５３が、それぞれ設けられている。なお、握り部１１１
は、利用者が入力部１１を持って耳当て部１１２に耳を
当接させたときに、口当て部１１３が利用者の口元近傍
に位置するように適当な長さを有している。

【００１７】上記センサ５２，５３は、物体や人が接触
するか、あるいは近接したこと、例えば利用者が握り部
１１１を手で握った場合等を検知するためのものであ
る。このセンサ５２，５３は、図４に示すように、発光
部１３１からの光を物体あるいは人体（ここでは手等）
で反射し、受光部１３２で受けることにより、物体等の
存在を検知する構造となっている。このセンサ５２，５
３の検知可能な物体等の距離は、任意に調整可能であ
り、通常は２〜３ｃｍとする。

【００１８】耳当て部１１２には、図１中の制御部７か
らの電気信号を音に変換して合成音（からなる音声メッ
セージ）を発するための、図１に示した第２の音声出力
部（スピーカ）４が内蔵されている。この耳当て部１１
２のほぼ中央部には、センサ５４が設けられている。こ
のセンサ５４は、耳当て部１１２が物体等、例えば利用
者の耳に接触するか、あるいは近接したことを検知する
ためのものである。センサ５４には、上記センサ５２，
５３と同様の構造の光学的センサが用いられる。また前
記センサ５１についても、センサ５２，５３と同様の構
造の光学的センサが用いられる。但し、センサ５１の検
知距離は数十ｃｍとする。

【００１９】口当て部１１３には、利用者が発した音声
を電気信号に変換するための電気音響変換器として、入
力部１１の中心をなすマイクロホン（図示せず）が内蔵
されている。このマイクロホンによって変換された電気
信号はコード１１７を介して図１に示す音声認識部６に
供給される。また、センサ５２〜５４の検知信号は同じ
コード１１７を介して、図１に示す制御部７に供給され
る。

【００２０】支持台１２は、図３に示すように、耳当て
部１１２および口当て部１１３を下向きにして入力部１
１を置いたときに、その耳当て部１１２および口当て部
１１３が嵌まる凹部１２１，１２２を有している。そし
て耳当て部１１２が嵌まる凹部１２１には、入力部１１
が支持台１２に置かれたことを検知するためのフックス
イッチ５５が設けられている。このフックスイッチ５５
は、支持台１２に入力部１１が置かれるとオフとなり、
入力部１１が取上げられるとオンとなる。なお、フック
スイッチ５５に代えて、センサ５１〜５４と同様の構造
の光学的センサを用いることも可能である。この場合、
検知距離は、２〜３ｃｍとする。次に本発明の一実施例
の動作を説明する。

【００２１】まず、接近検知部５を構成するセンサ５１
〜５４およびフックスイッチ５５の検知信号であるオン
（ｏｎ）／オフ（ｏｆｆ）状態信号は制御部７に導かれ
る。制御部７は、センサ５１〜５４およびフックスイッ
チ５５のオン／オフ状態信号（オン／オフ状態）をもと
に、利用者の存在の有無、入力部１１に対する利用者の
操作（動作）内容を、図５に整理して示すように判別す
ることができる。

【００２２】即ち制御部７は、（表示部２の表示画面近
傍に設けられた）センサ５１がオンであれば、利用者が
本マルチメディア装置（の表示部）の前に存在する状態
（１）を判別し、センサ５１がオフであれば、利用者が
本マルチメディア装置（の表示部）の前に存在しない状
態（２）を判別する。

【００２３】また制御部７は、入力部１１背面の耳当て
部１１２寄りの位置と口当て部１１３寄りの位置に設け
られたセンサ５２，５３の少なくとも一方がオン、耳当
て部１１２に設けられたセンサ５４がオン、フックスイ
ッチ５５もオンであれば、入力部１１を利用者の耳に正
しく当てている状態（３）を判別する。

【００２４】次に、センサ５２，５３がいずれもオフ、
センサ５４がオン、フックスイッチ５５がオフであれ
ば、制御部７は、入力部１１を支持台１２の上に正しく
置いている状態（４）を判別する。

【００２５】次に、センサ５２，５３が少なくとも一方
がオン、センサ５４がオフ、フックスイッチ５５がオン
であれば、制御部７は、図２（ａ）に示す入力部１１の
面（上面）を下にしてテーブル等に置いている状態
（５）、あるいは入力部１１が取上げられたが、まだ耳
に当てられていない状態（８）を判別する。

【００２６】次に、センサ５２，５３がいずれもオフ、
センサ５４がオフ、フックスイッチ５５がオンであれ
ば、制御部７は、図２（ｂ）に示す入力部１１の面（一
方の側面）、あるいはその反対の面（他方の側面）を下
にしてテーブル等に置いている状態（６）を判別する。

【００２７】次に、センサ５２，５３がいずれかもオ
フ、センサ５４がオン、フックスイッチ５５がオンであ
れば、制御部７は、図２（ｃ）に示す入力部１１の面
（下面）を下にしてテーブル等に置いている状態
（７）、あるいは入力部１１を耳に当てているが持ち方
が悪い状態（９）を判別する。

【００２８】さて、本マルチメディア装置の表示部２の
直前に利用者が立つと、接近検知部５を構成するセンサ
５１〜５４およびフックスイッチ５５のうち、表示部２
の表示画面近傍に設けられたセンサ５１がオンする。す
ると制御部７は、図５に示す状態（１）を判別し、図６
に示すフローチャートに従う処理を開始する。

【００２９】まず制御部７は、例えば図７に示すよう
な、「受話器を耳に当てて下さい。」というメッセージ
を含む案内画面を、表示部２に表示する（ステップＳ
１）。同時に制御部７は、例えば「受話器をお持ち下さ
い。」という音声メッセージを、第１の音声出力部（外
部スピーカ）３から出力させる。このとき、音声入力部
１の入力部１１（受話器）は支持台１２の上に正しく置
かれている図５に示す状態（４）にあり、センサ５２，
５３はオフ、センサ５４はオン、フックスイッチ５５は
オフとなっている。

【００３０】本装置の表示部２の前面に立った利用者
は、上記の表示内容（図７参照）および音声出力内容に
従って、まず入力部１１の握り部１１１を掴んで同入力
部１１を支持台１２から取上げる。このように、利用者
が入力部１１を図５に示す状態（８）にすると、センサ
５２，５３の少なくとも一方がオン、センサ５４がオ
フ、フックスイッチ５５がオンとなる。利用者は、上記
のように入力部１１を取上げると、その入力部１１の耳
当て部１１２を耳に当てる。

【００３１】このように本実施例では、利用者が図１に
示す構成のマルチメディア装置（の表示部２）の前に立
つだけで、図７に示すような案内画面が表示されると共
に、、外部スピーカである第１の音声出力部３から「受
話器をお持ち下さい。」という音声メッセージが出力さ
れるため、利用者はこれに従って、音声入力部１の入力
部１１を支持台１２から取上げて、その耳当て部１１２
を耳に当てることができる。

【００３２】さて利用者が、入力部１１を取上げた後、
その耳当て部１１２を正しく耳に当てると、センサ５
２，５３の少なくとも一方がオン、フックスイッチ５５
がオンを保ったまま、センサ５４がオンとなる。

【００３３】すると制御部７は、入力部１１が図５に示
す状態（３）となったこと、即ち利用者が入力部１１を
正しく持って、その耳当て部１１２を耳に正しく当てて
いる状態になったことを判別する（ステップＳ２，Ｓ
３）。この場合、制御部７は、入力部１１を用いた音声
による注文が正しく行える状態になったものと判断し、
例えば図８に示すように、「ご希望の品名を発声して下
さい。」というメッセージを含むメニューの画面を表示
部２に表示する（ステップＳ４）。同時に制御部７は、
音声入力部１の入力部１１（に設けられた耳当て部１１
２）に内蔵されている第２の音声出力部（内部スピー
カ）４から、例えば「発声をどうぞ。」という音声メッ
セージを出力させる。また制御部７は、利用者からの音
声による注文が可能となったことを判断すると、これ以
降に音声入力部１（の入力部１１）から入力される音声
を受付けて認識対象とすることを音声認識部６に通知す
る。

【００３４】利用者は、図８に示すメニュー画面を見な
がら、上記のように入力部１１を取上げて耳当て部１１
２を耳に当てた状態で、したがって口当て部１１３を口
元に近づけた状態で、上記の「発声をどうぞ。」の音声
メッセージに従って希望の品名を発声をすればよい。例
えば利用者が、「ハンバーガ」「１つ」と発声すれば、
この音声が入力部１１の耳当て部１１２に内蔵のマイク
ロホンにより電気信号に変換されて音声認識部６に送ら
れ、同認識部６で認識される。また、利用者が続けて、
例えば「グレープジュース」「１つ」と発声すれば、同
様に音声認識部６で認識される。

【００３５】この際、利用者が「発声をどうぞ。」の音
声メッセージの出力終了を待たずに、注文のための発声
を行ったとしても、この音声メッセージは、入力部１１
の耳当て部１１２に内蔵されている第２の音声出力部４
から出力されるため、入力部１１の口当て部１１３に内
蔵されたマイクロホンにより拾われて雑音となる虞はな
い。勿論、「発声をどうぞ。」の音声メッセージの出力
終了後に入力部１１（の口当て部１１３に内蔵されたマ
イクロホン）から入力された音声（電気信号）だけを受
付けるようにするならば、上記の音声メッセージを外部
スピーカである第１の音声出力部３から出力しても問題
はない。但し、音声メッセージの出力終了を待ちきれず
に注文を行う利用者が存在することを考慮すると、上記
したように、ステップＳ２，Ｓ３で入力部１１が図５に
示す状態（３）となったことを判別した時点以降の入力
音声を受付け、「発声をどうぞ。」の音声メッセージを
内部スピーカである第２の音声出力部４から出力するよ
うにした方が都合がよい。さて、音声認識部６での音声
認識結果、即ち利用者からの音声による注文内容の音声
認識結果は、認識の都度、制御部７に送られる。制御部
７は、この音声認識部６の認識結果を受け、認識された
注文内容を、例えば図９に示すように、表示部２に表示
されているメニュー画面上で明示する（ステップＳ５，
Ｓ６）。この明示方式（強調表示方式）としては、反転
表示、ブリンク表示、色を変えた表示、枠で囲む表示等
の種々の方式が適用可能である。

【００３６】その後、予め定められた一定期間を越えて
も発声がなく、また入力部１１（受話器）が支持台１２
に置かれてもいない場合には（ステップＳ７〜Ｓ１
０）、制御部７は、注文が完了したものとして、例えば
「ただいまのご注文はハンバーガ１つとグレープジュー
ス１つです。よろしければ、受話器を置いて下さい。」
という音声メッセージ、即ち利用者の注文結果の確認要
求と音声入力の終了操作を促すためのメッセージを、音
声入力部１の入力部１１（に設けられた耳当て部１１
２）に内蔵されている第２の音声出力部４から出力させ
る（ステップＳ１１）。

【００３７】ここで利用者が入力部１１（受話器）を支
持台１２に置けば、センサ５２，５３のはいずれもオ
フ、センサ５４はオン、フックスイッチ５５はオフとな
る。すると制御部７は、入力部１１が図５に示す状態
（４）になったことを判別し、メニュー画面上に明示し
てある注文が決定されたことを認識する（ステップＳ１
２，Ｓ１３）。

【００３８】一方、注文内容に誤りがある場合に、利用
者が例えば「違います」とか「訂正」と発声すれば、そ
の発声内容が音声認識部６により認識されて制御部７に
渡された段階で、「注文をし直して下さい。」等のメッ
セージを表示部２に表示すると共に、第２の音声出力部
４から音声出力させる（ステップＳ１４，Ｓ１５）。こ
れにより、再度の音声入力による注文（のし直し）が可
能となる。また、利用者の注文結果の確認要求と音声入
力の終了操作を促すためのメッセージが音声出力される
前に、利用者が受話器（入力部１１）を支持台１２に置
いた場合でも、その状態が判別されて（ステップＳ８，
Ｓ９）、上記と同様に注文が決定される。制御部７は、
注文内容が決定されたことを認識すると、例えば図１０
に示すように注文内容とその金額を表示部２に表示する
（ステップＳ１６）。

【００３９】なお、以上の説明では、ステップＳ２，Ｓ
３で図５に示す状態（３）が判別されてから、ステップ
Ｓ１１で「受話器を置いて下さい。」というメッセージ
が出力されるまでは、利用者が入力部１１の耳当て部１
１２を正しく耳に当てていることを前提としている。こ
のため、音声メッセージは入力部１１に内蔵の第２の音
声出力部４から出力するようにしていた。

【００４０】しかし、この音声出力方式では、もし利用
者が入力部１１の耳当て部１１２から耳を離した場合に
は、第２の音声出力部４から出力される音声メッセージ
は利用者の耳に届かない。そこで、音声メッセージの出
力に際しては、センサ５２，５３とセンサ５４とフック
スイッチ５５により入力部１１の状態を調べ、センサ５
２，５３の少なくとも一方がオン、センサ５４がオフ、
フックスイッチ５５がオンとなる図５に示す状態（８）
の場合、即ち入力部１１は取上げられているが、その耳
当て部１１２に耳が当てられていない状態（８）の場合
には、外部の第１の音声出力部３からも音声メッセージ
を出力して、利用者が聞取れるようにしてもよい。

【００４１】また、本装置からメッセージを表示あるい
は音声出力した場合に、利用者が入力部１１に対して期
待される取扱いをしない場合、例えば「受話器をお持ち
下さいの」音声出力に対して、入力部１１が図５に示す
状態（３）にならないような場合、入力部１１に対する
取扱いが誤っている旨のメッセージと、正しい扱いを促
すための案内メッセージを表示あるいは音声出力するよ
うにしてもよい。

【００４２】以上は、ハンバーガショップの注文機に用
いるマルチメディア装置に適用した場合について説明し
たが、これに限るものではなく、本発明は音声入力部を
備えたマルチメディア装置全般に適用可能である。

【００４３】

【発明の効果】以上説明したように本発明のマルチメデ
ィア装置によれば、利用者の存在およびハンドセット型
の音声入力手段を利用者が利用する際の利用者の各種動
作を検知手段により検知し、この検知内容をもとに表示
画面や音声出力内容を切替える構成としたので、常に利
用者の動作に従う適切な表示画面や音声出力内容にダイ
ナミックに切替えることができ、利用者は、自身の動作
状態によって切り替わる表示画面や音声出力内容によ
り、ハンドセット型の音声入力手段の適切な保持、発
声、表示画面の確認などの動作を確実に且つ容易に行う
ことができる。

【００４４】また本発明によれば、音声入力手段に内蔵
の音声出力手段（第２の音声出力手段）と音声入力手段
の外部に設けた音声出力手段（第１の音声出力手段）と
を備え、検知手段により検知される利用者の動作状態に
従って音声の出力先を切替える構成とすることにより、
音声が騒音となって音声入力手段に入力されるのを防止
したり、他人に聞かれるのを防ぐ一方、必要な情報を確
実に利用者に届けることができる。

【図面の簡単な説明】

【図１】本発明の一実施例に係るマルチメディア装置の
概略構成を示すブロック図。

【図２】図１中の音声入力部１の本体部分（入力部１
１）の外観を示す図。

【図３】図１中の音声入力部１の本体部分（入力部１
１）と対をなす部分（支持台１２）の外観を示す図。

【図４】図２中のセンサ５２，５３の構成を示す外観
図。

【図５】利用者の存在の有無および入力部１１に対する
利用者の操作（動作）状態と、図１中の接近検知部５を
構成するセンサ５１〜５４，フックスイッチ５５の状態
との関係を示す図。

【図６】利用者が図１の装置の直前に立ったことが検知
された際の、同装置内の制御部７による一連の動作を説
明するためのフローチャート。

【図７】利用者が図１の装置の直前に立ったことが検知
された際に表示される表示画面例を示す図。

【図８】利用者が音声入力部１の入力部１１を取上げて
耳に当てた際に表示される表示画面例を示す図。

【図９】利用者からの注文の完了が検知された際に表示
される表示画面例を示す図。

【図１０】注文完了後に入力部１１を支持台１２に置い
たことが検知された際に表示される表示画面例を示す
図。

【符号の説明】

１…音声入力部、２…表示部、３…第１の音声出力部、
４…第２の音声出力部、５…接近検知部、６…音声認識
部、７…制御部、１１…入力部、１２…支持台、５１〜
５４…センサ、５５…フックスイッチ、１１１…握り
部、１１２…耳当て部、１１３…口当て部。

Claims (6)

【特許請求の範囲】
1. 【請求項１】 利用者が発声した音声を入力するための
   音声入力手段と、 メッセージ等の表示に用いられる表示手段と、 利用者の存在および前記音声入力手段を利用者が利用す
   る際の利用者の各種動作を検知するための検知手段と、 この検知手段の検知内容をもとに、利用者の動作に従う
   表示メッセージを前記表示手段に表示させる制御手段
   と、 を具備し、利用者の動作に従ってメッセージ内容を切替
   えるようにしたことを特徴とするマルチメディア装置。
2. 【請求項２】 利用者が発声した音声を入力するための
   音声入力手段と、 メッセージ等の音声出力に用いられる音声出力手段と、 利用者の存在および前記音声入力手段を利用者が利用す
   る際の利用者の各種動作を検知するための検知手段と、 この検知手段の検知内容をもとに、利用者の動作に従う
   音声メッセージを前記音声出力手段から出力させる制御
   手段と、 を具備し、利用者の動作に従ってメッセージ内容を切替
   えるようにしたことを特徴とするマルチメディア装置。
3. 【請求項３】 利用者が発声した音声を入力するための
   音声入力手段と、 メッセージ等の表示に用いられる表示手段と、 メッセージ等の音声出力に用いられる音声出力手段と、 利用者の存在および前記音声入力手段を利用者が利用す
   る際の利用者の各種動作を検知するための検知手段と、 この検知手段の検知内容をもとに、利用者の動作に従う
   表示メッセージを前記表示手段に表示させると共に、利
   用者の動作に従う音声メッセージを前記音声出力手段か
   ら出力させる制御手段と、 を具備し、利用者の動作に従って表示メッセージ内容お
   よび音声メッセージ内容を切替えるようにしたことを特
   徴とするマルチメディア装置。
4. 【請求項４】 利用者が発声した音声を入力するための
   ハンドセット型の音声入力手段と、 この音声入力手段の筐体外に設けられた、メッセージ等
   の音声出力に用いられる第１の音声出力手段と、 前記音声入力手段を利用者が利用する際に利用者の耳元
   近傍に位置するように同入力手段の筐体に内蔵された、
   メッセージ等の音声出力に用いられる第２の音声出力手
   段と、 利用者の存在および前記音声入力手段を利用者が利用す
   る際の利用者の各種動作を検知するための検知手段と、 この検知手段の検知内容をもとに、利用者の動作に従う
   音声メッセージを前記第１の音声出力手段または第２の
   音声出力手段から出力させる制御手段と、 を具備し、利用者の動作に従ってメッセージ内容を切替
   えると共に、メッセージの出力先を切替えるようにした
   ことを特徴とするマルチメディア装置。
5. 【請求項５】 利用者が発声した音声を入力するための
   ハンドセット型の音声入力手段と、 メッセージ等の表示に用いられる表示手段と、 前記音声入力手段の筐体外に設けられた、メッセージ等
   の音声出力に用いられる第１の音声出力手段と、 前記音声入力手段を利用者が利用する際に利用者の耳元
   近傍に位置するように同入力手段の筐体に内蔵された、
   メッセージ等の音声出力に用いられる第２の音声出力手
   段と、 利用者の存在および前記音声入力手段を利用者が利用す
   る際の利用者の各種動作を検知するための検知手段と、 この検知手段の検知内容をもとに、利用者の動作に従う
   表示メッセージを前記表示手段に表示させると共に、利
   用者の動作に従う音声メッセージを前記第１の音声出力
   手段または第２の音声出力手段から出力させる制御手段
   と、 を具備し、利用者の動作に従って表示メッセージ内容お
   よび音声メッセージ内容を切替えると共に、音声メッセ
   ージの出力先を切替えるようにしたことを特徴とするマ
   ルチメディア装置。
6. 【請求項６】 前記音声入力手段により入力された音声
   を認識する音声認識手段を更に備え、前記音声認識手段
   は、前記検知手段によって検知された利用者の動作に応
   じて認識準備に入ることを特徴とする請求項１乃至請求
   項５のいずれかに記載のマルチメディア装置。