JPH09327006A - 双方向対話型システム - Google Patents

Abstract

(57)【要約】 【課題】 離れた場所にいる対話者間の視線を一致させ
るとともに、対話者の映像以外に文字図形情報などを共
有情報または非共有情報に区別して処理する双方向対話
型システムを提供する。 【解決手段】 ＣＣＤカメラ５は会話者３を撮影し、モ
ニタＴＶ１は伝送されて来た対話者像９を領域８１内に
表示する。ＣＣＤカメラ５は、撮影する対話者およびモ
ニタＴＶ１間における、画面内会話者像９の視線位置に
対する一定領域内に設置されている。また、カメラ５の
撮像方向は撮影する対話者の視線方向に向けられる。ま
た、領域８２ａ、８２ｂには非共有情報が表示され、領
域８３には共有情報が表示される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、伝送手段を介して
対話者間の視線を一致させる機構を備えた双方向対話型
システムに関するものである。具体的には、相当距離離
れた医師と患者、カウンセラとクライアントの関係等の
ように、伝送手段を介して双方向対話を実現するカウン
セリング・システムであって、主として１対１の双方向
対話を志向したシステムに関するものである。

【０００２】

【従来の技術】従来、教育、医療、心理学等の分野にお
いて行われているカウンセリングは、一般に対話者同士
が直接対面した状況において、両者間に親密な信頼関係
を築きながら行われる。しかしながら、自然災害、遠隔
地等の理由から、カウンセリングを必要とする者とカウ
ンセリングを行う技術を修得している者（カウンセラ）
とが同一の場所、時間を共有することが困難な状況も存
在する。そこで、通信技術の発達に伴い、遠隔の地にあ
る者同士によるカウンセリングを実現するシステムの必
要性が高まってきた。

【０００３】通信技術を利用してこのようなカウンセリ
ング・システムを構築しようとする場合、従来の対面式
の方法と同様に対話者間で親密な関係及び理想的なカウ
ンセリング環境を築き上げるためには、まず該対話者間
の視線を一致させることが重要である。

【０００４】そこで、従来、伝送路を介して対話者間の
視線を一致させる撮像装置として、第１に、特開昭６２
−２６９１２８号公報（第１従来技術）に示されるもの
がある。この第１従来技術では、対話者と当該撮像装置
との間に設けられたハーフミラーが設けられており、こ
れにより、被写体となる対話者から発せられる光を当該
撮像装置と画像表示装置とに分離している。従って、こ
の第１従来技術の装置構成によれば、撮像装置は対話者
が見る画像表示装置の表示画面を避けた位置に配置され
た状態で、該撮像装置の入力光軸と対話者の視線とを一
致させている。

【０００５】第２に、特開平４−２１３２８７号公報
（第２従来技術）には、光の反射／透過を切り替えるこ
とのできる特殊な表示装置を用い、この表示装置の後方
（この表示装置を介して対話者と反対側）に撮像装置を
配置した構成の撮像装置が開示されている。この装置構
成によれば、対話者の視線は表示装置従ってその後方で
あって、かつ対話者が見る表示装置の表示画面を避けた
位置に配置された撮像装置に向けられるので、会話者同
士の視線を一致させることが可能である。

【０００６】第３に、特開平４−９７６６３号公報（第
３従来技術）には、表示装置の上部に小型ミラーまたは
小型ハーフミラーを取り付け、このミラーに光軸が向い
た小型カメラで対話者を撮像する構成の撮像装置が開示
されている。この装置構成においては、ミラーで反射さ
れた対話者像は、該対話者が見る表示装置の表示画面を
避けた位置に配置された小型カメラに撮影される。よっ
て、会話者の視線の仰角は垂直方向における視線一致の
許容範囲である１０°以内に抑えられ、会話者相互の視
線一致が図られている。

【０００７】第４に、特開平４−２７９９１５号公報
（第４従来技術）には、異なる人物が、夫々相対する方
向から視認できる位置に展開配設される２つの表示画面
を備え、カウンセラがキー入力を操作しながら一方の表
示画面を、相談相手が他方の表示画面を見ることができ
るとともに、２つの画面に異なる対話形式の情報を表示
させる対話型ワークステーションが開示されている。こ
の装置構成によれば、カウンセラ側および相手側に夫々
必要な異なる情報を表示させることにより、相談相手対
話環境が中断されることなく、カウンセラ側の専用情報
を除く有効情報を容易に相手側に見せ、円滑なカウンセ
リングが可能となる。

【０００８】

【発明が解決しようとする課題】ハーフミラーで被写体
から光を分離する第１従来技術においては、表示装置の
画面サイズと同程度の大きさのハーフミラーが必要とな
る。必然的にこのような大きなハーフミラーを収容する
広いスペースが必要となってしまう。特に、画面サイズ
が４０インチを越える場合には容易に製造することがで
きなくなる。また、ハーフミラーを利用しているので、
対話者像が表示される画面を避けた位置に設置された撮
像装置によって撮像される像は暗くなってしまい、理想
的なカウンセリング環境は実現できない。

【０００９】次に、光の反射／透過を切り替える特殊な
表示装置を用いた第２従来技術は、既に量産導入されて
いる市販のＴＶ装置等に組み込むことは不可能である。
このため、この原理を用いたシステムを実現しようとし
た場合、専用機の開発が必要とされ、装置価格は高いも
のになってしまう。また、対話者を撮像する撮像装置
は、上記特殊な表示装置を介して該対話者を撮像するよ
う配置されている。したがって、撮像された対話者像は
暗くなってしまい、理想的なカウンセリング環境は実現
できない。

【００１０】さらに、反射ミラーと小型カメラとを組み
合わせた上記第３の従来技術は、該カメラを対話者が見
る表示画面を避けた位置に配置し、小型の反射ミラーを
介して対話者を撮像しているので、撮影される人物像は
暗くなってしまう。また、広い画角を得るには、反射ミ
ラーの大きさを小型カメラの大きさ以上にする必要があ
り、表示装置の人物像表示はこの大きな反射ミラーによ
って妨げられてしまう。また、撮影する人物の位置が変
化した場合、小型カメラの撮像方向は一定であるため、
これに追従することはできない。よって、対話者相互の
視線一致を常に確保することができない。

【００１１】上述した従来技術１〜３に共通する構造的
特徴は、撮像装置（カメラを含む）を対話者が見る表示
画面（相手側の対話者の像が表示される画面）と該対話
者との間の空間を避けた位置に配置されている点であ
る。換言すれば、対話者間の視線を一致させるため、対
話者と撮像装置との間には反射ミラー、ハーフミラー、
特殊な表示装置を設置する必要がある。したがって、伝
送される相手側の対話者像は暗くなり理想的なカウンセ
リング環境は実現できない。

【００１２】さらに、上述の第１から第３の従来技術
は、モニタ画面上での人物像といった画像の表示にのみ
着目した技術であり、通常の会話においても（特にカウ
ンセリングにおいて）必要となる文字情報や図形情報な
どのモニタ画面上への表示態様については考慮されてい
ない。

【００１３】上記の第４従来技術では、文字情報や図形
情報などのモニタ画面上への表示態様についての考慮は
なされているが、同一のワークステーションを２人で使
用して対話すること前提とするものであり、遠隔地間で
の対話を実行することができない。

【００１４】本発明は、上記を鑑みてなされたものであ
り、カウンセリング・システムとして、離れた場所にい
る対話者間の対話中の違和感を低減すべく、伝送手段を
介して対話者間の視線を一致させる機構を備えるととも
に、対話者の映像以外に文字図形情報などを共有情報ま
たは非共有情報に区別して処理する双方向対話型システ
ムを提供することを目的とする。

【００１５】

【課題を解決するための手段】本発明は、第１対話者の
いる第１地点に設置された第１端末装置と、該第１地点
から相当距離離れた地点であって第２対話者のいる第２
地点に設置された第２端末装置と、該第１端末装置と該
第２端末装置の間において、少なくとも該第１対話者及
び第２対話者の画像・音声データを有する伝送情報の双
方向通信を可能にするための伝送手段を備えた双方向対
話型システムに関するものである。このシステムにおい
て、少なくとも第１端末装置は、（ａ）伝送手段を介し
て受信した、第２対話者の像をモニタ上に表示する表示
部であって、人物像の頭頂部近傍であって、撮像部が実
際に設置されている位置に対応した該人物像の一部分を
検出し、該検出された該人物像の一部分を固定した状態
で、該人物像全体の拡大あるいは縮小を行うとともに、
モニタ上の前記人物像が表示されている第１の領域以外
の第２の領域に、第２の端末装置にも同時に表示される
文字および図形の少なくともいずれかを表示し、モニタ
上の第１の領域または前記第２の領域以外の第３の領域
に、第２の端末装置には表示されない文字および図形の
少なくともいずれかを表示する表示制御部を備える表示
部と、（ｂ）表示部のモニタ画面に対し、第１対話者の
位置を規定する位置規定手段と、（ｃ）伝送手段を介し
て第２端末装置に、第１対話者の像の送信を可能にする
装置であって、該第１対話者を直接撮像する撮像部と、
該撮像部の撮像方向を直接該第１対話者に向けた状態
で、該第１対話者と前記モニタとの間の所定位置に該撮
像部を設定させるための支持機構とを有する撮像装置と
を備え、撮像部は、位置規定手段によって特定された第
１対話者からモニタまでの距離、および、該第１対話者
の視線と該第２対話者のモニタ像の視線とが一致したと
判断される所定の視差角、とによって定義される所定領
域内に設置されたことを特徴とする。

【００１６】ここで、第１の領域の拡張または縮小に応
じて、第２の領域および第３の領域が連動して縮小また
は拡大することが好適である。

【００１７】また、（i）第１の領域は、モニタ上の上
方かつ中央部に配置され、（ii）第２の領域は、モニタ
上の第１の領域の下方に配置され、（iii）第３の領域
は、モニタ上の第１の領域の側方に配置されることとす
ることができる。

【００１８】第２の領域を第１の領域の下方に配置する
ことにより、共有情報部のエリアの確保形態として、全
画面の幅方向を最大限に活用することが可能となる。

【００１９】また、伝送情報は対話者の画像及び音声の
他、文字・図形情報を有することが可能である。これに
より、伝送手段を介して受信した文字・図形情報に基づ
いて、相手側から伝達された第１の対話者および第２の
対話者で共有情報である文字または図形を、表示部の第
２の領域に表示することも可能になる。すなわち、画像
や音声のみならず、共有すべき文字や図形もあわせて表
示することにより、より対話の円滑化が図られる。

【００２０】さらに、当該システムでは、マン・マシン
・インターフェースとして、文字図形入力装置を備え
る。この構成により、文字図形入力装置から文字図形入
力制御部を介して入力された文字または図形を表示部の
第２の領域または第３の領域に表示するとともに、第２
の領域に表示される文字または図形に応じた文字情報ま
たは図形情報を第２の端末装置へ向けて出力するが可能
となる。この結果、第１の対話者と第２の対話者とで共
有すべき情報を双方の端末装置で同時に表示することが
可能になるとともに、第２の対話者に知られたくない情
報を第１の対話者が専有することができる。なお、この
ような文字図形入力装置は、対話者のいる第１地点また
は第２地点のいずれか一方の端末装置にのみ設ける構成
としてもよい。

【００２１】以上のように、当該システムが文字図形入
力装置を備えることにより、個人的なメモや、共有情報
としての文字や図形を交えての対話が行え、よりスムー
スな対話が可能となる。なお、このような文字図形入力
装置としては、キーボード装置、対話者の手元に配置さ
れたペン入力装置（タッチパネル）を採用することが可
能である。また、このようなキーボード装置とペン入力
装置との双方を備えることとして適宜選択可能とするこ
とにより、さらにスムースな対話が実現できる。さら
に、文字図形入力装置は、表示されている文字または図
形を指し示すポインタ位置を入力するポインティング・
デバイスを備えてもよい。ポインタによる位置指示によ
り、各時点での対話対象を特定することが可能となる。
なお、このような文字図形入力装置等を利用し、入力さ
れた対話者の音声を認識して文字情報に変換して表示す
ることにより、スムースな対話（あるいはカウンセリン
グ）の成立にとって有効である。

【００２２】また、上記撮像装置は、少なくとも、該第
１対話者を撮像する撮像部と、該撮像部の撮像方向を直
接該第１対話者に向けた状態で、該第１対話者とモニタ
との間の所定位置に該撮像部を設定するための支持機構
とを備えている。特に、(1)撮像部は、位置規定手段に
よって規定された第１対話者とモニタ間の距離、及び
(2)該第１対話者の視線と該第２対話者のモニタ像の視
線とが一致したと判断される上述の視差角、これら(1)
及び(2)の要素によって定義される視線一致領域内であ
って、該第１対話者に対し第２対話者のモニタ像の一部
を遮る位置に設置されている。なお、第２端末装置も同
様な構成を備えてもよく、また、第１端末装置は該第２
端末装置を遠隔制御できる構成になっている。

【００２３】さらに、各端末装置は、それぞれ対話者の
周りに配置される、外部音に対して遮断性を有する吸音
部材を備えることも可能である。こうした場合には、対
話内容が外部に漏れることに対する心理的障害が低減さ
れるとともに、音質が向上するので、気持ちの集中が可
能となり、より深い対話が可能となる。

【００２４】以上のように、対話者とモニタ間の上述の
視線一致領域内にモニタ像の一部を遮るように、撮像部
を設置させて当該システムを構成したのは、対話者にと
って、該撮像部がモニタ上に表示された人物像の一部を
遮るように設置され場合であっても、該撮像部の大きさ
が一定以下に抑えられていれば、この撮像部の存在は双
方向対話にほとんど影響を与えないことを、発明者が実
験により確認したからである。

【００２５】なお、上述の双方向対話型システムにおい
て、対話者（第１対話者）の視線とモニタ上に表示され
た人物（第２対話者）の像（モニタ像）の視線を一致さ
せる視差角は、該対話者の視線に対し、該対話者から見
てモニタ画面の左右方向が４．５°以下，真上方向が１
２°以下および真下方向が８°以下であることが好まし
い。さらに、この視差角は、該対話者の視線に対し、該
対話者から見てモニタ画面の左右方向および前記上下方
向がそれぞれ３°以下であることが、理想的な視線一致
状態を実現するためにより好ましい。

【００２６】また、撮像部が設置される視線一致領域
は、撮影される対話者の視線より高い領域であることが
好適である。特に、発明者による実験の結果、対話者と
モニタとの間を遮る撮像部は、該対話者から見てモニタ
上に表示された人物像の頭頂部近傍が該撮像部の設置位
置として好ましいことが確認された。

【００２７】位置規定手段によって特定された対話者か
らモニタまでの距離、及び、該対話者の視線と該モニタ
上に表示された人物像の視線とが一致したと判断される
所定の視差角、とによって定義される領域（視線一致領
域）内に、上記撮像部を設置する手段としては、第１
に、対話者とモニタ上の人物像の視線一致領域内に撮像
部自体を移動させる手段、第２に、モニタと対向する対
話者自身を移動させることにより、該対話者とモニタ上
の人物像の視線一致領域自体を移動させ、撮像部と該視
線一致領域の位置を相対的に変更する手段、第３に、モ
ニタ上の人物像を移動させ、同様に該モニタと対向する
対話者の視線とモニタ上の人物像の視線一致領域自体を
移動させる手段（なお、この第３の手段は後述する表示
制御部による画面分割時に人物像が表示される映像表示
領域を移動させるアルゴリズムとして有効である）があ
る。

【００２８】上記第１の手段は、上記端末装置に、モニ
タ上に表示された人物像の、該モニタ上の位置を認識す
る処理ユニットを設けるとともに、上記撮像装置に、撮
像部の設置位置を、該処理ユニットによって位置認識さ
れた人物像に対し相対的に移動させる駆動機構を設ける
ことにより実現することができる。実施の形態として
は、各端末装置ごとにこの第１の手段を行う場合と、第
１端末装置の処理ユニットで第２対話者のモニタ像の位
置認識を行い、該処理ユニットが所定の制御信号を第２
端末装置に送信することにより、該第１端末装置で該第
２端末装置を遠隔制御する場合とがある。

【００２９】また、第２の手段は、上記端末装置にモニ
タ上に表示された人物像の、該モニタ上の位置を認識す
る処理ユニットを設けるとともに、該処理ユニットによ
って位置認識された人物像の視線に対して撮影される対
話者の視線を調整する機構を上記位置規定手段に設ける
ことにより実現することができる。実施の形態として
は、各端末装置ごとにこの第１の手段を行う場合と、第
１端末装置の処理ユニットで第２対話者のモニタ像の位
置認識を行い、該処理ユニットが所定の制御信号を第２
端末装置に送信することにより、該第１端末装置で該第
２端末装置を遠隔制御する場合とがある。

【００３０】さらに、上記第３の手段を実現するため、
上記端末装置はモニタ上に表示される人物像の表示位置
を調節する処理ユニットを備える。この処理ユニット
は、受信されモニタ上に表示された該人物像に基づい
て、撮像部が本来存在すべき該モニタ像上における仮想
位置を基準点として特定し、続けて、該撮像部が実際に
設置されている位置に対応するモニタ上の座標と、得ら
れた基準点のモニタ上の座標に基づいて、該モニタ上に
表示された人物像のずれを検出する。もし、この人物像
が本来表示されるべきモニタ上の表示位置からずれてい
ると判断した場合には、この基準点のモニタ上の座標を
始点とするとともに、撮像部の設置位置に対応するモニ
タ上の座標を終点としたベクトルを算出し、そして、得
られたベクトルに基づいて、ずれている人物像をモニタ
上で平行移動させる。実施の形態としては、対話者自身
のモニタ像に対して行う場合（対話開始前の初期設定）
と、第２対話者のモニタ像に対して行う場合がある。特
に、後述する表示制部による画面分割動作（表示される
人物像の拡大・縮小動作を含む）の際、人物像（第１対
話者あるいは第２対話者のモニタ像）の表示サイズが任
意に変更されると、該像を表示する領域は該モニタ画面
上の任意の位置に設定可能であるので、この任意に表示
サイズが変更された人物像と対話者間で視線一致させる
場合、この第３の手段は特に有効である。

【００３１】なお、上記基準点は、受信されモニタ上に
表示された人物像の両方の目の、該モニタ上の各表示位
置をそれぞれ検出し、該両方の目の中央から該モニタの
上方に所定距離（例えば、１０ｃｍ程度）離間した、モ
ニタ上の位置とする。また、この基準点は、受信されモ
ニタ上に表示された人物像を２値化して該人物像の輪郭
を検出し、該人物像の頭頂部に相当するモニタ上の位置
として特定するようにしてもよい。

【００３２】撮像部を移動させる駆動機構は、対話者の
位置を一旦処理ユニットで認識し、該認識された対話者
の位置と撮像部の位置に基づいて、該撮像部の撮像方向
の角度を調整するよう構成してもよい。この駆動機構に
よる撮像部の角度調節により、該撮像部の撮像方向は上
記処理ユニットで位置認識された対話者の視線に自動的
に向けられる。さらに、撮像部を移動させる駆動機構
は、視線方向の平均一致を検出し、移動調心するにあた
って移動速度が所定値以下であり、視線方向の振れが所
定範囲内では調心動作を行わないように構成してもよい
（なお、この判断は処理ユニット等で行われる）。な
お、撮像部が移動すると該撮像部から出力される映像に
振れが生じるが、移動速度を制限するとともに移動を頻
繁に行わなわず必要最小限に押えることで違和感のある
ぶれの発生は避けられる。

【００３３】ここで、撮像部を移動させる上述の駆動機
構は、対話者及び表示部間に位置する部材の一部が透明
な材料で形成されていることが好ましい。

【００３４】次に、対話者の位置を規定する位置規定手
段は、表示部から所定距離離れて設置された高さ調整自
在の椅子（座高調節機構を備えた椅子）を含む。また、
対話者と表示部間に設けられたテーブルも位置規定手段
として機能する。当該システムでは、この位置規定手段
を利用し、撮影される対話者と表示部を０．５ｍ以上５
ｍ以下の距離だけ離している。このような構成とするの
は、上記位置規定手段により該対話者の前後左右の移動
が十分制限できるので、当該システムにおける対話者間
の視線一致には、該対話者の体格差等に起因する上下方
向の移動調整が最も有効だからである。

【００３５】なお、当該システムに適応される撮像部
は、表示部とは独立していてもよい。また、表示部の一
部に支持機構により取り付けられてもよい。

【００３６】この発明に係る双方向対話型システムは、
遠隔地にいる対話者間におけるカウンセリング・システ
ムを志向しているので、有用なカウンセリング・データ
の収集や理想的なカウセリング環境を実現するため、種
々の構成及び機能を備えている。

【００３７】例えば、表示部における表示制御を行う表
示制御部は、該表示部に表示する映像を拡大・縮小する
機能を備えている。表示サイズは、対話者の心理的作用
に大きく影響するので、このお表示制御部でモニタ上に
おける映像表示領域の大きさを自由に設定することによ
り、対話の自由度が広がるとともに、快適な対話環境を
実現することができる。なお、縮小された人物像（モニ
タ像）は上述された第３の視線一致手段によりモニタ上
の表示位置が調整されるので、第１対話者と第２対話者
間での視線一致状態が保持される。

【００３８】次に、上述した位置規定手段としてのテー
ブルは、対話者と表示部との間に、一方の端が対話者に
面し、他方の端が表示部と略接するように配置される。
ここで、テーブルは、(1)対話者が椅子に座った状態で
胸部より上がテーブルより高くなる高さに設定される、
(2)対話者が立った状態で胸部より上がテーブルより高
くなる高さに設定されることとしてもよい。このような
構成により、テーブルを介した連続感が生じるので、相
手方との相対距離（心理的距離）がわからなくなること
によって生じる不安感を低減する。この場合、表示部と
テーブルとが接することが望ましいが、心理的障害とな
らない隙間（例えば、数１０ｃｍ以下）があってもよ
い。

【００３９】また、第１端末装置では、第１の領域に、
人物像に加えて、人物像に応じた人物の識別情報であ
る、氏名、識別番号、または固有情報が更に表示される
ことが好ましい。

【００４０】人物像と、人物像に応じた識別情報であ
る、氏名、識別番号、または固有情報が同時に表示され
ると、初対面の対話相手であっても、名前などでの呼び
かけが容易となり、フレンドリな会話を構成しやすい。
また、氏名と顔を同時に見ることにより記憶もしやすく
なる。なお、ここでの固有情報としては、例えば、住
所、所属グループ、面談回数などがある。

【００４１】また、第１端末装置では、第１の領域に、
人物像に加えて、表示されている人物像の人物との積算
対話時間または残存対話時間に応じた情報が更に表示さ
れることが好ましい。

【００４２】積算対話時間または残存対話時間に応じた
情報（文字表示、棒グラフ表示など）が表示されること
により、限られた会話時間をチェックしながら対話を進
行することができる。

【００４３】この結果、１対Ｎの片方向会話方式（講義
スタイル）と併用する、特定の人との１対１の双方向対
話（例えば、質疑応答など）時に、特定の人に偏らな
い、一定時間での対話管理が容易となる。

【００４４】また、第１端末装置では、伝送されてきた
音声情報に基づく音声に加えて、第１の領域での人物像
の表示の開始、人物像の表示の終了、または他の人物像
への切換えに連動して効果音を更に出力されることが好
ましい。

【００４５】ここで、効果音は、表示される人物像の人
物固有に選択されることが好適である。

【００４６】第１の領域での人物像の表示の開始、人物
像の表示の終了、または他の人物像への切換えに連動し
て効果音が出力されることにより、こうした画面の変化
に連動して、まず、音声刺激が作用するので、無音状態
からいきなり画面が発生する場合よりも、心の準備時間
を形成することができる。効果音の出力時間は、一般に
は、２〜１５秒で十分である。

【００４７】また、終了時には、いきなり画像が消える
と淋しさが増大する場合がある。したがって、効果音と
ともに徐々に画面が終了すれば、心の準備時間を形成す
ることができる。

【００４８】なお、効果音は、徐々に大きくする、また
は、小さくするなど、音量変化やリズム変化などを使い
分けるとよい。もちろん、曲の一部を使用してもよい。

【００４９】さらに、効果音を人物ごとに使いわけれ
ば、効果音に個性を付加することができ、効果音を聴い
ただけで人物識別が可能となる。

【００５０】また、第１端末装置は、伝送されてきた音
声情報に基づく音声に加えて、第１の領域における対話
中の人物との対話の残存時間が所定時間となると、対話
時間終了を予告する音声を出力したり、対話時間終了を
予告する画像を表示したりすることが好ましい。

【００５１】対話終了のカウントダウンに対応する音声
出力や画像表示により時間制限のある対話終了をスムー
スに進行できる。特に、対話を打ち切りにくい場合であ
っても、カウントダウン表示とともに、例えば動物が木
に登って、カウントダウンに応じてリンゴを食べるな
ど、楽しい個性的なアニメーションを用いてビジュアル
化すると、対話者相互で受入れやすい。

【００５２】また、第１端末装置は、対話対象の候補の
人物に関する情報を格納する格納装置を更に備えるとと
もに、第１の領域への人物像の表示の前、または、表示
の終了後に、前記格納装置に格納された該当人物に応じ
た情報を所定時間にわたって表示したり、音声出力した
りすることが好ましい。

【００５３】人物像の表示の前後に、該当人物に応じた
情報を所定時間にわたって表示したり、音声出力したり
することにより、対話準備やマイルドな終了雰囲気の形
成が可能となる。こうれは、上記の効果音と組合せるこ
とが可能であるし、メッセージなどを取り込んでもよ
い。さらに、人物像に対応した個別のＣＭとしても作用
させることも可能であり、多種多様の雰囲気形成が可能
となる。

【００５４】また、第１の領域において表示されている
人物像から他の人の人物像への切換えに連動して、第２
の領域および第３の領域のいずれか一方の表示を、他の
人に応じて切換えることが好ましい。

【００５５】表示人物像に連動して、共有情報（第２の
領域）や非共有情報（第３の領域）を表示人物像に応じ
て自動表示することにより、これらの情報の検索などの
一部（少なくとも対話開始当初の検索）が不要となる。
特に、１対Ｎの片方向会話方式（講義スタイル）と併用
する、特定の人との１対１の双方向対話（例えば、質疑
応答など）時に有効である。

【００５６】

【発明の実施の形態】以下、添付図面を参照して本発明
の双方向対話型システムの実施の形態を説明する。な
お、図面の説明にあたって同一の要素には同一の符号を
付し、重複する説明を省略する。

【００５７】図１は、この発明に係る双方向対話型シス
テム全体を示す論理構成図である。このシステムは、Ａ
地点（第１地点）にいる対話者３Ａ（第１対話者）とＢ
地点（第２地点）にいる対話者３Ｂ（第２対話者）との
間で双方向対話を実現するシステムである。特に、この
システムは遠隔地にいる対話者間でも親密な信頼関係を
確立し綿密なコミュニケーションを実現するカウンセリ
ング・システムを志向したシステムであるので、少なく
とも一方の対話者として、教師、医師、心理学者などの
カウンセラを想定している。したがって、このシステム
はこれらカウンセラがカウンセリングを行うために必要
な情報、及び理想的なカウンセリング環境を提供できる
よう種々の機能及び構成を備える。

【００５８】具体的には、Ａ地点において、（ａ）対話
者３Ａ（例えはカウンセラ）が座る椅子４Ａと、（ｂ）
対話者３Ａが向かうテーブル２Ａと、（ｃ）伝送手段２
７を介して対話者間の視線を一致させるための機構を備
えた端末装置２０Ａとが設置される。一方、Ｂ地点に
は、（ａ）対話者３Ｂ（例えばカウンセリングを受ける
クライアント）が座る椅子４Ｂと、（ｂ）対話者３Ｂが
向かうテーブル２Ｂと、（ｃ）伝送手段２７を介して対
話者間の視線を一致させるための機構を備えた端末装置
２０Ｂとが設置される。ここで、伝送手段２７は、Ａ地
点の端末装置２０ＡとＢ地点の端末装置２０Ｂとの間で
画像情報及び音声情報を有する伝送情報の送受信を可能
にするため、大容量伝送を可能にする光ファイバ伝送路
３１（主伝送路）及び衛星通信伝送路３２（バックアッ
プ用伝送路）等を含む。なお、この伝送手段２７は有
線、無線のいずれであってもよい。また、伝送手段は、
既に敷設された電話回線網等のネットワークを含み、さ
らに種々のデータベースを備えた電子掲示板システム
（BBS:Bulletin Board System）も含む。

【００５９】Ａ地点において、上述の椅子４Ａは各対話
者３Ａの位置を規定するために機能する。この椅子４Ａ
は端末装置２０Ａの表示部２１Ａとの距離を一定に保つ
ために固定されるのが好ましい。しかし、該椅子４Ａが
固定されていない場合であっても、テーブル２Ａを対話
者３Ａと表示部２１Ａに設置することによりこの椅子４
Ａと表示部２１Ａとの距離を一定に保つことが可能にな
る（発明者の実験により、テーブル２Ａの存在が対話者
３Ａの心理的な距離の基準となる事実が確認された）。
なお、相手側の対話者３Ｂ（例えば、カウンセリングを
受ける者等）がいるＢ地点の端末装置２０Ｂの構成も同
様である。

【００６０】Ａ地点において、端末装置２０Ａは、(1)
Ｂ地点の端末装置２０Ｂから伝送手段２７を介して伝送
されてきた伝送情報に基づいて対話者３Ｂの像などを表
示する、テーブル２Ａの上に配置された、モニタＴＶ１
Ａを備えた表示部２１Ａと、(2)ＣＣＤカメラ５Ａで撮
像された対話者３Ａの像を画像情報として取り込み、Ｂ
地点の端末装置２０Ｂへ向けて伝送するための撮像ユニ
ット６Ａと、(3)Ｂ地点の端末装置２０Ｂから伝送手段
２７を介して伝送されてきた音声情報に基づいて対話者
３Ｂの音声を出力するための音声出力部２３Ａ（スピー
カ）と、(4)対話者３Ａの音声を音声情報として集音
し、Ｂ地点の端末装置２０Ｂへ向けて伝送するための音
声入力部２４Ａ（マイク）を備える。さらに、このシス
テムはカウンセリング・システムとしてより綿密なコミ
ュニケーションを実現するため、(5)対話者３Ａが文字
や図形を入力し、入力された文字や図形を表示部２１Ａ
に表示するとともに、文字図形情報としてＢ地点の端末
装置２０Ｂへ向けて伝送するための文字図形入力部２５
Ａ（キーボード、ポインティング・デバイス、タッチパ
ネルなどのインターフェース）と、(6)上記各構成要素
と伝送手段２７との間に設けられ、信号処理および伝送
制御を行う処理部２６Ａとを備える。なお、Ｂ地点の端
末装置２０Ｂも、上述したＡ地点の端末装置２０Ａと同
様に構成されている。

【００６１】さらに、Ａ地点及びＢ地点の端末装置２０
Ａ、２０Ｂにおいて、撮像装置６００Ａ、６００Ｂの構
成を説明する。なお、説明の都合上、Ａ地点及びＢ地点
の各端末装置２０Ａ、２０Ｂに共通する構成要素につい
て言及する場合には、例えば撮像装置６００のように、
各地点を区別する文字Ａ、Ｂを省略して説明する。ま
た、特に説明がされていない場合には、原則としてＡ地
点の端末装置２０Ａについて説明しているものとして、
共通する構成を有するＢ地点の端末装置２０Ｂについて
は重複する説明は省略する。

【００６２】この撮像装置６００は、撮像部である超小
型ＣＣＤカメラ５（５Ａ）、該ＣＣＤカメラ５を支持し
た状態で所定位置に設置するための支持機構１０（第１
実施例を図２に示す）、及び該ＣＣＤカメラ５を制御す
るための撮像ユニット６（６Ａ）とを備える。モニタＴ
Ｖ１（１Ａ）はテーブル２（２Ａ）の上に載置されてお
り、対話者３（３Ａ）はこのモニタＴＶ１から距離Ｌ
（ｍ）離れて置かれた高さ調整機構４０（４０Ａ）を備
えた椅子４（４Ａ）に座っている。この距離Ｌ（ＬＡ）
は０．５ｍ以上５ｍ以下に設定される。撮影される対話
者３およびモニタＴＶ１間には、外径φ２０ｍｍ以下，
長さ約１００ｍｍの円筒状の超小型ＣＣＤカメラ５が設
けられている。また、このＣＣＤカメラ５はその撮像方
向が撮影される対話者３に向けられるよう設置されてい
る。そしてカメラ５で撮像された対話者３の像は、画像
情報として撮像ユニット６から他方の対話者側に伝送さ
れる（伝送手段２７を介してＢ地点の端末装置２０Ｂに
伝送される）。なお、対話者によっては表示部２１と該
対話者間の間隔が弱冠ずれる可能性もある。したがっ
て、このような状況にも対処すべく、ＣＣＤカメラ５は
焦点深度の深いものを選択するのが好ましい。

【００６３】次に、超小型ＣＣＤカメラ５の具体的な設
置位置を図２を用いて説明する。

【００６４】まず、撮像装置６００の撮像ユニット６は
伝送されてきた他方の対話者の像を表示するための表示
部２１上に設置される。この撮像ユニット６本体にはカ
メラ５によって撮影された対話者自身の像（カメラケー
ブル５０を介して撮像ユニット６に取り込まれる）の表
示と、伝送されてきた他方の対話者３Ｂの像の表示を切
り換えるための、切り換えスイッチ６ａの他、種々の調
節用スイッチ６ｂが設けられている。なお、スイッチ２
１０はモニタＴＶ１の電源をオン／オフする電源スイッ
チ等を含む。ＣＣＤカメラ５は、伝送されたきた他方の
対話者３Ｂの像９が表示されるモニタ画面８の前方の所
定位置に支持機構１０（ロボット・アーム）によって設
置される。

【００６５】モニタ画面８は、(1)モニタ画面８の上方
中央部を占める、対話の相手像を表示する領域８１と、
(2)モニタ画面８の視認者のみが使用し、対話の相手に
は見せない非共有情報を表示する、領域８１の左右側を
占める領域８２ａ、８２ｂと、(3)領域８１および領域
８２ａ、８２ｂの下方を占める、モニタ画面８の視認者
および対話の相手との双方で共有する共有情報を表示す
る領域８３とを備える。 領域８３を領域８１および領
域８２ａ、８２ｂの下方に配置することにより、共有情
報部のエリアの確保形態として、モニタ画面８の幅方向
を最大限に活用することが可能となる。なお、このモニ
タ画面８は４０インチ程度の画面であることが好まし
い。

【００６６】具体的には、ＣＣＤカメラ５はモニタ画面
８から前方ｗ（ｃｍ）の位置であって、該モニタ画面８
に表示された対話者像９の頭部９ａ付近に配置される。
円筒状ＣＣＤカメラ５の中心軸は、点線で示す対話者像
９の目の位置の上方ｈ（ｃｍ）の部位に位置している。

【００６７】このように超小型のＣＣＤカメラ５は、大
型モニタＴＶ１の画面８に表示された対話者像９の目の
位置より上の頭部付近に位置しているため、双方向対話
に特別な支障は生じない。例えば、ＣＣＤカメラ５が画
面８に表示された対話者像９の目の位置（図中、点線で
示す位置）の上方ｈ＝約１０（ｃｍ）に設けられ、モニ
タＴＶ１および対話者３間の距離Ｌが約２．５（ｍ）に
設定されているシステム構成の場合、視差角は２．３°
で十分検知限界の視差角３°を下回ることが可能である
（モニタ画面８とＣＣＤカメラ５の間隔ｗが１０（ｃ
ｍ）程度ある場合でも、視差角の変動には特に影響はな
い）。つまり、発明者は、実験の結果、視線一致時に相
手の目（モニタが面８に表示された他方の対話者３Ｂの
像の目）がはっきりと見えれば、その頭部辺りに超小型
のカメラ５が設けてあっても、モニタＴＶ１の画面８が
大型であれば、双方向対話に支障はほとんどないことを
確認した。この画面８の大きさは、実験の結果、横３５
ｃｍ，縦２６ｃｍ程度以上の大きさがあれば良好な双方
向対話が実現できることが確認された。なお、相互の対
話者が知人同志であれば、画面の大きさは小さくとも心
理的な障害も少ない傾向を示す結果も得られており、画
面サイズに関しては用途に応じて使いわけるとよい。

【００６８】表示部２１は、モニタＴＶに代えて、フラ
ズマディスプレイや液晶ディスプレイを採用することが
できる。このような表示装置を利用する場合には、図３
に示すように、ＣＣＤカメラ２００を表示装置のハウジ
ング２１０に予め組み込んだ構造が好ましい。図３の表
示装置はハウジング２１０で支持されたモニタ画面２２
０の所定位置に貫通孔２３０が設けられており、該ＣＣ
Ｄカメラ２００の先端部分を直接貫通させ、かつ該モニ
タ画面２２０の前方に該先端部分が位置する構造を備え
ている。

【００６９】具体的な構造を図４に示す。この図４は図
３のＸ−Ｘ線に沿った表示装置の断面構造を示す図であ
る。図に示されたように、ＣＣＤカメラ２００の鏡筒２
０１にはハウジング２１０に取付可能にするため、球形
の突起部２０２が設けられている。鏡筒２０１内部には
撮像デバイス２０５と結像光学系２０３が組込まれてお
り、該撮像デバイス２０５によって検出された電気信号
は電子回路部２０６からカメラケーブル５００を介して
外部のデータ処理部に送られる。また、該鏡筒２０１
は、結像光学系２０３を構成するレンズのうち少なくと
も１枚のレンズを該鏡筒２０１の軸方向に移動可能にす
る構造を備えており、当該ＣＣＤカメラ２００のピント
は調節用ツマミ２０４によって行われる。

【００７０】なお、この発明に係る双方向対話型システ
ムにおいては、撮像部であるカメラ２００撮像デバイス
２０５の光電変換面２０８に垂直であって、該光電変換
面２０８を通る線５ｅと３対話者とのなす角は、上述の
視差角の範囲内である。この線分５ｅは該カメラ２００
の撮像方向と略一致している。そして、表示部に取り付
けられたカメラ２００は、該鏡筒２０１の所定部分を中
心に、図中矢印２０７で示された方向に該鏡筒２０１の
鏡筒軸（図中の線分５ｅに一致している）を移動させる
ことにより、該カメラ２００の撮像方向（図中の線分５
ｅに一致している）を変えることができる。

【００７１】以上のような構造を備えたＣＣＤカメラ５
は、ハウジング２１０に直接取り付けられる把持部材２
４０、２５０がＣＣＤカメラ５の突起部２０２を把持す
ることにより取り付けられる。なお、該鏡筒２０１の突
起部２０２は球形であるので、ＣＣＤカメラ２００の角
度は自由に変更することができ、これにより、該ＣＣＤ
カメラ２００の撮像方向５ｃを所望の方向に向けること
が可能となる。

【００７２】次に、視差角について、図５を用いて説明
する。この明細書において、視差角とは、図５に示すよ
うに、モニタ画面８に表示された像９へ向けられた、撮
影される対話者３の視線と、ＣＣＤカメラ５へ向けられ
た、該対話者３の視線とがなす角度θを言う。換言すれ
ば、対話者３の視線に対するＣＣＤカメラ５の設置位置
のずれ角を意味している。また、ここでいう視線一致と
は、昭和４２年電気四学会連合大会（Ｎｏ．１９９８）
で報告されているように、ＣＣＤカメラ５の設置位置に
よる不自然さの許容限界以下を意味している。定量的に
は、視差角として、左右方向４．５°以下（像９の目の
中心Ａに対し、該像９の両こめかみ側），真上方向１２
°（像中心Ａに対し、像９の頭部９ｂ側），真下方向８
°（像中心Ａに対し、像９の胴体側）以下を視線一致範
囲内としている。もちろん、この視差角は小さい方が良
く、左右上下方向３°以下が検知限界とされている。し
たがって、ＣＣＤカメラ５が設置可能な領域は、図６に
示された円錐領域である。なお、この円錐領域は、対話
者３の目３０とモニタ画面８に表示された像９の中心点
Ａ（この実施例では、像９の両目の中心を像９の中心点
Ａとして定義している）とを結ぶ該対話者３の視線３１
に対し、所定距離Ｌ（ｍ）離れた時のモニタ画面８上の
視線一致領域９ｂ、及び、該対話者３の目３０の位置と
で規定される。

【００７３】一方、ＣＣＤカメラ５をモニタ画面８に表
示されたＢ地点の対話者３Ｂの像９の目の位置（例え
ば、像中心Ａ）に対する一定領域内であって、例えば、
像９の目の位置から上方約１０ｃｍに設置させる手段と
して、次の３つの手段がある。

【００７４】第１の手段は、ＣＣＤカメラ５自体をモニ
タ画面８に対して移動させるものである。この第１の手
段を実現するため、モニタ画面８に表示された対話者３
（Ａ地点及びＢ地点の対話者３Ａ、３Ｂのいずれでもよ
い）の像９のモニタ画面８内における位置を画像認識処
理する撮像データ処理部６０と、位置認識された像９に
対し、ＣＣＤカメラ５がモニタ画面８内の上記一定領域
に設置されるよう、該ＣＣＤカメラ５を移動させる駆動
機構が撮像ユニット６に設けられている。

【００７５】第２の手段は、撮影される対話者３自身を
モニタ画面８に対して移動させるものである。この第２
の手段は、上記撮像データ処理部６０で、モニタ画面８
に表示された対話者３自身の像９の、該モニタ画面８内
における位置を画像認識処理させるとともに、位置認識
された対話者３自身の像９に対して撮影される対話者３
自身の位置を調整する人物位置規定手段を設けることに
より実現できる。この人物位置規定手段としては、例え
ば、対話者３が座る椅子４が好ましい。また、各対話者
ごとの座面高さの調整は、この椅子４に設けられている
座高調節機構４０を調節することにより可能である。な
ぜなら、椅子４の設置位置（モニタ画面８からの距離
等）は予め固定されるので、一旦対話者３が椅子４に座
ると、対話者３に対する左右方向の位置調整は不要にな
るからである。すなわち、対話者の位置を決めるための
不確定要素は、各対話者間の体格差に起因する上下方向
のずれのみであることから、各対話者ごとに座高調整を
行うことにより、充分第２の手段を実現することができ
る。

【００７６】第３の手段は、モニタ画面８に表示される
対話者３（Ａ地点及びＢ地点の対話者３Ａ、３Ｂのいず
れでもよい）の像９を、予め設置位置が固定されたＣＣ
Ｄカメラ５に対して相対的に移動させるものである。こ
の第３の手段は、上記各手段と同様に、まず、撮像ユニ
ット６に設けられた撮像データ処理部６０により、モニ
タ画面８内における像９の位置を認識し、そして、この
像９の表示位置を移動させる必要がある。これにより、
相対的にＣＣＤカメラ５を上記一定領域に存在させるこ
とができる。

【００７７】次に、図７のフローチャートを用いてＣＣ
Ｄカメラ５の初期設定動作（視線一致のための初期設定
動作）を説明する。なお、この設定動作を概念的に説明
するための図を図９に示す。

【００７８】まず、対話者３は自分をＣＣＤカメラ５に
撮影させ（ステップＳＴ１）、該ＣＣＤカメラ５によっ
て撮影された自己の像９を表示部２１のモニタ画面８に
表示させる（ステップＳＴ２）。このとき、ＣＣＤカメ
ラ５の設置位置が対話者３の視線（対話者の目と像９の
中心点Ａとを結ぶ線）と一致していると（視差角が０
゜）、該ＣＣＤカメラ５の存在が対話障害を引き起こ
す。

【００７９】そこで、このＣＣＤカメラ５を上方へΔｈ
だけ移動させ（ステップＳＴ３）、対話障害にならない
位置であって視線一致の許容領域内（例えば、図６に示
された領域）に該ＣＣＤカメラ５を設置し直す。すなわ
ち、該ＣＣＤカメラ５を対話者３から見て像９の頭髪部
分９ｂに重なるよう設置する。

【００８０】以上のように、ＣＣＤカメラ５の設置位置
をΔｈだけ移動させると、ＣＣＤカメラ５の撮像方向も
実際の対話者３に向けられなくなる。そこで、ＣＣＤカ
メラ５の移動に合わせて該ＣＣＤカメラ５の設置角度を
Δθだけ下方修正する（ステップＳＴ４）。このよう
に、対話者３とモニタ画面８との距離Ｌに対する移動量
Δｈの関係から決定される視差角が３゜以内になるよ
う、ＣＣＤカメラ５の設置位置及び設定角度を予め調整
することにより、視線一致状態を保持できる。

【００８１】具体的には、対話者３が身長の低い子供の
場合、椅子４の座高調節機構４０により該子供の座高高
さを調節するとともに、ＣＣＤカメラ５の角度を下方に
修正し、さらに、モニタ画面８に表示されている像９そ
のものを移動させることが好ましい。

【００８２】一方、モニタ画面８に表示される対話者３
（Ａ地点及びＢ地点の対話者３Ａ、３Ｂのいずれでもよ
い）の像９を移動させる動作を、図８のフローチャート
を用いて説明する。なお、図１０は、この画像移動処理
を概念的に説明するための図である。また、この画像移
動処理は撮像ユニット６の撮像データ処理部６０あるい
は処理ユニット２６（表示制御部２８５）で行われる。

【００８３】まず、受信した相手側対話者あるいは自己
の、モニタ画面８に表示された像９から基準点を特定す
る（ステップＳＴ５）。この基準点は像９の目の位置
（図中点線で示す）の中心（点Ａ）から上方１０ｃｍの
点、あるいは２値化処理することにより容易に得られる
該像９の輪郭のうち、像９の頭頂部に相当する点（ＣＣ
Ｄカメラ５が本来存在すべき位置）とする。

【００８４】続いて、現実のＣＣＤカメラ５の設置位置
に相当する位置８１０を、モニタ画面８の絶対座標８０
０から求め、すでに得られた基準点の位置８２０と該現
実の位置８１０とのずれ量が許容範囲内であるか否かを
判断する（ステップＳＴ６）。もし、この段階ですれ量
が許容範囲を超えていれば、像９の表示位置がずれてい
ると判断し、該基準点の座標８２０を始点とし、該現実
の位置８１０を終点とするベクトル８３０を算出する
（ステップＳＴ７）。そして、図１０に示すように得ら
れたベクトル８３０に基づいて、ずれている像９を平行
移動させる（ステップＳＴ８）。

【００８５】この発明では、伝送手段を介して対話者間
の視線を一致させる手段は、上述した第１から第３のど
の手段を用いても構わず、また、これら手段を組み合わ
せて用いても良い。双方向対話においては、対話者双方
の各椅子４のモニタＴＶ１からの距離Ｌをある範囲に固
定し、上述した第２の手段によって各椅子４の高さを座
高調節機構４０によって上下方向に調整すれば、モニタ
画面８内に表示される対話者３の像９の顔の位置はほぼ
一定領域内に存在することになる。なお、対話者ごとの
顔の大きさ、目の位置等の微調整が必要とされる範囲
は、実験の結果、数ｃｍ〜数１０ｃｍ以内であることを
発明者は確認した。したがって、この微調整は、上述し
た第２の手段によってモニタ画面８に表示された対話者
３の像９の表示位置を移動させるのが有効である。この
表示移動により、椅子４の座高調節機構４０の調整だけ
で対話者相互の視線一致を容易に図ることが可能とな
る。また、ＣＣＤカメラ５の側に複雑な移動メカニズム
や光学処理装置を設けなくても済む。上述した実施例で
は、ＣＣＤカメラ５の設置位置をモニタ画面８に表示さ
れた対話者３の像９の目の位置から上方１０（ｃｍ）の
位置としたが、上記第３の手段による画像表示移動によ
れば、この距離ｈを容易に変更することができる。

【００８６】この実施例の撮影装置６００は、通常市販
されているＴＶ装置に後付けすることが可能である。し
たがって、反射／透過を切り替える表示装置を用いる前
述した第２の従来技術のように専用機を開発する必要は
なく、安価に上述の撮影装置を実現することができる。
また、前述した第１および第３の従来技術のように特殊
なハーフミラーや反射ミラーなどの光学部品を一切必要
としない。よって、装置構成が簡略化されるとともに、
ミラーによって対話者像が暗くなるといったこともな
い。また、広い画角を得るためにミラーを大きくする結
果、画面表示が妨げられるといった問題も、以上説明し
た実施例による撮影装置では生じない。よって、この発
明に係る双方向対話型システムによれば、大きな画面の
画像表示装置を用いた双方向対話が容易に実現される。

【００８７】次に、この発明に係る双方向対話型システ
ムにおける端末装置２０Ａ、２０Ｂの論理構成図を、図
１１を用いて説明する。なお、当該システムは、遠隔地
にいる対話者間における現実的なカウンセリングを実現
するシステムを志向しており、対話者間の視線を一致さ
せる機構の他、理想的なカウンセリング環境を実現する
ための種々の機能を備えている。また、以下に説明され
る構成はＡ地点及びＢ地点の端末装置のいずれにも共通
する構成である。

【００８８】まず、この端末装置は、処理ユニット２６
に撮像データ処理部６０を含めた一体構成の装置であ
る。ここで、撮像データ処理部６０はＣＣＤカメラ５か
らの撮像データを取込み、所定の処理を行うデータ処理
部６００ａと、該ＣＣＤカメラ５の設定位置及び設定角
度を調節するための駆動機構６００ｃを制御する駆動制
御部６００ｂを備える。

【００８９】この端末装置では、当初はモニタ画面８
を、図１２に示すような既定の領域分割を行って表示を
行う。当初の画面８には、図１２に示すようなレイアウ
トで、(1)モニタ画面８の上方中央部を占める、対話の
相手像を表示する、拡張／縮小可能な領域８１と、(2)
モニタ画面８の視認者のみが使用し、対話の相手には見
せない非共有情報である視認者用のメモを表示する、領
域８１の左側を占め、領域８１の拡張／縮小に応じて縮
小／拡張するメモ板領域８２ａと、(3)モニタ画面８の
視認者のみが使用し、対話の相手には見せない非共有情
報である視認者用のデータ検索用情報を表示する、領域
８１の右側を占め、領域８１の拡張／縮小に応じて縮小
／拡張するデータ検索板領域８２ｂと、(4)領域８１お
よび領域８２ａ、８２ｂの下方を占め、領域８１の拡張
／縮小に応じて縮小／拡張する、モニタ画面８の視認者
および対話の相手との双方で共有する共有情報を表示す
る領域８３とを表示する。ここで、メモ板領域８２ａと
データ検索板領域８２ｂとで非共有情報領域を構成す
る。

【００９０】また、画面８の上方枠付近に、(4)画面８
の操作を指示するための操作表示の領域８４を表示す
る。

【００９１】この端末装置では、文字図形入力装置２７
２からの入力情報または受信した伝送情報に応じて各領
域のレイアウトや表示内容が変化する。

【００９２】一方の端末装置における領域８１の拡張／
縮小に連動して、他方の端末装置においても領域８１が
拡張／縮小する。

【００９３】以下、対話中の双方の端末装置では、一方
の端末装置における領域８１の拡張／縮小の発生は、伝
送情報として他方の端末に通知され、一方の端末装置に
おける領域８１の画面８（８Ａまたは８Ｂ）に対する相
対関係と同様の関係で、他方の端末装置の画面８（８Ｂ
または８Ａ）に対話の相手像が表示されるものとする。
こうした対称型の構成は、特に一般のビジネスユースな
どに好適である。

【００９４】なお、カウセンリングの用途の場合には、
カウンセラ側の端末でのみ能動的に領域８１の拡張／縮
小が行えることが望ましいことがある。こうした場合に
は、カウセンラ側の端末装置からのみ、領域８１の拡張
／縮小情報が伝送情報として伝送される構成とすること
になる。

【００９５】図１１に示すように、文字・図形入力装置
２７２は、キーボード装置、ポインティング・デバイ
ス、さらには、対話者の手元に配置されたペン入力装置
（タッチパネルとペン）を備える。また、キーボード装
置と該ペン入力装置との双方を備えることとして適宜選
択可能とすることもできる。

【００９６】文字・図形入力装置２７２から入力された
情報は、文字・図形入力制御部２８６を介して、共有／
非共有判別部２７９に入力する。共有情報と判定された
場合には、入力情報が表示制御部２８５へ向けて出力さ
れるとともに、主送受信システム２８８または無線シス
テム２８７、および伝送手段２７を介して、相手側の端
末装置へ向けて伝送される。一方、非共有情報と判定さ
れた場合には、入力情報が表示制御部２８５へ向けての
み出力される。

【００９７】本実施形態の端末装置では、ポインティン
グ・デバイスで領域８４を操作したり、領域８１、領域
８２ａ、領域８２ｂ、または領域８３の選択や各領域内
の位置指定を行う。こうした、ポインティング・デバイ
スからの入力情報は、非共有情報として処理される。

【００９８】ポインティング・デバイスで領域８１を選
択すると、領域８１の拡張／縮小が可能となる。拡張と
縮小との区別あるいは拡張率または縮小率の指定は、キ
ーボード装置またはペン入力装置で実施する。キーボー
ド装置またはペン入力装置からの入力情報による拡張／
縮小の指定に応じて、上述のようにして決定した基準点
を基準として、対話者間の視線を一致させつつ対話者像
の拡大／縮小を伴う、領域８１の拡張／縮小を実施す
る。キーボード装置またはペン入力装置からの拡張／縮
小情報は、共有情報として処理され、対話の相手側端末
にも伝送される。相手側端末は拡張／縮小情報を受信す
ると、拡張／縮小情報に応じて、領域８１の拡張／縮小
を実施する。

【００９９】領域８１の拡張／縮小にともなって、領域
８２ａ、領域８２ｂ、および領域８３が縮小／拡張され
る。図１３は図１２のレイアウトから領域８１が拡張さ
れた場合の画面８のレイアウトを示し、図１４は図１２
のレイアウトから領域８１が縮小された場合の画面８の
レイアウトを示す。

【０１００】ポインティング・デバイスで領域８２ａを
選択すると、メモ板としての領域８２ａへのメモ情報の
書き込みが可能となる。この状態で、キーボード装置ま
たはペン入力装置から文字情報または図形情報を入力す
ると、非共有情報として処理され、表示制御部２８５を
介してモニタ１へ通知され、領域８２ａにメモ情報が表
示される。こうして、個人的にのみ使用されるメモを画
面８に表示することができる。

【０１０１】ポインティング・デバイスで領域８２ｂを
選択すると、データ検索板としての領域８２ｂでのデー
タ検索が可能となる。この状態で、キーボード装置また
はペン入力装置から検索指示を入力すると、非共有情報
として処理され、表示制御部２８５へ通知される。検索
指示は、領域８２ｂに表示されるとともに、表示制御部
２８５によって解析され、表示情報データベース２６６
内が検索され、該当データが領域８２ｂに表示される。
こうして、個人的にのみ使用されるデータを画面８に表
示することができる。

【０１０２】ポインティング・デバイスで領域８３を選
択すると、共有情報板としての領域８３への共有情報の
書き込みが可能となる。この状態で、キーボード装置ま
たはペン入力装置から文字情報または図形情報を入力す
ると、共有情報として処理され、表示制御部２８５を介
してモニタ１へ通知され、領域８３に共有情報が表示さ
れるとともに、伝送手段を介して相手側端末装置へ共有
情報が伝送される。相手側端末は共有情報を受信する
と、共有情報を領域８３に表示する。なお、領域８３に
は、対話相手側の端末装置から受信した共有情報も表示
される。こうして、共有情報を対話者の双方で参照しな
がら、対話を進行することができる。

【０１０３】なお、領域８２ａ、８２ｂ、８３にはスク
ロール機能を付与することが好適である。図１２におい
ては、各領域の右側の端部にスクロール指示部を用意し
ている。

【０１０４】文字や図形を交えてカウンセリングを行う
ことによりスムースな対話が可能となるが、こうした文
字・図形入力装置２７２として、対話者の選択により、
該対話者の音声を入力して認識し、文字情報に変換して
表示できることが、スムースな対話の成立にとって最も
好適である（この機能は主制御部２７３の制御の下、音
声・音響出力制御部２８２が行う）。

【０１０５】音声出力部２３は、背景音楽（ＢＧＭ）を
出力する機能２８４と、自動的に対話音量を検出して背
景音楽の出力音量を調節する音量調節機能２８３を備え
た音声・音響出力制御部２８２によって出力制御されて
いる。この音声・音響出力制御部２８２は、対話音量が
所定時間にわたって略零であることを検出すると、該検
出結果に基づいて、背景音楽の出力を開始、背景音楽の
音量の増大、または背景音楽の音量の減少を調整する。
またこの音声・音響出力制御部２８２は対話者３の音声
の聞き取りに支障を起こすことなく、該対話者３の心を
落ち着かせる背景音楽を、相手側の対話者の音声に重畳
させて出力することができる。特に、沈黙が継続した場
合に背景音楽を開始したり音量を変化させると対話者３
の緊張が解け、該対話者３をなごませることができるか
らである。

【０１０６】音声入力部２４は、望遠マイクが好まし
い。一般にマイクは、テーブル付きや胸元に付けるもの
を採用することも可能であるが、テーブル付きマイクは
カウンセリングの際の意識障害になったりする場合があ
る。また、胸元マイクは、過って離席すると、コードが
壊れることがある。そこで、存在を意識しないですむ望
遠マイクを表示部２１の上部に配置するか、該表示部２
１に組込んでおくことが好ましい。なお、対話者３の視
線は既に認識されているので、口元へ集音方向を向ける
ことにより指向性を高めることが可能になる。

【０１０７】図１５は、図１２の領域８１の表示を高度
化した、モニタ画面８の表示例の説明図である。図１５
に示すように、領域８１には、第１の領域に、人物像８
１₁に加えて、表示された人物像に応じた人物の識別情
報８１₂である、氏名および固有情報である住所が表示
される。また、積算対話時間および残存対話時間が棒グ
ラフ８１₃として表示される。

【０１０８】識別情報８１₂は、表示人物像８１₁の人物
に応じて、表示情報データベース２６６に格納されたデ
ータあるいはキーボード装置から入力されたデータに基
づいて表示制御部２８５が表示する。

【０１０９】また、棒グラフ８１₃は、主制御部２７３
での会話時間監視の結果に基づいて表示制御部２８５が
表示する。

【０１１０】人物像と人物像に応じた氏名や住所とが同
時に表示されると、初対面の対話相手であっても、名前
などでの呼びかけが容易となり、フレンドリな会話を構
成しやすい。また、氏名と顔を同時に見ることにより記
憶もしやすくなる。なお、表示人物の識別番号、所属グ
ループ、面談回数などを表示することも可能である。

【０１１１】積算対話時間または残存対話時間に応じた
情報（文字表示、棒グラフ表示など）が表示されること
により、限られた会話時間をチェックしながら対話を進
行することができる。この結果、１対Ｎの片方向会話方
式（講義スタイル）と併用する、特定の人との１対１の
双方向対話（例えば、質疑応答など）時に、特定の人に
偏らない、一定時間での対話管理が容易となる。

【０１１２】更に、第１の領域での人物像の表示の開
始、人物像の表示の終了、または他の人物像への切換え
に連動して効果音を出力することが好ましい。ここで、
効果音は、表示される人物像の人物固有に選択されるこ
とが好適である。

【０１１３】こうした効果音は、対話管理を行なう主制
御部２７３に指示に基づいて、音声・音響出力制御部２
８４が出力する。

【０１１４】人物像の表示の開始、人物像の表示の終
了、または他の人物像への切換えに連動して効果音が出
力されることにより、こうした画面の変化に連動して、
まず、音声刺激が作用するので、無音状態からいきなり
画面が発生する場合よりも、心の準備時間を形成するこ
とができる。効果音の出力時間は、一般には、２〜１５
秒で十分である。また、終了時には、いきなり画像が消
えると淋しさが増大する場合がある。したがって、効果
音とともに徐々に画面が終了すれば、心の準備時間を形
成することができる。

【０１１５】なお、効果音は、徐々に大きくする、また
は、小さくするなど、音量変化やリズム変化などを使い
分けるとよい。もちろん、曲の一部を使用してもよい。

【０１１６】さらに、効果音を人物ごとに使いわけれ
ば、効果音に個性を付加することができ、効果音を聴い
ただけで人物識別が可能となる。

【０１１７】また、対話中の人物との対話の残存時間が
所定時間となると、対話時間終了を予告する音声を出力
したり、対話時間終了を予告する画像を表示したりする
ことが好ましい。

【０１１８】終了予告の音声は、対話管理を行なう主制
御部２７３に指示に基づいて、音声・音響出力制御部２
８４が出力する。また、終了予告の画像は、対話管理を
行なう主制御部２７３に指示に応じて、表示情報データ
ベース２６６に格納された表示データに基づいて表示制
御部２８５が表示出力する。

【０１１９】対話終了のカウントダウンに対応する音声
出力や画像表示により時間制限のある対話終了をスムー
スに進行できる。特に、対話を打ち切りにくい場合であ
っても、カウントダウン表示とともに、例えば動物が木
に登って、カウントダウンに応じてリンゴを食べるな
ど、楽しい個性的なアニメーションを用いてビジュアル
化すると、対話者相互で受入れやすい。

【０１２０】また、人物像の表示の前、または、表示の
終了後に、該当人物に応じた情報を所定時間にわたって
表示したり、音声出力したりすることが好ましい。

【０１２１】上記の表示は、対話管理を行なう主制御部
２７３に指示に応じて、表示情報データベース２６６に
格納された表示データに基づいて表示制御部２８５が表
示出力する。

【０１２２】また、上記の音声出力は、対話管理を行な
う主制御部２７３に指示に基づいて、音声・音響出力制
御部２８４が出力する。

【０１２３】人物像の表示の前後に、該当人物に応じた
情報を所定時間にわたって表示したり、音声出力したり
することにより、対話準備やマイルドな終了雰囲気の形
成が可能となる。こうれは、上記の効果音と組合せるこ
とが可能であるし、メッセージなどを取り込んでもよ
い。さらに、人物像に対応した個別のＣＭとしても作用
させることも可能であり、多種多様の雰囲気形成が可能
となる。

【０１２４】また、領域８１において表示されている人
物像から他の人の人物像への切換えに連動して、領域８
２ａ、８２ｂおよび領域８３のいずれか一方の表示を、
他の人に応じて切換えることが好ましい。

【０１２５】こうした切換えは、対話管理を行なう主制
御部２７３に指示に応じて、表示情報データベース２６
６に格納された表示データに基づいて表示制御部２８５
が行なう。

【０１２６】表示人物像８１₁に連動して、共有情報
（領域８３）や非共有情報（領域８２ａ、８２ｂ）を表
示人物像に応じて自動表示することにより、これらの情
報の検索などの一部（少なくとも対話開始当初の検索）
が不要となる。特に、１対Ｎの片方向会話方式（講義ス
タイル）と併用する、特定の人との１対１の双方向対話
（例えば、質疑応答など）時に有効である。

【０１２７】図１では、伝送手段２７として、互いに独
立な伝送路を２つ用意したが３以上であってもよい。ま
た、伝送路は、光ファイバ伝送路３１や衛星通信伝送路
３２の他に、同軸ケーブル伝送路や他の無線伝送路を使
用してもよい。

【０１２８】さらに、この発明に係る双方向対話型シス
テムは対話使用中の伝送路が故障した場合、それを検出
し、使用する伝送路を自動切換するバックアップ・シス
テムを備える。複数の伝送路で接続することにより、対
話中（あるいはカウンセリング中）における伝送路の故
障が発生した場合には、他の伝送路を使用して対話を継
続することができる。こうした場合、他の伝送路では少
なくとも音声の伝送を確保することが好ましい。一般
に、回線異常は、同軸ケーブル、光ファイバケーブル、
または伝送装置の以上が原因と考えられるので、他の伝
送路は無線系としておくことが好ましい。

【０１２９】本発明は上記の実施形態に限定されるもの
ではなく、変形が可能である。たとえば、表示画面を印
刷する画像印刷装置（プリンタ２７０）、または、表示
画面情報を格納する格納手段（例えば、バックアップ用
Ｄ／Ｂ２６４等、ＩＣカード等２６９）を更に備えて構
成することが可能である。格納手段としては、光カー
ド、ＩＣカード、光ディスク、または光磁気ディスクが
使用できる。この場合、対話中の情報、特に対話中で使
用した文字や図形の情報の保存が可能となる。

【０１３０】

【発明の効果】以上、詳細に説明した通り、本発明の双
方向対話型システムによれば、対話の相手の表情を視線
を一致させて観察しながら、個人的な情報を相手に見せ
ない非共有情報として表示するとともに、共有すべき情
報を双方に表示して共有しながらの会話を可能とする統
合化コミュニケーションを対話者の夫々にとって１つの
画面内で成立させることができる。この結果、カウンセ
リングやマルチメディアコミュニケーションを円滑化し
て進行させることができるので、問題解決のための時間
の短縮化でき、更に、より創造的な解決や目標、あるい
はアプローチ手段を発見しやすくすることが可能とな
る。

【０１３１】また、心理的には、視線一致した対話者像
を見ながら同時に認識できる文字・図形情報刺激によ
り、人間の感情・感性的なコミュニケーションと、論理
的思考とが同時に機能しやすくなり、右脳・左脳の活性
バランスがとれ、より創造問題解決型のコミュニケーシ
ョンを実現することができる。

【図面の簡単な説明】

【図１】この発明に係る双方向対話型システム全体を示
す論理構成図である。

【図２】図１の撮像装置を示す図であって、ＣＣＤカメ
ラ（撮像部）の所定位置への設置方法を説明するための
図である。

【図３】当該双方向対話型システムにおける端末装置の
他の例を示す図である。

【図４】図３に示された支持機構の、ＣＣＤカメラの取
り付け構造を示す図であって、図３のＸ−Ｘ線に沿った
断面図である。

【図５】視差角を説明するための図である。

【図６】ＣＣＤカメラが設置されるべき領域を示す図で
ある。

【図７】ＣＣＤカメラの初期設置動作を説明するための
フローチャートである。

【図８】モニタに表示された像を、対話者間で視線が一
致するよう移動させるための動作を説明するためのフロ
ーチャートである。

【図９】図７のフローチャートで説明される、ＣＣＤカ
メラの初期設置動作を概念的に説明するための図であ
る。

【図１０】図７のフローチャートで説明される、モニタ
に表示された像の移動動作を概念的に説明するための図
である。

【図１１】図１に示された端末装置の全体構成を示す論
理ブロック図である。

【図１２】図１のモニタによって表示される表示画面の
画面構成例を示す図である。

【図１３】図１２の領域８１の拡張後のモニタによって
表示される表示画面の画面構成例を示す図である。

【図１４】図１２の領域８１の縮小後のモニタによって
表示される表示画面の画面構成例を示す図である。

【図１５】図１のモニタによって表示される表示画面の
画面構成例を示す図である。

【符号の説明】

１…モニタＴＶ、２…テーブル、３…対話者、４…椅
子、５、２００…撮像装置（ＣＣＤカメラ）、６…撮像
ユニット、８…画面、９…対話者像、１０、１１０…支
持機構、２０…端末装置、２１…表示部、２３…スピー
カ、２４…マイク、２５、２７２…文字図形入力装置、
２６…処理ユニット、２７…伝送手段、６０…撮像デー
タ処理部、８１…対話者像領域、８２…非共有情報領
域、８３…共有情報領域、８４…操作用領域、２７１…
共有／非共有判別部、２７５対話処理部、２８１、６０
０ｃ…駆動機構、２６９…記録媒体、２７９…音声・音
響データ処理部、２８２…音声・音響出力制御部、２８
５…表示制御部、６００、６０１…撮像装置。

Claims (34)

【特許請求の範囲】
1. 【請求項１】 第１対話者のいる第１地点に設置された
   第１端末装置と、該第１地点から相当距離離れた地点で
   あって第２対話者のいる第２地点に設置された第２端末
   装置と、該第１端末装置と該第２端末装置の間におい
   て、少なくとも該第１対話者及び第２対話者の画像デー
   タを有する伝送情報の双方向通信を可能にするための伝
   送手段を備えた双方向対話型システムにおいて、 少なくとも前記第１端末装置は、 前記伝送手段を介して受信した、前記第２対話者の像を
   モニタ上に表示する表示部であって、人物像の頭頂部近
   傍であって、前記撮像部が実際に設置されている位置に
   対応した該人物像の一部分を検出し、該検出された該人
   物像の一部分を固定した状態で、該人物像全体の拡大あ
   るいは縮小を行うとともに、前記モニタ上の前記人物像
   が表示されている第１の領域以外の第２の領域に、前記
   第２の端末装置にも同時に表示される文字および図形の
   少なくともいずれかを表示し、前記モニタ上の前記第１
   の領域または前記第２の領域以外の第３の領域に、前記
   第２の端末装置には表示されない文字および図形の少な
   くともいずれかを表示する表示制御部を備える表示部
   と、 前記表示部のモニタ画面に対し、前記第１対話者の位置
   を規定する位置規定手段と、 前記伝送手段を介して前記第２端末装置に、前記第１対
   話者の像の送信を可能にする装置であって、該第１対話
   者を直接撮像する撮像部と、該撮像部の撮像方向を直接
   該第１対話者に向けた状態で、該第１対話者と前記モニ
   タとの間の所定位置に該撮像部を設定させるための支持
   機構とを有する撮像装置とを備え、 前記撮像部は、前記位置規定手段によって特定された第
   １対話者からモニタまでの距離、および、該第１対話者
   の視線と該第２対話者のモニタ像の視線とが一致したと
   判断される所定の視差角、とによって定義される所定領
   域内に設置されたことを特徴とする双方向対話型システ
   ム。
2. 【請求項２】 前記第１の領域の拡張または縮小に応じ
   て、前記第２の領域および前記第３の領域を縮小または
   拡大する、ことを特徴とする請求項１記載の双方向対話
   型システム。
3. 【請求項３】 前記第１の端末装置における前記第１の
   領域の拡張または縮小に連動して、前記第２の端末にお
   ける第１の領域が拡張または縮小する、ことを特徴とす
   る請求項１記載の双方向対話型システム。
4. 【請求項４】 前記第１の領域は前記モニタ上の上方か
   つ中央部に配置され、前記第２の領域は前記モニタ上の
   前記第１の領域の下方に配置され、前記第３の領域は前
   記モニタ上の前記第１の領域の側方に配置される、こと
   を特徴とする請求項１記載の双方向対話型システム。
5. 【請求項５】 前記伝送情報は、文字情報または図形情
   報を更に備え、伝送されて来た文字情報または図形情報
   に基づいて文字または図形は、前記表示部の前記第２の
   領域に表示されることを特徴とする請求項１記載の視線
   一致型対話システム。
6. 【請求項６】 前記第１の端末装置は、前記文字または
   前記図形を入力する文字図形入力装置を更に備え、前記
   文字図形入力装置から入力された前記文字または前記図
   形は、前記表示部の前記第２の領域または前記第３の領
   域に表示されるとともに、前記第２の領域に表示される
   前記文字または前記図形に応じた前記文字情報または前
   記図形情報を前記第２の端末装置へ向けて出力すること
   を特徴とする請求項１記載の視線一致型対話システム。
7. 【請求項７】 前記文字図形入力装置は、前記第１の対
   話者の音声入力して認識し、文字情報に変換する音声認
   識装置、前記第１の対話者の手元に配置されたキーボー
   ド装置、および前記第１の対話者の手元に配置されたペ
   ン入力装置の少なくとも１つを備えることを特徴とする
   請求項６記載の視線一致型対話システム。
8. 【請求項８】 前記文字図形入力装置は、表示されてい
   る画面の位置を指し示すポインタ位置を入力するポイン
   タ入力部を備えることを特徴とする請求項６の視線一致
   型対話システム。
9. 【請求項９】 前記撮像部は、前記位置規定手段によっ
   て特定された前記距離と前記所定の視差角とによって定
   義される前記所定領域内であって、前記第１対話者から
   見て前記第２対話者のモニタ像の一部を遮る位置に設置
   されることを特徴とする請求項１記載の双方向対話型シ
   ステム。
10. 【請求項１０】 前記第１対話者の視線と前記第２対話
    者のモニタ像の視線を一致させる前記視差角は、該第１
    対話者の視線に対し、該第１対話者から見てモニタ画面
    の左右方向が４．５°以下，真上方向が１２°以下およ
    び真下方向が８°以下であることを特徴とする請求項１
    記載の双方向対話型システム。
11. 【請求項１１】 前記第１対話者の視線と前記第２対話
    者のモニタ像の視線を一致させる前記視差角は、該第１
    対話者の視線に対し、該第１対話者から見てモニタ画面
    の前記左右方向および前記上下方向がそれぞれ３°以下
    であることを特徴とする請求項１０記載の双方向対話型
    システム。
12. 【請求項１２】 前記第１端末装置は、前記モニタ上に
    表示された前記第１対話者自身の像の、該モニタ上の位
    置を認識する処理ユニットを備え、 前記第１端末装置の撮像装置は、前記処理ユニットによ
    り位置認識された前記第１対話者に対して相対的に、前
    記撮像部の位置を移動させるか、あるいは該撮像部の撮
    像角度を変える駆動機構を備えることを特徴とする請求
    項１記載の双方向対話型システム。
13. 【請求項１３】 前記第２端末装置は、少なくとも、前
    記第２対話者を撮像する第２地点撮像部と、該第２地点
    撮像部の位置を移動させるか、あるいは該第２地点撮像
    部の撮像角度を変える第２地点駆動機構を備え、 前記第１端末装置の処理ユニットは、前記伝送手段を介
    して受信され前記モニタ上に表示された前記第２対話者
    の像の、該モニタ上の位置を認識し、該第２対話者に対
    して相対的に、前記第２地点撮像部の位置を移動させる
    か、あるいは該第２地点撮像部の撮像角度を変えるため
    の制御信号を、前記伝送手段を介して前記第２端末装置
    に送信することを特徴とする請求項１２記載の双方向対
    話型システム。
14. 【請求項１４】 前記第１端末装置は、前記モニタ上に
    表示された前記第１対話者自身の像の、該モニタ上の位
    置を認識する処理ユニットを備え、 前記位置規定手段は、前記処理ユニットにより位置認識
    された前記第１対話者自身のモニタ像の目の位置に対し
    て撮影される前記第１対話者自身の目の位置を調整する
    機構を備えることを特徴とする請求項１記載の双方向対
    話型システム。
15. 【請求項１５】 前記第２端末装置は、少なくとも、前
    記第１対話者の像をモニタに表示する第２地点表示部
    と、前記第２対話者の位置を規定する手段であって、モ
    ニタ像の目の位置に対して該第２対話者の目の位置を調
    節する機構を備えた第２地点位置規定手段を備え、 前記第１端末装置の処理ユニットは、前記伝送手段を介
    して受信され前記モニタ上に表示された前記第２対話者
    の像の、該モニタ上の位置を認識し、該第２地点表示部
    のモニタ像の目の位置に対して、該第２対話者の目の位
    置を調節するための制御信号を、前記伝送手段を介して
    前記第２端末装置に送信することを特徴とする請求項１
    ４記載の双方向対話型システム。
16. 【請求項１６】 前記撮像装置の支持機構は、前記撮像
    部を直接支持するための透明部材を備えることを特徴と
    する請求項１記載の双方向対話型システム。
17. 【請求項１７】 前記位置規定手段は、座高調節機構を
    備えた椅子であることを特徴とする請求項１記載の双方
    向対話型システム。
18. 【請求項１８】 前記位置規定手段は、前記第１対話者
    と前記表示部との間に設置された、所定の高さを持った
    テーブルであることを特徴とする請求項１記載の双方向
    対話型システム。
19. 【請求項１９】 前記位置規定手段は、その上に前記表
    示部が直接設置された、所定の高さを持ったテーブルで
    あることを特徴とする請求項１記載の双方向対話型シス
    テム。
20. 【請求項２０】 前記表示部は、該表示部の裏面から該
    表示部の前面のモニタ画面とを連絡する貫通孔を有し、
    前記撮像部は、その先端が前記表示部の貫通孔を貫通し
    該撮像部の先端が前記モニタ画面の前方に突出した状態
    で、前記支持機構により該表示部に取り付けられている
    ことを特徴とする請求項１記載の双方向対話型システ
    ム。
21. 【請求項２１】 前記撮像部は、該撮像部の所定部位を
    中心に回転可能な状態で、前記支持機構により前記表示
    部に取り付けられており、これにより、該撮像部の撮像
    方向は所望の方向に変更されることを特徴とする請求項
    ２０記載の双方向対話型システム。
22. 【請求項２２】 前記第１端末装置は、さらに、前記表
    示部と前記撮像部との取付け角度を変える駆動機構を備
    えることを特徴とする請求項２１記載の双方向対話型シ
    ステム。
23. 【請求項２３】 前記第１端末装置は、前記モニタ上に
    表示される前記第２対話者の像の表示位置を調節する処
    理ユニットを備え、この処理ユニットは、 前記伝送手段を介して受信されモニタ上に表示された前
    記第２対話者の像に基づいて、前記撮像部が本来存在す
    べき該モニタ像上における仮想位置を基準点として特定
    し、 前記撮像部が実際に設置されている位置に対応する前記
    モニタ上の座標と、前記得られた基準点の前記モニタ上
    の座標に基づいて、前記第２対話者のモニタ像のずれを
    検出し、 前記基準点の前記モニタ上の座標を始点とするととも
    に、前記撮像部の設置位置に対応する前記モニタ上の座
    標を終点としたベクトルを算出し、 得られた前記ベクトルに基づいて、前記第２対話者のモ
    ニタ像を平行移動させることを特徴とする請求項１記載
    の双方向対話型システム。
24. 【請求項２４】 前記処理ユニットは、前記伝送手段を
    介して受信され前記モニタ上に表示された前記第２対話
    者の像の両方の目の、該モニタ上の各表示位置をそれぞ
    れ検出し、該両方の目の中央から該モニタの上方に所定
    距離離間した、該モニタ上の位置を前記基準点として特
    定することを特徴とする請求項２３記載の双方向対話型
    システム。
25. 【請求項２５】 前記処理ユニットは、前記伝送手段を
    介して受信され前記モニタ上に表示された前記第２対話
    者のモニタ像の頭頂部に相当する該モニタ上の位置を基
    準点として特定することを特徴とする請求項２３記載の
    双方向対話型システム。
26. 【請求項２６】 前記第１端末装置は、前記第１の領域
    に、前記人物像に加えて、前記人物像に応じた人物の識
    別情報である、氏名、識別番号、または固有情報が更に
    表示する、表示制御部を更に備える、ことを特徴とする
    請求項１記載の双方向対話型システム。
27. 【請求項２７】 前記第１端末装置は、前記第１の領域
    に、前記人物像に加えて、表示されている人物像の人物
    との積算対話時間または残存対話時間に応じた情報が更
    に表示する表示制御部を更に備える、ことを特徴とする
    請求項１記載の双方向対話型システム。
28. 【請求項２８】 前記第１端末装置は、伝送されてきた
    音声情報に基づく音声に加えて、前記第１の領域での前
    記人物像の表示の開始、前記人物像の表示の終了、また
    は他の人物像への切換えに連動して効果音を更に出力す
    る音声出力制御部を更に備える、ことを特徴とする請求
    項１記載の双方向対話型システム。
29. 【請求項２９】 前記効果音は、表示される人物像の人
    物固有に選択される、ことを特徴とする請求項２８記載
    の双方向対話型システム。
30. 【請求項３０】 前記第１端末装置は、伝送されてきた
    音声情報に基づく音声に加えて、前記第１の領域におけ
    る対話中の人物との対話の残存時間が所定時間となる
    と、対話時間終了を予告する音声を出力する音声出力制
    御部を更に備える、ことを特徴とする請求項１記載の双
    方向対話型システム。
31. 【請求項３１】 前記第１端末装置は、前記人物像に加
    えて、前記第１の領域における対話中の人物との対話の
    残存時間が所定時間となると、対話時間終了を予告する
    画像を表示する表示制御部を更に備える、ことを特徴と
    する請求項１記載の双方向対話型システム。
32. 【請求項３２】 前記第１端末装置は、対話対象の候補
    の人物に関する情報を格納する格納装置を更に備えると
    ともに、前記第１の領域への前記人物像の表示の前、ま
    たは、表示の終了後に、前記格納装置に格納された該当
    人物に応じた情報を所定時間にわたって表示する表示制
    御部を更に備える、ことを特徴とする請求項１記載の双
    方向対話型システム。
33. 【請求項３３】 前記第１端末装置は、対話対象の候補
    の人物に関する情報を格納する格納装置を更に備えると
    ともに、前記第１の領域への前記人物像の表示の前、ま
    たは、表示の終了後に、前記格納装置に格納された該当
    人物に応じた情報を所定時間にわたって音声出力する音
    声出力制御部を更に備える、ことを特徴とする請求項１
    記載の双方向対話型システム。
34. 【請求項３４】 前記第１の領域において表示されてい
    る人物像から他の人の人物像への切換えに連動して、前
    記第２の領域および前記第３の領域のいずれか一方の表
    示を、前記他の人に応じて切換える表示制御部を更に備
    える、ことを特徴とする請求項１記載の双方向対話型シ
    ステム。