JPH0787576B2

JPH0787576B2 - テレビ会議装置

Info

Publication number: JPH0787576B2
Application number: JP2142513A
Authority: JP
Inventors: 隆久北口
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 1990-05-31
Filing date: 1990-05-31
Publication date: 1995-09-20
Anticipated expiration: 2010-09-20
Also published as: JPH0435591A

Description

【発明の詳細な説明】〔産業上の利用分野〕本発明はテレビ会議システムに利用する。本発明は３地
点以上の多地点で行うテレビ会議用の画像端末の制御に
関する。

〔概要〕

本発明は多地点間で画像端末によりテレビ会議を行うテ
レビ会議装置において、会議制御局からの会議制御信号によって特定された座席
の画像にマーキングを上書きすることにより、画面上で発言者の特定を容易にできるようにしたもので
ある。

〔従来の技術〕

従来、この種のテレビ会議用画像端末には、２地点で１
対１で行うテレビ会議用画像端末があり、会議中にその
ディスプレイの一部、または全体に相手の顔などを表示
し音声で会話する方式がとられていた。

また、多地点のテレビ会議の場合にはディスプレイの分
割やウィンドウによって区切られたディスプレイの領域
に複数の相手の顔を表示する方式があり、複数の画像端
末を接続し、テレビ会議の制御を行うテレビ会議制御局
が複数の画像端末からの画像信号の合成と音声信号の加
算とを行い、個々の画像端末はテレビ会議制御局から合
成された画像信号と加算された音声信号とを受信し、合
成画像信号をディスプレイ上に表示して加算音声信号に
より多地点と会話する方式となっていた。

〔発明が解決しようとする問題点〕

上述した従来の多地点間のテレビ会議画像端末の制御
は、個々の画像端末がテレビ会議制御局から送信される
合成画像データをそのディスプレイに表示し、加算音声
データにて多地点と会話する方式がとられているので、
多地点のうちの一つが発言権を得て発言しても発言者の
音声レベルや画像に変化がないために多地点の会議参加
者のうち誰が発言者であるのか区別がつきにくい欠点が
ある。

本発明はこのような問題を解決するもので、発言者の特
定を容易に行うことができる装置を提供することを目的
とする。

〔問題点を解決するための手段〕

本発明は、画像信号、音声信号および会議制御信号をデ
ィジタル信号として通信回線に送受信する手段を備えた
複数の端末と、前記ディジタル信号を前記通信回線から
受信し前記各端末を制御する会議制御局とを備えたテレ
ビ会議装置において、前記会議制御局は、発言許可を与
える会議参加者を座席位置により特定する発言許可信号
を含む会議制御信号を前記通信回線に送信する手段を備
え、前記各端末は、発言許可が与えられた会議参加者を
座席位置により特定する発言許可信号を含む会議制御信
号を受信する手段と、前記会議制御信号から前記発言許
可信号を検出する手段と、検出された前記発言許可信号
により特定された座席に着席する人物を映した画像の画
像信号にマーキングの信号を上書きした信号を記憶する
メモリと、前記メモリの読み出し出力信号と前記人物の
音声信号を前記通信回線に送信する手段とを備えたこと
を特徴とする。

前記発言許可信号により特定された座席のマイクロホン
に接続された増幅器の利得を自動的に大きく制御するゲ
イン制御部と、複数の画像端末から到来する複数の画像
をその一部が重なるようにひとつの画面に表示する表示
手段とを備え、その表示手段は、前記発言許可信号によ
り特定された座席の画像を最前に表示させる制御手段を
含むことが望ましい。

〔作用〕

会議制御信号入力部が通信回線から会議制御信号として
発言許可信号を受信したときに、ゲイン制御部へゲイン
制御信号としてゲイン大信号を出力し、これを受けたゲ
イン制御部は増幅器をゲイン大となるよう制御する。さ
らに、会議制御信号入力部が、マーキング制御部へマー
キングオン信号を出力し、マーキング制御部が画像メモ
リに対し記憶された画像データにマーキングを上書きす
るように制御を行う。

その後会議制御信号入力部が通信回線から会議制御信号
として発言終了信号を受信したときに、ゲイン制御部へ
ゲイン制御信号としてゲイン小信号を出力し、これを受
けたゲイン制御部が増幅器のゲインを元に戻す制御を行
う。さらに、会議制御入力部がマーキング制御部へマー
キングオフ信号を出力し、マーキング制御部が画像メモ
リに対し画像メモリ内部に記憶された画像データにマー
キングデータを上書きしないように制御する。

これにより、発言者以外の画像端末において発言者の音
声が大となってマーキングの付加された発言者の画像が
他の発言者とあわせて表示され、発言者の発言内容が聞
き易くなり、発言者の特定を容易に行うことができる。

〔実施例〕

次に、本発明実施例を図面に基づいて説明する。第１図
は本発明実施例の構成を示すブロック図である。

画像信号、音声信号および会議制御信号をディジタル信
号として通信回線12に送受信する通信インタフェース部
４を備え、前記会議制御信号に、発言許可が与えられた
会議参加者を座席位置により特定する発言許可信号を含
み、その発言許可信号により特定された座席に着席する
人物の画像にマーキングを行うマーキング制御部11と、
前記発言許可信号により特定された座席の音声入力部５
を構成するマイクロホンに接続された増幅器６の利得を
自動的に大きく制御するゲイン制御部９と、複数の画像
端末から到来する複数の画像をその一部が重なるように
ひとつの画面に表示する表示装置13とを備え、その表示
装置13には前記発言許可信号により特定された座席の画
像を最前に表示させる制御手段を含む。

人物画像を入力する画像入力部１のアナログ画像信号出
力はＡ・Ｄ変換部２によりアナログ・ディジタル変換さ
れディジタル画像信号を出力する。画像入力部１にNTSC
出力のカラーCCDカメラを用いた場合、カメラからのNTS
C出力をRGBに変換し、アナログRGB信号として出力する
ことによって画像入力部１が構成される。

Ａ・Ｄ変換部２のディジタル画像出力は、画像入力部１
内の同期信号により作られたタイミングにより画像メモ
リ３へ書き込まれ、通信インタフェース部４で作られる
メモリ読出し信号により画像メモリ３内に記憶された画
像データが通信インタフェース部４へ出力される。

音声入力部５はハンドセットやマイクロホンで構成する
ことができ、音声入力部５の音声出力信号は増幅器６の
信号入力へ出力される。増幅器６のアナログ音声出力
は、Ａ・Ｄ変換部７によりアナログ・ディジタル変換さ
れ、通信インタフェース部４で作られたタイミングによ
り通信インタフェース部４へ出力される。

通信インタフェース部４は画像メモリ３から読み出され
た画像データとＡ・Ｄ変換部７からの音声データと会議
制御信号入力部10内に保持された会議制御信号との同期
をとり、多重化して外部通信回線12へ送信する。この際
ヘッドや他の付加情報を組み合わせて送信フレームを構
成することも可能である。

一方、通信インタフェース部４は通信回線12から受信し
た受信フレームを分解し、その中の会議制御信号を会議
制御信号入力部10へ書き込む、この際通信回線12からの
受信信号を分解し、音声データおよび画像データをそれ
ぞれＡ・Ｄ変換部７および画像メモリ３へ出力すること
は可能である。

会議制御信号入力部10は制御部８からの会議制御信号を
保持し、通信インタフェース部４へ出力する。一方、通
信インタフェース部４が通信回線12から受信した会議制
御信号を内部に保持し制御部８へ出力する。

一例として、会議制御信号入力部10は入出力ポートのよ
うなラッチ回路で構成することができ、この場合制御部
８から会議制御信号入力部10内に通信インタフェース部
４から入力された会議制御信号を受け取っているか否か
のポーリングが必要となる。また１チップマイクロコン
ピュータで入出力ポートが内蔵されたマイクロプロセッ
サなどでは、会議制御信号入力部10は同じチップ上に位
置する。

別の例としては、会議制御信号入力部10が通信インタフ
ェース部４から会議制御信号を入力した場合、その信号
を内部ラッチに保持し、制御部８へ割込み信号により割
込みをかけ制御部８へ会議制御信号を受信したことを知
らせ、制御部８が会議制御信号入力部10内に保持された
会議制御信号を読み取ることでも実現可能である。この
場合、制御部８のポーリング動作は不必要なものとな
る。

一方、通信インタフェース部４と会議制御信号入力部10
との間の信号の入出力についても通信インタフェース部
４から前述と同様にして会議制御信号入力部10をポーリ
ングする方法、あるいは会議制御信号入力部10から通信
インタフェース部４へ割込みをかける方法いずれでも実
現可能である。

また、通信インタフェース部４を１チップLSIなどで構
成し通信回線12からの受信データを分解し、内部ラッチ
に保持するような場合、会議制御信号入力部10は同じチ
ップ上に位置する。

通信インタフェース部４が通信回線12から受信データを
分解し、会議制御信号を会議制御信号入力部10へ出力す
る。会議制御信号入力部10は内部のラッチを初めゼロに
クリアしておき、通信インタフェース部４からの会議制
御信号を入力すると内部ラッチに保持する。

制御部８は周期的に会議制御信号入力部10内の会議制御
信号を保持する出力ポートまたはレジスタを読み出し、
その結果がゼロでない場合、会議制御信号の受信有と判
別し、次にその信号が何であるかの判別に入る。受信し
た会議制御信号が発言許可信号と判別した場合にはゲイ
ン制御部９へゲイン大信号を出力し、ゲイン制御部９は
増幅器６のゲインを決める抵抗を短絡あるいはこの抵抗
に直列または並列に別の抵抗を付加するようにスイッチ
ングし、増幅器６のゲインを大にする制御を行う。

さらに、ゲイン制御部９はマーキング制御部11にマーキ
ングオン信号を出力し、マーキング制御部11は画像メモ
リ３に対してＡ・Ｄ変換部２からの画像データを記憶し
ているアドレス領域にマーキングデータをライトし、画
像データにマーキングデータを上書きする。

この際、制御部８からマーキング制御部11へ一度マーキ
ングオン信号を出力するとマーキング制御部11はマーキ
ングオンの状態を保持し、周期的に画像メモリ３のアク
セス可能区間にマーキングデータをライトする。また、
アクセス可能区間の判別には画像入力部１からの同期信
号からタイミングをとることによっても行うことができ
る。

上述の制御により通信インタフェース部４は通信回線12
へゲイン大なる音声データとマーキングが上書きされた
画像データとを通信回線12へ送信する。その後同様にし
て制御部８が会議制御信号入力部10内に通信回線12から
の会議制御信号受信有と認識し、さらにこの会議制御信
号が発言終了信号であると判別した場合、ゲイン制御部
９へゲイン小信号を出力し、ゲイン制御部９は増幅器６
のゲインを決める抵抗などに対して行ったゲイン大とな
る制御を元に戻すようスイッチングし、増幅器６のゲイ
ンを元に戻す制御を行う。

さらに、制御部８はマーキング制御部11へマーキングオ
フ信号を出力し、マーキング制御部11は制御部８から一
度マーキングオフ信号を入力するとマーキングオフの状
態を保持し、画像メモリ３へのマーキングデータのライ
トを停止する。

その後、Ａ・Ｄ変換部２からの画像データが画像メモリ
３へ書き込まれ、画像データにはもはやマーキングデー
タは上書きされないのでマーキングのない画像が画像メ
モリ３内に記憶される。

このような制御により通信インタフェース部４はゲイン
が通常の音声データとマーキングが上書きされていない
画像データとを通信回線12へ送信する。

第２図（ａ）および（ｂ）は本発明実施例の会議制御局
と端末間の構成およびデータフロー図である。本発明実
施例の制御方式を用いたテレビ会議用画像端末Ａ〜Ｄは
多地点のテレビ会議を制御する会議制御局と接続され
る。画像端末Ａ〜Ｄは会議制御局に対しておのおの信号
を送信し、信号を会議制御局から受信
する。

信号〜は内部をアルファベット小文字で表した音声
フレームと大文字で表した画像フレームとに分割され
る。さらに画像端末Ａ〜Ｄはおのおのの音声データa₁a₂
b₁b₂c₁c₂d₁d₂とおのおのの画像データA₁A₂、B₁B₂、C
₁C₂、D₁D₂とを会議制御局に送信し、会議制御局では音
声信号に関してはおのおのの画像端末Ａ〜Ｄからの音声
データをアナログ加算し、画像データに関してはおのお
のの画像端末Ａ〜Ｄに対して送信元以外の画像を合成し
て送り返す。

例えば、画像端末Ａの場合、会議制御局に対して音声デ
ータa₁a₂と画像データA₁A₂を多重化して送信し、音声信
号に関しては個々の端末Ａ〜Ｄの音声データをアナログ
加算したa₀＋b₀＋c₀＋d₀、a₁＋b₁＋c₁＋d₁を受信する。
画像データに関しては画像端末Ａの画像を除く画像端末
Ｂ〜Ｄの画像を合成した画像信号B₀C₀D₀およびB₁C₁D₁を
受信する。画像端末Ｂ〜Ｄについても同様である。

第３図は会議制御局内のデータフロー図である。個々の
画像端末Ａ〜Ｄからの受信データは音声データa₁a₂…d₁
d₂、画像データA₁A₂…D₁D₂に分解される。音声データa₁
はディジタル・アナログ変換されとなる。画像端末Ｂ、Ｃ、Ｄからの受信データについて
も同様で、が生成される。

は加算器によりアナログ加算され、さらにアナログ・デ
ィジタル変換され、加算音声データa₁＋b₁＋c₁＋d₁が生
成される。

画像データA₁〜D₁は分配スイッチにより分配され合成メ
モリ領域に書き込まれる。この場合、画像端末Ａに対し
てはB₁C₁D₁の合成画像、画像端末Ｂに対してはA₁C₁D₁、
画像端末Ｃに対してはA₁B₁D₁、画像端末Ｄに対してはA₁
B₁C₁の合成画像がおのおの生成される。

会議制御局から画像端末Ａ〜Ｄ側への送信データについ
ては、画像端末Ａに対して加算音声データa₁＋b₁＋c₁＋
d₁と画像データB₁C₁D₁とを多重化し、画像端末Ｂに対し
て画像端末Ａに対するものと同一の加算音声データa₁＋
b₁＋c₁＋d₁と画像データA₁C₁D₁とを多重化して送信デー
タを組立てる。画像端末Ｃ、Ｄに対しても同様である。

第４図は本発明実施例の制御方式による画像端末Ａ〜Ｄ
のディスプレイ表示図であり、第２図（ａ）に示すよう
な画像端末Ａ〜Ｄが多地点テレビ会議を行った場合の画
像端末Ａのディスプレイ表示例である。

ディスプレイ表示図、はディスプレイをたてに分割
し、おのおのに相手画像Ｂ、Ｃ、Ｄを表示させた場合で
画像端末Ｂの発言が許可されたときの表示例である。
はマーキングとして画像Ｂを囲むマーキングを適用した
例であり、は画像Ｂの上下に表示するマーキングを適
用した例である。

ディスプレイ表示図、はディスプレイにウィンドウ
を作り、その一つウィンドウに合成相手画像Ｂ、Ｃ、Ｄ
を表示させた場合で上述と同様画像端末Ｂの発言が許可
されたときの表示例である。は前例と同じ画像Ｂを
囲むマーキングを適用した例であり、は画像Ｂの上に
丸印を表示するマーキングを適用した例である。

第５図は制御部８の制御の一例を示すフローチャートで
ある。会議モードに入るとこの処理の先頭に処理が移
り、制御部８が次の処理を行う。

まず、発言要求が有か無かの判別を行い、無の場合には
Ｅへジャンプし、会議モード終了か否かの判別を行う。
発言要求有の場合には発言要求信号を会議制御信号入力
部10へ出力する。その後会議制御局からの発言許可信号
の受信を待つ。

つまり、会議制御信号入力部10に会議制御信号有か否か
の判定を行い、無の場合には発言権取り下げが有か無か
の判別を行い、有の場合には発言終了ルーティングへジ
ャンプしする。発言権取下げが無の場合には再び会議制
御信号の受信が有か無かの判別を行う。

会議制御信号の受信が有の場合、その受信信号が発言許
可信号かどうかの判別を行い、無の場合には発言権取下
げ有か無かの判別を行い、前述と同じルーチンへジャン
プする。会議制御信号が発言許可信号である場合はゲイ
ン制御部９へゲイン大コマンドを出力し、マーキング制
御部11へマーキングオン信号を出力する。

次に、会議制御信号の入力が有か無かの判別を行い、有
の場合、それが発言終了信号かどうかの判別を行う。発
言終了信号である場合は発言終了ルーチンへジャンプ
する。発言終了でない場合、および前述の会議制御入力
有かどうかの判別において無と判別した場合いずれも
へジャンプし、発言終了要求があるかどうかの判別を行
う。

発言終了要求が無の場合へ戻り、再び会議制御信号入
力有か無しかの判別を行う。発言終了要求が有の場合、
発言終了信号を会議制御信号入力部10へ出力し、会議制
御信号入力部10内に会議制御局からの会議制御信号の入
力が有か無しかの判別を行い、無の場合有となるまで待
ち、有の場合発言終了信号の受信が有か無かの判別を行
い、無の場合は再び会議制御信号入力が有か否かの判別
ルーチンへ戻る。

発言終了信号の受信が有の場合は、ゲイン制御部９へゲ
イン小コマンドを出力し、ゲインを元に戻させる制御を
行い、マーキング制御部11へマーキングオフ信号を出力
してマーキングの画像メモリ３への書込みを停止させる
制御を行う。

その後会議モード終了かどうかの判別を行い、終了でな
い場合はへジャンプして会議ルーチンの先頭に戻る。
会議モード終了である場合は会議モードを終了し処理を
終了する。

本実施例は本発明による制御方式を適用した画像端末の
制御部８の制御の一例を示したもので、これに種々の処
理を加えたり変形することも可能である。

〔発明の効果〕

以上説明したように本発明によれば、複数の画像端末間
で多地点のテレビ会議を行った場合に、会議制御局から
の会議制御信号によって発言権を得た人に対応する音声
信号のレベルを大にし、画像データにマーキングを上書
きして会議制御局へ送信する制御を行うことにより、発
言者以外の画像端末において発言者の音声が大となりマ
ーキングの付加された発言者の画像が他の出席者と合わ
せて表示されるため、発言者の発言内容を聞きやすく
し、発言者の特定を容易にできる効果がある。

【図面の簡単な説明】

第１図は本発明実施例の構成を示すブロック図。第２図（ａ）および（ｂ）は本発明実施例の端末と会議
制御局との間の関係および信号送受信の状態を示す図。第３図は本発明実施例の会議制御局内の信号の状態を示
す図。第４図は本発明実施例における画像端末のディスプレイ
表示例を示す図。第５図は本発明実施例における制御部の制御の流れを示
すフローチャート。１……画像入力部、２、７……Ａ・Ｄ変換部、３……画
像メモリ、４……通信インタフェース部、５……音声入
力部、６……増幅器、８……制御部、９……ゲイン制御
部、10……会議制御信号入力部、11……マーキング制御
部、12……通信回線、13……表示装置、14……スピー
カ。

Claims

【特許請求の範囲】

【請求項１】画像信号、音声信号および会議制御信号を
ディジタル信号として通信回線に送受信する手段を備え
た複数の端末と、前記ディジタル信号を前記通信回線か
ら受信し前記各端末を制御する会議制御局とを備えたテ
レビ会議装置において、前記会議制御局は、発言許可を与える会議参加者を座席
位置により特定する発言許可信号を含む会議制御信号を
前記通信回線に送信する手段を備え、前記各端末は、発言許可が与えられた会議参加者を座席位置により特定
する発言許可信号を含む会議制御信号を受信する手段
と、前記会議制御信号から前記発言許可信号を検出する手段
と、検出された前記発言許可信号により特定された座席に着
席する人物を映した画像の画像信号にマーキングの信号
を上書きした信号を記憶するメモリと、前記メモリの読み出し出力信号と前記人物の音声信号を
前記通信回線に送信する手段とを備えたことを特徴とするテレビ会議装置。
【請求項２】各端末には、前記発言許可信号により特定
された座席のマイクロホンに接続された増幅器の利得を
自動的に大きく制御するゲイン制御部を備えた請求項１
記載のテレビ会議装置。
【請求項３】複数の画像端末から到来する複数の画像を
その一部が重なるようにひとつの画面に表示する表示手
段を備え、その表示手段は、前記発言許可信号により特定された座
席の画像を最前に表示させる制御手段を含む請求項１記載のテレビ会議装置。