JPH01276892A - 通信システム - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 ［産業上の利用分野コ 本発明は複数端末間の通信システムに関し、特に音声と
ファイル等に格納されたデータとを用いてリアルタイム
に通信を行なう電子打合わせに好適な通信システムに関
する。

［従来の技術］ 従来、複数の端末間で音声および画像を用いて直接打合
わせを行なう際には、文献「パソコン在席会議」　（信
学会・オフィスシステム技術０８８６−３６）に記載さ
れているように、まず全端末に起動をかけた後、同一の
共有画面を表示し、お互いが同一の情報を共有しながら
プレゼンテーションや討議を進める。この際、打合わせ
の進行を効果的に行なうため、共有画面上でのマウスを
用いたポインティング機能や矩形枠表示機能を提供して
いる。共有画面に対する発言者がマウスを移動すると、
その座標値が他の端末へ即時に伝達され、全量の画面上
のポインタが対応する位置へ移動する。これにより、説
明箇所をその場で指示しながらプレゼンテーションを行
なうことができる。又、画面上に任意の矩形を設定し、
その枠を表示することにより表示内容の一部分を強調す
ることも可能となっている。

［発明が解決しようとする問題点］ 上記従来技術は、多人数による会議を前提としており、
共有画面に対するポインティング、書込みおよび消去等
の操作の権利（以後、発言権と呼ぶ）を確実に制御して
おく必要があった。この制御を行なわないと、共有画面
の共通性がなくなったり、発言の競合による打合せの効
率が著しく低下したりする。しかし、打合わせの参加者
が２名、即ち１：１の端末間通信の場合には、通常の電
話機による１：１通信の場合と同様、発言権の制御は両
者の会話の中で自動的に行なわれる。相互の理解度とい
う点について言えば、システムとして発言権というもの
を設け、半二重的な通信系体をとる方式より、発言権を
設けず、音声による会話と同様、全二重的通信系とする
方式の方が有効と考えられる。

本発明の目的は、音声およびデータを用いて２つの端末
間で打合ねせを行なう際の、通信効率の高い全二重通信
システムを提供することにある。

［問題点を解決するための手段］ 上記目的を達成するために、本発明の通信システムでは
、複数の端末装置を全２重伝送路を介して接続し、各端
末装置それぞれが、表示画面と、上記画面上の位置を指
示するためのポインティング手段と、データおよびコマ
ンドを入力するための入力手段と、上記ポインティング
手段によって制御される第１のカーソルを上記表示画面
に表示すると共に、該第１のカーソルの状態を示す情報
を相手端末装置に送信し、相手端末装置から受信したカ
ーソル情報に基づく第２のカーソルを上記第１のカーソ
ルとは異なるマークあるいは色彩で上記表示画面に表示
する制御手段とを有する構成としたことを特徴とする。

［作用コ 本発明によれば、各端末装置の表示画面に自分のカーソ
ルと、相手端末から送信されてきたカーソル情報に基づ
く相手カーソルとが形状あるいは色彩を変えて同時に表
示されるため、自分が注目している７部分に相手に知ら
せながら、電話機を用いた会話を交えた画面編集が可能
となる。この場合、表示部上で相手のカーソルと自分の
カーソルの形状または色彩が変えであるため、両者の混
同がなくなり、通信の効率は向上する。尚、各端末装置
が、上記カーソル情報と一緒に画面編集のためのキー情
報や制御情報を相手端末と送受信し。

これを自装置で入力した画面編集情報と同様に端′　末
画面に反映するようにすることにより、両端末装置のオ
ペレータが協力した入力操作で画面編集することもでき
る。

［実施例コ 以下、本発明による通信システムの１実施例を図面を用
いて説明する。

第１図は本発明を適用とする音声およびデータを用いた
１：１の端末間双方向通信システムの主要部を示すブロ
ック図であり、２台の端末装置１０Ａ、ＩＯＢが、交換
機を含むネットワークの報など）は、端末装置中の通信
データフェース部８Ａ、８Ｂによって、多重化あるいは
分離され、相手端末との間で送受信される。表示部３Ａ
には２つのカーソルが表示され、このうち、４Ａは自カ
ーソルであり、マウス等のポインティングデバイスＩＡ
から取り込んだ情報を、ポインティング制御２Ａを経由
してプロセサ部７Ａに取り込み、これを画面制御部６Ａ
を経由して出力させたものである。一方、５Ａは相手カ
ーソルである。相手端末装置１０Ｂのポインティングデ
バイスＩＢで取り込んだ情報は、ポインティング制御部
２Ｂを経由してプロセサ部７Ｂに取り込まれ、カーソル
情報として必要な制御情報および位置情報に分離され、
伝送用フォーマットに変換した後、通信インターフェー
ス部８Ｂに転送して電話機９Ｂからの音声信号と多重さ
れ、全二重伝送路１１に送出される。端末装置１０Ａ内
の通信インターフェース部８Ａは、相手端末からの受信
信号を音声とデータに分難した後データをプロセサ部７
Ａに取り込む。プロセサ部７Ａは上記データをフォーマ
ット変換した後、画面制御部６Ａに相手のカーソル情報
を書き込み、その出力が相手カーソル５Ａとなる。端末
装置１０Ｂ側の表示部に出力される自カーソル４Ｂおよ
び相手カーソル５Ｂについても上記と同様である。プロ
セサ部７Ａ（または７Ｂ）において、自カーソル情報は
ポインティング制御部２Ａ（または２Ｂ）から入力され
、相手カーソル情報は通信インターフェース部８Ａ（ま
たは８Ｂ）から入力されているため、カーソル情報の発
生（入力）元によってカーソルの形状および色彩の指定
パラメータを変えることにより、表示画面上で両者の表
示パターンを変えることができる。

各端末装置は、上記ポインティング・デバイスの他に、
後述する文書編集用のキーボードを有しており１表示部
に表示された英文や日本文などのテキストデータ、ある
いは、ビットマツプで表示された静止画に対して編集で
きる機能を備えている。一方の端末において、キーボー
ド操作により表示画面上の共有画面領域の表示内容に対
して編集操作すると、編集用のキー情報とその制御用の
パラメータが相手側の端末に送信され、自端末と同様の
表示が相手側端末の表示画面に現われる。

２台の端末装置において、共有画面が設定された後は、
タイマーで管理される一定周期毎に、例えば第２図に示
されるパケット・フォーマット２０でデータが送受信さ
れ、自カーソルと相手カーソルとの同時表示を利用した
説明と並行して、表示内容の修正、消去といった編集機
能を実行できる。

第２図において、２１はカーソル情報部、２２は編集情
報部であり、カーソル情報部２１はマウスクリック等の
制御情報を示すフィールド２３とカーソルの位置情報（
ｘ、ｙ座標）を示すフィールド２４からなり、編集情報
部２２は、キー情報を示すフィールド２５と編集データ
を示すフィールド２６とからなっている。

第３図は、端末装置１０Ａ（又はｌ０Ｂ）の具体的な構
成の１例を示す図である。端末装置１０Ａのカーソル情
報は、マウスＩＡと、これを内部バス１２Ａに接続する
マウスインターフェース２Ａを介して、また、テキスト
データ等の編集情報はキーボードＩＯＡと、これを内部
バス１２Ａに接続するキーボードインターフェース１４
Ａを介してマイクロプロセサ７Ａに入力される。マイク
ロプロセサ７Ａは、カーソル情報および編集情報を一定
周期毎に受信するためのタイマ１６Ａを内蔵しており、
この一定周期毎にキーボード１３ＡおよびマウスＩＡか
ら得られた情報を画面制御部６Ａに書き込むと共に、通
信インタフェース８．ｔｌを介して相手端末に送る。画
面制御部６ＡはＣＲＴ３Ａを制御し、情報を表示する。

又、相手端末１０Ｂからの情報は通信インターフェース
８Ａを経由してマイクロプロセサ７Ａに取り込まれ、カ
ーソル情報と編集情報に分離され、カーソル情報につい
てはメモリ１５Ａ内に予め登録しであるカーソルパター
ンをアクセスしながら、これに位置座標を与えて画面制
御部６Ａに書き込む。受信した編集情報については、自
分の端末内のキーボードインターフェースから入力され
たコードと全く同様に扱い、適宜メモリ１５Ａを参照し
ながら、画面制御部６Ａにデータを書き込む。

一般に、ＣＲＴ上にビットマツプ形式でカーソルを表示
する場合、画面制御部６Ａは１種類のカーソルを表示す
るためのレジスタしか備えておらず、形状の異なる２以
上のカーソルを表示することはできない。

本発明では、各端末装置の画面制御部６Ａおよび６Ｂが
有するカーソルレジスタは自刃−ルソの表示に用いる。

即ち、上記カーソルレジスタには、自カーソルを示すた
めの所定のパターン形状と種類を予め登録しておき、マ
ウス入力のポーリングの都度、自カーソルのＸ座標とｙ
ａ標を読み込み、この座標に該当する画面上の位置に上
記カーソルレジスタの登録情報に基づく所定パターンの
カーソルマークを表示する。一方、相手端末からのカー
ソル表示のために、各画面表示部に第４図に示すメモリ
マツプ６０を用意する。相手端末からカーソル情報を受
信すると、制御情報２３として与えられるカーソル制御
パラメータ６１と、位置情報２４Ａとして与えられるＸ
、Ｙ座標６３．６４をそれぞれデータとしてメモリマツ
プ６０に書き込み、これらのデータに基づく所定形状の
相手カーソルを画面上に表示する。相手カーソルの形状
を示すカーソル・パターン・テーブル６２は、予め設定
してもよいし、カーソル情報受信の都度設定するように
してもよい。これによって、画面上に２種類のカーソル
を同時に表示することができる。尚、自カーソルと相手
カーソルの制御は、上記の例と逆に関係にしてもよい。

第５図は、プロセッサ７Ａが実行する制御プログラムを
示すフローチャートである。端末装置が起動されると、
先ず、ステップ１００で初期設定が行なわれる。ここで
は、例えば、パケット送信の周期を定めるタイマーの初
期値設定、および相手カーソルのパターン設定が行なわ
れる。これが終ると、プログラムには割り込み待ち状態
に入る（ステップ１０２）。もし、終了割り込みがあれ
ばプログラムを終了しくステップ１０４）、それ以外の
割込みがあれば、割込み種類に応じたルーチンが実行さ
れる。この実施例では、自カーソル情報を定期的に相手
端末に送信するためのタイマ割り込み２００と、３種類
のソフトウェア割込み３００．４００および５００があ
る。ソフトウェア割込みは、編集キー人力の際（３００
）、編集データ入力の際（４００）、およびデータ受信
の際（５００）にそれぞれ非同期に生起される。

第６図（Ａ）、（Ｂ）、（ｃ）は、それぞれ、タイマ割
込みによるパケット送信ルーチン２００と、編集キー人
力割込みルーチン３００および編集データ入力割込みル
ーチン４００の内容を示し、第７図はデータ受信割込み
ルーチン５００の内容を示す。

編集キー人力割込みルーチン３００では、キーからの入
力コードを解読（ステップ３００）した後、自端末装置
１０Ａ（又はｌ０Ｂ）の画面上にキー人力に対応した表
示を行なうために１画面制御部６Ａ（又は６Ｂ）に表示
情報の書込みを行ない（ステップ３０４）、更に、相手
端末１０Ｂ（又はｌ０Ａ）に同一内容の表示を行なうた
めに、上記表示情報をメモリ１５Ａ（又は１５Ｂ）上の
所定のメモリ領域に書込む（ステップ３０６）。

このメモリ領域は、後述するように、パケット送出ルー
チン２００の実行時に読み出され、編集情報として相手
端末に送信される。

編集データ入力割込みルーチン４００も、上記編集キー
人力割込みルーチン３００と同様に、場集位置あるいは
データの解読（ステップ４０２）を行なった後、これを
自端末装置の画面制御部に書き込み（ステップ４０４）
、相手端末へ送出するために所定のメモリ領域に書き込
む（ステップ４０６）。

タイマー割込みで定期的に起動されるパケット送信ルー
チン２００は、先ず、カーソルの制御情報と位置情報を
読み込み（ステップ２０２，２０４）、次に、上述した
編集キー情報と編集データ情報を所定のメモリ領域から
読み出しくステップ２０６．２０８）　、これらを第２
図のパケットフォーマットに組み立てる（ステップ２１
０）。次に、相手端末に対して送信リクエストを送出し
くステップ２１２）、受信応答を待つ（ステップ２１４
）。受信応答があれば、上記パケットを送信して（ステ
ップ２１６）、このルーチンを終了する。もし、受信応
答がなければ、受信タイマがタイムアウトするまで、送
信リクエストの送信を繰り返す（ステップ２１８）。受
信応答がないまま送信タイマがタイムアウトした場合は
、自端末装置の表示画面に通信不能のメツセージを表示
しくステップ２２０）、このルーチンを終了する。

通信インターフェース８Ａ（又は８Ｉ３）からのデータ
受信要求で起動されるデータ受信割込みルーチン５００
は、先ず、相手端末からのパケットデータの全てを一旦
、受信バッファ領域に読み込み（ステップ５０２）、受
信パケット中に編集情報２２が含まれているか否かを判
定する（ステップ５０４）。もし、編集情報が含まれて
いれば、キー情報２５と編集データ２６をそれぞれ抽出
し、画面制御部へ書き込む（ステップ５０６〜５１０）
。

上記編集情報の処理を終えた後、あるいは、受信パケッ
トに編集情報が含まれていなかった場合はステップ５１
２に進み、現在表示中の相手カーソルを消去した後、上
記受信パケット中に含まれる相手カーソルの制御情報２
３と位置情報２４を抽出し、これらの画面制御部に書込
む（ステップ５１４〜５１８）。これによって、画面上
で相手カーソルが新たな位置に移動する。相手端末上で
カーソルの移動がなければ、画面上の相手カーソルは同
じ位置に再表示されることになる。

次に、第８図と第９図を参照して、編集動作の１例につ
いて説明する。今、第８図に示す如く。

ページ１とページ２からなるファイル＃１について、第
２ページの１つの行の内容ｒＸＶＺＹＷＪをｒＶＷＸＹ
ＺＪと訂正する場合を想定する。ここで、各端末装置の
表示画面がファイル＃１の１ペ一ジ分しか表示できず、
今、第１ページの内容が表示中であると仮定すると、オ
ペレータ操作と、それに伴なう画面の変化は第９図のよ
うになる。

即ち、訂正部分が第２ページにあるので、オペレータは
先ず「スクロール」キーを操作して画面上にファイル＃
ｌの第２ページを出力し、次いでカーソルを訂正希望位
置に移動した後、文字入カキ−を操作して訂正後のテキ
ストｒＶＷＸＹＺＪを入力し、訂正が終了すると「送信
」キーを押す。

これらのオペレータ操作による入力コードは、第２図の
パケットに編集して相手端末に送信されるが、上記の例
で「スクロール」キー人力と「送信」キー人力は編集キ
ー情報として、また、カーソル移動位置とテキスト入力
は編集データとして相手端末に送信される。

第１０図は、表示画面の１例を示す。この例では、自カ
ーソル４Ａは鉛筆のマーク、相手カーソル５Ａは手のマ
ークで表示されて、これによって各端末装置のオペレー
タが表示画面上の位置を指示しながら、電話による会話
により打合せを進める形式となっている。これらのカー
ソルの表示パターン（マーク）は、初期設定ルーチンに
おけるカーソルレジスタへのパターン登録、および相手
端末からのカーソルデータ受信時に行なうカーソルパタ
ーンテーブルへの書込みにより実現される。

現在、音声とデータとを同一媒体、同一インタフェース
で交換、伝送できる２Ｂ＋Ｄチヤネルのｌ５ＤＮの実用
化が始まっているが、本発明はこれに更にＰチャネル（
１、５Ｍｂｐｓ）を加えてビットマツプ情報の高速伝送
と高品質圧縮動画像の転送を可能にしたＩ　Ｖ　Ｄ　Ｌ
　Ａ　Ｎ　（Ｉ　ｎｔｅｇｒａｔｅｄＶｏｉｃｅ　ａｎ
ｄ　Ｄａｔａ　ＬＡＮ）　ヘの応用に適している。この
場合、例えば、一方の端末装置１０ＡからＤチャネルに
より相手端末１０Ｂを呼び出した後、Ｂチャネルを用い
た音声で会話を行ない、Ｐチャネルにより１画面のデー
タを転送して、両端末装置の画面上に共通の画像を写し
出す。次に、Ｐチャネルを利用してポインティング情報
（カーソル）を逐次転送しながら、音声により画面説明
を行ない、画面の内容に関して修正２編集の必要が生じ
た場合、Ｐチャネルを用いてテキスト、あるいはイメー
ジデータの修正を両端末画面で同時に実現する。このよ
うにして両オペレータの合意が得られた場合、゛編集画
面のデータを所定のファイルに格納した後、Ｄチャネル
により回線の切断を行なえばよい。

本発明において、互いに通信する各端末装置が同一のハ
ードウェアおよびソフトウェア構造をもつ場合、相手端
末に送信すべき編集情報は、画面表示のために編集され
た後のデータである必要はなく、編集のためのコマンド
列およびデータ列だけでよいこと明らかである。

［発明の効果］ 本発明によれば、端末間で１＝１の双方向通信を行なう
際、音声を併用しながら両者の画面に表示されたデータ
に対し、相手のカーソルを見ながら独立に自分のカーソ
ルを移動することができるため、通常のインタビューと
同じように自然にかつスピーデイにデータの説明および
理解を行なうことができ、全二重回線の特徴を十分に活
かした通信ができる。又、ＣＲＴに表示される自カーソ
ルと相手カーソルの形状を変えておくことにより、同一
画面上で２つのカーソルが移動しても間違えることはな
い。更に、カーソル情報と同様に編集情報を送信するこ
とにより、同一ドキュメントに対して、相互に修正や削
除といった編集機能を付加することができ、インタビュ
ー形式によるドキュメントの合同編集が可能となる。

本発明は、従来の音声による電話通信の全二重性に注目
し、テキストや静止画の様子データ通信の場合にもこの
全二重性を拡張したシステムと捉えることができ、音声
とデータを統合した通信システムの１つの代表的なアプ
リケーションとなりうる。

【図面の簡単な説明】

第１図は本発明による通信システムの全体構成を説明す
るための図、第２図はカーソル情報と編集情報を伝送す
るためのパケット・フォーマットの１例を示す図、第３
図は端末装置の構成の例を示すブロック図、第４図は相
手端末からのカーソルを表示するために用いられるメモ
リマツプの構成を説明するための図、第５図は各端末装
置で実行するプログラムの構成を示すフローチャー１・
、第６図（Ａ）〜（Ｃ）と第７図は、それぞれ第５図に
示したルーチン２００，３００．４００および５００の
詳細フローチャート、第８図と第９図は本発明システム
における画面編集機能を説明するための図、第１０図は
自カーソルと相手カーソルとを表示した本発明システム
における表示画面の１例を示す図である。 １０：端末装置、１１：全二重伝送路、４Ａ、４Ｂ：自
カーソル ５Ａ、５Ｂ：相手カーソル。 第夕目 第４図 第７］ 第３２ 第プ園 （を丁正入７７） 各 （面・−・７） 第７０回 ／ 夕Ａ

Claims (1)

1. 【特許請求の範囲】 １、複数の端末装置が全２重伝送路を介して接続され、
   上記各端末装置のそれぞれが表示画面と、上記画面上の
   位置を指示するためのポインティング手段と、データお
   よびコマンドを入力するための入力手段と、上記ポイン
   ティング手段によって制御される第１のカーソルを上記
   表示画面に表示すると共に、該第１のカーソルの状態を
   示す情報を相手端末装置に通信し、相手端末装置から受
   信したカーソル情報に基づく第２のカーソルを上記第１
   のカーソルとは異なるマークあるいは色彩で上記表示画
   面に表示する制御手段とを有することを特徴とする通信
   システム。 ２、前記制御手段が第１のカーソルの状態を示すカーソ
   ル情報を所定の周期で相手端末に通信することを特徴と
   する第１請求項記載の通信システム。 ３、前記制御手段が、前記入力手段により入力された画
   面編集情報に応じて前記表示画面の表示内容を変更する
   と共に、該画面編集情報を一時的に記憶しておき、該画
   面編集情報を前記カーソル情報と共にパケット化して前
   記所定の周期で相手端末装置に送信し、相手端末から画
   面編集情報を受信した場合は、受信した画面編集情報に
   応じて上記表示画面の表示内容を変更することを特徴と
   する第２請求項記載の通信システム。 ４、前記各端末装置が音声の入出力手段を有し、前記全
   ２重伝送路を介して、前記パケットと上記音声とが並列
   的に送受信されることを特徴とする第３請求項記載の通
   信システム。 ５、前記制御手段が、前記入力手段から入力されたコマ
   ンドまたはデータを前記画面編集情報として相手端末に
   送信することを特徴とする第３請求項記載の通信システ
   ム。