JPH0922339A - 遠隔操作装置 - Google Patents

遠隔操作装置

Info

Publication number
JPH0922339A
JPH0922339A JP7169467A JP16946795A JPH0922339A JP H0922339 A JPH0922339 A JP H0922339A JP 7169467 A JP7169467 A JP 7169467A JP 16946795 A JP16946795 A JP 16946795A JP H0922339 A JPH0922339 A JP H0922339A
Authority
JP
Japan
Prior art keywords
information
screen
unit
terminal
operated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP7169467A
Other languages
English (en)
Inventor
Kenichi Fujita
健一 藤田
Takeshi Nagao
武司 長尾
Toru Kawaguchi
透 川口
Hiroyuki Hikita
啓之 引田
Yoshiki Kaneko
惠季 金子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP7169467A priority Critical patent/JPH0922339A/ja
Priority to US08/675,478 priority patent/US5825336A/en
Publication of JPH0922339A publication Critical patent/JPH0922339A/ja
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Digital Computer Display Output (AREA)
  • Computer And Data Communications (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

(57)【要約】 【目的】 遠隔操作装置において、操作者の注目の度合
いにより、任意の領域の画面の情報量を可変とすること
により、ネットワークや端末の負荷を低減させる。 【構成】 操作側端末において、自端末の表示を管理す
る画面表示管理部と、画面情報パラメータに対する要求
を入力する画面パラメータ要求入力部と、要求を基に画
面情報パラメータを作成する画面パラメータ作成部と、
被操作側端末に画面情報パラメータを送信する画面パラ
メータ送信部を有し、被操作側端末において、画面情報
パラメータを受信する画面パラメータ受信部と、画面表
示部から画面情報パラメータを基に画面情報を取得する
画面情報取得部を有する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、離れた地点に存在する
端末間で、一方の端末から他方の端末の画面または端末
上で動作するソフトウェアを共有して、端末または端末
上で動作するソフトウェアを操作する遠隔操作装置に関
するものである。
【0002】
【従来の技術】従来、離れた地点に存在する複数の端末
の間で、被操作側の端末の画面の全部または一部と同じ
内容を操作側の端末の画面に表示し、操作側で画面に対
して操作すると被操作側のソフトウェアを操作すること
が可能となる遠隔操作装置として、被操作側に表示され
た特定のアプリケーションソフトウェアによる結果のみ
を操作側に表示するものと、特定のアプリケーションソ
フトウェアに限定せず被操作側の画面全体を操作側に表
示するものがある。
【0003】前者による遠隔操作装置は、複数端末間で
共有機構を持たないアプリケーションソフトウェアを一
般にアプリケーション共有と呼ばれる技術を利用して操
作側と被操作側で共有して操作するか、遠隔会議システ
ムなどで利用されている共有黒板アプリケーションなど
のようにあらかじめ共有機構をアプリケーションソフト
ウェアに組み込むことにより実現される。この装置では
被操作側端末の画面に対する描画情報を操作側に伝送し
て被操作側で画面情報を作成する。
【0004】一方、後者による遠隔操作装置は被操作側
端末の画面に表示している画面情報を操作側に伝送する
ことにより実現される。
【0005】ここで画面情報とは実際に表示される画面
イメージのデータを指し、コンピュータでは通常ビデオ
RAMなどに存在するデータであり、描画情報とは一般
に描画リクエストや描画コマンドと呼ばれ、画面情報の
生成を担当する部分に対する画面生成の要求内容が記述
されており、例えばウィンドウが移動したので再描画す
る、画面に直線を描くなどの内容がある。
【0006】前者の構成は図24に示すブロック図にな
る。この構成では操作側または被操作側においてキーボ
ードやマウスなどの入力デバイスにより操作すると、そ
の結果得られた操作情報がタスク管理部2453からタ
スク処理部2454に渡され、アプリケーションソフト
ウェアなどのタスクの処理が行なわれる。タスク処理部
2454では処理の結果、画面を更新する必要がある場
合には描画情報をタスク管理部2453に出力する。タ
スク管理部2453では描画情報を画面表示部2455
に出力し、画面表示部2455では描画情報より画面情
報を作成してディスプレイなどの表示デバイスに表示す
る。
【0007】この時、タスク管理部2453は描画情報
を操作側に送信し、操作側の画面表示部2406により
描画情報から画面情報を生成して表示デバイスに表示す
る。これにより操作側端末241で被操作側端末242
の画面を見ることが可能となる。この構成をとるものは
例えば、米国HEWLETT PACKARD社のSharedXや米国Univer
sity of North Carllina at Chapel HillのXTVなどがあ
る。したがって被操作側端末の画面をすべて操作側端末
に表示するためには、被操作側端末で動作するアプリケ
ーションソフトウェアのうち画面に表示を行なうソフト
ウェアについてはすべてアプリケーション共有技術によ
り共有する必要がある。
【0008】後者の構成は図25に示すブロック図にな
る。この構成では前者の構成とは異なり、画面表示部2
555に表示された画面情報を画面取得部2556によ
り取得し、操作側に送信する。操作側では画面表示部2
506が受信した画面情報を表示する。画面情報のデー
タ量を削減するために前の画面情報との差分情報を送信
したり、スキャンコンバータでコンピュータの画面情報
をNTSC映像に変換するなどの工夫がされている。この構
成をとるものは例えば、特開平5−119955号公報
などがある。
【0009】上記はいずれも操作側端末と被操作側端末
で共有する画面の大きさが等倍であり、画面を完全に共
有する場合には操作側端末では被操作側端末の表示内容
をすべて保持することになる。
【0010】
【発明が解決しようとする課題】しかしながら上記の従
来の遠隔操作装置では、まず第1に画面全体に対して情
報量を等しく送ることになるため、操作する側が注目し
ていない領域までも同量の情報を送信することになり、
ネットワークや端末に対する負担が大きくなるという問
題を有していた。
【0011】第2にあらかじめ、決められた方法により
画面情報の送受信を行なうため、各端末やネットワーク
の資源の制限により、希望どおりの接続や品質を得るこ
とが困難になるという問題を有していた。
【0012】第3に被操作側でタスク処理に伴う描画情
報を管理して操作側に送信し、操作側で描画情報から画
面情報を生成して表示する方法では、画面全体を表示す
るときは、全てのアプリケーションソフトウェアなどの
タスクを同様の方法で表示する必要があるため、処理が
複雑になり、CPUの負荷が大きくなるという問題を有
していた。
【0013】第4に複数の端末と同時に接続する場合、
接続中の全端末の様子を見る、ある1端末の画面を表示
するなど、操作する端末の操作者の意向に沿うように表
示を切り替えていくことが困難であるという問題を有し
ていた。
【0014】第5に操作側端末で複数の被操作側端末の
画面情報を同時に表示して操作する場合、ある一つの被
操作側端末に対して行なった操作を他の被操作側端末に
対して行なう場合、他の各被操作側端末に対してそれぞ
れ同じ操作を行なわなければならないという問題を有し
ていた。
【0015】第6に上記の構成をもつ遠隔操作端末で
は、一つの操作側端末で複数の被操作側端末の画面を同
時に表示しながら、被操作側端末間でデータ送受信を伴
う処理、例えばマウスによる操作で画面上の1つの場所
から文字列を切り取って別の場所に書き込むカット&ペ
ースト操作や、アイコンをあるアプリケーションの表示
するウィンドウから別のアプリケーションの表示するウ
ィンドウに移動するドラッグ&ドロップ操作を行なうこ
とはできないという問題を有していた。
【0016】本発明の目的は、上記従来技術の課題を解
決するもので、操作する側の端末において、操作対象の
端末の画面に対し、任意の領域に対し各々の注目度に応
じた送信情報量の設定を可能とすること。
【0017】また各端末やネットワークの資源を管理
し、状況に応じて適切に送受信方法やその情報量を設定
することを可能とすること。
【0018】また画面情報と描画情報を状況に応じて組
み合わせることにより、操作者が必要とする箇所の表示
については、画面の品質を向上することが可能な遠隔操
作装置を提供すること。
【0019】また複数の端末の画面情報を必要に応じて
適切に表示出来、かつ、送受信する情報量やネットワー
クなどの資源を有効に利用することを可能とすること。
【0020】また複数の被操作側端末を同時に遠隔操作
する場合において、一つの被操作側端末に対して行なっ
た処理を、他の被操作側端末にも反映させることが可能
な遠隔操作装置を提供すること。
【0021】さらに複数の被操作側端末を同時に遠隔操
作する場合において、操作側において複数の被操作側端
末間でのデータ送受信を必要とする操作を容易に行なえ
る遠隔操作装置を提供することにある。
【0022】
【課題を解決するための手段】この目的を達成するため
に本発明の第1の手段では、操作側端末において、自端
末の表示を管理するとともに操作情報作成部に表示位置
情報を送信する画面表示管理部と、画面情報パラメータ
に対する要求を入力する画面パラメータ要求入力部と、
要求を基に画面情報パラメータを作成する画面パラメー
タ作成部と、被操作側端末に画面情報パラメータを送信
する画面パラメータ送信を有し、被操作側端末におい
て、画面情報パラメータを受信する画面パラメータ受信
部と、画面表示部から画面情報パラメータを基に画面情
報を取得する画面情報取得部を有する。
【0023】また本発明の第2の手段では、被操作側端
末において、自端末の利用可能な資源の情報を管理する
資源情報管理部と、資源情報を送信する資源情報送信部
を有し、操作側端末において、資源情報を受信する資源
情報受信部と、前記資源情報を各端末に応じて管理する
端末資源管理部を有すと共に、画面パラメータ作成部に
おいて画面情報パラメータを作成する際、端末資源管理
部の管理する各端末の資源情報を利用する。
【0024】また本発明の第3の手段では、操作側端末
と被操作側端末で画面情報と描画情報を送受信可能とす
るために、第1または第2の手段に加え、被操作側端末
に描画情報送信部を、操作側端末に描画情報受信部を有
する。
【0025】また本発明の第4の手段では、操作側端末
の画面表示管理部において、表示領域指定部により指定
の有った領域を表示領域として管理すると共に、画面パ
ラメータ作成部に対し画面情報パラメータの作成命令を
送信し、画面パラメータ作成部において画面情報パラメ
ータを作成する際、画面表示管理部からの表示領域の情
報を利用する。
【0026】また本発明の第5の手段では、操作対象で
ある被操作側端末に対する操作情報を記憶する操作情報
記憶部と、操作複製要求を入力する操作複製要求入力部
を有する。
【0027】さらに本発明の第6の手段では、操作側端
末でデータ管理部とデータ記憶部とデータ送受信部を、
被操作側端末にデータ記憶部とデータ送受信部を有す
る。
【0028】
【作用】本発明は第1に、操作する側の端末において、
操作対象の端末の画面に対し、任意の領域に対し各々の
注目度に応じた送信情報量の設定が可能となるため、操
作性を落とすことなくネットワークやCPUの負荷を最
小限に抑えることができる。
【0029】第2に各端末やネットワークの資源を管理
し、状況に応じて適切に送受信方法やその情報量を設定
することが可能となるため、その時点で利用できるネッ
トワークや各端末の資源を最も有効に活用することがで
き、それらの資源の許す範囲で、要求に合致した高品質
な画面表示を得ることができる。
【0030】第3に描画情報は操作側または被操作側の
操作の結果、更新が必要となった箇所に対してタスク処
理部より発せられるため、操作側または被操作側の操作
している部分は描画情報で詳細に表示を行ない、その他
の背景となる部分については圧縮率を上げて画質を低下
させた画面情報で表示することを可能とする。
【0031】第4に複数の端末の画面情報を必要に応じ
て適切に表示出来、かつ、送受信する情報量やネットワ
ークなどの資源を有効に利用することを可能とする。
【0032】第5に一つの被操作側端末に対して行なっ
た処理を、他の被操作側端末にも反映させることを可能
とする。
【0033】第6に操作側端末の操作により、異なる被
操作側端末間でのカット&ペーストやドラッグ&ドロッ
プなどのデータ操作が可能となる。
【0034】
【実施例】
実施例1) 以下、本発明の第1の実施例について、図面を参照しな
がら説明する。図1は本発明の第1の実施例における遠
隔操作装置のブロック図である。ここで、操作側端末と
は、遠隔操作を実行する端末であり、被操作側端末と
は、遠隔操作を実行される端末である。
【0035】図1の操作側端末011において、画面情
報受信部0104は被操作側端末012から送信された
画面情報を受信する。画面表示管理部0105では画面
情報受信部0104から被操作側端末012の画面情報
を受け取り、実際にディスプレイに表示を行なう画面表
示部0106へ送信すると共に、操作情報作成部010
2に表示位置情報を送信する。ここで表示位置情報と
は、画面情報の自端末における座標位置及び領域と、そ
れに相当する被操作側端末上での座標位置及び領域のこ
とである。
【0036】操作情報入力部0101では、マウスやキ
ーボードなどの入力デバイスからの入力信号を受信し、
操作情報に変換する。操作情報作成部0102では、操
作情報入力部0101から自端末に対する操作情報を受
け取り、画面表示管理部0105からの表示位置情報を
もとに座標変換を行なうことにより被操作側端末に対す
る操作情報を作成し操作情報送信部0103へ送信す
る。
【0037】操作情報送信部0103は操作情報作成部
0102で作成された操作情報を被操作側端末へ送信す
る。さらに操作側端末011においては、送信される画
面情報に対してその情報量や品質、領域、拡大率等を示
す画面情報パラメータを被操作側端末に送信するため、
以下のような構成を持つ。
【0038】まず画面パラメータ要求入力部0108で
は、端末利用者に画面情報パラメータを指示させるため
のインターフェースを用意し、利用者の要求を画面パラ
メータ作成部0109へ送信する。画面パラメータ作成
部0109では利用者の要求を画面情報パラメータとし
て作成する。作成された画面情報パラメータは画面パラ
メータ送信部0110によって被操作側端末へ送信され
る。
【0039】次に、被操作側端末012の構成について
説明する。操作情報受信部0152は操作側端末011
からの操作情報を受信する。タスク管理部0153で
は、操作情報受信部0152から操作側端末の操作情報
を受け取り、自端末の操作情報入力部0151からの操
作情報と同様に、該当するタスクへ送信すると共に、タ
スク処理部0154からの画面出力命令を画面表示部0
155へ送信する。
【0040】タスク処理部0154はタスク管理部01
53の管理のもと実際にタスクを実行する。また、画面
パラメータ受信部0158は操作側端末から画面情報パ
ラメータを受け取る。画面情報取得部0156では、画
面パラメータ受信部0158から画面情報パラメータを
入力し、画面表示部0155から画面情報パラメータを
基に画面情報を取得する。取得した画面情報は画面情報
送信部0157より操作側端末011へ送られる。
【0041】以上のように構成された本遠隔操作装置に
ついて、以下にその動作を説明する。なお、本実施例の
以下の説明では、遠隔操作装置として、操作側端末1台
と被操作側端末1台で構成されているとする。さらに、
画面情報として、静止画データを、画面情報パラメータ
としては、領域、送信速度(コマ数)、色数を採用す
る。また、以下の説明では、特に、画面情報パラメータ
の送受信と画面情報の送受信について重点的に説明す
る。
【0042】図2は、本実施例における操作側及び被操
作側端末の1画面例である。この時点では、被操作側端
末022は10秒に1コマの割合で全画面イメージをモ
ノクロで送信しており、操作側端末021で、送信され
てくる画面イメージを画面全体に表示している。
【0043】まずこの状況での遠隔操作の動作を簡単に
説明する。操作側端末021では表示中の被操作側端末
022の画面イメージに対し、自端末への操作を行なう
ことと同じ感覚で、マウスやキーボードを操作する。操
作された情報は操作情報作成部0102において被操作
側端末022の座標位置に変換され、操作情報送信部0
103を通り、被操作側端末022の操作情報受信部0
152、タスク管理部0153をへて、被操作側端末0
22で実際に動いているタスクへと送信される。
【0044】タスクは自端末からの操作情報と全く同じ
ように操作側端末021からの操作情報を処理し、画面
表示部0155を通し実行結果を出力する。画面情報取
得部0156では、現在の画面情報パラメータ、すなわ
ち、10秒1コマの静止画、全画面、モノクロという条
件で画面表示部0155から画面イメージを取得する。
得られた画面イメージは画面情報送信部0157を通
し、操作側端末021の画面情報受信部0104をへて
画面表示管理部0105へ送信される。
【0045】画面表示管理部0105は画面表示部01
06へ受信した被操作側端末022の画面イメージの表
示要求を出す。以上のような動作により、操作側端末0
21で行なわれた操作が、被操作側端末022の該当す
るタスクへ送信され、その実行結果を画面イメージとし
て操作側端末021で見ることが可能となる。
【0046】次に、操作側端末021の操作者が、図2
の領域0201に関して、特に注目し高い応答性を期待
するものとする。その場合、操作者は、画面パラメータ
要求入力部0108に対し、領域、コマ数、色数の各パ
ラメータに対し、例えば図3の様に入力を行なう。
【0047】ここで図3は本実施例における画面パラメ
ータ要求入力部の1例であり、この結果、領域(10
0、100)から(300、300)、1秒5コマ、フ
ルカラーという画面情報パラメータが同様にして被操作
側端末022の画面情報取得部0156に送信される。
さらに画面パラメータ作成部では、画面表示管理部に図
4に示すような表示位置情報を送信する。被操作側端末
022の画面情報取得部0156では、図5のように2
つの画面情報パラメータを保持し、各画面情報パラメー
タの指示どおりに画面イメージを取得し送信する。
【0048】ここで、図5は本実施例の画面情報取得部
における、画面情報パラメータの保持内容の1例であ
る。このようにして、2通りの画面イメージがそれぞれ
の画面情報パラメータにしたがって操作側端末021に
表示される。その結果操作側端末021では、画面全体
に対してはある程度の動きがわかるレベルで、また、注
目している領域に関しては、さらに詳細に閲覧あるいは
操作することが可能となる。
【0049】以上のように、本実施例における遠隔操作
装置によれば、操作者の注目の度合いに応じ動的に伝送
量や画質などのパラメータを切り替えることが可能とな
り、必要な部分の情報を落とすことなくネットワークや
端末などの資源を有効に使用できる。 (実施例2)以下、本発明の第2の発明による実施例に
ついて、図面を参照しながら説明する。図6は本発明の
第2の発明による実施例における遠隔操作装置のブロッ
ク図である。図6において、図1の遠隔操作装置と異な
るのは、被操作側端末052において、自端末から利用
可能な伝送路の種類、容量、動画ボード等各種ネットワ
ーク、端末資源の情報(資源情報)を保持する資源情報
管理部0560及び、前記資源情報管理部0560にお
いて保持される情報を操作側端末051に送信する資源
情報送信部0559を備え、操作側端末051におい
て、各被操作側端末の資源情報送信部0559から送信
される資源情報を受信する資源情報受信部0511と、
前記資源情報受信部0511からの資源情報を受信し端
末毎に管理すると共に、自端末の資源情報をも管理する
端末資源管理部0512を備え、さらに画面パラメータ
作成部0509において、画面パラメータ要求入力部0
508より転送される操作者からの要求に加えて、前記
端末資源管理部0512で管理する資源情報を用いて、
画面情報パラメータを作成する点である。
【0050】以上のように構成された本遠隔操作装置に
ついて、以下にその動作を説明する。なお、本実施例の
以下の説明では、遠隔操作装置として、操作側端末1台
と被操作側端末1台で構成されているとする。
【0051】被操作側端末052は、資源情報管理部0
560において、操作側端末051との接続に用いるこ
とのできる自己の伝送路の種類、伝送容量等ネットワー
ク資源の情報や、そのネットワークに対応して自端末に
装備されているハードウェア資源などを動的に管理、保
持し、それらの情報を資源情報送信部0559において
任意のタイミングで操作側端末051に送信する。
【0052】例えば被操作側端末052が10BASE
−T、ATM等を用いたデジタルLAN及び、同軸ケー
ブル等を用いたアナログの映像情報回線を介して操作側
端末051に接続されている場合、資源情報管理部05
60はこれらの資源の中で現在利用できるものの種類、
伝送容量等の情報および、動画圧縮ボード、コーデック
などのハードウェア資源の情報を保持する。
【0053】資源情報送信部0559はこれらの情報
を、操作側端末051の資源情報受信部0511に対
し、例えば変更があったタイミングで送信する。操作側
端末051では資源情報受信部0511により資源情報
を受信し、受信した被操作側端末0559の資源情報を
端末資源管理部0512において一元的に管理する。
【0054】操作側端末051において、画面パラメー
タ要求入力部0508により要求が入力されると、画面
パラメータ作成部0509において要求を受け取り、端
末資源管理部0512から、該当する被操作側端末及び
自端末の資源情報を受信する。さらに画面パラメータ作
成部0509では、操作者の要求、該当する被操作側端
末の資源情報、および、自端末の資源情報から、最終的
に被操作側端末052が転送する画面情報パラメータを
決定する。
【0055】図7は、本実施例における操作側及び被操
作側端末の1画面例である。この時点では、被操作側端
末052は10秒に1コマの割合で全画面イメージをモ
ノクロで送信しており、操作側端末051で、送信され
てくる画面イメージを画面全体に表示している。またこ
の時画面イメージを送信するネットワークとして10B
ASE−Tが用いられているとする。
【0056】この時、図7の特定の領域701につい
て、操作者がより詳しくこの領域を見たいと思った場
合、操作者は画面パラメータ要求入力部において、その
旨を入力する。図8は本実施例における画面パラメータ
要求入力部の1入力例である。画面パラメータ作成部0
509は、画面パラメータ要求入力部0508から要求
を入力し、端末資源管理部0512から、該当する被操
作側端末および自端末の現在利用可能な資源の情報を受
けとる。
【0057】図9は本実施例における端末資源管理部の
管理内容の1例である。画面パラメータ作成部では図8
と図9の内容から、要求を満たす最適の伝送方法やその
情報量等を決定する。
【0058】図10は画面パラメータ作成部における画
面情報パラメータ作成の1アルゴリズムである。まず、
被操作側端末と自端末の資源情報から、お互いが共通で
使用できるネットワークや伝送方法などを絞り込み(0
851、0852、0853)、その時点で複数のパラ
メータが残った場合は(0854)転送速度により順位
付けを行なう(0855)。この後さらに注目度を用い
て(0856)、利用する端末のネットワーク資源やハ
ードウェア資源、伝送量などを決定する(0857)。
【0059】このようにして、本実施例では、図11の
ように、領域(100、100)から(400、50
0)、伝送路同軸ケーブルのチャネル20という画面情
報パラメータが作成される。
【0060】このようにして作成された画面情報パラメ
ータは、画面パラメータ作成部0509により、画面パ
ラメータ送信部0510を通して、該当する被操作側端
末052へ送られる。以下実施例1と同様に、被操作側
端末052の画面情報が操作側端末051に送信され、
操作側端末051のディスプレイ上に表示される。この
結果、操作側端末051では、画面全体が10秒に1回
の割合で更新されると共に、領域601に関しては、ア
ナログ映像の品質で表示されることになる。
【0061】次に、操作者がさらに別の領域(図7の領
域702)について、同じく詳しく見たいと思った場
合、同様の処理をして画面パラメータ作成部0509に
おいて画面情報パラメータを決定する。この時、同軸ケ
ーブルのチャネル20はすでに使用されているため、違
った画面情報パラメータが選択される。
【0062】例えばこの状況では、操作側端末051及
び被操作側端末052の両方で動画圧縮ボードAが利用
可能であることから、領域(200、600)から(7
00、800)、伝送路10BASEーT、動画圧縮ボ
ードAといった画面情報パラメータが作成される。以下
同様に画面情報パラメータが被操作側端末052へ送信
され、その画面情報パラメータを基に該当する領域の画
面情報が操作側端末051に送信されディスプレイに表
示される。この結果、操作側端末051では、画面全体
が10秒に1回の割合で更新されると共に、領域701
に関しては、アナログ映像の品質で表示され、さらに領
域702に関しては、動画圧縮ボードAを用いたデジタ
ル動画像の品質で表示されることになる。
【0063】以上のように、本発明の第2の実施例によ
れば、その時点で利用できるネットワークや各端末の資
源を最も有効に活用することができ、それらの資源の許
す範囲で、要求に合致した高品質な画面表示を得ること
ができる。 (実施例3)以下、本発明の第3の発明による実施例に
ついて、図面を参照しながら説明する。図12は本発明
の第3の発明による実施例における遠隔操作装置のブロ
ック図である。図12において、図1の遠隔操作装置と
異なるのは、被操作側端末172においてタスク管理部
1753より描画情報を入力し操作側端末へ送信する描
画情報送信部1759が付加された点と、操作側端末1
71において、被操作側端末から描画情報を受信し画面
表示管理部へ送信する描画情報受信部1711が付加さ
れた点、さらには描画情報を必要とする場合には画面情
報パラメータとして、画面パラメータ要求入力部で入力
された描画情報要求が送信され、被操作側端末の画面パ
ラメータ受信部1758において受信した描画情報要求
をタスク管理部1753へ送信し、タスク管理部175
3において、対象となるタスクを検出しそのタスクから
の描画情報を描画情報受信部1757へ送信する点であ
る。
【0064】以上のように構成された本遠隔操作装置に
ついて、以下にその動作を説明する。なお、基本的な動
作は実施例1と同様であるので、ここでは画面パラメー
タ入力要求部に描画情報要求が入力されてから、実際に
描画情報が操作側端末に送信されてくるまでを中心に説
明を行なう。また、本実施例では実施例1同様、すでに
被操作側端末の画面情報が操作側端末で表示されている
ものとする。
【0065】画面パラメータ入力要求部1708に画面
情報パラメータとして描画情報要求が入力されると、前
記要求は画面パラメータ作成部1709、画面パラメー
タ送信部1710を通して被操作側端末の画面パラメー
タ受信部1758へ送信される。ここで描画情報要求と
は、あるタスクに対して描画情報により表示するよう要
求するもので、そのために必要な情報として本実施例で
は表示画面に対する位置座標を送信するものとする(も
ちろん、被操作側端末においてタスクが特定できる情報
であればどんなものでもよい)。
【0066】被操作側端末ではタスク管理部1753に
おいて画面パラメータ受信部1758から描画情報要求
を受け取り、該当するタスクを検出する。本実施例では
タスクを特定する情報として位置座標が送信されてお
り、タスク管理部1753において、表示画面がその位
置座標上に存在するタスクを検出するものとする。
【0067】タスク管理部1753ではそのようにして
検出されたタスクに対し、そのタスクが発行した描画情
報を画面表示部1755へ送信すると共に、描画情報送
信部1759へも送信する。描画情報送信部1759は
受信した描画情報を操作側端末へ送信する。操作側端末
では、描画情報受信部1711において被操作側端末が
送信した描画情報を受け取り画面表示管理部1705へ
送信する。
【0068】画面表示管理部1705では入力した描画
情報に対し座標位置などの変更が必要な場合には変更を
施し画面表示部へ送信する。この結果操作側端末から指
定したタスクに関しては描画情報を用いて表示が行なわ
れることになる。
【0069】以上のように、本発明の第3の実施例によ
れば、操作側端末は自分の着目しているタスクに関して
描画情報による表示を行なうことが可能となり、高い操
作性や応答性を得ることができ、画面情報による表示と
組み合わせて使用することにより、処理を簡単化できる
とともに、メモリーやネットワークの容量をより効率的
に使用することが出来る。 (実施例4)以下、本発明の第4の発明による実施例に
ついて、図面を参照しながら説明する。図13は本発明
の第4の発明による実施例における遠隔操作装置のブロ
ック図である。実施例1と異なるのは、操作側端末にお
いて、画面表示管理部で各被操作側端末の画面領域を後
述する仮想空間の領域で管理し、前記仮想空間に対し実
際にディスプレイに表示する領域を指定する表示領域指
定部を新たに備え、画面パラメータ作成部において、画
面情報パラメータを作成する際、前記画面表示管理部で
管理する表示領域の情報を利用する点である。
【0070】以上のように構成された本遠隔操作装置に
ついて、以下にその動作を説明する。なお、本実施例の
以下の説明では、遠隔操作装置として、操作側端末1台
と被操作側端末4台(被操作側端末102、被操作側端
末103、被操作側端末104、被操作側端末105)
で構成されているとする。また、以降の説明は、実施例
1の動作と異なる部分、即ち、操作側端末における表示
領域指定部、画面表示管理部および画面パラメータ作成
部の振る舞いを中心に行なう。
【0071】図14は本実施例における画面表示管理部
の仮想空間における各端末の画面領域の1配置例であ
る。ここで仮想空間とは、各端末の画面情報を配置する
ための仮想的な領域のことであり、表示画面よりも大き
い領域を持っている。ここでは、仮想空間上に4つの被
操作側端末の画面領域が互いに隣接して左上隅から正方
格子状に配置されている。
【0072】図14において仮想空間上に各端末の画像
が表示されているが、これは各被操作側端末の画面との
対応を模擬的に現したものであり、実際には画面表示管
理部では各被操作側端末の画面領域を仮想空間上の単な
る座標位置としてのみ管理している。また各被操作側端
末の画面領域の配置方法は本実施例では互いに隣接する
よう正方格子状に並べてあるが、もちろんどのような方
法で配置しようとも構わない。
【0073】今、操作側端末の操作者が被操作側端末1
03の画面を表示したいと考えたとする。この時、操作
者は、画面領域指定部1007において図14の領域1
101に相当する領域を入力する。もちろん、操作者
が、仮想空間の領域に対し表示を希望する領域を指定す
ることが可能なかぎり、画面領域指定部1007が提供
するインターフェースの内容は問題とはならない。
【0074】画面表示管理部1005では、表示領域指
定部1007からの表示領域の要求を受け、仮想空間上
での座標位置として表示領域を記憶する。更に画面表示
管理部は、画面パラメータ作成部1009に対し、表示
領域に対応する画面情報パラメータの作成を要求する。
ここでは、被操作側端末103の全画面に対する画面情
報の送信という画面情報パラメータが作成されることに
なる。
【0075】作成された画面情報パラメータは画面パラ
メータ送信部1010を通して被操作側端末103へ送
信される。以下、実施例1と同様にして、被操作側端末
103の画面が操作側端末101に表示される(図1
5)。
【0076】また、実施例1同様画面表示管理部100
5は操作情報作成部1002に対して表示位置情報を送
信するが、実施例1の表示位置情報の内容に、各領域に
対し対応する被操作側端末の情報が付加される。このよ
うにすることで、操作者が操作情報入力部より行なった
操作は、操作情報作成部により該当する端末へ送信する
操作情報として作成され、その結果該当する被操作側端
末のタスクを操作側端末から操作することが可能とな
る。
【0077】この状態で、操作者が、4台の被操作側端
末の画面情報を同時に表示しようとした場合について説
明する。この場合、前述の動作と同様、表示領域指定部
1007において、図14の領域1102のように範囲
が指定され、画面表示管理部1005において表示領域
として記憶される。次に画面表示管理部1005では、
自端末の画面の大きさから、各被操作側端末の自画面上
での表示領域及び縮尺を計算する。
【0078】本実施例の場合、4台の被操作側端末の画
面情報は図14のように正方格子状に表示されているた
め、1台分の表示から4台全ての表示に切り替えるとき
には、各被操作側端末の表示領域はそれぞれの全画面領
域となり、それらを操作側端末の1つの画面で表示する
ため縮尺は全て1/4になる。その後画面表示管理部1
005は画面パラメータ作成部1009に対し、例えば
図16のような形で、画面情報パラメータ作成命令を送
信する。画面パラメータ作成部1009は画面表示管理
部1005から画面情報パラメータ作成命令を受信し、
該当する各端末に対しそれぞれ画面情報パラメータを作
成し画面パラメータ送信部へ送信する。
【0079】以下同様に各被操作側端末から画面情報パ
ラメータを基に画面情報が送信され、操作側端末101
に表示される。この結果4台の被操作側端末の画面は1
/4に縮小されて、操作側端末101に表示されること
になる(図1)。もちろん、前述の通り、画面表示管理
部1005により操作情報作成部1002へ表示位置情
報を送信することにより各端末で実行中のタスクを操作
できることは言うまでもない。
【0080】次に操作者が図14の領域1103のよう
に表示領域を指定した場合、画面表示管理部1005は
同じように各被操作側端末の表示領域および縮尺を計算
する。この結果、例えば図18のような形で、画面パラ
メータ作成部に画面情報パラメータ作成の命令を送信す
る。画面パラメータ作成部1009では、命令に従い画
面情報パラメータを作成し各被操作側端末へ送信する。
以下実施例1と同様に各被操作側端末から画面情報パラ
メータを基に画面情報が送信され、操作側端末101に
表示される。この結果操作側端末101の表示画面は図
19のようになる。
【0081】また、この時表示されている領域以外の画
面情報は当然送信されていないため、ネットワークや端
末の負荷が軽減されている。
【0082】以上のように本発明の第4の実施例によれ
ば、複数の被操作側端末が接続されている場合でも、操
作者が表示を希望する領域のみを適当な大きさで表示す
ることが出きるとともに、指定された領域のみの画面情
報を取得するため、ネットワークや端末の負荷を最小限
におさえることが可能となる。 (実施例5)以下、本発明の第5の発明による実施例に
ついて、図面を参照しながら説明する。本実施例では教
師が遠隔地にいる生徒に指導を行なうための遠隔教育シ
ステムとして実施している。操作側は教師であり、被操
作側は生徒である。教師が端末で課題を出し、遠隔地に
いる生徒が端末上でその課題を解答し、教師は各生徒の
解答状況を操作側の端末で見ながら適宜、指導を行な
う。
【0083】図20は本発明の第5の発明による実施例
における遠隔操作装置のブロック図である。実施例4と
異なるのは、教師端末191において、一つの生徒端末
に対する操作を他の生徒端末に実行する要求を入力する
操作複製要求入力部1909と、操作情報を記憶する操
作情報記憶部1908が新たに付加された点と、操作情
報作成部1902において、操作情報記憶部1908に
操作情報を記憶すると共に、操作複製要求入力部190
9から操作複製要求を入力し、要求があったときには操
作情報記憶部1908から記憶している操作情報を取り
出し、生徒側の各端末の該当する位置情報に変更して操
作情報を複製し、各生徒端末に送信する点である。
【0084】以上のように構成された本遠隔操作装置に
ついて、以下にその動作を説明する。なお、本実施例の
以下の説明では、遠隔操作装置として、教師端末1台と
生徒端末9台(生徒端末192、生徒端末193、生徒
端末194、生徒端末195、生徒端末196、生徒端
末197、生徒端末198、生徒端末199、生徒端末
200)で構成されているとする。また、以降の説明
は、実施例4の動作と異なる部分、即ち、教師端末にお
ける操作複製要求入力部、操作情報作成部、操作情報記
憶部の振る舞いを中心に行なう。
【0085】今、教師端末191の画面では9台の生徒
端末の画面がそれぞれ1/9に縮小され画面左上隅から
正方格子状に配置されているとする(図21)。また、
操作するタスクは各生徒端末で同じものが動いており、
その表示位置も全く同じである。この状況で教師が1人
の生徒に対する操作を他の生徒にも行なう場合を説明す
る。
【0086】例えば一人の生徒に対して注意事項や課題
の正解などを記入したとき、他の生徒に対しても同様の
処理を行ないたいときである。まず操作複製要求入力部
1909に対象となる生徒端末193〜200を指定す
る。操作複製要求入力部1909では操作情報作成部1
902に操作複製要求を通知する。操作情報作成部19
02では操作複製要求に含まれる端末番号193〜20
0を操作情報記憶部1908に記憶し、以後、上記の動
作により1つの生徒端末192に対して操作を行なうと
操作情報が生徒端末192に送信されると同時に操作情
報記憶部1908に記憶される。
【0087】その後操作情報作成部1902では操作情
報記憶部1908より記憶している操作情報と他に送信
する被操作端末番号を入力し、入力した操作情報の位置
情報を該当する端末の位置情報に変換し、送信先を入力
した被操作端末番号に変換し、操作情報送信部1903
に送信する。
【0088】操作情報送信部1903は指定された生徒
端末に操作情報を送信し、以後上記と同様の動作により
生徒端末193〜200に操作が反映される。
【0089】なお、本実施例ではあらかじめ各生徒端末
のタスクの表示位置が全く同じであるという前提を用い
ているが、異なる位置に配置されていても、本実施例の
構成を用い全生徒端末の表示位置を同じにすることは容
易である。また、配置位置が異なったままにしておいて
も、教師端末側において、各生徒端末毎に送信先(位
置)を指定できるようにすることで、簡単に同様の操作
が実現できる。また、本実施例では教師端末の画面上
に、全生徒端末の画面を表示しているが、もちろん本実
施例における遠隔装置は、教師端末の表示状態によらな
い。すなわち、生徒端末192の画面だけを表示し操作
している場合でも、他の生徒端末(193〜200)に
対してその操作情報を送信することが出来る。
【0090】本発明では操作複製要求入力部1909に
より操作情報の複製を要求し、操作情報作成部1902
で実際には操作していない他の生徒端末にも操作情報記
憶部1908に記憶された操作情報を送信するため、あ
る特定の生徒端末に対して行なった操作を他の生徒端末
に対しても反映させることが可能となる。これにより図
20に示すように、教師は特定の生徒に対して課題のヒ
ントや正解201を提示した場合に(図21(a))他の
生徒に対しても同じヒントや正解202を再度操作しな
くても提供することが可能となる。(図21(b)) (実施例6)以下、本発明の第6の発明による実施例に
ついて、図面を参照しながら説明する。本実施例は実施
例5同様、教師が遠隔地にいる生徒に指導を行なうため
の遠隔教育システムとして実施している。
【0091】図22は本発明の第6の発明による実施例
における遠隔操作装置のブロック図である。実施例4と
異なるのは、教師端末211において、生徒端末と、各
タスクにより表示されている文字列などのデータの送受
信を行なうデータ送受信部2111と、前記データの管
理を行なうデータ管理部2109と、データの記憶を行
なうデータ一時記憶部2110を新たに備えた点と、各
生徒端末212〜220において、タスク管理部からデ
ータを受け取り記憶するデータ記憶部2159、217
9と教師端末との間でデータの送受信を行なうデータ送
受信部2158、2178を備えた点である。
【0092】以上のように構成された本遠隔操作装置に
ついて、以下にその動作を説明する。なお、本実施例の
以下の説明では、実施例5と同様、遠隔操作装置とし
て、教師端末1台と生徒端末9台(生徒端末212、生
徒端末213、生徒端末214、生徒端末215、生徒
端末216、生徒端末217、生徒端末218、生徒端
末219、生徒端末220)で構成されているとする。
また、以降の説明は、実施例4の動作と異なる部分、即
ち、教師端末において、生徒端末間でどのようにして、
コピーやペーストなどのデータ操作を行なうのかを中心
に行なう。
【0093】今、教師端末211の画面では9台の生徒
端末の画面がそれぞれ1/9に縮小され画面左上隅から
正方格子状に配置されているとする(図23)。この
時、教師が生徒端末212の生徒の描画内容をコピーし
て生徒端末216の生徒に表示しようとすることを考え
る。
【0094】一般に1つの端末内での文字情報のコピー
&ペースト処理は、マウスやキーボードの操作により行
なわれ、あるタスクからコピー要求があると、タスク管
理部によりデータ記憶部へあるタスクのデータが記憶さ
れ、別のタスクからのペースト要求時にデータ記憶部の
データをそのタスクへ送信することで実現される。
【0095】教師は生徒端末212の画面が表示されて
いる領域上で、生徒端末212のコピー操作に相当する
操作を行なう。この時前述のとおりデータ記憶部215
9へコピーしたデータが記憶されるが、それと共に生徒
端末212のタスク管理部2153はデータ送受信部2
158にコピーされたデータを送信する。教師端末21
1ではデータ送受信部2111でデータを受け取り、デ
ータ一時記憶部2110へ記憶する。
【0096】次に教師が生徒端末216に対し今コピー
したデータをペーストしようとするときを考える。図2
3のように各画面が表示されている場合、生徒端末21
6に相当する領域へマウスを移動し生徒端末216にお
けるペースト操作を行なうために、生徒端末213に該
当する領域を横切るように移動させたとする。
【0097】まず、生徒端末212に該当する領域から
生徒端末213に該当する領域へマウスが移動すると、
操作情報作成部から、データ管理部へ領域の変更を連絡
する。データ管理部では新たに生徒端末213に該当す
る領域へマウスが移動したことを知ると、データ管理部
2109においてデータ一時記憶部2110から記憶し
ているデータを読み込みデータ送受信部2111へ送信
する。データ送受信部2111では生徒端末213に対
し前記データを送信する。送信されたデータは生徒端末
213のデータ記憶部へ記憶される。
【0098】次に、教師はマウスをそのまま動かし、生
徒端末216に該当する領域へ進入する。このときも同
様にして、マウスが領域に入ったタイミングでデータが
送信される。この状況で教師が生徒端末216に対しペ
ースト操作を行なうと、その操作情報は生徒端末216
に送られ、タスク管理部2173において、データ記憶
部2179のデータを読みだし該当するタスクへ送信す
る。
【0099】今この段階では、データ記憶部2179に
は、生徒端末212に対して行なったコピー操作により
得られたデータが入っているため、生徒端末212のデ
ータがコピーされ生徒端末216へペーストされたこと
になる。
【0100】なお本操作ではコピー&ペースト操作につ
いて説明したが、カット&ペースト操作やドラッグ&ド
ロップ操作など、操作情報が基になるデータ処理ならば
何についても同様であることはいうまでもない。
【0101】以上のように本発明の第6の実施例によれ
ば、複数の端末の画面を一つの端末に表示し操作する遠
隔操作装置において、遠隔の端末間でのカット&ペース
トなどのデータの受け渡しを行なうことが可能となる。
【0102】
【発明の効果】以上のように本発明の第1の手段による
遠隔操作装置では、操作する側の端末において、操作対
象の端末の画面の任意の領域に対し各々の注目度に応じ
た送信情報量の設定が可能となり、その効果は非常に大
きい。
【0103】また本発明の第2の手段による遠隔操作装
置では、各端末やネットワークの資源を管理し、状況に
応じて適切に送受信方法やその情報量を設定することが
可能となり、その効果は非常に大きい。
【0104】また本発明の第3の手段による遠隔操作装
置では、被操作者側の画面の中の一部を画面情報とし、
他を描画情報として操作側端末で受信し表示することが
可能となる。操作者が詳細を見る必要とする箇所の表示
については、描画情報により画面の品質を向上し、画面
中の他の部分については粗い画面情報で表示することも
可能となり、処理の複雑さやCPUの負荷の面で、その
効果は非常に大きい。
【0105】また本発明の第4の手段による遠隔操作装
置では、複数の端末の画面情報を必要に応じて適切に表
示出来、かつ、送受信する情報量やネットワークなどの
資源を有効に利用することが可能となり、その効果は非
常に大きい。
【0106】また本発明の第5の手段による遠隔操作装
置では、ある被操作側端末に対する操作情報を複製し、
他の被操作側端末に対する操作情報を生成することによ
り、複数の被操作側端末を同時に遠隔操作する場合にお
いて、一つの被操作側端末に対して行なった処理を、他
の被操作側端末にも反映させることが可能となる。これ
により操作側において複数の被操作側端末に対して同じ
操作を行なう場合に、そのうちの一つの被操作側端末に
対して操作すれば他の被操作側端末にも同じ操作が反映
されることとなり、複数の被操作側端末を同時に遠隔操
作する場合の操作性が向上し、その効果は非常に大き
い。
【0107】また本発明の第6の手段による遠隔操作装
置では、一つの操作側端末で複数の被操作側端末の画面
を同時に表示しながら、被操作側端末間でデータ送受信
を伴うカット&ペースト操作やドラッグ&ドロップ操作
などの処理を該当する端末の操作方法により行なうこと
が可能となる。これにより複数の被操作側端末を同時に
遠隔操作する場合の操作性が飛躍的に向上し、その効果
は非常に大きい。
【図面の簡単な説明】
【図1】本発明の第1の実施例における遠隔操作装置の
ブロック図
【図2】本発明の第1の実施例における遠隔操作装置の
画面表示例図
【図3】本発明の第1の実施例における画面パラメータ
要求入力部の表示例図
【図4】本発明の第1の実施例における表示位置情報の
1例図
【図5】本発明の第1の実施例における画面情報取得部
の保持データ例図
【図6】本発明の第2の実施例における遠隔操作装置の
ブロック図
【図7】本発明の第2の実施例における遠隔操作装置の
画面表示例図
【図8】本発明の第2の実施例における画面パラメータ
要求入力部の1入力例図
【図9】本発明の第2の実施例における端末資源管理部
の管理内容の1例図
【図10】本発明の第2の実施例における画面情報パラ
メータ作成の流れ図
【図11】本発明の第2の実施例における遠隔操作装置
の画面パラメータ例図
【図12】本発明の第3の実施例における遠隔操作装置
の構成を示すブロック図
【図13】本発明の第4の実施例における遠隔操作装置
のブロック図
【図14】本発明の第4の実施例における画面表示管理
部の各画面情報の一配置例図
【図15】本発明の第4の実施例における遠隔操作装置
の画面表示図
【図16】本発明の第4の実施例における画面情報パラ
メータ作成命令の第1の概念図
【図17】本発明の第4の実施例における遠隔操作装置
の第2の画面表示図
【図18】本発明の第4の実施例における画面情報パラ
メータ作成命令の第2の概念図
【図19】本発明の第4の実施例における遠隔操作装置
の第3の画面表示図
【図20】本発明の第5の実施例における遠隔教育シス
テムの構成を示すブロック図
【図21】本発明の第5の実施例における教師端末19
1の画面表示内容図
【図22】本発明の第6の実施例における遠隔教育シス
テムの構成を示すブロック図
【図23】本発明の第6の実施例における教師端末21
1の画面表示内容図
【図24】従来の遠隔操作装置の構成を示す第1のブロ
ック図
【図25】従来の遠隔操作装置の構成を示す第2のブロ
ック図
【符号の説明】
0101 操作情報入力部 0102 操作情報作成部 0103 操作情報送信部 0104 画面情報受信部 0105 画面表示管理部 0106 画面表示部 0108 画面パラメータ要求入力部 0109 画面パラメータ作成部 0110 画面パラメータ送信部 0151 操作情報入力部 0152 操作情報受信部 0153 タスク管理部 0154 タスク処理部 0155 画面表示部 0156 画面情報取得部 0157 画面情報送信部 0158 画面パラメータ受信部 0511 資源情報受信部 0512 端末資源管理部 0559 資源情報送信部 0560 資源情報管理部
───────────────────────────────────────────────────── フロントページの続き (72)発明者 引田 啓之 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 (72)発明者 金子 惠季 大阪府門真市大字門真1006番地 松下電器 産業株式会社内

Claims (6)

    【特許請求の範囲】
  1. 【請求項1】 ネットワークを介して接続された被操作
    側端末からの画面情報を受信する画面情報受信部と、前
    記画面情報受信部が受信した画面情報の自端末のディス
    プレイ上への表示を管理する画面表示管理部と、前記画
    面表示管理部の命令により自端末のディスプレイに表示
    を行なう画面表示部と、画面情報パラメータに対する要
    求を入力する画面パラメータ要求入力部と、要求に基づ
    き各端末へ送信する画面情報パラメータを作成すると共
    に前記画面表示管理部へ当該する画面情報の表示位置情
    報を送信する画面パラメータ作成部と、前記画面情報パ
    ラメータを被操作側端末へ送信する画面パラメータ送信
    部と、操作情報の入力を受け付ける操作情報入力部と、
    前記操作情報入力部からの入力と共に前記画面表示管理
    部から表示位置情報を受け取り、被操作側端末へ送信す
    るための操作情報を作成する操作情報作成部と、前記操
    作情報を被操作側端末へ送信する操作情報送信部を備え
    る操作側端末と、 ネットワークを介して接続された前記被操作側端末が、
    前記操作側端末からの操作情報を受信する操作情報受信
    部と、前記操作情報受信部と自端末の操作情報入力部か
    らの操作情報を入力し該当するタスクへ送信するととも
    に、タスクからの表示命令を画面表示部へ送信するタス
    ク管理部と、タスクを実行するタスク処理部と、自端末
    のディスプレイへ描画を行なう画面表示部と、前記操作
    側端末の画面パラメータ送信部からの画面情報パラメー
    タを受信する画面パラメータ受信部と、前記画面情報パ
    ラメータに従って画面表示部より画面情報を取得する画
    面情報取得部と、前記画面情報取得部より画面情報を受
    信し前記操作側端末に送信する画面情報送信部を備える
    ことを特徴とする遠隔操作装置。
  2. 【請求項2】 被操作側端末において、自端末の利用可
    能な資源の情報を管理する資源情報管理部と、前記資源
    情報管理部で管理する資源情報を操作側端末に送信する
    資源情報送信部を備え、 操作側端末では、被操作側端末の資源情報送信部から送
    信される資源情報を受信する資源情報受信部と、前記資
    源情報受信部からの資源情報を管理する端末資源管理部
    を備えると共に、画面パラメータ作成部において画面パ
    ラメータ要求入力部からの入力に加え前記端末資源管理
    部で管理する資源情報をもとに画面情報パラメータを作
    成することを特徴とする請求項1記載の遠隔操作装置。
  3. 【請求項3】 操作側端末において、被操作側より描画
    情報を受信して前記画面表示管理部に受信した描画情報
    を出力する描画情報受信部を備え、被操作側端末におい
    て前記タスク管理部より描画情報を入力して操作側に送
    信する描画情報送信部を備え、操作側端末の画面パラメ
    ータ入力要求部より画面情報パラメータとして描画情報
    要求が入力された場合、被操作側端末の画面パラメータ
    受信部からタスク管理部へ前記画面情報パラメータが送
    信され、前記タスク管理部において、該当するタスクを
    検出しそのタスクの描画情報を画面表示部へ送信すると
    共に描画情報送信部へも送信することを特徴とする請求
    項1または請求項2記載の遠隔操作装置。
  4. 【請求項4】 1台の操作側端末と1台以上の被操作側
    端末をネットワークを介して接続した請求項1記載の遠
    隔操作装置において、操作側端末の画面表示管理部にお
    いて、各被操作側端末の画面領域を仮想空間上の領域で
    管理し、表示領域指定部において前記仮想空間領域のう
    ち実際にディスプレイに表示させる領域を指定し、指定
    した領域を前記画面表示管理部に送信し、前記画面表示
    管理部では更に、指定された領域を表示領域として管理
    すると共に、前記表示領域に基づき、画面パラメータ作
    成部に対し画面情報パラメータ作成の命令を送信し、画
    面パラメータ作成部において、前記画面表示管理部から
    の命令に基づき、該当する各被操作側端末毎の画面情報
    パラメータを作成することを特徴とする遠隔操作装置。
  5. 【請求項5】 操作側端末において、一つの被操作側端
    末に対する操作を他の被操作側端末に実行する要求を入
    力して操作情報作成部に操作複製要求を出力する操作複
    製要求入力部と、操作情報を記憶する操作情報記憶部と
    を備え、操作情報作成部において、操作情報入力部より
    入力した操作情報に含まれる画面上で位置情報を画面表
    示管理部より入力した画面配置情報をもとに被操作側端
    末での位置情報に変換し、変換した操作情報を操作情報
    送信部に出力すると同時に操作情報記憶部に出力し、ま
    た操作複製要求入力部より操作複製要求を入力した場合
    に操作情報要求で指示された各被操作側端末に、操作情
    報記憶部より入力した操作情報の送信先を変更して、送
    信先を変更した操作情報を操作情報送信部に出力するこ
    とを特徴とする請求項4記載の遠隔操作装置。
  6. 【請求項6】 操作側端末において、データを記憶する
    データ記憶部と、画面表示管理部より画面配置情報を入
    力し、操作情報作成部より操作情報を入力し、画面配置
    情報と操作情報より操作領域が変化したか否かを判定
    し、操作領域が変化した場合後述するデータ管理部に操
    作領域が変化したことを通知する操作領域管理部と、操
    作領域管理部より操作領域が変化したことを通知された
    場合、変化前の操作領域に相当する操作対象端末のデー
    タ記憶部よりデータ送受信部を介してデータを入力し変
    化後の操作領域に相当する操作対象端末のデータ記憶部
    に出力するデータ管理部と、データ管理部より入力した
    データを被操作側に送信し、また被操作側より受信した
    データをデータ管理部に出力するデータ送受信部を新た
    に備え、 操作情報作成部において、操作情報を操作情報送信部及
    び後述する操作領域管理部に出力すると共に、被操作側
    端末において、データを記憶するデータ記憶部と、デー
    タ記憶部に記憶しているデータを入力して操作側に送信
    し、また操作側より送信されたデータを受信してデータ
    記憶部に出力するデータ送受信部を新たに備え、 タスク管理部において、データを記憶する必要のある操
    作情報を実行する場合には操作情報により指定されたデ
    ータをデータ記憶部に出力し、データを入力する必要の
    ある操作情報を実行する場合はデータ記憶部よりデータ
    を入力することを特徴とする請求項4記載の遠隔操作装
    置。
JP7169467A 1995-07-05 1995-07-05 遠隔操作装置 Pending JPH0922339A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP7169467A JPH0922339A (ja) 1995-07-05 1995-07-05 遠隔操作装置
US08/675,478 US5825336A (en) 1995-07-05 1996-07-03 Remote operation apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7169467A JPH0922339A (ja) 1995-07-05 1995-07-05 遠隔操作装置

Publications (1)

Publication Number Publication Date
JPH0922339A true JPH0922339A (ja) 1997-01-21

Family

ID=15887106

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7169467A Pending JPH0922339A (ja) 1995-07-05 1995-07-05 遠隔操作装置

Country Status (2)

Country Link
US (1) US5825336A (ja)
JP (1) JPH0922339A (ja)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005041021A1 (ja) * 2003-10-24 2005-05-06 Matsushita Electric Industrial Co., Ltd. 遠隔操作システム及び遠隔操作方法
JP2005301908A (ja) * 2004-04-15 2005-10-27 Toshiba Corp 情報機器遠隔操作システム
JP2007317222A (ja) * 2007-07-23 2007-12-06 Hitachi Ltd リモート操作システム
JP2009122947A (ja) * 2007-11-14 2009-06-04 Canon Inc 画面共有システム及びデータ転送方法
JP2013088729A (ja) * 2011-10-20 2013-05-13 Konica Minolta Business Technologies Inc 表示システム、表示システムの制御プログラム、および表示装置
JP2013171585A (ja) * 2012-02-20 2013-09-02 Samsung Electronics Co Ltd ディスプレイ装置及びその制御方法
JP2013182074A (ja) * 2012-02-29 2013-09-12 Toshiba Corp 表示制御装置、表示制御方法、電子機器、および電子機器の制御方法
JP2013182277A (ja) * 2013-03-12 2013-09-12 Toshiba Corp 表示制御装置および表示制御方法
JP5301742B1 (ja) * 2013-01-30 2013-09-25 Sky株式会社 通信端末制御システム
JP2014067444A (ja) * 2013-12-18 2014-04-17 Sharp Corp 情報機器、画像処理装置、情報機器と通信可能な情報処理装置およびそれらを含む情報処理システム
JP2014513831A (ja) * 2011-04-12 2014-06-05 アップル インコーポレイテッド ジェスチャーの視覚化及び電子装置とリモートディスプレイとの間での共有
JP2018018221A (ja) * 2016-07-26 2018-02-01 富士通コンポーネント株式会社 Kvmスイッチ
WO2018055659A1 (ja) * 2016-09-20 2018-03-29 株式会社オプティム 画面共有システム、画面共有方法及びプログラム

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6380990B1 (en) * 1997-10-06 2002-04-30 Sony Corporation Method and apparatus for command and control of television receiver for video conferencing applications
US6501442B2 (en) * 1998-06-15 2002-12-31 Compaq Information Technologies Group, L.P. Method and apparatus for graphical display of multiple network monitors over multiple intervals
CA2343751A1 (en) * 1998-07-27 2000-02-10 Webtv Networks, Inc. Remote computer access
US6732067B1 (en) 1999-05-12 2004-05-04 Unisys Corporation System and adapter card for remote console emulation
US6664969B1 (en) * 1999-11-12 2003-12-16 Hewlett-Packard Development Company, L.P. Operating system independent method and apparatus for graphical remote access
US6498611B1 (en) 2000-01-28 2002-12-24 Lexmark International, Inc. System and method for providing a virtual operator panel for a peripheral device
US6560641B1 (en) 2000-03-29 2003-05-06 Unisys Corporation System, method, and adapter card for remote console emulation including remote control of a peripheral device
US6760785B1 (en) 2000-03-29 2004-07-06 Unisys Corporation Method, apparatus, and computer program product for establishing communications between an adapter card and a host processor running in a bios supported environment
DE10110358B4 (de) * 2001-02-27 2006-05-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Anordnung und Verfahren zur räumlichen Visualisierung
DE60203363T2 (de) * 2002-01-18 2006-04-06 Hewlett-Packard Development Co., L.P., Houston Datenverarbeitungssystem und Verfahren zur Steuerung von Bildschirmen
JP2003330447A (ja) * 2002-05-15 2003-11-19 Mitsubishi Electric Corp 画像処理装置
US9507930B2 (en) 2003-04-25 2016-11-29 Z124 Physical key secure peripheral interconnection
US9003426B2 (en) 2011-12-09 2015-04-07 Z124 Physical key secure peripheral interconnection
US20130198867A1 (en) 2011-12-09 2013-08-01 Z124 A Docking Station for Portable Devices Providing Authorized Power Transfer and Facility Access
US20050134579A1 (en) * 2003-12-19 2005-06-23 Tsau-Hua Hsieh Wirelessly driven display system
EP1555772A3 (en) * 2004-01-15 2013-07-17 Yamaha Corporation Remote control method of external devices
US7577771B2 (en) * 2004-05-03 2009-08-18 Microsoft Corporation Caching data for offline display and navigation of auxiliary information
US7558884B2 (en) * 2004-05-03 2009-07-07 Microsoft Corporation Processing information received at an auxiliary computing device
US7511682B2 (en) 2004-05-03 2009-03-31 Microsoft Corporation Context-aware auxiliary display platform and applications
US7660914B2 (en) 2004-05-03 2010-02-09 Microsoft Corporation Auxiliary display system architecture
US7817155B2 (en) * 2005-05-24 2010-10-19 Ati Technologies Inc. Master/slave graphics adapter arrangement
US7730336B2 (en) * 2006-05-30 2010-06-01 Ati Technologies Ulc Device having multiple graphics subsystems and reduced power consumption mode, software and methods
US20080143731A1 (en) * 2005-05-24 2008-06-19 Jeffrey Cheng Video rendering across a high speed peripheral interconnect bus
JP2006338226A (ja) * 2005-06-01 2006-12-14 Hitachi Ltd リモート操作システム
EP1999949A1 (en) * 2006-03-28 2008-12-10 Thomson Licensing Method and apparatus for displaying an image with a production switcher
US8555099B2 (en) * 2006-05-30 2013-10-08 Ati Technologies Ulc Device having multiple graphics subsystems and reduced power consumption mode, software and methods
US8914462B2 (en) 2009-04-14 2014-12-16 Lg Electronics Inc. Terminal and controlling method thereof
US8410994B1 (en) 2010-08-23 2013-04-02 Matrox Graphics Inc. System and method for remote graphics display
US8930605B2 (en) 2010-10-01 2015-01-06 Z124 Systems and methods for docking portable electronic devices
EP2622491A4 (en) * 2010-10-01 2015-05-27 Z124 SYSTEMS AND METHODS RELATING TO USER INTERFACES FOR DOCKING PORTABLE ELECTRONIC DEVICES
US9383770B2 (en) 2011-08-31 2016-07-05 Z124 Mobile device that docks with multiple types of docks
US9244491B2 (en) 2011-08-31 2016-01-26 Z124 Smart dock for auxiliary devices
US9246353B2 (en) 2011-08-31 2016-01-26 Z124 Smart dock charging
US9351237B2 (en) 2011-09-27 2016-05-24 Z124 Displaying of charging status on dual screen device
US9086840B2 (en) 2011-12-09 2015-07-21 Z124 RSID proximity peripheral interconnection
JP6900690B2 (ja) * 2017-02-07 2021-07-07 オムロン株式会社 制御装置
CN113220248A (zh) * 2020-01-21 2021-08-06 深圳市超捷通讯有限公司 跨屏显示方法、显示设备及车辆

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA1288516C (en) * 1987-07-31 1991-09-03 Leendert M. Bijnagte Apparatus and method for communicating textual and image information between a host computer and a remote display terminal
US5136695A (en) * 1989-11-13 1992-08-04 Reflection Technology, Inc. Apparatus and method for updating a remote video display from a host computer
JPH05119955A (ja) * 1991-10-28 1993-05-18 Nippon Telegr & Teleph Corp <Ntt> 端末間画面操作方式
US5594859A (en) * 1992-06-03 1997-01-14 Digital Equipment Corporation Graphical user interface for video teleconferencing
US5422674A (en) * 1993-12-22 1995-06-06 Digital Equipment Corporation Remote display of an image by transmitting compressed video frames representing background and overlay portions thereof
US5604509A (en) * 1995-04-14 1997-02-18 Advent Design, Inc. Remote display monitor system

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005041021A1 (ja) * 2003-10-24 2005-05-06 Matsushita Electric Industrial Co., Ltd. 遠隔操作システム及び遠隔操作方法
JP2005301908A (ja) * 2004-04-15 2005-10-27 Toshiba Corp 情報機器遠隔操作システム
JP2007317222A (ja) * 2007-07-23 2007-12-06 Hitachi Ltd リモート操作システム
JP2009122947A (ja) * 2007-11-14 2009-06-04 Canon Inc 画面共有システム及びデータ転送方法
JP2014513831A (ja) * 2011-04-12 2014-06-05 アップル インコーポレイテッド ジェスチャーの視覚化及び電子装置とリモートディスプレイとの間での共有
US9152373B2 (en) 2011-04-12 2015-10-06 Apple Inc. Gesture visualization and sharing between electronic devices and remote displays
JP2013088729A (ja) * 2011-10-20 2013-05-13 Konica Minolta Business Technologies Inc 表示システム、表示システムの制御プログラム、および表示装置
US9069461B2 (en) 2011-10-20 2015-06-30 Konica Minolta Business Technologies, Inc. Display system including first and second display devices
JP2013171585A (ja) * 2012-02-20 2013-09-02 Samsung Electronics Co Ltd ディスプレイ装置及びその制御方法
US9959018B2 (en) 2012-02-20 2018-05-01 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
US10788960B2 (en) 2012-02-20 2020-09-29 Samsung Electronics Co., Ltd. Display apparatus and control method for processing content data based on user input
JP2013182074A (ja) * 2012-02-29 2013-09-12 Toshiba Corp 表示制御装置、表示制御方法、電子機器、および電子機器の制御方法
JP5301742B1 (ja) * 2013-01-30 2013-09-25 Sky株式会社 通信端末制御システム
JP2013182277A (ja) * 2013-03-12 2013-09-12 Toshiba Corp 表示制御装置および表示制御方法
JP2014067444A (ja) * 2013-12-18 2014-04-17 Sharp Corp 情報機器、画像処理装置、情報機器と通信可能な情報処理装置およびそれらを含む情報処理システム
JP2018018221A (ja) * 2016-07-26 2018-02-01 富士通コンポーネント株式会社 Kvmスイッチ
WO2018055659A1 (ja) * 2016-09-20 2018-03-29 株式会社オプティム 画面共有システム、画面共有方法及びプログラム

Also Published As

Publication number Publication date
US5825336A (en) 1998-10-20

Similar Documents

Publication Publication Date Title
US5634018A (en) Presentation supporting method and apparatus therefor
US6208376B1 (en) Communication system and method and storage medium for storing programs in communication system
US5825336A (en) Remote operation apparatus
US5754242A (en) Data formatting system for processing multiple independent input data streams for high resolution screen displays
KR100317690B1 (ko) 포인팅 장치를 이용한 화상 회의 시스템의 제어
JP4692529B2 (ja) グラフィカルユーザインタフェース装置
CN110990089B (zh) 一种基于idv的双屏双桌面智能系统及方法
US5996003A (en) Conferencing system, terminal apparatus communication method and storage medium for storing the method
JPH02197946A (ja) 共用ワークスペース内のプライベート領域の提示方法
US5828372A (en) Information processing system
JPH07210357A (ja) 会議システムにおけるオブジェクトの遠隔強調表示
JP2009044328A (ja) 会議システム、サーバ、画像表示方法、コンピュータプログラム及び記録媒体
JPH09214937A (ja) 通信装置、画像処理装置、通信方法及び画像処理方法
JPH07146671A (ja) 大型映像表示装置
JP2000101994A (ja) 通信装置及び通信方法及び記憶媒体
JP4479761B2 (ja) 会議システム、接続方法
JP3368014B2 (ja) 画像データ処理方法及びそのシステム
JP5842392B2 (ja) コンテンツ共有システム、コンテンツ共有端末、サーバ、コンテンツ共有方法、および、コンピュータ・プログラム
JP3450619B2 (ja) 通信装置、画像処理装置、通信方法及び画像処理方法
JP5825324B2 (ja) 画像表示装置が表示する分割画面に画像の割り当てを行う端末装置、端末装置の制御方法およびコンピュータープログラム
US7568159B2 (en) Apparatus control method and system
CN119364081B (zh) 一种多屏显示系统、方法及装置
JP2001136515A (ja) 撮像装置、画像通信システム、撮像方法、画像通信方法及び記憶媒体
JP5445661B2 (ja) グラフィカルユーザインタフェース装置および制御方法
JPH09289635A (ja) 通信装置及び通信方法