JPH0445489A - 画面表示制御方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 （産業上の利用分野） 本発明は本画面に複数の子画面を同時に表示することの
できるウィンドウ機能を有する表示装置の画面表示制御
方式に関する。

（従来の技術） 最近はウィンドウ機能を有する表示装置を用いたオフィ
スオートメーション（ＯＡ）機器が多く使用されており
、第７図はそのＯＡ機器の一構成例を示す。このＯＡ機
器の動作概要は、映像入力端子１から入力された複数の
映像人力ａ、ｂ、ｃを画面制御部２で制御されて画面合
成が行なわれる画面合成部３に入力し、映像増幅部４を
介して表示部５、例えばＣＲＴデイスプレィ上にウィン
ドウという子画面Ａ、Ｂ、Ｃに表示する。この子画面（
ウィンドウ）の画面表示寸法（大きさ）や表示位置を変
えるには、キーボード等を有する画面操作部６で、カー
ソルを移動させることにより大きさや位置を指定して画
面制御部２に入力したり、マウスにより特定の位置をポ
インティングして大きさを変えるといった煩雑な操作に
より行なっていた。

（発明が解決しようとする課題） このように従来のウィンドウ機能を有する表示装置にお
いては、操作者が例えば両手を同時に用いた作業を行な
っている場合、詳細に見たいウィンドウの画面表示寸法
、映し出される画像の大きさや本画面内における表示装
置を変えたいときには、−旦作業を中断し、画面操作部
６のキーボードやマウスによって手動入力処理を行なう
必要があり１両手を用いて継続的に作業ができないとい
う不具合いがあった。

（発明の目的） 本発明はこのような煩雑な手動入力処理を行なうことな
く、操作者は両手を用いて継続的な作業を行ないつつ、
詳細に見たいウィンドウの画面表示寸法、映し出される
画像の大きさや表示位置を自動的に変えることのできる
画面表示制御方式を提供することを目的とする。

（課題を解決するための手段） 本発明は上記課題を解決し目的を達成するため、本画面
に複数の子画面を同時に表示することのできるウィンド
ウ機能を有する表示装置において、前記本画面並びに複
数の子画面を観察し操作しているときの操作者の視線方
向検出手段と、該視線方向検出手段で検出された目視方
向と画面上での子画面の表示位置に基づいて操作者が前
記複数の子画面の何れの子画面を注視しているかを判断
する注視画面判定手段と、操作者が子画面を注視した時
間を計測する注視時間計測手段と、該注視時間計測手段
の計測結果に基づいて予め定められた子画面表示寸法の
変化率と照合し、かつ、該変化率に従って子画面の表示
寸法を決定し、該表示寸法に従って子画面の表示寸法を
変化させる画面制御手段と、該画面制御手段よりの変更
後の各子画面表示寸法に従って表示手段に表示させる画
面合成手段とを具備することを特徴とする。

（作　用） 本発明の視線方向検出手段によって検出した注視点の座
標と制置上の各ウィンドウの表示されている座標との整
合をとり、注視画面判定手段により、注視時間計測手段
からの一定のサンプリング時間中に操作者の注視点が各
ウィンドウに夫々どの程度の時間、停留したかを計測し
、各ウィンドウに停留した時間に応じて、画面制御手段
により予め定められた画面表示寸法の変化率に従って表
示画面の大きさを決定し、かつこれに基づいて各ウィン
ドウの大きさを制御する。

また１画面制御手段は各ウィンドウの画面表示寸法の変
更速度を段階的に設定し、かつ特定のウィンドウを操作
者が目視している時間が一定時間以上の場合は通常時よ
りも早くウィンドウの画面表示寸法（大きさ）を変化さ
せ、より観察が詳細にできるようにする。

（実施例） 第１図は本発明の第１の実施例の構成を示すブロック図
である。図において、１１は視線方向検出部で１図示せ
ざる操作者の顔の向きに対する視線方向を検出する手段
である。これは、例えば、アイディテクタよりなる。Ｉ
２は注視画面判定部で、前記視線方向検出部１１から送
られてくる視線方向の情報と、後述する画面合成部１８
からのウィンドウの位置情報との照合を行ない、注視さ
れているウィンドウを判定する手段である。１３は注視
時間計算部で、内部にタイマを備えており、前記注視画
面判定部１２で判定された結果に基づき、一定のサンプ
リング時間中にウィンドウが操作者によって注視された
時間を夫々について計測する手段であり１本実施例では
サンプリング時間を５秒としている。１４は画面制御部
で、前記注視時間計算部１３により計算された各ウィン
ドウ毎の注視された時間をもって後述の比較用メモリ・
テーブル１５を検索参照し、その結果と表示寸法蓄積メ
モリ１６に蓄積されているサンプリングが行なわれてい
る時点での各ウィンドウの画面表示寸法とから、新たに
表示すべき画面表示寸法を計算し、画面合成部１８に８
力すると共に表示寸法蓄積メモ１月６にこの新たな画面
表示寸法を蓄積する手段であり、本実施例では３つのウ
ィンドウＡ、Ｂ、Ｃを本画面上に子画面として表示させ
る。

前記比較用メモリ・テーブル１５は、各ウィンドウの注
視時間Ｔｉに対応させて定められた各ウィンドウの寸法
の増加減少の割合に関するデータ（各ウィンドウのＴｉ
％対表示寸法変化率％及び画面変化速度Ｖｓｓｃ）が格
納されており、本実施例ではＲＯＭが用いられ、その比
較用のメモリ・テーブル例を下表に示す。

また、前記表示寸法蓄積メモリ１６は前記注視時間計算
部１３においてサンプリングが行なわれている時点での
各ウィンドウの画面表示寸法の情報が蓄積されており、
本実施例ではＲＡＭが用いられる。

１７は画像情報送出部で、後述する画面合成部１８に画
像情報を送出するものであり、本実施例では３種類の画
像情報（第５図、第６図に例示するカナ文字のイ２２ロ
、ハとする。前記画面合成部１８は前記画像情報送出部
１７より送られた画像情報を前記注視画面判定部１２に
フィードバックして画面合成の確認（照合）をとると共
に、この画像情報を前記画面制御部１４より送られてき
た変更後の各ウィンドウの画面表示寸法に従って画像を
、後述の表示装置１９に表示させる手段である。前記表
示装置１９は前記画面合成部１８から送られてきた信号
に従って表示するＣＲＴデイスプレィで構成される。

次に前記第１図に示す第１の実施例の動作を第２図のフ
ローチャートを用いて説明する。

まず、画面制御部１４は初期設定された各ウィンドウＡ
、Ｂ、Ｃの画面表示寸法（大きさ）の情報を画面合成部
１８に逆比し、該画面合成部は画像情報送出部１７から
送られる画像情報（第５図、第６図のカナ文字のイ２２
ロ、ハを表示装置１９に送出すると、該表示装置は画面
合成部１８から送られる画像情報を、例えば第５図（１
）、第６図（１）のように表示装置１９に表示する（Ｓ
工）。両図とも各ウィンドウ１９Ａ〜１９Ｃ，１９Ａ′
〜１９Ｃ′の画面表示寸法は夫々同一寸法であり、画像
情報が第５図（１）は複数、第６図（１）は１個各ウィ
ンドウに表示された例を示している。

次に視線方向検出部１１により操作者の顔の向きに対す
る視線方向を検出し、注視画面判定部１２にて、視線が
表示装置１９上の何れのウィンドウの位置と一致してい
るかを画面合成部１８から送られてくる各ウィンドウの
位置座標と照合し、一致していれば注視時間計算部１３
に視点があるのはどのウィンドウ上かの情報を送る。そ
して、該注視時間計算部は予め定めたサンプリング時間
（５秒）ごとに、そのサンプリング時間中に各ウィンド
ウが何秒だけ注視されたかを、注視時間Ｔ１について計
測し、その結果を画面制御部１４へ送る（Ｓ２）。

そして、上記サンプリング時間以内か判断しくｓ、）、
Ｎｏのとき各ウィンドウごとの注視時間Ｔｉに従い比較
用メモリ・テーブル１５を検索しく前出の表）、サンプ
リングが行なわれている時点での画面表示寸法と検索の
結果とから新たな画面表示寸法を画面制御部１４で計算
すると共に、その計算結果を表示寸法蓄積メモリ１６に
蓄積する（Ｓ４）。

次に画面制御部１４で求めた新たな画面表示寸法に従っ
て画面合成部１８が画面の大きさを変える信号を表示装
置１９に送出する（Ｓ５）。

表示装置１９には新たな画面を表示する（Ｓ６）。

この場合の画面表示例を第５図、第６図の（２）。

（３）に夫々示し、第５図の画面表示例は各ウィンドウ
１９Ａ〜１９Ｃの画像情報（イ９９ロ、ハの寸法は変更
せずにウィンドウの画面表示寸法を変更した場合であり
、同図（２）はウィンドウ１９Ａ、同図（３）はウィン
ドウ１９Ｃの各画面表示寸法が拡大変更され、他のウィ
ンドウは縮小変更された例である。

つまり、同図ウィンドウ１９Ａや１９Ｃには画像情報（
イ、ハ）が詳しく表示され、操作者が観察し易く表示さ
れる。

また、第６図の画像表示例は各ウィンドウ１９Ａ′〜１
９Ｃ′の画面表示寸法変更に従って、画像情報（イ２２
ロ、ハの寸法を変更した場合であり、同図（２）はウィ
ンドウ１９Ａ′、同図（３）はウィンドウ１９０′の各
画面表示寸法が拡大変更され、他のウィンドウは縮小変
更された例である。

そして、操作者の操作を終了するまで（Ｓ、のＹｅｓ）
、上記の各処理（Ｓ２）〜（Ｓ、）が繰り返される（Ｓ
、のＮｏ）。

第３図は本発明の第２の実施例の構成を示すブロック図
、第４図はその動作を説明するフローチャートである。

本実施例の構成においては画像情報送出部１７からの画
像情報を画面制御部１４へ出力し、前記第１の実施例で
述べた第５図及び第６図に示す画像情報（カナ文字のイ
ア口、ハ）の拡大、縮小を各ウィンドウの大きさの割合
に応じて拡大、縮小変更を画面制御部１４で行なう、こ
の場合、各ウィンドウの画面表示寸法２画像情報の変更
速度は、画面制御部１４において段階的に設定する。例
えば、特定のウィンドウを操作者が注視している時間が
一定時間を以上の場合は前出の表に示すようにＴｉ（％
）に対して画面変化速度Ｖ　（ｓｅｃ）を通常時より早
く該ウィンドウの画面表示寸法や画像情報を変化させる
。即ち、ウィンドウＡ、ＢのＴ　ｉ　（％）が、Ｃ０９
Ｏ」のとき、ウィンドウＣが１００（％）であるのでウ
ィンドウＣの画面変化速度も最も早く（大で表示）行な
う。

また、必要により当該ウィンドウの本画面上での表面位
置を高速変化させ見易い位置にする。このように注視さ
れたウィンドウの画面表示寸法、そこに表示される画像
情報、あるいはウィンドウの表示位置等の全て、もしく
はこれらの組み合せの何れかを早く変化させ操作者が見
易くする。

第２の実施例のフローチャートである第４図において、
前記第１の実施例のフローチャートと異なる点を述へる
。

注視画面判定部１２で注視画面を判定し、各ウィンドウ
ごとの注視時間Ｔｉを注視時間計算部１３で計測したと
き（Ｓ２）、一定時間を以上のとき（Ｓ。

のＹｅｓ）は処理（Ｓ４）に移り、一定時間を以下のと
き（ＳｌｌのＮＯ）は処理（Ｓ、）に移る。

処理（Ｓ４）からの新たな画面表示寸法に基づき、画像
情報の圧縮率と画面の大きさを画面制御部１４で計算し
、その計算結果を信号として画面合成部１８へ送出する
（Ｓ、）。画面合成部１８は前記信号に基づき画面を合
成し表示装置ｉ１９に表示する（Ｓ、。）。

この表示は画面制御部より、短時間のうちに表示合成部
を制御して早く行なわれる。

（発明の効果） 以上説明したように本発明は従来のように画面操作部の
キーボード等を操作することなく、操作者の画面を目視
する時間に応じて画面の大きさ、画面の表示位置、画面
上に映し出される画像情報の大きさ等を変化させること
ができ、両手を使わずに連続的に作業を行なうことがで
き効率があがる。また、特定のウィンドウ（子画面）の
画面表示寸法を大きくしたい場合は、所定時間より長い
注視により早くでき、緊急の場合や、より詳しく観察し
たい場合に便利である。

【図面の簡単な説明】

第１図は本発明の第１の実施例の構成を示すブロック図
、第２図は第１の実施例の動作を説明するフローチャー
ト、第３図は本発明の第２の実施例の構成を示すブロッ
ク図、第４図は第２の実施例の動作を説明するフローチ
ャート、第５図及び第６図は本発明の表示装置による表
示例を示す図、第７図は従来のＯＡ機器の一構成例を示
す図である。 １１・・・視線方向検出部、１２・・・注視画面判定部
、１３・・・注視時間計算部、１４・・・画面制御部、
１５・・・比較用メモリ・テーブル、１６・・・表示寸
法蓄積メモリ、１７・・・画像情報送出部、１８・・・
画面合成部。 １９・・・表示装置。 特許出願人　日本電信電話株式会社

Claims (2)

【特許請求の範囲】
1. （１）本画面に複数の子画面を同時に表示することので
   きるウィンドウ機能を有する表示装置において、前記本
   画面並びに複数の子画面を観察し操作しているときの操
   作者の視線方向検出手段と、該視線方向検出手段で検出
   された目視方向と画面上での子画面の表示位置に基づい
   て操作者が前記複数の子画面の何れの子画面を注視して
   いるかを判断する注視画面判定手段と、操作者が子画面
   を注視した時間を計測する注視時間計測手段と、該注視
   時間計測手段の計測結果に基づいて予め定められた子画
   面表示寸法の変化率と照合し、かつ、該変化率に従って
   子画面の表示寸法を決定し、該表示寸法に従って子画面
   の表示寸法を変化させる画面制御手段と、該画面制御手
   段よりの変更後の各子画面表示寸法に従って表示手段に
   表示させる画面合成手段とを具備することを特徴とする
   画面表示制御方式。
2. （２）画面制御手段は子画面表示寸法の変更速度を段階
   的に設定し、かつ、特定の子画面を操作者が目視してい
   る時間が一定時間以上の場合は、通常時よりも早く子画
   面表示寸法を変化させることを特徴とする請求項（１）
   記載の画面表示制御方式。