JPH0778055A

JPH0778055A - データ処理装置

Info

Publication number: JPH0778055A
Application number: JP5180629A
Authority: JP
Inventors: Tsutomu Yamaguchi; 勉山口
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 1993-06-25
Filing date: 1993-06-25
Publication date: 1995-03-20

Abstract

(57)【要約】【目的】本発明はデータ処理装置に関し、ＨＭＤ外か
らの入力に基づいて、例えば、本のページをめくるよう
な感覚で表示データの切り換えを行うことを目的とす
る。【構成】筐体中に、内蔵されるディスプレイ手段を備
えるデータ処理装置であって、前記ディスプレイ手段に
所定のデータを表示するデータ表示手段と、該データ表
示手段により表示される表示データ中の任意位置を仮想
的に指定する指定手段と、該指定手段により指定された
仮想的な指定位置を検出する位置検出手段と、該位置検
出手段により検出された前記指定手段の位置が所定距離
内で移動したか否かを検出する移動距離検出手段と、該
移動距離検出手段の検出結果に基づいて前記データ表示
手段により表示される表示データを切り換える表示デー
タ切換手段とを具備するように構成する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、データ処理装置に係
り、詳細には、頭部搭載型ディスプレイ装置（以下、Ｈ
ＭＤ：Head Mounted Displayという）を備えたデータ処
理装置に関する。

【０００２】

【従来の技術】従来、データ処理装置としては、例え
ば、エンジニアリングワークステーション（以下、ＥＷ
Ｓ：Engineering Work Stationという），パーソナルコ
ンピュータ（Personal Computer；以下、パソコンと略
す），ワードプロセッサ（Word P-rocessor；以下、ワ
ープロと略す）等がある。

【０００３】これらのデータ処理装置には、通常、入力
装置としてキーボードが、また、出力装置としてディス
プレイ装置が備えられ、キーボードから入力されるキー
コマンドに対応する処理がデータ処理装置内で行われる
とともに、処理結果がディスプレイ装置に出力されるも
のである。

【０００４】データ処理装置におけるディスプレイ装置
として代表的なものには、ＣＲＴ（Cathode Ray Tube）
表示装置や、液晶表示装置（以下、ＬＣＤ：Liquid Cry
stalDisplay という）等がある。

【０００５】ＣＲＴ表示装置は、例えば、デスクトップ
型のＥＷＳ、パソコン、ワープロ等における表示装置と
して一般的なものであり、比較的安価に大画面の表示装
置を得ることができるが、ＣＲＴ表示装置では、大画面
の表示装置を得る場合、ＣＲＴ表示装置自体のサイズも
大きくなり、設置場所が限定される。

【０００６】一方、ＬＣＤは、低消費電力でかつ軽量・
薄型である点から、ラップトップ型やノート型のパソコ
ン・ワープロ等の表示装置として多用されており、近時
においては、大画面・高精細化が図られ、ＥＷＳ等の表
示装置としても利用されている。

【０００７】しかし、ＬＣＤは、一般に大画面化が難し
く、かつ、画面サイズが大きくなるとそのサイズに比し
てコストがかかる。

【０００８】そこで、設置場所を選ばずに、大画面化が
可能な表示装置として、ＨＭＤが注目されている。

【０００９】ＨＭＤとは、目の前に配置した２枚の液晶
ディスプレイに映像を表示し、輻輳角と焦点距離とを所
定の値に設定することにより、眼鏡や双眼鏡のように両
目に対してそれぞれ別々の映像を与え、小さな機器で大
画面表示装置を見ているかのように表示を行うものであ
る。

【００１０】ＨＭＤは、前述したような利点を備えるこ
とから、映画鑑賞、擬似３Ｄ表示（立体表示）による医
療，ＣＡＤ，建築の分野での利用が検討されている。

【００１１】ところで、このようなディスプレイ装置を
備えるデータ処理装置では、一般に、ディスプレイ装置
で表示可能な画像表示領域（画像表示画素数）は固定的
であることから、ディスプレイ装置で表示可能な画像表
示画素数を越える表示データを表示する場合、そのまま
表示したのでは表示すべきデータ全体を見ることができ
ない。

【００１２】そこで、使用中のディスプレイ装置を、よ
り画像表示領域の広いディスプレイ装置に変更すること
が考えられるが、この場合、表示すべきデータ（以下、
単に表示データという）が大きくなれば、それに伴って
画像表示領域の大きなディスプレイ装置が必要となると
いう新たな問題点が生じる。

【００１３】このため、ディスプレイ装置で表示可能な
画像表示領域を越える表示データを表示させる場合、一
般に、例えば、キーボードやマウス等のポインティング
デバイスを操作することにより画像表示領域内に表示画
像データをスクロールさせて表示させ、表示データの全
体を見るという手法が用いられている。

【００１４】

【発明が解決しようとする課題】しかしながら、前述の
データ処理装置にあっては、画像表示領域よりも大きな
表示画像データの全体像を見る場合、表示画像データを
ディスプレイ装置の画像表示領域内でスクロールさせる
ことにより表示画像を切り換えて表示するという構成と
なっていたため、以下に述べるような問題点があった。

【００１５】すなわち、前述のＨＭＤを備えるデータ処
理装置にあっては、ディスプレイ装置を頭部に搭載する
という性格上、通常、入力装置としてのキーボードやマ
ウス等のポインティングデバイスを備えておらず、キー
ボードやマウス等のポインティングデバイスを備えるデ
ータ処理装置のように、キーボードやマウス等のポイン
ティングデバイスを用いて表示切り換えの指示を行うこ
とにより表示画像の切り換えを行うことができない。

【００１６】このため、ＨＭＤ上に表示切り換えの指示
を行うためのキー入力部を設けることが考えられるが、
ＨＭＤは頭部に装着するという目的から小型・軽量であ
ることが望まれ、多種類のキーを備えることは好ましく
ない。

【００１７】ところで、一般に、マンマシンインターフ
ェースについて人間は極めて保守的であり、習熟の手間
を考えると、よほど優れた画期的なものでない限り、既
にある身近な道具に近い使い勝手のものを選択する傾向
にある。

【００１８】このことは、表示画像を切り換えて表示す
る場合にも当てはまり、例えば、ディスプレイ装置を書
籍に例えて、所定の画像表示領域を持つ表示部に複数ペ
ージ分の表示データを用意し、ページを順にめくるよう
に表示内容を切り換えることは大変有効であると考えら
れる。

【００１９】本発明は上記課題に鑑みてなされたもので
あり、ＨＭＤ外からの入力に基づいて、例えば、本のペ
ージをめくるような感覚で表示データの切り換えを行う
ことを目的とする。

【００２０】

【課題を解決するための手段】請求項１記載の発明で
は、筐体中に、内蔵されるディスプレイ手段を備えるデ
ータ処理装置であって、前記ディスプレイ手段に所定の
データを表示するデータ表示手段と、該データ表示手段
により表示される表示データ中の任意位置を仮想的に指
定する指定手段と、該指定手段により指定された仮想的
な指定位置を検出する位置検出手段と、該位置検出手段
により検出された前記指定手段の位置が所定距離内で移
動したか否かを検出する移動距離検出手段と、該移動距
離検出手段の検出結果に基づいて前記データ表示手段に
より表示される表示データを切り換える表示データ切換
手段と、を具備することを特徴としている。

【００２１】この場合、請求項２記載のように、前記移
動距離検出手段は、前記指定手段の移動を検出する際、
該指定手段の移動方向も検出することが好ましく、ま
た、請求項３記載のように、前記表示データ切換手段
は、データ表示手段により表示される所定表示領域を左
右２画面に分割し、該分割された画面毎に表示画像を切
り換えることが有効であり、さらにこの場合、請求項４
記載のように、前記データ切換手段は、前記移動距離検
出手段により検出された移動方向に基づいて表示画像を
切り換えることが有効である。

【００２２】

【作用】請求項１記載の発明によれば、移動距離検出手
段により検出される指定手段の移動に基づいてデータ表
示手段により表示される表示データが切り換えられる。

【００２３】これによって、指定手段を移動させた時
に、表示データが切り換えて表示され、ＨＭＤ外からの
入力に基づいて、表示データの切り換えが行われる。

【００２４】なお、この場合、請求項２記載の発明のよ
うに、移動距離検出手段によって指定手段の移動方向を
検出することにより、指定手段の移動方向に対応して表
示データの切り換えが行われ、また、請求項３記載の発
明のように、データ表示手段により表示される表示領域
を左右２画面に分割するとともに、この分割された画面
毎に表示データ切換手段によって表示が切り換えらるこ
とにより、請求項４記載の発明のように、移動距離検出
手段で検出された移動方向に基づいて、例えば、本のペ
ージをめくるような感覚で表示データの切り換えが行わ
れる。

【００２５】

【実施例】以下、図１〜図２４を参照して実施例を説明
する。

【００２６】図１〜図２４は本発明に係るデータ処理装
置の一実施例を示す図である。

【００２７】まず、構成を説明する。図１，図２は、本
発明のデータ処理装置の外観図であり、図１は、本実施
例のデータ処理装置を斜め前方から見た図であり、図２
は、本実施例のデータ処理装置を斜め後方から見た図で
ある。

【００２８】本実施例におけるデータ処理装置１は、Ｈ
ＭＤによる単体ディスプレイ装置内に内蔵されたもので
あり、キーボード等によるキー入力手段を備えていない
ため、ＨＭＤに仮想的なキーボードを表示することで、
仮想的なキー入力を可能とするものである。

【００２９】図１，図２において、データ処理装置１
は、データ処理において処理された種々のデータを表示
画像として生成する光学系表示ユニット２と、光学系表
示ユニット２により生成された画像と外の景色とを合成
して表示する各種ユニットを内蔵する機器ケース３と、
光学系表示ユニット２及び機器ケース３を支持し、頭部
に装着する伸縮自在のヘッドバンド４とから構成されて
いる。

【００３０】なお、図１に示すように、機器ケース３に
は、ロッドアンテナ５、電源オン・オフスイッチ６、指
定キー７、メニュー切換ダウン指示キー８、メニュー切
換アップ指示キー９が設けられるとともに、図２に示す
ように、ファインダ１０Ｒ，１０Ｌが形成されている。
また、ヘッドバンド４には、図１に示すように、支持部
１１、イヤホン１２Ｒ，１２Ｌが形成されるとともに、
図２に示すように、装着検出センサ１３が設けられてい
る。

【００３１】ロッドアンテナ５は、データ処理装置１内
で処理された各種データを電波に変換して送信するため
の伸縮自在のアンテナであり、電源オン・オフスイッチ
６は、電源部（図示せず）から供給される電源電圧をデ
ータ処理装置１内に通電するか否かを選択するためのス
イッチであり、指定キー７は、データ処理装置１を使用
する時点で、使用するオペレータの確認処理を開始する
ためのスイッチである。なお、使用するアンテナとして
は、本実施例のような伸縮自在のロッドアンテナ５に限
らず、例えば、ヘリカルアンテナでも良く、使用する電
波の波長帯域に適切なアンテナの利用が可能である。

【００３２】メニュー切換ダウン指示キー８及びメニュ
ー切換アップ指示キー９は、光学系表示ユニット２によ
り表示されるメニュー画面のメニュー内容を切り換える
ためのキースイッチであり、メニュー切換ダウン指示キ
ー８は、順方向（メニュー画面中の枠カーソルを下方向
に移動させる方向）にメニュー内容を切り換え、メニュ
ー切換アップ指示キー９は、メニュー切換ダウン指示キ
ー８と逆方向（メニュー画面中の枠カーソルを上方向に
移動させる方向）にメニュー内容を切り換えるものであ
る。

【００３３】ファインダ１０Ｒ，１０Ｌは、透明フィル
タが形成された覗き窓であり、支持部１１は、機器ケー
ス３とヘッドバンド４とを支持固定するものである。

【００３４】イヤホン１２Ｒ，１２Ｌは、エラー音やガ
イダンス情報を聞くためのものであり、装着検出センサ
１３は、ヘッドバンド４がオペレータの頭部に装着され
たか否かを検出するためのセンサである。

【００３５】図３は、本実施例におけるデータ処理装置
１の横方向から見た断面図であり、図４は、本実施例に
おけるデータ処理装置１の後方から見た断面図である。

【００３６】光学系表示ユニット２は、図３に示すよう
に、サイドライト方式の冷陰極管（蛍光ランプ）からな
るバックライト２１と、約１インチサイズのアクティブ
マトリクス型カラー液晶表示部であるＬＣＤ２２Ｒ，２
２Ｌと、ガラスまたはプラスチックの光学レンズからな
る凹レンズ２３Ｒ，２３Ｌとから構成され、バックライ
ト２１により照射されてＬＣＤ２２Ｒ，２２Ｌを透過し
た画像（光）は凹レンズ２３Ｒ，２３Ｌによって広げら
れ、効率良く機器ケース３に送られる。

【００３７】機器ケース３は、図３及び図４に示すよう
に、光学系表示ユニット２からの画像（光）を受光する
ための受光部となる上部ガラス３１と、ガラスまたはプ
ラスチックの光学レンズからなる凸レンズ３２Ｒ，３２
Ｌと、外の景色（外光）を受光するための受光部となる
前面ガラス３３と、前面ガラス３３から受光した外光を
機器ケース３内に導くか否かの透過状態と遮光状態とを
切り換える液晶シャッタとなるシャッタ用ＬＣＤ３４
と、シャッタ用ＬＣＤ３４の機器ケース３内側に形成さ
れたハーフミラーからなる反射マジックミラー３５と、
機器ケース３内の左右の側壁に設けられる２個のＣＣＤ
（Charge Coupled Device ：撮像素子）３６Ｒ，３６Ｌ
とから構成され、光学系表示ユニット２から得られた画
像（光）は、ガラス３１及び凸レンズ３２Ｒ，３２Ｌを
介して反射マジックミラー３５により反射され、ファイ
ンダ１０Ｒ，１０Ｌを介してオペレータの目ＥＲ，ＥＬ
に届く。さらに、前面ガラス３３を介して前方に見える
周囲状況の画像は、シャッタ用ＬＣＤ３４が透過状態の
時、反射マジックミラー３５を介して光学系表示ユニッ
ト２からの画像と合成されてファインダ１０Ｒ，１０Ｌ
に出力され、一方、シャッタ用ＬＣＤ３４が遮光状態の
時、前面ガラス３３を介して前方に見える周囲状況の画
像は、オペレータの目ＥＲ，ＥＬには届かず、光学系表
示ユニット２からの画像のみがオペレータに出力され
る。

【００３８】ここで、機器ケース３内の左右の側壁に設
けられた２個のＣＣＤ３６Ｒ，３６Ｌは、前方、または
後方のファインダ１０Ｒ，１０Ｌのいずれの方向の画像
も撮像するため、その向きを前方と後方とに１８０度回
転するように、回動自在に設けられている。そして、シ
ャッタ用ＬＣＤ３４が透過状態にあるときは、２個のＣ
ＣＤ３６Ｒ，３６Ｌによって前方の風景を撮像し、例え
ば、前方視界中に“手”があるか否かが検出され、
“手”がある場合には、２個のＣＣＤ３６Ｒ，３６Ｌの
視差に基づいて“手”の位置及びＨＭＤから“手”まで
の距離を求める処理が行われる。また、シャッタ用ＬＣ
Ｄ３４が遮光状態にあるときは、２個のＣＣＤ３６Ｒ，
３６Ｌはファインダ１０Ｒ，１０Ｌ側に１８０度回転
し、ファインダ１０Ｒ，１０Ｌを介してオペレータの目
ＥＲ，ＥＬの画像を撮像する。撮像された目の画像は、
後述するデータメモリ中に格納されたオペレータ別の目
の画像データと比較される。ちなみに、比較処理の際の
目のデータとしては、例えば、角膜（黒目）部分と結膜
（白目）部分との色素分布による比率や、目の周辺部の
形状（眉毛の形状、まぶたの形状、目全体の形状等）、
あるいは、血管の場所が特定できて、かつ、充血しにく
い場合には、目の血管模様等を利用することが考えられ
る。

【００３９】図５は、本実施例のデータ処理装置１の全
体構成を示すブロック図である。

【００４０】本実施例のデータ処理装置１は、ＣＰＵ４
１、ＲＯＭ４２、データメモリ４３、角度センサ４４、
方位センサ４５、赤外線センサ４６、入力部４７、表示
部４８、表示駆動部４９、ページめくり制御回路５０、
無線伝送制御部５１を備え、さらに、装着検出センサ１
３、ＣＣＤ３６Ｒ，３６Ｌを備えている。なお、図５
中、Ｂは、ＣＰＵ４１、ＲＯＭ４２、データメモリ４
３、角度センサ４４、方位センサ４５、赤外線センサ４
６、入力部４７、表示駆動部４９、ページめくり制御回
路５０、無線伝送制御部５１、装着検出センサ１３、Ｃ
ＣＤ３６Ｒ，３６Ｌをそれぞれ接続する信号伝送路とな
るバスであり、１０１はプリンタ、１０２は外部記憶装
置である。

【００４１】ＣＰＵ４１は、データ処理装置１内の各部
を制御する各種制御信号を、バスＢを介して各回路に出
力するものであり、また、ＣＰＵ４１は、入力部４７か
らの入力情報に基づいて表示駆動部４９及びページめく
り制御回路５０を制御して表示部４８に所定の表示を行
うとともに、無線伝送制御部５１を制御してデータ処理
装置１内で処理された各種データを電波に変換してプリ
ンタ１０１や外部記憶装置１０２に必要なデータを送信
するものである。

【００４２】ＲＯＭ４２は、データ処理装置１内で利用
されるプログラムやデータ等を格納する半導体メモリで
ある。

【００４３】データメモリ４３は、ＣＰＵ４１により実
行される処理において利用される各種データ、すなわ
ち、表示データ、“手”のイメージデータ、オペレータ
別の目のデータ等を格納するととも、データ処理におけ
る作業領域となるワークエリアを有する半導体メモリで
ある。なお、表示データは、光学系表示ユニット２によ
り表示される各種メニュー画面等の表示データであり、
“手”のイメージデータは、ＨＭＤの前方視界中に検出
する“手”の画像に基づいて光学系表示ユニット２によ
り表示される仮想的な“手”のデータ、また、オペレー
タ別の目のデータは、正規のオペレータの目ＥＲ，ＥＬ
の画像、すなわち、オペレータの認識を行うための比較
基準となる画像データである。

【００４４】角度センサ４４は、例えば、ナビゲーショ
ンシステムやジャイロシステム等に用いられるように、
“ゆれ”の検出を行うことにより、データ処理装置１で
あるＨＭＤが水平状態から何度傾いているかを検出する
センサである。本実施例では、図６に示すように、鉛直
方向から図６中、右回りに所定の角度だけ回転した位置
を基準点位置（０度位置）に設定し、９０度位置におい
ては、わずかに上向きとなるように設定されている。

【００４５】方位センサ４５は、データ処理装置１であ
るＨＭＤが基準位置から左または右方向に何度回転して
いるかを検出するセンサである。本実施例では、図７に
示すように、「北」の方位を基準点位置（図７中、Ｎ）
に設定し、図７中、右回りに何度回転しているかを検出
するようになっている。

【００４６】赤外線センサ４６は、ＣＣＤ３６Ｒ，３６
Ｌによって検出される“手”の画像が、例えば、おもち
ゃの“手”であった場合等のように、誤認識を防止する
ため、ＣＣＤ３６Ｒ，３６Ｌによって前方視界中の
“手”を検出し、かつ、“手”の位置及びＨＭＤから
“手”までの距離が求められた後、ＣＣＤ画像と“手”
のイメージデータとが一致したら、“手”の位置及び距
離に基づいて“手”のイメージデータが位置する場所に
熱反応があるか否かをチェックするものであり、熱反応
が検出された場合、ＣＰＵ４１によって“手”があると
判断し、熱反応が検出されない場合、ＣＰＵ４１によっ
てＣＣＤ３６Ｒ，３６Ｌが誤認識したものと判断する。

【００４７】入力部４７は、データ処理装置１でキー入
力を可能とするために設けられた仮想的な入力部であ
る。これは、本実施例のデータ処理装置１はディスプレ
イ部だけで構成され、特別にキーボード等の入力部を持
っていないため、データメモリ４３中の表示データとし
て、表示部４８にキーボードを表示するとともに、透過
して映し出される“手”を重ね合わせて表示することに
より、両者の位置関係を明確にしてキー入力を可能とす
るものである。

【００４８】表示部４８は、図３に示すように、オペレ
ータの左右の目にそれぞれ対応する２つの画像を表示す
る光学系表示ユニット２内の光学ユニット（バックライ
ト２１，ＬＣＤ２２Ｒ，２２Ｌ，凹レンズ２３Ｒ，２３
Ｌ等）及び機器ケース３内の光学ユニット（凸レンズ３
２Ｒ，３２Ｌ，反射マジックミラー３５等）から構成さ
れ、２つの画像が合成される点に固定することで、左右
のファインダ１０Ｒ，１０Ｌから覗き見た画像は自然な
状態で合成されて表示される。

【００４９】表示駆動部４９は、ＬＣＤ２２Ｒ，２２Ｌ
によって画像表示を行うためにＬＣＤ２２Ｒ，２２Ｌを
駆動するディスプレイ駆動部であり、具体的には、ＣＰ
Ｕ４１の処理に基づいて生成される画像データをＬＣＤ
２２Ｒ，２２Ｌの画素数に対応する所定ビットのアナロ
グ映像信号（アナログＲＧＢ信号）に変換し、このアナ
ログ映像信号をＬＣＤ２２Ｒ，２２Ｌに出力するもので
ある。

【００５０】ページめくり制御回路５０は、後述する制
御に基づいて入力データを各ＬＣＤ２２Ｒ，２２Ｌにそ
れぞれのタイミングで出力し、あたかも本のページをめ
くるかのような表示データの切り換え表示を行うもので
ある。

【００５１】無線伝送制御部５１は、データ処理装置１
内で処理された各種データを電波に変換して送信するも
のである。これは、本実施例のデータ処理装置１はディ
スプレイ部だけで構成されており、データ処理装置１単
体では処理データの出力ができないため、例えば、後述
するプリントアウト処理を行う場合は、プリントアウト
したい所望のデータを無線伝送制御部５１によって周波
数変調または振幅変調等により変調し、このデータを電
波として外部のプリンタ１０１に出力したり、また同様
に、重要なデータを保管する場合は、保管したい所望の
データを電波に変換して外部記憶装置１０２に出力した
りするものである。この場合、本実施例と同一のデータ
処理装置１との間でデータの送受も可能となり、さら
に、１つのホストステーションからの送信電波を、本実
施例と同一構成の複数のデータ処理装置１で受信するこ
とで、共通の画像を見ることもでき、例えば、会議等に
も利用することができる。

【００５２】次に、本実施例の動作を説明する。

【００５３】図８は、本実施例のデータ処理装置１の起
動時におけるオペレータの認識処理のフローチャートで
ある。

【００５４】以下、図８に基づいてデータ処理装置１に
よるオペレータ認識処理について説明する。なお、図８
に示すＣＰＵ４１の処理動作に対応するプログラムは、
ＲＯＭ４２に格納されている。

【００５５】まず、本実施例におけるデータ処理装置１
がオペレータに装着され、電源オン・オフスイッチ６が
オンされると、ＨＭＤの表示部４８にはメニュー画面が
表示され（ステップＳ１）、この状態で、メニュー切換
ダウン指示キー８またはメニュー切換アップ指示キー９
の押下状態がチェックされ（ステップＳ２）、メニュー
切換ダウン指示キー８またはメニュー切換アップ指示キ
ー９が押された場合、切換指示に基づいてメニュー内容
が切り換えられる（ステップＳ３）。

【００５６】一方、上記ステップＳ２の処理において、
メニュー切換ダウン指示キー８またはメニュー切換アッ
プ指示キー９が押されていない場合、続いて指定キー７
の押下状態がチェックされ（ステップＳ４）、指定キー
が押されていない場合、上記ステップＳ２からの処理が
繰り返される。

【００５７】ステップＳ４の処理において、指定キー７
が押下された場合、装着検出センサ１３によりＨＭＤが
装着されているか否かがチェックされ（ステップＳ
５）、装着されていない場合、後述するステップＳ１２
のエラー処理に進む。

【００５８】ステップＳ５の処理において、ＨＭＤの装
着が確認されると、ＣＣＤ３６Ｒ，３６Ｌが反転され、
ファインダ１０Ｒ，１０Ｌ方向に向きが変えられる（ス
テップＳ６）。

【００５９】そして、各ＣＣＤ３６Ｒ，３６Ｌによって
オペレータの目ＥＲ，ＥＬの画像が撮像されるとともに
（ステップＳ７）、目の画像が解析され、左右の目の画
像データが生成される（ステップＳ８）。

【００６０】次いで、ステップＳ８で目の画像データが
ちゃんと生成されたか否かがチェックされ（ステップＳ
９）、生成されていなかった場合、後述するステップＳ
１２のエラー処理に進み、生成された場合、生成された
目の画像データとデータメモリ４３中のオペレータ別の
目のデータとがＣＰＵ４１によって比較され、登録され
たオペレータの目ＥＲ，ＥＬのデータ（例えば、前述の
黒目部分と白目部分と色素比率等）と一致するか否かが
チェックされる（ステップＳ１０）。

【００６１】ステップＳ１０のチェックの結果、登録さ
れた目のデータとＨＭＤを装着するオペレータの目Ｅ
Ｒ，ＥＬのデータとが一致する場合、ＣＰＵ４１は正規
のオペレータによる使用と判断し、指定メニューに応じ
て各機能処理が行われる初期メニュー画面に切り換えら
れ（ステップＳ１１）、一方、ステップＳ１０のチェッ
クの結果、登録された目のデータとＨＭＤを装着するオ
ペレータの目ＥＲ，ＥＬのデータとが不一致の場合、Ｃ
ＰＵ４１は現在ＨＭＤを装着しているオペレータは、登
録者以外のオペレータによる不正使用と判断し、所定の
エラー処理が実行される（ステップＳ１２）。

【００６２】ステップＳ１１またはステップＳ１２の処
理が終了すると、ＣＣＤ３６Ｒ，３６Ｌが反転されてＣ
ＣＤ３６Ｒ，３６Ｌは再びＨＭＤの前方方向に向きが変
えられ（ステップＳ１３）、オペレータの認識処理が終
了する。

【００６３】以上ステップＳ１からステップＳ１３の処
理により、オペレータの認識処理において、正規のオペ
レータによる使用であると判断されると、図９（ａ）に
示すような初期メニュー画面が表示される。ちなみに、
図９（ａ）に示す例では、選択項目して“データ入力・
編集”、“データ認識入力”、“録画”、“再生”の項
目が表示されており、“データ入力・編集”の項目に枠
カーソルがある状態を示している。この状態において、
メニュー切換ダウン指示キー８を押すと枠カーソルは図
中下方向に移動し、また、メニュー切換アップ指示キー
９を押すと枠カーソルは図中上方向に移動して目的の項
目を反転表示する。

【００６４】ここで、図９（ａ）に示すように、“デー
タ入力・編集”の項目に枠カーソルがある状態で指定キ
ー７が押されると、“データ入力・編集”の機能が選択
され、図９（ｂ）に示すようなデータメニュー画面が表
示される。なお、図９（ｂ）中、Ａは、表示すべきデー
タのレイアウトを示したり、指定するためのレイアウト
ウィンドウ、Ｂは、図９（ａ）の初期メニュー画面で選
択された項目を表示する動作項目表示ウィンドウであ
り、これによって現在の動作内容が確認できる。Ｃは、
編集する文書または表データのファイル名を示したり、
編集する文書または表データのファイル名を指定するた
めのファイル名ウィンドウであり、Ｄは、仮想キーボー
ドを指定するためのキーボード指定ウィンドウである。

【００６５】次いで、図１０〜図１２に示すフローチャ
ートに基づいてデータ入力・編集処理を説明する。な
お、図１０は、データ入力・編集処理を示すフローチャ
ートである。

【００６６】図９（ｂ）に示すデータメニュー画面にお
いて、データ入力・編集処理時には、仮想キーボードの
データがデータメモリ４３から読み出されて次の処理に
は進めない。このため、まず、仮想キーボードが指定に
より表示されているか否かがチェックされ（ステップＳ
２１）、仮想キーボードが表示されている場合は次ステ
ップに進み、一方、仮想キーボード表示されていない場
合は、後述するキーボード指定処理が実行され（ステッ
プＳ２２）、仮想キーボードが表示される。

【００６７】この仮想キーボード上には、「読出キー」
という特別なキーが用意されており、「読出キー」が選
択されたか否かがチェックされる（ステップＳ２３）。

【００６８】ステップＳ２３の処理において、「読出キ
ー」が選択された場合、記憶ファイル名の一覧がウィン
ドウ表示され（ステップＳ２４）、この状態で仮想キー
ボード上の「カーソルキー」が操作されると（ステップ
Ｓ２５）、カーソル位置が変更され、変更されたカーソ
ル位置にあるファイル名に表示内容が更新される（ステ
ップＳ２６）。

【００６９】次いで、ウィンドウの入力指定の有無がチ
ェックされ（ステップＳ２７）、入力指定がある場合、
指定位置と対応するファイルデータの読み出しが行われ
（ステップＳ２８）、先の表示を消してレイアウトウィ
ンドウが再表示される（ステップＳ２９）。

【００７０】ここで、再度ウィンドウの入力指定の有無
がチェックされ（ステップＳ３０）、入力指定がある場
合、ファイルデータの配置処理が行われ（ステップＳ３
１）、配置されたファイルデータが表示されるととも
に、ファイル名ウィンドウが消去され（ステップＳ３
２）、データ入力・編集処理が終了する。

【００７１】一方、上記ステップＳ２７の処理及びステ
ップＳ３０の処理において、ウィンドウの入力指定がな
かった場合、仮想キーボード上の「クリアキー」の押下
の有無がチェックされ（ステップＳ３３）、「クリアキ
ー」が押されていれなければ、上記ステップＳ２４から
の処理が繰り返し実行され、「クリアキー」が押されて
いれば、データ入力・編集処理を終了する。

【００７２】また、上記ステップＳ２３の処理におい
て、「読出キー」が選択されなかった場合、「読出キ
ー」と同様に仮想キーボード上に用意された「書込キ
ー」が選択されたか否かがチェックされる（ステップＳ
３４）。

【００７３】ステップＳ３４の処理において、「書込キ
ー」が選択されなかった場合は、別処理へと進み、「書
込キー」が選択された場合、記憶ファイル名の一覧がウ
ィンドウ表示されるとともに（ステップＳ３５）、入力
指定の有無がチェックされる（ステップＳ３６）。

【００７４】そして、入力指定がある場合、表示データ
が指定されたか否かがチェックされ（ステップＳ３
７）、表示データの指定が確認されると、指定された表
示データの内容を対応するファイルに書き込み（ステッ
プＳ３８）、データ入力・編集処理が終了する。

【００７５】なお、上記ステップＳ３６の処理で入力指
定がない場合、新規にファイルファイルを作成するか否
かが問われ（ステップＳ３９）、新規作成ファイルの入
力であれば、新規にファイルが作成され（ステップＳ４
０）、上記ステップＳ３７からの処理が実行される。

【００７６】また、新規作成ファイルの入力ではない場
合、ファイル名の更新と判断し、「カーソルキー」が操
作されると（ステップＳ４１）、カーソル位置が変更さ
れ、変更されたカーソル位置にあるファイル名に表示内
容が更新されるとともに（ステップＳ４２）、上記ステ
ップＳ３５からの処理が実行される。

【００７７】ステップＳ４１の処理において、「カーソ
ルキー」の操作がない場合は、仮想キーボード上の「ク
リアキー」の押下の有無がチェックされ（ステップＳ４
３）、「クリアキー」が押されていなければ、上記ステ
ップＳ３５からの処理が繰り返し実行され、「クリアキ
ー」が押されていれば、データ入力・編集処理を終了す
る。

【００７８】図１１は、図１０中におけるキーボード指
定処理を示すフローチャートである。

【００７９】図１１に示すように、キーボード指定処理
では、まず始めに後述する入力指定処理が実行され（ス
テップＳ５１）、入力指定処理において、キーボードウ
ィンドウが指定されたか否かがチェックされる（ステッ
プＳ５２）。

【００８０】ステップＳ５２の処理において、キーボー
ド指定ウィンドウが指定されない場合、仮想キーボード
上の「クリアキー」の指定の有無がチェックされ（ステ
ップＳ５３）、「クリアキー」が指定されていた場合は
記憶されたキーボードデータをクリアし、初期状態とし
た後に（ステップＳ５４）、上記ステップＳ５１からの
処理が繰り返し実行される。ここで、「クリアキー」が
指定されていなかった場合は、図９（ｂ）に示すデータ
メニュー画面が指定されたか否かがチェックされ（ステ
ップＳ５５）、データメニュー画面の指定が行われた場
合、キーボード指定処理が終了する。

【００８１】そして、上記ステップＳ５５の処理におい
て、データメニュー画面の指定が行われなかった場合、
固定フラグをオンであるか否かがチェックされる（ステ
ップＳ５６）。ここで、固定フラグがオンである場合
は、ＨＭＤの移動に伴う視野の変化に関りなく、仮想キ
ーボードを表示部４８の中央位置に固定して表示するも
のであり、固定フラグがオフである場合は、実キーボー
ドと同様に、所定の位置に仮想キーボードが配置され、
ＨＭＤの移動によりキーボードが視野に入ったり入らな
かったりする表示モードとなる。

【００８２】すなわち、固定フラグがオンである場合、
仮想キーボードが固定表示されるモードであると判断さ
れて上記ステップＳ５１からの処理が繰り返し実行さ
れ、また、固定フラグがオフである場合、角度センサ４
４により現在のＨＭＤの角度が検出されるとともに、方
位センサ４５により現在のＨＭＤの方向が検出され、そ
れぞれの値（角度及び方位）が表示部４８に表示される
（ステップＳ５７）。そして、ＨＭＤの移動によりキー
ボードを表示すべきエリアに入った場合（ステップＳ５
８）、キーボードエリア分の仮想キーボードが表示部４
８に表示され（ステップＳ５９）、キーボードエリアに
入っていない場合には、上記上記ステップＳ５１からの
処理が繰り返し実行される。

【００８３】一方、上記ステップＳ５２の処理におい
て、キーボード指定ウィンドウが指定された場合、レイ
アウトウィンドウの指定の有無がチェックされる（ステ
ップＳ６０）。

【００８４】レイアウトウィンドウは、キーボード指定
ウィンドウによる指定に先立って指定されるものであ
り、レイアウトウィンドウが指定されていない場合、Ｈ
ＭＤ位置がどこに向いていようとも仮想キーボードを正
面中央位置に表示するために、現在のＨＭＤの角度及び
方位に対応する記憶位置にキーボードデータが記憶され
（ステップＳ６１）、仮想キーボードの表示が固定的に
実行されるモードとなる（ステップＳ６２）。このと
き、固定フラグがオンとなり（ステップＳ６３）、仮想
キーボードのレイアウト位置が表示されるとともに（ス
テップＳ６４）、上記ステップＳ５１からの処理が繰り
返し実行される。

【００８５】また、レイアウトウィンドウが指定されて
いる場合、レイアウト位置に対応するデータメモリ４３
にキーボードデータが記憶され（ステップＳ６５）、Ｈ
ＭＤがその位置に向いた場合にのみ仮想キーボードが表
示されるモードとなり、上記ステップＳ６４の処理に進
む。

【００８６】図１２は、図１１中における入力指定処理
を示すフローチャートである。

【００８７】図１２に示すように、入力指定処理では、
まず、以前のキーボート指定ウィンドウの内容がクリア
（初期化）され（ステップＳ７１）、次いで、ＣＣＤ３
６Ｒ，３６ＬによりＨＭＤ前方の画像が撮像されて取り
込まれる（ステップＳ７２）。

【００８８】そして、取り込まれた画像データ中に、オ
ペレータの“手”のイメージデータが存在するか否かが
チェックされ（ステップＳ７３）、“手”のイメージデ
ータが存在しない場合は入力指定処理を終了する。

【００８９】また、“手”のイメージデータが存在する
場合、キー表示位置に対するオペレータの“手”の位置
が求められ（ステップＳ７４）、“手”のイメージ位置
に赤外線センサ４６による熱反応があるか否かがチェッ
クされ（ステップＳ７５）、熱反応が検出されない場合
は、誤認識と判断して入力指定処理を終了する。

【００９０】次いで、最初の立ち上げ時には入力指定を
指定キー７の押下により指定しているが、この状態にお
いては、仮想キーボードからの入力状態となっているた
め、入力指定は指定表示位置にあるか否かがチェックさ
れ（ステップＳ７６）、指定表示位置外である場合、入
力指定処理を終了する。

【００９１】上記ステップＳ７６の処理において、仮想
キーボードと“手”のイメージデータとが重なってお
り、ＣＰＵ４１により指定表示位置における入力指定で
ある判断されると、仮想キーボード上の“手”のイメー
ジデータと重なっているキーの輝度が変更（例えば、輝
度のアップ）され（ステップＳ７７）、“手”のイメー
ジデータがどのキーに触れているかがわかるようになっ
ている。この場合、透過して映し出されている“手”と
仮想キーボードとの表示状態は図１２に示すようになっ
ている。

【００９２】ここで、“手”の先端がＨＭＤから一定距
離以上にあるか否か、例えば、ＨＭＤよりも６０ｃｍ以
上離れたところにあるか否かが２つのＣＣＤ３６Ｒ，３
６Ｌによって検出され（ステップＳ７８）、“手”の先
端位置が一定距離に達していない場合、入力指定処理を
終了する。

【００９３】上記ステップＳ７８の処理において、
“手”の先端位置が一定距離に達していると判断される
場合、仮想キーボードに対してキー入力が可能な状態と
なり、仮想キーボート上のキーを一定以上押し込むと、
対応するキーが一定時間ブリンクするようになってい
る。

【００９４】そして、入力指定処理の終了後に、この入
力指定処理を呼び出す処理中において入力指定処理での
各種処理データを利用するために、“手”の位置に相当
するキーまたはウィンドウ内容等がデータメモリ４３に
記憶される（ステップＳ７９）。

【００９５】図１３は、本実施例のＨＭＤにおける実際
の表示例を示す図である。

【００９６】なお、図１３中、Ｅは、方位センサ４５に
よって検出されるＨＭＤの方位を示す表示、Ｆは、角度
センサ４４によって検出されるＨＭＤの角度を示す表
示、Ｇは、所定の領域に指定された文書や表データ等が
どのように配置されているかを示すレイアウトウィンド
ウ、Ｈは、透過して映し出された“手”、Ｉは、仮想キ
ーボード、Ｊは、ファイル名ウィンドウ、Ｋは、現在オ
ープンされている文書データ、Ｌは、ＨＭＤが透過状態
にあるため見える周囲の状態であり、本例では、電気ス
タンドが見えている状態を示している。

【００９７】このように、本実施例のデータ処理装置１
（ＨＭＤ）では、ハーフミラーとなる反射マジックミラ
ー３５によって透過してきた周囲の状態も重複して表示
部４８に映し出される。

【００９８】図１４は、一定時間毎に実行される表示処
理を示すフローチャートである。

【００９９】この表示処理では、まず、角度センサ４４
及び方位センサ４５によってＨＭＤの角度及び方位が検
出され（ステップＰ１）、検出された角度及び方位が表
示部４８に表示されるとともに、現在のＨＭＤの位置に
対応するデータメモリ４３中の表示データの対応エリア
が検索されてポインタが移動される（ステップＰ２）。

【０１００】そして、この対応エリアに表示すべきデー
タがあるか否かがチェックされ（ステップＰ３）、対応
エリア中に表示データがある場合は、次処理に移り、対
応エリア中に表示データがない場合は、表示処理を終了
する。

【０１０１】対応エリアに表示データがある場合、現在
の表示モードを示す固定フラグがチェックされる（ステ
ップＰ３）。

【０１０２】ここで、固定フラグがオンである場合、現
在の表示モードはキーボード固定表示であると判断さ
れ、仮想キーボードが表示部４８の中央位置に表示され
る（ステップＰ５）。

【０１０３】そして、対応エリア中の表示すべき表示デ
ータが仮想キーボードの表示に重なるか否かがチェック
され（ステップＰ６）、重なる場合は、仮想キーボード
を表示する分の表示エリアだけ対応エリア中の表示デー
タを移動して表示する。

【０１０４】具体的には、例えば、図１５（ａ）に示す
ように、対応エリアを示す表示エリアポインタ左位置と
表示エリアポインタ右位置との間にＲ０，Ｒ１，Ｒ２と
いう表示データがある場合、図１５（ｂ）に示すよう
に、仮想キーボードを表示する分だけ表示データを、図
１５中上方向に移動させて仮想キーボードを固定表示す
る（ステップＰ７）。

【０１０５】一方、上記ステップＰ４の処理において固
定フラグがオフであった場合、また、上記ステップＰ６
の処理において表示エリア中に仮想キーボードと重なる
表示データがなかった場合は、対応エリアのデータをそ
のまま表示する（ステップＰ８）。この場合、ステップ
Ｐ４の処理において固定フラグがオンとなって、かつ、
仮想キーボードと重ならない場合には仮想キーボートと
対応エリアのデータとを合成して表示する必要がある。

【０１０６】本実施例のデータ処理装置１において、Ｈ
ＭＤの位置に基づいて順次表示される表示データは、図
１６に示すように、その表示されているデータを仮想的
なキーボードの入力と同様に、“手”のイメージデータ
によって指定することによって（本実施例の場合、
“手”の先端で押すという動作により指定）他の表示位
置に移動することができる。

【０１０７】以下、図１６に基づいて表示データ移動処
理を説明する。

【０１０８】図１６は、表示データ移動処理を示すフロ
ーチャートである。

【０１０９】まず、入力指定はデータ表示位置であるか
否かがチェックされ（ステップＱ１）、データ表示位置
にない場合は別処理に進む。一方、データ処理位置にあ
る場合は、表示位置に対する“手”の位置が求められ、
求められた位置が基準位置として記憶される（ステップ
Ｑ２）。

【０１１０】次いで、“手”の先端がＨＭＤから一定距
離（この場合、６０ｃｍ）以上にあるか否かが２つのＣ
ＣＤ３６Ｒ，３６Ｌによって検出され（ステップＱ
３）、“手”の先端位置が一定距離に達していない場
合、表示データ処理を終了する。

【０１１１】上記ステップＱ３の処理において、“手”
の先端位置が一定距離に達していると判断される場合、
ＨＭＤの位置が移動しているか否かがチェックされ（ス
テップＱ４）、移動していなければ、上記ステップＱ３
の処理に戻り、移動していれば、移動速度が求められ、
求められた移動速度が一定以上の速度であるか否かがチ
ェックされる（ステップＱ５）。そして、移動速度が一
定値以上である場合、オペレータに装着されたＨＭＤは
移動中であると判断されて上記ステップＱ４の処理に戻
り、再度ＨＭＤの位置移動がチェックされる。

【０１１２】上記ステップＱ５の処理で移動速度が一定
値よりも遅くなった場合、移動位置が基準位置として設
定され、表示データの移動が行われ（ステップＱ６）、
後述する表示データの配置処理が行われるとともに（ス
テップＱ７）、レイアウト表示が変更されて（ステップ
Ｑ８）、表示データ移動処理が終了する。

【０１１３】すなわち、ある領域内において、ＨＭＤの
移動前に指定された表示データを退避させ、ＨＭＤの移
動後に退避した位置を基準として、表示データを移動さ
せて再配置する処理が行われる。

【０１１４】次に、上記ステップＱ７における配置処理
を図１７に基づいて説明する。

【０１１５】図１７は、配置処理を示すフローチャート
である。

【０１１６】前述した表示データの移動に伴い、移動先
にすでに表示データが存在し、表示データ同士が重なる
場合（ステップＱ１１）、移動すべき表示データと重な
らない位置に重なる表示データが再配置される（ステッ
プＱ１２）。

【０１１７】次いで、再配置による元の表示データの移
動先についても上記ステップＱ１１の処理と同様に、移
動する表示データが重ならないかどうかがチェックされ
（ステップＱ１３）、重ならない場合は、上記ステップ
Ｑ１１の処理に戻り、重なる場合は、重なる表示データ
を重ならない位置に再配置され（ステップＱ１４）、重
なりがなくなるまで上記ステップＱ１３，Ｑ１４の処理
が繰り返し実行される。

【０１１８】この場合、重なるデータが複数ある場合
は、重なっている比率の高いデータから再配置が行われ
る。

【０１１９】ちなみに、例えば、表示データが表示領域
いっぱいに表示されているときに表示データを移動する
場合、永久に重なり状態が解消されないために上記ステ
ップＱ１３，Ｑ１４の間の処理が繰り返されることによ
る無限ループが発生する。このため無限ループの発生を
防止するために、何らかの理由によって重なり状態が一
定時間以上解消されない場合は、エラー報知し、元の状
態に復帰するようにしている。

【０１２０】図１８は、仮想キーボードの移動処理を示
すフローチャートである。

【０１２１】仮想キーボートの移動の場合、まず、移動
キー７が選択されているか否かがチェックされ（ステッ
プＱ２１）、選択されていなければ別処理に進み、選択
されていれば、ＨＭＤの位置が移動しているか否かがチ
ェックされ（ステップＱ２２）、移動していなければ、
上記ステップＱ２１の処理に戻り、移動していれば、移
動速度が求められ、求められた移動速度が一定以上の速
度であるか否かがチェックされる（ステップＱ２３）。
そして、移動速度が一定値以上である場合、オペレータ
に装着されたＨＭＤは移動中であると判断されて上記ス
テップＱ２１の処理に戻り、再度ＨＭＤの位置移動がチ
ェックされる。

【０１２２】上記ステップＱ２３の処理で移動速度が一
定値よりも遅くなった場合、移動位置が基準位置として
設定され、仮想キーボードの移動が行われ（ステップＱ
２４）、仮想キーボードの移動に伴い、移動先にすでに
表示データが存在し、仮想キーボードと表示データとが
重なる場合（ステップＱ２５）、仮想キーボードと重な
らない位置に仮想キーボードと重なる表示データが再配
置される（ステップＱ２６）。

【０１２３】次いで、再配置による元の表示データの移
動先についても上記ステップＱ２５の処理と同様に、移
動する表示データが重ならないかどうかがチェックされ
（ステップＱ２７）、重ならない場合は、上記ステップ
Ｑ２５の処理に戻り、重なる場合は、重なる表示データ
を重ならない位置に再配置し（ステップＱ２８）、重な
りがなくなるまで上記ステップＱ２７，Ｑ２８の処理が
繰り返し実行される。そして、上記ステップＱ２５の処
理において、移動先の表示データと重ならない状態とな
った時点で、レイアウト表示が変更されて（ステップＱ
２９）、仮想キーボードの移動処理が終了する。

【０１２４】すなわち、仮想キーボードに対しても前述
の表示データと同様に移動させることができるが、この
場合、仮想キーボードの配置位置が優先される以外は、
表示データの移動とほぼ同様の処理となる。

【０１２５】図１９は、本実施例のデータ処理装置１の
プリントアウト処理のフローチャートである。

【０１２６】前述したように、本実施例のデータ処理装
置１は、ＨＭＤ（ディスプレイ部）だけで構成されてお
り、データ処理装置１単体では処理データの出力ができ
ないため、無線伝送制御部５１によって、データ処理装
置１内で処理された各種データを電波に変換してプリン
タ１０１に送信している。

【０１２７】具体的には、図１９に示すように、まず、
仮想キーボード中の「印字キー」が選択されているか否
かがチェックされ（ステップＲ１）、選択されていなけ
れば別処理に進み、選択されていれば、表示領域が指定
されているか否かがチェックされ（ステップＲ２）、指
定されていなければ、さらに仮想キーボード上の「クリ
アキー」の指定の有無がチェックされ（ステップＲ
３）、「クリアキー」が指定されていた場合は記憶され
たキーボードデータをクリアし、初期状態とした後にプ
リントアウト処理を終了する。ここで、「クリアキー」
が指定されていなかった場合は、再度、上記ステップＲ
２の処理が実行される。

【０１２８】一方、上記ステップＲ２の処理において、
表示領域が指定されていた場合、指定表示領域中のデー
タが無線伝送制御部５１に出力され、プリントアウトし
たい指定表示領域中のデータが無線伝送制御部５１によ
って周波数変調または振幅変調等により変調され、この
データを電波として外部のプリンタ１０１に伝送され
る。

【０１２９】以下、図２０〜図２４に基づいてページめ
くり制御処理について詳細に説明する。

【０１３０】図２０は、ページめくり制御回路５０の要
部構成を示すブロック図である。

【０１３１】ページめくり制御回路５０は、図２０に示
すように、ページめくり表示データ変換部７１、前表示
データ第一記憶部７２、前表示データ第二記憶部７３、
現在表示データ第一記憶部７４、現在表示データ第二記
憶部７５、後表示データ第一記憶部７６、後表示データ
第二記憶部７７から構成されている。

【０１３２】ページめくり表示データ変換部７１は、Ｃ
ＰＵ４１からの変換制御命令とＣＰＵ４１から指定され
る表示位置データとに基づいて、前表示データ第一記憶
部７２、前表示データ第二記憶部７３、現在表示データ
第一記憶部７４、現在表示データ第二記憶部７５、後表
示データ第一記憶部７６、後表示データ第二記憶部７７
にそれぞれ格納される表示データ中の所定の表示データ
を出力するものであり、“手”の位置に応じた表示位置
データに基づいてページをめくっている状態を作り出す
ものである。

【０１３３】本実施例における表示データの表示領域と
しては、左右２画面の領域からなる表示領域を確保して
いるため、表示データ記憶部としてビデオＲＡＭから構
成される、現在表示されている前の表示データを格納す
る前表示データ第一記憶部７２及び前表示データ第二記
憶部７３と、現在の表示データを格納する現在表示デー
タ第一記憶部７４及び現在表示データ第二記憶部７５
と、現在表示されている後の表示データを格納する後表
示データ第一記憶部７６及び後表示データ第二記憶部７
７とのそれぞれ２画面分の記憶部を備えている。

【０１３４】以下、例えば、図２１に示すようなデータ
をページめくり表示させる場合を例に採り、本実施例の
ページめくり制御処理を説明する。

【０１３５】ここで、図２１は、本実施例のページめく
り制御処理を説明するための図であり、図２１中のＣで
示す斜線部のデータとＤで示すデータとが表示されてい
るものとし、データＣをページめくりの表示とする。ま
た、仮想キーボード上には、ページめくり表示を行うた
めの「ページめくりキー」が設けられ、データＣの表示
領域を手で指定することにより、前後ページの表示デー
タが図２３に示す各表示データのように表示されるもの
とする。

【０１３６】図２２は、ページめくり制御処理を示すフ
ローチャートである。

【０１３７】まず、「ページめくりキー」による入力指
定が行われたか否かがチェックされ（ステップＴ１）、
「ページめくりキー」が押されていない場合は別処理に
進み、「ページめくりキー」が押されている場合、表示
データの指定の有無がチェックされる（ステップＴ
２）。このステップＴ２の処理で表示データの指定がな
い場合、仮想キーボード上の「クリアキー」の指定の有
無がチェックされ（ステップＴ３）、「クリアキー」が
指定されていた場合は記憶されたキーボードデータをク
リアし、初期状態とした後にページめくり処理を終了す
る。ここで、「クリアキー」が指定されていなかった場
合は、再度、上記ステップＴ２の処理が実行される。

【０１３８】一方、上記ステップＴ２の処理において、
表示データの指定がある場合、各ページに対応する表示
データが記憶され、入力指定された表示領域のデータが
ページ毎に表示される（ステップＴ４）。

【０１３９】次いで、ページめくりするために、“手”
の先端が一定距離以上移動したか否かがチェックされ
（ステップＴ５）、一定距離以上移動していない場合、
仮想キーボード上の「クリアキー」の指定の有無がチェ
ックされ（ステップＴ６）、「クリアキー」が指定され
ていた場合は記憶されたキーボードデータをクリアし、
初期状態とした後にページめくり処理を終了する。ここ
で、「クリアキー」が指定されていなかった場合は、再
度、上記ステップＴ５の処理が実行される。

【０１４０】上記ステップＴ５の処理において、“手”
の先端が一定距離以上移動している場合、さらに、
“手”の先端が一定距離以内に近づいたか否かがチェッ
クされ（ステップＴ７）、一定距離以内に近づいていな
い場合、仮想キーボード上の「クリアキー」の指定の有
無がチェックされ（ステップＴ８）、「クリアキー」が
指定されていた場合は記憶されたキーボードデータをク
リアし、初期状態とした後にページめくり処理を終了す
る。

【０１４１】一方、上記ステップＴ７の処理において、
“手”の先端が一定距離以内に近づいた場合、ＨＭＤの
位置が検出される（ステップＴ９）。ちなみに、上記ス
テップＴ５及びステップＴ６の処理では、図２４に示す
ように、“手”が本のページをめくるような動作をとっ
たか否かをチェックするものである。なお、図２４は、
ページめくり動作を説明するための図である。

【０１４２】ステップＴ９の処理において、ＨＭＤの位
置が検出されると、ＨＭＤ位置と“手”の位置とに基づ
いて表示位置が算出され（ステップＴ１０）、算出され
た表示位置に基づいて該当ページの表示データがページ
めくり制御回路５０により表示部４８に出力される（ス
テップＴ１１）。

【０１４３】次いで、“手”の先端が先の移動方向に対
して反対方向に略水平に移動したか否かがチェックされ
（ステップＴ１２）、反対方向に水平移動していない場
合、“手”の先端位置が一定時間以上移動していないか
がチェックされ（ステップＴ１３）、一定時間以上移動
が検出されない場合は処理を終了し、移動が検出される
場合は、上記ステップＴ９の処理から繰り返し実行され
る。

【０１４４】上記ステップＴ１２の処理において、
“手”の先端が反対方向に水平移動している場合、
“手”の移動停止がチェックされ（ステップＴ１４）、
移動が停止されるまで上記ステップＴ９の処理から繰り
返し実行され、移動が停止したら、移動方向に応じて各
ページの表示データが入れ換えられて現在表示データが
表示され（ステップＴ１５）、上記ステップＴ５からの
処理が繰り返される。

【０１４５】したがって、本実施例におけるページめく
り制御処理においては、図２３（ａ）の左側に示すよう
な順方向のページめくり切り換え表示を行う場合、図２
４（ａ）に示すような動作を行い、また、図２３（ａ）
の右側に示すような逆方向のページめくり切り換え表示
を行う場合、図２４（ｂ）に示すような動作を行うこと
により、ＨＭＤよりも一定距離だけ“手”が離れていれ
ば、表示ページのデータをつまんだものとみなし、さら
に、一定距離以内で“手”が移動されていれば、ページ
をめくっているものとみなして表示データをページめく
り表示に変換するため、各データをページめくり表示デ
ータ変換部７１に転送する。

【０１４６】また、“手”が反対方向に略水平に移動す
る場合は、次のページめくりを行うために次のページの
データをつまみにいっているものとみなし、移動停止ま
で何も行わない。そして、移動が停止したら、次のペー
ジめくりのために各ページに対応して表示データが記憶
された各表示データ記憶部のデータを現在表示データに
基づいてシフトしておく。これは、ページめくりが完了
した時点で、めくられた表示データが現在表示データと
なるためである。

【０１４７】以上説明したように、本実施例では、移動
距離検出によって検出される“手”の移動に基づいて表
示部４８により表示される表示データを切り換えること
ができる。

【０１４８】したがって、“手”の移動に基づいて、表
示データを切り換えることができ、これによって、ＨＭ
Ｄ外からの入力に基づいて、表示データの切り換えを行
うことができる。

【０１４９】なお、上記実施例では、移動すべき表示デ
ータまたは仮想キーボードが重なった場合、元の位置に
ある表示データを所定の距離（オフセット）をとって再
描画することにより移動させているが、これに限らず、
移動すべき表示データをずらすことにより移動させても
良く、また、この場合、移動すべき表示データと重なっ
た他の表示データとの双方をずらして移動させるもので
あってもよい。

【０１５０】また、上記実施例は、目のデータとして、
例えば、黒目部分と白目部分との色素分布の比率や、目
の周辺部の形状（眉毛の形状、まぶたの形状、目全体の
形状等）、あるいは、血管の場所が特定でき、充血しに
くい場合には、目の血管模様等が考えられたが、これだ
けに限らず、さらに、シャッタ用ＬＣＤ３４を遮光状態
とし、機器ケース３内を暗くした後、一定照度の光（例
えば、蛍光ランプ等）を照射することにより、オペレー
タの瞳孔内の瞳孔括約筋、瞳孔散大筋、レンズ体のそれ
ぞれの割合を検出することによってオペレータの認識を
行うものであっても構わない。

【０１５１】さらに、上記実施例は、ＨＭＤの前面位置
を透過型として外の景色を直接見ることができるように
構成しているが、ＨＭＤを装着した状態で直接前方の景
色を見ることができなくても、表示ユニットにより生成
された画像と外の景色とを合成して表示する各種ユニッ
トを内蔵することにより、前方の景色を把握するタイプ
のＨＭＤであっても構わない。

【０１５２】

【発明の効果】本発明によれば、請求項１記載の発明で
は、移動距離検出手段によって検出される指定手段の移
動に基づいてデータ表示手段により表示される表示デー
タを切り換えることができる。

【０１５３】なお、この場合、請求項２記載の発明のよ
うに、移動距離検出手段によって指定手段の移動方向を
検出することにより、指定手段の移動方向に対応して表
示データの切り換えを行うことができ、また、請求項３
記載の発明のように、データ表示手段により表示される
表示領域を左右２画面に分割するとともに、この分割さ
れた画面毎に表示データ切換手段によって表示が切り換
えらることにより、請求項４記載の発明のように、移動
距離検出手段で検出された移動方向に基づいて、例え
ば、本のページをめくるような感覚で表示データの切り
換えを行うことができる。

【０１５４】したがって、指定手段の移動に基づいて、
表示データを切り換えることができ、これによって、Ｈ
ＭＤ外からの入力に基づいて、表示データの切り換えを
行うことができる。

【図面の簡単な説明】

【図１】本実施例におけるデータ処理装置を斜め前方か
ら見た図である。

【図２】本実施例におけるデータ処理装置を斜め後方か
ら見た図である。

【図３】本実施例におけるデータ処理装置を横方向から
見た断面図である。

【図４】本実施例におけるデータ処理装置を後方から見
た断面図である。

【図５】本実施例のデータ処理装置の全体構成を示すブ
ロック図である。

【図６】本実施例のデータ処理装置の角度検出を説明す
るための図である。

【図７】本実施例のデータ処理装置の方位検出を説明す
るための図である。

【図８】本実施例のデータ処理装置の起動時におけるオ
ペレータの認識処理のフローチャートである。

【図９】初期メニュー画面及びデータメニュー画面を示
す図である。

【図１０】データ入力・編集処理を示すフローチャート
である。

【図１１】図１０中におけるキーボード指定処理を示す
フローチャートである。

【図１２】図１１中における入力指定処理を示すフロー
チャートである。

【図１３】本実施例のＨＭＤにおける実際の表示例を示
す図である。

【図１４】一定時間毎に実行される表示処理を示すフロ
ーチャートである。

【図１５】仮想キーボードと表示データとの表示例を示
す図である。

【図１６】表示データ移動処理を示すフローチャートで
ある。

【図１７】配置処理を示すフローチャートである。

【図１８】仮想キーボードの移動処理を示すフローチャ
ートである。

【図１９】本実施例のデータ処理装置のプリントアウト
処理のフローチャートである。

【図２０】ページめくり制御回路の要部構成を示すブロ
ック図である。

【図２１】本実施例のページめくり制御処理を説明する
ための図である。

【図２２】ページめくり制御処理を示すフローチャート
である。

【図２３】表示データの表示例を示す図である。

【図２４】ページめくり動作を説明するための図であ
る。

【符号の説明】

１データ処理装置２光学系表示ユニット３機器ケース４ヘッドバンド５ロッドアンテナ６電源オン・オフスイッチ７指定キー８メニュー切換ダウン指示キー９メニュー切換アップ指示キー１０Ｒファインダ１０Ｌファインダ１１支持部１２Ｒイヤホン１２Ｌイヤホン１３装着検出センサ２１バックライト２２ＲＬＣＤ２２ＬＬＣＤ２３Ｒ凹レンズ２３Ｌ凹レンズ３１上部ガラス３２Ｒ凸レンズ３２Ｌ凸レンズ３３前面ガラス３４シャッタ用ＬＣＤ３５反射マジックミラー３６ＲＣＣＤ３６ＬＣＣＤ４１ＣＰＵ４２ＲＯＭ４３データメモリ４４角度センサ４５方位センサ４６赤外線センサ４７入力部４８表示部４９表示駆動部５０ページめくり制御回路５１無線伝送制御部６１Ｌ・Ｒ分離回路６２ＲＲ表示用コントローラ６２ＬＬ表示用コントローラ６３ＲＲ用メモリ６３ＬＬ用メモリ７１ページめくり表示データ変換部７２前表示データ第一記憶部７３前表示データ第二記憶部７４現在表示データ第一記憶部７５現在表示データ第二記憶部７６後表示データ第一記憶部７７後表示データ第二記憶部１０１プリンタ１０２外部記憶装置

フロントページの続き (51)Int.Cl.⁶ 識別記号庁内整理番号ＦＩ技術表示箇所Ｇ０６Ｔ 1/00

Claims

【特許請求の範囲】

【請求項１】筐体中に、内蔵されるディスプレイ手段を
備えるデータ処理装置であって、前記ディスプレイ手段に所定のデータを表示するデータ
表示手段と、該データ表示手段により表示される表示データ中の任意
位置を仮想的に指定する指定手段と、該指定手段により指定された仮想的な指定位置を検出す
る位置検出手段と、該位置検出手段により検出された前記指定手段の位置が
所定距離内で移動したか否かを検出する移動距離検出手
段と、該移動距離検出手段の検出結果に基づいて前記データ表
示手段により表示される表示データを切り換える表示デ
ータ切換手段と、を具備することを特徴とするデータ処理装置。
【請求項２】前記移動距離検出手段は、前記指定手段の
移動を検出する際、該指定手段の移動方向も検出するこ
とを特徴とする請求項１記載のデータ処理装置。
【請求項３】前記表示データ切換手段は、データ表示手
段により表示される所定表示領域を左右２画面に分割
し、該分割された画面毎に表示画像を切り換えることを
特徴とする請求項１または２記載のデータ処理装置。
【請求項４】前記データ切換手段は、前記移動距離検出
手段により検出された移動方向に基づいて表示画像を切
り換えることを特徴とする請求項２または３記載のデー
タ処理装置。