JPH0793088A

JPH0793088A - 仮想操作装置及び方法

Info

Publication number: JPH0793088A
Application number: JP5234372A
Authority: JP
Inventors: Miwako Doi; 美和子土井; Nobuko Kato; 伸子加藤; Naoko Sakata; 直子阪田
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 1993-09-21
Filing date: 1993-09-21
Publication date: 1995-04-07

Abstract

(57)【要約】【目的】本発明は、仮想の３次元空間での、レバーやボ
タン、タッチスクリーン操作などを、自然に、かつ高速
で正確に行えるようにすることを目的としている。【構成】本発明は、レバーやボタンなどの操作対象を３
次元ＣＧを用いて仮想の３次元空間を構成することによ
り提示する提示手段と、親指と人指し指の位置を検知す
る位置検知手段と、位置検知手段が検知した親指と人指
し指の位置と提示手段の３つの座標位置の関係に基づい
て記述された解釈規則をもとにいかなる操作が指示され
たかを解釈する解釈手段とから構成されている。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明はコンピュータ内部に構築
された空間に存在する操作対象を自然に操作するための
仮想操作装置及び方法に関する。

【０００２】

【従来の技術】発電所や工場の監視、制御作業では、コ
ンピュータの導入により、自動化が進み、定常状態で
は、オペレータはほとんど操作する必要性がなく、監視
卓や制御卓のモニタ画面を注視することが主な作業にな
ってきている。しかし、万が一の事故に備えるため、訓
練機を用いて事故時に対応処置の訓練を行っている。訓
練機は、実際の制御や監視に用いる実機と同じ筐体を用
いており、中のソフトウェアは事故現象を模擬するシミ
ュレータに置き換えてある。オペレータはこの訓練機を
用いて、シミュレータが提示する事故現象に対応する処
置をレバーやボタンなどにより、指示を与えていく。こ
のように現状用いられている訓練機は、実機と同様な製
作コストと設置のための空間を必要とするのが問題であ
る。

【０００３】このような問題点を解決するために、事故
現象のシミュレータをワークステーションやパーソナル
・コンピュータ上で動かし、さらに制御卓や監視卓のモ
ニタ画面もその画面上でシミュレータする方法がある。
この方法では、タッチスクリーンにより画面上をタッチ
して、メニューを選択することで指示を与える操作方法
に対しては、マウスなどのポインティング・デバイスで
該当メニューを選択することで代用している。しかし、
画面以外に対して指示を与える様な操作、例えば、卓の
レバーやボタンなどで指示を与える操作方法は、このよ
うな２次元的にＧＵＩ（ＧｒａｐｈｉｃａｌＵｓｅｒ
Ｉｎｔｅｒｆａｃｅ）をシミュレートする方法ではシ
ミュレートしきれない。

【０００４】２次元的なシミュレーションによる問題点
を解決するために、３次元コンピュータ・グラフィック
ス（ＣＧ）を用いて、コンピュータの内部に仮想の訓練
機等を含む３次元空間を構成するような仮想現実感技術
（ＶＲ−ＶｉｒｔｕａｌＲｅａｌｉｔｙ）を用いた方法
が検討されるようになってきた。ＶＲでは操作対象は現
実と同じく３次元空間なので、３次元の位置座標を与え
ることのできる入力デバイスを用いる。

【０００５】３次元位置入力デバイスとしては、単に３
次元位置だけを検出する磁気センサ型のＰｏｌｈｅｍｕ
ｓ社の３ｓｐａｃｅＩｓｏｔｒａｃｋやＡｓｃｅｎ
ｓｉｏｎＴｅｃｈｎｏｌｏｇｙ社のＢｉｒｄなどのも
の、超音波型のＨｏｎｅｙｗｅｌｌ社のセンサ、ＬＥＤ
の光を認識する光学式のものがある。しかし、これらの
デバイスでは、３次元位置が検出できるだけなので、メ
ニューの選択等をおこなうには、別に選択を指示するた
めのボタンなどを別途設けなければならない。

【０００６】メニューの指示なども併せて行えるように
するために、手のジェスチャを識別できるＤａｔａＧｌ
ｏｖｅ（ＶＰＬ社の製品、光ファイバにより関節の曲げ
角度を計測するグローブ型をした入力デバイス）やＣｙ
ｂｅｒＧｌｏｖｅ（Ｃｒｂｅｒ社の製品、特殊な抵抗を
埋め込み、関節の曲げ角度を計測するグローブ型の入力
デバイス）などがある。しかし、これらは高価で、ま
た、使用に際してキャリブレーションが必要であったり
して、結構入力デバイスの操作が煩雑である。訓練機を
想定したときには、レバーやボタンの位置自体は３次元
空間のなかで限定する必要があるが、レバーやボタンな
どの操作は２次元的である。したがって、前述のＤａｔ
ｅＧｌｏｖｅやＣｙｂｅｒＧｌｏｖｅなどのように、３
次元的にジェスチャーを与えるのはオーバースペックで
ある。つまり、これらのデバイスは煩雑な割には、訓練
機など実際に機械を操作する観点では、応答時間やジェ
スチャーの認識精度などの制約があり、レバーやボタン
などの操作を的確に行うことができず、コストパフォー
マンスが非常に悪い。

【０００７】

【発明が解決しようとする課題】上述したように、訓練
機などを設定するには種々精度などの制約や、操作性、
コスト等多くの問題を残していた。本発明は、このよう
な問題に艦みてなされたもので、その目的は仮想の３次
元空間でのレバーやボタン、タッチスクリーン操作など
を、自然に、かつ高速で正確に行える仮想操作装置及び
方法を提供することを目的としている。

【０００８】

【課題を解決するための手段】本発明は、レバーやボタ
ンなどの操作対象を３次元ＣＧを用いて仮想の３次元空
間を構成することにより提示し、親指と人差し指の位置
を検知し、検知された親指と人差し指の位置と提示され
た操作対象の位置の３つの座標位置関係に基づいて、記
述された解釈規制を本にいかなる操作が指示されたかを
解釈する仮想操作装置及び方法である。

【０００９】さらに、仮想の訓練機として用いる場合
に、事故現象およびそれに伴う訓練対象システムの内部
状態をシミュレートし、レバーやボタンなどの操作対象
はここに操作の際、可動の範囲が決まっているので、こ
れらをあらかじめ可能な操作の属性として、３次元ＣＧ
データとあわせて記憶し、解釈された上述の操作指示を
伝達し、シミュレータの演算結果を提示するなどの情報
管理を行う点を加えるものである。

【００１０】さらに解釈の効率と正確度の向上のため
に、検知した親指と人差し指の位置、および提示位置の
３つの位置と記憶された操作の属性とにもとづいて解釈
規制を記述し、操作指示を解釈する点を改良して付加す
る。

【００１１】

【作用】本説明では、レバーやボタン、タッチスクリー
ンの操作のように３次元空間内での、２次元的な操作
を、仮想の３次元空間で行う場合を対象に、親指と人差
し指のわずか２本の指の位置と提示位置との位置関係に
基づいて記述された規制から、オペレータの手振り指示
を解釈する。

【００１２】精度を高めるために、レバーやボタン、タ
ッチスクリーンなどの操作対象の動き方を限定してお
き、その属性も加えた解釈規則に基づいて、解釈手段は
オペレータの手振り指示の解釈を行う。

【００１３】

【実施例】以下、図面に沿って本発明の動作について説
明する。図１は、本発明の一実施例の概略構成図であ
る。図１は、３次元的位置を計測するために、例えば磁
場を発生する位置ソース７と、位置ソース７から発生さ
れた磁場を検知して、３次元位置を検出する位置センサ
６がある。位置センサ６はそれぞれレバーやボタン、タ
ッチスクリーン、スライダーなどの操作をするときに必
要な動作を行う最低限の指、ここでは図２に示すように
親指と人差し指に装着される。位置センサ６の検出した
位置は、例えば、位置センサ６の下部についている小型
の送信部８により送信される。その実施例では無線によ
り送信しているが、これに必ずしも限定されるものでは
ない。Ｐｏｌｈｅｍｕｓ社の３ｓｐａｃｅＩｓｏｔｒ
ａｃｋやＡｓｃｅｎｓｉｏｎＴｅｃｈｎｏｌｏｇｙ社の
Ｂｉｒｄのような有線で検出した信号を送信するタイプ
のものでもよイ。オペレータは提示部５のモニタ上に提
示されている操作対象であるレバーやボタン、タッチス
クリーン、スライダーなどを見ながら、それらを操作す
る動作をする。

【００１４】送信部８が送信するデータは、例えば図３
にような形式になっている。このデータを受信部２は受
け取ると、情報管理部１に送る。図３のデータは、どの
位置センサから送信されてきたかを識別するためのセン
サ番号（１，２）と、３次元空間内の座標値（ｘ１ｔ，
ｙｌｔ，ｚｌｔ）と、それぞれの軸の回りの角度ｒｏｌ
ｌ，ｐｉｔｃｈ，ｙａｗ（αｌｔ，βｌｔ，γｌｔ）か
らなっている。添え字のｌｔはセンサ番号のｔ時刻の値
であることを示している。

【００１５】情報管理部１は位置ソース７と位置センサ
６の間の同期をとることが必要で有れば、同期を取る。
情報管理部１は同期が必要であれば、同期を取って校正
したデータを動作解析部３に解析実行の指示とともに送
る。動作解析部３は動作記述記憶部４に記述された規則
に基づいて、動作の解析を行う。動作記憶部４には、図
４Ｂ至図６に示すような規則が記述されている。

【００１６】規則１は指がスライダーやレバーなどをつ
かんだジェスチャ（Ｇｒａｓｐ）を解釈するための規則
である。規則１は次の３つの条件が満足されたとき、ジ
ェスチャｈｇｅｓｔｕｒｅの値をつかむ（Ｇｒａｓ
ｐ）にセットする。条件１：Ｌｔ≦△１センサ１（この場合は親指に付けている位置センサを表
す）とセンサ２（この場合は人差し指に付けている位置
センサを表す）の距離Ｌｔがある値△１より小さいこと
（つまり、親指と人差し指が十分近い位置にあるこ
と）、センサ１とセンサ２の距離Ｌｔは図４に示したよ
うに位置センサのｘ，ｙ，ｚの座標位置の２乗和の平方
値である。条件２：ｈｇｅｓｔｕｒｅ＝Ｇｒａｓｐ＆ｈｇｅｓｔｕｒｅ＝Ｓｌｉｄｅ前のジェスチャがつかむ状態（Ｇｒａｓｐ）やスライダ
などを動かしている状態（Ｓｌｉｄｅ）でないこと（つ
まり、直前までのジェスチャが物をつかんだり、操作し
ている状態でないこと）、条件３：Ｙ２ｔ＞Ｙｌｔセンサ２のｙ座標がセンサ１のｙ座標より大きいこと
（つまり、人差し指が親指より上にあること）、であ
る。

【００１７】規制２はつかんでいたスライダやレバーな
どから指がはなれるジェスチャ（Ｒｅｌｅａｓｅ）を解
釈するための規則である。規則２は次の２つの条件が満
足されたとき、ジェスチャｈｇｅｓｔｕｒｅの値をは
なす（Ｒｅｌｅａｓｅ）にセットする。条件１：Ｌｔ＞２△１センサ１（この場合は親指に付けている位置センサを表
す）とセンサ２（この場合は人差し指に付けている位置
センサを表す）の距離Ｌｔがある値２△１より大きいこ
と（つまり、親指と人差し指が十分近い位置にあると判
断する距離の２倍以上離れていること。）条件２：ｈ
ｇｅｓｔｕｒｅ＝＝Ｇｒａｓｐｈｇｅｓｔｕｒｅ＝＝Ｓｌｉｄｅ前のジェスチャがつかむ状態（Ｇｒａｓｐ）やスライダ
などを動かしている状態（Ｓｌｉｄｅ）であること（つ
まり、直前までのジェスチャが物をつかんだり、あるい
は操作している状態であること）、である。

【００１８】規則３は指がスライダやレバーなどをつか
んで動かし操作しているジェスチャ（Ｓｌｉｄｅ）を解
釈するための規則である。規則５は次の２つの条件が満
足されたとき、ジェスチャｈｇｅｓｔｕｒｅの値を操
作している（Ｓｌｉｄｅ）にセットする。条件１：Ｌｔ＞△１センサ１（この場合は親指に付けている位置センサを表
す）とセンサ２（この場合は人差し指に付けている位置
センサを表す）の距離Ｌｔがある値△１より小さいこと
（つまり、親指と人差し指が十分近い位置にあるこ
と）、条件２：ｈｇｅｓｔｕｒｅ＝＝Ｇｒａｓｐｈｇｅｓｔｕｒｅ＝＝Ｓｌｉｄｅ前のジェスチャがつかむ状態（Ｇｒａｓｐ）やスライダ
などを動かしている状態（Ｓｌｉｄｅ）であること（つ
まり、直前までのジェスチャが物をつかんだり、あるい
は操作している状態であること）、である。

【００１９】規則４は指がレバーやスライダをはなした
（Ｒｅｌｅａｓｅ）の後、初期値（Ｎｕｅｔｒａｌ）に
するための規則である。規則４は次の２つの条件が満足
されたとき、ジェスチャｈｇｅｓｔｕｒｅの値を初
期値（Ｎｕｅｔｒａｌ）にセットする。条件１：Ｌｔ＞△２センサ１（この場合は親指に付けている位置センサを表
す）とセンサ２（この場合は人差し指に付けている位置
センサを表す）の距離Ｌ_t がある値△₂ より大きいこと
（つまり、親指と人差し指が十分離れた位置にあるこ
と、）条件２：ｈｇｅｓｔｕｒｅ＝＝Ｒｅｌｅａｓｅ前のジェスチャがはなす状態（Ｒｅｌｅａｓｅ）である
こと（つまり、直前までのジェスチャがはなす状態であ
ること）、である。

【００２０】規則５は方向を示したりするジェスチャ
（Ｐｏｉｎｔ）を解釈するための規則である。規則５は
次の３つの条件が満足されたとき、ジェスチャｈｇｅ
ｓｔｕｒｅの値を指し示す（Ｐｏｉｎｔ）にセットす
る。条件１：Ｌｔ＞２△１センサ１（この場合は親指に付けている位置センサを表
す）とセンサ２（この場合は人差し指に付けている位置
センサを表す）の距離Ｌ_t がある値△２より大きいこと
（つまり、親指と人差し指が十分近い位置にあると判断
する距離の２倍以上離れていること）、条件２：｜ｓｉｏｎθ｜≦△１親指と人差し指のなす角度θが９０度に近いこと、ｓｉ
ｎθの値は図３の中に示したように位置センサ検出した
ｘ，ｙ，ｚ軸回りの角度α，β，γをｑｕａｔａｎｉｏ
ｎｑｉに変換し、このｑｕａｔａｎｉｏｎを法線ベ
クトルｄｉを求める。この法線ベクトルの内積の和がｓ
ｉｏｎθである。条件３：ｙ２ｔ＞ｙ１ｔセンサ２のｙ座標がセンサ１のｙ座標より大きいこと
（つまり、人差し指が親指より上にあること）、であ
る。

【００２１】規則６は方向を示したりするジェスチャ
（Ｐｏｉｎｔ）から初期状態（Ｎｅｕｔｒａｌ）に戻す
ための規則である。規則６は次の２つの条件が満足され
たとき、ジェスチャｈｇｅｓｔｕｒｅの値を初期値
（Ｎｅｕｔｒａｌ）にセットする。条件１：Ｌｔ＞２△１センサ１（この場合は親指に付けている位置センサを表
す）とセンサ２（この場合は人差し指に付けている位置
センサを表す）の距離Ｌｔがある値２△１より小さい大
きいこと（つまり、親指と人差し指が十分近い位置にあ
ると判断する距離の２倍以上より近いこと）、条件２：ｈｇｅｓｔｕｒｅ＝＝Ｐｏｉｎｔ前の状態が指し示す（Ｐｏｉｎｔ）であること、であ
る。

【００２２】規則７はボタンやスクリーンにさわるジェ
スチャ（Ｔｏｕｃｈ）を解釈するための規則である。規
則７は次の２つの条件が満たされたとき、ｈｇｅｓｔ
ｕｒｅをさわる（Ｔｏｕｃｈ）にセットする。条件１：Ｌ２ｔ＞△１センサ２（この場合は人差し指につけている位置センサ
を表す）のディスプレイとの距離Ｌ２ｔがある値△１よ
り十分小さいこと（つまり、人指し指がディスプレイに
非常に近いこと）、Ｌ２ｔは人指し指のｘ，ｙ，ｚ座標
とディスプレイのｘ，ｙ，ｚ座標より求められる。条件２：ｈｇｅｓｔｕｒｅ＝＝Ｐｏｉｎｔｈｇｅｓｔｕｒｅ＝＝Ｔｏｕｃｈ前の状態が指し示す（Ｐｏｉｎｔ）か、さわる（Ｔｏｕ
ｃｈ）であること（つまり、指さしのジェスチャでディ
スプレイに近づいたか、あるいはさわった状態のままで
あること）、である。

【００２３】規則８はボタンやスクリーンにさわるジェ
スチャ（Ｔｏｕｃｈ）から初期値（Ｎｅｕｔｒａｌ）に
戻すための規則である。規則８は２つの条件が満たされ
たれたとき、ｈｇｅｓｔｕｒｅを初期値（Ｎｅｕｔ
ｒａｌ）にする。条件１：Ｌ２ｔ＞２△１センサ２（この場合は人差し指に付けている位置センサ
を表す）のディスプレイとの距離Ｌ２ｔがある値２△１
より十分大きいこと（つまり、人指し指がディスプレイ
から離れたこと）、条件２：ｈｇｅｓｔｕｒｅ＝＝Ｔｏｕｃｈ前の状態がさわる（Ｔｏｕｃｈ）であること（つまり、
さわった状態のままであること）、である。

【００２４】解釈するジェスチャに関しては図４Ｂ至図
６に示したＧｒａｓｐ，Ｓｌｉｄｅ、Ｐｏｉｎｔ、Ｔｏ
ｕｃｈ，Ｒｅｌｅａｓｅ以外のものも、親指と人差し指
の両者の形状を記述することにより可能である。外形記
憶部９には提示部５に提示するレバーやボタン、タッチ
スクリーン、スライダーなどの３次元の外形データを記
憶している。

【００２５】次に図１のような構成の本実施例の動作に
ついて説明する。図７は図１の実施例の動作の流れ図の
概略を示す。情報管理部１は動作解析開始の指示により
解析を開始するが、位置センサ６から送られてきた図３
のような位置データを受信部２で受け取る（ステップ
ａ）。情報管理部１は図１に示すように位置データバッ
ファと提示制御部からなり、位置データを位置データバ
ッファ内に格納する（ステップｂ）。位置データバッフ
ァの初期化処理の一つとして、手のジェスチャを格納す
るパラメータｈｇｅｓｔｕｒｅをＮｅｕｔｒａｌ（手
が特別なジェスチャをしていない状態を示す値）にセッ
トする（ステップｃ）。次に動作解析部３は、情報管理
部１内の位置データバッファに格納された位置データを
読みだす（ステップｄ）。読みだされた現在の位置デー
タと現在の手のジェスチャ値ｈｇｅｓｔｕｒｅをもと
に、動作記述記憶部４に記憶された図４Ｂ至図６の規則
に合致するものがあるかをチェックする（ステップ
ｅ）。あれば動作記述記憶部４に記述された規則に基づ
いて、ｈｇｅｓｔｕｒｅの値をアップデートする。合
致するものがなければｈｇｅｓｔｕｒｅの値は変更さ
れない。動作解析部３において解析したｈｇｅｓｔｕ
ｒｅと位置データに基づいて、情報管理部１内の提示制
御部によって提示部５に提示されたスライダやボタン、
レバーなどの位置を操作内容に沿ってアップデートする
（ステップｆ）。尚、スライダやボタン、レバーなどの
形状（キャラクタ）は外形記憶部９から提示制御部によ
って読み出され、提示部５に提示されている。

【００２６】以上のように本実施例によれば、人差し指
と親指の位置とディスプレイの位置との関係から、ジェ
スチャを解釈するので、装備が小さく、かつ違和感のな
い操作を行うことができる。

【００２７】次に図８は本発明の別の実施例の概略構成
図を示す物である。第１の実施例に提示部５に提示する
対象の３次元形状の他に、操作の属性（上下に動くレバ
ーか、前後に動くレバーかなど）を記憶するための操作
属性記憶部１０と、操作属性を提示するための入力部１
１及びシミュレーション部１２が加わっている。シミュ
レーション部１２は外形記憶部９に記憶された操作対象
の内部の処理をシミュレートするものである。

【００２８】第１の実施例ではレバーやボタンなどの操
作の属性が限定されていないので、人差し指と親指の位
置により解釈されたジェスチャで提示部５の操作対象を
動かすとき、位置センサの検知誤差などにより、上下に
しか動かないはずのレバーが斜めに動いたりする可能性
がある。そこで第２の実施例では操作対象の操作の属性
をあらかじめ設定しておき、このような位置の検出誤差
などをカバーし、正確な操作を提供できるようにするも
のである。

【００２９】図９は各操作対象に属性を付与する際の画
面例である。右上が操作対象の外形形状のメニューＡを
示している。ユーザはこの中から、形状を選ぶ。ここで
は大きい長方形ｒｅｃｔ１２０、小さい長方形ｒｅｃｔ
２２１，矢印ａ１１ｏｗ１２２の３つの形状が例として
示されている。

【００３０】右上のメニューＡから任意の物を入力部１
１のポインティング・デバイス（たとえばマウス）によ
り選択し、それを右下のなかの適切な位置Ｂに置く。こ
のような操作を繰り返して、提示部５に提示する操作対
象を配置していく。

【００３１】次にこの配置された対象に操作属性を付与
する。図１０に示すように操作属性の付与は、「Ｎ」キ
ーにより、新規属性付与に切り替え、図９の右下の画面
Ｂか属性を付与したい対象をマウスで選択し、属性を選
ぶ。指定できる属性は図１２に示すように、たとえば、
属性の種類、ここではレバー０、ボタン１、パネル２が
ある。

【００３２】レバーに関しては回転軸、ギアの数、ギア
ポジションの範囲、ギアヘポジションの中心、ギアが入
ったときに発生させる音の種類が指定できる。ボタンに
関してはｏｎの時の座標位置、色、音、ｏｆｆの時の色
が指定できる。パネルに関してはｏｎ／ｏｆｆの時の
色が指定できる。

【００３３】このように指定した結果、操作属性記憶部
１０にはたとえば、図１１のようなそれぞれの形状デー
タの種別に他に、属性データの種別が付加される。実際
にふかされた内容はたとえば、図１２のような形式にな
っている。

【００３４】属性データは新規に付与するだけでなく、
図１０に示すように削除、コピー、参照もできる。この
結果はファイルへの書き込み指示「Ｗ」キーにより、フ
ァイルに書き込まれる。

【００３５】操作属性だけでなく、あるボタンを操作す
るとその結果が別のボタンなどに関連しているような操
作対象の親子関係も指示できるようになっている。ここ
では図１０に示すように親は幾つでも子をもてる（つま
り、従属して変わるものはいくつでもよい）が、子は親
を一つしかもてない（操作に影響を与える親は一つ）よ
うになっている。この親子関係は図１２に示すような形
式で、操作属性記憶部１０に記憶される。また、操作属
性を付与している最中に、図９に示すように左下の画面
Ｃの現在の親子関係が示されている。

【００３６】つまり、仮想の訓練機として用いる場合の
システムであって、事故現象およびそれにともなう訓練
対象システムの内部状態をシミュレートするシミュレー
タ部１２を有し、レバーやボタンなどの操作対象はここ
に操作の際、可動の範囲が決まっているので、これらを
あらかじめ可能な操作の属性として、提示部５に提示す
るための３次元ＣＧデータとあわせて操作属性記憶手段
に記憶しておく。情報管理部は動作解析部３により解釈
された操作指示をシミュレータ部１２に伝達し、シミュ
レータの演算結果を提示部５に提示するなどの情報管理
を行う。さらに動作記述記憶部４は解釈の効率と正確度
の向上のために、検知された親指と人差し指の位置、お
よび提示部の３つの位置と操作属性記憶部１０に記憶さ
れた操作の属性とをもとづいて規則を記述してなり、操
作指示を解釈するように改良されている。

【００３７】以上にように本実施例によれば、レバーの
動く範囲やポジションなどの操作属性が限定されている
ので、この範囲を逸脱しないように情報管理部１が動作
解析部３の解析したジェスチャと位置センサ６からの座
標値により、確実な操作を実行できるので、その効果は
大きい。

【００３８】

【発明の効果】本発明では、親指と人差し指のわずか２
本の指の位置を検知するだけなので、装備をつけるとし
ても軽量ですみ、違和感なく自然で正確な操作を安価に
行うことが出来るので、その効果は大きい。

【図面の簡単な説明】

【図１】実施例の概略構成図。

【図２】操作方法を示す図。

【図３】受信部が受け取る位置データの例を示す図。

【図４】動作記述記憶部における動作記述例を示す
図。

【図５】動作記述記憶部における動作記述例を示す
図。

【図６】動作記述記憶部における動作記述例を示す
図。

【図７】動作の流れを示す図。

【図８】他の実施例の概略構成図。

【図９】画面例を示す図。

【図１０】入力例を示す図。

【図１１】操作属性記憶部における記憶例を示す図。

【図１２】操作属性記憶部における属性データの記憶
例を示す図。

【図１３】操作属性記憶部における親子関係の記憶例
を示す図。

【符号の説明】

１…情報管理部、２…受信部、３…動作解析部、
４…動作記述記憶部、５…提示部、６…位置センサ、
７…位置ソース、８…送信部、９…外形記憶部、
１０…操作属性記憶部、１１…入力部

Claims

【特許請求の範囲】

【請求項１】操作対象を提示手段に提示し、操作者の指の位置を検知し、検知された指の位置と、前記提示手段の位置をもとに前
記提示手段に提示された操作対象に対する操作指示を解
釈することを特徴とする仮想操作方法。
【請求項２】３次元ＣＧを用いて仮想の３次元空間に操
作対象を提示する提示手段と、親指と人差し指の位置を検知する位置検知手段と、位置検知手段が検知した親指と、人差し指の位置と、提
示手段の位置の３つの座標位置の関係に基づいて、予め
記述された規則を基に操作指示を解釈する解釈手段とか
ら公正することを特徴とする仮想操作装置。
【請求項３】操作対象を提示する提示手段と、この提示手段に提示される操作対象のナイフの処理をシ
ミュレートするシミュレータ手段と、前記操作対象毎に操作の属性を前記提示手段に提示する
ための図形データとあわせて記憶する操作属性記憶手段
と、指の位置を検知する操作属性検知手段と、この位置検知手段によって検知された指の位置と、前記
提示手段の位置及び前記操作属性記憶手段に記憶された
操作の属性とを基に前記提示手段に対する操作指示を解
釈する解釈手段と、この解釈手段により解釈された操作指示を前記シミュレ
ータ手段に伝達し、その結果を前記提示手段に提示する
ための制御を行う情報管理手段とを具備することを特徴
とする仮想操作装置。