JPH11201723A - 観察位置検出装置及びその観察位置検出方法 - Google Patents
観察位置検出装置及びその観察位置検出方法Info
- Publication number
- JPH11201723A JPH11201723A JP10001971A JP197198A JPH11201723A JP H11201723 A JPH11201723 A JP H11201723A JP 10001971 A JP10001971 A JP 10001971A JP 197198 A JP197198 A JP 197198A JP H11201723 A JPH11201723 A JP H11201723A
- Authority
- JP
- Japan
- Prior art keywords
- observation position
- coordinate
- observer
- minimum
- maximum
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
(57)【要約】
【課題】 簡易な構成及び方法で、常に正確な観察位置
を非接触で検出する観察位置検出装置及びその観察位置
検出方法を提供する。 【解決手段】 観察位置検出装置は撮像装置１００と画
像処理装置１１０から構成され、撮像装置１００は、Ｃ
ＣＤカメラ１０１、赤外光照明装置１０２、ハーフミラ
ー１０３から構成され、画像処理装置１１０は画像メモ
リ１１１、２値化処理部１１２、カウンタ１１３、画像
計測部１１４、観察位置決定部１１５、観察位置予測部
１１６から構成される。撮像装置１００で得られた観察
者１５０の顔面画像から観察者の瞳孔１５１を２値化処
理部１１２で抽出し、画像計測部１１４で抽出画像の水
平最大座標、水平最小座標を計測し、その計測された水
平最大座標と水平最小座標と観察位置予測部１１６に記
憶されている次画面予測位置情報１２１から、観察位置
決定部１１５で観察者１５０の観察位置を検出する。
を非接触で検出する観察位置検出装置及びその観察位置
検出方法を提供する。 【解決手段】 観察位置検出装置は撮像装置１００と画
像処理装置１１０から構成され、撮像装置１００は、Ｃ
ＣＤカメラ１０１、赤外光照明装置１０２、ハーフミラ
ー１０３から構成され、画像処理装置１１０は画像メモ
リ１１１、２値化処理部１１２、カウンタ１１３、画像
計測部１１４、観察位置決定部１１５、観察位置予測部
１１６から構成される。撮像装置１００で得られた観察
者１５０の顔面画像から観察者の瞳孔１５１を２値化処
理部１１２で抽出し、画像計測部１１４で抽出画像の水
平最大座標、水平最小座標を計測し、その計測された水
平最大座標と水平最小座標と観察位置予測部１１６に記
憶されている次画面予測位置情報１２１から、観察位置
決定部１１５で観察者１５０の観察位置を検出する。
Description
【０００１】
【発明の属する技術分野】本発明は、観察者の観察位置
を常時検出し、その検出した観察位置に応じて観察者に
常に正しい立体画像を呈示する立体表示装置等に用いる
観察位置検出装置及びその観察位置検出方法に関し、特
に観察者の観察位置を非接触で検出する観察位置検出装
置及びその観察位置検出方法に関する。
を常時検出し、その検出した観察位置に応じて観察者に
常に正しい立体画像を呈示する立体表示装置等に用いる
観察位置検出装置及びその観察位置検出方法に関し、特
に観察者の観察位置を非接触で検出する観察位置検出装
置及びその観察位置検出方法に関する。
【０００２】
【従来の技術】近年、立体映像を表示することへの要望
が高まっており、様々な立体表示装置の研究が行われて
いる。最近では特にレンチキュラスクリーンを用いて、
両眼視差を有する画像をそれぞれ左右の目に空間的に分
離して呈示することで立体視を実現する立体表示装置が
注目されている。この装置は特別なメガネを装着する必
要がないという利点を有している。ただし、この装置で
は立体視が可能な領域が人間の両眼間隔程度に制限され
てしまうという問題があり、観察者は常に頭を固定して
観察するという不自然な体勢をとらなければならなかっ
た。
が高まっており、様々な立体表示装置の研究が行われて
いる。最近では特にレンチキュラスクリーンを用いて、
両眼視差を有する画像をそれぞれ左右の目に空間的に分
離して呈示することで立体視を実現する立体表示装置が
注目されている。この装置は特別なメガネを装着する必
要がないという利点を有している。ただし、この装置で
は立体視が可能な領域が人間の両眼間隔程度に制限され
てしまうという問題があり、観察者は常に頭を固定して
観察するという不自然な体勢をとらなければならなかっ
た。
【０００３】このような問題点を解決するために観察者
の観察位置を常時検出して、その検出された観察位置に
応じて観察者に常に正しい立体画像を呈示する立体表示
装置が知られている（例えば特開平１−１０７２４７号
公報、特開平６−２１７３４８号公報など）。
の観察位置を常時検出して、その検出された観察位置に
応じて観察者に常に正しい立体画像を呈示する立体表示
装置が知られている（例えば特開平１−１０７２４７号
公報、特開平６−２１７３４８号公報など）。
【０００４】このような観察位置追従型立体表示装置で
は、観察位置を検出するための磁気センサ等を観察者に
装着させる必要があり、このことが観察者に違和感を与
え、特別なメガネを装着する必要がないというレンチキ
ュラスクリーンを用いた立体表示装置の利点を低減して
しまう原因となる。また、不特定多数の観察者が使用す
る場合、接触型の位置検出手段を使用すると衛生上の問
題も生じる。したがって、非接触で観察位置を検出でき
る方法が望まれる。
は、観察位置を検出するための磁気センサ等を観察者に
装着させる必要があり、このことが観察者に違和感を与
え、特別なメガネを装着する必要がないというレンチキ
ュラスクリーンを用いた立体表示装置の利点を低減して
しまう原因となる。また、不特定多数の観察者が使用す
る場合、接触型の位置検出手段を使用すると衛生上の問
題も生じる。したがって、非接触で観察位置を検出でき
る方法が望まれる。
【０００５】非接触で観察位置を検出する方法として
は、例えば、特開平４−１７４３０９号公報に記載され
ている眼位置検出装置を用いて、顔面画像から左右それ
ぞれの眼球を画像処理で独立に抽出して、それぞれの眼
球の位置を検出し、これら眼球の位置から観察位置を求
める方法が考えられる。
は、例えば、特開平４−１７４３０９号公報に記載され
ている眼位置検出装置を用いて、顔面画像から左右それ
ぞれの眼球を画像処理で独立に抽出して、それぞれの眼
球の位置を検出し、これら眼球の位置から観察位置を求
める方法が考えられる。
【０００６】ただし、この方法の場合、左右どちらか一
方の眼球の位置が検出されない場合や、観察者の瞬目な
どにより両眼の位置が検出されない場合に、観察者の観
察位置を決定できなくなる。このような状態は一時的で
あっても、観察位置追従型立体表示装置の追従制御を不
安定にさせるため、観察者のそれぞれの眼の位置の検出
状態に係わらず、観察位置を決定する必要がある。
方の眼球の位置が検出されない場合や、観察者の瞬目な
どにより両眼の位置が検出されない場合に、観察者の観
察位置を決定できなくなる。このような状態は一時的で
あっても、観察位置追従型立体表示装置の追従制御を不
安定にさせるため、観察者のそれぞれの眼の位置の検出
状態に係わらず、観察位置を決定する必要がある。
【０００７】観察者のそれぞれの眼の検出状態に応じ
て、左右それぞれの眼の位置を推定する手段としては、
特開平９−４４６８０号公報に記載されている目領域抽
出装置がある。
て、左右それぞれの眼の位置を推定する手段としては、
特開平９−４４６８０号公報に記載されている目領域抽
出装置がある。
【０００８】図１１は従来の目領域抽出装置の動作原理
を示す図である。この目領域抽出装置では、図１１
（ａ）に示すように、検出対象者１の右眼２、左眼３、
それぞれに対し、右眼探索領域４および左眼探索領域５
を独立に設定し、各領域内で眼が抽出されたか否か、す
なわち、眼の開閉状態を独立に判定する。なお、左右そ
れぞれの探索領域は前述の眼位置検出装置により検出し
た、右眼２、左眼３それぞれの位置から設定されてい
る。さらに、図１１（ｂ）に示すように、抽出された過
去の目領域から過去の目領域の位置７を検出し、これら
２つの過去の目領域の位置７から移動ベクトル８を算出
し、過去の目領域の位置７に移動ベクトル８を加えるこ
とで、探索領域６の位置を設定している。このような探
索領域の制御を行うことによって、検出対象者が移動中
に瞬きをしても２つの独立した右眼探索領域および左眼
探索領域を継続して設定できる。また、この目領域抽出
装置では、図１１（ｃ）に示すように、左右どちらか一
方の探索領域において目領域が抽出されなかった場合
に、抽出されなかった目９を探索する探索領域１０を拡
大させる手段や、図１１（ｄ）に示すように、一定時間
両眼が抽出されない場合に、探索領域を撮像画像の全領
域１１まで拡大させるといった手段等を備えている。
を示す図である。この目領域抽出装置では、図１１
（ａ）に示すように、検出対象者１の右眼２、左眼３、
それぞれに対し、右眼探索領域４および左眼探索領域５
を独立に設定し、各領域内で眼が抽出されたか否か、す
なわち、眼の開閉状態を独立に判定する。なお、左右そ
れぞれの探索領域は前述の眼位置検出装置により検出し
た、右眼２、左眼３それぞれの位置から設定されてい
る。さらに、図１１（ｂ）に示すように、抽出された過
去の目領域から過去の目領域の位置７を検出し、これら
２つの過去の目領域の位置７から移動ベクトル８を算出
し、過去の目領域の位置７に移動ベクトル８を加えるこ
とで、探索領域６の位置を設定している。このような探
索領域の制御を行うことによって、検出対象者が移動中
に瞬きをしても２つの独立した右眼探索領域および左眼
探索領域を継続して設定できる。また、この目領域抽出
装置では、図１１（ｃ）に示すように、左右どちらか一
方の探索領域において目領域が抽出されなかった場合
に、抽出されなかった目９を探索する探索領域１０を拡
大させる手段や、図１１（ｄ）に示すように、一定時間
両眼が抽出されない場合に、探索領域を撮像画像の全領
域１１まで拡大させるといった手段等を備えている。
【０００９】
【発明が解決しようとする課題】従来の目領域抽出装置
では、検出対象者の顔面を撮像した画像から左右それぞ
れの眼を独立に抽出した上で左右それぞれの眼の位置を
検出し、さらに、左右それぞれの眼を独立に追跡する探
索領域を設定し、また、左右それぞれの眼の抽出状態の
判定結果に応じて、探索領域の位置、大きさ、数、形を
可変させるため、左右それぞれの眼に対して独立な画像
処理が必要であり、処理が複雑になるという問題があっ
た。
では、検出対象者の顔面を撮像した画像から左右それぞ
れの眼を独立に抽出した上で左右それぞれの眼の位置を
検出し、さらに、左右それぞれの眼を独立に追跡する探
索領域を設定し、また、左右それぞれの眼の抽出状態の
判定結果に応じて、探索領域の位置、大きさ、数、形を
可変させるため、左右それぞれの眼に対して独立な画像
処理が必要であり、処理が複雑になるという問題があっ
た。
【００１０】本発明は、左右それぞれの眼を独立に抽出
して位置を決定するという複雑な手段や、左右それぞれ
の眼の開閉状態を判定する手段を用いずに、非接触で、
かつ簡易な方法で、常に観察位置を検出することを目的
とする。
して位置を決定するという複雑な手段や、左右それぞれ
の眼の開閉状態を判定する手段を用いずに、非接触で、
かつ簡易な方法で、常に観察位置を検出することを目的
とする。
【００１１】即ち、本発明の目的は、簡易な構成及び方
法で、常に正確な観察位置を非接触で検出する観察位置
検出装置及びその観察位置検出方法を提供することにあ
る。
法で、常に正確な観察位置を非接触で検出する観察位置
検出装置及びその観察位置検出方法を提供することにあ
る。
【００１２】
【課題を解決するための手段】本発明の観察位置検出装
置は、撮像装置と画像処理装置とを備え、観察者の顔面
を撮像した画像から観察者の眼部分を抽出して、観察者
の両眼の中点を観察位置として検出する観察位置検出装
置において、画像処理装置は、眼部分の最小座標と最大
座標とを計測する画像計測部と、最小座標と最大座標と
から観察位置を決定する観察位置決定部と、観察位置決
定部の結果から次の観察位置を予測し記憶する観察位置
予測部とを備えている。
置は、撮像装置と画像処理装置とを備え、観察者の顔面
を撮像した画像から観察者の眼部分を抽出して、観察者
の両眼の中点を観察位置として検出する観察位置検出装
置において、画像処理装置は、眼部分の最小座標と最大
座標とを計測する画像計測部と、最小座標と最大座標と
から観察位置を決定する観察位置決定部と、観察位置決
定部の結果から次の観察位置を予測し記憶する観察位置
予測部とを備えている。
【００１３】また、予測された次の観察位置に応じて撮
像装置の撮像領域を可変させる撮像領域可変手段を備え
てもよい。
像装置の撮像領域を可変させる撮像領域可変手段を備え
てもよい。
【００１４】また、観察位置決定部は、最大座標と最小
座標の差が一定値以上の場合、最大座標と最小座標の中
点を観察位置とするとともに、差の値を記憶してもよ
い。
座標の差が一定値以上の場合、最大座標と最小座標の中
点を観察位置とするとともに、差の値を記憶してもよ
い。
【００１５】また、観察位置決定部は、最大座標と最小
座標の差が一定値未満の場合、最大座標と最小座標の中
点と、観察位置予測部に記憶してある前の観察位置予測
結果とを比較する手段を備えてもよい。
座標の差が一定値未満の場合、最大座標と最小座標の中
点と、観察位置予測部に記憶してある前の観察位置予測
結果とを比較する手段を備えてもよい。
【００１６】また、観察位置決定部は、最大座標と最小
座標の差が一定値未満の場合、最大座標と最小座標の差
が一定値以上の場合に記憶しておいた最大座標と最小座
標の差の１／２の値を用いて観察位置を決定してもよ
い。
座標の差が一定値未満の場合、最大座標と最小座標の差
が一定値以上の場合に記憶しておいた最大座標と最小座
標の差の１／２の値を用いて観察位置を決定してもよ
い。
【００１７】また、観察位置決定部は、最大座標と最小
座標を計測できなかった場合、観察位置予測部で求めた
前の予測観察位置を観察位置としてもよい。
座標を計測できなかった場合、観察位置予測部で求めた
前の予測観察位置を観察位置としてもよい。
【００１８】本発明の観察位置検出装置の観察位置検出
方法は、撮像装置と画像処理装置とを備え、観察者の顔
面を撮像した画像から観察者の眼部分を抽出して、観察
者の両眼の中点を観察位置として検出する観察位置検出
装置の観察位置検出方法において、眼部分の最小座標と
最大座標とを計測し、最小座標と最大座標とから観察位
置を決定するとともに、観察位置から次の観察位置を予
測し記憶する。
方法は、撮像装置と画像処理装置とを備え、観察者の顔
面を撮像した画像から観察者の眼部分を抽出して、観察
者の両眼の中点を観察位置として検出する観察位置検出
装置の観察位置検出方法において、眼部分の最小座標と
最大座標とを計測し、最小座標と最大座標とから観察位
置を決定するとともに、観察位置から次の観察位置を予
測し記憶する。
【００１９】また、眼部分の最小座標と最大座標とを計
測し、最小座標と最大座標とから観察位置を決定すると
ともに、観察位置から次の観察位置を予測し記憶し、予
測された次の観察位置に応じて撮像装置の撮像領域を可
変させてもよい。
測し、最小座標と最大座標とから観察位置を決定すると
ともに、観察位置から次の観察位置を予測し記憶し、予
測された次の観察位置に応じて撮像装置の撮像領域を可
変させてもよい。
【００２０】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値以上の場合、最大座標と最小座
標の中点を観察位置とするとともに、差の値を記憶して
もよい。
と最小座標の差が一定値以上の場合、最大座標と最小座
標の中点を観察位置とするとともに、差の値を記憶して
もよい。
【００２１】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値未満の場合、最大座標と最小座
標の中点と、観察位置予測部に記憶してある前の観察位
置予測結果とを比較してもよい。
と最小座標の差が一定値未満の場合、最大座標と最小座
標の中点と、観察位置予測部に記憶してある前の観察位
置予測結果とを比較してもよい。
【００２２】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値未満の場合、最大座標と最小座
標の差が一定値以上の場合に記憶しておいた最大座標と
最小座標の差の１／２の値を用いて観察位置を決定して
もよい。
と最小座標の差が一定値未満の場合、最大座標と最小座
標の差が一定値以上の場合に記憶しておいた最大座標と
最小座標の差の１／２の値を用いて観察位置を決定して
もよい。
【００２３】また、観察位置を決定する際に、最大座標
と最小座標を計測できなかった場合、観察位置予測部で
求めた前の予測観察位置を観察位置としてもよい。
と最小座標を計測できなかった場合、観察位置予測部で
求めた前の予測観察位置を観察位置としてもよい。
【００２４】本発明による観察位置検出装置及びその観
察位置検出方法は、観察者の眼部分の抽出画像から最小
座標と最大座標のみを計測して、計測した最小座標と最
大座標の差に応じて、この差が一定値以上の場合は、最
小座標と最大座標の中点座標を観察位置とし、差が一定
値以下の場合は、最小座標と最大座標の中点座標と時系
列画像における前画面で求めた観察位置予測結果を比較
し、最小座標と最大座標の差が一定値以上の場合に記憶
しておいた最大座標と最小座標の差の１／２の値を用い
て観察位置を決定する。
察位置検出方法は、観察者の眼部分の抽出画像から最小
座標と最大座標のみを計測して、計測した最小座標と最
大座標の差に応じて、この差が一定値以上の場合は、最
小座標と最大座標の中点座標を観察位置とし、差が一定
値以下の場合は、最小座標と最大座標の中点座標と時系
列画像における前画面で求めた観察位置予測結果を比較
し、最小座標と最大座標の差が一定値以上の場合に記憶
しておいた最大座標と最小座標の差の１／２の値を用い
て観察位置を決定する。
【００２５】また、一時的に抽出画像が存在しない場合
には観察位置予測結果を観察位置とする。
には観察位置予測結果を観察位置とする。
【００２６】本発明において観察者の眼部分の抽出画像
から取得すべき情報は抽出画像の最小座標と最大座標の
みであるため、左右それぞれの眼を独立に認識して位置
を決定する必要がなく、簡易な観察位置検出装置及び観
察位置検出方法により、常に正確な観察位置を検出する
ことができる。
から取得すべき情報は抽出画像の最小座標と最大座標の
みであるため、左右それぞれの眼を独立に認識して位置
を決定する必要がなく、簡易な観察位置検出装置及び観
察位置検出方法により、常に正確な観察位置を検出する
ことができる。
【００２７】また、予測観察位置に応じて撮像領域を可
変させることにより、観察位置検出範囲が広がる。
変させることにより、観察位置検出範囲が広がる。
【００２８】
【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して説明する。
て図面を参照して説明する。
【００２９】（本発明の第１の実施の形態）図１は本発
明の観察位置検出装置の第１の実施の形態を示す図であ
る。
明の観察位置検出装置の第１の実施の形態を示す図であ
る。
【００３０】本実施の形態の観察位置検出装置は、撮像
装置１００と画像処理装置１１０から構成される。
装置１００と画像処理装置１１０から構成される。
【００３１】さらに、撮像装置１００は、ＣＣＤカメラ
１０１、赤外光照明装置１０２、ハーフミラー１０３か
ら構成される。
１０１、赤外光照明装置１０２、ハーフミラー１０３か
ら構成される。
【００３２】撮像装置１００におけるＣＣＤカメラ１０
１の光軸と赤外光照明装置１０２の光軸は、それぞれの
光軸が互いに同軸となるように、ハーフミラー１０３を
用いて合成されている。この撮像装置１００を用いて観
察者１５０の顔面を撮像すると、人間の網膜が他の顔面
部分より赤外光を強く反射する特性を有しているため、
観察者１５０の瞳孔１５１が特に明るい画像が得られ
る。
１の光軸と赤外光照明装置１０２の光軸は、それぞれの
光軸が互いに同軸となるように、ハーフミラー１０３を
用いて合成されている。この撮像装置１００を用いて観
察者１５０の顔面を撮像すると、人間の網膜が他の顔面
部分より赤外光を強く反射する特性を有しているため、
観察者１５０の瞳孔１５１が特に明るい画像が得られ
る。
【００３３】ここで、赤外光照明装置１０２の光源とし
て波長８５０ｎｍの発光ダイオードを用いた。また、Ｃ
ＣＤカメラ１０１には波長７６０ｎｍ以下の光を遮断す
る波長フィルタが内蔵されており、室内灯など可視光の
外部照明装置の影響を受けないようにしてある。
て波長８５０ｎｍの発光ダイオードを用いた。また、Ｃ
ＣＤカメラ１０１には波長７６０ｎｍ以下の光を遮断す
る波長フィルタが内蔵されており、室内灯など可視光の
外部照明装置の影響を受けないようにしてある。
【００３４】ＣＣＤカメラ１０１はＮＴＳＣ規格のモノ
クロ・アナログ映像信号を出力し、水平周波数および垂
直周波数はそれぞれ１５．７５ｋＨｚ、６０Ｈｚであ
る。
クロ・アナログ映像信号を出力し、水平周波数および垂
直周波数はそれぞれ１５．７５ｋＨｚ、６０Ｈｚであ
る。
【００３５】すなわち、観察者１５０の顔面は、赤外光
照明装置１０２の照明下で、ＣＣＤカメラ１０１によ
り、各フィールドごと、すなわち毎秒６０回撮像され
る。
照明装置１０２の照明下で、ＣＣＤカメラ１０１によ
り、各フィールドごと、すなわち毎秒６０回撮像され
る。
【００３６】一方、画像処理装置１１０は画像メモリ１
１１、２値化処理部１１２、カウンタ１１３、画像計測
部１１４、観察位置決定部１１５、観察位置予測部１１
６から構成される。
１１、２値化処理部１１２、カウンタ１１３、画像計測
部１１４、観察位置決定部１１５、観察位置予測部１１
６から構成される。
【００３７】画像処理装置１１０における画像メモリ１
１１では、ＣＣＤカメラ１０１で撮像された観察者１５
０の顔面画像が、解像度５１２×５１２画素のデジタル
画像として蓄積される。なお、ＣＣＤカメラ１０１の撮
像距離は２ｍであり、画像メモリ１１１に蓄積された画
像の１画素は観察者１５０の顔面上において１ｍｍに相
当するようにレンズ倍率を調整してある。
１１では、ＣＣＤカメラ１０１で撮像された観察者１５
０の顔面画像が、解像度５１２×５１２画素のデジタル
画像として蓄積される。なお、ＣＣＤカメラ１０１の撮
像距離は２ｍであり、画像メモリ１１１に蓄積された画
像の１画素は観察者１５０の顔面上において１ｍｍに相
当するようにレンズ倍率を調整してある。
【００３８】２値化処理部１１２では、画像メモリ１１
１に蓄積された観察者１５０の顔面画像に対して２値化
処理が行われる。この２値化処理により観察者１５０の
両眼の瞳孔部分のみが白色画素として２値化抽出され
る。２値化処理部１１２での２値化処理後、画像計測部
１１４において、２値化画像の白色部分の水平最大座
標、水平最小座標のみが計測される。
１に蓄積された観察者１５０の顔面画像に対して２値化
処理が行われる。この２値化処理により観察者１５０の
両眼の瞳孔部分のみが白色画素として２値化抽出され
る。２値化処理部１１２での２値化処理後、画像計測部
１１４において、２値化画像の白色部分の水平最大座
標、水平最小座標のみが計測される。
【００３９】カウンタ１１３は、２値化画像に白色部分
が存在しなくなった瞬間からの時間を計数するためのも
のであり、２値化画像に白色部分が存在する間は常に初
期化が行われる。
が存在しなくなった瞬間からの時間を計数するためのも
のであり、２値化画像に白色部分が存在する間は常に初
期化が行われる。
【００４０】観察位置決定部１１５では、画像計測部１
１４より出力された、水平最大座標、水平最小座標と、
観察位置予測部１１６で記憶してある前画面の予測観察
位置情報１２１から観察位置を算出し、算出された観察
位置情報は外部に出力されるとともに、次画面の観察位
置を予測するために観察位置予測部１１６に送られる。
観察位置予測部１１６は次画面における観察位置を予測
し、また、予測した観察位置を記憶することができる。
さらに、観察位置予測部１１６は観察位置の速度の大き
さに応じて、観察位置予測を停止することができる。な
お、前画面とは時系列画像における現在の画面の１／６
０秒前の画面、次画面とは時系列画像における現在の画
面の１／６０秒後の画面のことである。
１４より出力された、水平最大座標、水平最小座標と、
観察位置予測部１１６で記憶してある前画面の予測観察
位置情報１２１から観察位置を算出し、算出された観察
位置情報は外部に出力されるとともに、次画面の観察位
置を予測するために観察位置予測部１１６に送られる。
観察位置予測部１１６は次画面における観察位置を予測
し、また、予測した観察位置を記憶することができる。
さらに、観察位置予測部１１６は観察位置の速度の大き
さに応じて、観察位置予測を停止することができる。な
お、前画面とは時系列画像における現在の画面の１／６
０秒前の画面、次画面とは時系列画像における現在の画
面の１／６０秒後の画面のことである。
【００４１】ここで、画像処理装置１１０の各部におけ
る各種処理は電子計算機によりＣＣＤカメラ１０１の垂
直同期信号と同期して順次行われ、画像処理装置１１０
から観察者１５０の観察位置が毎秒６０回出力される。
る各種処理は電子計算機によりＣＣＤカメラ１０１の垂
直同期信号と同期して順次行われ、画像処理装置１１０
から観察者１５０の観察位置が毎秒６０回出力される。
【００４２】次に、本発明の第１の実施の形態における
観察位置検出方法の詳細について図面を参照して説明す
る。
観察位置検出方法の詳細について図面を参照して説明す
る。
【００４３】図２は本発明の第１の実施の形態の観察位
置検出装置における観察位置検出方法を示すフローチャ
ートである。
置検出装置における観察位置検出方法を示すフローチャ
ートである。
【００４４】ステップＳ１でスタート後、ステップＳ２
で初期設定が行われる。このときステップＳ２では観察
者フラグがＦｌａｇ＝０にセットされる。ここで、観察
者フラグは観察者の存在状態を表わすフラグであり、観
察者不在の場合はＦｌａｇ＝０に設定され、観察者が存
在する場合にはＦｌａｇ＝１に設定される。
で初期設定が行われる。このときステップＳ２では観察
者フラグがＦｌａｇ＝０にセットされる。ここで、観察
者フラグは観察者の存在状態を表わすフラグであり、観
察者不在の場合はＦｌａｇ＝０に設定され、観察者が存
在する場合にはＦｌａｇ＝１に設定される。
【００４５】ステップＳ２での初期設定後、ステップＳ
３でＣＣＤカメラ１０１から画像メモリ１１１に画像が
蓄積され、ステップＳ４で、蓄積された画像に対し２値
化処理が２値化処理部１１２によって行われる。
３でＣＣＤカメラ１０１から画像メモリ１１１に画像が
蓄積され、ステップＳ４で、蓄積された画像に対し２値
化処理が２値化処理部１１２によって行われる。
【００４６】ステップＳ４において、２値化画像に白色
部分が存在しない場合ステップＳ５へ進む。ステップＳ
５では観察者フラグの判定が行われる。このとき、観察
者フラグがＦｌａｇ＝０（観察者不在）であれば、ステ
ップＳ３へ戻り、２値化画像に白色部分が現れるまでこ
のサイクルを繰り返す。
部分が存在しない場合ステップＳ５へ進む。ステップＳ
５では観察者フラグの判定が行われる。このとき、観察
者フラグがＦｌａｇ＝０（観察者不在）であれば、ステ
ップＳ３へ戻り、２値化画像に白色部分が現れるまでこ
のサイクルを繰り返す。
【００４７】ステップＳ４において、２値化画像に白色
部分が存在する場合、ステップＳ６に進み、画像計測部
１１４により画像計測処理が行われ、観察位置決定部１
１５によりステップＳ７以降の観察位置決定が行われ
る。
部分が存在する場合、ステップＳ６に進み、画像計測部
１１４により画像計測処理が行われ、観察位置決定部１
１５によりステップＳ７以降の観察位置決定が行われ
る。
【００４８】以下、観察者の両眼の瞳孔部分が２値化画
像の白色部分として抽出されている場合の観察位置検出
方法について説明する。
像の白色部分として抽出されている場合の観察位置検出
方法について説明する。
【００４９】図３は観察者の顔面の２値化画像の各値を
説明するための図である。
説明するための図である。
【００５０】ステップＳ６では、図３における画像の水
平最大座標Ｘｍａｘ３０５および水平最小座標Ｘｍｉｎ
３０４が計測される。なお、観察者の２値化画像から直
接取得される情報はこれらの値のみである。
平最大座標Ｘｍａｘ３０５および水平最小座標Ｘｍｉｎ
３０４が計測される。なお、観察者の２値化画像から直
接取得される情報はこれらの値のみである。
【００５１】ステップＳ７ではステップＳ６で計測され
た水平最大座標Ｘｍａｘ３０５と水平最小座標Ｘｍｉｎ
３０４の中点位置Ｘ＝（Ｘｍａｘ＋Ｘｍｉｎ）／２が算
出される。さらに、ステップＳ８において水平最大座標
Ｘｍａｘと水平最小座標Ｘｍｉｎの差３０７、すなわち
Xｍａｘ−Ｘｍｉｎが計算され、差が１cm未満の場合は
ステップＳ１６に進み、差３０７が１cm以上の場合はス
テップＳ９に進む。なお、差３０７が１cm以上の場合に
は位置Ｘが観察位置３０６のＸ座標と決定され、ステッ
プ９に進む。
た水平最大座標Ｘｍａｘ３０５と水平最小座標Ｘｍｉｎ
３０４の中点位置Ｘ＝（Ｘｍａｘ＋Ｘｍｉｎ）／２が算
出される。さらに、ステップＳ８において水平最大座標
Ｘｍａｘと水平最小座標Ｘｍｉｎの差３０７、すなわち
Xｍａｘ−Ｘｍｉｎが計算され、差が１cm未満の場合は
ステップＳ１６に進み、差３０７が１cm以上の場合はス
テップＳ９に進む。なお、差３０７が１cm以上の場合に
は位置Ｘが観察位置３０６のＸ座標と決定され、ステッ
プ９に進む。
【００５２】差３０７が１cm以上の場合、ステップＳ９
では、ステップＳ８で計算した差３０７（Ｘｍａｘ−X
ｍｉｎ）を距離ｄとして保存する。ステップＳ１０では
重心演算により垂直観察位置Ｙが計算される。なお、垂
直観察位置Ｙは、水平観察位置Ｘと同様に抽出画像の垂
直最小座標、垂直最大座標の中点から求めてもよい。
では、ステップＳ８で計算した差３０７（Ｘｍａｘ−X
ｍｉｎ）を距離ｄとして保存する。ステップＳ１０では
重心演算により垂直観察位置Ｙが計算される。なお、垂
直観察位置Ｙは、水平観察位置Ｘと同様に抽出画像の垂
直最小座標、垂直最大座標の中点から求めてもよい。
【００５３】その後、現在２値化画像に白色部分が存在
するしているため、ステップＳ１１では、カウンタ値を
初期値２５０ｍｓにセットし、さらに、ステップＳ１９
では、観察者フラグを観察者存在としてＦｌａｇ＝１に
セットする。そして、ステップＳ２０においてステップ
Ｓ７で求めた位置Ｘとステップ１０で求めた位置Ｙを観
察位置として出力する。
するしているため、ステップＳ１１では、カウンタ値を
初期値２５０ｍｓにセットし、さらに、ステップＳ１９
では、観察者フラグを観察者存在としてＦｌａｇ＝１に
セットする。そして、ステップＳ２０においてステップ
Ｓ７で求めた位置Ｘとステップ１０で求めた位置Ｙを観
察位置として出力する。
【００５４】ステップＳ２０で観察位置結果を出力後、
ステップＳ２１、ステップＳ２２、ステップＳ２３、ス
テップＳ２４と進み、次画面の予測観察位置が算出され
る。以下、次画面の予測観察位置を求める方法を、図４
を用いて説明する。
ステップＳ２１、ステップＳ２２、ステップＳ２３、ス
テップＳ２４と進み、次画面の予測観察位置が算出され
る。以下、次画面の予測観察位置を求める方法を、図４
を用いて説明する。
【００５５】図４は次画面の予測観察位置を算出する方
法を説明するための図である。
法を説明するための図である。
【００５６】ステップＳ２１では、図４に示すように現
在の画面の観察位置（Ｘ，Ｙ）４０２と前画面の観察位
置４０１（ＰＸ，ＰＹ）の差から速度ベクトル（ＶＸ，
ＶＹ）４０３を算出する。ここで、前画面で観察者が不
在であった場合、速度ベクトルは０に設定される。
在の画面の観察位置（Ｘ，Ｙ）４０２と前画面の観察位
置４０１（ＰＸ，ＰＹ）の差から速度ベクトル（ＶＸ，
ＶＹ）４０３を算出する。ここで、前画面で観察者が不
在であった場合、速度ベクトルは０に設定される。
【００５７】ステップＳ２２では観察位置速度制限処理
が行われ、観察位置速度が１５ｃｍ／ｓ以下の時は、ス
テップＳ２３に進み速度ベクトルの値を０にする。この
ような、ステップＳ２２、ステップＳ２３における観察
位置速度制限処理は、観察者の移動方向が逆転するとき
に発生するオーバーシュートや、画像計測誤差により発
生する速度ベクトルの誤差の影響を低減する目的で実施
されている。
が行われ、観察位置速度が１５ｃｍ／ｓ以下の時は、ス
テップＳ２３に進み速度ベクトルの値を０にする。この
ような、ステップＳ２２、ステップＳ２３における観察
位置速度制限処理は、観察者の移動方向が逆転するとき
に発生するオーバーシュートや、画像計測誤差により発
生する速度ベクトルの誤差の影響を低減する目的で実施
されている。
【００５８】ステップＳ２４では、図４に示すように、
現在の画面の観察位置（Ｘ，Ｙ）４０２に速度ベクトル
（ＶＸ，ＶＹ）４０３を加えることで予測観察位置（Ｎ
Ｘ，ＮＹ）４０４を求める。この後ステップＳ２５で、
現在の観察位置を保存し、ステップＳ３に戻り、次の画
像の処理が行われる。
現在の画面の観察位置（Ｘ，Ｙ）４０２に速度ベクトル
（ＶＸ，ＶＹ）４０３を加えることで予測観察位置（Ｎ
Ｘ，ＮＹ）４０４を求める。この後ステップＳ２５で、
現在の観察位置を保存し、ステップＳ３に戻り、次の画
像の処理が行われる。
【００５９】一方、ステップ８において差３０７が１cm
未満の場合、ステップＳ１６に進む。
未満の場合、ステップＳ１６に進む。
【００６０】図５は、観察者の片眼の瞳孔のみが２値化
画像の白色部分として抽出された場合の観察位置算出方
法を説明する図である。ここで、観察者の片眼の瞳孔の
みが２値化画像の白色部分として抽出された場合とは、
観察者の片眼の赤外光反射強度が低下した場合や、観察
者の片眼が遮られた場合、観察者が片眼のみを閉じた場
合である。
画像の白色部分として抽出された場合の観察位置算出方
法を説明する図である。ここで、観察者の片眼の瞳孔の
みが２値化画像の白色部分として抽出された場合とは、
観察者の片眼の赤外光反射強度が低下した場合や、観察
者の片眼が遮られた場合、観察者が片眼のみを閉じた場
合である。
【００６１】２値化画像に片眼のみが抽出された場合、
ステップＳ１６、ステップＳ１７、ステップＳ１８の観
察位置算出処理を行う。
ステップＳ１６、ステップＳ１７、ステップＳ１８の観
察位置算出処理を行う。
【００６２】ステップＳ１６では位置Ｘ５０３と前画面
で予測した予測観察位置ＮＸ４０４を比較し、位置Ｘ５
０３と予測観察位置ＮＸ４０４の差Ｘ−ＮＸが０以上で
あればステップＳ１７に進み、差Ｘ−ＮＸが０未満であ
ればステップＳ１８へ進む。例えば、差Ｘ−ＮＸが０以
上の場合ステップＳ１７で、図５に示すように、ステッ
プＳ８において求めた水平最大座標Ｘｍａｘ３０５から
前画面の処理で保存した距離ｄ５０４の１／２を減ずる
演算、すなわち、演算Ｘｍａｘ−ｄ／２の結果を観察位
置として、ステップＳ１９へ進む。
で予測した予測観察位置ＮＸ４０４を比較し、位置Ｘ５
０３と予測観察位置ＮＸ４０４の差Ｘ−ＮＸが０以上で
あればステップＳ１７に進み、差Ｘ−ＮＸが０未満であ
ればステップＳ１８へ進む。例えば、差Ｘ−ＮＸが０以
上の場合ステップＳ１７で、図５に示すように、ステッ
プＳ８において求めた水平最大座標Ｘｍａｘ３０５から
前画面の処理で保存した距離ｄ５０４の１／２を減ずる
演算、すなわち、演算Ｘｍａｘ−ｄ／２の結果を観察位
置として、ステップＳ１９へ進む。
【００６３】差Ｘ−ＮＸが０未満の場合、ステップＳ１
８で、ステップＳ８において求めた水平最小座標Ｘｍｉ
ｎ３０４から前画面の処理で保存した距離ｄ５０４の１
／２を加える演算、すなわち、演算Ｘｍｉｎ＋ｄ／２の
結果を観察位置として、ステップＳ１９へ進む。
８で、ステップＳ８において求めた水平最小座標Ｘｍｉ
ｎ３０４から前画面の処理で保存した距離ｄ５０４の１
／２を加える演算、すなわち、演算Ｘｍｉｎ＋ｄ／２の
結果を観察位置として、ステップＳ１９へ進む。
【００６４】ステップＳ１９以降の処理は差３０７が１
ｃｍ以上の場合と同様である。
ｃｍ以上の場合と同様である。
【００６５】次に、２値化画像に白色部分が一時的に抽
出されなくなり、水平最大座標、水平最小座標がともに
計測できなくなった場合の処理について説明する。ここ
で、２値化画像に白色部分が一時的に抽出されなくな
り、水平最大座標、水平最小座標がともに計測できなく
なった場合とは、観察者の両眼の赤外光反射強度が一時
的に低下した場合や、観察者の両眼が遮られた場合、観
察者に瞬目が発生した場合である。
出されなくなり、水平最大座標、水平最小座標がともに
計測できなくなった場合の処理について説明する。ここ
で、２値化画像に白色部分が一時的に抽出されなくな
り、水平最大座標、水平最小座標がともに計測できなく
なった場合とは、観察者の両眼の赤外光反射強度が一時
的に低下した場合や、観察者の両眼が遮られた場合、観
察者に瞬目が発生した場合である。
【００６６】ステップＳ４において、２値化画像上に白
色部分が抽出されなくなった場合において、抽出されな
くなった時点から２５０ｍｓ（１５／６０秒）以内であ
る場合、ステップ１２、ステップ１３、ステップ１４の
処理を行う。
色部分が抽出されなくなった場合において、抽出されな
くなった時点から２５０ｍｓ（１５／６０秒）以内であ
る場合、ステップ１２、ステップ１３、ステップ１４の
処理を行う。
【００６７】ステップＳ５において、観察者の白色部分
が抽出されなくなった瞬間（前画面では白色部分が抽出
されていて、現在の画面で白色部分が抽出されなくなっ
たとき）、ステップＳ５において観察者フラグはＦｌａ
ｇ＝１であるので、ステップ１２に進む。
が抽出されなくなった瞬間（前画面では白色部分が抽出
されていて、現在の画面で白色部分が抽出されなくなっ
たとき）、ステップＳ５において観察者フラグはＦｌａ
ｇ＝１であるので、ステップ１２に進む。
【００６８】ステップＳ１２ではカウンタ１１３が減算
計数を開始し、カウンタ値を１／６０秒だけ減少させ
る。ステップＳ１３ではカウンタ値が比較され、カウン
タ値が０以下の場合、瞳孔が抽出されなくなった時点か
ら２５０ｍｓ以上の時間を経過しているため観察者不在
と判定し、ステップＳ１５で観察者フラグをＦｌａｇ＝
０としてステップＳ２１に進む。
計数を開始し、カウンタ値を１／６０秒だけ減少させ
る。ステップＳ１３ではカウンタ値が比較され、カウン
タ値が０以下の場合、瞳孔が抽出されなくなった時点か
ら２５０ｍｓ以上の時間を経過しているため観察者不在
と判定し、ステップＳ１５で観察者フラグをＦｌａｇ＝
０としてステップＳ２１に進む。
【００６９】なお、カウンタ値は２５０ｍｓ（１５／６
０秒）からスタートし、１サイクルあたり１／６０秒ず
つ減少するので、カウンタ値が０になるのは白色部分が
抽出されなくなった時点から１５サイクル目である。
０秒）からスタートし、１サイクルあたり１／６０秒ず
つ減少するので、カウンタ値が０になるのは白色部分が
抽出されなくなった時点から１５サイクル目である。
【００７０】ステップＳ１３においてカウンタ値が０よ
り大きい場合は白色部分が抽出されなくなってから２５
０ｍｓ以内であるので、ステップＳ１４に進む。
り大きい場合は白色部分が抽出されなくなってから２５
０ｍｓ以内であるので、ステップＳ１４に進む。
【００７１】図６は２値化画像に白色部分が一時的に抽
出されなくなった場合の観察位置の決定方法を説明する
図である。
出されなくなった場合の観察位置の決定方法を説明する
図である。
【００７２】ステップＳ１４では、図６に示すように、
前画面において予測した予測観察位置（ＮＸ，ＮＹ）４
０４を現在の画面の観察位置とする。ここで、予測観察
位置（ＮＸ，ＮＹ）４０４は前画面の観察位置（ＰＸ，
ＰＹ）４０１に前画面の速度ベクトル（ＶＸ，ＶＹ）４
０３を加えたものである。この後、ステップ１９に進
み、ステップ１９以降、前述したものと同様の処理を行
う。
前画面において予測した予測観察位置（ＮＸ，ＮＹ）４
０４を現在の画面の観察位置とする。ここで、予測観察
位置（ＮＸ，ＮＹ）４０４は前画面の観察位置（ＰＸ，
ＰＹ）４０１に前画面の速度ベクトル（ＶＸ，ＶＹ）４
０３を加えたものである。この後、ステップ１９に進
み、ステップ１９以降、前述したものと同様の処理を行
う。
【００７３】以上、本発明の観察位置検出方法により、
観察者の両眼の瞳孔が２値化画像の白色部分として抽出
されている場合のみならず、片眼の瞳孔のみが白色部分
として抽出されている場合や、白色部分が一時的に抽出
されなくなった場合においても常に観察位置を検出する
ことができた。
観察者の両眼の瞳孔が２値化画像の白色部分として抽出
されている場合のみならず、片眼の瞳孔のみが白色部分
として抽出されている場合や、白色部分が一時的に抽出
されなくなった場合においても常に観察位置を検出する
ことができた。
【００７４】図７は本発明の観察位置検出装置を用いて
観察者の観察位置を検出した結果を示す図である。
観察者の観察位置を検出した結果を示す図である。
【００７５】図７において、丸いプロットは水平最大座
標７０２、四角いプロットは水平最小座標７０１、十字
型のプロットは検出された観察位置７０３を示す。な
お、区間７０４は水平最大座標と水平最小座標の差が１
ｃｍ未満であり、観察者の顔面画像の２値化画像におい
て左眼のみが白色部分となっている区間である。瞬目区
間７０５は観察者の顔面画像の２値化画像において白色
部分が存在しない区間である。
標７０２、四角いプロットは水平最小座標７０１、十字
型のプロットは検出された観察位置７０３を示す。な
お、区間７０４は水平最大座標と水平最小座標の差が１
ｃｍ未満であり、観察者の顔面画像の２値化画像におい
て左眼のみが白色部分となっている区間である。瞬目区
間７０５は観察者の顔面画像の２値化画像において白色
部分が存在しない区間である。
【００７６】図７に示すように、本発明の観察位置検出
装置により、瞳孔抽出画像の水平最小座標７０１と水平
最大座標７０２がそれぞれ毎秒６０回検出され、これら
の値のみを用いる簡易な方法で、両眼抽出時のみなら
ず、左眼のみが抽出されている区間７０４や、瞬目区間
７０５においても常に観察位置を検出することができ
た。
装置により、瞳孔抽出画像の水平最小座標７０１と水平
最大座標７０２がそれぞれ毎秒６０回検出され、これら
の値のみを用いる簡易な方法で、両眼抽出時のみなら
ず、左眼のみが抽出されている区間７０４や、瞬目区間
７０５においても常に観察位置を検出することができ
た。
【００７７】また、本観察位置検出装置の観察位置追従
型立体表示装置への適用例について述べる。
型立体表示装置への適用例について述べる。
【００７８】図８は本発明の観察位置検出装置を用いた
観察位置追従型立体表示装置の全体構成を示す図であ
る。本観察位置追従型立体表示装置において観察者８０
６はレンチキュラスクリーン８０５を通して立体画像を
観察する。図８において、図１に示した観察位置検出装
置は参照番号８０１で示されている。観察位置検出装置
８０１には光学系制御部８０２が接続されており、観察
者８０６の観察位置に応じて液晶プロジェクタ８０４内
の観察位置追従光学系機構部８０３が制御される。
観察位置追従型立体表示装置の全体構成を示す図であ
る。本観察位置追従型立体表示装置において観察者８０
６はレンチキュラスクリーン８０５を通して立体画像を
観察する。図８において、図１に示した観察位置検出装
置は参照番号８０１で示されている。観察位置検出装置
８０１には光学系制御部８０２が接続されており、観察
者８０６の観察位置に応じて液晶プロジェクタ８０４内
の観察位置追従光学系機構部８０３が制御される。
【００７９】本発明による観察位置検出装置を観察位置
追従型立体表示装置へ適用したところ、簡易な方法で観
察位置を非接触で正確に検出することが可能となり、観
察者が立体視をするための特殊なメガネや、位置を検出
するセンサ等を装着せずに、また、自然な体勢で立体映
像を観察できる立体表示装置を低コストで提供すること
ができた。
追従型立体表示装置へ適用したところ、簡易な方法で観
察位置を非接触で正確に検出することが可能となり、観
察者が立体視をするための特殊なメガネや、位置を検出
するセンサ等を装着せずに、また、自然な体勢で立体映
像を観察できる立体表示装置を低コストで提供すること
ができた。
【００８０】（本発明の第２の実施の形態）図９は、本
発明の観察位置検出装置の第２の実施の形態を示す図で
ある。
発明の観察位置検出装置の第２の実施の形態を示す図で
ある。
【００８１】本実施の形態の観察位置検出装置は、撮像
装置１００、画像処理装置１１０、電動雲台９０１から
構成される。
装置１００、画像処理装置１１０、電動雲台９０１から
構成される。
【００８２】撮像装置１００は第１の実施の形態と同様
に、ＣＣＤカメラ１０１、赤外光照明装置１０２、ハー
フミラー１０３から構成される。
に、ＣＣＤカメラ１０１、赤外光照明装置１０２、ハー
フミラー１０３から構成される。
【００８３】また、画像処理装置１１０も第１の実施の
形態と同様に、画像メモリ１１１、２値化処理部１１
２、カウンタ１１３、画像計測部１１４、観察位置決定
部１１５、観察位置予測部１１６から構成される。
形態と同様に、画像メモリ１１１、２値化処理部１１
２、カウンタ１１３、画像計測部１１４、観察位置決定
部１１５、観察位置予測部１１６から構成される。
【００８４】撮像装置１０１は電動雲台９０１に取り付
けられ、この電動雲台９０１に位置予測部１１６の出力
の次画面予測位置情報１２１を入力することにより、撮
像画像の中心位置が次画面の予測観察位置になるように
電動雲台９０１が制御される。したがって、電動雲台９
０１により撮像領域が移動されるので第１の実施の形態
よりも広い範囲で観察位置を検出することが可能であ
る。
けられ、この電動雲台９０１に位置予測部１１６の出力
の次画面予測位置情報１２１を入力することにより、撮
像画像の中心位置が次画面の予測観察位置になるように
電動雲台９０１が制御される。したがって、電動雲台９
０１により撮像領域が移動されるので第１の実施の形態
よりも広い範囲で観察位置を検出することが可能であ
る。
【００８５】図１０は電動雲台および撮像装置の撮像領
域を説明するための図である。
域を説明するための図である。
【００８６】図１０に示すように、電動雲台９０１は水
平回転方向９０２、仰角回転方向９０３に回転し、撮像
領域９０４を移動させることができる。ここで、ＣＣＤ
カメラ１０１の撮像距離は２ｍであり、この撮像距離に
おいて観察者の顔面上の画像の分解能が１ｍｍになるよ
うにレンズ倍率を調整してある。電動雲台９０１はサー
ボモータで駆動され、１／６０秒毎に方向が制御され
る。電動雲台の各方向の回転角は±３０度である。ここ
で、撮像装置の移動には電動雲台９０１の代わりに、リ
ニアステージ等を用いてもよい。
平回転方向９０２、仰角回転方向９０３に回転し、撮像
領域９０４を移動させることができる。ここで、ＣＣＤ
カメラ１０１の撮像距離は２ｍであり、この撮像距離に
おいて観察者の顔面上の画像の分解能が１ｍｍになるよ
うにレンズ倍率を調整してある。電動雲台９０１はサー
ボモータで駆動され、１／６０秒毎に方向が制御され
る。電動雲台の各方向の回転角は±３０度である。ここ
で、撮像装置の移動には電動雲台９０１の代わりに、リ
ニアステージ等を用いてもよい。
【００８７】第２の実施の形態の観察位置検出装置は、
第１の実施の形態の観察位置検出装置と同様に、図２の
フローチャートに示す観察位置検出方法により観察位置
検出を行う。
第１の実施の形態の観察位置検出装置と同様に、図２の
フローチャートに示す観察位置検出方法により観察位置
検出を行う。
【００８８】ただし、観察者が不在（Ｆｌａｇ＝０）の
場合は、撮像領域は一定のパターンで走査され、広い範
囲から観察者を探索する動作を行う。
場合は、撮像領域は一定のパターンで走査され、広い範
囲から観察者を探索する動作を行う。
【００８９】本発明の観察位置検出装置により観察位置
を検出した結果、第１の実施の形態と同様に、瞳孔抽出
画像の水平最小座標と水平最大座標がそれぞれ毎秒６０
回検出され、これらの値のみを用いる簡易な方法で、両
眼抽出時のみならず、片眼のみ抽出時や、瞬目時におい
ても毎秒６０回常に観察位置を検出することができた。
を検出した結果、第１の実施の形態と同様に、瞳孔抽出
画像の水平最小座標と水平最大座標がそれぞれ毎秒６０
回検出され、これらの値のみを用いる簡易な方法で、両
眼抽出時のみならず、片眼のみ抽出時や、瞬目時におい
ても毎秒６０回常に観察位置を検出することができた。
【００９０】また、本発明の第２の実施の形態の観察位
置検出装置では電動雲台を備えたため、観察位置測定範
囲を水平、垂直ともに２ｍ５０ｃｍまで拡大することが
できた。 そして、本実施の形態の観察位置検出装置を
用いた観察位置追従型立体表示装置の全体構成は、図８
に示した第１の実施の形態を観察位置追従型立体表示装
置に適用した場合と同様であり、本実施の形態の観察位
置位置検出装置は図８の参照番号８０１で示されてい
る。
置検出装置では電動雲台を備えたため、観察位置測定範
囲を水平、垂直ともに２ｍ５０ｃｍまで拡大することが
できた。 そして、本実施の形態の観察位置検出装置を
用いた観察位置追従型立体表示装置の全体構成は、図８
に示した第１の実施の形態を観察位置追従型立体表示装
置に適用した場合と同様であり、本実施の形態の観察位
置位置検出装置は図８の参照番号８０１で示されてい
る。
【００９１】以上、第１、第２の実施の形態において、
照明装置の光軸は正確にＣＣＤカメラの光軸と互いに同
軸でなくても、観察者の瞳孔が明るく撮像できれば同軸
近傍の配置でもよい。
照明装置の光軸は正確にＣＣＤカメラの光軸と互いに同
軸でなくても、観察者の瞳孔が明るく撮像できれば同軸
近傍の配置でもよい。
【００９２】メガネなど鏡面物体の反射光によるノイズ
を除去する目的で、照明装置や撮像装置の光軸上に偏光
板や１／４波長板などを挿入してもよい。
を除去する目的で、照明装置や撮像装置の光軸上に偏光
板や１／４波長板などを挿入してもよい。
【００９３】撮像装置はＮＴＳＣ規格以外にＰＡＬ規
格、ＳＥＣＡＭ規格などの各種規格のものを使用しても
よく、またこれらより水平及び垂直周波数の高いものを
用いてもよい。
格、ＳＥＣＡＭ規格などの各種規格のものを使用しても
よく、またこれらより水平及び垂直周波数の高いものを
用いてもよい。
【００９４】画像メモリは各種解像度ものを用いてもよ
い。
い。
【００９５】画像処理装置における各種処理は電子計算
機以外に、専用のデジタル論理回路やオペアンプなどに
よるアナログ演算回路を用いてもよい。
機以外に、専用のデジタル論理回路やオペアンプなどに
よるアナログ演算回路を用いてもよい。
【００９６】観察者が反射鏡等を両眼の中点に装着する
場合においても、ステップＳ８の処理を行わなければ、
本観察位置検出装置及び検出方法が適用できる。
場合においても、ステップＳ８の処理を行わなければ、
本観察位置検出装置及び検出方法が適用できる。
【００９７】観察者の眼部分が抽出できるのであれば、
光軸を同軸としない照明を用いてもよいし、赤外光以外
の光を用いてもよい。
光軸を同軸としない照明を用いてもよいし、赤外光以外
の光を用いてもよい。
【００９８】眼部分の抽出は強膜、虹彩など、瞳孔以外
の部分を抽出する方法でもよい。
の部分を抽出する方法でもよい。
【００９９】眼部分の抽出には各種画像処理を用いても
よい。
よい。
【０１００】次画面予測位置は速度ベクトルで求める他
に、予め調査しておいた視点速度と予測位置の統計的関
係を記憶したルックアップテーブルを参照する方法を用
いてもよい。
に、予め調査しておいた視点速度と予測位置の統計的関
係を記憶したルックアップテーブルを参照する方法を用
いてもよい。
【０１０１】予測位置は速度ベクトルの他に加速度ベク
トルを加えてもよいし、それより高次の微分情報を用い
てもよい。
トルを加えてもよいし、それより高次の微分情報を用い
てもよい。
【０１０２】
【発明の効果】以上説明したように本発明は、観察者の
眼部分の抽出画像の最小座標と最大座標のみを計測して
非接触で観察位置を検出できるという効果がある。
眼部分の抽出画像の最小座標と最大座標のみを計測して
非接触で観察位置を検出できるという効果がある。
【０１０３】また、計測した最小座標と最大座標の差が
小さい場合には、最小座標と最大座標の中点と時系列画
像における前画面で求めた観察位置予測結果を比較し、
両眼抽出時に記憶しておいた上記最大座標と最小座標の
差の１／２の値を用いて観察位置を決定することができ
る。
小さい場合には、最小座標と最大座標の中点と時系列画
像における前画面で求めた観察位置予測結果を比較し、
両眼抽出時に記憶しておいた上記最大座標と最小座標の
差の１／２の値を用いて観察位置を決定することができ
る。
【０１０４】また、瞬目時にも観察位置を予測すること
ができる。
ができる。
【０１０５】本発明において観察者の眼部分の抽出画像
から取得すべき情報は抽出画像の最小座標と最大座標の
みであるため、左右それぞれの眼の位置を独立に求める
複雑な装置や方法を用いる必要がなく、簡易な方法で、
両眼抽出時のみならず、片眼のみ抽出時や、瞬目時にお
いても常に観察位置を検出することができる。
から取得すべき情報は抽出画像の最小座標と最大座標の
みであるため、左右それぞれの眼の位置を独立に求める
複雑な装置や方法を用いる必要がなく、簡易な方法で、
両眼抽出時のみならず、片眼のみ抽出時や、瞬目時にお
いても常に観察位置を検出することができる。
【０１０６】また、観察位置予測結果を用いて撮像装置
の撮像位置を移動させることにより、広い範囲で観察位
置を検出することができる。
の撮像位置を移動させることにより、広い範囲で観察位
置を検出することができる。
【図１】本発明の観察位置検出装置の第１の実施の形態
を示す図である。
を示す図である。
【図２】本発明の第１の実施の形態の観察位置検出装置
における観察位置検出方法を示すフローチャートであ
る。
における観察位置検出方法を示すフローチャートであ
る。
【図３】観察者の顔面の２値化画像の各値を説明するた
めの図である。
めの図である。
【図４】次画面の予測観察位置を算出する方法を説明す
るための図である。
るための図である。
【図５】観察者の片眼の瞳孔のみが２値化画像の白色部
分として抽出された場合の観察位置算出方法を説明する
図である。
分として抽出された場合の観察位置算出方法を説明する
図である。
【図６】２値化画像に瞳孔が一時的に抽出されなくなっ
た場合の観察位置の決定方法を説明する図である。
た場合の観察位置の決定方法を説明する図である。
【図７】本発明の観察位置検出装置を用いて観察者の観
察位置を検出した結果を示す図である。
察位置を検出した結果を示す図である。
【図８】本発明の観察位置検出装置を用いた観察位置追
従型立体表示装置の全体構成を示す図である。
従型立体表示装置の全体構成を示す図である。
【図９】本発明の観察位置検出装置の第２の実施の形態
を示す図である。
を示す図である。
【図１０】電動雲台および撮像装置の撮像領域を説明す
るための図である。
るための図である。
【図１１】従来の目領域抽出装置の動作原理を示す図で
ある。
ある。
【符号の説明】 １ 検出対象者 ２ 右眼 ３ 左眼 ４ 右眼探索領域 ５ 左眼探索領域 ６、１０ 探索領域 ７ 過去の目領域の位置 ８ 移動ベクトル ９ 抽出されなかった眼 １１ 全領域 １００ 撮像装置 １０１ ＣＣＤカメラ １０２ 赤外光照明装置 １０３ ハーフミラー １１０ 画像処理装置 １１１ 画像メモリ １１２ ２値化処理部 １１３ カウンタ １１４ 画像計測部 １１５ 観察位置決定部 １１６ 観察位置予測部 １２１ 次画面予測位置情報 １５０、８０６ 観察者 １５１ 瞳孔 ３０３ 抽出された瞳孔部分 ３０４ 水平最小座標Ｘｍｉｎ ３０５ 水平最大座標Ｘｍａｘ ３０６ 観察位置 ３０７ 差 ４０１ 前画面の観察位置（ＰＸ，ＰＹ） ４０２ 現在の画面の観察位置（Ｘ，Ｙ） ４０３ 速度ベクトル（ＶＸ，ＶＹ） ４０４ 予測観察位置（ＮＸ，ＮＹ） ５０３ 位置Ｘ ５０４ 距離ｄ ７０１ 水平最小座標 ７０２ 水平最大座標 ７０３ 観察位置 ７０４ 区間 ７０５ 瞬目区間 ８０１ 観察位置検出装置 ８０２ 光学系制御部 ８０３ 観察位置追従光学系機構部 ８０４ 液晶プロジェクタ ８０５ レンチキュラスクリーン ９０１ 電動雲台 ９０２ 水平回転方向 ９０３ 仰角回転方向 ９０４ 撮像領域
【手続補正書】
【提出日】平成１１年１月１３日
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正内容】
【特許請求の範囲】
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正内容】
【００１２】
【課題を解決するための手段】本発明の観察位置検出装
置は、撮像装置と画像処理装置とを備え、観察者の顔面
を撮像した画像から観察者の眼部分を抽出して、観察者
の両眼の中点を観察位置として検出する観察位置検出装
置において、画像処理装置は、眼部分の最小座標と最大
座標とを計測する画像計測部と、観察位置決定部と、観
察位置決定部の結果から時系列画像における次の観察位
置を予測し記憶する観察位置予測部とを備え、観察位置
決定部は、最大座標と最小座標の差を計算する手段と、
差を所定の値と比較する比較手段と、最小座標と最大座
標と比較手段の結果と観察位置予測部の結果とを参照し
て観察位置を決定する手段とを備えている。
置は、撮像装置と画像処理装置とを備え、観察者の顔面
を撮像した画像から観察者の眼部分を抽出して、観察者
の両眼の中点を観察位置として検出する観察位置検出装
置において、画像処理装置は、眼部分の最小座標と最大
座標とを計測する画像計測部と、観察位置決定部と、観
察位置決定部の結果から時系列画像における次の観察位
置を予測し記憶する観察位置予測部とを備え、観察位置
決定部は、最大座標と最小座標の差を計算する手段と、
差を所定の値と比較する比較手段と、最小座標と最大座
標と比較手段の結果と観察位置予測部の結果とを参照し
て観察位置を決定する手段とを備えている。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正内容】
【００１８】本発明の観察位置検出方法は、観察者の顔
面を撮像した画像から観察者の眼部分を抽出して、観察
者の両眼の中点を観察位置として検出する観察位置検出
方法において、観察位置を決定する際に、眼部分の最小
座標と最大座標とを計測し、最大座標と最小座標の差を
計算し、時系列画像における次の観察位置を予測し記憶
し、最小座標と最大座標と差を所定の値と比較した結果
と次の観察位置とを参照する信号処理手順により観察位
置を決定する。
面を撮像した画像から観察者の眼部分を抽出して、観察
者の両眼の中点を観察位置として検出する観察位置検出
方法において、観察位置を決定する際に、眼部分の最小
座標と最大座標とを計測し、最大座標と最小座標の差を
計算し、時系列画像における次の観察位置を予測し記憶
し、最小座標と最大座標と差を所定の値と比較した結果
と次の観察位置とを参照する信号処理手順により観察位
置を決定する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正内容】
【００１９】観察者の顔面を撮像する際に、予測された
前記次の観察位置に応じて前記撮像装置の撮像領域を可
変させてもよい。
前記次の観察位置に応じて前記撮像装置の撮像領域を可
変させてもよい。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正内容】
【００２０】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値以上の場合、最大座標と最小座
標の中点を観察位置とするとともに、差の値を記憶する
信号処理手順により観察位置を決定してもよい。
と最小座標の差が一定値以上の場合、最大座標と最小座
標の中点を観察位置とするとともに、差の値を記憶する
信号処理手順により観察位置を決定してもよい。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正内容】
【００２１】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値未満の場合、最大座標と最小座
標の中点と、観察位置予測部に記憶してある前の観察位
置予測結果とを比較する信号処理手順により観察位置を
決定してもよい。
と最小座標の差が一定値未満の場合、最大座標と最小座
標の中点と、観察位置予測部に記憶してある前の観察位
置予測結果とを比較する信号処理手順により観察位置を
決定してもよい。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正内容】
【００２２】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値未満の場合、最大座標と最小座
標の差が一定値以上の場合に記憶しておいた最大座標と
最小座標の差の１／２の値を用いて観察位置を決定する
信号処理手順により観察位置を決定してもよい。
と最小座標の差が一定値未満の場合、最大座標と最小座
標の差が一定値以上の場合に記憶しておいた最大座標と
最小座標の差の１／２の値を用いて観察位置を決定する
信号処理手順により観察位置を決定してもよい。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正内容】
【００２３】また、観察位置を決定する際に、最大座標
と最小座標を計測できなかった場合、観察位置予測部で
求めた前の予測観察位置を観察位置とする信号処理手順
により観察位置を決定してもよい。 ─────────────────────────────────────────────────────
と最小座標を計測できなかった場合、観察位置予測部で
求めた前の予測観察位置を観察位置とする信号処理手順
により観察位置を決定してもよい。 ─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成１１年１月１４日
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正内容】
【特許請求の範囲】
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正内容】
【００１２】
【課題を解決するための手段】本発明の観察位置検出装
置は、撮像装置と画像処理装置とを備え、観察者の顔面
を撮像した画像から観察者の眼部分を抽出して、観察者
の両眼の中点を観察位置として検出する観察位置検出装
置において、画像処理装置は、眼部分の最小座標と最大
座標とを計測する画像計測部と、観察位置決定部と、観
察位置決定部の結果から時系列画像における次の観察位
置を予測し記憶する観察位置予測部とを備え、観察位置
決定部は、最大座標と最小座標の差を計算する手段と、
差を所定の値と比較する比較手段と、最小座標と最大座
標と比較手段の結果と観察位置予測部の結果とを参照し
て観察位置を決定する手段とを備えている。
置は、撮像装置と画像処理装置とを備え、観察者の顔面
を撮像した画像から観察者の眼部分を抽出して、観察者
の両眼の中点を観察位置として検出する観察位置検出装
置において、画像処理装置は、眼部分の最小座標と最大
座標とを計測する画像計測部と、観察位置決定部と、観
察位置決定部の結果から時系列画像における次の観察位
置を予測し記憶する観察位置予測部とを備え、観察位置
決定部は、最大座標と最小座標の差を計算する手段と、
差を所定の値と比較する比較手段と、最小座標と最大座
標と比較手段の結果と観察位置予測部の結果とを参照し
て観察位置を決定する手段とを備えている。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正内容】
【００１８】本発明の観察位置検出方法は、観察者の顔
面を撮像した画像から観察者の眼部分を抽出して、観察
者の両眼の中点を観察位置として検出する観察位置検出
方法において、観察位置を決定する際に、眼部分の最小
座標と最大座標とを計測し、最大座標と最小座標の差を
計算し、時系列画像における次の観察位置を予測し記憶
し、最小座標と最大座標と差を所定の値と比較した結果
と次の観察位置とを参照する信号処理手順により観察位
置を決定する。
面を撮像した画像から観察者の眼部分を抽出して、観察
者の両眼の中点を観察位置として検出する観察位置検出
方法において、観察位置を決定する際に、眼部分の最小
座標と最大座標とを計測し、最大座標と最小座標の差を
計算し、時系列画像における次の観察位置を予測し記憶
し、最小座標と最大座標と差を所定の値と比較した結果
と次の観察位置とを参照する信号処理手順により観察位
置を決定する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正内容】
【００１９】また、観察者の顔面を撮像する際に、予測
された前記次の観察位置に応じて前記撮像装置の撮像領
域を可変させてもよい。
された前記次の観察位置に応じて前記撮像装置の撮像領
域を可変させてもよい。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正内容】
【００２０】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値以上の場合、最大座標と最小座
標の中点を観察位置とするとともに、差の値を記憶する
信号処理手順により観察位置を決定してもよい。
と最小座標の差が一定値以上の場合、最大座標と最小座
標の中点を観察位置とするとともに、差の値を記憶する
信号処理手順により観察位置を決定してもよい。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正内容】
【００２１】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値未満の場合、最大座標と最小座
標の中点と、観察位置予測部に記憶してある前の観察位
置予測結果とを比較する信号処理手順により観察位置を
決定してもよい。
と最小座標の差が一定値未満の場合、最大座標と最小座
標の中点と、観察位置予測部に記憶してある前の観察位
置予測結果とを比較する信号処理手順により観察位置を
決定してもよい。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正内容】
【００２２】また、観察位置を決定する際に、最大座標
と最小座標の差が一定値未満の場合、最大座標と最小座
標の差が一定値以上の場合に記憶しておいた最大座標と
最小座標の差の１／２の値を用いて観察位置を決定する
信号処理手順により観察位置を決定してもよい。
と最小座標の差が一定値未満の場合、最大座標と最小座
標の差が一定値以上の場合に記憶しておいた最大座標と
最小座標の差の１／２の値を用いて観察位置を決定する
信号処理手順により観察位置を決定してもよい。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正内容】
【００２３】また、観察位置を決定する際に、最大座標
と最小座標を計測できなかった場合、観察位置予測部で
求めた前の予測観察位置を観察位置とする信号処理手順
により観察位置を決定してもよい。
と最小座標を計測できなかった場合、観察位置予測部で
求めた前の予測観察位置を観察位置とする信号処理手順
により観察位置を決定してもよい。
Claims (12)
- 【請求項１】 撮像装置と画像処理装置とを備え、観察
者の顔面を撮像した画像から前記観察者の眼部分を抽出
して、前記観察者の両眼の中点を観察位置として検出す
る観察位置検出装置において、 前記画像処理装置は、前記眼部分の最小座標と最大座標
とを計測する画像計測部と、前記最小座標と前記最大座
標とから観察位置を決定する観察位置決定部と、前記観
察位置決定部の結果から次の観察位置を予測し記憶する
観察位置予測部とを備えたことを特徴とする観察位置検
出装置。 - 【請求項２】 前記画像処理装置は、予測された前記次
の観察位置に応じて前記撮像装置の撮像領域を可変させ
る撮像領域可変手段を備えた請求項１に記載の観察位置
検出装置。 - 【請求項３】 前記観察位置決定部は、前記最大座標と
前記最小座標の差が一定値以上の場合、前記最大座標と
前記最小座標の中点を観察位置とするとともに、前記差
の値を記憶する請求項１または請求項２に記載の観察位
置検出装置。 - 【請求項４】 前記観察位置決定部は、前記最大座標と
前記最小座標の差が一定値未満の場合、前記最大座標と
前記最小座標の中点と、前記観察位置予測部に記憶して
ある前の観察位置予測結果とを比較する手段を備えた請
求項１または請求項２に記載の観察位置検出装置。 - 【請求項５】 前記観察位置決定部は、前記最大座標と
前記最小座標の差が一定値未満の場合、前記最大座標と
前記最小座標の差が一定値以上の場合に記憶しておいた
前記最大座標と前記最小座標の差の１／２の値を用いて
観察位置を決定する請求項１または請求項２に記載の観
察位置検出装置。 - 【請求項６】 前記観察位置決定部は、前記最大座標と
前記最小座標を計測できなかった場合、前記観察位置予
測部で求めた前の予測観察位置を観察位置とする請求項
１または請求項２に記載の観察位置検出装置。 - 【請求項７】 撮像装置と画像処理装置とを備え、観察
者の顔面を撮像した画像から前記観察者の眼部分を抽出
して、前記観察者の両眼の中点を観察位置として検出す
る観察位置検出装置の観察位置検出方法において、 前記眼部分の最小座標と最大座標とを計測し、前記最小
座標と前記最大座標とから観察位置を決定するととも
に、前記観察位置から次の観察位置を予測し記憶するこ
とを特徴とする請求項１に記載の観察位置検出装置の観
察位置検出方法。 - 【請求項８】 撮像装置と画像処理装置とを備え、観察
者の顔面を撮像した画像から前記観察者の眼部分を抽出
して、前記観察者の両眼の中点を観察位置と して検出する観察位置検出装置の観察位置検出方法にお
いて、前記眼部分の最小座標と最大座標とを計測し、前
記最小座標と前記最大座標とから観察位置を決定すると
ともに、前記観察位置から次の観察位置を予測し記憶
し、予測された前記次の観察位置に応じて前記撮像装置
の撮像領域を可変させることを特徴とする請求項２に記
載の観察位置検出装置の観察位置検出方法。 - 【請求項９】 前記観察位置を決定する際に、前記最大
座標と前記最小座標の差が一定値以上の場合、前記最大
座標と前記最小座標の中点を観察位置とするとともに、
前記差の値を記憶する請求項７または請求項８に記載の
観察位置検出装置の観察位置検出方法。 - 【請求項１０】 前記観察位置を決定する際に、前記最
大座標と前記最小座標の差が一定値未満の場合、前記最
大座標と前記最小座標の中点と、前記観察位置予測部に
記憶してある前の観察位置予測結果とを比較する請求項
７または請求項８に記載の観察位置検出装置の観察位置
検出方法。 - 【請求項１１】 前記観察位置を決定する際に、前記最
大座標と前記最小座標の差が一定値未満の場合、前記最
大座標と前記最小座標の差が一定値以上の場合に記憶し
ておいた前記最大座標と前記最小座標の差の１／２の値
を用いて観察位置を決定する請求項７または請求項８に
記載の観察位置検出装置の観察位置検出方法。 - 【請求項１２】 前記観察位置を決定する際に、前記最
大座標と前記最小座標を計測できなかった場合、前記観
察位置予測部で求めた前の予測観察位置を観察位置とす
る請求項７または請求項８に記載の観察位置検出装置の
観察位置検出方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10001971A JP2904204B1 (ja) | 1998-01-08 | 1998-01-08 | 観察位置検出装置及びその観察位置検出方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10001971A JP2904204B1 (ja) | 1998-01-08 | 1998-01-08 | 観察位置検出装置及びその観察位置検出方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2904204B1 JP2904204B1 (ja) | 1999-06-14 |
| JPH11201723A true JPH11201723A (ja) | 1999-07-30 |
Family
ID=11516460
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP10001971A Expired - Lifetime JP2904204B1 (ja) | 1998-01-08 | 1998-01-08 | 観察位置検出装置及びその観察位置検出方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2904204B1 (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009169109A (ja) * | 2008-01-16 | 2009-07-30 | Panasonic Electric Works Co Ltd | ミラーシステム |
| EP2418862A2 (en) * | 2010-08-09 | 2012-02-15 | LG Electronics Inc. | System, apparatus, and method for displaying 3-dimensional image and location tracking device |
| JP2014195141A (ja) * | 2013-03-28 | 2014-10-09 | Japan Display Inc | 表示装置 |
| JP2015232633A (ja) * | 2014-06-10 | 2015-12-24 | セイコーエプソン株式会社 | 表示装置 |
| JP2020170979A (ja) * | 2019-04-05 | 2020-10-15 | 日本放送協会 | 立体画像生成装置及びそのプログラム |
-
1998
- 1998-01-08 JP JP10001971A patent/JP2904204B1/ja not_active Expired - Lifetime
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009169109A (ja) * | 2008-01-16 | 2009-07-30 | Panasonic Electric Works Co Ltd | ミラーシステム |
| EP2418862A2 (en) * | 2010-08-09 | 2012-02-15 | LG Electronics Inc. | System, apparatus, and method for displaying 3-dimensional image and location tracking device |
| JP2014195141A (ja) * | 2013-03-28 | 2014-10-09 | Japan Display Inc | 表示装置 |
| JP2015232633A (ja) * | 2014-06-10 | 2015-12-24 | セイコーエプソン株式会社 | 表示装置 |
| JP2020170979A (ja) * | 2019-04-05 | 2020-10-15 | 日本放送協会 | 立体画像生成装置及びそのプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2904204B1 (ja) | 1999-06-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6075557A (en) | Image tracking system and method and observer tracking autostereoscopic display | |
| US12165429B2 (en) | Detecting device, detecting method, and recording medium | |
| KR20120057033A (ko) | Ｉｐｔｖ 제어를 위한 원거리 시선 추적 장치 및 방법 | |
| JP2917953B2 (ja) | 視点位置検出装置 | |
| JP4500992B2 (ja) | 三次元視点計測装置 | |
| JPH08313843A (ja) | 視線追従方式による広視野高解像度映像提示装置 | |
| JPH1124603A (ja) | 情報表示装置及び情報収集装置 | |
| EP3042341A1 (en) | Method and apparatus for eye detection from glints | |
| WO2006118057A1 (ja) | 画像表示装置 | |
| JP2904204B1 (ja) | 観察位置検出装置及びその観察位置検出方法 | |
| JP3759187B2 (ja) | 両眼視機能訓練装置 | |
| JP2005058399A (ja) | ディスプレイ装置 | |
| JPH0449943A (ja) | 眼球運動分析装置 | |
| Ebisawa | Realtime 3D position detection of human pupil. | |
| JP6608208B2 (ja) | 画像表示装置 | |
| JP3976860B2 (ja) | 立体映像撮像装置 | |
| JPH06323832A (ja) | 車両用インターフェイス | |
| JP2001061785A (ja) | 視線検出方法及びその装置 | |
| JPH1172697A (ja) | 視点位置検出方法及び検出装置 | |
| JP3351386B2 (ja) | 観察者の観察位置検出方法およびその装置 | |
| JP2000166873A (ja) | 視線検出手段位置調整装置 | |
| JP7444204B2 (ja) | 制御装置、検知装置、制御方法、およびプログラム | |
| JPH1097376A (ja) | 視線操作装置 | |
| JP2020181347A (ja) | 監視表示装置 | |
| JP2000050313A (ja) | 頭部搭載型ディスプレイ装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080326 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090326 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090326 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100326 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100326 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110326 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110326 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120326 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120326 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130326 Year of fee payment: 14 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130326 Year of fee payment: 14 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130326 Year of fee payment: 14 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140326 Year of fee payment: 15 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |