JPH1073662A - 眼検出システム - Google Patents

眼検出システム

Info

Publication number
JPH1073662A
JPH1073662A JP20808397A JP20808397A JPH1073662A JP H1073662 A JPH1073662 A JP H1073662A JP 20808397 A JP20808397 A JP 20808397A JP 20808397 A JP20808397 A JP 20808397A JP H1073662 A JPH1073662 A JP H1073662A
Authority
JP
Japan
Prior art keywords
light source
eye
detector
deflector
laser
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP20808397A
Other languages
English (en)
Inventor
Geraint Robinson Michael
ジェレイント ロビンソン マイケル
Graig Tombling
トンブリング クレイグ
Nicolas Mayhew
メイヒュウ ニコラス
Robert George Brown Watling
ジョージ ワォトリング ブラウン ロバート
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of JPH1073662A publication Critical patent/JPH1073662A/ja
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Theoretical Computer Science (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Eye Examination Apparatus (AREA)
  • Position Input By Displaying (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

(57)【要約】 【課題】 眼凝視検出に用いられ得、既知のシステムに
比べて精度が向上し、光効率が高く、且つコンピュータ
計算上の要件が少ない眼検出システムを提供する。 【解決手段】 眼検出システムは、赤外線レーザダイオ
ード２などの赤外線放射の発散ビームを発する光源を備
えている。空間光変調器４は、ビームを走査する偏向器
として働くように制御される。検出器７は、眼１２によ
って逆反射され走査ビームの光路に沿って戻る放射を検
出する。ＳＬＭ４の偏向角および、位置感応検出器７に
おける検出器上の照射中心位置が、眼１２の瞳孔の中心
への角度を決定するために用いられ得る。続いて他の光
源９および１０に対応する輝きへの角度を検出すること
により、画面１上の眼の凝視位置が決定され得る。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、眼検出システムに
関する。
【０００２】
【従来の技術】眼検出システムは、コンピュータ画面な
どの画面上の観察者が凝視する領域を検出する眼凝視追
跡システムで用いられ得る。
【０００３】既知の眼凝視検出システムは以下に示す文
献に開示されている。
【０００４】−T.E. Hutchisonら、"Human-Computer In
teraction Using Eye-gaze input"、IEEE Trans. Sys.,
Man, Cybern.、第19巻、1527頁、1989 −Y. Ebisawa、"Improved video-based eye-gaze detec
tion method”、Proc.IMTC'94、963〜966頁、1994 −K.P. White Jr.、T.E. HutchisonおよびJ.M. Carle
y、"Spatially dynamiccalibration of an eye-trackin
g system”、ＩＥＥＥ Ｔｒａｎｓ． Ｓｙｓｔ．，
Ｍａｎ， Ｃｙｂｅｒｎ，、第２３巻、1162〜68頁、19
93 −A. GeeおよびR. Cipollo、"Non-intrusive gaze trac
king for human-computer interaction”,Proc. Mech.
Mach. Vis、1994 眼からは２つの反射（光）が検出される。最初の反射
（光）は、眼の瞳孔を透過し網膜から反射する光によっ
て生じる。第２の反射（光）は、「輝き(glint）」とし
て知られるもので、角膜の表面から反射する光によって
形成される。例えば１つの照射源を用いて角膜からの反
射を検出し、いくつかの照射源を用いて輝きを検出する
ことによって、眼の位置およびその凝視の方向を計算す
ることができる。
【０００５】このようなシステムでは、観察者の顔によ
って占領されると考えられる画面の前の領域を、例えば
赤外線発光ダイオードで照射する。次に観察者の顔の二
次元画像を、例えば電荷結合素子に基づくビデオカメラ
によって捕らえる。そしてこの画像を複合画像処理し
て、光源光の眼からの反射を検出する。
【０００６】
【発明が解決しようとする課題】このタイプの配置には
いくつかの欠点がある。例えば、観察者の眼を識別する
ためには比較的複雑な画像処理が必要である。これは実
質的な処理能力を必要とし、このためには比較的強力な
データプロセッサおよび／または比較的長い処理時間が
必要である。さらに、様々な反射（光）の検出の解像度
は、ビデオカメラの解像度によって限定される。ビデオ
カメラは、観察者によって占領され得る空間領域の二次
元画像を捕らえ、検出すべき反射がこの捕らえた画像の
比較的小さな部分しか占めないようにする必要がある。
電荷結合素子（ＣＣＤ）タイプのビデオカメラでは、画
像の中の反射（光）の大きさを、カメラの本来の解像度
に匹敵するようにすることができる。典型的には、観察
者の眼がＣＣＤの光感応表面のうちの比較的小さな割合
の部分に画像化されるように、観察者の顔全体がＣＣＤ
に画像化される。ＣＣＤの解像度には限度があり、この
ため反射（光）の位置を決定する際の精度は限定され
る。さらに、光源の品質も決定の精度にとって重要な要
因である。
【０００７】本発明は、かかる問題点を解決するための
ものであって、その目的は、眼凝視検出に用いられ得、
既知のシステムに比べて精度が向上し、光効率が高く、
且つコンピュータ計算上の要件が少ない眼検出システム
を提供することにある。
【０００８】
【課題を解決するための手段】本発明の眼検出システム
は、光放射入射ビームを発する光源と、該入射ビームの
光路に配置された走査ビームを生成する制御可能な偏向
器と、眼から反射され該走査ビームの光路に沿って戻る
放射を検出する検出器とを備え、そのことによって、上
記目的が達成される。
【０００９】偏向器は制御可能な回折要素を備え得る。
偏向器は空間光変調器を備え得る。偏向器は、Ａ、Ｂ、
ＣおよびＤが整数であるとき、Ａ×Ｂ個の実質的に同じ
パターンの配列であって、各パターンはＣ×Ｄ個の画素
の配列よりなるパターン配列を変調器に書く変調器コン
トローラをさらに備え得る。変調器コントローラは、走
査ビームを（Ｃ×Ｄ）個の異なる方向に偏向するために
（Ｃ×Ｄ）個の異なるパターンから同じパターンのそれ
ぞれを選択するようにし得る。異なるパターンのそれぞ
れは、走査ビームに発散を生成するようにし得る。光源
は、変調器のＣ×Ｄ個の画素の配列を入射ビームで照射
するようにし得る。
【００１０】検出器は、偏向器によって光源の方向に戻
るように偏向される放射を受光するようにし得る。光源
からの放射を偏向器に向かうようにし、また偏向器から
の放射を検出器に向かうようにするビームスプリッタを
備え得る。検出器は、集束光学系の焦点に配置された検
出装置を含み得る。検出装置は位置感応検出器を含み得
る。集束光学系は集束レンズを含み得る。
【００１１】光源は発散入射ビームを生成するようにし
得る。光源はレーザを含み得る。レーザはレーザダイオ
ードを含み得る。レーザは、コリメータおよびアパチャ
ーと協同して発散入射ビームを生成し得る。
【００１２】検出器が眼からの反射を検出するまで偏向
器に走査ビームを走査させる走査コントローラを備え得
る。走査コントローラは、眼からの反射の検出後、眼か
らの反射の中心が走査ビーム内でまたは検出器に対して
実質的に中心に位置するようにし得る。
【００１３】偏向器から離れた位置に配備される少なく
とも１つの別の光放射源を備え得る。別の光源は発散ビ
ームを発するようにし得る。別の光源はレーザを含み得
る。レーザはレーザダイオードを含み得る。レーザは、
コリメータおよびアパチャーと協同して発散入射ビーム
を生成し得る。光源および別の光源を順に照射させる光
源コントローラを備え得る。光源コントローラは、光源
および別の光源のうちの前回照射した光源からの光放射
の眼からの反射が検出器によって検出された後続いて、
光源および別の光源のそれぞれを照射させるようにし得
る。検出器および偏向器と協同して、所定の方向と、偏
向器から光源および別の光源のそれぞれからの光放射の
眼からの反射点までの方向との間の角度から、眼の前の
表面上の眼凝視点を決定するデータプロセッサを備え得
る。
【００１４】以下、本発明の作用を説明する。
【００１５】本発明によると、入射ビームを制御可能な
偏光器によって観察者が占領し得る領域を走査し、次に
観察者の眼の領域のみを照射することができる。従っ
て、システムで得られ得る解像度を、既知のシステムで
形成される二次元画像のうちの比較的小さな割合でしか
ない部分に効果的に集中させる。これにより、画像内で
の反射特性がはるかに大きくなり、本質的に向上した解
像度が得られる。精度はビーム走査の精度によって決定
されるが、これは選択により位置感応検出器を使用する
ことによって向上する。これにより、既知のシステムに
比較して精度は実質的に増大する。画像認識技術は必要
ないため、コンピュータによるデータ処理要件は簡素化
される。
【００１６】
【発明の実施の形態】図１は、コンピュータ画面１を含
むコンピュータ端末の一部を形成する眼凝視追跡システ
ムの一般的な配置を示す。赤外線レーザ２が赤外線ビー
ムを出力する。赤外線ビームは平行光にされ、穴から通
されて発散光となる。赤外線ビームは、ビームスプリッ
タ３から空間光変調器（ＳＬＭ）４に反射される。ＳＬ
Ｍ４はビームを所望の方向に回折するいくつかのパター
ンを形成するように制御され、これにより、ＳＬＭ４
は、画面１の前の観察者の眼によって占領され得る領域
全体にわたって出力ビーム５を走査するビーム偏向器と
して働く。
【００１７】観察者の眼が走査ビーム５によって照射さ
れると、網膜で反射が起こり、眼は、発散ビーム６を照
射ビーム５の光路に沿って戻す逆反射体として働く。戻
りビーム６はＳＬＭ４によって反射され、ビームスプリ
ッタ３を透過する。位置感応検出器７は集束レンズ８の
焦点面内に位置している。従って、戻りビームは位置感
応検出器７上に画像化され、これが、ＳＬＭ４によって
与えられる既知の偏向と組み合わされて、ＳＬＭ４から
眼の虹彩の中心へのベクトルを決定する。
【００１８】図１に示すシステムはさらに、参照番号９
および１０で示す、レーザまたは発光ダイオードなどの
拡大赤外線ビーム源を備えている。後に詳述するが、最
初にレーザ２を用いて眼の位置を突き止め、虹彩の中心
を通るベクトルを決定する。次にレーザ２を消灯し、光
源９および１０を順番に点灯して、位置感応検出器７上
の反射光の位置により、光源９および１０のそれぞれに
対してＳＬＭから輝きへのベクトルを順番に決定する。
この情報は次に、観察者が凝視している画面１の領域を
決定するために用いられ得、これにより、例えば、マウ
スを用いずにカーソルを画面のその位置に配置し得る。
【００１９】図１に示す配置の光学系を図２にさらに詳
細に示す。レーザダイオード２は有限領域の赤外線放射
平行ビームを生成し、このビームは、レンズ１１によっ
てビームスプリッタ３を介してＳＬＭ４上のスポットに
集束される。ビームのサイズがスポットのサイズを決定
する。ビームが大きいほどＳＬＭ４上に集束されるスポ
ットは小さい。ＳＬＭ４のスポットが入射する部分には
回折パターンが書かれ、これによりビーム偏向が行われ
る。ＳＬＭ４に適切なパターンを書くことによって、Ｓ
ＬＭに入射する有限スポットは、例えば、ビームを二次
元内でＮ×Ｎ個の角度に角偏向させ得るＮ×Ｎ個の個別
の画素（ピクセル）配列をカバーする。回折により、隣
接する異なる角度からのビーム同士が重なり、これによ
り、ＳＬＭ４からの出力ビームは、ＳＬＭ４の画素ピッ
チによって決定される最大許容角度内のスペース全体に
わたって走査され得る。
【００２０】眼１２は走査出力ビームによって照射され
ると、逆反射体として働く。反射された発散ビームはＳ
ＬＭ４の表面全体に入射し、Ｎ×Ｎ個の反復パターンを
搬送する。従って、ＳＬＭ４全体が、Ｎ×Ｎ領域と同じ
偏向角を有するが解像度が高くなった偏向板または鏡と
して働く。従って、眼から逆反射された赤外線ビームは
照射ビームの光路に沿ってビームスプリッタ３に戻り、
レンズ８の方向に反射される。レンズ８は検出器７が位
置する焦点面にフーリエ変換体を形成する。
【００２１】位置感応検出器７は既知のタイプ、例え
ば、シャープ位置感応検出器＃ＰＤ３１０１Ｆであり、
検出器の表面に形成される画像の照射の中心のデカルト
座標を提供する。この位置と、ＳＬＭ４によって生成さ
れる既知の外形（geometry）および偏向角とにより、シ
ステムに対する眼１２の瞳孔の中心の方向が決定され
る。
【００２２】ＳＬＭ４上の繰り返しパターンを用いるこ
とによって、ＳＬＭは比較的迅速に新しい偏向パターン
に更新され得る。これは、ＳＬＭの領域全体を用いても
っと多くの狭い出力ビーム位置を決定する場合に比べ
て、個別の偏向角の数は限定されるが、ＳＬＭ４は十分
に迅速に更新され得、実用的なＳＬＭ技術を用いたリア
ルタイム走査が可能になる。走査の解像度が限定される
ことによる解像度の損失は、照射の中心の座標を極めて
迅速に生成する位置感応検出器７を用いることによって
補償される。
【００２３】図３は、走査ビームが眼１２に入射すると
き生成されるビームを模式的に示す。レーザ２、ＳＬＭ
４、位置感応検出器７、ならびに光源９および１０は、
以下に述べるように動作を制御するコントローラ２０に
接続している。
【００２４】観察者の眼１２を検出する前に、レーザ２
をオンにし、ＳＬＭ４に第１反射パターンを書く。これ
により、発散走査ビーム５が、その反復パターンに関連
する所定の角度で回折される。検出器７の出力をモニタ
して、眼１２からの逆反射があるかどうかを調べる。こ
のような反射が検出されないときは、ＳＬＭ４に新しい
反復パターンが書かれ、ビーム５は異なる角度に偏向さ
れる。このプロセスが続けられ、これにより走査ビーム
５は複数の重なり合ったビーム領域に偏向され、かくし
て画面１の前の観察者の眼が位置し得る領域全体が走査
される。
【００２５】検出器７が眼１２からの逆反射を検出する
と、ＳＬＭ４による走査は停止され、ビーム５は眼１２
に向けられた状態に維持される。必要であればまたは所
望であれば、逆反射が実質的に検出器７の中心に位置す
るようにＳＬＭ４に新しい反復パターンを書いてもよ
い。次にコントローラ２０は、ＳＬＭ４によって生成さ
れる偏向角および検出器７上の逆反射の照射の中心位置
から瞳孔の中心への方向を計算する。
【００２６】ＳＬＭ４上の回折パターンを維持した状態
でレーザ２をオフにする。次に赤外線光源９をオンにし
て、眼１２の角膜からの輝きを検出器７上に画像化す
る。検出器は、検出器上の輝きの照射の中心の座標を提
供する。コントローラ２０は、これらの座標およびＳＬ
Ｍ４の偏向角から輝きの方向を計算する。光源９をオフ
にし、光源１０をオンにしてこのプロセスを繰り返し、
光源１０の照射によって生じる輝きの角度を決定する。
コントローラ２０は、これらの角度から観察者が凝視し
ている画面１の領域を導き出す。
【００２７】これらの測定は、眼１２がビーム５内にと
どまっている限り、ＳＬＭ４によって生成される偏向を
変更せずに繰り返される。眼の小さな移動は、例えば、
逆反射の画像が検出器７上に維持されるようにＳＬＭ４
の反復パターンを変更することによって追跡され得る。
例えば、コントローラ２０が検出器７上の逆反射画像の
移動を検出すると、ＳＬＭ４の反復パターンを調整し
て、逆反射を可能な限り検出器７の中心に位置させる一
方でビーム５を眼１２に向けた状態が維持されるように
ビーム５を走査させる。眼１２が移動して逆反射画像が
失われると、コントローラは、例えば、眼が検出された
最後の角度に近いビーム偏向角を選択することにより、
ビーム５の走査を開始し得る。このような追跡が失敗す
ると、コントローラは、眼の位置を突き止めるために、
以下に述べる新しい一連の動作を行い得る。
【００２８】システムは、瞳孔の位置および眼の輝きを
用いて凝視を決定する。従って、解像度は、瞳孔からの
反射（逆反射）および角膜からの反射（輝き）の角度が
決定される際の精度に依存する。例えば、図４は、眼の
画面からの位置を決定する近似一次元計算を示す。この
ような計算は、コントローラ（２０）内のデータプロセ
ッサによって行われ得る。図は、距離ｘだけ離れて画面
の前に直接位置する眼の平面図を示し、ここでｈは、第
１および第２光源９、１０によって生じる２つの輝き間
の距離、φは、輝きと、網膜上の２つの輝き間の距離の
二等分に対応する概念上のライン上の網膜の点とによっ
て決定される角度、そしてθ’は、輝きと、画面の表面
でのこの概念上のラインの垂直交差とによって決定され
る角度である。照射は画面の両側からおよびＳＬＭ４を
用いる走査ビームにより行われる。計算は一次元で実行
され、周辺光源の反射からの情報のみを仮定する。二次
元解像度の概算にとってはこれで十分である。図５は、
図４に示した上記の計算により得られた、眼の距離と、
第１および第２光源９、１０からの反射（光）間の測定
された差異角との関係を示す。
【００２９】ＳＬＭ４の角度解像度は、回折によるＳＬ
Ｍのサイズによって限定され、以下の式によって表され
得る。
【００３０】
【数１】
【００３１】ここで、ＤはＳＬＭの寸法、λは照射の波
長である。各パラメータのための以下の典型的な値、ｘ
〜５０ｃｍ、ｒ〜１ｃｍ、ａ〜２５ｃｍ、λ〜１μｍ、
およびＤ〜１ｃｍに対して、この方法を用いて画面から
の眼の距離を決定する際の典型的な精度は以下の通りで
ある。
【００３２】
【数２】
【００３３】画面からの眼の距離が得られると、凝視角
は、１つの輝きスポットおよび逆反射された赤眼スポッ
トから推論され得る。前者は角膜の表面の位置を与え、
後者は角膜内の瞳孔の位置を与える。図６に光ビームを
模式的に示す。外形を考慮することにより、眼が見つめ
る画面上の点の位置が得られ得、これは以下の式によっ
て表される。
【００３４】
【数３】
【００３５】この式を測定された角度に対して微分する
ことによって、θgの所定の誤差に対するｃの誤差のた
めの式が与えられる。すなわち、
【００３６】
【数４】
【００３７】ここで、凝視角のための式を、図６で与え
られるような測定された角度によりさらに微分すること
によって、以下の式が得られる。
【００３８】
【数５】
【００３９】これらの式を組み合わせることによって、
角度および距離測定誤差による視点の誤差のための以下
の式が得られ得る。
【００４０】
【数６】
【００４１】上記の典型的な値を代入し、θ1〜ｒ／ｘ
およびθg〜２５°を仮定すると、眼凝視位置の位置精
度は、回折によってのみ限定される上記のシステムにお
いては０．５ｍｍであると概算され得る。
【００４２】上記の計算により、ほぼシステムの理論的
に最良の場合の精度が示される。しかし、回折により限
定される性能が達成し得る程度は、システムの光源およ
び光学要素の光学的な品質に依存する。実際には、眼の
位置および凝視方向を決定するもっと反復的な方法を用
いて、より正確な相対位置をより迅速に決定することが
できる。このような反復的な方法は、マイクロプロセッ
サに基づいた数値アルゴリズムを用い、また観察者の眼
を予め較正することによって行われ得る。例えば、観察
者は画面上の較正画像を追跡し得、以下に述べるように
眼の位置測定が行われ得る。このような測定を予備較正
中に用いて、観察者の眼の特異的な特性に従ってアルゴ
リズムを変更または採用し得る。
【００４３】他の実施態様として、例えば反射波の偏光
特性を用いることによって反射信号の光学的差別化を行
うものがある。角膜または眼の前の光学ガラスなどの要
素からの鏡反射は、このような反射は偏光を有している
ため恐らく差別化され得る。反射ビームを分析するため
に偏光レーザダイオード源および偏光器を用いれば、こ
のような間違った反射は非偏光逆反射ビームに対して抑
制され得る。別の差別化手段としては、波長の異なる多
数のレーザ源を用い、異なる反射に対して所定の波長の
みを検出してもよい。例えば、最初に眼の位置を突き止
めるとき、走査ビームを２つの波長により構成し、これ
らの波長の反射における比率を相対的な網膜反射係数に
合わせるようにしてもよい。その後これら２つの波長の
反射強度を（恐らくは光学フィルタの後ろに配置される
個別の検出器を用いて）検出および分析することによ
り、眼が最初に検出されるときの信頼性が向上し得る。
この方法および実際にはシステム全体によれば、ユーザ
への較正は、ユーザの眼の光学性能に関して用いられ得
る。
【００４４】
【発明の効果】本発明によれば、眼凝視検出に用いられ
得、既知のシステムに比べて精度が向上し、光効率が高
く、そしてコンピュータ計算上の要件が少ない眼検出シ
ステムを提供することができる。
【図面の簡単な説明】
【図１】本発明の１つの実施態様を構成する眼凝視追跡
システムの概略図である。
【図２】図１に示す光学システムの一部を模式的に示す
図である。
【図３】図１のシステムによって生成されるビームを模
式的に示す図である。
【図４】図１に示すシステムを用いた凝視位置の計算を
示す式と図である。
【図５】図４の計算により得られた眼の距離と輝き反射
間の差異角との関係を示すグラフである。
【図６】図１に示すシステムを用いた凝視位置の計算を
示す式と図である。
【符号の説明】
１ コンピュータ画面 ２ 赤外線レーザ ３ ビームスプリッタ ４ ＳＬＭ ５ 走査ビーム ６ 発散ビーム ７ 位置感応検出器 ８ 集束レンズ ９、１０ 光源 １２ 眼 ２０ コントローラ
───────────────────────────────────────────────────── フロントページの続き (72)発明者 クレイグ トンブリング イギリス国 オーエックス44 ７ユーアー ル オックスフォードシャー， スタッド ハンプトン， べアー レーン， ジャス ミン コテージ（番地なし) (72)発明者 ニコラス メイヒュウ イギリス国 オーエックス２ ０イーディ ー オックスフォード， プレストウィッ チ プレイス 20 (72)発明者 ロバート ジョージ ワォトリング ブラ ウン イギリス国 オーエックス９ ２ビーディ ー オックスフォードシャー， テム， ゲッジ クローズ １

Claims (26)

    【特許請求の範囲】
  1. 【請求項１】 光放射入射ビームを発する光源と、該入
    射ビームの光路に配置された走査ビームを生成する制御
    可能な偏向器と、眼から反射され該走査ビームの光路に
    沿って戻る放射を検出する検出器とを備えた、眼検出シ
    ステム。
  2. 【請求項２】 前記偏向器は制御可能な回折要素を備え
    ている、請求項１に記載のシステム。
  3. 【請求項３】 前記偏向器は空間光変調器を備えてい
    る、請求項２に記載のシステム。
  4. 【請求項４】 前記偏向器は、Ａ、Ｂ、ＣおよびＤが整
    数であるとき、Ａ×Ｂ個の実質的に同じパターンの配列
    であって、各パターンはＣ×Ｄ個の画素の配列を備える
    パターン配列を前記変調器に書く変調器コントローラを
    さらに備えている、請求項３に記載のシステム。
  5. 【請求項５】 前記変調器コントローラは、前記走査ビ
    ームを（Ｃ×Ｄ）個の異なる方向に偏向するために（Ｃ
    ×Ｄ）個の異なるパターンから前記同じパターンのそれ
    ぞれを選択するようにされる、請求項４に記載のシステ
    ム。
  6. 【請求項６】 前記異なるパターンのそれぞれは、前記
    走査ビームに発散を生成するようにされる、請求項５に
    記載のシステム。
  7. 【請求項７】 前記光源は、前記変調器のＣ×Ｄ個の画
    素の配列を前記入射ビームで照射するようにされる、請
    求項４から６のいずれか１つに記載のシステム。
  8. 【請求項８】 前記検出器は、前記偏向器によって前記
    光源の方向に戻るように偏向される放射を受光するよう
    にされる、請求項１から７のいずれか１つに記載のシス
    テム。
  9. 【請求項９】 前記光源からの放射を前記偏向器に向か
    うようにし、また該偏向器からの放射を前記検出器に向
    かうようにするビームスプリッタを備えた、請求項８に
    記載のシステム。
  10. 【請求項１０】 前記検出器は、集束光学系の焦点に配
    置された検出装置を含む、請求項８または９に記載のシ
    ステム。
  11. 【請求項１１】 前記検出装置は位置感応検出器を含
    む、請求項１０に記載のシステム。
  12. 【請求項１２】 前記集束光学系は集束レンズを含む、
    請求項１０または１１に記載のシステム。
  13. 【請求項１３】 前記光源は発散入射ビームを生成する
    ようにされる、請求項１から１２のいずれか１つに記載
    のシステム。
  14. 【請求項１４】 前記光源はレーザを含む、請求項１か
    ら１３のいずれか１つに記載のシステム。
  15. 【請求項１５】 前記レーザはレーザダイオードを含
    む、請求項１４に記載のシステム。
  16. 【請求項１６】 前記レーザはコリメータおよびアパチ
    ャーと協同して、前記発散入射ビームを生成する、請求
    項１４または１５に記載のシステム。
  17. 【請求項１７】 前記検出器が眼からの反射を検出する
    まで前記偏向器に前記走査ビームを走査させる走査コン
    トローラを備えた、請求項１から１６のいずれか１つに
    記載のシステム。
  18. 【請求項１８】 前記走査コントローラは、眼からの反
    射の検出後、眼からの反射の中心が前記走査ビーム内で
    または前記検出器に対して実質的に中心に位置するよう
    にされる、請求項１７に記載のシステム。
  19. 【請求項１９】 前記偏向器から離れた位置に配備され
    る少なくとも１つの別の光放射源を備えた、請求項１か
    ら１８のいずれか１つに記載のシステム。
  20. 【請求項２０】 前記別の光源は発散ビームを発するよ
    うにされる、請求項１９に記載のシステム。
  21. 【請求項２１】 前記別の光源はレーザを含む、請求項
    １９または２０に記載のシステム。
  22. 【請求項２２】 前記レーザはレーザダイオードを含
    む、請求項２１に記載のシステム。
  23. 【請求項２３】 前記レーザはコリメータおよびアパチ
    ャーと協同して、前記発散入射ビームを生成する、請求
    項２１または２２に記載のシステム。
  24. 【請求項２４】 前記光源および前記別の光源を順に照
    射させる光源コントローラを備えた、請求項１９から２
    ３のいずれか１つに記載のシステム。
  25. 【請求項２５】 前記光源コントローラは、前記光源お
    よび前記別の光源のうちの前回照射した光源からの光放
    射の眼からの反射が前記検出器によって検出された後続
    いて、該光源および該別の光源のそれぞれを照射させる
    ようにされる、請求項２４に記載のシステム。
  26. 【請求項２６】 前記検出器および前記偏向器と協同し
    て、所定の方向と、該偏向器から前記光源および前記別
    の光源のそれぞれからの光放射の眼からの反射点までの
    方向との間の角度から、該眼の前の表面上の眼凝視点を
    決定するデータプロセッサを備えた、請求項１９から２
    ５のいずれか１つに記載のシステム。
JP20808397A 1996-08-01 1997-08-01 眼検出システム Pending JPH1073662A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB9616190A GB2315858A (en) 1996-08-01 1996-08-01 System for eye detection and gaze direction determination
GB9616190.6 1996-08-01

Publications (1)

Publication Number Publication Date
JPH1073662A true JPH1073662A (ja) 1998-03-17

Family

ID=10797862

Family Applications (1)

Application Number Title Priority Date Filing Date
JP20808397A Pending JPH1073662A (ja) 1996-08-01 1997-08-01 眼検出システム

Country Status (4)

Country Link
US (1) US5861940A (ja)
EP (1) EP0821908A1 (ja)
JP (1) JPH1073662A (ja)
GB (1) GB2315858A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030069531A (ko) * 2002-02-21 2003-08-27 한국과학기술원 눈 응시점 추정방법
JP2006507054A (ja) * 2002-11-21 2006-03-02 トビイ・テクノロジー・エイビイ 眼及びその凝視方向を検知し、追跡する方法と装置
JP2022035177A (ja) * 2020-08-20 2022-03-04 株式会社Ｊｖｃケンウッド 距離算出装置、距離算出方法及び距離算出プログラム

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2326263A (en) 1997-06-12 1998-12-16 Sharp Kk Diffractive spatial light modulator and display
JP3361980B2 (ja) * 1997-12-12 2003-01-07 株式会社東芝 視線検出装置及びその方法
US6152563A (en) * 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
US6393136B1 (en) * 1999-01-04 2002-05-21 International Business Machines Corporation Method and apparatus for determining eye contact
US6290357B1 (en) * 1999-03-31 2001-09-18 Virtual-Eye.Com, Inc. Kinetic visual field apparatus and method
SE515639C2 (sv) * 2000-01-20 2001-09-17 Smart Eye Ab Anordning och förfarande för att svepa en ljusstråle över ett objekt och system för att låta en användare med ögats hjälp styra en maskin
US20070078552A1 (en) * 2006-01-13 2007-04-05 Outland Research, Llc Gaze-based power conservation for portable media players
US6478425B2 (en) 2000-12-29 2002-11-12 Koninlijke Phillip Electronics N. V. System and method for automatically adjusting a lens power through gaze tracking
DE10290005B4 (de) * 2001-01-03 2016-03-10 Imedos Systems Ug (Haftungsbeschränkt) Vorrichtung und Verfahren zur Bildgebung, Stimulierung, Messung und Therapie insbesondere am Auge
US6397137B1 (en) 2001-03-02 2002-05-28 International Business Machines Corporation System and method for selection of vehicular sideview mirrors via eye gaze
US6578962B1 (en) 2001-04-27 2003-06-17 International Business Machines Corporation Calibration-free eye gaze tracking
US6598971B2 (en) * 2001-11-08 2003-07-29 Lc Technologies, Inc. Method and system for accommodating pupil non-concentricity in eyetracker systems
US20030210378A1 (en) * 2002-01-17 2003-11-13 Riza Nabeel Agha Optoelectronic eye examination system
US7197165B2 (en) * 2002-02-04 2007-03-27 Canon Kabushiki Kaisha Eye tracking using image data
US7306337B2 (en) 2003-03-06 2007-12-11 Rensselaer Polytechnic Institute Calibration-free gaze tracking under natural head movement
US7872635B2 (en) * 2003-05-15 2011-01-18 Optimetrics, Inc. Foveated display eye-tracking system and method
KR100580630B1 (ko) * 2003-11-19 2006-05-16 삼성전자주식회사 적외선을 이용한 사람 식별 장치 및 방법
US20060194181A1 (en) * 2005-02-28 2006-08-31 Outland Research, Llc Method and apparatus for electronic books with enhanced educational features
US20060210111A1 (en) * 2005-03-16 2006-09-21 Dixon Cleveland Systems and methods for eye-operated three-dimensional object location
US7542628B2 (en) * 2005-04-11 2009-06-02 Sarnoff Corporation Method and apparatus for providing strobed image capture
US7438414B2 (en) 2005-07-28 2008-10-21 Outland Research, Llc Gaze discriminating electronic control apparatus, system, method and computer program product
US20070003913A1 (en) * 2005-10-22 2007-01-04 Outland Research Educational verbo-visualizer interface system
US7429108B2 (en) * 2005-11-05 2008-09-30 Outland Research, Llc Gaze-responsive interface to enhance on-screen user reading tasks
US20070040033A1 (en) * 2005-11-18 2007-02-22 Outland Research Digital mirror system with advanced imaging features and hands-free control
WO2007085682A1 (en) 2006-01-26 2007-08-02 Nokia Corporation Eye tracker device
US8197539B2 (en) 2006-05-05 2012-06-12 University Of Southern California Intraocular camera for retinal prostheses
US7626572B2 (en) * 2006-06-15 2009-12-01 Microsoft Corporation Soap mobile electronic human interface device
US7986816B1 (en) 2006-09-27 2011-07-26 University Of Alaska Methods and systems for multiple factor authentication using gaze tracking and iris scanning
US20080165195A1 (en) * 2007-01-06 2008-07-10 Outland Research, Llc Method, apparatus, and software for animated self-portraits
CN101945612B (zh) * 2008-02-14 2013-09-25 诺基亚公司 用于确定注视方向的设备和方法
US8155479B2 (en) 2008-03-28 2012-04-10 Intuitive Surgical Operations Inc. Automated panning and digital zooming for robotic surgical systems
US8808164B2 (en) 2008-03-28 2014-08-19 Intuitive Surgical Operations, Inc. Controlling a robotic surgical tool with a display monitor
US8482626B2 (en) * 2009-04-07 2013-07-09 Mediatek Inc. Digital camera and image capturing method
GB2470752B (en) * 2009-06-03 2015-01-07 Au Optronics Corp Autostereoscopic Display Apparatus
WO2011057161A1 (en) * 2009-11-06 2011-05-12 The Research Foundation Of State University Of New York Methods of improving accuracy of video-based eyetrackers
US9373123B2 (en) 2009-12-30 2016-06-21 Iheartmedia Management Services, Inc. Wearable advertising ratings methods and systems
US9047256B2 (en) * 2009-12-30 2015-06-02 Iheartmedia Management Services, Inc. System and method for monitoring audience in response to signage
US20110205148A1 (en) * 2010-02-24 2011-08-25 Corriveau Philip J Facial Tracking Electronic Reader
US9760123B2 (en) 2010-08-06 2017-09-12 Dynavox Systems Llc Speech generation device with a projected display and optical inputs
ES2701608T3 (es) * 2011-03-25 2019-02-25 Novartis Ag Aparato y procedimiento para modelar estructuras oculares
US8854446B2 (en) * 2011-04-28 2014-10-07 Iristrac, Llc Method of capturing image data for iris code based identification of vertebrates
CA2750287C (en) 2011-08-29 2012-07-03 Microsoft Corporation Gaze detection in a see-through, near-eye, mixed reality display
JP6144681B2 (ja) 2011-08-30 2017-06-07 マイクロソフト テクノロジー ライセンシング，エルエルシー 虹彩スキャン・プロファイリング機能を有する頭部装着ディスプレイ
US9503713B2 (en) 2011-11-02 2016-11-22 Intuitive Surgical Operations, Inc. Method and system for stereo gaze tracking
DE102011055967B4 (de) * 2011-12-02 2016-03-10 Seereal Technologies S.A. Messverfahren und Vorrichtung zur Durchführung des Messverfahrens
EP2617353A1 (en) * 2012-01-22 2013-07-24 Université de Liège System for an observation of an eye and its surrounding area
ES2727498T3 (es) 2012-09-30 2019-10-16 Optica Amuka A A Ltd Lentes con potencia y alineación eléctricamente ajustable
US11126040B2 (en) 2012-09-30 2021-09-21 Optica Amuka (A.A.) Ltd. Electrically-tunable lenses and lens systems
GB2511868B (en) 2013-03-15 2020-07-15 Tobii Ab Eye/gaze tracker and method of tracking the position of an eye and/or a gaze point of a subject
CN106132284B (zh) * 2013-11-09 2019-03-22 深圳市汇顶科技股份有限公司 光学眼动追踪
WO2015081325A1 (en) 2013-11-27 2015-06-04 Shenzhen Huiding Technology Co., Ltd. Eye tracking and user reaction detection
JP6649901B2 (ja) 2014-06-05 2020-02-19 オプティカ アムカ（エー．エー．）リミテッド 動的レンズの制御
WO2016049273A1 (en) 2014-09-24 2016-03-31 Sri International Control of wireless communication device capability in a mobile device with a biometric key
KR20170092545A (ko) 2014-12-03 2017-08-11 프린스톤 아이덴티티, 인크. 모바일 디바이스 생체측정 애드-온을 위한 시스템 및 방법
EP3051386A1 (en) 2015-01-30 2016-08-03 4tiitoo GmbH Eye tracking system and method
US10098532B2 (en) * 2015-08-26 2018-10-16 Rakesh Lal Systems, methods and apparatus for tracking changes in an ocular scene
US10045825B2 (en) 2015-09-25 2018-08-14 Karl Storz Imaging, Inc. Partial facial recognition and gaze detection for a medical system
JP2019506694A (ja) 2016-01-12 2019-03-07 プリンストン・アイデンティティー・インコーポレーテッド 生体測定分析のシステムおよび方法
WO2017173228A1 (en) 2016-03-31 2017-10-05 Princeton Identity, Inc. Biometric enrollment systems and methods
WO2017172695A1 (en) 2016-03-31 2017-10-05 Princeton Identity, Inc. Systems and methods of biometric anaysis with adaptive trigger
ES2904889T3 (es) 2016-04-17 2022-04-06 Optica Amuka A A Ltd Lente para gafas que comprende una lente de cristal líquido con accionamiento eléctrico mejorado
CN107305629A (zh) * 2016-04-21 2017-10-31 王溯 目光识别装置及方法
WO2017216716A1 (en) 2016-06-16 2017-12-21 Optica Amuka (A.A.) Ltd. Tunable lenses for spectacles
US10372591B2 (en) 2016-09-07 2019-08-06 International Business Machines Corporation Applying eye trackers monitoring for effective exploratory user interface testing
US10664049B2 (en) 2016-12-09 2020-05-26 Nvidia Corporation Systems and methods for gaze tracking
US10108319B2 (en) 2017-03-22 2018-10-23 International Business Machines Corporation Cognitive dashboard adjustment
WO2018187337A1 (en) 2017-04-04 2018-10-11 Princeton Identity, Inc. Z-dimension user feedback biometric system
US11747619B2 (en) 2017-07-10 2023-09-05 Optica Amuka (A.A.) Ltd. Virtual reality and augmented reality systems with dynamic vision correction
US11953764B2 (en) 2017-07-10 2024-04-09 Optica Amuka (A.A.) Ltd. Tunable lenses with enhanced performance features
US10902104B2 (en) 2017-07-26 2021-01-26 Princeton Identity, Inc. Biometric security systems and methods
WO2019077442A1 (en) 2017-10-16 2019-04-25 Optica Amuka (A.A.) Ltd. ELECTRICALLY ADJUSTABLE GLASS LENSES THAT CAN BE CONTROLLED BY AN EXTERNAL SYSTEM
JP7496142B2 (ja) 2019-06-02 2024-06-06 オプティカ アムカ（エー．エー．）リミテッド 近視の治療のための電気的に調整可能な視力補助具
CN113208558B (zh) * 2021-04-30 2022-10-21 南昌虚拟现实研究院股份有限公司 眼球追踪方法、装置、电子设备及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3712716A (en) * 1971-04-09 1973-01-23 Stanford Research Inst Eye tracker
CA2086746A1 (en) * 1990-08-17 1992-02-18 Daniel R. Peters System and method for projecting an image onto the retina
US5187506A (en) * 1990-09-28 1993-02-16 Fairville Medical Optics Inc. Method and apparatus for determining physiological parameters based on pupil response
US5212555A (en) * 1991-12-17 1993-05-18 Texas Instruments Incorporated Image capture with spatial light modulator and single-cell photosensor
IL108672A (en) * 1993-02-19 1997-07-13 Phoenix Laser Systems System for detecting, measuring and compensating for lateral movements of a target
JP3369623B2 (ja) * 1993-03-16 2003-01-20 興和株式会社 レーザー走査型眼科撮像装置
US5475452A (en) * 1994-02-24 1995-12-12 Keravision, Inc. Device and method for mapping objects

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030069531A (ko) * 2002-02-21 2003-08-27 한국과학기술원 눈 응시점 추정방법
JP2006507054A (ja) * 2002-11-21 2006-03-02 トビイ・テクノロジー・エイビイ 眼及びその凝視方向を検知し、追跡する方法と装置
JP4783018B2 (ja) * 2002-11-21 2011-09-28 トビイ・テクノロジー・エイビイ 眼及びその凝視方向を検知し、追跡する方法と装置
JP2022035177A (ja) * 2020-08-20 2022-03-04 株式会社Ｊｖｃケンウッド 距離算出装置、距離算出方法及び距離算出プログラム

Also Published As

Publication number Publication date
GB2315858A (en) 1998-02-11
GB9616190D0 (en) 1996-09-11
US5861940A (en) 1999-01-19
EP0821908A1 (en) 1998-02-04

Similar Documents

Publication Publication Date Title
JPH1073662A (ja) 眼検出システム
JP7695186B2 (ja) 向上した３ｄセンシング
US11868522B2 (en) Method for ascertaining a viewing direction of an eye
US10917626B2 (en) Active illumination 3D imaging system
US10721459B2 (en) Scanning projectors and image capture modules for 3D mapping
US5621529A (en) Apparatus and method for projecting laser pattern with reduced speckle noise
US12310887B1 (en) Light patterns for corneal topography
US11093034B2 (en) Eye tracking method and system and integration of the same with wearable heads-up displays
KR101917773B1 (ko) 다각형을 사용하여 광 패턴을 생성하는 방법 및 시스템
US20150253428A1 (en) Determining positional information for an object in space
US20160143528A1 (en) Gaze tracking system
WO2014034527A1 (ja) 情報入力装置
US20130120712A1 (en) Method and device for determining the eye position
US20240069333A1 (en) Device for monitoring an eye position of a user’s eye in a virtual retinal display, data glasses, and method
US11029408B2 (en) Distance-imaging system and method of distance imaging
JP6501444B2 (ja) プロジェクション装置を備えた、とりわけ通信機器である電子機器、および、電子機器の動作方法
US20190354747A1 (en) Optical projection system and optical projection method
JPH0694417A (ja) スポット光照準装置と三次元位置計測装置
WO2025012913A1 (en) Blooming mitigation for multichannel lidar detection system
TW202204930A (zh) 視覺優先光達系統
TWI875636B (zh) 位置獲得模組
US20200025552A1 (en) Method and apparatus for remote sensing of objects utilizing radiation speckle
US20230034718A1 (en) Criteria based false positive determination in an active light detection system
KR102019217B1 (ko) 안구 이미지 정보에 기초한 시야 교란 시스템
JP2521156Y2 (ja) 位置計測用ターゲット

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20030723