JPH0938038A - 視線検出装置および視線検出装置を有する光学機器 - Google Patents

視線検出装置および視線検出装置を有する光学機器

Info

Publication number
JPH0938038A
JPH0938038A JP7194989A JP19498995A JPH0938038A JP H0938038 A JPH0938038 A JP H0938038A JP 7194989 A JP7194989 A JP 7194989A JP 19498995 A JP19498995 A JP 19498995A JP H0938038 A JPH0938038 A JP H0938038A
Authority
JP
Japan
Prior art keywords
pupil diameter
subject
user
light receiving
eyeball
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7194989A
Other languages
English (en)
Other versions
JP3559622B2 (ja
Inventor
Akihiko Nagano
明彦 長野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP19498995A priority Critical patent/JP3559622B2/ja
Publication of JPH0938038A publication Critical patent/JPH0938038A/ja
Application granted granted Critical
Publication of JP3559622B2 publication Critical patent/JP3559622B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Eye Examination Apparatus (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

(57)【要約】 【課題】 視線検出の際に、瞳孔と虹彩との境界の偽の
検出データを排除して、精度よく瞳孔の位置を算出でき
るようする。 【解決手段】 実質的に使用者または被験者の眼球に入
射する光量を測光する測光手段と、該測光手段の出力に
基づいて該使用者または被験者の瞳孔径を推定する第1
の瞳孔径推定手段と、該使用者または被験者の眼球像を
受光する受光手段と、該受光手段の出力に基づいて該使
用者または被験者の瞳孔径を推定する第2の瞳孔径推定
手段と、該第1の瞳孔径推定手段の推定結果と該第2の
瞳孔径推定手段の推定結果との少なくともどちらか一方
を利用して該使用者または被験者の推定瞳孔径を設定す
る設定手段と、該設定手段によって設定される該推定瞳
孔径に基づいて、前記受光手段によって得られた眼球像
情報を演算処理して使用者または被験者の視線情報を求
める演算処理手段とを有する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、使用者または被験
者の視線情報を検出する視線検出装置に関し、特に明る
さの情報を利用して、正確な視線検出を可能にする視線
検出装置に関する。
【0002】
【従来の技術】従来より、ファインダーを覗く使用者ま
たは被験者の視線を検出してその視線情報に基づいて撮
影レンズの自動焦点調節等の機能を制御するカメラが市
販されている。
【0003】この種のカメラにおいて撮影者の視線情報
は、撮影者の眼球を照明した照明光による角膜反射像の
位置と、瞳孔の中心位置とのずれより検出される。視線
情報の検出方法については特開平2−264633号公
報に開示されている。
【0004】特開平2−264633号公報によると、
瞳孔の中心位置は瞳孔と虹彩との境界を検出することに
よって求めているが、実際には光の強度差の大きいとこ
ろを瞳孔と虹彩との境界とみなして検出を行っている。
したがって、瞼と眼球との境界や強膜と虹彩との境界、
あるいはまつげのある部分においても光の強度差が大き
いところがあり偽の境界を検出してしまう場合があっ
た。
【0005】そこで、本願出願人は特開平2−6583
6号公報において外光の明るさから使用者または被験者
の瞳孔径を推定してその瞳孔径から大きく外れている検
出データを排除して瞳孔と虹彩との境界を効率的に抽出
する方法を開示している。
【0006】さらに、本願出願人は特開平6−1485
07号公報において使用者または被験者の眼球の瞳孔径
を予め設定しセンサー上での瞳孔と虹彩との境界が存在
する範囲を設定して偽の検出データを排除する方法を開
示している。
【0007】
【発明が解決しようとする課題】しかしながら、特開平
2−65836号公報に開示されているようにファイン
ダーを覗く使用者または被験者の瞳孔径を外光の明るさ
によって推定することができるが、推定した瞳孔径は眼
球像の結像倍率が考慮されていないため、受光センサー
上で、瞳孔が実際にどの程度の大きさになるか正確には
推定できないという欠点があった。
【0008】また、使用者または被験者の瞳孔径をファ
インダーに入射する光量によって推定すると、例えば明
るい屋外から暗い室内等を観察する場合には、ファイン
ダーに入射する光量は少ないにもかかわらず使用者また
は被験者の眼球の瞳孔は周囲の明るさによって小さくな
るため、推定した瞳孔径は実際の瞳孔径よりも大きくな
ってしまい、不要な検出データを正確に排除することが
できず、瞳孔と虹彩の境界を正確に検出することができ
ないことがあった。
【0009】
【課題を解決するための手段】本願の請求項1に記載し
た発明によれば、実質的に使用者または被験者の眼球に
入射する光量を測光する測光手段と、使用者または被験
者眼の像を受光する受光手段と、該受光手段で得られた
眼球像信号を演算処理して使用者または被験者の視線情
報を求める演算処理手段とを有する視線検出装置におい
て、前記測光手段の出力に基づいて推定した使用者また
は被験者の瞳孔径と、前記受光手段の出力に基づいて推
定した使用者または被験者の瞳孔径の少なくともどちら
か一方を利用して使用者または被験者眼の推定瞳孔径を
設定する推定瞳孔径設定手段を有し、前記演算処理手段
は設定された該推定瞳孔径に基づいて前記受光手段で得
られた眼球像信号を演算処理することによって、より正
確に瞳孔径を推定することができるので、瞳孔と虹彩と
の境界を検出する際の不要な検出データを正確に排除す
ることが可能になる。
【0010】また、本願の請求項5に記載した発明によ
る視線検出装置は、該使用者または被験者の眼球像を受
光する受光面を有する受光手段と、実質的に使用者また
は被験者の眼球に入射する光量を測光する測光手段と、
該測光手段の出力に基づいて該使用者または被験者の瞳
孔径を推定する瞳孔径推定手段と、該使用者または被験
者の眼球と受光手段の受光面との距離情報を求める距離
情報検出手段と、該瞳孔径推定手段によって推定された
該使用者または被験者の瞳孔径および該距離情報検出手
段によって求めた距離情報から該受光手段の受光面に結
像する該使用者または被験者の瞳孔径を演算する瞳孔径
演算手段と、該瞳孔径演算手段の演算結果に基づいて、
該受光手段によって得られた眼球像情報を演算処理する
ことで使用者または被験者の視線情報を求める演算処理
手段とを有することを特徴として、このような構成によ
って、受光手段の受光面に結像する瞳孔径を求めること
ができ、より正確に瞳孔径を推定することができるの
で、瞳孔と虹彩との境界を検出する際の不要な検出デー
タを正確に排除することが可能になる。
【0011】
【発明の実施の形態】図1〜図5は本発明の実施の形態
で、図1は視線検出装置付き光学機器であるところの一
眼レフカメラの要部概略図である。
【0012】図中1は撮影レンズであり、便宜上2枚の
レンズ1a、1bで示したが、実際は多数のレンズから
構成されている。2は主ミラーで、観察状態と撮影状態
に応じて撮影光路へ斜設されあるいは退去される。3は
サブミラーで、主ミラー2を透過した光束をカメラボデ
ィの下方へ向けて反射する。4はシャッター、5は感光
部材で、銀塩フィルムあるいはCCDやMOS型等の固
体撮像素子あるいはビディコン等の撮像管より成ってい
る。
【0013】6は焦点検出装置であり、結像面近傍に配
置されたフィールドレンズ6a、反射ミラー6b及び6
c、2次結像レンズ6d、絞り6e、複数のCCDから
なるラインセンサー6f等から構成されている周知の位
相差方式を採用している。同図の焦点検出装置6は、観
察画面内の複数の領域を焦点検出可能なように構成され
ている。
【0014】7は撮影レンズ1の予定結像面に配置され
たピント板、8はファインダー光路変更手段であるペン
タダハプリズム、9、10は観察画面内の被写体輝度を
測定する為の結像レンズと測光センサーで、結像レンズ
9はペンタダハプリズム8内の反射光路を介してピント
板7と測光センサー10を共役に関係付けている。
【0015】次にペンタダハプリズム8の射出面後方に
は、光分割手段であるダイクロイックミラー16と接眼
レンズ11が配され、撮影者の眼15によるピント板7
の観察に使用される。光分割手段であるダイクロイック
ミラー16は、可視光を透過し赤外光を反射する特性を
有している。12は受光レンズ、14はCCD等の光電
素子列を2次元的に配したイメージセンサーで受光レン
ズ12に関して所定の位置にある撮影者の眼15の虹彩
近傍と共役になるように配置されている。
【0016】13a〜13dは各々撮影者の目15の照
明光源であるところの赤外発光ダイオード(IRED)
で、接眼レンズ11の下方に配置されている。
【0017】31は撮影レンズ1内に設けた絞り、32
は絞り駆動回路107を含む絞り駆動装置、33はレン
ズ駆動用モーター、34は駆動ギヤ等からなるレンズ駆
動部材、35はフォトカプラーでレンズ駆動部材34に
連動するパルス板36の回転を検知してレンズ駆動回路
110に伝えている。レンズ駆動回路110は、この情
報とカメラ側からのレンズ駆動量の情報に基づいてレン
ズ駆動用モーターを所定量駆動させ、撮影レンズ1の合
焦レンズ1aを合焦位置に移動させている。37は公知
のカメラとレンズとのインターフェイスとなるマウント
接点である。
【0018】図2は本発明を実施したカメラの本体に内
蔵された電気回路の要部ブロック図である。同図におい
て、図1と同一のものは同一の番号をつけている。カメ
ラ本体に内蔵されたマイクロコンピュータの中央処理装
置(以下CPU)100には、視線検出回路101、測
光回路102、焦点検出回路103、信号入力回路10
4、絞り駆動回路107、シャッター制御回路108、
レンズ駆動回路110が接続されている。また、撮影レ
ンズ内に配置された絞り駆動回路107とレンズ駆動回
路110とは図1で示したマウント接点37を介して信
号の伝達がなされる。
【0019】CPU100には、記憶手段としてEEP
ROM100aが付随している。
【0020】視線検出回路101は、IRED13a〜
13dを点灯制御して撮影者の眼球15を照明し、イメ
ージセンサー14からの眼球像の出力をA/D変換しこ
の像情報をCPU100に送信する。CPU100は眼
球像を画像処理して角膜反射像と虹彩と瞳孔の境界を抽
出し、さらに角膜反射像と瞳孔の中心位置のずれから撮
影者の視線情報を算出する。
【0021】測光回路102は、測光センサー10から
の出力を増幅後、対数圧縮、A/D変換し、各センサー
の輝度情報としてCPU100に送っている。
【0022】ラインセンサー6fは画面内の複数の焦点
検出領域に対応した公知のCCDラインセンサーであ
る。焦点検出回路103はこれらラインセンサー6fか
ら得た電圧をA/D変換し、CPU100に送ってい
る。
【0023】信号入力回路104は、不図示のシャッタ
ーレリーズボタンの第1ストローク(スイッチSW−
1)と第2ストローク(スイッチSW−2)の信号入力
を検知してCPU100にその信号を送信している。
【0024】絞り駆動回路107は、撮影レンズ1の絞
り31が所定の大きさになるように絞り駆動装置32を
制御している。
【0025】シャッター制御回路108は通電するとシ
ャッター幕を走行させて、感光部材に所定光量を露光さ
せる。
【0026】ここで本発明の視線検出装置は、照明手段
を構成するIRED13a〜13d、IREDを駆動す
る視線検出回路101、受光手段を構成する接眼レンズ
11、ダイクロイックミラー16、受光レンズ12、イ
メージセンサー14、イメージセンサー14を制御する
視線検出回路101、演算処理手段を構成する視線検出
回路101及びCPU100、記憶手段であるEEPR
OM100a、測光手段を構成する結像レンズ9、測光
センサー10、測光センサーを制御する測光回路102
とから構成されている。
【0027】次に、視線検出装置を具備した光学機器で
あるところのカメラの動作のフローチャートを図3に示
す。本発明のカメラは、使用者または被験者の視線情報
を用いて焦点検出領域の選択と測光値の重み付けが可能
となっている。
【0028】撮影者がカメラを起動させると、CPU1
00は信号入力回路104を介して視線検出装置の動作
状態を設定するための不図示のモード選択スイッチの設
定状態を確認する(#100)。
【0029】モード選択スイッチが視線のキャリブレー
ションモードに設定されていれば(#100)、CPU
100は撮影者の視線と注視目標を一致させるための視
線のキャリブレーションを実行する(#101)。視線
のキャリブレーション方法については、特開平6−86
759号公報において詳細に説明されているので、ここ
では説明を省略する。
【0030】またモード選択スイッチが通常の撮影モー
ドに設定されていれば、CPU100は、視線のキャリ
ブレーションを行うモード(CALモード)に設定され
ていないことを認識し(#100)、さらに信号入力回
路104を介してシャッターレリーズボタンの第1スト
ローク、スイッチSW−1の状態を確認する(#10
2)。スイッチSW−1がOFF状態であれば、CPU
100はスイッチSW−1がONされるまで待機する
(#102)。
【0031】撮影者によってスイッチSW−1がONさ
れれば(#102)、CPU100は先に検知したモー
ド選択スイッチの設定状態を確認し(#103)、撮影
者の視線情報を用いずに制御手段を制御するモードに設
定されていなければ、CPU100は記憶手段であるE
EPROM100aから撮影者の視線のキャリブレーシ
ョンデータを読み出す(#105)。
【0032】さらにCPU100は、視線検出回路10
1に信号を送って撮影者の眼球15をIRED13にて
照明し、その反射光を接眼レンズ11、ダイクロイック
ミラー16、受光レンズ12を介してイメージセンサー
14にて撮像させる。CPU100は、視線検出回路1
01を介してイメージセンサー14より得られた眼球像
を処理して角膜反射像及び虹彩と瞳孔の境界を抽出し、
その角膜反射像と瞳孔の中心位置のずれから撮影者の視
線情報を算出する(#106)。視線情報の算出のフロ
ーは後述する。
【0033】さらにCPU100は検出された撮影者の
視線情報と視線のキャリブレーションデータによりピン
ト板7上の注視点を算出する(#107)。
【0034】ここで、撮影者の視線情報を自動焦点調節
手段の制御に用いるモードに設定されていれば、CPU
100は前記注視点座標より最寄りの焦点検出領域を選
択する(#109)。
【0035】引き続きCPU100は焦点検出回路10
3に信号を送信して撮影者の視線情報に基づいて選択さ
れた焦点検出領域の焦点検出を実行する(#110)。
選択された焦点検出領域の焦点状態が合焦していなけれ
ば(#111)、CPU100はレンズ駆動回路110
に焦点調節信号を送信して撮影レンズ1レンズ駆動を行
う(#120)。焦点調節信号に対応したレンズ駆動が
実行されると(#120)再度焦点検出が実行され(#
121)。
【0036】選択された焦点検出領域の焦点状態が合焦
していれば(#111)、ファインダー内に合焦表示を
行う(#112)。ファインダー視野内に合焦表示が行
われるため、撮影者は撮影レンズが所望の焦点検出領域
において合焦していることが認識できる。
【0037】また、撮影者の視線情報を露出値の決定に
用いるモードに設定されていれば(#113)、CPU
100は測光回路102に信号を送信して測光を行な
う。このとき、撮影画面内の分割された領域の測光値に
撮影者の視線情報に基づいた重み付けを行って露出値が
決定する(#114)。
【0038】引き続きスイッチSW−1がONされてい
れば(#115)、シャッターレリーズボタンのスイッ
チSW−2の状態が確認される(#116)。スイッチ
SW−2がOFF状態であれば(#116)、再びスイ
ッチSW−1の状態の確認を行う(#115)。スイッ
チSW−1がOFF状態であれば(#115)、そのま
ま初期状態に戻る。
【0039】また、スイッチSW−2がONされたなら
ば(#116)、CPU100は絞り駆動回路107に
信号を送信して絞り31を所定の開口に設定するととも
に、シャッター制御回路108に信号を送信しシャッタ
ー幕を走行させて撮影を行う(#117)。
【0040】カメラのシャッターレリーズ動作が終了す
ると(#117)、初期状態に戻る。
【0041】一方、撮影者によってスイッチSW−1が
ONされれば(#102)、CPU100は先に検知し
たモード選択スイッチの設定状態を確認し、撮影者の視
線情報を用いて制御手段を制御するモードに設定されて
いなければ制御手段は独立して制御される(#10
3)。
【0042】CPU100は焦点検出回路103に信号
を送信して全ての焦点検出領域の焦点検出を実行する
(#118)。さらにCPU100は、検出された全て
の焦点検出領域の焦点検出情報を比較して、被写体距離
がもっとも短い焦点検出領域を撮影レンズの焦点調節を
行う領域と決定する(#119)。
【0043】決定された焦点検出領域に対して合焦して
いれば(#111)合焦表示を行う(#112)。
【0044】また、露出値も撮影者の視線情報を用いず
に決定される(#113)。CPU100は測光回路1
02に信号を送信して測光を行なう。このとき、主被写
体があると思われる領域が適正な露出量になるように評
価を行って露出値が決定される(#123)。
【0045】引き続きスイッチSW−1がONされてい
れば(#115)、シャッターレリーズボタンのスイッ
チSW−2の状態が確認される(#116)。スイッチ
SW−2がOFF状態であれば(#116)、再びスイ
ッチSW−1の状態の確認を行う(#115)。スイッ
チSW−1がOFF状態であれば(#115)、そのま
ま初期状態に戻る。
【0046】また、スイッチSW−2がONされたなら
ば(#116)、CPU100は絞り駆動回路107に
信号を送信して絞り31を所定の開口に設定するととも
に、シャッター制御回路108に信号を送信しシャッタ
ー幕を走行させて撮影を行う(#117)。
【0047】カメラのシャッターレリーズ動作が終了す
ると(#117)、初期状態に戻る。
【0048】図4は視線情報の算出のフローで、以下同
図を用いて説明する。
【0049】視線検出の実行が指示されると(#10
6)、CPU100は測光手段である測光回路102に
信号を送信して測光センサー10の信号を読みだしてフ
ァインダー光学系に入射している光量を測定する(#1
30)。記憶手段であるEEPROM100aにはファ
インダー光学系の測光値に対する使用者または被験者の
瞳孔径の情報が記憶されているため、CPU100はE
EPROM100aから測定されたファインダー光学系
の測光値に対応する使用者または被験者の瞳孔径情報を
読みだして瞳孔径r1と推定する(#131)。このと
き、ファインダー光学系の測光値が明るければ瞳孔径r
1は小さい値となり、またファインダー光学系の測光値
が暗ければ瞳孔径r1は大きい値となる。
【0050】さらにCPU100は、受光手段である視
線検出回路101に信号を送信してイメージセンサーで
あるCCD14を所定時間蓄積させ信号を出力させる
(#132)。記憶手段であるEEPROM100aに
はイメージセンサー14の出力に対する使用者または被
験者の瞳孔径情報が記憶されているため、CPU100
はEEPROM100aから測定されたイメージセンサ
ー14の光出力値に対応する使用者または被験者の瞳孔
径情報を読みだして瞳孔径r2と推定する(#13
3)。このとき、使用者または被験者の前眼部が明るけ
れば瞳孔径r2は小さい値となり、また使用者または被
験者の前眼部が暗ければ瞳孔径r2は大きい値となる。
受光手段を用いて使用者または被験者の前眼部の明るさ
を測定する際、照明手段によって使用者または被験者の
眼球を照明しない方が望ましい。
【0051】CPU100は、ファインダー光学系に入
射する光量に基づいて推定された瞳孔径r1と、使用者
または被験者の前眼部の明るさに基づいて推定された瞳
孔径r2とを比較してより小さい瞳孔径の方を最終的な
設定値とする(#134)。たとえば、使用者または被
験者が暗い屋内から明るい屋外を観察している場合は、
r1<r2 となるため、瞳孔径はr1と設定される。
逆に、太陽光下の明るい屋外から暗い室内等を観察する
場合は、r1>r2 となるため、瞳孔径はr2と設定
される。このように、より小さい瞳孔径を最終的な設定
値にすることで推定瞳孔径はより実際の瞳孔径に近づけ
ることができる。したがって、どのような場合にも正確
に不要なデータを排除することができる。
【0052】ファインダー光学系に入射する光量と使用
者または被験者の前眼部の明るさに基づいて使用者また
は被験者の瞳孔径が設定されると(#134)、CPU
100は照明手段である視線検出回路101に信号を送
信してIRED13によって使用者または被験者の眼球
を照明するとともに、受光手段であるイメージセンサー
14にて眼球からの反射光を受光する(#135)。C
PU100は、イメージセンサー14にて撮像された眼
球像を視線検出回路101を介してA/D変換して画像
処理を行い、角膜反射像と瞳孔と虹彩の境界を抽出する
(#136)。
【0053】図5はイメージセンサー14に形成される
使用者または被験者の眼球像と画像処理結果を示したも
のである。同図において2個の黒丸(・)が角膜反射像
である。角膜反射像は、光強度が強いためほぼ正確に検
出される。また、図中 ×と □ で示したのが光の強
度差が大きいために瞳孔と虹彩との境界として抽出され
たところである。
【0054】さらにCPU100は、2個の角膜反射像
の間隔から使用者または被験者眼の受光手段に対する距
離を求めて、その距離から使用者または被験者眼の結像
倍率βを算出する(#137)。結像倍率βは、2個の
角膜反射像の間隔をΔPとすると、
【0055】
【外1】 と表される。ただし、a、b、c、dは照明手段、受光
手段の設定状態で決まる定数である。
【0056】先に設定された使用者または被験者眼の瞳
孔径rと使用者または被験者眼の結像倍率βより、イメ
ージセンサー14上での瞳孔の大きさが求められる。さ
らに、2個の角膜反射像の位置とイメージセンサー14
上での瞳孔の大きさに基づいて瞳孔の存在範囲が設定さ
れる(#138)。図5に示した眼球像の中で、瞳孔の
存在範囲を示したのが点線である。
【0057】CPU100は瞳孔の存在範囲に基づい
て、瞳孔と虹彩との境界に関する偽の抽出データを排除
する(#139)。このとき図5において、×印で示し
たまぶたと眼球との境界で抽出されたデータや強膜と虹
彩との境界で抽出されたデータが排除される。さらにC
PU100は、瞳孔と虹彩との境界として抽出された残
りのデータ(図5における□印のデータ)に基づいて瞳
孔の中心位置を算出する(#140)。
【0058】瞳孔の中心位置が求まると、角膜反射像と
の位置の差より使用者または被験者眼の回転角が算出さ
れる(#141)。
【0059】本実施例において、瞳孔径に基づく瞳孔の
存在範囲の設定は、使用者または被験者眼の回転を考慮
して幾分大きめに設定されるのはいうまでもない。
【0060】また本実施例において、角膜反射像及び瞳
孔と虹彩との境界を抽出後に瞳孔の存在範囲を設定して
偽の抽出データを排除する方法を例示したが、先に角膜
反射像を抽出して瞳孔の存在範囲を設定後、瞳孔と虹彩
との境界とを抽出してもかまわない。
【0061】
【発明の効果】以上説明したように、本願の請求項1に
記載した発明によれば、実質的に使用者または被験者の
眼球に入射する光量を測光する測光手段と、使用者また
は被験者眼の像を受光する受光手段と、該受光手段で得
られた眼球像信号を演算処理して使用者または被験者の
視線情報を求める演算処理手段とを有する視線検出装置
において、前記測光手段の出力に基づいて推定された使
用者または被験者の瞳孔径と、前記受光手段の出力に基
づいて推定された使用者または被験者の瞳孔径の少なく
ともどちらか一方を利用して使用者または被験者眼の推
定瞳孔径を設定する瞳孔径設定手段を有し、前記演算処
理手段は設定された該推定瞳孔径に基づいて前記眼球像
信号を演算処理することによって、より正確に瞳孔径を
推定することができる。したがって、瞳孔と虹彩との境
界を検出する際の不要な検出データをより正確に排除す
ることが可能になり、短時間で正確に瞳孔形状を検出す
ることができるので、視線検出の高速化、高精度化を図
ることができる。
【0062】また、本願の請求項5に記載した発明によ
る視線検出装置は、該使用者または被験者の眼球像を受
光する受光面を有する受光手段と、実質的に使用者また
は被験者の眼球に入射する光量を測光する測光手段と、
該測光手段の出力に基づいて該使用者または被験者の瞳
孔径を推定する瞳孔径推定手段と、該使用者または被験
者の眼球と受光手段の受光面との距離情報を求める距離
情報検出手段と、該瞳孔径推定手段によって推定された
該使用者または被験者の瞳孔径および該距離情報検出手
段によって求めた距離情報から該受光手段の受光面に結
像する該使用者または被験者の瞳孔径を演算する瞳孔径
演算手段と、該瞳孔径演算手段の演算結果に基づいて、
該受光手段によって得られた眼球像情報を演算処理する
ことで使用者または被験者の視線情報を求める演算処理
手段とを有することを特徴として、このような構成によ
って、受光手段の受光面上の推定瞳孔径を求めることが
でき、より正確に瞳孔径を推定することができる。した
がって、瞳孔と虹彩との境界を検出する際の不要な検出
データをより正確に排除することが可能になり、短時間
で正確に瞳孔形状を検出することができるので、視線検
出の高速化、高精度化を図ることができる。
【図面の簡単な説明】
【図1】一眼レフカメラの要部概略図
【図2】カメラの電気回路ブロック図
【図3】カメラの動作フロー説明図
【図4】視線算出フロー説明図
【図5】眼球像説明図
【符号の説明】
1 撮影レンズ 2 主ミラー 3 サブミラー 4 シャッター 5 フィルム 6 焦点検出装置 7 ピント板 8 ペンタダハプリズム 9 結像レンズ 10 測光センサー 11 接眼レンズ 12 受光レンズ 13 赤外発光ダイオード 14 CCD 15 眼球 32 絞り駆動装置 100 CPU 101 視線検出回路 102 測光回路 103 焦点検出回路 104 信号入力回路 107 絞り駆動回路 108 シャッター制御回路 110 レンズ駆動回路

Claims (14)

    【特許請求の範囲】
  1. 【請求項1】 実質的に使用者または被験者の眼球に入
    射する光量を測光する測光手段と、使用者または被験者
    眼の像を受光する受光手段と、該受光手段で得られた眼
    球像信号を演算処理して使用者または被験者の視線情報
    を求める演算処理手段とを有する視線検出装置におい
    て、前記測光手段の出力に基づいて推定した使用者また
    は被験者の瞳孔径と、前記受光手段の出力に基づいて推
    定した使用者または被験者の瞳孔径の少なくともどちら
    か一方を利用して使用者または被験者眼の推定瞳孔径を
    設定する推定瞳孔径設定手段を有し、前記演算処理手段
    は設定された該推定瞳孔径に基づいて前記受光手段で得
    られた眼球像信号を演算処理することを特徴とする視線
    検出装置。
  2. 【請求項2】 前記推定瞳孔径設定手段は前記測光手段
    の出力に基づいて推定した使用者または被験者の瞳孔径
    と、前記受光手段の出力に基づいて推定した使用者また
    は被験者の瞳孔径を比較して、より小さい瞳孔径を推定
    瞳孔径として設定することを特徴とする請求項1記載の
    視線検出装置。
  3. 【請求項3】 実質的に使用者または被験者の眼球に入
    射する光量を測光する測光手段と、該測光手段の出力に
    基づいて該使用者または被験者の瞳孔径を推定する第1
    の瞳孔径推定手段と、該使用者または被験者の眼球像を
    受光する受光手段と、該受光手段の出力に基づいて該使
    用者または被験者の瞳孔径を推定する第2の瞳孔径推定
    手段と、該第1の瞳孔径推定手段の推定結果と該第2の
    瞳孔径推定手段の推定結果との少なくともどちらか一方
    を利用して該使用者または被験者の推定瞳孔径を設定す
    る設定手段と、該設定手段によって設定される該推定瞳
    孔径に基づいて、前記受光手段によって得られた眼球像
    情報を演算処理して使用者または被験者の視線情報を求
    める演算処理手段とを有することを特徴とする視線検出
    装置。
  4. 【請求項4】 前記設定手段は前記第1の瞳孔径推定手
    段の推定結果と、前記第2の瞳孔径推定手段の推定結果
    を比較して、より小さい瞳孔径を推定瞳孔径として設定
    することを特徴とする請求項3記載の視線検出装置。
  5. 【請求項5】 該使用者または被験者の眼球像を受光す
    る受光面を有する受光手段と、実質的に使用者または被
    験者の眼球に入射する光量を測光する測光手段と、該測
    光手段の出力に基づいて該使用者または被験者の瞳孔径
    を推定する瞳孔径推定手段と、該使用者または被験者の
    眼球と受光手段の受光面との距離情報を求める距離情報
    検出手段と、該瞳孔径推定手段によって推定された該使
    用者または被験者の瞳孔径および該距離情報検出手段に
    よって求めた距離情報から該受光手段の受光面に結像す
    る該使用者または被験者の瞳孔径を演算する瞳孔径演算
    手段と、該瞳孔径演算手段の演算結果に基づいて、該受
    光手段によって得られた眼球像情報を演算処理すること
    で使用者または被験者の視線情報を求める演算処理手段
    とを有することを特徴とする視線検出装置。
  6. 【請求項6】 該使用者または被験者の眼球像を受光す
    る受光面を有する受光手段と、該受光手段の出力に基づ
    いて該使用者または被験者の瞳孔径を推定する瞳孔径推
    定手段と、該使用者または被験者の眼球と受光手段の受
    光面との距離情報を求める距離情報検出手段と、該瞳孔
    径推定手段によって推定された該使用者または被験者の
    瞳孔径および該距離情報検出手段によって求めた距離情
    報から該受光手段の受光面に結像する該使用者または被
    験者の瞳孔径を演算する瞳孔径演算手段と、該瞳孔径演
    算手段の演算結果に基づいて、該受光手段によって得ら
    れた眼球像情報を演算処理することで使用者または被験
    者の視線情報を求める演算処理手段とを有することを特
    徴とする視線検出装置。
  7. 【請求項7】 該使用者または被験者の眼球像を受光す
    る受光面を有する受光手段と、該使用者または被験者の
    眼球と受光手段の受光面との距離情報を求める距離情報
    検出手段と、実質的に使用者または被験者の眼球に入射
    する光量を測光する測光手段と、該測光手段の出力に基
    づいて該使用者または被験者の瞳孔径を推定する第1の
    瞳孔径推定手段と、該受光手段の出力に基づいて該使用
    者または被験者の瞳孔径を推定する第2の瞳孔径推定手
    段と、該第1の瞳孔径推定手段の推定結果と該第2の瞳
    孔径推定手段の推定結果の少なくともどちらか一方を利
    用して該使用者または被験者の推定瞳孔径を設定する推
    定瞳孔径設定手段と、該距離情報および該推定瞳孔径に
    基づいて、該受光手段の受光面に結像する該使用者また
    は被験者の瞳孔径を演算する瞳孔径演算手段と、前記受
    光手段によって得られた眼球像情報を瞳孔径演算手段の
    出力に基づいて演算処理して使用者または被験者の視線
    情報を求める演算処理手段とを有することを特徴とする
    視線検出装置。
  8. 【請求項8】 前記距離情報検出手段は一対の平行光束
    で使用者または被験者の眼球を照明する照明手段を有
    し、前記受光手段で受光した眼球像に生じる該照明手段
    の一対の反射像から該使用者または被験者の眼球と受光
    手段との距離情報を求めることを特徴とする請求項5、
    6または7記載の視線検出装置。
  9. 【請求項9】 前記瞳孔径演算手段は前記距離情報から
    前記受光手段の受光面に結像する前記使用者または被験
    者の眼球の結像倍率を求め、前記受光手段の受光面に結
    像する該眼球の瞳孔径を演算することを特徴とする請求
    項8記載の視線検出装置。
  10. 【請求項10】 実質的に使用者または被験者の眼球に
    入射する光量を測光する測光手段と、使用者または被験
    者眼の像を受光する受光手段と、該受光手段で得られた
    眼球像信号を演算処理して使用者または被験者の視線情
    報を求める演算処理手段とを有する視線検出装置におい
    て、前記測光手段の出力に基づいて推定した使用者また
    は被験者の瞳孔径と、前記受光手段の出力に基づいて推
    定した使用者または被験者の瞳孔径の少なくともどちら
    か一方を利用して使用者または被験者眼の推定瞳孔径を
    設定する推定瞳孔径設定手段を有し、前記演算処理手段
    は設定された該推定瞳孔径に基づいて前記受光手段で得
    られた眼球像信号を演算処理することを特徴とする視線
    検出装置を有する光学機器。
  11. 【請求項11】 実質的に使用者または被験者の眼球に
    入射する光量を測光する測光手段と、該測光手段の出力
    に基づいて該使用者または被験者の瞳孔径を推定する第
    1の瞳孔径推定手段と、該使用者または被験者の眼球像
    を受光する受光手段と、該受光手段の出力に基づいて該
    使用者または被験者の瞳孔径を推定する第2の瞳孔径推
    定手段と、該第1の瞳孔径推定手段の推定結果と該第2
    の瞳孔径推定手段の推定結果との少なくともどちらか一
    方を利用して該使用者または被験者の推定瞳孔径を設定
    する設定手段と、該設定手段によって設定される該推定
    瞳孔径に基づいて、前記受光手段によって得られた眼球
    像情報を演算処理して使用者または被験者の視線情報を
    求める演算処理手段とを有することを特徴とする視線検
    出装置を有する光学機器。
  12. 【請求項12】 該使用者または被験者の眼球像を受光
    する受光面を有する受光手段と、実質的に使用者または
    被験者の眼球に入射する光量を測光する測光手段と、該
    測光手段の出力に基づいて該使用者または被験者の瞳孔
    径を推定する瞳孔径推定手段と、該使用者または被験者
    の眼球と受光手段の受光面との距離情報を求める距離情
    報検出手段と、該瞳孔径推定手段によって推定された該
    使用者または被験者の瞳孔径および該距離情報検出手段
    によって求めた距離情報から該受光手段の受光面に結像
    する該使用者または被験者の瞳孔径を演算する瞳孔径演
    算手段と、該瞳孔径演算手段の演算結果に基づいて、該
    受光手段によって得られた眼球像情報を演算処理するこ
    とで使用者または被験者の視線情報を求める演算処理手
    段とを有することを特徴とする視線検出装置を有する光
    学機器。
  13. 【請求項13】 該使用者または被験者の眼球像を受光
    する受光面を有する受光手段と、該受光手段の出力に基
    づいて該使用者または被験者の瞳孔径を推定する瞳孔径
    推定手段と、該使用者または被験者の眼球と受光手段の
    受光面との距離情報を求める距離情報検出手段と、該瞳
    孔径推定手段によって推定された該使用者または被験者
    の瞳孔径および該距離情報検出手段によって求めた距離
    情報から該受光手段の受光面に結像する該使用者または
    被験者の瞳孔径を演算する瞳孔径演算手段と、該瞳孔径
    演算手段の演算結果に基づいて、該受光手段によって得
    られた眼球像情報を演算処理することで使用者または被
    験者の視線情報を求める演算処理手段とを有することを
    特徴とする視線検出装置を有する光学機器。
  14. 【請求項14】 該使用者または被験者の眼球像を受光
    する受光面を有する受光手段と、該使用者または被験者
    の眼球と受光手段の受光面との距離情報を求める距離情
    報検出手段と、実質的に使用者または被験者の眼球に入
    射する光量を測光する測光手段と、該測光手段の出力に
    基づいて該使用者または被験者の瞳孔径を推定する第1
    の瞳孔径推定手段と、該受光手段の出力に基づいて該使
    用者または被験者の瞳孔径を推定する第2の瞳孔径推定
    手段と、該第1の瞳孔径推定手段の推定結果と該第2の
    瞳孔径推定手段の推定結果の少なくともどちらか一方を
    利用して該使用者または被験者の推定瞳孔径を設定する
    推定瞳孔径設定手段と、該距離情報および該推定瞳孔径
    に基づいて、該受光手段の受光面に結像する該使用者ま
    たは被験者の瞳孔径を演算する瞳孔径演算手段と、前記
    受光手段によって得られた眼球像情報を瞳孔径演算手段
    の出力に基づいて演算処理して使用者または被験者の視
    線情報を求める演算処理手段とを有することを特徴とす
    る視線検出装置を有する光学機器。
JP19498995A 1995-07-31 1995-07-31 視線検出装置および視線検出装置を有する光学機器 Expired - Fee Related JP3559622B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP19498995A JP3559622B2 (ja) 1995-07-31 1995-07-31 視線検出装置および視線検出装置を有する光学機器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP19498995A JP3559622B2 (ja) 1995-07-31 1995-07-31 視線検出装置および視線検出装置を有する光学機器

Publications (2)

Publication Number Publication Date
JPH0938038A true JPH0938038A (ja) 1997-02-10
JP3559622B2 JP3559622B2 (ja) 2004-09-02

Family

ID=16333697

Family Applications (1)

Application Number Title Priority Date Filing Date
JP19498995A Expired - Fee Related JP3559622B2 (ja) 1995-07-31 1995-07-31 視線検出装置および視線検出装置を有する光学機器

Country Status (1)

Country Link
JP (1) JP3559622B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1185104A1 (en) * 2000-08-23 2002-03-06 Motorola, Inc. Mobile terminal battery power conservation
JP2007143746A (ja) * 2005-11-25 2007-06-14 Ryusyo Industrial Co Ltd 眼科測定装置
CN112914499A (zh) * 2021-03-01 2021-06-08 常州市第一人民医院 一种两用瞳孔笔

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1185104A1 (en) * 2000-08-23 2002-03-06 Motorola, Inc. Mobile terminal battery power conservation
JP2007143746A (ja) * 2005-11-25 2007-06-14 Ryusyo Industrial Co Ltd 眼科測定装置
CN112914499A (zh) * 2021-03-01 2021-06-08 常州市第一人民医院 一种两用瞳孔笔

Also Published As

Publication number Publication date
JP3559622B2 (ja) 2004-09-02

Similar Documents

Publication Publication Date Title
JP3158643B2 (ja) 焦点検出手段と視線検出手段とを有したカメラ
US6674964B2 (en) Visual axis detecting apparatus
JPH07151950A (ja) カメラ
JP3297481B2 (ja) 視線検出装置
JPH0323431A (ja) 視線検出手段を有した機器
US5402199A (en) Visual axis detecting apparatus
JP3559622B2 (ja) 視線検出装置および視線検出装置を有する光学機器
JP4054436B2 (ja) 光学装置
JP3256294B2 (ja) 視線検出装置および視線検出方法
JP3176147B2 (ja) 視線検出装置
JPH10148864A (ja) カメラの測光装置
JP3391892B2 (ja) 視線検出装置、光学装置及び視線検出方法
JP3363492B2 (ja) 視線検出装置および視線検出方法
JPH06148511A (ja) 視線検出装置及びそれを有した光学装置
JPH05232372A (ja) 視線検出装置付きカメラ
JP3530648B2 (ja) 視線検出装置及び光学装置
JP2756413B2 (ja) 視線検出装置を備える光学装置
JP2002341239A (ja) 視線検出装置
JPH1099275A (ja) 視線検出装置及び光学機器
JP3332581B2 (ja) 光学装置、カメラ、視線検出装置、視線検出方法、及び、接眼部と眼球位置の相対位置判別方法。
JPH0951873A (ja) 視線検出装置及び光学装置
JP2003121904A (ja) カメラの光学装置
JPH08234273A (ja) 光学機器
JPH1099276A (ja) 視線検出装置及び光学機器
JPH0951875A (ja) 視線検出装置及び光学装置

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20031224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040127

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040329

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040524

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090528

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100528

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100528

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110528

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120528

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120528

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130528

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140528

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees