JP7532094B2 - 観察装置および撮像装置 - Google Patents

Description

本発明は、観察者の眼球を撮像する撮像系を備えた観察装置に関する。

デジタルカメラ等の撮像装置には、観察装置としての光学ファインダまたは電子ビューファインダの接眼光学系を覗く観察者の眼球の向き、すなわち視線方向を検出し、該視線方向に応じて撮像画面内にてオートフォーカスや自動露出等を行う領域を選択する視線検出機能を有するものがある。このような視線検出機能は、接眼光学系とは別に、観察者の眼球を撮像する撮像系を設けることによって実現される。
特許文献１には、接眼光学系内にプリズムを配置して光路を分岐し、分岐光路からの光を撮像系に導く撮像装置が開示されている。また、特許文献２には、接眼光学系の外部から該接眼光学系の光軸に対して傾斜した方向から眼球を撮像する撮像系を有する撮像装置が開示されている。

特開平０５－１８８４３０号公報 特開平０５－３１３０５７号公報

しかしながら、接眼光学系内に光路を分岐するプリズム等の光学部材を配置すると、観察装置および撮像装置が大型化する。また、接眼光学系内に接眼光学系としては不要な光学部材を配置することで、接眼光学系の設計自由度が低下する。

さらに、接眼光学系の光軸に対して傾斜した方向から眼球を撮像すると、接眼光学系から眼球までの距離が変動することによって撮像倍率の変動が大きくなる。例えば、観察者が裸眼の場合と眼鏡をかけている場合とで同等の視線検出精度を維持することが難しくなる。

本発明は、眼球の位置が変動しても眼球を良好に撮像することができるようにした小型の観察装置およびこれを備えた撮像装置を提供する。

本発明の一側面としての観察装置は、画像を表示する画像表示素子と、該画像表示素子からの光を観察者の眼球に導く接眼光学系と、それぞれ眼球の光学像を形成する撮像レンズと光学像を撮像する撮像センサを含む複数の撮像系とを有する。複数の撮像系のそれぞれの撮像レンズの光軸は、接眼光学系の光軸に対して、該光軸上の互いに異なる位置にて互いに異なる傾斜角度で交差する。複数の撮像系のそれぞれにおける撮像レンズの光軸と撮像センサの撮像面の法線とがなす角度が互いに異なることを特徴とする。

また本発明の他の一側面としての観察装置は、画像を表示する画像表示素子と、該画像表示素子からの光を観察者の眼球に導く接眼光学系と、それぞれ眼球を撮像する複数の撮像系とを有する。複数の撮像系のそれぞれの撮像方向は、接眼光学系の光軸に対して、該光軸上の互いに異なる位置にて互いに異なる傾斜角度をなす方向である。複数の撮像系はそれぞれ、該撮像系の撮像センサ側のピント面の接眼光学系の光軸に対する傾きが撮像方向に直交する面の接眼光学系の光軸に対する傾きよりも小さくなるように構成されている。

本発明によれば、小型の観察装置でありながらも、眼球の位置が変動しても良好に眼球を撮像することができる。

本発明の実施例１である観察装置の構成を示す図。 実施例１における撮像系の構成を示す図。 実施例１における他の撮像系の構成を示す図。 本発明の実施例２である観察装置の構成を示す図。 実施例２における撮像系の構成を示す図。 実施例２における他の撮像系の構成を示す図。 実施例２におけるさらに別の撮像系の構成を示す図。 本発明の実施例３である観察装置の構成を示す図。 実施例１～３の観察装置を備えた撮像装置を示す図。

以下、本発明の実施例について図面を参照しながら説明する。図１は、本発明の実施例１である観察装置１Ａの構成を示している。観察装置１Ａは、画像表示素子３と、接眼光学系２と、複数の撮像系４、５とを有する。図４は、本発明の実施例２である観察装置１Ｂの構成を示している。観察装置１Ｂは、画像表示素子３と、接眼光学系２と、複数の撮像系６、７、８とを有する。

図２および図３はそれぞれ、観察装置１Ａに設けられた撮像系４および撮像系５の構成を示している。図５、図６および図７はそれぞれ、観察装置１Ｂに設けられる撮像系６、撮像系７および撮像系８の構成を示している。各撮像系（４～８）は、物体側から像側に順に、絞り（１１、１４、１７、２０、２３）撮像レンズ（１２、１５、１８、２１、２４）および撮像センサ（１３、１６、１９、２２、２５）により構成されている。

表１～５はそれぞれ、撮像系４～８の数値例を示す。各数値例における全体諸元のうち「焦点距離」は撮像レンズの焦点距（ｍｍ）、「撮像面対角長」は撮像センサの矩形の撮像面の対角長（ｍｍ）、「画角」は撮像レンズの画角（°）を示す。

また、面データにおいて、ｉを物体側から数えた面番号とすると、ｒはｉ番目の面の曲率半径（ｍｍ）、ｚとｙはそれぞれｉ番目の面の図１と図４に示すｚ方向とｙ方向での座標を示す。θは撮像レンズの光軸および撮像センサの撮像面の法線が接眼光学系の光軸に対してなす傾斜角度（°）、ｎｄとνｄはそれぞれ、ｉ番目のレンズのｄ線（５８７．６ｎｍ）に対する屈折率およびｄ線を基準とするアッベ数を示す。アッベ数νｄは、フラウンホーファ線のｄ線（５８７．６ｎｍ）、Ｆ線（４８６．１ｎｍ）、Ｃ線（６５６．３ｎｍ）における屈折率をＮｄ、ＮＦ、ＮＣとするとき、νｄ＝（Ｎｄ－１）／（ＮＦ－ＮＣ）で表される。「有効径」は、ｉ番目の面のうち撮像面に到達する光が通過する領域の直径を示す。

また、面番号の横に＊が付されたレンズ面は非球面形状を有する。非球面形状は、レンズ面の頂点からの撮像レンズの光軸上の位置をｘ、該光軸に直交する方向での高さをｈ、光の進行方向を正とし、ｒを近軸曲率半径、Ｋを円錐定数、Ａ４，Ａ６，Ａ８を非球面係数とするとき、以下の式で表される。円錐定数と非球面係数における「Ｅ±Ｍ」は×１０^±Ｍを意味する。

図１に示す実施例１の観察装置１Ａにおいて、画像表示素子３は、液晶素子や有機ＥＬ素子等により構成されて観察画像を表示する。接眼光学系２は、画像表示素子３からの光を観察者の眼球１０に導く。観察装置１Ａは、デジタルスチルカメラやビデオカメラ等の撮像装置に搭載され、該撮像装置により被写体を撮像して得られた撮像画像を観察画像として表示する電子ビューファインダ（ＥＶＦ）として機能する。

また観察装置１Ａは、撮像系４、５を有する。撮像系４、５はそれぞれ、図２および図３に示すように、絞り１１、１４と、該絞り１１、１４の開口を通過した光を結像させる撮像レンズ１２、１５と、撮像レンズ１２、１５により形成された光学像を撮像（光電変換）する光電変換素子としての撮像センサ１３、１６とにより構成されており、接眼光学系２を覗く眼球１０を撮像する。撮像系４、５により眼球１０を撮像して得られた撮像データ（画像データ）は、眼球１０の向き、すなわち観察者の視線を検出するために用いられる。

撮像系４はその撮像方向（撮像レンズ１２の光軸１２ａが延びる方向）が接眼光学系２の光軸２ａ上での接眼光学系２からの距離が遠い位置を向いており、撮像系５はその撮像方向（撮像レンズ１５の光軸１５ａが延びる方向）が接眼光学系２からの距離が近い位置を向いている。すなわち、撮像系４、５は、接眼光学系２からの距離が互いに異なる位置にある眼球１０を撮像するために設けられている。

具体的には、撮像系４の撮像レンズ１２の光軸１２ａと撮像系５の撮像レンズ１５の光軸１５ａは、接眼光学系２の光軸２ａに対して、該光軸２ａ上の互いに異なる位置（接眼光学系２からの距離が異なる位置）において互いに異なる傾斜角度θ４、θ５で交差する。

このように撮像系４、５は、接眼光学系２の光軸２ａに対して傾斜した撮像方向から眼球１０を撮像する構成を有するため、従来のように接眼光学系にプリズムやミラー等の光学部材を設けることによる不要な光路長の増加を防止することができる。特に本実施例のようなＥＶＦでは、接眼光学系に求められる拡大倍率が大きく、接眼光学系の焦点距離が短くなるため、接眼光学系の光路長の増加は好ましくない。

また、眼球を正面からではなく斜め方向から撮像する場合、接眼光学系から眼球までの距離によって撮像センサ上において眼球が撮像される像高が変化する。さらに接眼光学系から眼球までの距離によって撮像系から眼球までの距離も変化するため、撮像系のピント位置が変化するとともに、眼球に対する撮像倍率も変化する。これらの影響は、眼鏡型端末やヘッドマウントディスプレイのように接眼光学系から眼球までの距離がほぼ固定される場合は無視できるが、撮像装置のＥＶＦのように接眼光学系から眼球までの距離が大きく変化し得る場合は、眼球までの距離によっては視線検出が困難になる。

このため本実施例では、接眼光学系２から眼球１０までの距離に応じた撮像系４、５を設け、上述した像高、ピント位置および撮像倍率の変化を緩和することで、眼球１０までの距離が変化してもが眼球１０を良好に撮像することができ、高精度な視線検出を行えるようにしている。具体的には、撮像系４、５の撮像レンズ１２、１５の光軸１２ａ、１５ａが接眼光学系２の光軸２ａに交差する位置を互いに異ならせることで、眼球１０の光学像が撮像センサ１３、１６の中心に形成される距離を変化させている。

また、各撮像系に対応する眼球１０の位置に応じて撮像レンズの画角（以下、撮像系の画角ともいう）および焦点距離を異ならせることで、眼球１０までの距離の変化に対するピント位置や撮像倍率の変化を抑制している。具体的には、接眼光学系２からの距離が近い眼球１０を撮像する撮像系５に比べて、距離が遠い眼球１０を撮像する撮像系４の画角を狭くしている。

また、各撮像系において、撮像レンズの光軸が接眼光学系２の光軸２ａに対してなす傾斜角度（以下、レンズ光軸角度という）と撮像センサの撮像面の法線（１３ａ、１６ａ）が接眼光学系２の光軸２ａに対してなす傾斜角度（以下、センサ法線角度という）とは互いに異なる。レンズ光軸角度に対するセンサ法線角度の差（＝センサ法線角度－レンズ光軸角度）を、センサチルト角度Δθという。さらに本実施例では、撮像系４のセンサチルト角度Δθ４と撮像系５のセンサチルト角度Δθ５も互いに異なる。

接眼光学系２の光軸２ａに対して傾いた撮像方向から眼球１０を撮像する場合において、レンズ光軸角度とセンサ法線角度が一致する（すなわちセンサチルト角が０である）と、撮像系のピントが合う平面であるピント面は、撮像レンズの光軸に直交し、接眼光学系２の光軸２ａに直交する面から大きく傾いた面となる。しかし、眼球１０のうち角膜だけでなく、強膜、瞳孔、さらには瞼にもピントが合うように撮像するためには、撮像系のピント面が接眼光学系２の光軸２ａに直交する面（眼球１０に正対する面）に対する傾きができるだけ小さい面であることが望ましい。このため本実施例では、各撮像系において撮像センサを撮像レンズに対してチルトさせてセンサチルト角度を適切に設定することで、該撮像系のピント面の接眼光学系２の光軸２ａに直交する面に対する傾きを撮像レンズの光軸（撮像方向）に直交する面よりも小さくしている。

具体例として、図２に示す撮像系４では、センサチルト角度Δθ４を撮像系４の観察者側のピント面１２ｃの接眼光学系２の光軸２ａに直交する面２ｂに対する傾きが撮像レンズ１２の光軸１２ａに直交する面１２ｂよりも小さくなるように設定されている。なお、このとき、撮像系４の撮像センサ側のピント面の接眼光学系２の光軸２ａに対する傾きは、撮像レンズ１２の光軸１２ａに直交する面１２ｂの前記接眼光学系の光軸に対する傾きよりも小さくなる。

以下、本実施例および後述する他の実施例において、複数の撮像系が満足することが望ましい条件について説明する。

複数の撮像系の画角のうち最も広い画角をω１、最も狭い画角をω２とするとき、以下の条件式（１）を満足することが望ましい。
－０．３０≦ｔａｎ（ω２）／ｔａｎ（ω１）≦０．８０ （１）
条件式（１）は、接眼光学系と眼球との距離の変化に十分に対応可能な複数の撮像系を設けるための画角に関する条件を示す。ｔａｎ（ω２）／ｔａｎ（ω１）が条件式（１）の下限を下回ると、いずれかの撮像系の結像性能が低くなって歪曲等が発生するとともに、眼球に対する撮像倍率が小さくなるため、好ましくない。ｔａｎ（ω２）／ｔａｎ（ω１）は条件式（１）の上限を上回ると、複数の撮像系の画角が互いに近づきすぎて眼球の距離の変化に対する影響を十分に軽減することができなくなるため、好ましくない。

条件式（１）の数値範囲を、以下のようにすることがより好ましい。
－０．２０≦ｔａｎ（ω２）／ｔａｎ（ω１）≦０．７０ （１ａ）
条件式（１）の数値範囲を、以下のようにすることがさらに好ましい。
－０．１０≦ｔａｎ（ω２）／ｔａｎ（ω１）≦０．６０ （１ｂ）
また、複数の撮像系のレンズ光軸角度の絶対値のうち最も大きいレンズ光軸角度をθ１、最も小さいレンズ光軸角度をθ２とするとき、以下の条件式（２）を満足することが望ましい。
１．１≦ｔａｎ（θ１）／ｔａｎ（θ２）≦８．０ （２）
条件式（２）は、接眼光学系と眼球との距離の変化に十分に対応可能な複数の撮像系を設けるためのレンズ光軸角度に関する条件を示す。ｔａｎ（θ１）／ｔａｎ（θ２）が条件式（２）の下限を下回ると、眼球の距離の変動による影響を軽減できなくなるため、好ましくない。ｔａｎ（θ１）／ｔａｎ（θ２）が条件式（２）の上限を上回ると、撮像系の光路が接眼光学系の光路に干渉するおそれが生じるため、好ましくない。

条件式（２）の数値範囲を、以下のようにすることがより好ましい。
１．５≦ｔａｎ（θ１）／ｔａｎ（θ２）≦６．０ （２ａ）
条件式（２）の数値範囲を、以下のようにすることがさらに好ましい。
１．７≦ｔａｎ（θ１）／ｔａｎ（θ２）≦５．０ （２ｂ）
また、各撮像系のレンズ光軸角度の絶対値をθａ、センサ法線角度の絶対値をθｂとするとき、以下の条件式（３）を満足することが望ましい。
０．７０≦ｔａｎ（θａ）／ｔａｎ（θｂ）＜１．００ （３）
条件式（３）は、撮像系のピント面の接眼光学系の光軸に直交する面に近づけるための条件を示す。ｔａｎ（θａ）／ｔａｎ（θｂ）が条件式（３）の下限値を下回ると、撮像系が大型化するため、好ましくない。ｔａｎ（θａ）／ｔａｎ（θｂ）が条件式（３）の上限を上回ると、撮像系の観察者側のピント面の傾きを接眼光学系の光軸に直交する面に近づけるために撮像系の全長が長くなるので、好ましくない。

条件式（３）の数値範囲を、以下のようにすることがより好ましい。
０．７５≦ｔａｎ（θａ）／ｔａｎ（θｂ）＜１．００ （３ａ）
条件式（３）の数値範囲を、以下のようにすることがさらに好ましい。
０．８０≦ｔａｎ（θａ）／ｔａｎ（θｂ）＜１．００ （３ｂ）
また、各撮像系のレンズ光軸角度の絶対値をθｎとするとき、以下の条件式（４）を満足することが望ましい。
１０°≦θｎ≦７０° （４）
条件式（４）は、接眼光学系に対する影響を抑えつつ撮像系の光学性能を確保するための条件を示す。θｎが条件式（４）の下限値を下回ると、撮像系の位置が接眼光学系に近つなりすぎて接眼光学系の光学性能に影響するおそれがあるため、好ましくない。θｎが条件式（４）の上限を上回ると、撮像系が接眼光学系に対する傾きが大きくなりすぎて撮像系の光学性能を確保することが難しくなるため、好ましくない。

条件式（４）の数値範囲を、以下のようにすることがより好ましい。
１０°≦θｎ≦６５° （４ａ）
条件式（４）の数値範囲を、以下のようにすることがさらに好ましい。
１０°≦θｎ≦６０° （４ｂ）
また、各撮像系の撮像レンズの焦点距離をｆ、撮像センサの撮像面の対角長をＨとし、複数の撮像系のＨ／ｆのうち最大値をＨ１／ｆ１、最小値をＨ２／ｆ２とするとき、以下の条件式（５）を満足することが望ましい。
１．１≦（Ｈ１／ｆ１）／（Ｈ２／ｆ２）≦２．５ （５）
条件式（５）は、接眼光学系と眼球との距離が変動しても複数の撮像系による視線検出精度を良好にするための条件を示す。（Ｈ１／ｆ１）／（Ｈ２／ｆ２）が条件式（５）の下限を下回ると、複数の撮像系の特性が近過ぎて、眼球の距離の変動による視線検出精度の変化が大きくなるため、好ましくない。（Ｈ１／ｆ１）／（Ｈ２／ｆ２）が条件式（５）の上限を上回ると、複数の撮像系の特性の違いが大き過ぎて、撮像系の数が増加するおそれがあるため、好ましくない。

条件式（５）の数値範囲を、以下のようにすることがより好ましい。
１．１≦（Ｈ１／ｆ１）／（Ｈ２／ｆ２）≦２．１ （５ａ）
条件式（５）の数値範囲を、以下のようにすることがさらに好ましい。
１．１≦（Ｈ１／ｆ１）／（Ｈ２／ｆ２）≦１．９ （５ｂ）
また、各撮像系の撮像レンズのうち眼球側の曲率をＲ１、撮像センサ側の曲率をＲ２とするとき、各撮像系は以下の条件式（６）を満足する少なくとも１つの撮像レンズを含むことが望ましい。
－４．００≦（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）＜１．００ （６）
条件式（６）は、各撮像系において視線検出のための光学性能と小型化を両立するために撮像レンズが満足することが望ましい条件を示す。（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）が条件式（６）の下限を下回ると、撮像レンズが大型化するため、好ましくない。（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）が条件式（６）の上限を上回ると、撮像レンズの像面湾曲やコマ収差等が増加して撮像レンズの光学性能が低下するため、好ましくない。

条件式（６）の数値範囲を、以下のようにすることがより好ましい。
－３．５０≦（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）＜１．００ （６ａ）
条件式（５）の数値範囲を、以下のようにすることがさらに好ましい。

－３．３０≦（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）＜１．００ （６ｂ）
実施例１の数値例における条件式（２）のｔａｎ（θａ）／ｔａｎ（θｂ）、条件式（５）のＨ／ｆおよび条件式（６）の（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）を表１、２に示す。また、条件式（１）のｔａｎ（ω２）／ｔａｎ（ω１）、条件式（２）のｔａｎ（θ１）／ｔａｎ（θ２）および条件式（５）の（Ｈ１／ｆ１）／（Ｈ２／ｆ２）を表６にまとめて示す。

図４は、本発明の実施例２である観察装置１Ｂの構成を示している。観察装置１Ｂにおける画像表示素子３と接眼光学系２は、実施例１における画像表示素子３と接眼光学系２と同じものである。本実施例では、撮像系４、５の数が２つである実施例１に比べて撮像系６～８の数を３つに増やすことで、接眼光学系２からの眼球１０までの距離の変化に対してより高い視線検出精度を得ることができる。

撮像系６、７、８はそれぞれ、図５、図６および図７に示すように、絞り１７、２０、２３と、該絞り１７、２０、２３の開口を通過した光を結像させる撮像レンズ１８、２１、２４、撮像レンズ１８、２１、２４により形成された光学像を撮像する光電変換素子としての撮像センサ１９、２２、２５とにより構成されており、接眼光学系２を覗く眼球１０を撮像する。実施例１と同様に、撮像系６～８により眼球１０を撮像して得られた撮像データは、眼球１０の向き、すなわち観察者の視線を検出するために用いられる。

撮像系６はその撮像方向が接眼光学系２からの距離が遠い位置を向いており、撮像系７はその撮像方向が接眼光学系２からの距離が近い位置を向いている。撮像系８はその撮像方向が接眼光学系２からの距離が中間の位置を向いている。すなわち、撮像系６～８は、接眼光学系２からの距離が互いに異なる位置にある眼球１０を撮像するために設けられている。

具体的には、撮像系６の撮像レンズ１８の光軸１８ａと撮像系７の撮像レンズ２１の光軸２１ａと撮像系８の撮像レンズ２４の光軸２４ａは、接眼光学系２の光軸２ａに対して互いに異なる位置（接眼光学系２からの距離が異なる位置）において互いに異なる傾斜角度θ６、θ７、θ８で交差する。

また本実施例でも、撮像系６～８の画角を互いに異ならせている。具体的には、接眼光学系２からの距離が近い眼球１０を撮像する撮像系６の画角、距離が中間の眼球１０を撮像する撮像系８の画角、距離が遠い眼球１０を撮像する撮像系７の画角の順で狭くしている。

さらに本実施例でも、図５～７に示すように、撮像系６～８のそれぞれにおいて撮像センサ１９、２２、２５の撮像面の法線１９ａ、２２ａ、２５ａを撮像レンズ１８、２１、２４の光軸１８ａ、２１ａ、２４ａに対してチルトさせてセンサチルト角度Δθ６、Δθ７、Δθ８を適切に設定することで、各撮像系の観察者側のピント面の接眼光学系２の光軸２ａに直交する面に対する傾きを撮像レンズの光軸に直交する面よりも小さくしている。

実施例２の数値例における条件式（２）のｔａｎ（θａ）／ｔａｎ（θｂ）、条件式（５）のＨ／ｆおよび条件式（６）の（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）を表３～５に示す。また、条件式（１）のｔａｎ（ω２）／ｔａｎ（ω１）、条件式（２）のｔａｎ（θ１）／ｔａｎ（θ２）および条件式（５）の（Ｈ１／ｆ１）／（Ｈ２／ｆ２）を表６にまとめて示す。
なお、本実施例では３つの撮像系を設けたが、撮像系の数を４つ以上としてもよい。

以上説明した実施例１、２では、各撮像系において撮像レンズの光軸に対して撮像センサの撮像面の法線をチルトする構成により、撮像系の撮像センサ側のピント面の接眼光学系の光軸に対する傾きを撮像レンズの光軸（撮像方向）に直交する面の接眼光学系の光軸に対する傾きよりも小さくする場合について説明した。しかし、撮像系の撮像センサ側のピント面の接眼光学系の光軸に対する傾きが撮像方向に直交する面の接眼光学系の光軸に対する傾きよりも小さくなれば、上述した実施例の構成と異なる構成であってもよい。例えば撮像系を構成する撮像レンズは複数枚から構成されていても構わない。また、観察装置の大きさを抑制するために、撮像系の中にミラーを配置する等して光路を折り曲げる構成を採ってもよい。この場合はミラーを展開した状態において、本実施例の条件を満たせればよい。

図８は、本発明の実施例３である観察装置１０１の構成を示している。観察装置１０１は、画像表示素子１０３と、接眼光学系１０２と、観察者の眼球１０９を撮像する撮像系１０４、１０５とを有する。画像表示素子１０３と接眼光学系１０２は実施例１における画像表示素子３と接眼光学系２と同じものである。

また観察装置１０１は、撮像系１０４により眼球１０９を撮像する際に眼球１０９に対して赤外光を照射する照明系１０６と、撮像系１０４により眼球１０９を撮像する際に眼球１０９に対して赤外光を照射する照明系１０７を有する。照明系１０６、１０７は、接眼光学系１０２からの距離が異なる眼球１０９に対して接眼光学系１０２の光軸に対して互いに異なる角度だけ傾斜した方向から赤外光を照射する。赤外光を用いるのは、その照射を観察者に視認されないようにするためである。

観察装置１０１は、処理回路（処理手段）１０８に接続されている。処理回路１０８は、撮像系１０４、１０５で得られた撮像データを用いて観察者の視線方向を算出する。この際、処理回路１０８は、接眼光学系１０２から眼球１０９までの距離に応じて、撮像系１０４、１０５のうち主として視線検出に用いる撮像データ（メイン撮像データ）を得る撮像系を切り替える。これは、眼球１０９までの距離に応じて、最も視線検出精度が高くなる撮像系が異なるためである。眼球１０９までの距離は、撮像系１０４、１０５から得られる撮像データの視差等を用いて算出すればよい。視線方向の演算方法は、照明系１０６、１０７から眼球１０９に照射された赤外光の反射像の座標から算出する方法や、眼球１０９を中心とする顔の広い範囲の撮像データから算出する方法等がある。

また処理回路１０８は、メイン撮像データを得る撮像系とは別の撮像系から得られた撮像データ（サブ撮像データ）を用いて、メイン撮像データから得られる視線方向を補正してもよい。例えば、メイン撮像データを得る撮像系より画角が広い別の撮像系からのサブ撮像データには、顔のうち眼球１０９以外の範囲の画像が含まれていることがあるので、このサブ撮像データを利用してメイン撮像データを用いて算出された視線方向を補正することで、メイン撮像データのみを用いる場合よりも視線方向の視線精度を向上させることができる。

以上説明した実施例１～３によれば、小型でありながらも、眼球の位置が変動しても眼球を良好に撮像することができ、良好な視線検出精度を維持することが可能な観察装置を実現することができる。

上記実施例１～３では、複数の撮像系を接眼光学系の上下に配置した場合について説明した。これは、通常の接眼光学系の有効領域は上下方向の方が水平方向より狭いので、複数の撮像系を接眼光学系の上下に配置する方が観察装置の大型化を抑えやすいためである。ただし、複数の撮像系は、接眼光学系の光軸を中心する円周上であればどの位置に配置されてもよい。

また実施例１～３では、撮像系の光学系が撮像レンズと絞りにより構成されている場合について説明したが、絞りの前面にカバーガラスを配置してもよいし、撮像レンズの前後のいずれかにプリズム等の光学部材を配置してもよい。

図９は、実施例１～３の観察装置１Ａ、１Ｂ、１０１のうちいずれかを搭載したデジタルスチルカメラやビデオカメラ等の撮像装置２００を示している。

撮像装置２００は、撮像レンズ２０１により形成された被写体像をＣＣＤセンサやＣＭＯＳセンサ等の撮像センサ２０２により撮像する。撮像センサ２０２から出力された撮像信号は、演算処理回路（処理手段）２０３に入力される。演算処理回路２０３は、撮像信号に対して各種画像処理を行って撮像画像データを生成する。撮像画像データは、ＥＦＶとしての観察装置に出力され、観察装置内の画像表示素子（３、１０３）に表示される。ユーザは、その眼球（１０、１０９）により観察装置内の接眼光学系（２、１０２）を覗くことで画像表示素子に表示された画像を観察することができる。

この際、演算処理回路２０３は、観察装置の撮像系（４～８、１０４、１０５）から得られる撮像データを用いて、上記処理回路１０８のようにユーザ（観察者）の視線方向を算出（取得）する。そしてこの視線方向から撮像画面内におけるユーザの注視位置を算出する。さらに演算処理回路２０３は、撮像画面内から注視位置を含む領域を選択し、該選択した領域の撮像画像データを用いて自動露出やオートフォーカス等の処理を行う。

このように小型で視線検出精度が高い観察装置を用いることで、小型でありながらも自動露出やオートフォーカス等の処理を良好に行える撮像装置を実現することができる。

以上説明した各実施例は代表的な例にすぎず、本発明の実施に際しては、各実施例に対して種々の変形や変更が可能である。

１Ａ，１Ｂ，１０１ 観察装置
２，１０２ 接眼光学系
３，１０３ 画像表示素子
４，５，６，７，８，１０４，１０５ 撮像系
１２，１５，１８，２１，２４ 撮像レンズ
１３，１６，１９，２２，２５ 撮像センサ

Claims (13)

1. 画像を表示する画像表示素子と、
   該画像表示素子からの光を観察者の眼球に導く接眼光学系と、
   それぞれ前記眼球の光学像を形成する撮像レンズと前記光学像を撮像する撮像センサを含む複数の撮像系とを有し、
   前記複数の撮像系のそれぞれの前記撮像レンズの光軸は、前記接眼光学系の光軸に対して、該光軸上の互いに異なる位置にて互いに異なる傾斜角度で交差し、
   前記複数の撮像系のそれぞれにおける前記撮像レンズの光軸と前記撮像センサの撮像面の法線とがなす角度が互いに異なることを特徴とする観察装置。
2. 前記撮像レンズの光軸と前記撮像面の法線とがなす角度は、前記撮像系の前記撮像センサ側のピント面の前記接眼光学系の光軸に対する傾きが前記撮像レンズの光軸に直交する面の前記接眼光学系の光軸に対する傾きよりも小さくなるように設定されていることを特徴とする請求項１に記載の観察装置。
3. 前記複数の撮像系は、互いに異なる画角を有し、
   前記複数の撮像系のそれぞれの前記画角のうち最も広い画角をω１、最も狭い画角をω２とするとき、
   －０．３０≦ｔａｎ（ω２）／ｔａｎ（ω１）≦０．８０
   なる条件を満足することを特徴とする請求項１または２に記載の観察装置。
4. 前記複数の撮像系のそれぞれの前記傾斜角度のうち絶対値が最も大きい傾斜角度をθ１、絶対値が最も小さい傾斜角度をθ２とするとき、
   １．１≦ｔａｎ（θ１）／ｔａｎ（θ２）≦８．０
   なる条件を満足することを特徴とする請求項１から３のいずれか一項に記載の観察装置。
5. 前記複数の撮像系のそれぞれにおける前記傾斜角度の絶対値をθａ、前記撮像面の法線と前記接眼光学系の光軸とがなす角度の絶対値をθｂとするとき、
   ０．７０≦ｔａｎ（θａ）／ｔａｎ（θｂ）＜１．００
   なる条件を満足することを特徴とする請求項１から４のいずれか一項に記載の観察装置。
6. 前記複数の撮像系のそれぞれにおける前記傾斜角度の絶対値をθｎとするとき、
   １０°≦θｎ≦７０°
   なる条件を満足することを特徴とする請求項１から５のいずれか一項に記載の観察装置。
7. 前記複数の撮像系のそれぞれにおける前記撮像レンズの焦点距離をｆ、前記撮像センサの撮像面の対角長をＨとし、前記複数の撮像系のそれぞれのＨ／ｆのうち最大値をＨ１／ｆ１、最小値のＨ２／ｆ２とするとき、
   １．１≦（Ｈ１／ｆ１）／（Ｈ２／ｆ２）≦２．５
   なる条件を満足することを特徴とする請求項１から６のいずれか一項に記載の観察装置。
8. 前記複数の撮像系のそれぞれにおける前記撮像レンズの眼球側の曲率をＲ１、撮像センサ側の曲率をＲ２とするとき、
   －４．００≦（Ｒ１＋Ｒ２）／（Ｒ１－Ｒ２）＜１．００
   なる条件を満足する撮像系を少なくとも１つ含むことを特徴とする請求項１から７のいずれか一項に記載の観察装置。
9. 画像を表示する画像表示素子と、
   該画像表示素子からの光を観察者の眼球に導く接眼光学系と、
   それぞれ前記眼球を撮像する複数の撮像系とを有し、
   前記複数の撮像系のそれぞれの撮像方向は、前記接眼光学系の光軸に対して、該光軸上の互いに異なる位置にて互いに異なる傾斜角度をなす方向であり、
   前記複数の撮像系はそれぞれ、該撮像系の撮像センサ側のピント面の前記接眼光学系の光軸に対する傾きが前記撮像方向に直交する面の前記接眼光学系の光軸に対する傾きよりも小さくなるように構成されていることを特徴とする観察装置。
10. 前記複数の撮像系のうち１つの撮像系から得られたメイン撮像データを用いて、前記接眼光学系からの距離が互いに異なる前記眼球の向きを取得する処理手段を有することを特徴とする請求項１から９のいずれか一項に記載の観察装置。
11. 前記処理手段は、前記接眼光学系から前記眼球までの距離に応じて、前記メイン撮像データを得る前記撮像系を切り替えることを特徴とする請求項１０に記載の観察装置。
12. 前記処理手段は、
    前記メイン撮像データを得る前記撮像系とは異なる前記撮像系からのサブ撮像データを用いて、前記メイン撮像データを用いて取得した前記眼球の向きを補正することを特徴とする請求項１０または１１に記載の観察装置。
13. 請求項１０から１２のいずれか一項に記載の観察装置を有し、
    前記処理手段により得られた前記眼球の向きに応じて撮像画面内で領域を選択することを特徴とする撮像装置。