JPH1020183A - Imaging device and electronic device having gaze detection function - Google Patents
Imaging device and electronic device having gaze detection functionInfo
- Publication number
- JPH1020183A JPH1020183A JP8176429A JP17642996A JPH1020183A JP H1020183 A JPH1020183 A JP H1020183A JP 8176429 A JP8176429 A JP 8176429A JP 17642996 A JP17642996 A JP 17642996A JP H1020183 A JPH1020183 A JP H1020183A
- Authority
- JP
- Japan
- Prior art keywords
- function
- line
- sight
- setting
- predetermined function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Automatic Focus Adjustment (AREA)
- Eye Examination Apparatus (AREA)
- Exposure Control For Cameras (AREA)
- Viewfinders (AREA)
Abstract
(57)【要約】
【課題】 視線検出機能を有する撮像装置及び電子機器
において、操作するごとに装置の所定機能の設定をしな
ければならず、使用者にとって非常に煩わしさが生じて
いたため、その煩わしさを解消する。
【解決手段】 眼球の個人差補正データに対応して装置
の所定機能データをメモリに格納することにより、装置
を使用するときは使用者が登録したポジションに設定す
ることにより所定機能の設定をする必要がなくなる。
(57) [Summary] In an imaging device and an electronic device having a line-of-sight detection function, a predetermined function of the device must be set every time an operation is performed. Eliminate the hassle. SOLUTION: When a device is used, a predetermined function is set by setting the device to a position registered by a user by storing predetermined function data of the device in a memory corresponding to individual difference correction data of an eyeball. Eliminates the need.
Description
【0001】[0001]
【発明の属する技術分野】本発明は視線検出手段を備え
た撮像装置及び電子機器に関するものである。[0001] 1. Field of the Invention [0002] The present invention relates to an image pickup apparatus provided with a visual line detecting means and an electronic apparatus.
【0002】[0002]
【従来の技術】人間の眼は個々の眼球の光軸と視軸とに
ずれがあり、このことを考えると視線検出の精度を高め
るには使用者めいめいの眼球のデータを測定し補正をす
る必要があった。従来ではこの眼球の補正データを記憶
して、使用時にそのデータを呼び出すことにより眼球の
個人差補正をした後、撮影していた。2. Description of the Related Art The human eye has a deviation between the optical axis and the visual axis of each eyeball. In consideration of this, in order to improve the accuracy of visual axis detection, the data of the eyeball of each user is measured and corrected. Needed. Conventionally, the correction data of the eyeball is stored, and the data is called up at the time of use to correct the individual difference of the eyeball, and then photographed.
【0003】[0003]
【発明が解決しようとする課題】しかしながら、視線検
出機能を有する撮像装置を使用する際にあたって、眼球
の個人の補正データを登録するのみであって、撮影機
能、再生機能、及び視度調節機能などの撮像装置の所定
の機能に関しては使用するたびに設定する必要があり、
使用者にとって煩わしさは残っている。However, when using an imaging device having a line-of-sight detection function, it is only necessary to register personal correction data of the eyeball, and to use a photographing function, a reproduction function, a diopter adjustment function, and the like. It is necessary to set each time the specified function of the imaging device is used,
Annoyance remains for the user.
【0004】また、ヘッドマウントディスプレイなどの
電子機器においても同様に使用する度に設定する必要が
ある。[0004] In electronic equipment such as a head-mounted display, it is necessary to similarly set each time the electronic equipment is used.
【0005】本発明は視線検出誤差を補正する際に、撮
像装置や電子機器などの所定の機能の設定を行い、それ
らの設定を眼球の個々の補正データに対応させて記憶
し、さらに複数人数分記憶が可能な視線検出機能を有す
る撮像装置及び電子機器を提供することにある。According to the present invention, when correcting a line-of-sight detection error, predetermined functions such as an imaging device and an electronic device are set, and the settings are stored in association with individual correction data of the eyeball. An object of the present invention is to provide an imaging device and an electronic device having a line-of-sight detection function capable of storing minute data.
【0006】[0006]
【課題を解決するための手段】ファインダ視野内を覗く
使用者の視線を検出する視線検出手段と、眼球の個人差
による視線の検出誤差を補正する視線補正手段とを具備
する撮像装置において、前記視線補正手段により算出し
た前記使用者の前記視線補正データに対応して前記撮像
装置の所定機能の設定データを少なくとも1つ記憶する
記憶手段と、前記記憶手段により記憶された前記視線補
正データ及び前記所定機能の設定データを前記記憶手段
から呼び出す手段とを具備することを特徴とする。The present invention provides an image pickup apparatus comprising: a line-of-sight detecting means for detecting a line of sight of a user looking into a finder visual field; and a line-of-sight correction means for correcting a line-of-sight detection error due to individual differences in eyes. Storage means for storing at least one setting data of a predetermined function of the imaging device corresponding to the user's eye-gaze correction data calculated by the eye-gaze correction means; and the eye-gaze correction data stored by the storage means; Means for calling setting data of a predetermined function from the storage means.
【0007】また、上記撮像装置は、前記記憶手段によ
り記憶された前記視線補正データに対応した前記所定機
能の設定データを変更する変更手段と、前記変更手段に
より変更した前記所定機能の設定データを再び前記視線
補正データに対応させて記憶する手段とを具備すること
を特徴とする。[0007] The imaging apparatus may further include a changing unit configured to change the setting data of the predetermined function corresponding to the line-of-sight correction data stored by the storage unit, and the setting data of the predetermined function changed by the changing unit. Means for storing the visual axis correction data again in association with the visual axis correction data.
【0008】また、上記撮像装置は、前記視線検出手段
による前記使用者の眼球の視線検出誤差の補正とともに
前記所定機能の設定を実行する手段を具備することを特
徴とする。Further, the image pickup apparatus is characterized in that it comprises means for correcting the line-of-sight detection error of the user's eye by the line-of-sight detecting means and setting the predetermined function.
【0009】また、上記撮像装置の所定機能として少な
くとも撮影機能または再生機能または視度調節機能また
は視線機能のいずれか1つを含むことを特徴とする視線
検出機能を有する撮像装置。[0009] An image pickup apparatus having a line-of-sight detection function characterized by including at least one of a photographing function, a reproduction function, a diopter adjustment function, and a line-of-sight function as predetermined functions of the image pickup apparatus.
【0010】ファインダ視野内を覗く使用者の視線を検
出する視線検出手段と、眼球の個人差による視線の検出
誤差を補正する視線補正手段とを具備する装置であっ
て、前記視線補正手段により算出した前記使用者の前記
視線補正データに対応して前記所定機能の設定データを
少なくとも1つ記憶する記憶手段と、前記記憶手段によ
り記憶された前記視線補正データ及び前記所定機能の設
定データを前記記憶手段から呼び出す手段とを具備する
ことを特徴とする。An apparatus comprising: a line of sight detecting means for detecting a line of sight of a user looking into a finder field of view; and a line of sight correction means for correcting a line of sight detection error due to individual differences in eyeballs. Storage means for storing at least one setting data of the predetermined function corresponding to the user's gaze correction data, and storing the gaze correction data and the predetermined function setting data stored by the storage means. Means for calling from means.
【0011】また、上記電子機器は、前記記憶手段によ
り記憶された前記視線補正データに対応した前記所定機
能の設定データを変更する変更手段と、前記変更手段に
より変更した前記所定機能の設定データを再び前記視線
補正データに対応させて記憶する手段とを具備すること
を特徴とする。[0011] The electronic device may further include a changing unit configured to change the setting data of the predetermined function corresponding to the line-of-sight correction data stored by the storage unit, and the setting data of the predetermined function changed by the changing unit. Means for storing the visual axis correction data again in association with the visual axis correction data.
【0012】また、上記電子機器は前記所定機能として
速度調節機能または難易度調節機能または画像解像度調
節機能または音量調節機能または視度調節機能または視
線機能のうち少なくとも1つを含むことを特徴とする。The electronic device may include at least one of a speed control function, a difficulty control function, an image resolution control function, a volume control function, a diopter control function, and a line-of-sight function as the predetermined function. .
【0013】[0013]
【発明の実施の形態】以下、本願発明の実施の形態を説
明する。Embodiments of the present invention will be described below.
【0014】(第1の実施の形態)はじめに視線検出原
理について説明する。図9は視線検出方法の原理図(上
面図)であり、図10は視線検出法の原理図(側面図)
である。図9及び図10において、906a、906b
は使用者に対して不感の赤外光を放射する発光ダイオー
ドなどの光源であり、各光源は結像レンズ911の光軸
に対してx方向(水平方向)に略対称に、またy方向
(垂直方向)にはやや下側に(図10)配置され、観察
者の眼球を発散照明している。眼球で反射した照明光の
一部は結像レンズ911によってイメージセンサ912
に結像する。図8(a)はイメージセンサ912に投影
される眼球像の概略図であり、図8(b)はイメージセ
ンサ912の出力強度図である。(First Embodiment) First, the principle of gaze detection will be described. FIG. 9 is a principle diagram (top view) of the gaze detection method, and FIG. 10 is a principle diagram (side view) of the gaze detection method.
It is. 9 and 10, 906a, 906b
Is a light source such as a light emitting diode that emits infrared light insensitive to the user. Each light source is substantially symmetric with respect to the optical axis of the imaging lens 911 in the x direction (horizontal direction) and in the y direction ( In the vertical direction), it is arranged slightly below (FIG. 10) and divergently illuminates the observer's eyeball. A part of the illumination light reflected by the eyeball is transmitted to the image sensor 912
Image. FIG. 8A is a schematic diagram of an eyeball image projected on the image sensor 912, and FIG. 8B is an output intensity diagram of the image sensor 912.
【0015】まず水平面に置いて図8(b)では光源9
06bより反射された赤外光は使用者の眼球908の角
膜910を照明する。このとき角膜910の表面で反射
した赤外光により形成される角膜反射像d(虚像)は結
像レンズ911により集光され、イメージセンサ912
上の位置d′に結像する。First, as shown in FIG.
The infrared light reflected from 06b illuminates the cornea 910 of the user's eyeball 908. At this time, a corneal reflection image d (virtual image) formed by the infrared light reflected on the surface of the cornea 910 is condensed by the imaging lens 911 and the image sensor 912
An image is formed at the upper position d '.
【0016】同様に光源906aより放射された赤外光
は眼球の角膜910を照明する。このとき角膜910の
表面で反射した赤外光により形成された角膜反射像e
(虚像)は、結像レンズ911により集光され、イメー
ジセンサ912上の位置e′に結像する。Similarly, infrared light emitted from the light source 906a illuminates the cornea 910 of the eyeball. At this time, a corneal reflection image e formed by infrared light reflected on the surface of the cornea 910
The (virtual image) is condensed by the imaging lens 911 and forms an image at a position e ′ on the image sensor 912.
【0017】また虹彩904の単部a、bからの光束は
結像レンズ911の光軸に対する眼球908の光軸の回
転角θが小さい場合、虹彩904の単部a、bのx座標
をxa、xbとすると、xa、xbはイメージセンサ上
で多数点求めることができる(図8(a)中の×印)。When the rotation angle θ of the optical axis of the eyeball 908 with respect to the optical axis of the imaging lens 911 is small, the x-coordinates of the single parts a and b of the iris 904 are xa. , Xb, xa and xb can be obtained on the image sensor at a number of points (x marks in FIG. 8A).
【0018】そこでまず円の最小自乗法にて瞳孔中心x
cを算出する。一方、角膜910の曲率中心oのx座標
をxoとすると、眼球908の光軸に対する回転角θx
は、 oc*sinθx=xc−xo(1) となる。ここでo′は眼球の中心である。また、角膜反
射像dとeの中点kに所定の補正値δxを考慮してxo
を求めると、 xk=(xd+xe)/2 xo=(xd+xe)/2+δx(2) ここでδxは装置の設置方法及び眼球距離などから幾何
学的に求められる数値であり、その算出方法は省略す
る。(1)を(2)へ代入しθxを求めると、 θx=arcsin〔〔xc−{(xd+xe)/2+δx}〕/oc〕(3 ) 更にイメージセンサー上に投影されたおのおのの特徴点
の座標と同様に、 θx=arcsin〔xc′−{(xd′+xe′)/2+δx′}〕/oc /β〕(4) となる。ここでβは結像レンズ911に対する眼球の距
離szeにより決まる倍率で、実際は角膜反射像の間隔
|xd′−xe′|の関数として求められる。なお、
a′b′はイメージセンサ912上に結像した瞳のエッ
ジ部である。First, the pupil center x is calculated by the least square method of the circle.
Calculate c. On the other hand, assuming that the x coordinate of the center of curvature o of the cornea 910 is xo, the rotation angle θx with respect to the optical axis of the eyeball 908
Is as follows: oc * sin θx = xc−xo (1) Here, o 'is the center of the eyeball. In addition, xo is determined at the midpoint k between the corneal reflection images d and e in consideration of a predetermined correction value δx.
Xk = (xd + xe) / 2 xo = (xd + xe) / 2 + δx (2) Here, δx is a numerical value obtained geometrically from the installation method of the apparatus and the eyeball distance, and the calculation method is omitted. . When (1) is substituted into (2) to obtain θx, θx = arcsin [[xc − {(xd + xe) / 2 + δx}] / oc] (3) Further, the coordinates of each characteristic point projected on the image sensor Similarly, θx = arcsin [xc ′ − {(xd ′ + xe ′) / 2 + δx ′}] / oc / β] (4) Here, β is a magnification determined by the distance sze of the eyeball to the imaging lens 911 and is actually obtained as a function of the interval | xd′−xe ′ | of the corneal reflection image. In addition,
a'b 'is the edge of the pupil formed on the image sensor 912.
【0019】垂直面で考えると、図9のような構成とな
る。ここで2個の赤外発光ダイオード(以下IREDと
する。)906a、906bにより生じる角膜反射像は
同位置に発生し、これをiとする。When viewed from a vertical plane, the configuration is as shown in FIG. Here, corneal reflection images generated by two infrared light emitting diodes (hereinafter referred to as IREDs) 906a and 906b are generated at the same position, and this is set as i.
【0020】眼球の回転角θyの算出方法は水平面の時
とほぼ同位置であるが、(2)式のみ異なり、角膜曲率
中心のoのy座標をyoとすると、 yo=yi+δy (5) ここでδyは装置の配置方法、眼球距離などから幾何学
に求められる数値であり、その算出方法は省略する。よ
って垂直方向の回転角θyは、 θy=arcsin〔〔yc′−(yi′+δy′)〕/oc/β〕(6) となる。The method of calculating the rotation angle θy of the eyeball is substantially the same as that in the horizontal plane, but only the equation (2) is different. If the y coordinate of o of the corneal curvature center is yo, then yo = yi + δy (5) Where δy is a numerical value obtained geometrically from the arrangement method of the apparatus, the eyeball distance, and the like, and its calculation method is omitted. Therefore, the vertical rotation angle θy is as follows: θy = arcsin [[yc ′ − (yi ′ + δy ′)] / oc / β] (6)
【0021】さらに、ビデオ撮像装置のファインダ画面
上の位置座標(xn、yn)はファインダー光学系で決
まる定数mを用いると、水平面上、垂直面上の位置座標
(xn、yn)はファインダ光学系で決まる定数mを用
いると、 xn=m*arcsin〔xc′−{(xd′+xe′)/2+δx′}〕/ oc/β〕(7) yn=m*arcsin〔〔yc′−{(yi′+δy′)〕/oc/β〕 (8) となり、視線の位置が決定される。Further, when the position coordinates (xn, yn) on the finder screen of the video image pickup device are determined by using a constant m determined by the finder optical system, the position coordinates (xn, yn) on the horizontal plane and the vertical plane are obtained. Xn = m * arcsin [xc ′ − {(xd ′ + xe ′) / 2 + δx ′}] / oc / β] (7) yn = m * arcsin [[yc ′ − {(yi '+ Δy')] / oc / β] (8), and the position of the line of sight is determined.
【0022】図8(a)で明らかなように、瞳孔エッヂ
の検出はイメージセンサ波形の立ち上がり(b′)、立
ち上がり(a′)を利用する。また、角膜反射像の座標
は鋭い立ち上がり部(e′)及び(d′)を利用する。As apparent from FIG. 8A, the pupil edge is detected using the rising edge (b ') and the rising edge (a') of the image sensor waveform. Further, the coordinates of the corneal reflection image use sharp rising portions (e ′) and (d ′).
【0023】個人差補正システムについて説明する。実
際の観察者の目は、前記(1)式におけるac寸法にば
らつきがあるとともに、眼球の光軸と支軸にはズレがあ
る。これらを考慮すると、より視線検出の精度を高める
ためには、使用者めいめいの特製データを測定し、撮影
時にそれぞれのデータ設定をする必要がある。The individual difference correction system will be described. In an actual observer's eye, the ac dimension in the equation (1) varies, and the optical axis and the support axis of the eyeball are displaced. In consideration of these, it is necessary to measure the special data of each user and set each data at the time of photographing in order to further improve the accuracy of the eye gaze detection.
【0024】個人差補正システムとして、比例定数A及
びオフセット定数Bを使用者の特性データとして用いる
方法について説明する。前記(7)、(8)式で求めら
れた視線座標に対して、水平方向、垂直方向それぞれ別
々の比例定数A及びオフセット定数Bを設定し、補正後
の座標を(Xnt、Ynt)とすると、 Xnt=Ax*Xn+Bx(9) Ynt=Ay*Yn+By(10) となり、視線検出の補正がされる。A method of using the proportional constant A and the offset constant B as user characteristic data as an individual difference correction system will be described. Assuming that a proportional constant A and an offset constant B are separately set in the horizontal direction and the vertical direction with respect to the line-of-sight coordinates obtained by the equations (7) and (8), and the corrected coordinates are (Xnt, Ynt). Xnt = Ax * Xn + Bx (9) Ynt = Ay * Yn + By (10), and the visual line detection is corrected.
【0025】図11は本実施の形態の構成概略図であ
る。FIG. 11 is a schematic configuration diagram of the present embodiment.
【0026】同図に示した構成において、1011はズ
ームレンズを備え被写体をCCDなどに露光し被写体像
を電気的な信号に変換するレンズ撮像系、また1001
はNTSC信号などの規格化された信号に処理する信号
処理回路、さらに1012は磁気テープや光ディスクな
どの画像を記録するための記録媒体である。In the configuration shown in FIG. 1, reference numeral 1011 denotes a lens imaging system having a zoom lens for exposing a subject to a CCD or the like to convert a subject image into an electric signal;
Is a signal processing circuit for processing a standardized signal such as an NTSC signal, and 1012 is a recording medium for recording an image such as a magnetic tape or an optical disk.
【0027】そのほか、レンズ撮像系1011により撮
像される被写体を観察するためのファインダを構成する
LCDなどを有する表示素子1002と、この表示素子
1002の前に配置された第一の接眼レンズ1003
と、使用者の目の直前に配置された第二の接眼レンズ1
010と、使用者の目1005の視線を検出する視線検
出手段1006と、フォーカスエリアの概略を表すAF
枠、後述する視線スイッチの指標、その他テープカウン
ターや撮影モードなど使用者に必要な情報などを表示素
子1002へ表示する表示回路1007を具備する。In addition, a display element 1002 having an LCD or the like constituting a finder for observing a subject imaged by the lens imaging system 1011 and a first eyepiece 1003 arranged in front of the display element 1002
And the second eyepiece 1 placed just before the eyes of the user
010, a line-of-sight detecting unit 1006 for detecting the line of sight of the user's eyes 1005, and an AF representing the outline of the focus area.
A display circuit 1007 for displaying a frame, an index of a line-of-sight switch to be described later, and other information required by the user such as a tape counter and a shooting mode on the display element 1002 is provided.
【0028】また、この撮像装置の各部を制御するシス
テムコントロール手段1008と、さまざまなデータを
記憶するためのメモリ1009、撮像装置の機能を実行
するための操作キー検出手段1004を具備して概略構
成されている。A schematic configuration including a system control means 1008 for controlling each part of the image pickup apparatus, a memory 1009 for storing various data, and an operation key detecting means 1004 for executing functions of the image pickup apparatus. Have been.
【0029】前記視線検出ユニット1006は、使用者
の目1005に赤外光を照射する赤外発光ダイオード1
060と、可視光を反射し赤外光を透過するダイクロイ
ックミラー1061と、このダイクロイックミラー10
61を透過した赤外光を集光する集光レンズ1062
と、この集光レンズ1062により集光された赤外光を
電気信号に変換する光電変換素子1063と、この光電
変換素子1063上の使用者の眼球をもとに、使用者の
表示素子1002上の注視点を求める注視点検出回路1
064とを具備している。The line-of-sight detection unit 1006 includes an infrared light emitting diode 1 for irradiating the user's eyes 1005 with infrared light.
060, a dichroic mirror 1061 that reflects visible light and transmits infrared light,
Focusing lens 1062 for focusing infrared light transmitted through 61
A photoelectric conversion element 1063 for converting the infrared light condensed by the condenser lens 1062 into an electric signal; and a display element 1002 of the user based on the user's eyeball on the photoelectric conversion element 1063. -Of-interest detection circuit 1 for finding the point of interest
064.
【0030】ダイクロイックミラー1061は、可視光
を反射するため、使用者が接眼レンズ1003、101
0を通して表示素子1002の画面を観察できるように
なっている。またダイクロイックミラー1061は、赤
外光を透過するため、赤外発光ダイオード1060によ
って照射された目1005の反射像は第二の接眼レンズ
1010を通って、集光レンズ1062で集光されて光
電変換素子1063上に像を結ぶようになっている。The dichroic mirror 1061 reflects visible light, so that the user can use the eyepieces 1003 and 101.
0, the screen of the display element 1002 can be observed. Further, since the dichroic mirror 1061 transmits infrared light, the reflected image of the eye 1005 illuminated by the infrared light emitting diode 1060 passes through the second eyepiece 1010 and is condensed by the condenser lens 1062 to be photoelectrically converted. An image is formed on the element 1063.
【0031】図1(a)は第1の実施の形態の撮像装置
に使用するスイッチパネルであり、105はビデオ撮像
装置のモード設定ダイヤルであり、撮像装置モード、V
TRモード、CALモード(眼球の個人差補正登録モー
ド)、カスタムモ−ド(使用者固有の撮像装置の所定機
能設定モ−ド)、電源OFFを設定するものである。1
01は使用者設定用スライドスイッチであり、3人のデ
ータを設定するものである。FIG. 1A shows a switch panel used in the image pickup apparatus according to the first embodiment. Reference numeral 105 denotes a mode setting dial of the video image pickup apparatus.
A TR mode, a CAL mode (an individual difference correction registration mode of the eyeball), a custom mode (a predetermined function setting mode of an imaging device unique to a user), and a power OFF are set. 1
Reference numeral 01 denotes a user setting slide switch for setting data of three users.
【0032】また、102は注視スイッチであり、使用
者が注視できたと判断したときに押す、プッシュキーで
ある。更に104はカ−ソル移動スイッチであり、設定
画面上で設定する項目を選択すべく、カーソルを上下に
移動するための、二個対になっているキーである。Reference numeral 102 denotes a gaze switch, which is a push key that is pressed when the user determines that he / she can gaze. Reference numeral 104 denotes a cursor movement switch, which is a pair of keys for moving a cursor up and down to select an item to be set on the setting screen.
【0033】103は設定スイッチであり、各項目の撮
像装置の機能の設定を可能とするものである。図1
(b)は第1の実施の形態の所定機能設定時のファイン
ダー画面であり、106、107は個人差補正画面、1
08はカスタム設定画面である。ここで109、110
は個人差補正を行う際注視する指標であり、この指標を
注視することにより、視線位置の個人差に起因する誤差
情報を検出する。Reference numeral 103 denotes a setting switch which enables setting of the function of the image pickup apparatus for each item. FIG.
(B) is a finder screen when a predetermined function is set in the first embodiment, and 106 and 107 are individual difference correction screens,
08 is a custom setting screen. Where 109, 110
Is an index to be watched when performing individual difference correction, and by looking at this index, error information due to individual differences in the line of sight is detected.
【0034】112はカスタム設定における設定項目で
あり、リモコンを受けつけるかどうかの選択、マイクの
風切りの雑音をカットする機能のON/OFF、記録中
表示(タリー)のON/OFF等の撮像装置の撮影機能
及び再生機能の設定や、視線によるスイッチ機能の内容
変更、視線AF枠の表示のON/OFF等の視線機能等
が含まれる。Reference numeral 112 denotes a setting item in the custom setting, which is used to select whether or not to accept a remote control, ON / OFF of a function for cutting off wind noise of a microphone, ON / OFF of a display during recording (tally), and the like. The setting includes a shooting function and a reproduction function, a change in the content of a switch function based on a line of sight, a line of sight function such as ON / OFF of display of a line of sight AF frame, and the like.
【0035】また、111は、設定する項目を選択する
ためのカーソルである。A cursor 111 is used to select an item to be set.
【0036】図5は、眼球の個人差補正とともに撮像装
置の所定機能を設定する第1の実施の形態のシステムの
流れ図である。FIG. 5 is a flow chart of a system according to the first embodiment for setting a predetermined function of the image pickup apparatus together with individual difference correction of the eyeball.
【0037】図5において、まずモード設定ダイヤル1
05のポジションが、CAL(眼球の個人差補正登録モ
ード)になっているかどうかを判断し(502)、CA
Lになっていれば使用者設定スライドスイッチ101の
ポジションを検出し(503)、個人差による視線位置
の誤差情報をメモリー1009に書き込む。また、CA
Lになっていなければ、502の前に戻る。In FIG. 5, first, the mode setting dial 1
It is determined whether or not the position 05 is in the CAL (eye difference correction registration mode of the eyeball) (502).
If it is set to L, the position of the user setting slide switch 101 is detected (503), and error information of the line-of-sight position due to individual differences is written in the memory 1009. Also, CA
If not, the process returns to step 502.
【0038】次に図12(a)のようにファインダー内
の左上に指標(1301)を表示する(504)。ここ
で使用者は、前記指標を注視しながら注視スイッチ10
2を押す。システムコントロール回路1008により注
視スイッチがONになったかどうかを判断し(50
5)、前述の(7)及び(8)式により第一の注視点座
標(Xn1、Yn1)を求める(506)。Next, as shown in FIG. 12A, an index (1301) is displayed at the upper left in the viewfinder (504). Here, the user looks at the index while watching the switch 10.
Press 2. It is determined by the system control circuit 1008 whether the gaze switch has been turned on (50).
5) The first coordinates of the gazing point (Xn1, Yn1) are obtained from the above equations (7) and (8) (506).
【0039】同様にして、図12(b)のようにファイ
ンダ内の右下に指標(1302)を表示し(507)、
第二の注視点座標(Xn2、Yn2)を求める(50
8、509)。Similarly, an index (1302) is displayed at the lower right in the viewfinder as shown in FIG. 12 (b) (507).
The second gazing point coordinates (Xn2, Yn2) are obtained (50
8, 509).
【0040】以上求めたデータ(Xn1、Yn1)、
(Xn2、Yn2)を前述の(9)、(10)式に代入
すると、4つの式が成立するのでこれらの式からAx、
Bx、Ay、Byを算出する(510)。このとき、
(Xnt、Ynt)に代入する座標値は、あらかじめ決
めておいた、ファインダー画面上での2つの指標を表示
する座標である。The data (Xn1, Yn1) obtained above,
When (Xn2, Yn2) is substituted into the above-mentioned equations (9) and (10), four equations are established.
Bx, Ay, and By are calculated (510). At this time,
The coordinate values to be assigned to (Xnt, Ynt) are predetermined coordinates for displaying two indices on the finder screen.
【0041】最後に、Ax、Bx、Ay、Byを、メモ
リ1009におけるアドレスh1〜h3のどれか、例え
ばh1の割当エリアに格納する(511)。Finally, Ax, Bx, Ay, and By are stored in any of the addresses h1 to h3 in the memory 1009, for example, in the allocation area of h1 (511).
【0042】この後、カスタム設定画面108を表示し
(512)、モード設定ダイヤル105がCALになっ
ているかを判断する(513)。Thereafter, the custom setting screen 108 is displayed (512), and it is determined whether the mode setting dial 105 is set to CAL (513).
【0043】CALになっていなければ、表示画面の設
定情報を視線補正データに対応したh1のメモリへ格納
して(518)終了となる(519)。CALになって
いるとき、のカーソル移動スイッチ104によりカーソ
ル111を移動させるかどうかを判断し(514)、必
要であればカーソル111を移動させる(515)。If it is not CAL, the setting information of the display screen is stored in the memory of h1 corresponding to the eye-gaze correction data (518), and the process ends (519). When CAL is set, it is determined whether or not the cursor 111 is moved by the cursor movement switch 104 (514), and if necessary, the cursor 111 is moved (515).
【0044】次に、撮像装置の所定機能の変更手段とし
て、516で設定スイッチがONかどうかを判断し、設
定スイッチがONのときは517で撮像装置の所定機能
の変更を可能とする。Next, as means for changing the predetermined function of the image pickup apparatus, it is determined at 516 whether or not the setting switch is ON. When the setting switch is ON, at 517, the predetermined function of the image pickup apparatus can be changed.
【0045】以上の構成では、眼球の個人差補正動作の
際に続けてモード設定を行い、個人差補正データとモー
ド設定補正データを同一のメモリアドレスへ格納する。
撮影時は、設定スイッチ103を使用者が登録したポジ
ションに設定することにより随時眼球補正データ及び撮
像装置の所定機能の使用者固有のデータを同時に使用す
ることができる。In the above configuration, the mode setting is performed continuously at the time of the individual difference correction operation of the eyeball, and the individual difference correction data and the mode setting correction data are stored in the same memory address.
At the time of shooting, by setting the setting switch 103 to the position registered by the user, the eyeball correction data and the data unique to the user of the predetermined function of the imaging device can be used at any time.
【0046】また、視線検出補正デ−タを消去せずに使
用者固有の撮像装置の所定の機能を変更し、再設定した
いときは、その使用者の設定に合わせ、モ−ド設定ダイ
ヤル105をカスタムモ−ドにし、設定スイッチをON
することにより所定機能を再設定すればよい。Further, when it is desired to change a predetermined function of the imaging device unique to the user without erasing the eye-gaze detection correction data and to reset the function, the mode setting dial 105 is set in accordance with the setting of the user. To custom mode and set switch ON
Then, the predetermined function may be reset.
【0047】(第2の実施の形態)本実施の形態は眼球
の個人差補正登録動作(CALモードにおける動作)と
は別に撮像装置の撮影機能及び再生機能などの設定の変
更を行い、CALにおいてのデータ領域に書き込み、C
ALデータの選択時に一緒に書き込まれた個人情報を読
み出すものである。本実施の形態の構成ブロック図(図
11)、視線検出原理(図8〜10)、個人差補正時の
ファインダー画面(図12)については第1の実施の形
態と同様であり説明は省略する。(Second Embodiment) In this embodiment, the setting of the photographing function and the reproduction function of the image pickup apparatus is changed separately from the individual difference correction registration operation of the eyeball (operation in the CAL mode). To the data area of C
The personal information written together when the AL data is selected is read. The configuration block diagram of this embodiment (FIG. 11), the principle of gaze detection (FIGS. 8 to 10), and the finder screen (FIG. 12) at the time of individual difference correction are the same as those of the first embodiment, and a description thereof is omitted. .
【0048】図2(a)は本実施の形態の撮像装置に使
用するスイッチパネルであり、204はビデオ撮像装置
のモード設定ダイヤルであり、撮像装置モード、VTR
モード、CALモード(個人差補正登録モード)、電源
OFF、カスタムモードを設定するものである。201
は使用者設定用スライドスイッチであり、3人のデータ
を設定するものであり、個人差補正で使用するものと同
一である。FIG. 2A shows a switch panel used in the image pickup apparatus of the present embodiment. Reference numeral 204 denotes a mode setting dial of the video image pickup apparatus.
Mode, CAL mode (individual difference correction registration mode), power OFF, and custom mode. 201
Is a user setting slide switch for setting data of three persons, which is the same as that used for individual difference correction.
【0049】さらに203はカーソル移動スイッチであ
り、設定画面上で設定する項目を選択すべく、カーソル
111を上下に移動するための、二個対になっているキ
ーである。Reference numeral 203 denotes a cursor movement switch, which is a pair of keys for moving the cursor 111 up and down to select an item to be set on the setting screen.
【0050】202は設定スイッチであり、撮像装置の
機能の設定を可能とする。Reference numeral 202 denotes a setting switch which enables setting of functions of the image pickup apparatus.
【0051】図2(b)は本実施の形態における使用者
の撮像装置の撮影機能及び再生機能及び視度調節機能の
設定をするカスタムモードのにおけるファインダー画面
である。図2(b)は図1(b)の撮像装置の内部表示
設定画面と同様なので説明は省略する。FIG. 2B is a viewfinder screen in a custom mode for setting a photographing function, a reproducing function, and a diopter adjusting function of the user's imaging apparatus according to the present embodiment. FIG. 2B is the same as the internal display setting screen of the imaging apparatus in FIG.
【0052】図6は本実施の形態によるシステムの流れ
図であり、以下詳細を説明する。FIG. 6 is a flow chart of the system according to the present embodiment, which will be described in detail below.
【0053】まずモードダイヤル204のポジション
が、カスタムモ−ドになっているかどうかを判断し(6
02)、カスタムモ−ドになっていれば使用者設定スラ
イドスイッチ203のポジションを検出し、メモリー1
009に書き込み(603)、カスタムモ−ドになって
いなければ602の前に戻る。ここでメモリー1009
とは使用者固有の個人差補正データを格納したときと同
一エリアである。First, it is determined whether the position of the mode dial 204 is in the custom mode (6).
02) If the custom mode is set, the position of the user setting slide switch 203 is detected and the memory 1
Write to 009 (603), and if not in the custom mode, return to before 602. Here memory 1009
Is the same area as when the individual difference correction data unique to the user is stored.
【0054】次にカスタムモ−ド設定画面108を表示
し(604)、モード設定ダイヤル204がカスタムモ
−ドになっているかを判断し(605)、カスタムモ−
ドになっていなければ、表示画面の設定情報をメモリ1
009の、例えばh1のアドレスへ格納して(610)
終了となる(611)。Next, the custom mode setting screen 108 is displayed (604), and it is determined whether or not the mode setting dial 204 is in the custom mode (605).
If the mode is not set, the setting information of the display screen is stored in the memory 1
009, for example, stored in the address of h1 (610)
The process ends (611).
【0055】606においてカーソル移動スイッチ20
3によりカーソルを移動させる必要があれば、607で
カーソルを移動させる。At 606, the cursor movement switch 20
If it is necessary to move the cursor according to step 3, the cursor is moved at step 607.
【0056】次に、608において設定スイッチ202
がONになっていれば、609において撮像装置の機能
の設定内容を変更する(609)。Next, at 608, the setting switch 202
If is turned on, the setting contents of the function of the imaging device are changed in 609 (609).
【0057】以上の構成により、撮像装置の所定機能の
設定を単独で行い、視線検出の個人差補正をしなくて
も、視線検出の個人差補正デ−タと撮像装置の所定機能
設定データを同一のメモリに互いに対応関係になるよう
に記憶することにより、個人差補正データとその使用者
が設定した所定機能の設定データからなる使用者固有の
データを同時に呼び出すことができる。With the above configuration, the setting of the predetermined function of the image pickup apparatus is performed independently, and the personal difference correction data of the line of sight detection and the predetermined function setting data of the image pickup apparatus can be obtained without correcting the individual difference of the line of sight detection. By storing the data in the same memory so as to correspond to each other, user-specific data including the individual difference correction data and the setting data of the predetermined function set by the user can be simultaneously called.
【0058】また、再設定し直すときも上述の動作を同
様に実行することにより、眼球補正をせずに撮像装置の
所定機能の再設定をすることができる。Further, when resetting is performed again, the above-described operation is similarly performed, so that the predetermined function of the image pickup apparatus can be reset without performing the eyeball correction.
【0059】(第3の実施の形態)図4は第3の実施の
形態による撮像装置の構成ブロック図である。401
は、ギヤ配列、ステッピングモータなどにより表示素子
1002を矢印方向に移動させるための表示素子移動装
置であり、これによって表示素子1002が上下方向
(図の矢印方向)に移動可能とされ、使用者の視度を補
正することができる。(Third Embodiment) FIG. 4 is a block diagram showing a configuration of an image pickup apparatus according to a third embodiment. 401
Is a display element moving device for moving the display element 1002 in the direction of the arrow by a gear arrangement, a stepping motor, or the like, whereby the display element 1002 can be moved in the vertical direction (the direction of the arrow in the figure), Diopter can be corrected.
【0060】また、404は前記ステッピングモータを
駆動するドライバ回路、402は表示素子1002の移
動量を演算する位置検出回路である。Reference numeral 404 denotes a driver circuit for driving the stepping motor, and reference numeral 402 denotes a position detection circuit for calculating the amount of movement of the display element 1002.
【0061】なおその他の構成は第1の実施の形態の撮
像装置のブロック図と同様なので説明は省略する。ま
た、本実施の形態の視線検出原理(図8〜図10)、個
人差補正時のファインダ画面(図12)については第1
の実施の形態と同様であり、説明は省略する。The other configuration is the same as that of the block diagram of the imaging apparatus according to the first embodiment, and the description is omitted. Also, the principle of gaze detection (FIGS. 8 to 10) of the present embodiment and the finder screen (FIG.
This is the same as the embodiment described above, and the description is omitted.
【0062】図3(a)は第3の実施の形態にて使用す
るスイッチパネルで303は撮像装置のモード設定ダイ
ヤルであり、撮像装置モード、VTRモード、CALモ
ード(個人差補正登録モード)、視度モードを設定する
ものである。301は使用者設定用スライドスイッチで
あり、3人のデータを設定するもので個人差補正と兼用
している。FIG. 3A shows a switch panel used in the third embodiment. Reference numeral 303 denotes a mode setting dial of the image pickup apparatus. The image pickup apparatus mode, VTR mode, CAL mode (individual difference correction registration mode), This is for setting the diopter mode. Reference numeral 301 denotes a user setting slide switch for setting data of three users, which also serves as individual difference correction.
【0063】さらに、302は視度調整スイッチであ
り、前記表示素子移動装置401を動作させ、表示素子
1002を移動させるための2個対になっているキーで
ある。Reference numeral 302 denotes a diopter adjustment switch, which is a pair of keys for operating the display element moving device 401 and moving the display element 1002.
【0064】ここで遠視キーを押すと、表示素子は、図
4において上に移動し遠視の観察者を矯正する。近視キ
ーを押すと、下に移動し近視の使用者を矯正する。When the hyperopia key is pressed, the display element moves upward in FIG. 4 to correct a hyperopic observer. Pressing the myopia key will move down and correct the myopic user.
【0065】図3(b)は、本実施の形態によるファイ
ンダ画面であり、304は視度調整画面である。ここで
305は視度調整メッセージであり、このとき使用者に
視度調整スイッチ302を用いてファインダが最もはっ
きり見えるように、視度を調節してもらう。FIG. 3B is a viewfinder screen according to the present embodiment, and 304 is a diopter adjustment screen. Here, reference numeral 305 denotes a diopter adjustment message. At this time, the user uses the diopter adjustment switch 302 to adjust the diopter so that the finder can be most clearly seen.
【0066】図5は、第3の実施の形態によるシステム
の流れ図であり、以下説明する。FIG. 5 is a flowchart of a system according to the third embodiment, which will be described below.
【0067】まずモード設定ダイヤル303のポジショ
ンが、視度になっているかどうかを判断する(70
2)。視度になっていれば使用者設定スライドスイッチ
301のポジションを検出し、メモリー1009に書き
込む(703)。ここでメモリー1009は、使用者固
有の個人差補正データを格納したときと同一エリアであ
る。First, it is determined whether or not the position of the mode setting dial 303 is at diopter (70).
2). If the diopter has been reached, the position of the user setting slide switch 301 is detected and written to the memory 1009 (703). Here, the memory 1009 is the same area as when the individual difference correction data unique to the user is stored.
【0068】次に図3(a)に示すファインダの表示の
ように視度調整メッセージ305を表示する(70
4)。さらに、モード設定ダイヤル303が視度になっ
ているかを判断する(705)。視度モードになってれ
ば表示素子の位置を検出し(708)、表示素子の位置
情報をメモリ1009のあるアドレス、例えばh1へ格
納して(709)、終了する(710)。Next, a diopter adjustment message 305 is displayed as in the viewfinder display shown in FIG.
4). Further, it is determined whether or not the mode setting dial 303 is at diopter (705). If the diopter mode is set, the position of the display element is detected (708), the position information of the display element is stored in a certain address of the memory 1009, for example, h1, (709), and the process ends (710).
【0069】前記視度調整スイッチ302がONになっ
ていれば、押されたスイッチに対応した方向に表示素子
を移動させる。If the diopter adjustment switch 302 is ON, the display element is moved in a direction corresponding to the pressed switch.
【0070】以上の構成により、視度調節を行い、個人
差補正データと視度調節後の表示素子位置データを、同
一のメモリに互いに対応関係になるように格納し、撮影
時は設定スイッチ301を使用者が登録したポジション
に設定することにより、視度調節後の表示素子位置デー
タに基づいて、表示素子を移動させれば、使用者固有の
個人差補正データ設定を行うとともに、視度調節が自動
で行われる。With the above arrangement, diopter adjustment is performed, and the personal difference correction data and the display element position data after diopter adjustment are stored in the same memory so as to correspond to each other. By setting the to the position registered by the user, if the display element is moved based on the display element position data after the diopter adjustment, the individual difference correction data unique to the user is set, and the diopter adjustment is performed. Is performed automatically.
【0071】(第4の実施の形態)上述した実施の形態
はビデオカメラの撮像装置に関するものであったが、次
に近年急速に普及している図13のゴーグルのような使
用者の頭部に固定して用いるヘッドマウントディスプレ
イを本発明に適用した場合について説明する。(Fourth Embodiment) The above-described embodiment relates to an image pickup device of a video camera. Next, the head of a user like goggles in FIG. A case in which a head-mounted display used fixed to the present invention is applied to the present invention will be described.
【0072】ここでは、ヘッドマウントディスプレイを
用いてゲームを実行する実施の形態を示す。Here, an embodiment in which a game is executed using a head mounted display will be described.
【0073】図14は本実施の形態のブロック図であ
る。図14において他のブロック図で同じ符号を用いて
いる箇所は説明を省略する。FIG. 14 is a block diagram of the present embodiment. In FIG. 14, the description of the same reference numerals in other block diagrams is omitted.
【0074】図14の構成においてはCD−ROM10
20などからゲームソフトなどをインストールし、CP
U1008′によって処理し、表示回路1007によっ
てゲーム画面を表示素子1002に表示させる。また、
CPU1008は音声処理回路1022によりD/A変
換してヘッドホン1021に音声を出力させる。In the configuration shown in FIG.
Install game software etc. from 20 and CP
The processing is performed by U1008 ', and a game screen is displayed on the display element 1002 by the display circuit 1007. Also,
The CPU 1008 performs D / A conversion by the audio processing circuit 1022 and causes the headphones 1021 to output audio.
【0075】このような構成のヘッドマウントディスプ
レイの画面でゲームを行う際、図15のように速度調節
機能の「SPEED」、難易度調節機能の「LEVE
L」、画像解像度調節機能の「RESOLUTIO
N」、音量調節機能の「SOUND」、などゲームモー
ドの設定及び視度調節設定などを画面に表示させる。When playing a game on the screen of the head-mounted display having such a configuration, as shown in FIG. 15, "SPEED" of the speed adjusting function and "LEVE" of the difficulty adjusting function.
L ”,“ RESOLUTIO ”for image resolution adjustment function
For example, the game mode setting and diopter adjustment setting such as "N" and "SOUND" of the volume adjustment function are displayed on the screen.
【0076】図15の画面において、マニュアルスイッ
チ1501の上下のカーソルスイッチ1502によって
カーソル1503を動かす。カーソル位置が決定された
後、そのカーソル位置のモード設定を左右のカーソルを
用いて行う。モードの設定が決定された後、設定スイッ
チ1504をONにして決定する。On the screen shown in FIG. 15, a cursor 1503 is moved by a cursor switch 1502 above and below a manual switch 1501. After the cursor position is determined, the mode setting of the cursor position is performed using the left and right cursors. After the setting of the mode is determined, the setting switch 1504 is turned on to determine the mode.
【0077】これらの使用者固有のゲームの設定あるい
は動作モードを使用者の視線補正データすなわちスイッ
チ101のポジションに対応して記憶させる。The user-specific game settings or operation modes are stored in correspondence with the user's line-of-sight correction data, that is, the position of the switch 101.
【0078】以上のようにヘッドマウントディスプレイ
でゲームを行うときに視線補正データとともに使用者固
有のゲームの設定あるいは動作モードを呼び出すことが
できるので、ゲームを行うごとにゲームの動作及び設定
の必要がなくなる。As described above, when playing a game on the head-mounted display, the user-specific game setting or operation mode can be called together with the eye-gaze correction data. Therefore, it is necessary to perform the game operation and setting each time the game is played. Disappears.
【0079】なお、上記の説明では、マニュアルスイッ
チ1501上のカーソルスイッチ1502を用いてモー
ド設定を行っていたが、視線によるカーソル1505〜
1508を用いてモード設定を行ってもよい。In the above description, the mode is set using the cursor switch 1502 on the manual switch 1501.
The mode setting may be performed using 1508.
【0080】またゲームのモード設定の変更は、視度補
正と同時に行ってもよいし、単独で行ってもよい。The mode setting of the game may be changed simultaneously with the diopter correction, or may be changed alone.
【0081】[0081]
【発明の効果】請求項1によると、視線検出誤差を補正
したデータと対応して使用者固有の撮像装置の所定機能
の設定を少なくとも一人分記憶可能であるので、撮像装
置の所定の機能を装置の使用のたびに再設定する必要が
なくなる。According to the first aspect, at least one user-specific setting of a predetermined function of the imaging apparatus can be stored in association with the data obtained by correcting the eye-gaze detection error. There is no need to reset each time the device is used.
【0082】請求項2によると、使用者は視線検出誤差
のデ−タを保存したまま撮像装置の所定機能の設定を変
更可能であるので迅速な撮像装置の所定機能の設定を行
うことができる。According to the second aspect, the user can change the setting of the predetermined function of the imaging apparatus while keeping the data of the visual line detection error, so that the predetermined function of the imaging apparatus can be quickly set. .
【0083】請求項3によると、視線検出誤差の補正の
ときに撮像装置の機能の設定をあわせて行うので使用者
の煩わしさは解消することができる。According to the third aspect, since the setting of the function of the image pickup apparatus is performed at the time of correcting the line-of-sight detection error, the trouble of the user can be eliminated.
【0084】請求項4によると少なくとも撮像装置の撮
影機能及び再生機能及び視線機能及び視度調節機能及び
視線機能のいずれか1つの設定を含むので簡便な撮像装
置を提供することができる。According to the fourth aspect, since at least one of the photographing function, the reproduction function, the line-of-sight function, the diopter adjustment function, and the line-of-sight function of the image pickup apparatus is set, a simple image pickup apparatus can be provided.
【0085】請求項5によると、視線検出誤差を補正し
たデータと対応して使用者固有の電子機器の所定機能の
設定を少なくとも一人分記憶可能であるので、その所定
機能を装置の使用のたびに再設定する必要がなくなる。According to the fifth aspect, since the setting of the predetermined function of the electronic device specific to the user can be stored for at least one user in correspondence with the data in which the visual line detection error is corrected, the predetermined function can be stored every time the apparatus is used. Need not be reset.
【0086】請求項6によると、使用者は視線検出誤差
のデ−タを保存したまま電子機器の所定機能の設定を変
更可能であるので、迅速な電子機器の所定機能の設定を
行うことができる。According to the present invention, since the user can change the setting of the predetermined function of the electronic device while keeping the data of the eye-gaze detection error, the user can quickly set the predetermined function of the electronic device. it can.
【0087】請求項7によると、少なくとも電子機器の
速度調節機能及び難易度調節機能及び画像解像度調節機
能及び音量調節機能または視度調節機能または視線機能
のいずれか1つの設定を含むので簡便な撮像装置を提供
することができる。According to the seventh aspect, since at least one of the speed adjustment function, the difficulty adjustment function, the image resolution adjustment function, the volume adjustment function, the diopter adjustment function, and the line-of-sight function of the electronic device is set, the imaging is simplified. An apparatus can be provided.
【図1】(a)は第1の実施の形態の撮像装置のスイッ
チパネルを、(b)は第1の実施の形態の所定機能設定
のファインダ画面をそれぞれ示す図FIG. 1A is a diagram illustrating a switch panel of an imaging device according to a first embodiment, and FIG. 1B is a diagram illustrating a finder screen of a predetermined function setting according to the first embodiment.
【図2】(a)は第2の実施の形態の撮像装置のスイッ
チパネルを、(b)は第2の実施の形態の所定機能設定
のファインダ画面をそれぞれ示す図2A is a diagram illustrating a switch panel of an imaging apparatus according to a second embodiment, and FIG. 2B is a diagram illustrating a finder screen for setting a predetermined function according to the second embodiment.
【図3】(a)は第3の実施の形態の撮像装置のスイッ
チパネルを、(b)は第3の実施の形態の所定機能設定
のファインダ画面をそれぞれ示す図FIG. 3A is a diagram illustrating a switch panel of an imaging device according to a third embodiment, and FIG. 3B is a diagram illustrating a finder screen of a predetermined function setting according to the third embodiment.
【図4】第3の実施の形態の撮像装置の構成概略図FIG. 4 is a schematic configuration diagram of an imaging device according to a third embodiment;
【図5】第1の実施の形態におけるフローチャートFIG. 5 is a flowchart according to the first embodiment;
【図6】第2の実施の形態におけるフローチャートFIG. 6 is a flowchart according to a second embodiment;
【図7】第3の実施の形態におけるフローチャートFIG. 7 is a flowchart according to a third embodiment.
【図8】光電変換素子による眼球像の出力図FIG. 8 is an output diagram of an eyeball image by a photoelectric conversion element.
【図9】視線検出原理図(上面)FIG. 9 is a view showing the principle of gaze detection (top view).
【図10】視線検出原理図(側面)FIG. 10 is a diagram showing the principle of gaze detection (side view).
【図11】第1の実施の形態及び第2の実施の形態の撮
像装置の構成概略図FIG. 11 is a schematic configuration diagram of an imaging device according to the first embodiment and the second embodiment.
【図12】眼球の個人差補正時のファインダ画面FIG. 12 is a viewfinder screen when correcting individual differences in eyeballs.
【図13】ヘッドマウントディスプレイ装着図FIG. 13 is a view showing a head mounted display.
【図14】第4の実施の形態における電子機器の構成概
略図FIG. 14 is a schematic configuration diagram of an electronic device according to a fourth embodiment.
【図15】第4の実施の形態における電子機器の所定機
能設定画面及び操作スイッチを示す図FIG. 15 is an exemplary view showing a predetermined function setting screen and operation switches of the electronic device according to the fourth embodiment;
1002 表示素子 1005 眼球 1006 視線検出ユニット 1008 システムコントロール回路 1021 ヘッドホン 1060 IRED 1063 光電変換素子 1064 注視点検出回路 1002 display element 1005 eyeball 1006 gaze detection unit 1008 system control circuit 1021 headphones 1060 IRED 1063 photoelectric conversion element 1064 fixation point detection circuit
Claims (7)
検出する視線検出手段と、眼球の個人差による視線の検
出誤差を補正する視線補正手段とを具備する撮像装置に
おいて、 前記視線補正手段により算出した前記使用者の前記視線
補正データに対応して前記撮像装置の所定機能の設定デ
ータを少なくとも1つ記憶する記憶手段と、 前記記憶手段により記憶された前記視線補正データ及び
前記所定機能の設定データを前記記憶手段から呼び出す
手段とを具備することを特徴とする視線検出機能を有す
る撮像装置。1. An image pickup apparatus comprising: a line-of-sight detecting means for detecting a line of sight of a user looking into a finder visual field; and a line-of-sight correction means for correcting a line-of-sight detection error due to individual differences in eyeballs. Storage means for storing at least one setting data of a predetermined function of the imaging device corresponding to the calculated visual axis correction data of the user; and setting of the visual axis correction data and the predetermined function stored by the storage means Means for retrieving data from the storage means.
記憶された前記視線補正データに対応した前記所定機能
の設定データを変更する変更手段と、 前記変更手段により変更した前記所定機能の設定データ
を再び前記視線補正データに対応させて記憶する手段と
を具備することを特徴とする視線検出機能を有する撮像
装置。2. The changer according to claim 1, wherein the changer changes setting data of the predetermined function corresponding to the line-of-sight correction data stored in the storage, and the setting data of the predetermined function changed by the changingr. Means for storing the visual axis correction data again in association with the visual axis correction data.
視線検出手段による前記使用者の眼球の視線検出誤差の
補正とともに前記所定機能の設定を実行する手段を具備
することを特徴とする視線検出機能を有する撮像装置。3. The gaze detection device according to claim 1, further comprising: means for correcting the gaze detection error of the user's eye by the gaze detection means and executing the setting of the predetermined function. An imaging device having a function.
撮像装置の所定機能として少なくとも撮影機能または再
生機能または視度調節機能または視線機能のいずれか1
つを含むことを特徴とする視線検出機能を有する撮像装
置。4. The image capturing apparatus according to claim 1, wherein at least one of a photographing function, a reproducing function, a diopter adjusting function, and a line-of-sight function is provided as the predetermined function of the image capturing apparatus.
An imaging device having a line-of-sight detection function, comprising:
検出する視線検出手段と、眼球の個人差による視線の検
出誤差を補正する視線補正手段とを具備する装置であっ
て、 前記視線補正手段により算出した前記使用者の前記視線
補正データに対応して前記所定機能の設定データを少な
くとも1つ記憶する記憶手段と、 前記記憶手段により記憶された前記視線補正データ及び
前記所定機能の設定データを前記記憶手段から呼び出す
手段とを具備することを特徴とする視線検出機能を有す
る電子機器。5. An apparatus comprising: a line-of-sight detecting means for detecting a line of sight of a user looking into a finder visual field; and a line-of-sight correction means for correcting a line-of-sight detection error due to individual differences in eyeballs. Storage means for storing at least one setting data of the predetermined function corresponding to the visual axis correction data of the user calculated by the following; and storing the visual axis correction data and the predetermined function setting data stored by the storage means. An electronic device having a line-of-sight detection function, comprising: a unit for calling from the storage unit.
記憶された前記視線補正データに対応した前記所定機能
の設定データを変更する変更手段と、前記変更手段によ
り変更した前記所定機能の設定データを再び前記視線補
正データに対応させて記憶する手段とを具備することを
特徴とする視線検出機能を有する電子機器。6. The changing means for changing the setting data of the predetermined function corresponding to the line-of-sight correction data stored in the storage means, and the setting data of the predetermined function changed by the changing means. Means for storing the visual axis correction data again in association with the visual axis correction data.
所定機能として速度調節機能または難易度調節機能また
は画像解像度調節機能または音量調節機能または視度調
節機能または視線機能のうち少なくとも1つを含むこと
を特徴とする視線検出機能を有する電子機器。7. The function according to claim 5, wherein the predetermined function includes at least one of a speed adjustment function, a difficulty adjustment function, an image resolution adjustment function, a volume adjustment function, a diopter adjustment function, and a line-of-sight function. An electronic device having a gaze detection function.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP8176429A JPH1020183A (en) | 1996-07-05 | 1996-07-05 | Imaging device and electronic device having gaze detection function |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP8176429A JPH1020183A (en) | 1996-07-05 | 1996-07-05 | Imaging device and electronic device having gaze detection function |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH1020183A true JPH1020183A (en) | 1998-01-23 |
Family
ID=16013555
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP8176429A Withdrawn JPH1020183A (en) | 1996-07-05 | 1996-07-05 | Imaging device and electronic device having gaze detection function |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH1020183A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0489058A (en) * | 1990-07-31 | 1992-03-23 | Ya Man Ltd | Ultrasonic cosmetic device with variable contact temperature |
| JP2006263343A (en) * | 2005-03-25 | 2006-10-05 | Matsushita Electric Works Ltd | Eyeball movement testing goggle |
| JP2015013031A (en) * | 2013-07-05 | 2015-01-22 | ソニー株式会社 | Visual line detection device and visual line detection method |
| WO2021242008A1 (en) * | 2020-05-28 | 2021-12-02 | Samsung Electronics Co., Ltd. | Electronic device and operating method thereof |
-
1996
- 1996-07-05 JP JP8176429A patent/JPH1020183A/en not_active Withdrawn
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0489058A (en) * | 1990-07-31 | 1992-03-23 | Ya Man Ltd | Ultrasonic cosmetic device with variable contact temperature |
| JP2006263343A (en) * | 2005-03-25 | 2006-10-05 | Matsushita Electric Works Ltd | Eyeball movement testing goggle |
| JP2015013031A (en) * | 2013-07-05 | 2015-01-22 | ソニー株式会社 | Visual line detection device and visual line detection method |
| WO2021242008A1 (en) * | 2020-05-28 | 2021-12-02 | Samsung Electronics Co., Ltd. | Electronic device and operating method thereof |
| US11422622B2 (en) | 2020-05-28 | 2022-08-23 | Samsung Electronics Co., Ltd. | Electronic device and operating method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3092943B2 (en) | Microscopes, especially surgical microscopes | |
| US6634749B1 (en) | Eye tracking system | |
| EP1143847B1 (en) | Eye tracking system | |
| US5598248A (en) | Optical apparatus having visual point detection function | |
| JPH0846846A (en) | Imaging device | |
| JPH07184089A (en) | Video camera | |
| JPH05192299A (en) | Fundus camera | |
| JPH0846836A (en) | Gaze detection method and device, and imaging device | |
| JPH07191796A (en) | Eye-gaze input system | |
| JPH1020183A (en) | Imaging device and electronic device having gaze detection function | |
| JPH05328197A (en) | Image pickup device | |
| US5745174A (en) | Viewpoint detection apparatus with selected correction coefficent generation | |
| JPH08280628A (en) | Electronic equipment with eye-gaze detection function | |
| JPH0556924A (en) | Video camera | |
| JP3109870B2 (en) | Video camera | |
| JP3186212B2 (en) | Eye-gaze input camera | |
| JP2003225208A (en) | Fundus camera | |
| JPH09262210A (en) | Optical system | |
| JP3266293B2 (en) | Video camera | |
| JP3761978B2 (en) | Imaging device | |
| JP2952072B2 (en) | Optical line-of-sight detecting device and optical apparatus having line-of-sight detecting means | |
| JP3548222B2 (en) | Video camera with gaze detection device | |
| JP3171698B2 (en) | Camera focal length control device | |
| JPH10191132A (en) | Image recording method and apparatus, and storage medium | |
| JPH07336585A (en) | Observing apparatus and photographing apparatus having the observing apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20031007 |