JPH105195A - Photographing method and device for iris - Google Patents
Photographing method and device for irisInfo
- Publication number
- JPH105195A JPH105195A JP8178592A JP17859296A JPH105195A JP H105195 A JPH105195 A JP H105195A JP 8178592 A JP8178592 A JP 8178592A JP 17859296 A JP17859296 A JP 17859296A JP H105195 A JPH105195 A JP H105195A
- Authority
- JP
- Japan
- Prior art keywords
- image
- iris
- eyeball
- light
- light emitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 14
- 210000005252 bulbus oculi Anatomy 0.000 claims abstract description 104
- 208000016339 iris pattern Diseases 0.000 claims description 90
- 238000003384 imaging method Methods 0.000 claims description 50
- 238000005286 illumination Methods 0.000 claims description 43
- 230000001678 irradiating effect Effects 0.000 claims description 10
- 210000001508 eye Anatomy 0.000 claims description 9
- 210000001747 pupil Anatomy 0.000 claims 1
- 239000011521 glass Substances 0.000 abstract description 8
- 230000001788 irregular Effects 0.000 abstract description 8
- 238000010586 diagram Methods 0.000 description 13
- 230000002950 deficient Effects 0.000 description 5
- 241000282412 Homo Species 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 210000000744 eyelid Anatomy 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000000994 depressogenic effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Eye Examination Apparatus (AREA)
- Collating Specific Patterns (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、個人を照合あるい
は認識する際に用いられる人間の虹彩の画像を撮影する
方法及び撮影する装置に関する。[0001] 1. Field of the Invention [0002] The present invention relates to a method and an apparatus for photographing an image of a human iris used for collating or recognizing an individual.
【０００２】[0002]
【従来の技術】従来から、官庁、企業、学校等における
機密性を要する場所では、入出を管理するべく、入出し
ようとする者の身元を確認している。そして、身元を確
認する方法には、網膜、指紋、虹彩等のパターンが広く
用いられている。特に昨今では、パターンの採取が容易
である、パターンを採取することに対し心理的な抵抗が
無い、パターンのデータ量が少ない等の理由により、虹
彩のパターンを用いる方法が注目されている。この虹彩
による識別方法では、入出を許可される者の虹彩のパタ
ーンを予め採取し記憶しておき、実際にその者が入出す
るときに再び虹彩のパターンを採取し、その採取された
虹彩のパターンと予め記憶されている虹彩のパターンと
が一致するか否かを判断している。2. Description of the Related Art Hitherto, in places where confidentiality is required in government offices, companies, schools, and the like, in order to control entry and exit, the identity of a person trying to enter and exit has been confirmed. As a method of confirming the identity, patterns such as a retina, a fingerprint, and an iris are widely used. In particular, in recent years, a method using an iris pattern has attracted attention because it is easy to collect a pattern, there is no psychological resistance to collecting a pattern, and the data amount of the pattern is small. In this identification method using the iris, the iris pattern of a person permitted to enter and exit is previously collected and stored, and when the person actually enters and exits, the iris pattern is collected again, and the extracted iris pattern is obtained. It is determined whether or not the pattern matches the iris pattern stored in advance.
【０００３】図８は、個人を識別する装置を示す図であ
り、図９は、その装置の一部である虹彩を撮像する装置
の構造を示す図である。虹彩撮像装置１００と虹彩パタ
ーン処理装置２００とからなる個人識別装置では、虹彩
撮像装置１００が虹彩の画像を撮影し、その撮影された
虹彩の画像から虹彩のパターンを抽出し、虹彩パターン
処理装置２００が、その抽出された虹彩のパターンを記
憶部に登録したり、その虹彩のパターンを使って個人の
照合や認識を実行する。虹彩撮像装置１００では、装置
の前面に立つ、虹彩を撮像される者が、可動読取部１０
０ａの前面にあるスタートスイッチ１００ｂを押し下げ
ると、可動読取部１００ａの下部にある照明１００ｃ
が、眼球へ光を照射する。眼球が反射する光によって可
動読取部１００ａ内のディスプレイ１００ｆに映り出さ
れる眼球の画像を窓１００ｄから見ながら、眼と装置と
の間の距離や角度を調節することにより、画像の焦点を
合わせる。焦点が合うと、可動読取部１００ａの底部に
位置するカメラ１００ｇが、ハーフミラー１００ｅによ
って反射される眼球の画像を撮影する。撮影された眼球
の画像は、制御部１００ｈで虹彩のパターンを採取さ
れ、その採取された虹彩のパターンは、虹彩パターン処
理装置２００へ出力される。これにより、虹彩のパター
ンの取得が完了することになる。FIG. 8 is a diagram showing a device for identifying an individual, and FIG. 9 is a diagram showing a structure of a device for imaging an iris which is a part of the device. In the personal identification device including the iris imaging device 100 and the iris pattern processing device 200, the iris imaging device 100 captures an iris image, extracts an iris pattern from the captured iris image, and outputs the iris pattern. Registers the extracted iris pattern in the storage unit, and executes collation and recognition of an individual using the iris pattern. In the iris imaging apparatus 100, a person standing on the front of the apparatus and capturing an image of the iris can move the movable reading unit 10
When the start switch 100b on the front of the movable reading unit 100a is depressed, the illumination 100c below the movable reading unit 100a is pressed.
Irradiates the eyeball with light. The image focus is adjusted by adjusting the distance and angle between the eye and the apparatus while viewing the image of the eyeball projected on the display 100f in the movable reading unit 100a by the light reflected by the eyeball from the window 100d. When focused, the camera 100g located at the bottom of the movable reading unit 100a captures an image of the eyeball reflected by the half mirror 100e. An iris pattern is collected from the captured image of the eyeball by the control unit 100h, and the collected iris pattern is output to the iris pattern processing device 200. This completes the acquisition of the iris pattern.
【０００４】[0004]
【発明が解決しようとする課題】しかしながら、従来の
虹彩撮像装置で眼球を撮像する場合には、撮像の様子を
上方から表した図１０（ａ）に示すように、照明１００
ｃからの光の一部が眼鏡のレンズ１００ｓ等で反射さ
れ、カメラ１００ｇは、そのように反射された光１００
ｔによる画像を撮影する。この眼鏡のレンズ１００ｓ等
による反射光１００ｔは、虹彩の画像にとって雑音とな
るので、良好な虹彩のパターンを採取することが困難と
なる。仮に、不良な虹彩の画像から虹彩のパターンを取
得し、その虹彩のパターンに基づいて識別をすれば、識
別の精度を悪化させてしまったり、識別不能となったり
することになる。However, when an eyeball is imaged by a conventional iris imaging apparatus, as shown in FIG.
A part of the light from c is reflected by the lens 100s of the spectacles, etc., and the camera 100g
Capture an image with t. The reflected light 100t from the eyeglass lens 100s or the like becomes noise in the iris image, so that it is difficult to collect a good iris pattern. If an iris pattern is acquired from an image of a defective iris and identification is performed based on the iris pattern, the accuracy of identification will be degraded or the identification will be impossible.
【０００５】このような問題を回避するために、図１０
（ｂ）に示すように、顔を横方向へ僅かにずらすことに
より、眼鏡のレンズ１００ｓ等による反射光１００ｔ
が、窓１００ｄからカメラ１００ｇへ入来することを避
けるという方法が採られている。しかし、顔の向きをど
の程度変えれば、眼鏡のレンズ１００ｓ等による反射光
１００ｔを阻止できるかを判断することは決して容易で
はなく、また、顔の向きを大きく変えてしまうと、入来
されるべき眼球による反射光がカメラ１００ｇまで到達
できず、虹彩の画像を撮影できないという問題を生じて
いた。To avoid such a problem, FIG.
By slightly shifting the face in the horizontal direction as shown in FIG.
However, a method of avoiding entering the camera 100g from the window 100d is adopted. However, it is not easy to judge how much the face direction should be changed to prevent the reflected light 100t from the eyeglass lens 100s or the like, and if the face direction is largely changed, it will come in. There has been a problem that the reflected light from the power eye cannot reach the camera 100g and an iris image cannot be captured.
【０００６】[0006]
【課題を解決するための手段】本発明は、以上の問題点
を解決するために、次の構成を採用する。 〈構成１〉人間の眼球へ一の入射角で光を照射し、眼球
により反射された光によって眼球の画像を撮影し、撮影
された眼球の画像の良否を判断し、画像が良好でないと
判断した場合には、順次、上記一の入射角と異なる他の
入射角で虹彩へ光を照射して、虹彩の画像を撮影するこ
とを特徴とするに虹彩の撮像方法。 〈説明〉この構成による虹彩の撮像方法では、最初に、
人間の眼球へ第一の入射角で光を照射して眼球の画像を
撮影し、その画像の良否を判断する。そして、画像が良
好でないと判断された場合に、第一の入射角と異なる第
二の入射角で再び光を照射して眼球の画像を撮影する。
さらに、第二の入射角の光による眼球の画像が良好でな
いと判断された場合には、第一の入射角とも第二の入射
角とも異なる第三の入射角で光を照射して眼球の画像を
撮影する。このように、次々に入射角を変えて眼球の画
像を撮影することにより、予め定めた一定基準を越える
良好な画像を得ることが可能となる。その結果、その得
られた良好な眼球の画像を元にして、より厳密には、虹
彩の部分の画像を元にして、虹彩のパターンを高質に得
ることが可能となる。The present invention employs the following structure in order to solve the above problems. <Structure 1> Light is radiated to the human eyeball at one incident angle, an image of the eyeball is taken by the light reflected by the eyeball, and the quality of the taken image of the eyeball is determined, and it is determined that the image is not good. In this case, the iris is sequentially irradiated with light at another incident angle different from the one incident angle, and an image of the iris is photographed. <Description> In the iris imaging method according to this configuration, first,
The human eye is irradiated with light at a first angle of incidence to capture an image of the eye, and the quality of the image is determined. Then, when it is determined that the image is not good, light is irradiated again at a second incident angle different from the first incident angle to photograph an image of an eyeball.
Further, when it is determined that the image of the eyeball due to the light at the second incident angle is not good, the eyeball is irradiated with light at a third incident angle different from both the first incident angle and the second incident angle. Take an image. As described above, by successively changing the angle of incidence and photographing the image of the eyeball, it is possible to obtain a good image exceeding a predetermined standard. As a result, it is possible to obtain a high-quality iris pattern based on the obtained good eyeball image, or more precisely, based on the image of the iris portion.
【０００７】〈構成２〉構成１において、撮影された画
像の良否を、虹彩の部分の画像に含まれる雑音の量に基
づいて判断することを特徴とする虹彩の撮像方法。 〈説明〉この構成による虹彩の撮像方法では、撮影され
た眼球の画像の良否を、眼球の画像における虹彩の部分
の画像中に含まれる雑音の量、例えば、眼鏡のレンズに
より乱反射する光の量や虹彩の部分を浸食するまぶたの
面積等に基づいて判断する。従って、虹彩の部分の画像
が良好である眼球の画像を得られるので、虹彩のパター
ンを良質に得ることが可能となる。<Structure 2> An iris imaging method according to Structure 1, wherein the quality of the photographed image is determined based on the amount of noise contained in the image of the iris portion. <Description> In the iris imaging method according to this configuration, the quality of the captured eyeball image is determined by the amount of noise included in the image of the iris portion in the eyeball image, for example, the amount of light diffusely reflected by the lens of the eyeglasses. Or the area of the eyelid that erodes the iris portion. Therefore, an image of the eyeball in which the image of the iris portion is good can be obtained, so that it is possible to obtain a high quality iris pattern.
【０００８】〈構成３〉構成１において、撮影された眼
球の画像を２値化し、その２値化された画像に基づき雑
音の量を検出し、その検出された雑音の量に基づいて、
画像の良否を判断することを特徴とする虹彩の撮像方
法。 〈説明〉この構成の虹彩の撮像方法では、撮影された眼
球の画像について、多値で表されている各画素を、輝度
に関する一定の閾値を基準として２値で表し、その２値
化された眼球の画像を元にして、眼球の画像中に含まれ
る雑音の量を検出する。これにより、輝度が極めて高い
眼鏡のレンズ等による乱反射からなる雑音のみを容易に
検出することが可能となる。<Structure 3> In the structure 1, the photographed image of the eyeball is binarized, the amount of noise is detected based on the binarized image, and based on the detected amount of noise,
An iris imaging method characterized by determining the quality of an image. <Explanation> In the iris imaging method having this configuration, each pixel represented by a multi-level value is represented by a binary value based on a fixed threshold value for luminance in the captured eyeball image, and the binarized image is obtained. The amount of noise included in the image of the eyeball is detected based on the image of the eyeball. As a result, it is possible to easily detect only noise caused by irregular reflection by a lens of spectacles having extremely high luminance.
【０００９】〈構成４〉構成１、２、３において、人間
の眼球へ照射する光として近赤外線を用いることを特徴
とする虹彩の撮像方法。 〈説明〉この構成による虹彩の撮像方法では、人間が感
知することができない近赤外線を眼球に照射することに
より、眼球の画像を撮影する。従って、照射される入射
角が次々と変わる場合であっても、光を照射される人間
は、ちらつきによる不快感を感じなくてすむようにな
る。<Structure 4> An iris imaging method according to Structures 1, 2, and 3, wherein near-infrared rays are used as light for irradiating a human eyeball. <Description> In the iris imaging method according to this configuration, an image of the eyeball is captured by irradiating the eyeball with near-infrared rays that cannot be sensed by humans. Therefore, even if the incident angle of irradiation changes one after another, the person who is irradiated with the light does not need to feel discomfort due to flicker.
【００１０】〈構成５〉人間の眼球へ光を照射する複数
の発光素子からなる照明アレイ部と、虹彩により反射さ
れた光によって虹彩の画像を撮影する撮影部とからな
り、証明アレイ部における発光素子のうち、１または２
以上の発光素子を選択することにより、様々な角度から
光を照射することを特徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置では、複数の発光
素子からなる照明アレイ部が、人間の眼球へ光を照射
し、眼球によって反射された光に基づき、虹彩の画像を
含む眼球の画像を撮影する。従って、１または２以上の
発光素子を選択することにより、様々な角度から光を照
射することができるので、良好な画像を容易に得られ
る。<Structure 5> An illumination array unit including a plurality of light emitting elements for irradiating light to a human eyeball, and a photographing unit for photographing an image of an iris by light reflected by the iris. One or two of the elements
An iris image pickup device that emits light from various angles by selecting the above light emitting elements. <Description> In the iris imaging device having this configuration, the illumination array unit including a plurality of light emitting elements irradiates light to the human eyeball, and captures an image of the eyeball including the iris image based on the light reflected by the eyeball. I do. Therefore, by selecting one or more light-emitting elements, light can be emitted from various angles, so that a good image can be easily obtained.
【００１１】〈構成６〉構成５において、照明アレイ部
における複数の発光素子のうち一の発光素子のみが順
次、光を照射することを特徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置では、複数の発光
素子からなる照明アレイ部において、最初に、一の発光
素子により照射された光に基づき眼球の画像を撮影し、
次に、他の発光素子により照射された光に基づき眼球の
画像を撮影するという動作を連続的に行うことができ
る。従って、様々な角度で眼球に光を照射できるので、
眼鏡のレンズ等による乱反射を始めとする雑音をより低
減できる角度を選択できるので、そのような雑音を抑え
た画像を容易に取得することが可能となる。<Structure 6> An iris imaging apparatus according to Structure 5, wherein only one of the plurality of light-emitting elements in the illumination array section sequentially emits light. <Description> In the iris imaging device according to this configuration, in the illumination array unit including a plurality of light emitting elements, first, an image of an eyeball is captured based on light emitted by one light emitting element,
Next, an operation of capturing an image of an eyeball based on light emitted by another light emitting element can be continuously performed. Therefore, light can be emitted to the eyeball at various angles,
Since it is possible to select an angle at which noise such as diffuse reflection by spectacle lenses or the like can be further reduced, it is possible to easily obtain an image with such noise suppressed.
【００１２】〈構成７〉構成６において、照明アレイ部
が、一列に並べられた複数の発光素子からなることを特
徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置では、照明アレイ
部を構成する、一列に並べられた複数の発光素子が、１
個ずつ順々に、眼球に対し異なる角度で光を照射するこ
とができる。従って、異なる角度で照射された光に基づ
いて眼鏡の画像を撮影することができるので、眼鏡のレ
ンズ等による乱反射を抑えることが可能となり、良好な
虹彩のパターンを取得することができる。<Structure 7> An iris image pickup device according to Structure 6, wherein the illumination array section comprises a plurality of light emitting elements arranged in a line. <Explanation> In the iris imaging device having this configuration, a plurality of light-emitting elements arranged in a line,
It is possible to irradiate the eyeball at different angles to the eyeball one by one. Therefore, an image of the spectacles can be taken based on the light irradiated at different angles, so that it is possible to suppress diffuse reflection by a lens or the like of the spectacles and obtain a good iris pattern.
【００１３】〈構成８〉構成６において、照明アレイ部
が、円状に並べられた複数の発光素子からなることを特
徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置でも、構成７の虹
彩撮像装置と同様な効果を得ることが可能となる。<Structure 8> An iris image pickup device according to Structure 6, wherein the illumination array section comprises a plurality of light emitting elements arranged in a circle. <Description> With the iris imaging device having this configuration, it is possible to obtain the same effects as those of the iris imaging device of Configuration 7.
【００１４】〈構成９〉構成６において、照明アレイ部
が、放射線状に並べられた複数の発光素子からなること
を特徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置でも、構成７、８
の虹彩撮像装置と同様な効果を得ることが可能である。<Structure 9> An iris image pickup device according to Structure 6, wherein the illumination array section includes a plurality of light emitting elements arranged in a radial pattern. <Explanation> In the iris image pickup apparatus having this configuration, the configuration 7, 8
It is possible to obtain the same effect as that of the iris imaging device of the above.
【００１５】〈構成１０〉構成６において、撮影された
眼球の画像の良否を、予め定められた閾値を元にして判
別する画像処理部を有しており、一の発光素子の光によ
り撮影した眼球の画像がその閾値を越えない場合に、他
の発光素子により撮影した眼球の画像を撮影し、その新
たに撮影された画像の良否を判別するという動作を繰り
返すことにより、その閾値を越える眼球の画像を選択す
ることを特徴とする虹彩撮影装置。 〈説明〉この構成による虹彩撮像装置では、画像処理部
が、予め定められた閾値、例えば、画像の大きさや画像
に含まれる雑音等に基づいて、撮影された眼球の画像の
良否を判断する。そして、一の発光素子が照射する光に
よる眼球の画像が、その閾値を越えない場合には、他の
発光素子によって光を照射することにより、再び眼球の
画像を撮影し、その良否を判別する。再び撮影された眼
球の画像がその閾値を越えない場合には、さらに他の発
光素子によって光を照射し、眼球の画像を撮影してその
良否を判別する。このような繰返しは、その閾値を越え
る良好な画像を撮影するまで実行される。従って、眼鏡
のレンズ等の乱反射によって虹彩の画像が悪化してしま
う虞れがある条件の下でも、眼球への光の入射角を様々
に変えることができるので、そのような乱反射の影響を
抑えることが可能となり、その結果として、一定の閾値
を越える良好な画像を撮影することができるようにな
る。<Structure 10> In the structure 6, an image processing unit for judging the quality of the captured image of the eyeball based on a predetermined threshold value is provided, and the image is captured by the light of one light emitting element. If the image of the eyeball does not exceed the threshold value, the operation of taking an image of the eyeball captured by another light emitting element and determining the acceptability of the newly captured image is repeated, and the eyeball exceeding the threshold value is repeated. An iris photographing device, wherein the image is selected. <Explanation> In the iris imaging device having this configuration, the image processing unit determines the quality of the captured eyeball image based on a predetermined threshold value, for example, the size of the image, noise included in the image, and the like. If the image of the eyeball due to the light emitted by one light emitting element does not exceed the threshold, the image of the eyeball is shot again by irradiating the light with the other light emitting element, and the quality of the image is determined. . If the image of the eyeball captured again does not exceed the threshold value, light is irradiated by another light emitting element, and the image of the eyeball is captured to determine the quality of the image. Such repetition is performed until a good image exceeding the threshold is taken. Therefore, even under the condition that the image of the iris may be deteriorated due to the irregular reflection of the glasses lens or the like, the angle of incidence of the light on the eyeball can be variously changed, so that the influence of such irregular reflection is suppressed. As a result, a good image exceeding a certain threshold can be taken.
【００１６】〈構成１１〉構成１０において、画像処理
部が、虹彩の画像に含まれる雑音の量を元にして、画像
の良否を判別することを特徴とする虹彩撮影装置。 〈説明〉この構成による虹彩撮像装置では、画像処理部
が、撮影された眼球の画像のうち、虹彩の部分の画像に
含まれる雑音の量を元にして、眼球の画像の良否を判別
する。従って、たとえ、閾値を越える場合であっても、
虹彩以外の部分に雑音が少ないような眼球の画像を良好
な眼球の画像として選択することを避けることができ
る。これにより、虹彩の部分の画像が良好である眼球の
画像を選択することができるので、その結果、良質な虹
彩のパターンを取得することが可能となる。<Structure 11> An iris photographing apparatus according to Structure 10, wherein the image processing unit determines the quality of the image based on the amount of noise included in the iris image. <Explanation> In the iris imaging apparatus having this configuration, the image processing unit determines the quality of the image of the eyeball based on the amount of noise included in the image of the iris portion of the captured image of the eyeball. Therefore, even if the threshold is exceeded,
It is possible to avoid selecting an image of an eyeball having less noise in a portion other than the iris as a good eyeball image. Thus, it is possible to select an image of the eyeball in which the image of the iris portion is good, and as a result, it is possible to obtain a good-quality iris pattern.
【００１７】〈構成１２〉構成１１において、画像処理
部が、撮影された眼球の画像を２値化し、２値化された
画像に基づき虹彩の部分に含まれる雑音の量を検出する
ことを特徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置では、画像処理部
が、輝度や濃淡変化について予め定められた閾値を元に
して、撮影された眼球の画像を２値化する。例えば、輝
度が低い画素を黒画素とみなし、高い画素を白画素とみ
なすということを実行する。そして、その２値化された
画像に基づいて、虹彩の部分の画像に含まれる雑音の
量、例えば、眼鏡のレンズ等による乱反射等の量を検出
する。従って、輝度あるいは濃度が他の部分と著しく異
なる、眼鏡のレンズ等による乱反射等を始めとする雑音
を効果的に検出することが可能となる。その結果、良好
な虹彩の画像を得られるか否かを的確に判別することが
できることとなる。<Structure 12> In Structure 11, the image processing section binarizes the captured eyeball image and detects the amount of noise contained in the iris portion based on the binarized image. Iris imaging device. <Explanation> In the iris imaging device having this configuration, the image processing unit binarizes the captured image of the eyeball based on predetermined threshold values for luminance and shading change. For example, a pixel having low luminance is regarded as a black pixel, and a pixel having high luminance is regarded as a white pixel. Then, based on the binarized image, the amount of noise included in the image of the iris portion, for example, the amount of irregular reflection by a lens of glasses or the like is detected. Therefore, it is possible to effectively detect noise such as irregular reflection due to a lens of spectacles or the like whose luminance or density is significantly different from other parts. As a result, it is possible to accurately determine whether or not a good iris image can be obtained.
【００１８】〈構成１３〉構成１０において、画像処理
部が、選択された眼球の画像から、虹彩の特徴点を抽出
することにより、虹彩のパターンを取得することを特徴
とする虹彩撮影装置。 〈説明〉この構成による虹彩撮像装置では、画像処理部
が、予め定められた閾値を越える良好な眼球の画像にお
ける虹彩の部分の画像を元に、その特徴点を抽出するこ
とにより、虹彩のパターンを取得する。従って、良好な
虹彩の画像に基づき虹彩のパターンを採取するので、良
質な虹彩のパターンを取得することが可能となる。<Structure 13> An iris photographing apparatus according to Structure 10, wherein the image processing unit acquires an iris pattern by extracting characteristic points of the iris from the selected eyeball image. <Explanation> In the iris imaging device having this configuration, the image processing unit extracts the feature points of the iris part in the image of the good eyeball exceeding the predetermined threshold value based on the image of the iris part, thereby obtaining the iris pattern. To get. Therefore, since an iris pattern is collected based on a good iris image, a high-quality iris pattern can be obtained.
【００１９】〈構成１４〉構成１０において、照明アレ
イ部が、近赤外線を照射する発光素子からなり、画像撮
像部が、近赤外線に感応する近赤外線カメラからなるこ
とを特徴とする虹彩撮像装置。 〈説明〉この構成による虹彩撮像装置では、近赤外線を
照射する複数の発光素子からなる照明アレイ部が、順
次、眼球へ様々な入射角で近赤外線を照射し、画像撮影
部が、その近赤外線により眼球の画像を撮影する。従っ
て、人間が感知できない近赤外線を眼球二照射するの
で、入射角を次々と変えて行く場合であっても、近赤外
線を眼球に照射される人間は、ちらつきによる不快感を
感じなくてすむようになる。<Arrangement 14> An iris imaging apparatus according to Arrangement 10, wherein the illumination array section comprises a light-emitting element for emitting near-infrared rays, and the image pickup section comprises a near-infrared camera sensitive to near-infrared rays. <Description> In the iris image pickup apparatus having this configuration, the illumination array unit including a plurality of light-emitting elements that emit near-infrared light sequentially emits near-infrared light to the eyeball at various incident angles, and the image photographing unit emits the near-infrared light. To capture an image of the eyeball. Therefore, since near-infrared rays that cannot be perceived by humans are irradiated to the eyeball twice, even when the incident angle is changed one after another, humans who irradiate near-infrared rays to the eyes should not feel discomfort due to flickering. Become.
【００２０】〈構成１５〉人間の眼球へ光を照射する複
数の発光素子からなる照明アレイ部と、眼球に反射され
た光により眼球の画像を撮影する画像撮影部と、一の発
光素子が照射した光を通じて撮影された眼球の画像の良
否を、予め定めれた閾値に基づいて判別し、かつ、その
閾値を越える眼球の画像について、虹彩の部分の画像か
ら虹彩のパターンを取得する画像処理部と、予め複数の
人間の虹彩のパターンを記憶している虹彩パターン記憶
部と、新たに取得された虹彩パターンと、既に虹彩パタ
ーン記憶部に記憶されている虹彩パターンとを比較する
虹彩パターン比較部とからなり、一の発光素子の光によ
り撮影された画像がその閾値を越えない場合には、他の
発光素子の光により再び画像を撮影し直すことを繰り返
すことにより、その閾値を越える良好な眼球の画像を撮
影し、その良好な眼球の画像における虹彩の部分の画像
に基づいて、虹彩のパターンを取得し、虹彩パターン比
較部が、その取得された虹彩のパターンと、虹彩パター
ン記憶部に記憶されている虹彩のパターンとを比較する
ことにより個人を識別することを特徴とする個人識別装
置。 〈説明〉この構成による個人識別装置では、虹彩パター
ン比較部が、構成１３と同様な構成の結果として得られ
る良好な虹彩のパターンと、予め虹彩パターン記憶部に
記憶されている複数の虹彩のパターンとを比較すること
により、その虹彩のパターンの所有者が誰であるか、あ
るいは、本人であるか等の個人照合や個人認識等を実行
する。従って、良好な虹彩の画像に基づき取得された良
好な虹彩のパターンを元にして虹彩のパターンの類否を
比較するので、精度良く個人照合や個人認識を実行でき
ることになる。<Structure 15> An illumination array unit composed of a plurality of light emitting elements for irradiating light to a human eyeball, an image photographing unit for photographing an image of an eyeball by light reflected on the eyeball, and one light emitting element irradiates An image processing unit that determines the quality of an image of an eyeball captured through the obtained light based on a predetermined threshold, and obtains an iris pattern from an image of an iris portion for an image of an eyeball exceeding the threshold. An iris pattern storage unit that stores a plurality of human iris patterns in advance, an iris pattern comparison unit that compares a newly obtained iris pattern with an iris pattern already stored in the iris pattern storage unit If the image taken by the light of one light emitting element does not exceed the threshold value, re-taking the image again by the light of another light emitting element is repeated. Take a good eyeball image exceeding the threshold, based on the image of the iris portion in the good eyeball image, to obtain an iris pattern, the iris pattern comparison unit, the obtained iris pattern, A personal identification device for identifying an individual by comparing the pattern with an iris pattern stored in an iris pattern storage unit. <Explanation> In the personal identification device having this configuration, the iris pattern comparing section includes a good iris pattern obtained as a result of a configuration similar to the configuration 13 and a plurality of iris patterns stored in the iris pattern storage section in advance. , The personal verification and the personal recognition of the owner of the iris pattern or the identity of the person are executed. Therefore, since the similarity of the iris pattern is compared based on the good iris pattern acquired based on the good iris image, the individual verification and the individual recognition can be performed with high accuracy.
【００２１】[0021]
〈具体例〉本発明の虹彩撮像装置とそれを用いた個人識
別装置について、実施の形態に沿って説明する。図１
は、具体例の個人識別装置のブロック図である。この個
人識別装置は、虹彩を撮像し、その虹彩の画像から虹彩
のパターンを抽出する虹彩撮像装置１０と、（１）その
抽出された虹彩のパターンを登録する、（２）その抽出
された虹彩パターンと、データベースとして予め記憶さ
れている複数の虹彩パターンのうちのいずれか１つとを
照合する、（３）その抽出された虹彩のパターンと同一
である虹彩のパターンをデータベースにおいて検索する
ことによりその虹彩パターンの所有者を認識する、等の
機能を有する虹彩パターン処理装置２０とから構成され
ている。<Specific Example> An iris imaging device of the present invention and a personal identification device using the same will be described with reference to an embodiment. FIG.
FIG. 3 is a block diagram of a personal identification device of a specific example. The personal identification device captures an iris and extracts an iris pattern from the iris image, and (1) registers the extracted iris pattern; and (2) registers the extracted iris. The pattern is compared with any one of a plurality of iris patterns stored in advance as a database. (3) By searching the database for an iris pattern that is the same as the extracted iris pattern, An iris pattern processing device 20 having a function of recognizing the owner of the iris pattern.
【００２２】〈個人識別装置〉虹彩撮像装置１０は、ス
イッチ部１１、制御部１２、照明制御部１３ａと照明ア
レイ部１３ｂとからなる照明部１３、窓部１４、反射部
１５、表示部１６、画像撮影部１７、画像処理部１８か
ら構成されている。この虹彩撮像装置１０には、図２
（ａ）に示すように、虹彩撮像装置１０の側壁に固定さ
れた支点１０Ａが設けられており、さらに、この支点１
０Ａを軸として自在に可動である可動読取ユニット１０
Ｂが取り付けられている。前述のスイッチ部１１から画
像処理部１８までの全ては、この可動読取ユニット内１
０Ｂに設置されている。特に、照明部１３は、この可動
読取ユニット１０Ｂの前面近くに配置されている。図２
は、虹彩撮像装置の構成を示す図である。照明部１３内
の照明アレイ部１３ｂは、水平方向へ一列に並べられた
発光素子１〜ｎ（ｎは任意の整数）から構成されてお
り、可動読取ユニット１０Ｂの前面下部に設けられてい
る。一方、虹彩パターン処理装置２０は、主制御部２
１、虹彩パターン比較部２２、虹彩パターン記憶部２
３、モニタ部２４、キーボード部２５から構成されてい
る。<Personal Identification Device> The iris imaging device 10 includes a switch unit 11, a control unit 12, an illumination unit 13 including an illumination control unit 13a and an illumination array unit 13b, a window unit 14, a reflection unit 15, a display unit 16, It comprises an image photographing unit 17 and an image processing unit 18. This iris imaging device 10 has a structure shown in FIG.
As shown in (a), a fulcrum 10A fixed to the side wall of the iris imaging device 10 is provided.
Movable reading unit 10 freely movable about 0A as an axis
B is attached. All of the above-mentioned switch section 11 to image processing section 18 are provided in the movable reading unit 1.
0B. In particular, the illumination unit 13 is arranged near the front of the movable reading unit 10B. FIG.
FIG. 3 is a diagram illustrating a configuration of an iris imaging device. The illumination array unit 13b in the illumination unit 13 includes light-emitting elements 1 to n (n is an arbitrary integer) arranged in a line in the horizontal direction, and is provided at a lower part of the front surface of the movable reading unit 10B. On the other hand, the iris pattern processing device 20
1, iris pattern comparison unit 22, iris pattern storage unit 2
3, a monitor unit 24 and a keyboard unit 25.
【００２３】〈虹彩撮像装置の動作概要〉虹彩撮像装置
１０内のスイッチ部１１は、虹彩を撮影しようとする者
の押下げにより、スイッチ部１１が押し下げられたこと
を制御部１２へ通知する。制御部１２は、その者に対し
光を照射するように照明部１３へ指示する。照明部１３
では、制御部１２からの指示を受けて、照明制御部１３
ａと照明アレイ部１３ｂとにより光を照射する。窓部１
４は、照明部１３から放射された光のうち、その者の眼
球、眼鏡のレンズ等によって反射された光のみを可動読
取ユニット１００Ｂ内へ導く。反射部１５は、窓部１４
から入来した眼球の反射光を表示部１６の方向へ通過さ
せると共に、画像撮影部１７の方向へ反射させる。表示
部１６は、反射部１５を通過した反射光によって眼球の
画像を映し出す。画像撮影部１７は、反射部１５を反射
した反射光による眼球等の画像を撮影する。画像処理部
１８では、撮影された画像の良否を判断し、良好な画像
である場合に、虹彩のパターンを抽出する。そして、抽
出された虹彩のパターンを虹彩パターン処理装置２０へ
出力する。<Outline of Operation of Iris Imaging Apparatus> The switch section 11 in the iris imaging apparatus 10 notifies the control section 12 that the switch section 11 has been pressed down by a person who intends to photograph the iris. The control unit 12 instructs the lighting unit 13 to irradiate the person with light. Lighting unit 13
Then, in response to an instruction from the control unit 12, the illumination control unit 13
Light is radiated by a and the illumination array unit 13b. Window 1
Reference numeral 4 guides only light reflected by the person's eyeball, spectacle lens, or the like among the light emitted from the illumination unit 13 into the movable reading unit 100B. The reflection part 15 is provided in the window
The reflected light of the eyeball coming from the camera is passed in the direction of the display unit 16 and is reflected in the direction of the image capturing unit 17. The display unit 16 projects an image of the eyeball by the reflected light passing through the reflecting unit 15. The image capturing unit 17 captures an image of an eyeball or the like using light reflected by the reflecting unit 15. The image processing unit 18 determines whether the captured image is good or not, and extracts a pattern of the iris if the image is good. Then, the extracted iris pattern is output to the iris pattern processing device 20.
【００２４】〈虹彩パターン処理装置の動作概要〉虹彩
パターン処理装置２０では、虹彩パターン比較部２２
は、虹彩撮像装置１０から受け取った虹彩パターンと、
虹彩パターン記憶部２３に記憶されている虹彩のパター
ンとが類似するか否か比較する。そして、主制御部２１
は、その虹彩のパターンを登録したり、比較の結果をモ
ニタ部２４に表示したりする。これらの処理を実行する
際に、必要に応じて、キーボード部２５からは、氏名、
ＩＤ番号、付加的なデータ等の事項が入力され、また、
それら入力された事項がモニタ部２４に表示される。<Overview of Operation of Iris Pattern Processing Apparatus> In the iris pattern processing apparatus 20, the iris pattern comparison unit 22
Is an iris pattern received from the iris imaging device 10,
A comparison is made as to whether or not the iris pattern stored in the iris pattern storage unit 23 is similar. Then, the main control unit 21
Registers the iris pattern and displays the result of the comparison on the monitor unit 24. When performing these processes, the name, the name,
Items such as ID number and additional data are entered.
The input items are displayed on the monitor 24.
【００２５】〈個人識別装置の登録動作〉次に、個人識
別装置の動作について説明する。図３は、個人識別装置
の動作フローチャートである。以下、この動作フローチ
ャートに沿って説明する。 ステップＳ１０： これから虹彩を登録しようとする操
作者は、キーボード部２５により、個人識別装置の処理
メニューの中から『登録処理』を選択する。 ステップＳ１１： キーボード部２５から入力された指
示を受けて、主制御部２１は、『登録処理』を実行する
旨をモニタ部２４に表示し、また、所定の項目の入力を
促すべく、「入力の指示」を表示する。<Registration Operation of Personal Identification Device> Next, the operation of the personal identification device will be described. FIG. 3 is an operation flowchart of the personal identification device. Hereinafter, description will be given along this operation flowchart. Step S10: The operator who intends to register the iris from the keyboard unit 25 selects "registration processing" from the processing menu of the personal identification device. Step S11: In response to the instruction input from the keyboard unit 25, the main control unit 21 displays on the monitor unit 24 that "registration processing" is to be executed, and displays "input" to prompt input of a predetermined item. Instruction ”is displayed.
【００２６】ステップＳ１２： 「入力の指示」を受け
て、操作者は、自己のＩＤ番号、氏名、右眼／左眼の区
別、年齢等の所定の項目について、キーボード部２５か
ら入力する。 ステップＳ１３： 所定の項目の内容を入力されると、
主制御部２１は、それらの内容をモニタ部２４に表示す
ると共に、「撮像の開始」を表示する。 ステップＳ１４： 「撮像の開始」の表示を受けて、操
作者は、窓部１４の前に眼を位置付けた後、スイッチ部
１１を押し下げる。この際、より高質な画像を撮影でき
るように、操作者は眼鏡等をはずすことが望ましい。 ステップＳ１５： スイッチ部１１の押下げを確認する
と、制御部１２は、照明制御部１３ａに、照明アレイ部
１３ｂを点灯するように指示する。Step S12: In response to the "input instruction", the operator inputs predetermined items such as his / her ID number, name, right / left eye distinction, and age from the keyboard unit 25. Step S13: When the contents of the predetermined item are input,
The main control unit 21 displays these contents on the monitor unit 24 and also displays “Start of imaging”. Step S14: In response to the display of “Start of imaging”, the operator positions the eye in front of the window 14 and then pushes down the switch unit 11. At this time, it is desirable that the operator removes glasses and the like so that a higher quality image can be captured. Step S15: When confirming the depression of the switch unit 11, the control unit 12 instructs the illumination control unit 13a to turn on the illumination array unit 13b.
【００２７】ステップＳ１６： 照明制御部１３ａは、
照明アレイ部１３ｂの発光素子１〜ｎのうち、中央に位
置する発光素子１を点灯する。なお、中央に位置する発
光素子１のみを点灯する理由は、図４に示すように、複
数の発光素子を同時に点灯した場合に、瞳孔１０００、
虹彩巻縮輪１００１、虹彩１００２等に、帯状に延びる
照明の映り込み１００３が発生してしまうことを防止す
るためである。 ステップＳ１７： 操作者は、自己の眼球の画像が表示
部１６上において、所定の位置、所定の大きさ、所定の
焦点等で映るように、自己の頭の位置を調整する。 ステップＳ１８： 画像撮影部１７は、表示部１６に映
された眼球の画像を撮影する。 ステップＳ１９： 画像処理部１８は、その撮影された
眼球の画像について、画像が充分に大きいか、焦点が合
っているか、虹彩がまぶた等で隠れていないか等、画像
の良否を確認する。この確認は、虹彩の部分の面積、そ
の周波数分布等の条件に基づいて行われる。Step S16: The illumination control unit 13a
The light emitting element 1 located at the center among the light emitting elements 1 to n of the illumination array unit 13b is turned on. The reason why only the light emitting element 1 located at the center is turned on is that, when a plurality of light emitting elements are turned on at the same time, as shown in FIG.
This is to prevent the occurrence of reflection 1003 of illumination extending in a band shape on the iris winding constriction wheel 1001, the iris 1002, and the like. Step S17: The operator adjusts the position of his / her head so that the image of his / her eyeball is displayed on the display unit 16 at a predetermined position, a predetermined size, a predetermined focus, and the like. Step S18: The image photographing unit 17 photographs the image of the eyeball displayed on the display unit 16. Step S19: The image processing unit 18 checks the quality of the captured eyeball image, such as whether the image is sufficiently large, focused, whether the iris is not hidden by eyelids, or the like. This confirmation is performed based on conditions such as the area of the iris portion and its frequency distribution.
【００２８】ステップＳ２０ａ： 画像が良好であると
判断すると、画像処理部１８は、その虹彩の画像におけ
る特徴点を抽出することにより、虹彩のパターンを取得
する。そして、取得された虹彩のパターンを虹彩パター
ン処理装置２０へ出力する。 ステップＳ２１ａ： 虹彩のパターンを受けて、主制御
部２１は、虹彩のパターンを取得できた旨をモニタ部２
４に表示する。そして、照明制御部１３ａに対し、照明
アレイ部１３ｂ中の発光素子１を消灯するように指示す
る。 ステップＳ２２ａ： 主制御部２１は、取得された「虹
彩のパターン」と、先に入力された項目の内容とを対応
付けて虹彩パターン記憶部２３に記憶する。これによ
り、登録の手続きが完了することになる。Step S20a: When it is determined that the image is good, the image processing section 18 obtains an iris pattern by extracting feature points in the iris image. Then, the obtained iris pattern is output to the iris pattern processing device 20. Step S21a: In response to receiving the iris pattern, the main control unit 21 notifies the monitor unit 2 that the iris pattern has been acquired.
4 is displayed. Then, it instructs the lighting control unit 13a to turn off the light emitting elements 1 in the lighting array unit 13b. Step S22a: The main control unit 21 stores the acquired “iris pattern” in the iris pattern storage unit 23 in association with the content of the previously input item. Thereby, the registration procedure is completed.
【００２９】ステップＳ２０ｂ： 画像が不良であると
判断すると、画像処理部１８は、その旨を主制御部２１
へ通知する。 ステップＳ２１ｂ： 撮影された画像が不良である旨の
通知を受けて、良質な画像を撮影できるようにするべ
く、主制御部２１は、顔の位置を変えること、眼をより
開けること、眼鏡等をはずすこと等を操作者に促すメッ
セージを、モニタ部２４に表示する。この表示を受け
て、操作者は、ステップＳ１７と同様に、頭部の位置を
調整することになる。 なお、これらの調整を所定の回数だけ実行しても、良好
な画像を得られない場合には、主制御部２１は、その旨
を表示部２３に表示すると共に、照明制御部１３ａに対
し、発光素子１を消灯するように指示する。Step S20b: When determining that the image is defective, the image processing section 18 notifies the main control section 21 of the fact.
Notify to Step S21b: In response to the notification that the captured image is defective, the main control unit 21 changes the position of the face, further opens the eyes, glasses, and the like so that a high-quality image can be captured. A message prompting the operator to remove the icon is displayed on the monitor 24. In response to this display, the operator adjusts the position of the head as in step S17. If a good image cannot be obtained even after performing these adjustments a predetermined number of times, the main control unit 21 displays a message to that effect on the display unit 23, and sends a message to the illumination control unit 13a. An instruction is given to turn off the light emitting element 1.
【００３０】〈個人識別装置の認識動作〉次に、個人識
別装置における認識の動作について説明する。図５は、
認識の動作を示す動作フローチャートである。以下、こ
の動作フローチャートに沿って説明する。 ステップＳ３０： 個人認識を受ける操作者は、キーボ
ード部２５により、個人識別装置の処理メニューの中か
ら、『認識処理』を選択する。 ステップＳ３１： キーボード部２５から入力された指
示を受けて、主制御部２１は、『登録処理』を実行する
旨をモニタ部２４に表示し、また、画像の撮影を開始す
るスイッチ部１１を押し下げることを指示する。 ステップＳ３２： 押下げの指示を受けると、操作者
は、スイッチ部１１を押し下げる。<Recognition operation of personal identification device> Next, the recognition operation of the personal identification device will be described. FIG.
It is an operation flowchart showing an operation of recognition. Hereinafter, description will be given along this operation flowchart. Step S30: The operator who receives personal recognition selects "recognition processing" from the processing menu of the personal identification device using the keyboard unit 25. Step S31: In response to the instruction input from the keyboard unit 25, the main control unit 21 displays that the “registration process” is to be executed on the monitor unit 24, and depresses the switch unit 11 for starting image capturing. To indicate that Step S32: Upon receiving the instruction to push down, the operator pushes down the switch unit 11.
【００３１】ステップＳ３３： スイッチ部１１の押下
げを確認すると、主制御部２１は、照明制御部１３ａに
対し、照明アレイ部１３ｂを点灯するように指示する。 ステップＳ３４： 照明制御部１３ａは、照明アレイ部
１３ｂの発光素子のうち、中央に位置する発光素子１を
点灯にする。 ステップＳ３５： 画像撮影部１７は、表示部１６に映
された眼球の画像を撮影する。 ステップＳ３６： 画像処理部１８は、その撮影された
眼球の画像を２値化することにより、２値化された画像
を生成する。 ステップＳ３７： 画像処理部１８は、予め定められた
閾値を元にして、もとの眼球の画像の良否を確認する。
画像の良否の確認としては、もとの画像に基づき、虹彩
の部分に位置する画素を積分しその面積の大小を判断し
たり、虹彩の部分に位置する画素あるいはその周辺の画
素を微分しその分布状況を判断したり、２値化された画
像に基づき、眼鏡のレンズ等による乱反射等の雑音があ
るか否かを判断したりする等を行う。Step S33: When confirming that the switch unit 11 has been pressed, the main control unit 21 instructs the illumination control unit 13a to turn on the illumination array unit 13b. Step S34: The illumination control unit 13a turns on the light emitting element 1 located at the center among the light emitting elements of the illumination array unit 13b. Step S35: The image photographing unit 17 photographs the image of the eyeball shown on the display unit 16. Step S36: The image processing unit 18 generates a binarized image by binarizing the captured image of the eyeball. Step S37: The image processing section 18 checks the quality of the original eyeball image based on a predetermined threshold value.
As the confirmation of the quality of the image, based on the original image, the pixels located in the iris part are integrated to determine the size of the area, or the pixels located in the iris part or the peripheral pixels are differentiated to determine the size. The distribution state is determined, and based on the binarized image, it is determined whether or not there is noise such as diffuse reflection due to a lens of eyeglasses.
【００３２】〈眼鏡等による乱反射〉図６は、撮影され
たもとの眼球の画像（ａ）と、２値化された眼球の画像
（ｂ）とを示す図である。眼鏡等により乱反射される光
の輝度は極めて高いので、撮影された画像においても、
極めてはっきりと表される。しかし、眼鏡のレンズ等に
よる乱反射以外による光の輝度も総じて高い場合には、
眼鏡のレンズ等による乱反射の有無を確認することが困
難となってしまう。そこで、輝度が著しく高い部分をよ
り明確にするべく、２値化された眼球の画像を生成す
る。そして、その２値化された画像に基づいて、眼鏡の
レンズ等による乱反射があるか否かを確認する。これに
より、眼鏡等による乱反射の有無を容易に確認すること
が可能となる。一般に、２値化された画像における乱反
射のすじの面積、方向、本数等は、眼鏡等のレンズ上の
傷の具合と、照射された光（本装置の場合には、照明部
から照射された光）の入射角とに依存する。<Diffuse Reflection by Glasses and the Like> FIG. 6 is a diagram showing an original image of the eyeball (a) and a binarized image of the eyeball (b). Since the luminance of light irregularly reflected by eyeglasses and the like is extremely high, even in a captured image,
Very clearly represented. However, when the luminance of light other than the irregular reflection by the lens of the glasses is generally high,
It becomes difficult to confirm the presence or absence of diffuse reflection by a lens or the like of spectacles. Therefore, a binarized image of the eyeball is generated in order to clarify a portion having extremely high luminance. Then, based on the binarized image, it is confirmed whether or not there is irregular reflection by a lens or the like of spectacles. This makes it possible to easily confirm the presence or absence of diffuse reflection by eyeglasses or the like. In general, the area, direction, number, and the like of streaks of diffuse reflection in a binarized image are determined by the degree of scratches on a lens such as eyeglasses and the amount of irradiated light (in the case of the present apparatus, the amount of light emitted from an illumination unit. Light) incident angle.
【００３３】〈画質が不良である場合〉 ステップＳ３８： 画像が不良であると判断すると、画
像処理部１８は、その旨を主制御部２１へ通知する。 ステップＳ３９： 画像が不良である旨の通知を受け
て、制御部１２は、照明制御部１３ａに対し、発光素子
１と異なる他の発光素子を点灯するように指示する。 ステップＳ４０： 制御部１２からの指示を受けた照明
制御部１３ａは、点灯している発光素子１を消灯すると
共に、その発光素子１に隣接する発光素子２を点灯す
る。以下、ステップＳ３５と同様な動作を繰り返すこと
になる。 なお、この実施例では、照明アレイ部１３ｂの発光素子
１〜ｎを一列に並べているが、点灯する発光素子が変わ
ることにより、眼球への光の入射角が変われば足りるの
で、図７（ａ）（ｂ）に示すように、円状に並べたり、
放射状に並べたりしても構わない。また、この実施例で
は、最初に中央に位置する発光素子を点灯させ、次々に
外側に位置する発光素子を点灯させるようにしている
が、例えば、最も右に位置する発光素子からその左に位
置する発光素子へと順々に点灯させても構わない。<When the image quality is poor> Step S38: When it is determined that the image is defective, the image processing section 18 notifies the main control section 21 to that effect. Step S39: Upon receiving the notification that the image is defective, the control unit 12 instructs the illumination control unit 13a to turn on another light emitting element different from the light emitting element 1. Step S40: The illumination control unit 13a that has received the instruction from the control unit 12 turns off the light emitting element 1 that is turned on, and turns on the light emitting element 2 that is adjacent to the light emitting element 1. Hereinafter, the same operation as step S35 is repeated. In this embodiment, the light-emitting elements 1 to n of the illumination array unit 13b are arranged in a line. However, it is sufficient if the incident angle of light to the eyeball changes by changing the light-emitting element to be turned on. ) As shown in FIG.
They may be arranged radially. Further, in this embodiment, the light emitting element located at the center is turned on first, and the light emitting elements located at the outside are turned on one after another. The light emitting elements may be sequentially turned on.
【００３４】〈画像が良好である場合〉 ステップＳ４１： 画像が良好であると判断すると、眼
球の画像から特徴点を抽出することにより、その特徴点
を示すデータからなる「虹彩のパターン」を主制御部２
１へ出力する。<When the image is good> Step S41: If it is determined that the image is good, a feature point is extracted from the image of the eyeball, and the “iris pattern” consisting of data indicating the feature point is mainly extracted. Control unit 2
Output to 1.
【００３５】ステップＳ４２： 主制御部２１を経由し
て虹彩のパターンを受け取る虹彩パターン比較部２２
は、データベースとして予め虹彩パターン記憶部２３に
記憶されている複数の虹彩のパターンのうちのいずれと
同一であるかを、両パターンの類似の程度を計算するこ
とにより判断する。 ステップＳ４３： 所定値を越える程度に類似する虹彩
のパターンが検索された場合には、その検索された虹彩
のパターンに関するＩＤ番号や氏名等をモニタ部２５に
表示する。そして、操作者は、入出室を始めとする所定
の行為を許可されることなる。 ステップＳ４４： 所定値を越える程度に類似する虹彩
のパターンが検索されない場合には、該当する虹彩のパ
ターンが存在しない旨をモニタ部２４に表示する。この
場合には、操作者は、上述したような所定の行為を許可
されないことになる。Step S42: An iris pattern comparing section 22 which receives an iris pattern via the main control section 21
Is determined by calculating the degree of similarity between the two patterns as to which of the plurality of iris patterns is stored in the iris pattern storage unit 23 in advance as a database. Step S43: When an iris pattern similar to a degree exceeding a predetermined value is searched, the ID number, name, and the like relating to the searched iris pattern are displayed on the monitor unit 25. Then, the operator is permitted to perform predetermined actions including entry and exit. Step S44: If an iris pattern similar to a value exceeding a predetermined value is not found, the monitor unit 24 displays that there is no corresponding iris pattern. In this case, the operator is not permitted to perform the predetermined action as described above.
【００３６】なお、この実施例における発光素子とし
て、人間が感知できない近赤外線を照射する素子を用
い、かつ、画像撮影部として近赤外線に感応する赤外線
カメラを用いることにより、発光させる発光素子を次々
に変えていく場合に、眼球の画像を撮影される者に対し
不快感をあたえることなく眼球の画像を撮影することが
できることとなる。In this embodiment, a light emitting element for emitting near-infrared light which cannot be detected by humans and an infrared camera which is sensitive to near-infrared light as an image photographing unit are used as the light emitting element in this embodiment. In this case, the image of the eyeball can be photographed without giving the person taking the image of the eyeball discomfort.
【図１】本発明の個人識別装置のブロック図である。FIG. 1 is a block diagram of a personal identification device of the present invention.
【図２】本発明の虹彩撮像装置の構成図である。FIG. 2 is a configuration diagram of an iris imaging device of the present invention.
【図３】本発明の登録処理の動作フローチャートであ
る。FIG. 3 is an operation flowchart of a registration process of the present invention.
【図４】照明の映り込みを示す図である。FIG. 4 is a diagram showing reflection of illumination.
【図５】本発明の認識処理の動作フローチャートであ
る。FIG. 5 is an operation flowchart of a recognition process according to the present invention.
【図６】２値化された眼球の画像を示す図である。FIG. 6 is a diagram showing a binarized image of an eyeball.
【図７】他の照明アレイ部の例を示す図である。FIG. 7 is a diagram illustrating an example of another illumination array unit.
【図８】従来の個人識別装置のブロック図である。FIG. 8 is a block diagram of a conventional personal identification device.
【図９】従来の虹彩撮像装置の構成を示す図である。FIG. 9 is a diagram showing a configuration of a conventional iris imaging device.
【図１０】従来の虹彩撮像装置での乱反射を示す図であ
る。FIG. 10 is a diagram showing diffuse reflection in a conventional iris imaging device.
１３ 照明部 １３ａ 照明制御部 １３ｂ 照明アレイ部 １〜ｎ 発光素子 13 lighting unit 13a lighting control unit 13b lighting array unit 1-n light emitting element
Claims (15)
入射角と異なる他の入射角で虹彩へ光を照射して、虹彩
の画像を撮影することを特徴とするに虹彩の撮像方法。1. A method of irradiating a human eyeball with light at an angle of incidence, taking an image of the eyeball with light reflected by the eyeball, determining whether the captured image of the eyeball is good, and determining that the image is not good. If it is determined, the method of irradiating an iris is performed by sequentially irradiating the iris with light at another incident angle different from the one incident angle to photograph an image of the iris.
否を、虹彩の部分の画像に含まれる雑音の量に基づいて
判断することを特徴とする虹彩の撮像方法。2. The iris imaging method according to claim 1, wherein the quality of the photographed image is determined based on the amount of noise included in the image of the iris portion.
像を２値化し、 その２値化された画像に基づき雑音の量を検出し、 その検出された雑音の量に基づいて、画像の良否を判断
することを特徴とする虹彩の撮像方法。3. The method according to claim 1, wherein the photographed image of the eyeball is binarized, the amount of noise is detected based on the binarized image, and the image of the image is detected based on the detected amount of noise. An iris imaging method characterized by judging pass / fail.
へ照射する光として近赤外線を用いることを特徴とする
虹彩の撮像方法。4. The iris imaging method according to claim 1, wherein near-infrared light is used as light to irradiate a human eyeball.
子からなる照明アレイ部と、 虹彩により反射された光によって虹彩の画像を撮影する
撮影部とからなり、 証明アレイ部における発光素子のうち、１または２以上
の発光素子を選択することにより、様々な角度から光を
照射することを特徴とする虹彩撮像装置。5. An illumination array unit comprising a plurality of light emitting elements for irradiating a human eye with light, and an imaging unit for photographing an image of the iris by light reflected by the iris. An iris imaging apparatus characterized in that light is emitted from various angles by selecting one or more light emitting elements.
る複数の発光素子のうち一の発光素子のみが順次、光を
照射することを特徴とする虹彩撮像装置。6. The iris imaging device according to claim 5, wherein only one of the plurality of light emitting elements in the illumination array unit sequentially emits light.
列に並べられた複数の発光素子からなることを特徴とす
る虹彩撮像装置。7. The iris imaging device according to claim 6, wherein the illumination array unit includes a plurality of light emitting elements arranged in a line.
状に並べられた複数の発光素子からなることを特徴とす
る虹彩撮像装置。8. The iris imaging device according to claim 6, wherein the illumination array unit includes a plurality of light emitting elements arranged in a circle.
射線状に並べられた複数の発光素子からなることを特徴
とする虹彩撮像装置。9. The iris imaging device according to claim 6, wherein the illumination array unit includes a plurality of light emitting elements arranged in a radial pattern.
画像の良否を、予め定められた閾値を元にして判別する
画像処理部を有しており、 一の発光素子の光により撮影した眼球の画像がその閾値
を越えない場合に、他の発光素子により撮影した眼球の
画像を撮影し、その新たに撮影された画像の良否を判別
するという動作を繰り返すことにより、その閾値を越え
る眼球の画像を選択することを特徴とする虹彩撮影装
置。10. The eyeball according to claim 6, further comprising an image processing unit for judging the quality of the taken eyeball image based on a predetermined threshold. If the image of the eyeball does not exceed the threshold, the image of the eyeball captured by another light emitting element is captured, and the operation of determining whether the newly captured image is good or not is repeated. An iris photographing device for selecting an image.
虹彩の画像に含まれる雑音の量を元にして、画像の良否
を判別することを特徴とする虹彩撮影装置。11. The image processing device according to claim 10, wherein:
An iris photographing apparatus characterized in that the quality of an image is determined based on the amount of noise included in the iris image.
撮影された眼球の画像を２値化し、２値化された画像に
基づき虹彩の部分に含まれる雑音の量を検出することを
特徴とする虹彩撮像装置。12. The image processing device according to claim 11, wherein:
An iris imaging apparatus, comprising: binarizing a captured image of an eyeball; and detecting an amount of noise included in an iris portion based on the binarized image.
選択された眼球の画像から、虹彩の特徴点を抽出するこ
とにより、虹彩のパターンを取得することを特徴とする
虹彩撮影装置。13. The image processing device according to claim 10, wherein:
An iris photographing apparatus characterized by acquiring an iris pattern by extracting feature points of the iris from an image of a selected eyeball.
が、近赤外線を照射する発光素子からなり、画像撮像部
が、近赤外線に感応する近赤外線カメラからなることを
特徴とする虹彩撮像装置。14. The iris imaging device according to claim 10, wherein the illumination array unit includes a light emitting element that emits near infrared rays, and the image imaging unit includes a near infrared camera that is sensitive to near infrared rays.
素子からなる照明アレイ部と、 眼球に反射された光により眼球の画像を撮影する画像撮
影部と、 一の発光素子が照射した光を通じて撮影された眼球の画
像の良否を、予め定めれた閾値に基づいて判別し、か
つ、その閾値を越える眼球の画像について、虹彩の部分
の画像から虹彩のパターンを取得する画像処理部と、 予め複数の人間の虹彩のパターンを記憶している虹彩パ
ターン記憶部と、 新たに取得された虹彩パターンと、既に虹彩パターン記
憶部に記憶されている虹彩パターンとを比較する虹彩パ
ターン比較部とからなり、 一の発光素子の光により撮影された画像がその閾値を越
えない場合には、他の発光素子の光により再び画像を撮
影し直すことを繰り返すことにより、その閾値を越える
良好な眼球の画像を撮影し、その良好な眼球の画像にお
ける虹彩の部分の画像に基づいて、虹彩のパターンを取
得し、虹彩パターン比較部が、その取得された虹彩のパ
ターンと、虹彩パターン記憶部に記憶されている虹彩の
パターンとを比較することにより個人を識別することを
特徴とする個人識別装置。15. An illumination array unit comprising a plurality of light emitting elements for irradiating light to a human eyeball, an image photographing unit for photographing an image of an eyeball by light reflected on the eyeball, and light emitted by one light emitting element. Whether the quality of the image of the eyeball photographed through is determined based on a predetermined threshold, and, for the image of the eyeball exceeding the threshold, an image processing unit that acquires an iris pattern from the image of the iris portion, An iris pattern storage unit that stores a plurality of human iris patterns in advance; and an iris pattern comparison unit that compares a newly acquired iris pattern with an iris pattern already stored in the iris pattern storage unit. If the image taken by the light of one light emitting element does not exceed the threshold, the image is again taken again by the light of the other light emitting element, and the threshold is repeated. A good iris image is captured based on an image of an iris portion in the good pupil image, and an iris pattern comparing unit obtains the iris pattern and the obtained iris pattern, An individual identification device for identifying an individual by comparing with an iris pattern stored in a storage unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17859296A JP3337913B2 (en) | 1996-06-19 | 1996-06-19 | Iris imaging method and imaging device thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17859296A JP3337913B2 (en) | 1996-06-19 | 1996-06-19 | Iris imaging method and imaging device thereof |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH105195A true JPH105195A (en) | 1998-01-13 |
| JP3337913B2 JP3337913B2 (en) | 2002-10-28 |
Family
ID=16051163
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP17859296A Expired - Fee Related JP3337913B2 (en) | 1996-06-19 | 1996-06-19 | Iris imaging method and imaging device thereof |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3337913B2 (en) |
Cited By (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000060825A (en) * | 1998-08-17 | 2000-02-29 | Oki Electric Ind Co Ltd | Iris recognition device |
| JP2000298727A (en) * | 1999-03-23 | 2000-10-24 | Lg Electronics Inc | Forgery discrimination method of iris recognition system |
| JP2001524703A (en) * | 1997-12-01 | 2001-12-04 | センサー インコーポレイテッド | Method and apparatus for illuminating and imaging eyes through glasses using multiple light sources |
| JP2002352229A (en) * | 2001-05-30 | 2002-12-06 | Mitsubishi Electric Corp | Face part detection device |
| US6591001B1 (en) | 1998-10-26 | 2003-07-08 | Oki Electric Industry Co., Ltd. | Image-input device |
| KR20030077126A (en) * | 2002-03-25 | 2003-10-01 | 엘지전자 주식회사 | System for removing of optical reflection in iris recognition of pc and the method |
| JP2004030564A (en) * | 2002-02-05 | 2004-01-29 | Matsushita Electric Ind Co Ltd | Personal authentication method, personal authentication device and photographing device |
| WO2005020149A1 (en) * | 2003-08-22 | 2005-03-03 | Matsushita Electric Industrial Co., Ltd. | Image input device and authentication device using the same |
| JP2006209213A (en) * | 2005-01-25 | 2006-08-10 | Oki Electric Ind Co Ltd | Iris photographing device |
| US7155035B2 (en) | 2002-02-05 | 2006-12-26 | Matsushita Electric Industrial Co., Ltd. | Personal authentication method, personal authentication apparatus and image capturing device |
| US7216982B2 (en) | 2003-07-01 | 2007-05-15 | Matsushita Electric Industrial Co., Ltd. | Eye image taking device |
| US7312818B2 (en) | 2001-07-24 | 2007-12-25 | Matsushita Electric Industrial Co., Ltd. | Iris image pickup apparatus |
| JP2009193349A (en) * | 2008-02-14 | 2009-08-27 | Panasonic Electric Works Co Ltd | Face recognition device |
| JP2009258991A (en) * | 2008-04-16 | 2009-11-05 | Panasonic Electric Works Co Ltd | Face image registration device |
| JP2013527775A (en) * | 2010-03-23 | 2013-07-04 | ニューロビジョン イメージング，エルエルシー | Apparatus and method for imaging an eye |
| CN104768447A (en) * | 2012-09-12 | 2015-07-08 | 特里维迪公司 | Device for imaging an eye |
| WO2020261424A1 (en) | 2019-06-26 | 2020-12-30 | 日本電気株式会社 | Iris recognition device, iris recognition method, computer program, and recording medium |
| WO2021171505A1 (en) | 2020-02-27 | 2021-09-02 | 日本電気株式会社 | Image capturing system, image capturing method, and computer-readable medium |
| CN113536863A (en) * | 2020-04-22 | 2021-10-22 | 上海聚虹光电科技有限公司 | Spectral band selection method for self-adaptive iris gray scale |
| US12367711B2 (en) | 2019-06-26 | 2025-07-22 | Nec Corporation | Iris recognition apparatus, iris recognition method, computer program and recording medium |
| US12368965B2 (en) | 2020-07-16 | 2025-07-22 | Nec Corporation | Imaging system, imaging method, and computer program |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016142752A1 (en) * | 2015-03-12 | 2016-09-15 | Forus Health Private Limited | Method and computing unit for imaging of wider angle fundus of an eye of a subject |
| JP6956985B1 (en) | 2020-12-22 | 2021-11-02 | 株式会社スワローインキュベート | Eye detection method, eye detection device and eye detection program |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS62501889A (en) * | 1985-02-20 | 1987-07-30 | フロム，レオナ−ド | iris recognition system |
-
1996
- 1996-06-19 JP JP17859296A patent/JP3337913B2/en not_active Expired - Fee Related
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS62501889A (en) * | 1985-02-20 | 1987-07-30 | フロム，レオナ−ド | iris recognition system |
Cited By (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001524703A (en) * | 1997-12-01 | 2001-12-04 | センサー インコーポレイテッド | Method and apparatus for illuminating and imaging eyes through glasses using multiple light sources |
| JP2000060825A (en) * | 1998-08-17 | 2000-02-29 | Oki Electric Ind Co Ltd | Iris recognition device |
| US6591001B1 (en) | 1998-10-26 | 2003-07-08 | Oki Electric Industry Co., Ltd. | Image-input device |
| JP2000298727A (en) * | 1999-03-23 | 2000-10-24 | Lg Electronics Inc | Forgery discrimination method of iris recognition system |
| JP2002352229A (en) * | 2001-05-30 | 2002-12-06 | Mitsubishi Electric Corp | Face part detection device |
| US7312818B2 (en) | 2001-07-24 | 2007-12-25 | Matsushita Electric Industrial Co., Ltd. | Iris image pickup apparatus |
| JP2004030564A (en) * | 2002-02-05 | 2004-01-29 | Matsushita Electric Ind Co Ltd | Personal authentication method, personal authentication device and photographing device |
| US7155035B2 (en) | 2002-02-05 | 2006-12-26 | Matsushita Electric Industrial Co., Ltd. | Personal authentication method, personal authentication apparatus and image capturing device |
| KR20030077126A (en) * | 2002-03-25 | 2003-10-01 | 엘지전자 주식회사 | System for removing of optical reflection in iris recognition of pc and the method |
| US7216982B2 (en) | 2003-07-01 | 2007-05-15 | Matsushita Electric Industrial Co., Ltd. | Eye image taking device |
| CN100338628C (en) * | 2003-07-01 | 2007-09-19 | 松下电器产业株式会社 | Eye imaging device |
| WO2005020149A1 (en) * | 2003-08-22 | 2005-03-03 | Matsushita Electric Industrial Co., Ltd. | Image input device and authentication device using the same |
| CN1333374C (en) * | 2003-08-22 | 2007-08-22 | 松下电器产业株式会社 | Image input device and authentication device using the same |
| JP2006209213A (en) * | 2005-01-25 | 2006-08-10 | Oki Electric Ind Co Ltd | Iris photographing device |
| JP2009193349A (en) * | 2008-02-14 | 2009-08-27 | Panasonic Electric Works Co Ltd | Face recognition device |
| JP2009258991A (en) * | 2008-04-16 | 2009-11-05 | Panasonic Electric Works Co Ltd | Face image registration device |
| JP2013527775A (en) * | 2010-03-23 | 2013-07-04 | ニューロビジョン イメージング，エルエルシー | Apparatus and method for imaging an eye |
| JP2014193410A (en) * | 2010-03-23 | 2014-10-09 | Neurovision Imaging Llc | Apparatus and method for imaging eye |
| CN104768447A (en) * | 2012-09-12 | 2015-07-08 | 特里维迪公司 | Device for imaging an eye |
| US9770168B2 (en) | 2012-09-12 | 2017-09-26 | Trividi Oy | Device for imaging an eye |
| US12367711B2 (en) | 2019-06-26 | 2025-07-22 | Nec Corporation | Iris recognition apparatus, iris recognition method, computer program and recording medium |
| WO2020261424A1 (en) | 2019-06-26 | 2020-12-30 | 日本電気株式会社 | Iris recognition device, iris recognition method, computer program, and recording medium |
| US12462608B2 (en) | 2019-06-26 | 2025-11-04 | Nec Corporation | Iris recognition apparatus, iris recognition method, computer program and recording medium |
| US11861943B2 (en) | 2019-06-26 | 2024-01-02 | Nec Corporation | Iris recognition apparatus, iris recognition method, computer program and recording medium |
| WO2021171505A1 (en) | 2020-02-27 | 2021-09-02 | 日本電気株式会社 | Image capturing system, image capturing method, and computer-readable medium |
| US12283077B2 (en) | 2020-02-27 | 2025-04-22 | Nec Corporation | Imaging system, imaging method, and computer readable medium |
| US12198393B2 (en) | 2020-02-27 | 2025-01-14 | Nec Corporation | Imaging system, imaging method, and computer readable medium |
| CN113536863A (en) * | 2020-04-22 | 2021-10-22 | 上海聚虹光电科技有限公司 | Spectral band selection method for self-adaptive iris gray scale |
| US12368965B2 (en) | 2020-07-16 | 2025-07-22 | Nec Corporation | Imaging system, imaging method, and computer program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3337913B2 (en) | 2002-10-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3337913B2 (en) | Iris imaging method and imaging device thereof | |
| US5978494A (en) | Method of selecting the best enroll image for personal identification | |
| US8170293B2 (en) | Multimodal ocular biometric system and methods | |
| US8803963B2 (en) | Vein pattern recognition based biometric system and methods thereof | |
| KR100342159B1 (en) | Apparatus and method for acquiring iris images | |
| JP3562970B2 (en) | Biological identification device | |
| EP2151191B1 (en) | Living eye judging method and device | |
| CN1333374C (en) | Image input device and authentication device using the same | |
| US8514277B2 (en) | Video infrared retinal image scanner | |
| JP2007527270A (en) | Biological face recognition system | |
| KR20220052828A (en) | Biometric authentication apparatus and biometric authentication method | |
| CN101119679A (en) | Biometric identification device, authentication device, and biometric identification method | |
| JP2007516525A (en) | Method and system for facial image acquisition and identification | |
| JPH11244261A (en) | Iris recognition method and device thereof, data conversion method and device thereof | |
| JP3586456B2 (en) | Personal authentication method and personal authentication device | |
| KR20060035620A (en) | Biometric Discrimination Device, Authentication Device and Biometric Discrimination Method Using the Same | |
| US20100309303A1 (en) | Person recognition method and device incorporating the anatomic location of the retina as a biometric constant, corresponding to the physiological location of the projection of the visual axis. | |
| JP6621383B2 (en) | Personal authentication device | |
| He et al. | Contactless autofeedback iris capture design | |
| KR20010006975A (en) | A method for identifying the iris of persons based on the reaction of the pupil and autonomous nervous wreath | |
| JPH10137220A (en) | Individual identifying device | |
| JP4063583B2 (en) | Digital camera | |
| JP2006031185A (en) | Photographing device and individual identification device | |
| JP3848953B2 (en) | Living body eye determination method and living body eye determination device | |
| JP2004086614A (en) | Eye image pickup device and eye image authentication device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070809 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080809 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090809 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090809 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100809 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100809 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110809 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120809 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |