JPH07209576A - Optical detection device and focus control device - Google Patents
Optical detection device and focus control deviceInfo
- Publication number
- JPH07209576A JPH07209576A JP6002866A JP286694A JPH07209576A JP H07209576 A JPH07209576 A JP H07209576A JP 6002866 A JP6002866 A JP 6002866A JP 286694 A JP286694 A JP 286694A JP H07209576 A JPH07209576 A JP H07209576A
- Authority
- JP
- Japan
- Prior art keywords
- image
- focus
- image pickup
- frequency component
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Automatic Focus Adjustment (AREA)
Abstract
(57)【要約】
【目的】 高速度のフォーカス制御動作が可能なフォー
カス制御装置を提供すること。
【構成】 撮像被写体からのカメラ入射光線はフォーカ
スレンズ駆動装置20で駆動されるフォーカスレンズ1
0、および絞り駆動回路21で駆動される絞り機構11
を含む光学系で結像され、CCDより成る撮像素子13
に入来する。撮像素子13の出力は可変利得回路22に
供給され、絞りの変化によって撮像素子13から出力さ
れる画像信号レベルが補正される。そして可変利得回路
22の出力は、高域成分検出回路15に供給され、この
高域成分検出回路15によって合焦評価値に変換され、
処理回路16に供給される。処理回路16では相対結像
位置および絞りの大きさを変化した時に得られた合焦評
価値をもとに、被写体の合焦位置が推定され、推定され
た合焦位置に対応してレンズを移動させる。
(57) [Abstract] [Purpose] To provide a focus control device capable of high-speed focus control operation. [Structure] A focus lens 1 driven by a focus lens driving device 20 is a light beam incident on a camera from an imaging subject.
0, and the diaphragm mechanism 11 driven by the diaphragm drive circuit 21.
Imaging device 13 which is formed by an optical system including
Come in. The output of the image sensor 13 is supplied to the variable gain circuit 22, and the image signal level output from the image sensor 13 is corrected by the change of the diaphragm. Then, the output of the variable gain circuit 22 is supplied to the high frequency component detection circuit 15, and is converted into a focus evaluation value by the high frequency component detection circuit 15.
It is supplied to the processing circuit 16. The processing circuit 16 estimates the in-focus position of the subject based on the in-focus evaluation value obtained when the relative image formation position and the size of the aperture are changed, and the lens is moved in correspondence with the estimated in-focus position. To move.
Description
【0001】[0001]
【産業上の利用分野】本発明は、レンズボケ量の検出、
また被写体までの距離を推定する光学的検出装置、およ
び例えばビデオカメラに用いて好適なフォーカス制御装
置に関する。BACKGROUND OF THE INVENTION The present invention relates to detection of the amount of lens blur,
The present invention also relates to an optical detection device that estimates the distance to a subject, and a focus control device that is suitable for use in, for example, a video camera.
【0002】[0002]
【従来の技術】民生用のビデオカメラにおいては、いわ
ゆるオートフォーカス機能が搭載されており、被写体に
対するフォーカスを自動的に調整し得るように成されて
いる。図11は従来のビデオカメラにおけるフオーカス
制御装置の構成例を示している。フオーカスレンズ2
は、図示せぬ被写体の像を例えばCCD等より成る撮像
素子3に結像させる。撮像素子3は、この像に対応する
画像信号(ビデオ信号)をA/D変換器4に出力する。
A/D変換器4は、入力されたビデオ信号をA/D変換
し、カメラ信号処理回路5に出力するとともに、フィル
タ6に出力する。2. Description of the Related Art Consumer video cameras are equipped with a so-called autofocus function so that the focus on a subject can be automatically adjusted. FIG. 11 shows a configuration example of a focus control device in a conventional video camera. Focus lens 2
Forms an image of a subject (not shown) on the image sensor 3 such as a CCD. The image sensor 3 outputs an image signal (video signal) corresponding to this image to the A / D converter 4.
The A / D converter 4 A / D-converts the input video signal and outputs it to the camera signal processing circuit 5 and the filter 6.
【0003】フィルタ6は、ハイパスフィルタ或いはバ
ンドパスフィルタにより構成され、入力されたデジタル
ビデオ信号の高域成分を抽出し、検波回路7に出力す
る。検波回路7は、入力されたビデオ信号をフィールド
単位で検波演算し、ピント評価値を生成し、マイクロコ
ンピュータ8に供給する。The filter 6 is composed of a high pass filter or a band pass filter, extracts the high frequency component of the input digital video signal, and outputs it to the detection circuit 7. The detection circuit 7 detects the input video signal in field units, generates a focus evaluation value, and supplies the focus evaluation value to the microcomputer 8.
【0004】マイクロコンピュータ8は、いわゆる山登
りオートフォーカス方式の処理を実行し、フォーカスエ
ラー信号を生成する。そして、このフォーカスエラー信
号に対応して、ステッピングモータ1を駆動し、フォー
カスレンズ2を撮像素子3に対して相対的に所定の位置
に移動させる。これにより撮像素子3上に被写体の像が
正しく結像されるようにフォーカス制御される。The microcomputer 8 executes a so-called hill-climbing autofocus system process to generate a focus error signal. Then, in response to this focus error signal, the stepping motor 1 is driven to move the focus lens 2 to a predetermined position relative to the image sensor 3. As a result, focus control is performed so that the image of the subject is correctly formed on the image sensor 3.
【0005】図12は前記した山登りオートフォーカス
方式を実行するマイクロコンピュータ8における演算処
理をフローチャートで示したものである。まず最初にス
テップS51において、オートフォーカス動作を開始す
る必要があるか否かを判定し、その必要がある場合にお
いてはステップS52に進み、マイクロコンピュータ8
はステッピングモータ1を駆動し、フオーカスレンズ2
を撮像素子3から遠ざける方向または近づける方向のい
ずれかの方向に移動させる。FIG. 12 is a flow chart showing the arithmetic processing in the microcomputer 8 which executes the above-mentioned hill-climbing autofocus system. First, in step S51, it is determined whether or not it is necessary to start the autofocus operation, and if it is necessary, the process proceeds to step S52 and the microcomputer 8
Drives the stepping motor 1 and the focus lens 2
Is moved in either the direction of moving away from the image pickup device 3 or the direction of approaching it.
【0006】次にステップS53において、フォーカス
レンズ2を移動した後の検波回路7より供給されるピン
ト評価値を得て、その成分がフォーカスレンズ2を移動
する前に比べて増加したか否かを判定する。すなわち、
検波回路7が出力するピント評価値は図13に示すよう
に、合焦位置を中心としてフォーカスレンズ2が、その
位置から撮像素子3に近づく方向に離れても、或いはま
た逆に遠ざかる方向に離れても、その値が小さくなる。
換言すれば、フォーカスレンズ2をピント評価値が大き
くなる方向に移動させれば、合焦状態を実現することが
できる。Next, in step S53, the focus evaluation value supplied from the detection circuit 7 after the focus lens 2 has been moved is obtained, and it is determined whether or not the component has increased compared to before the focus lens 2 was moved. judge. That is,
As shown in FIG. 13, the focus evaluation value output from the detection circuit 7 is separated from the focus lens 2 in the direction of approaching the image sensor 3 or vice versa with respect to the focus position. However, the value becomes small.
In other words, the focus state can be realized by moving the focus lens 2 in the direction in which the focus evaluation value increases.
【0007】そこで、フォーカスレンズ2を移動する前
に比べて、移動した後のピント評価値の値が大きくなっ
た場合においては、ステップS53からステップS55
に進み、フォーカスレンズ2を同一の方向にさらに移動
させる。Therefore, when the focus evaluation value after the focus lens 2 is moved is larger than that before the focus lens 2 is moved, the steps S53 to S55 are performed.
Then, the focus lens 2 is further moved in the same direction.
【0008】これに対して、フォーカスレンズ2を移動
する前に比べて、移動した後のピント評価値の値が小さ
くなった場合においては、ステップS54に進みフォー
カスレンズ2の移動する方向を反転させる。そしてステ
ップS55に進み、その反転方向にフォーカスレンズ2
を移動させる。On the other hand, when the focus evaluation value after the movement is smaller than that before the movement of the focus lens 2, the process proceeds to step S54 and the moving direction of the focus lens 2 is reversed. . Then, the process proceeds to step S55, and the focus lens 2 is turned in the reverse direction.
To move.
【0009】すなわち、これにより今フォーカスレンズ
2は合焦位置に向かって移動されていることになる。そ
こでステップS56において、再び検波回路7が出力す
るピント評価値の値をフォーカスレンズ2の移動前の値
と比較し、その値が大きくなっていれば、そのままフォ
ーカスレンズ2を移動させる。そしてピント評価値の値
が増加しなくなくった時(合焦位置を若干行き過ぎた
時)、ステップS57に進み、フォーカスレンズ2を若
干戻して合焦位置に配置し、そこで停止させる。That is, the focus lens 2 is now moved toward the in-focus position. Therefore, in step S56, the value of the focus evaluation value output from the detection circuit 7 is again compared with the value before the movement of the focus lens 2, and if the value is large, the focus lens 2 is moved as it is. Then, when the focus evaluation value does not increase (when the focus position is slightly overshooted), the process proceeds to step S57, the focus lens 2 is slightly returned to the focus position, and then stopped.
【0010】このように山登りフォーカス方式は、フェ
イズ1乃至フェイズ3の3つのフェイズにより構成され
ることになる。すなわち、ステップS51乃至S54よ
り成るフェイズ1においては、フォーカスレンズ2をと
りあえず、撮像素子3から遠ざかる方向或いは近づく方
向に若干移動させる。そして、この移動によりピント評
価値が増加したか否かを判定することで、合焦位置の方
向を判定する。合焦位置の方向が逆方向であった場合に
おいては、フォーカスレンズ2の移動方向を反転させ
る。次にステップS55およびステップS56より成る
フェイズ2において、ピント評価値のピーク値(合焦位
置)を検出する。そして、さらにフェイズ3において、
フェイズ2でピント評価値のピーク値が検出された時、
そこでフォーカスレンズ2を停止させる。As described above, the hill-climbing focus system is composed of three phases, phase 1 to phase 3. That is, in the phase 1 including steps S51 to S54, the focus lens 2 is not moved for the time being, but slightly moved in a direction away from or closer to the image sensor 3. Then, the direction of the in-focus position is determined by determining whether or not the focus evaluation value has increased due to this movement. When the direction of the in-focus position is the opposite direction, the moving direction of the focus lens 2 is reversed. Next, in Phase 2 including steps S55 and S56, the peak value (focus position) of the focus evaluation value is detected. And in Phase 3,
When the peak focus evaluation value is detected in Phase 2,
Therefore, the focus lens 2 is stopped.
【0011】以上のように、山登りフォーカス方式は、
測距用のディバイスを必要とせずに、比較的簡単に高精
度のオートフォーカス動作を実現することができる。As described above, the hill climbing focus system is
A highly accurate autofocus operation can be realized relatively easily without the need for a distance measuring device.
【0012】[0012]
【発明が解決しようとする課題】ところで、前記した山
登りフォーカス方式は、ピント評価値の大きさのみを判
定するため、合焦位置の方向を求めることはできるが、
合焦位置そのものが、どこに有るのか(合焦位置上のレ
ンズ位置)を推定することはできない。このために合焦
位置にフォーカスレンズ2を迅速に移動配置させること
が比較的困難である。By the way, in the above-mentioned hill-climbing focus method, since only the size of the focus evaluation value is determined, the direction of the in-focus position can be obtained.
It is impossible to estimate where the focus position itself is (lens position on the focus position). Therefore, it is relatively difficult to move the focus lens 2 quickly to the in-focus position.
【0013】また、この山登りフォーカス方式は、距離
の異なる位置に複数の被写体が存在する場合、オートフ
ォーカス制御動作が不安定になるという問題点を有して
いる。特に画面の中央の被写体よりもコントラストが強
い被写体が背景に存在する場合、背景の被写体に合焦し
てしまう。Further, the hill-climbing focus system has a problem that the auto-focus control operation becomes unstable when a plurality of subjects exist at different distances. In particular, when a subject having a higher contrast than the subject in the center of the screen exists in the background, the subject in the background is focused.
【0014】この場合、例えば図14に示すように、複
数のピント検出領域A,Bを設け、各領域のピント評価
値の中から適切なピント評価値を選んでフォーカス制御
を行うことも考えられる。しかしながら、山登りフォー
カス方式においては、複数の領域A,Bの合焦位置を同
時に検出することができないため、フォーカスレンズ2
の移動すべき方向を迅速に判定することが困難になる。In this case, for example, as shown in FIG. 14, it is possible to provide a plurality of focus detection areas A and B, and select an appropriate focus evaluation value from the focus evaluation values of each area to perform focus control. . However, in the hill-climbing focus method, the focus positions of the plurality of areas A and B cannot be detected simultaneously, so the focus lens 2
It becomes difficult to quickly determine the direction to move.
【0015】本発明は、以上のような状況に鑑みて成さ
れたものであり、高速かつより正確にフオーカス制御を
実行することができるようにするものである。また本発
明は、レンズボケ量の検出、さらに被写体までの距離を
推定できる光学的検出装置を提供するものである。The present invention has been made in view of the above situation, and it is possible to perform focus control at high speed and more accurately. The present invention also provides an optical detection device capable of detecting the amount of lens blur and estimating the distance to the subject.
【0016】[0016]
【課題を解決するための手段】本発明の光学的検出装置
は、フォーカスレンズによる光学手段を介した被写体の
結像位置が相対的に異なる位置に結像されるように成さ
れた複数の撮像素子より成る撮像手段、またはフォーカ
スレンズによる光学手段を介した被写体の結像位置を周
期的に変化させることで時分割で結像状態が変化される
撮像素子より成る撮像手段を有し、またフォーカスレン
ズにおける絞りの大きさを制御する絞り制御手段と、撮
像手段によって得られる画像信号の高域成分を抽出する
高域成分抽出手段とが基本的に具備される。そして絞り
制御手段により絞りの大きさを所定量変化させた時に、
高域成分抽出手段より得られる画像信号の高域成分よ
り、画像のボケ特性を推定するボケ特性推定手段とを具
備することを特徴とする。According to the optical detecting device of the present invention, a plurality of image pickups are formed so that the image forming positions of the subject through the optical means by the focus lens are imaged at relatively different positions. The image pickup means is composed of an element, or the image pickup means is composed of an image pickup element whose image formation state is changed in a time-sharing manner by periodically changing the image formation position of the subject through the optical means by the focus lens. A diaphragm control means for controlling the size of the diaphragm in the lens and a high frequency component extraction means for extracting high frequency components of the image signal obtained by the imaging means are basically provided. Then, when the aperture size is changed by a predetermined amount by the aperture control means,
A blur characteristic estimating means for estimating the blur characteristic of an image from the high frequency component of the image signal obtained by the high frequency component extracting means.
【0017】また本発明の光学的検出装置は、さらにフ
ォーカスレンズにおける焦点距離に関するデータを取得
する焦点距離取得手段が加えられ、絞り制御手段により
絞りの大きさを所定量変化させた時に、高域成分抽出手
段より得られる画像信号の高域成分と、焦点距離取得手
段により得られる焦点距離に関するデータとによりフォ
ーカスレンズと被写体との距離を推定する距離推定手段
とを具備することを特徴とする。Further, the optical detecting device of the present invention further includes a focal length acquiring means for acquiring data on the focal length of the focus lens, and when the size of the diaphragm is changed by a predetermined amount by the diaphragm control means, a high frequency range is obtained. It is characterized by comprising distance estimation means for estimating the distance between the focus lens and the subject based on the high frequency component of the image signal obtained by the component extraction means and the data relating to the focal length obtained by the focal length acquisition means.
【0018】さらに本発明のフォーカス制御装置は、フ
ォーカスレンズを介した被写体の結像位置を周期的に変
化させることで時分割で結像状態が変化される撮像素子
より成る撮像手段と、フォーカスレンズにおける絞りの
大きさを制御する絞り制御手段と、撮像手段によって得
られる画像信号の高域成分を抽出する高域成分抽出手段
と、絞り制御手段により絞りの大きさを所定量変化させ
た時に、高域成分抽出手段より得られる画像信号の高域
成分より、画像のボケ特性を推定するボケ特性推定手段
と、ボケ特性推定手段によって得られるボケ特性に基づ
いて撮像素子に対する被写体の合焦位置を推定する合焦
位置推定手段と、合焦位置推定手段によって得られる推
定値に基づいて光学手段と撮像素子との相対位置を変化
させる移動手段とを備えることを特徴とする。Further, the focus control device of the present invention comprises an image pickup means comprising an image pickup element whose image formation state is changed in a time division manner by periodically changing the image formation position of the subject through the focus lens, and the focus lens. Aperture control means for controlling the size of the aperture in, the high frequency component extraction means for extracting the high frequency component of the image signal obtained by the imaging means, and when the aperture size is changed by a predetermined amount by the aperture control means, From the high-frequency components of the image signal obtained by the high-frequency component extraction means, the blur characteristic estimating means for estimating the blur characteristic of the image, and the focus position of the subject with respect to the image sensor based on the blur characteristic obtained by the blur characteristic estimating means In-focus position estimating means for estimating, and moving means for changing the relative position between the optical means and the image sensor based on the estimated value obtained by the in-focus position estimating means. Characterized in that it comprises.
【0019】[0019]
【作用】前記構成の光学的検出装置においては、被写体
の結像位置が相対的に異なる位置に配置された複数の撮
像素子、または被写体の結像位置が時分割で異なるよう
に制御される撮像素子より、画像信号がもたらされる。
この画像信号は高域成分抽出手段に供給されて、画像の
注目領域における画像信号中の高域成分が抽出される。
そしてボケ特性推定手段により、フォーカスレンズの絞
りの大きさを所定量変化させた時の画像信号の高域成分
の変化により画像の注目領域のボケ特性が推定される。
従ってこのボケ特性推定手段によりボケ量検出装置が実
現できる。In the optical detecting device having the above-mentioned structure, a plurality of image pickup elements arranged at positions where the image forming position of the subject is relatively different, or an image pickup in which the image forming position of the subject is controlled to be different in time division The element provides an image signal.
This image signal is supplied to the high frequency component extraction means, and the high frequency component in the image signal in the attention area of the image is extracted.
Then, the blur characteristic estimating unit estimates the blur characteristic of the attention area of the image by the change of the high frequency component of the image signal when the size of the aperture of the focus lens is changed by a predetermined amount.
Therefore, the blur amount detecting device can be realized by the blur characteristic estimating means.
【0020】また距離推定手段によりフォーカスレンズ
の絞りを所定量変化させた時の画像信号の高域成分と、
フォーカスレンズの焦点距離に関するデータとによりフ
ォーカスレンズと被写体との距離が推定される。従って
この距離推定手段により、被写体までの距離を検出する
ことが可能であり、距離検出装置が実現できる。The high frequency component of the image signal when the aperture of the focus lens is changed by a predetermined amount by the distance estimating means,
The distance between the focus lens and the subject is estimated based on the data regarding the focal length of the focus lens. Therefore, the distance estimation means can detect the distance to the subject, and the distance detection device can be realized.
【0021】また前記構成のフォーカス制御装置におい
ては、合焦位置推定手段によって、ボケ特性に基づく撮
像素子に対する被写体の合焦位置が推定され、この推定
値に基づいて移動手段によってフォーカスレンズと撮像
素子との相対位置が変化される。従って合焦位置推定手
段によって得られる撮像素子に対する被写体の合焦位置
に対応してレンズを迅速に合焦位置に移動させることが
可能となり、高速度のフォーカス制御動作が可能とな
る。In the focus control device having the above structure, the focus position estimating means estimates the focus position of the object with respect to the image pickup element based on the blur characteristic, and the moving means uses the estimated value to estimate the focus lens and the image pickup element. The relative position with is changed. Therefore, it becomes possible to quickly move the lens to the in-focus position corresponding to the in-focus position of the subject with respect to the image pickup device obtained by the in-focus position estimating means, and the high-speed focus control operation becomes possible.
【0022】[0022]
【実施例】図1は、本発明の第1の実施例(光学的検出
装置)の構成をブロック図によって示したものである。
図1において、光学手段としてのフオーカスレンズ10
は図示せぬ被写体の像を絞り機構11を介してハーフミ
ラー12aを含む光学素子12に投射させるように成さ
れている。このハーフミラー12aによって分割された
被写体の像は、相対的に異なる位置に配置された撮像手
段である2枚のCCDより成る撮像素子13a,13b
にそれぞれ投射される。1 is a block diagram showing the configuration of the first embodiment (optical detection device) of the present invention.
In FIG. 1, a focus lens 10 as an optical means.
Is configured to project an image of a subject (not shown) onto the optical element 12 including the half mirror 12a via the diaphragm mechanism 11. The images of the subject divided by the half mirror 12a are image pickup devices 13a and 13b formed of two CCDs which are image pickup means arranged at relatively different positions.
Is projected on each.
【0023】前記第1の撮像素子13a(以下CCD1
と称する)は、ハーフミラー12aの透過光軸上に位置
する光学素子12の直後に配置され、また第2の撮像素
子13b(以下CCD2と称する)は、フオーカスレン
ズ10の光軸上に対して90度屈曲されたハーフミラー
12aの反射光軸上に位置する光学素子12の側面部に
透過板14を介して配置されている。前記透過板14
は、後で説明するように2ddの厚さを有しており、こ
の2ddの厚さを有する透過板14を介在させること
で、CCD1およびCCD2に対する被写体の結像位置
が相対的に異なる位置になるように成されている。The first image pickup device 13a (hereinafter CCD 1)
Is arranged immediately after the optical element 12 located on the transmission optical axis of the half mirror 12a, and the second image pickup element 13b (hereinafter referred to as CCD 2) is arranged on the optical axis of the focus lens 10. Is arranged on the side surface of the optical element 12 located on the reflection optical axis of the half mirror 12a bent by 90 degrees via a transmission plate 14. The transmission plate 14
Has a thickness of 2 dd, as will be described later, and by interposing a transmission plate 14 having a thickness of 2 dd, the imaging positions of the subject on the CCD 1 and CCD 2 are relatively different. Is made to be.
【0024】前記CCD1は、結像された被写体の像に
対応する画像信号(ビデオ信号)を高域成分抽出手段と
しての高域成分抽出回路(ハイパスフィルタ回路)15
aに供給する。またCCD2は、結像された被写体の像
に対応する画像信号(ビデオ信号)を高域成分抽出手段
としての高域成分抽出回路15bに供給する。これら高
域成分抽出回路15aおよび15bは、図では詳細に示
していないが、それぞれのCCD1,CCD2から供給
される画像信号を増幅する前置増幅器と、この前置増幅
器の出力より高域成分を抽出するフィルタ回路と、この
フィルタ回路の出力を絶対値検波する検波回路より構成
されている。The CCD 1 uses a high-frequency component extraction circuit (high-pass filter circuit) 15 as high-frequency component extraction means for the image signal (video signal) corresponding to the formed image of the subject.
supply to a. Further, the CCD 2 supplies an image signal (video signal) corresponding to the formed image of the subject to a high frequency component extraction circuit 15b as high frequency component extraction means. Although not shown in detail in the drawing, these high-frequency component extraction circuits 15a and 15b extract a high-frequency component from a preamplifier that amplifies an image signal supplied from each CCD 1 and CCD 2 and an output of this preamplifier. It is composed of a filter circuit for extraction and a detection circuit for detecting the absolute value of the output of this filter circuit.
【0025】これら高域成分抽出回路15aおよび15
bからはそれぞれ合焦評価値h,h´が出力され、これ
らの合焦評価値h,h´はマイクロコンピュータより成
る処理回路(ボケ特性推定手段、距離推定手段)16に
供給される。These high frequency component extraction circuits 15a and 15
Focus evaluation values h and h'are output from b, respectively, and these focus evaluation values h and h'are supplied to a processing circuit (blur characteristic estimation means, distance estimation means) 16 including a microcomputer.
【0026】前記処理回路16には、前記絞り機構11
の絞り度合い制御する絞り制御手段としての絞り駆動回
路17が接続されており、この処理回路16からは、駆
動回路17に対して絞り制御信号が供給される。そして
処理回路16では、合焦評価値h,h´および絞り制御
信号に基づきボケ特性を推定することができる。さらに
このボケ特性および光学手段としてのフオーカスレンズ
10の焦点距離fに基づき、被写体までの距離を算出
(推定)することができ、これにより受動型距離測定装
置を実現することができる。The processing circuit 16 includes the diaphragm mechanism 11
An aperture drive circuit 17 as an aperture control means for controlling the aperture degree is connected, and the processing circuit 16 supplies an aperture control signal to the drive circuit 17. Then, the processing circuit 16 can estimate the blur characteristic based on the focus evaluation values h and h ′ and the aperture control signal. Further, the distance to the subject can be calculated (estimated) based on the blur characteristic and the focal length f of the focus lens 10 as the optical means, and a passive distance measuring device can be realized.
【0027】次に、上記装置の動作について説明する
が、その前に、本発明の検出装置における光学的な検出
原理について説明する。Next, the operation of the above apparatus will be described, but before that, the optical detection principle of the detection apparatus of the present invention will be described.
【0028】非合焦時の撮像画像のボケは錯乱円による
ものであり、そのボケ特性は錯乱円の二次元フーリエ変
換で与えられる。従って撮像面の位置が異っても錯乱円
の大きさが等しければボケ特性は等しいので、同一被写
体を撮像時に撮像素子から得られる高域成分量も等し
い。The blur of the picked-up image at the time of non-focus is due to the circle of confusion, and the blur characteristic is given by the two-dimensional Fourier transform of the circle of confusion. Therefore, if the sizes of the circles of confusion are the same even if the positions of the image pickup surfaces are different, the blur characteristics are the same, and the amounts of high-frequency components obtained from the image pickup elements when the same subject is imaged are also the same.
【0029】本実施例では異なる撮像面に配置された2
つの撮像素子(CCD1,CCD2)の出力に含まれる
高域成分に注目し、高域成分量が等しくなる(すなわ
ち、錯乱円の大きさが等しくなる)絞り径の組み合わせ
p(0),ppより合焦位置を推定し、被写体までの距離
を算出する。In this embodiment, the two image pickup planes are arranged on different image pickup planes.
Focusing on the high-frequency components included in the outputs of the two image pickup devices (CCD1 and CCD2), the combination of diaphragm diameters p (0) and pp with the same amount of high-frequency components (that is, the sizes of circles of confusion are equal) The focus position is estimated and the distance to the subject is calculated.
【0030】いま、 A :光学系の像側主点から合焦位置までの距離 D :2枚の撮像素子の位置の中心地点から合焦位置ま
での距離 dd:2枚の撮像素子の位置の中心地点から撮像素子ま
での距離 r :錯乱円の直径 p(0):CCD1撮像面上の錯乱円の直径がrとなる射
出瞳の直径 pp:CCD2撮像面上の錯乱円の直径がrとなる射出
瞳の直径(p(0)>pp)とすると、相似の関係より r:(D+dd)=pp:A r:(D−dd)=p(0):A となる。上記式よりr,Aを消去すると、次式が求めら
れる。 D=dd{(p(0)+pp)/(p(0)−pp)} ……(1)Where A is the distance from the image-side principal point of the optical system to the in-focus position, D is the distance from the center point of the positions of the two image sensors to the in-focus position, and dd is the position of the two image sensors. Distance from center point to image sensor r: Diameter of circle of confusion p (0): Diameter of exit pupil where diameter of circle of confusion on CCD1 image plane is r pp: Diameter of circle of confusion on CCD2 plane is r If the diameter of the exit pupil is (p (0)> pp), r: (D + dd) = pp: A r: (D-dd) = p (0): A due to the similarity relationship. If r and A are deleted from the above equation, the following equation is obtained. D = dd {(p (0) + pp) / (p (0) -pp)} (1)
【0031】合焦位置と撮像面の関係は大別して図2
(A)と(B)に示す2種が考えられるが、双方共にこ
の式(1)は共通で、後述のz0よりAを算出する際の
Dの符号が異なるだけである。この式(1)を利用し
て、合焦位置を求めることができる。The relationship between the in-focus position and the image pickup surface is roughly classified into FIG.
Although two types shown in (A) and (B) are conceivable, the formula (1) is common to both types, and only the sign of D when calculating A from z0 described later is different. The in-focus position can be obtained using this equation (1).
【0032】以下に前記処理回路16における処理作用
について図3および図4のフローチャートを参照して説
明する。まずステップS1で、高域成分抽出回路15a
および15bから出力される合焦評価値h(0),h´(0)
を取り込み、ステップS2で絞りの大きさに応じてゲイ
ン補正する。すなわち絞りの直径がp(0)の場合(初期
状態の場合)の補正された合焦評価値(以下、規格化評
価値と称する)e(0),e'(0)を次式より演算する。 e(0)=h(0)/p(0)2 e'(0)=h(0)/p(0)2 ……(2) となる。The processing operation of the processing circuit 16 will be described below with reference to the flow charts of FIGS. 3 and 4. First, in step S1, the high frequency component extraction circuit 15a
And focus evaluation values h (0) and h '(0) output from 15b
Is taken in, and the gain is corrected according to the size of the aperture in step S2. That is, the corrected focus evaluation values (hereinafter referred to as standardized evaluation values) e (0) and e '(0) when the diameter of the diaphragm is p (0) (in the initial state) are calculated from the following equations. To do. e (0) = h (0) / p (0) 2 e ′ (0) = h (0) / p (0) 2 (2)
【0033】次にフィールド(またはフレーム)毎に絞
りの大きさ(直径)を減少させる。この時のフィールド
番号(絞りの大きさ)と規格化評価値の関係を図5に示
す。図中“#”はCCD1の出力から得られた規格化評
価値であり、“○”はCCD2の出力から得られた規格
化評価値である。図5の横軸は絞りの直径を示し、右側
に行くに従って絞りの直径が減少する。Next, the size (diameter) of the aperture is reduced for each field (or frame). FIG. 5 shows the relationship between the field number (diaphragm size) and the standardized evaluation value at this time. In the figure, “#” is a standardized evaluation value obtained from the output of the CCD 1, and “◯” is a standardized evaluation value obtained from the output of the CCD 2. The horizontal axis of FIG. 5 shows the diameter of the diaphragm, and the diameter of the diaphragm decreases toward the right side.
【0034】次に、ステップS3に進み、ステップS2
で求めた初期の規格化評価値e(0)とe'(0)の大小を比
較する。そして、小さい方の規格化評価値e'(i)、また
は、e(i)が絞りの大きさの減少にともなって増大し、
大きい方の初期の規格化評価値e(0)またはe'(0)と等
しい値となる場合の絞り量を求めるようにする。Next, the process proceeds to step S3 and step S2.
The magnitudes of the initial standardized evaluation values e (0) and e '(0) obtained in step 2 are compared. Then, the smaller standardized evaluation value e ′ (i) or e (i) increases as the size of the aperture decreases,
The aperture amount when the value is equal to the larger initial standardized evaluation value e (0) or e '(0) is obtained.
【0035】そこで、図5(A)に示すように、初期絞
り直径がp(0)のときにおけるCCD1の初期の規格化
評価値e(0)の方が、CCD2の初期の規格化評価値e'
(0)より大きい場合、ステップS4以降の処理に進み、
図5(B)に示すように、CCD2の初期の規格化評価
値e'(0)の方が大きい場合、ステップS11以降の処理
に進む。Therefore, as shown in FIG. 5A, the initial standardized evaluation value e (0) of the CCD 1 when the initial aperture diameter is p (0) is the initial standardized evaluation value of the CCD 2. e '
If it is larger than (0), the process proceeds to step S4 and thereafter,
As shown in FIG. 5B, when the initial standardized evaluation value e ′ (0) of the CCD 2 is larger, the process proceeds to step S11 and subsequent steps.
【0036】ステップS4においては、変数iに1を設
定し、ステップS5に進む。ステップS5においては、
高域成分抽出回路15bから合焦評価値h'(i)(いまの
場合、h'(1))を取り込み、ステップS6において、こ
の取り込んだ合焦評価値h'(1)に対応する規格化評価値
e'(1)を、上述した場合と同様に式(2)に従って演算
する。In step S4, the variable i is set to 1, and the process proceeds to step S5. In step S5,
The focus evaluation value h '(i) (h' (1) in this case) is fetched from the high-frequency component extraction circuit 15b, and in step S6, the standard corresponding to the fetched focus evaluation value h '(1). The converted evaluation value e ′ (1) is calculated according to the equation (2) as in the case described above.
【0037】そして、ステップS7において、ステップ
S6で求めた現在の規格化評価値e'(1)が、CCD1の
初期の規格化評価値e(0)より小さいか否かを判定し、
小さい場合においてはステップS8に進み、変数iを1
だけインクリメントし、i=2とする。Then, in step S7, it is determined whether or not the current standardized evaluation value e '(1) obtained in step S6 is smaller than the initial standardized evaluation value e (0) of the CCD 1,
If it is smaller, the process proceeds to step S8 and the variable i is set to 1
Only increments to i = 2.
【0038】そして、ステップS5に戻り、高域成分抽
出回路15bより次の合焦評価値h'(2)を取り込む。そ
して、ステップS6において、今取り込んだ合焦評価値
h'(2)に対応する規格化評価値e'(2)を式(2)に従っ
て演算し、ステップS7において、今演算した規格化評
価値e'(2)が、CCD1の初期の規格化評価値e(0)よ
り小さいか否かを判定する。規格化評価値e'(2)が、C
CD1の初期の規格化評価値e(0)より小さい場合、ス
テップS8に進み、変数iを1だけインクリメントし
て、i=3とする。そして、ステップS5に戻り、以下
同様の処理を繰り返す。Then, returning to step S5, the next focus evaluation value h '(2) is fetched from the high frequency component extracting circuit 15b. Then, in step S6, the standardized evaluation value e '(2) corresponding to the focus evaluation value h' (2) just fetched is calculated according to equation (2), and in step S7 the standardized evaluation value just calculated is calculated. It is determined whether e ′ (2) is smaller than the initial standardized evaluation value e (0) of the CCD 1. The standardized evaluation value e '(2) is C
If it is smaller than the initial standardized evaluation value e (0) of CD1, the process proceeds to step S8, the variable i is incremented by 1, and i = 3. Then, the process returns to step S5 and the same process is repeated thereafter.
【0039】以上のようにして、変数i(フィールド)
を順次1ずつインクリメントして、ステップS7におい
て、CCD2の規格化評価値e'(i)が、CCD1の初期
の規格化評価値e(0)と等しいか、それより大きくなっ
たと判定されるまで、同様の処理を繰り返す。As described above, the variable i (field)
Until the standardized evaluation value e ′ (i) of the CCD 2 is equal to or larger than the initial standardized evaluation value e (0) of the CCD 1 in step S7. , And similar processing is repeated.
【0040】通常、規格化評価値e'(i)が初期の規格化
評価値e(0)と全く等しい値になる可能性は少ない。そ
こで、ステップS7において、e'(i)がe(0)と等しい
か、それより大きくなったと判定された場合、ステップ
S9に進み、e'(i)がe(0)より大きくなったフィール
ドiにおける絞り量をp(i)とし、その直前のフィールド
(i-1)の絞り量をp1とし、次式に従って、CCD2の
規格化評価値e'が、CCD1の初期の規格化評価値e
(0)と等しくなった場合における絞り量ppを線形補間
により演算する。Normally, it is unlikely that the standardized evaluation value e '(i) will be exactly the same as the initial standardized evaluation value e (0). Therefore, in step S7, when it is determined that e ′ (i) is equal to or larger than e (0), the process proceeds to step S9, where e ′ (i) is larger than e (0). The amount of aperture at i is p (i), and the field immediately before that is
With the diaphragm amount of (i-1) set to p1, the standardized evaluation value e ′ of the CCD 2 is the initial standardized evaluation value e of the CCD 1 according to the following equation.
The aperture amount pp when it becomes equal to (0) is calculated by linear interpolation.
【0041】 pp={(e'(i)−e(0))×p(i-1)+(e(0)−e'(i-1))×p(i)} /{e'(i)−e'(i-1)} ……(3)Pp = {(e ′ (i) −e (0)) × p (i−1) + (e (0) −e ′ (i−1)) × p (i)} / {e ′ (i) -e '(i-1)} (3)
【0042】次に、CCD2の規格化評価値e'が、C
CD1の初期の規格化評価値e(0)に等しくなる絞り量
ppより、CCD1とCCD2の撮像面の中心位置と光
学系の合焦位置(現在の被写体に対する合焦位置、以下
同様)とのずれ量Dを以下の式により求める。 D=−dd×(p(0)+pp)/(p(0)−pp) ……(4)Next, the standardized evaluation value e'of the CCD 2 is C
From the aperture amount pp which becomes equal to the initial standardized evaluation value e (0) of CD1, the center position of the image pickup surfaces of CCD1 and CCD2 and the focus position of the optical system (focus position for the current subject, the same applies below) The shift amount D is calculated by the following formula. D = -dd * (p (0) + pp) / (p (0) -pp) (4)
【0043】さらに光学系の像側主点とCCD1とCC
D2の撮像面の中心位置との距離をz0とすれば、測定
距離枠内の撮像被写体に対する焦点位置は、A=z0−
Dとなるから、公知の次の式により被写体までの距離L
を求めることができる。 {L−f}×{(z0−D)−f}=−f2 ……(5)Further, the image side principal point of the optical system, CCD 1 and CC
If the distance from the center position of the image pickup surface of D2 is z0, the focal position for the image pickup subject within the measurement distance frame is A = z0−
Therefore, the distance L to the subject is calculated by the following known equation.
Can be asked. {L-f} × {( z0-D) -f} = - f 2 ...... (5)
【0044】一方、ステップS3において、図5(B)
に示すように、CCD1の初期の規格化評価値e(0)よ
り、CCD2の初期の規格化評価値e'(0)の方が大きい
と判定された場合、ステップS11に進み、それ以降の
処理が実行される。このステップS11乃至S16の処
理は、上述したステップS4乃至S10の処理と基本的
に同様の処理であり、上述したh(0),h(i),e(0),
e(i)と、h'(0),h'(i),e'(0),e'(i)の関係を、
相互に置き換えるとともに、ddを−ddに置き換える
点だけが異なるのみである。On the other hand, in step S3, as shown in FIG.
As shown in, when it is determined that the initial standardized evaluation value e '(0) of the CCD 2 is larger than the initial standardized evaluation value e (0) of the CCD 1, the process proceeds to step S11, and thereafter. The process is executed. The processing of steps S11 to S16 is basically the same as the processing of steps S4 to S10 described above, and includes h (0), h (i), e (0),
The relationship between e (i) and h '(0), h' (i), e '(0), e' (i) is
The only difference is that they are mutually replaced and dd is replaced by -dd.
【0045】以上のようにして高域成分抽出回路15a
および15bから出力される合焦評価値h,h´および
絞り制御信号に基づいてボケ特性を推定することができ
る。従ってこのボケ特性を検出することで、カメラ撮影
時のレンズボケ補正のためのレンズボケ量の検出装置に
使用することができる。さらにこのボケ特性および光学
手段としてのフオーカスレンズ10の焦点距離fに基づ
き、被写体までの距離を算出(推定)することができ、
これにより受動型距離測定装置を実現することができ
る。As described above, the high frequency component extraction circuit 15a
The blur characteristic can be estimated based on the focus evaluation values h and h ′ and the aperture control signal output from the and 15b. Therefore, by detecting this blur characteristic, it can be used in a lens blur amount detection device for lens blur correction during camera shooting. Furthermore, the distance to the subject can be calculated (estimated) based on the blur characteristic and the focal length f of the focus lens 10 as the optical means.
This makes it possible to realize a passive distance measuring device.
【0046】図6は本発明の第2の実施例(フォーカス
制御装置)の構成をブロック図によって示したものであ
る。なお図6において、図1と同一符号部分は相当部分
を示している。FIG. 6 is a block diagram showing the configuration of the second embodiment (focus control device) of the present invention. Note that, in FIG. 6, the same reference numerals as those in FIG. 1 denote corresponding portions.
【0047】撮像被写体からのカメラ入射光線は、レン
ズ駆動回路20で駆動されるフォーカスレンズ10、お
よび絞り駆動回路21で駆動される絞り機構11を含む
光学系で結像され、CCDより成る撮像素子13に入射
する。撮像素子13の出力は図示しないプリアンプ等の
前置処理回路を介して可変利得回路22に供給される。
可変利得回路22は、光学系の絞り形状変化によって撮
像素子13への入射光量が変化するので、これに伴い画
像信号レベルを補正する。A camera incident light beam from an imaged subject is imaged by an optical system including a focus lens 10 driven by a lens drive circuit 20 and an aperture mechanism 11 driven by an aperture drive circuit 21, and is an image pickup device composed of a CCD. It is incident on 13. The output of the image sensor 13 is supplied to the variable gain circuit 22 via a preprocessing circuit such as a preamplifier (not shown).
The variable gain circuit 22 corrects the image signal level in accordance with the change in the amount of light incident on the image sensor 13 due to the change in the aperture shape of the optical system.
【0048】可変利得回路22の利得は処理回路16に
より制御される。そして可変利得回路22の出力は通常
のカメラ信号処理回路23に供給されると共に、高域成
分抽出回路15にも供給され、この高域成分抽出回路1
5によって合焦評価値に変換され、処理回路16に供給
される。処理回路16では相対結像位置および絞りの大
きさを変化した時に得られた合焦評価値をもとに、後述
する手法により各被写体に対するボケ関数を推定し、こ
れをもとに合焦位置推定手段により前記撮像素子に対す
る被写体の合焦位置を推定する。そして合焦位置推定手
段によって得られる推定値に基づいて前記光学手段と撮
像素子との相対位置を移動手段によって変化させること
でオートフォーカス動作が達成される。The gain of the variable gain circuit 22 is controlled by the processing circuit 16. The output of the variable gain circuit 22 is supplied to the normal camera signal processing circuit 23 and also to the high frequency component extraction circuit 15, and the high frequency component extraction circuit 1
It is converted into a focus evaluation value by 5 and supplied to the processing circuit 16. The processing circuit 16 estimates a blurring function for each subject based on the focus evaluation value obtained when the relative image formation position and the size of the diaphragm are changed, and estimates the focus position based on the blurring function for each subject. The estimating means estimates the in-focus position of the subject with respect to the image sensor. Then, the relative position between the optical means and the image pickup device is changed by the moving means based on the estimated value obtained by the focus position estimating means, whereby the autofocus operation is achieved.
【0049】図6に示す実施例の作用を図7を用いて説
明する。レンズ駆動回路20で駆動されるフォーカスレ
ンズ10の位置は、図7(A)に示すように、2ddの
幅でフィールド毎に摂動される。すなわち、位置Dを中
心として、±dだけ光軸方向に周期的に移動される。こ
れにより撮像素子13への結像状態が時分割で変化す
る。また絞り駆動回路21で駆動される絞り機構11は
同図(B)に示すように、2フィールド毎に一定の絞り
直径に順次減少させる。この絞り減少による撮像素子1
3の入射光量の減少に伴う画像信号のレベル減少を補正
する(相殺する)可変利得回路22のゲインは、絞り直
径の2乗に反比例し、同図(C)に示すように、2フィ
ールド毎に増加する。The operation of the embodiment shown in FIG. 6 will be described with reference to FIG. The position of the focus lens 10 driven by the lens drive circuit 20 is perturbed for each field with a width of 2 dd, as shown in FIG. That is, the position D is moved periodically by ± d in the optical axis direction. As a result, the image formation state on the image pickup device 13 changes in a time division manner. Further, the diaphragm mechanism 11 driven by the diaphragm driving circuit 21 sequentially reduces the diaphragm diameter to a constant value every two fields, as shown in FIG. Image sensor 1 by reducing the aperture
The gain of the variable gain circuit 22 that corrects (cancels) the level decrease of the image signal due to the decrease of the incident light amount of 3 is inversely proportional to the square of the diaphragm diameter, and as shown in FIG. Increase to.
【0050】高域成分検出回路15から得られる合焦評
価値を、同図(D)に示す。図中“×”および“○”は
撮像画面中の異なる距離の被写体に対応する合焦評価値
である。The focus evaluation value obtained from the high frequency component detecting circuit 15 is shown in FIG. In the figure, “x” and “◯” are focus evaluation values corresponding to subjects at different distances in the imaging screen.
【0051】第1の実施例と同様の手法でボケ量が等し
くなる絞りの大きさを求める。以下の説明では同図
(D)中の“×”に対応する測距領域について述べる。
初期絞り直径がp(0)の時に奇数フィールドの合焦評価
値e(0)の方が大きい場合、絞り直径減少により偶数フ
ィールドの合焦評価値がe(0)に等しくなる絞り直径p
pを算出する。すなわち絞り直径p(1),p(2)の時の偶
数フィールドの合焦評価値をe'(1),e'(2)とすると、
線形補間により、前記式と同様に pp={(e'(2)−e(0))×p(1)+(e(0)−e'(1))×p(2)} /(e'(2)−e'(1)) ……(6) となる。By the same method as in the first embodiment, the size of the diaphragm with which the blur amounts are equal is obtained. In the following description, the distance measuring area corresponding to "x" in FIG.
If the focus evaluation value e (0) of the odd field is larger when the initial aperture diameter is p (0), the focus diameter e of the even field becomes equal to e (0) due to the reduction of the aperture diameter.
Calculate p. That is, if the focus evaluation values of the even fields when the aperture diameters are p (1) and p (2) are e '(1) and e' (2),
By linear interpolation, pp = {(e ′ (2) −e (0)) × p (1) + (e (0) −e ′ (1)) × p (2)} / ( e '(2) -e' (1)) ... (6)
【0052】次に偶数フィールドの合焦評価値がe(0)
に等しくなる絞り直径ppより、摂動する撮像面の中心
位置と光学系の合焦位置とのずれ量Dを、前記式として
示した以下の計算式により求める。 D=dd×(p(0)+pp)/(p(0)−pp) ……(7)Next, the focus evaluation value of the even field is e (0)
From the diaphragm diameter pp that is equal to, the shift amount D between the center position of the perturbed image pickup surface and the in-focus position of the optical system is obtained by the following calculation formula shown as the above formula. D = dd × (p (0) + pp) / (p (0) -pp) (7)
【0053】さらに光学系の像側主点と摂動する撮像面
の中心位置との距離をz0とすれば測距枠内の撮像被写
体に対する焦点位置は、A=z0−Dとなる。以上の説
明は初期絞り直径がp(0)の時に奇数フィールドの合焦
評価値e(0)の方が大きい場合であったが、初期絞り直
径がp(0)の時に偶数フィールドの合焦評価値がe'(0)
の方が大きい場合(同図Dの“○”の場合)について
も、上述のe(0),e'(1),e'(2)の関係を偶数、奇数
フィールドの撮像素子出力で入れ替えることによって同
様に算出できる。Further, if the distance between the image-side principal point of the optical system and the center position of the perturbed image pickup surface is z0, the focal position for the image pickup subject in the distance measuring frame is A = z0-D. In the above description, the focus evaluation value e (0) of the odd field is larger when the initial aperture diameter is p (0), but the focus evaluation value of the even field is larger when the initial aperture diameter is p (0). Evaluation value is e '(0)
In the case where is larger (in the case of “◯” in FIG. 6D), the relationship of e (0), e ′ (1), and e ′ (2) described above is replaced by the output of the image sensor in the even and odd fields. It can be calculated in the same manner.
【0054】次に、本実施例の特徴である分割測距を行
なう場合の方法について説明する。この分割測距は、要
するに上記処理にて算出された撮像面内の各領域に対応
するフォーカスレンズ10の位置Z0(H,V)から撮
像画像を好ましい合焦状態になる結像位置を決定し、そ
の結像位置にフォーカスレンズ10を移動させることに
より良好なオートフォーカス動作を行なわせる。Next, a method for performing the divided distance measurement, which is a feature of this embodiment, will be described. In short, this division distance measurement determines the imaging position where the captured image becomes a preferable in-focus state from the position Z0 (H, V) of the focus lens 10 corresponding to each area in the imaging surface calculated in the above processing. By moving the focus lens 10 to the image forming position, a good autofocus operation is performed.
【0055】撮像面内の各領域は図8に示すように、例
えば水平(H)方向に12分割され、また垂直(V)方
向に9分割され、それぞれ領域W1-1乃至W9-12として
定義される。そして、各領域WV-H(必要に応じて、W
VHと略記される)のフォーカスレンズ10の合焦位置
が、Z0(H,V)とされる。As shown in FIG. 8, each area in the image pickup plane is divided into, for example, 12 in the horizontal (H) direction and 9 in the vertical (V) direction, and defined as areas W1-1 to W9-12, respectively. To be done. Then, each area W VH (if necessary, W VH
The focus position of the focus lens 10 (abbreviated as VH ) is Z0 (H, V).
【0056】以下分割測距の動作を、図9に示すフロー
チャートを参照して説明する。最初にステップS31に
おいて、フォーカスレンズ10が合焦位置にある場合に
おける位置Z0(H,V)をメディアンフィルタで処理
して、データZ1(H,V)を得る。すなわち注目デー
タを含む近傍の領域のデータの中で中位のものの平均値
を出力する。これにより、小領域(主要被写体でない可
能性が高い)のデータを除去すると共にZ0(H,V)
にエラーが発生した場合、そのエラーデータを除去する
ことができる。The operation of the divided distance measurement will be described below with reference to the flowchart shown in FIG. First, in step S31, the position Z0 (H, V) when the focus lens 10 is at the in-focus position is processed by the median filter to obtain data Z1 (H, V). That is, the average value of the middle data among the data of the neighboring areas including the data of interest is output. As a result, data in a small area (which is likely to be not the main subject) is removed and Z0 (H, V)
If an error occurs, the error data can be removed.
【0057】次にステップS32に進み、画面の中央に
近い最も手前にある被写体が主要被写体であることが多
いので、中央の所定の領域WHcVcの水平方向のブロック
番号Hcを、最大値を表わす領域の水平方向のブロック
番号Hmとして仮に設定する。同様にその領域の垂直方
向のブロック番号Vcを、最大値を表わす領域の垂直方
向のブロック番号Vmとして仮に設定する。Next, the process proceeds to step S32, where the foremost subject near the center of the screen is the main subject in many cases, so the horizontal block number Hc of the predetermined central region WHcVc is the region representing the maximum value. Is temporarily set as the horizontal block number Hm. Similarly, the vertical block number Vc of the area is provisionally set as the vertical block number Vm of the area representing the maximum value.
【0058】次にステップS33に進み、ステップS3
2で設定した領域WHmVmの近傍の領域であって、データ
Z1(H,V)のうち、最大の値を得ることができる領
域の、領域WHmVmからの偏差(im,jm)を検出す
る。Next, the process proceeds to step S33, and step S3
The deviation (im, jm) from the area WHmVm of the area in the vicinity of the area WHmVm set in 2 and in which the maximum value can be obtained in the data Z1 (H, V) is detected.
【0059】この図9のステップS33の詳細な処理
は、図10に示されている。図10に示すように、最初
にステップS41において、データZ1(H,V)のう
ち、最大のデータが設定されるレジスタmaxに初期値
0がセットされ、また変数iに−1が初期設定される。
次にステップS42に進み、変数jに−1が初期設定さ
れる。そしてステップS43において、ステップS42
で設定したブロック番号Hm,Vmに、ステップS41
とS42で設定した変数iとjを加算したブロック番号
(Hm+i,Vm+j)の領域Whm+iVm+jにおけるメデ
ィアンフィルタ処理したデータZ1(Hm+i,Vm+
j)がmaxより大きいか否かが判定される。The detailed processing of step S33 in FIG. 9 is shown in FIG. As shown in FIG. 10, first, in step S41, an initial value 0 is set in the register max in which the maximum data of the data Z1 (H, V) is set, and -1 is initialized in the variable i. It
Next, in step S42, -1 is initialized to the variable j. Then, in step S43, step S42
To the block numbers Hm and Vm set in step S41, step S41
And the median-filtered data Z1 (Hm + i, Vm +) in the area Whm + iVm + j of the block number (Hm + i, Vm + j) obtained by adding the variables i and j set in S42 and S42.
It is determined whether j) is larger than max.
【0060】この判定がYESであれば、ステップS4
4に進み、変数imと変数jmに、ステップS41また
はS42で設定された変数iとjがそれぞれ設定され
る。そしてレジスタmaxにZ1(Hm+i,Vm+
j)の値がセットされる。すなわち、レジスタmaxに
Z1(H,V)の最大値がセットされ、その領域を特定
するブロック番号の偏差im,jmに変数iとjがセッ
トされる。If this determination is YES, step S4
4, the variables im and jm are set to the variables i and j set in step S41 or S42, respectively. And Z1 (Hm + i, Vm +
The value of j) is set. That is, the maximum value of Z1 (H, V) is set in the register max, and the variables i and j are set in the deviations im, jm of the block numbers that specify the area.
【0061】そしてステップS45に進み、変数jがイ
ンクリメントされ、ステップS46において、変数jが
2以上ではないと判定された場合、ステップS43に戻
り、それ以降の処理が繰り返し実行される。Then, the process proceeds to step S45, the variable j is incremented, and if it is determined in step S46 that the variable j is not 2 or more, the process returns to step S43 and the subsequent processes are repeatedly executed.
【0062】そしてステップS46において、変数jが
1より大きい値、すなわち2以上になったと判定された
場合、ステップS47に進み、今度は変数iがインクリ
メントされる。そしてステップS48において、変数i
が1より小さいか、1と等しいと判定された場合におい
ては、ステップS42に戻り、それ以降の処理が繰り返
し実行される。そしてステップS48において、変数i
が1より大きい、すなわち2以上であると判定されたと
き、処理は終了され、図9のステップS33に戻る。When it is determined in step S46 that the variable j has a value larger than 1, that is, 2 or more, the process proceeds to step S47, and the variable i is incremented this time. Then, in step S48, the variable i
When it is determined that is less than 1 or equal to 1, the process returns to step S42, and the subsequent processes are repeatedly executed. Then, in step S48, the variable i
When it is determined that is greater than 1, that is, 2 or more, the process is terminated and returns to step S33 of FIG.
【0063】すなわち、この図10の処理によりステッ
プS32で設定した中央の領域WHcVcを中心として上下
左右に1個だけずれた合計9個の領域WHVのうち、最も
大きいデータZ1(H,V)を出力する領域が選択され
る。That is, the largest data Z1 (H, V) is selected from the total of nine areas WHV shifted by one in the vertical and horizontal directions centering on the central area WHcVc set in step S32 by the processing of FIG. The output area is selected.
【0064】そして次に図9のステップS34に進み、
ステップS33(S44)において設定した変数imと
jmが両方とも0であるか否かが判定される。いずれも
0でない場合においては、ステップS35に進み、変数
Hmと変数Vmに、それぞれ変数imとjmが加算され
た値が、新たなHmまたはVmとして更新される。Then, the process proceeds to step S34 in FIG.
It is determined whether or not the variables im and jm set in step S33 (S44) are both 0. If neither is 0, the process proceeds to step S35, and the values obtained by adding the variables im and jm to the variables Hm and Vm are updated as new Hm or Vm.
【0065】次にステップS36に進み、HmまたはV
mが1であるか、あるいはHmがHcの2倍の値と等し
いか、あるいはVmがVcの2倍の値と等しいか否かが
判定される。いずれか1つの条件が満足されたと判定さ
れた場合、ステップS36からステップS37に進み、
処理が終了される。すなわちこの時フォーカスレンズ1
0の位置は、レジスタmaxに記憶されており(その値
は、ステップS44において設定されている)、また主
要被写体の位置に対応する領域のブロック番号は、(H
m,Vm)として記憶される。Next, in step S36, Hm or V
It is determined whether m is 1, Hm is equal to twice Hc, or Vm is equal to twice Vc. When it is determined that any one of the conditions is satisfied, the process proceeds from step S36 to step S37,
The process ends. That is, at this time, the focus lens 1
The position of 0 is stored in the register max (its value is set in step S44), and the block number of the area corresponding to the position of the main subject is (H
m, Vm).
【0066】以上のようにして、例えば画面の端部に、
最もビデオカメラに近い被写体が存在していたとして
も、これに影響されず中央部の被写体、すなわち画像の
注目領域における被写体に対する測距処理を行なうこと
ができる。As described above, for example, at the end of the screen,
Even if there is an object closest to the video camera, the distance measurement processing can be performed on the object in the central portion, that is, the object in the attention area of the image, without being affected by this.
【0067】このように、本実施例では撮像画面を複数
に分割し、各部分から得られるフォーカスレンズ位置情
報から好ましいフォーカスレンズ位置を選択することに
より、構図を考慮したオートフォーカス動作を行なわせ
ることができる。As described above, in the present embodiment, the image pickup screen is divided into a plurality of parts, and the preferred focus lens position is selected from the focus lens position information obtained from each part, thereby performing the autofocus operation in consideration of the composition. You can
【0068】なお以上の第2の実施例においては、図7
(A)にて説明したように、撮像素子に対する被写体の
結像位置を周期的に変化させることで、時分割で結像状
態が変化されるように成された撮像手段を採用してい
る。この様な撮像手段は前記図1に示した第1の実施例
に対して採用することも可能であり、同様の作用効果が
達成し得る。In the above second embodiment, as shown in FIG.
As described in (A), the image pickup unit is employed so that the image formation state is changed in a time division manner by periodically changing the image formation position of the subject with respect to the image pickup element. Such an image pickup means can also be adopted for the first embodiment shown in FIG. 1, and the same effect can be achieved.
【0069】[0069]
【発明の効果】以上のように、本発明に係る光学的検出
装置によれば、高域成分検出回路によって得られる合焦
評価値と絞りの大きさに基づいてボケ特性を推定するよ
うに成される。従ってボケ量検出装置が実現でき、画像
のボケ修復に応用することができる。またこのボケ特性
と光学系の焦点距離を基に被写体までの距離を算出する
ことができ、従って受動型測距装置を提供することがで
きる。As described above, according to the optical detecting device of the present invention, the blur characteristic is estimated based on the focus evaluation value obtained by the high frequency component detecting circuit and the aperture size. To be done. Therefore, a blur amount detection device can be realized and can be applied to image blur restoration. Further, the distance to the subject can be calculated based on this blur characteristic and the focal length of the optical system, and thus a passive distance measuring device can be provided.
【0070】さらに本発明に係るフォーカス制御装置に
よれば、ボケ特性に基づく撮像素子に対する被写体の合
焦位置が推定され、この推定値に基づいて移動手段によ
ってフォーカスレンズと撮像素子との相対位置が変化さ
れる。従って合焦位置推定手段によって得られる撮像素
子に対する被写体の合焦位置に対応してレンズを迅速に
合焦位置に移動させることが可能となり、高速度のフォ
ーカス制御動作が可能となる。Further, according to the focus control apparatus of the present invention, the focus position of the object with respect to the image pickup device is estimated based on the blur characteristic, and the relative position between the focus lens and the image pickup device is calculated by the moving means based on this estimated value. Be changed. Therefore, it becomes possible to quickly move the lens to the in-focus position corresponding to the in-focus position of the subject with respect to the image pickup device obtained by the in-focus position estimating means, and the high-speed focus control operation becomes possible.
【図面の簡単な説明】[Brief description of drawings]
【図1】本発明の光学的検出装置の一実施例の構成を示
すブロック図である。FIG. 1 is a block diagram showing the configuration of an embodiment of an optical detection device of the present invention.
【図2】図1の光学的な動作原理を説明する図である。FIG. 2 is a diagram for explaining the optical operation principle of FIG.
【図3】図1の実施例の動作を説明するフローチャート
である。FIG. 3 is a flowchart illustrating the operation of the embodiment of FIG.
【図4】図3に続くフローチャートである。FIG. 4 is a flowchart following FIG.
【図5】図1の実施例における規格化評価値を求める特
性図である。5 is a characteristic diagram for obtaining a standardized evaluation value in the embodiment of FIG.
【図6】本発明のフォーカス制御装置の一実施例の構成
を示すブロック図である。FIG. 6 is a block diagram showing a configuration of an embodiment of a focus control device of the present invention.
【図7】図6の実施例における作用を説明する図であ
る。FIG. 7 is a diagram for explaining the operation in the embodiment of FIG.
【図8】画面を複数の領域に区分する様子を説明する図
である。FIG. 8 is a diagram illustrating how a screen is divided into a plurality of areas.
【図9】図6の実施例における演算処理を示すフローチ
ャートである。9 is a flowchart showing a calculation process in the embodiment of FIG.
【図10】図9のフローチャートにおける一部のステッ
プの詳細処理を示すフローチャートである。10 is a flowchart showing detailed processing of some steps in the flowchart of FIG.
【図11】従来のフォーカス制御装置の構成例を示すブ
ロック図である。FIG. 11 is a block diagram showing a configuration example of a conventional focus control device.
【図12】図11に示す例の動作を説明するフローチャ
ートである。FIG. 12 is a flowchart illustrating the operation of the example shown in FIG.
【図13】ピント評価値の特性を示す図である。FIG. 13 is a diagram showing characteristics of a focus evaluation value.
【図14】画面を複数の領域に区分する様子を説明する
図である。FIG. 14 is a diagram illustrating how a screen is divided into a plurality of areas.
10 フォーカスレンズ 11 絞り機構 12 光学素子 12a ハーフミラー 13,13a,13b 撮像素子(CCD) 14 透過板 15,15a,15b 高域成分抽出回路 16 処理回路 17 絞り駆動回路 20 レンズ駆動回路 21 絞り駆動回路 22 可変利得回路 23 カメラ信号処理回路 10 Focus Lens 11 Aperture Mechanism 12 Optical Element 12a Half Mirror 13, 13a, 13b Imaging Device (CCD) 14 Transmission Plate 15, 15a, 15b High Frequency Component Extraction Circuit 16 Processing Circuit 17 Aperture Drive Circuit 20 Lens Drive Circuit 21 Aperture Drive Circuit 22 variable gain circuit 23 camera signal processing circuit
Claims (7)
に結像されるように成された撮像手段と、 前記撮像手段に前記被写体の光を結像する光学手段と、 前記光学手段における絞りの大きさを制御する絞り制御
手段と、 前記撮像手段によって得られる画像信号の高域成分を抽
出する高域成分抽出手段と、 前記絞り制御手段により絞りの大きさを所定量変化させ
た時に、前記高域成分抽出手段より得られる画像信号の
高域成分より、画像のボケ特性を推定するボケ特性推定
手段とを備えることを特徴とする光学的検出装置。1. An image pickup unit configured to form an image on an object at a relatively different image forming position, an optical unit that forms an image of the light of the object on the image pickup unit, and the optical unit. A diaphragm control means for controlling the size of the diaphragm, a high frequency component extraction means for extracting high frequency components of the image signal obtained by the image capturing means, and when the diaphragm size is changed by a predetermined amount by the diaphragm control means. And a blur characteristic estimating means for estimating blur characteristics of an image from the high frequency components of the image signal obtained by the high frequency component extracting means.
に結像されるように成された撮像手段と、 前記撮像手段に前記被写体の光を結像する光学手段と、 前記光学手段における絞りの大きさを制御する絞り制御
手段と、 前記撮像手段によって得られる画像信号の高域成分を抽
出する高域成分抽出手段と、 前記光学手段における焦点距離に関するデータを取得す
る焦点距離取得手段と、 前記絞り制御手段により絞りの大きさを所定量変化させ
た時に、前記高域成分抽出手段より得られる画像信号の
高域成分と、前記焦点距離取得手段により得られる焦点
距離に関するデータとにより前記光学手段と被写体との
距離を推定する距離推定手段とを備えることを特徴とす
る光学的検出装置。2. An image pickup unit configured to form an image on a subject at a relatively different image forming position, an optical unit for forming an image of the light of the subject on the image pickup unit, and the optical unit. A diaphragm control means for controlling the size of the diaphragm, a high frequency component extraction means for extracting a high frequency component of the image signal obtained by the imaging means, and a focal length acquisition means for acquiring data relating to the focal length in the optical means. When the aperture size is changed by a predetermined amount by the aperture control means, the high frequency component of the image signal obtained by the high frequency component extraction means and the data about the focal length obtained by the focal length acquisition means An optical detection device comprising: an optical means and a distance estimation means for estimating a distance between a subject and the subject.
に結像されるように成された撮像手段と、 前記撮像手段に前記被写体の光を結像する光学手段と、 前記光学手段における絞りの大きさを制御する絞り制御
手段と、 前記撮像手段によって得られる画像信号の高域成分を抽
出する高域成分抽出手段と、 前記絞り制御手段により絞りの大きさを所定量変化させ
た時に、前記高域成分抽出手段より得られる画像信号の
高域成分より、画像のボケ特性を推定するボケ特性推定
手段と、 前記ボケ特性推定手段によって得られるボケ特性に基づ
いて前記撮像素子に対する被写体の合焦位置を推定する
合焦位置推定手段と、 前記合焦位置推定手段によって得られる推定値に基づい
て、前記光学手段と撮像素子との相対位置を変化させる
移動手段とを備えることを特徴とするフォーカス制御装
置。3. An image pickup unit configured to form an image on a subject at a relatively different image forming position, an optical unit for forming an image of the light of the subject on the image pickup unit, and the optical unit. A diaphragm control means for controlling the size of the diaphragm, a high frequency component extraction means for extracting high frequency components of the image signal obtained by the image capturing means, and when the diaphragm size is changed by a predetermined amount by the diaphragm control means. A high-frequency component of the image signal obtained from the high-frequency component extracting means, a blur characteristic estimating means for estimating blur characteristics of an image, and a subject of the image sensor based on the blur characteristic obtained by the blur characteristic estimating means. A focusing position estimating means for estimating a focusing position, and a moving means for changing a relative position between the optical means and the image sensor based on an estimated value obtained by the focusing position estimating means. A focus control device which is characterized by being capable of
た複数の撮像素子からなることを特徴とする請求項1ま
たは2に記載の光学的検出装置または請求項3に記載の
フォーカス制御装置。4. The optical detection device according to claim 1 or 2, or the focus control device according to claim 3, wherein the image pickup means includes a plurality of image pickup elements arranged at different positions.
り、 前記撮像素子は、周期的に異なる位置に移動されること
を特徴とする請求項1または2に記載の光学的検出装置
または請求項3に記載のフォーカス制御装置。5. The optical detection device according to claim 1 or 2, wherein the image pickup unit includes one image pickup element, and the image pickup element is periodically moved to different positions. Item 4. The focus control device according to item 3.
し、相対的に異なる位置に配置された複数の前記撮像素
子に結像させるハーフミラーを備えることを特徴とする
請求項4に記載の光学的検出装置またはフォーカス制御
装置。6. The image pickup unit according to claim 4, further comprising a half mirror that divides the image of the subject and forms an image on a plurality of image pickup elements arranged at relatively different positions. Optical detection device or focus control device.
によって得られる画像の注目領域における画像信号の高
域成分を抽出するように成されたことを特徴とする請求
項1乃至6のいずれかに記載の光学的検出装置またはフ
ォーカス制御装置。7. The high-frequency component extraction means is configured to extract high-frequency components of an image signal in a region of interest of an image obtained by the image pickup means. An optical detection device or a focus control device as described in 1.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP00286694A JP3356229B2 (en) | 1994-01-17 | 1994-01-17 | Optical detection device and focus control device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP00286694A JP3356229B2 (en) | 1994-01-17 | 1994-01-17 | Optical detection device and focus control device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH07209576A true JPH07209576A (en) | 1995-08-11 |
| JP3356229B2 JP3356229B2 (en) | 2002-12-16 |
Family
ID=11541294
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP00286694A Expired - Fee Related JP3356229B2 (en) | 1994-01-17 | 1994-01-17 | Optical detection device and focus control device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3356229B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007274532A (en) * | 2006-03-31 | 2007-10-18 | Sony Corp | Imaging apparatus, high-frequency component detection circuit, high-frequency component detection method, and computer program |
| WO2010016560A1 (en) * | 2008-08-04 | 2010-02-11 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
| JP2011015844A (en) * | 2009-07-09 | 2011-01-27 | Canon Inc | Fundus camera |
| WO2011099239A1 (en) * | 2010-02-12 | 2011-08-18 | パナソニック株式会社 | Imaging device and method, and image processing method for imaging device |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5430292B2 (en) * | 2009-03-26 | 2014-02-26 | 京セラ株式会社 | Subject distance measuring device |
| JP5848177B2 (en) * | 2012-03-27 | 2016-01-27 | 日本放送協会 | Multi-focus camera |
-
1994
- 1994-01-17 JP JP00286694A patent/JP3356229B2/en not_active Expired - Fee Related
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007274532A (en) * | 2006-03-31 | 2007-10-18 | Sony Corp | Imaging apparatus, high-frequency component detection circuit, high-frequency component detection method, and computer program |
| US7889272B2 (en) | 2006-03-31 | 2011-02-15 | Sony Corporation | Imaging apparatus, high frequency component detection circuit, high frequency component detection method and computer program product |
| WO2010016560A1 (en) * | 2008-08-04 | 2010-02-11 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
| CN102119527A (en) * | 2008-08-04 | 2011-07-06 | 佳能株式会社 | Image processing apparatus and image processing method |
| JP2011523238A (en) * | 2008-08-04 | 2011-08-04 | キヤノン株式会社 | Image processing apparatus and image processing method |
| US8842217B2 (en) | 2008-08-04 | 2014-09-23 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
| JP2011015844A (en) * | 2009-07-09 | 2011-01-27 | Canon Inc | Fundus camera |
| US8545019B2 (en) | 2009-07-09 | 2013-10-01 | Canon Kabushiki Kaisha | Fundus camera |
| WO2011099239A1 (en) * | 2010-02-12 | 2011-08-18 | パナソニック株式会社 | Imaging device and method, and image processing method for imaging device |
| JP2011166588A (en) * | 2010-02-12 | 2011-08-25 | Panasonic Corp | Imaging apparatus and imaging method, and image processing method for the imaging apparatus |
| US8520081B2 (en) | 2010-02-12 | 2013-08-27 | Panasonic Corporation | Imaging device and method, and image processing method for imaging device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3356229B2 (en) | 2002-12-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3175175B2 (en) | Focus detection device | |
| US20070189750A1 (en) | Method of and apparatus for simultaneously capturing and generating multiple blurred images | |
| US6023056A (en) | Scene-based autofocus method | |
| CN100534146C (en) | Camera device and focus control method | |
| WO2007086378A1 (en) | Best-focus detector | |
| KR20090028255A (en) | Method and device for automatic focusing of image acquisition device | |
| US10999491B2 (en) | Control apparatus, image capturing apparatus, control method, and storage medium | |
| JP2009080113A (en) | Distance estimation method, distance estimation device, imaging device, and computer-readable medium | |
| JP2008052123A (en) | Imaging apparatus | |
| JPH05232367A (en) | Focusing device | |
| JP4334784B2 (en) | Autofocus device and imaging device using the same | |
| JP3356229B2 (en) | Optical detection device and focus control device | |
| JP2007328360A (en) | Autofocus camera and photographing method | |
| JP2002010126A (en) | Imaging device | |
| JPH07270674A (en) | Focus detection device | |
| JP2012142729A (en) | Camera | |
| JP2832029B2 (en) | Automatic focusing device | |
| JP2603212B2 (en) | Automatic tracking device in camera | |
| JP3143540B2 (en) | Focus information detection device | |
| JP7087052B2 (en) | Lens control device, control method | |
| KR102061087B1 (en) | Method, apparatus and program stored in storage medium for focusing for video projector | |
| JP2810403B2 (en) | Automatic focusing device | |
| JP3116422B2 (en) | Camera control device | |
| JP3361619B2 (en) | Focusing position detection device for electronic camera | |
| JP2000338385A (en) | Automatic focusing device and focusing method thereof |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20020905 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091004 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091004 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101004 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111004 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121004 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131004 Year of fee payment: 11 |
|
| LAPS | Cancellation because of no payment of annual fees |