JP2013200530A - Imaging apparatus and control method thereof - Google Patents
Imaging apparatus and control method thereof Download PDFInfo
- Publication number
- JP2013200530A JP2013200530A JP2012070295A JP2012070295A JP2013200530A JP 2013200530 A JP2013200530 A JP 2013200530A JP 2012070295 A JP2012070295 A JP 2012070295A JP 2012070295 A JP2012070295 A JP 2012070295A JP 2013200530 A JP2013200530 A JP 2013200530A
- Authority
- JP
- Japan
- Prior art keywords
- measurement point
- tracking
- image
- control unit
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
Abstract
【課題】追尾対象のコントラストの高低に関わらず精度の高い被写体追尾処理と焦点検出を実現すること。
【解決手段】撮像装置は、撮像画面上に設定した測定点群を用いて焦点状態検出を行う焦点状態検出センサ３０５と、被写体の測光画像データを検出する測光センサ３０３を備える。ＡＦ制御部３０４は各測定点での焦点ずれ量を演算する。ＡＥ制御部３０２は測光画像データを取得して被写体の追尾用領域を決定する。追尾用領域内の画像のコントラスト値が閾値を超える場合、ＡＥ制御部３０２は、ＡＦ制御部３０４により選択された測定点に隣接する測定点を含む追尾用領域を決定し、当該追尾用領域内に被写体の追尾対象位置を設定する。ＡＦ制御部３０４は、追尾対象位置から測定点を再選択して当該測定点の位置情報および焦点ずれ量をシステム制御部３０６に出力する。システム制御部３０６はフォーカスレンズ２１３を駆動して焦点調節動作を制御する。
【選択図】 図２
A highly accurate subject tracking process and focus detection are realized regardless of the contrast level of a tracking target.
An imaging apparatus includes a focus state detection sensor 305 that detects a focus state using a measurement point group set on an imaging screen, and a photometric sensor 303 that detects photometric image data of a subject. The AF control unit 304 calculates a defocus amount at each measurement point. The AE control unit 302 acquires photometric image data and determines a tracking area for the subject. When the contrast value of the image in the tracking region exceeds the threshold value, the AE control unit 302 determines a tracking region including a measurement point adjacent to the measurement point selected by the AF control unit 304, and the tracking region Set the tracking target position of the subject. The AF control unit 304 reselects the measurement point from the tracking target position, and outputs the position information of the measurement point and the defocus amount to the system control unit 306. The system control unit 306 controls the focus adjustment operation by driving the focus lens 213.
[Selection] Figure 2
Description
本発明は、撮像装置における被写体追尾処理および焦点検出の技術に関するものである。 The present invention relates to subject tracking processing and focus detection technology in an imaging apparatus.
従来、固体撮像素子を搭載したカメラにおいて、連続して撮像される画像から任意の被写体像を抽出し、連続するコマ間で被写体を追尾し続ける機能が実用化されている。連続撮影中の各画像における被写体像の位置検出によって、適切な自動焦点調節と自動露出演算が可能となる。被写体追尾法としては、画像内における被写体像の領域をテンプレートとしてテンプレートマッチングを行って被写体を探索する方法が知られている。しかし、被写体が、例えば無地のシャツを着た人物である場合のように、コントラストの低い領域が追尾対象に設定されると、当該領域が検出され続けるため、焦点検出が困難になることがある。一方で、コントラストの高さを優先し、主被写体と背景の境目の領域等を追尾対象に設定すれば、焦点検出は容易になる。しかし、背景画像に対するマッチングの相関度が高くなるため、誤った追尾動作が起こる可能性がある。
上記の問題に対し、特許文献１には、追尾対象の被写体に対する焦点検出が不能である場合に、被写体の追尾動作を禁止するという方法が開示されている。
2. Description of the Related Art Conventionally, in a camera equipped with a solid-state image sensor, a function of extracting an arbitrary subject image from continuously captured images and keeping track of the subject between successive frames has been put into practical use. By detecting the position of the subject image in each image during continuous shooting, appropriate automatic focus adjustment and automatic exposure calculation can be performed. As a subject tracking method, a method of searching for a subject by performing template matching using a region of a subject image in an image as a template is known. However, if the subject is a person wearing a plain shirt, for example, if a low-contrast region is set as a tracking target, the region will continue to be detected, and focus detection may be difficult. . On the other hand, if priority is given to high contrast and the area between the main subject and the background is set as the tracking target, focus detection becomes easy. However, since the correlation degree of matching with the background image is high, an erroneous tracking operation may occur.
In order to solve the above problem,
特許文献１に開示された従来技術では、追尾対象の被写体に対する焦点検出が不能となった瞬間に追尾動作が止まってしまうため、それ以降の追尾対象の位置を検出できなくなる。また、コントラストの高い領域をテンプレートとしてマッチング処理を行う場合に生じる誤った追尾動作の問題を解決することはできない。
本発明の目的は、追尾対象のコントラストの高低に関わらず精度の高い被写体追尾処理および焦点検出を実現できる撮像装置とその制御方法を提供することである。
In the prior art disclosed in
An object of the present invention is to provide an imaging apparatus capable of realizing subject tracking processing and focus detection with high accuracy regardless of the contrast level of a tracking target, and a control method therefor.
上記課題を解決するために、本発明に係る装置は、撮像画面上に設定した複数の測定点を用いて焦点状態検出を行う焦点状態検出手段と、被写体の色情報を含む測光画像データを検出する測光手段と、焦点調節に用いる光学部材を有する撮像装置であって、前記焦点状態検出手段の検出情報を取得して焦点調節に用いる前記測定点の選択および前記測定点での焦点ずれ量の演算を行う第１演算処理手段と、前記測光手段が検出した前記測光画像データを取得して被写体の追尾用領域を決定して追尾処理の演算を行う第２演算処理手段と、前記第１演算処理手段の演算結果を取得して前記光学部材を駆動して焦点調節動作を制御する制御手段を備える。前記第２演算処理手段は、前記第１演算処理手段により選択された前記測定点の位置を含む第１追尾用領域内の画像データを前記測光画像データから抽出し、前記第１追尾用領域内の画像のコントラスト値が閾値を超える場合、選択された前記測定点に隣接する測定点の位置を含む第２追尾用領域内に、前記被写体の追尾対象位置を設定して追尾処理の演算を行い、前記第１演算処理手段は、前記第２演算処理手段が設定した前記追尾対象位置から前記測定点を再選択して当該測定点の位置情報および焦点ずれ量を前記制御手段に出力する。 In order to solve the above-described problems, an apparatus according to the present invention detects focus state detection means for performing focus state detection using a plurality of measurement points set on an imaging screen, and detects photometric image data including color information of a subject. And an optical device used for focus adjustment, the detection information of the focus state detection means is obtained and the measurement point used for focus adjustment is selected and the amount of defocus at the measurement point is determined. First calculation processing means for performing calculation, second calculation processing means for acquiring the photometric image data detected by the photometry means, determining a tracking area of the subject, and performing tracking processing, and the first calculation Control means is provided for acquiring a calculation result of the processing means and driving the optical member to control a focus adjustment operation. The second calculation processing means extracts image data in the first tracking area including the position of the measurement point selected by the first calculation processing means from the photometric image data, and stores the image data in the first tracking area. When the contrast value of the image exceeds the threshold value, the tracking target position of the subject is set in the second tracking area including the position of the measurement point adjacent to the selected measurement point, and the tracking process is calculated. The first calculation processing unit reselects the measurement point from the tracking target position set by the second calculation processing unit, and outputs the position information and the defocus amount of the measurement point to the control unit.
本発明によれば、追尾対象のコントラストの高低に関わらず精度の高い被写体追尾処理および焦点検出を実現することができる。 According to the present invention, accurate subject tracking processing and focus detection can be realized regardless of the contrast level of the tracking target.
以下、添付図面を参照して、本発明の実施形態に係る撮像装置について説明する。なお、デジタル一眼レフカメラを例示して実施形態を説明するが、本発明は被写体の追尾機能を有する監視カメラ等の各種撮像装置へ適用可能である。
図１に示す処理を説明する前に、図２（Ａ）を参照して本実施形態に係る撮像装置の構成を説明する。図２（Ａ）の構成例に示す撮像装置において、カメラ本体部２０１の前面には撮影レンズ２０２が装着される。撮影レンズ２０２は交換可能であり、カメラ本体部２０１と撮影レンズ２０２は、マウント接点群２１５を介して電気的に接続されている。撮影レンズ２０２は、内部にフォーカスレンズ２１３と絞りシャッタ２１４を備えており、マウント接点群２１５を介した制御により、カメラ内に取り込む光量とピントを調整する。
Hereinafter, an imaging device according to an embodiment of the present invention will be described with reference to the accompanying drawings. Although the embodiment will be described by taking a digital single lens reflex camera as an example, the present invention can be applied to various imaging apparatuses such as a surveillance camera having a subject tracking function.
Before describing the processing illustrated in FIG. 1, the configuration of the imaging apparatus according to the present embodiment will be described with reference to FIG. In the imaging device shown in the configuration example of FIG. 2A, a photographing
カメラ本体部２０１内に配置された可動のメインミラー２０３はハーフミラーであり、ファインダ観測状態で撮影光路上に斜設され、撮影レンズ２０２からの撮影光束をファインダ光学系へと反射する。一方、メインミラー２０３の透過光は可動のサブミラー２０４を介してＡＦ（オートフォーカス）装置２０５に入射する。ＡＦ装置２０５は焦点状態検出センサを備え、撮影レンズ２０２の二次結像面を焦点検出ラインセンサ上に形成することで、位相差検出方式により撮影レンズ２０２の焦点調節状態を検出する。ピント板２０６はファインダ光学系を構成し、撮影レンズ２０２の予定結像面に配置されている。ペンタプリズム２０７はファインダ光路を変更し、アイピース２０９からユーザがピント板２０６を観察することで撮影画面を確認できる。
The movable
ＡＥ（自動露出）装置２０８は測光センサを備え、これに照射される光信号から測光画像データを生成する。測光画像データは輝度データと色差データを有する。ＡＥ装置２０８は、測光画像データを用いて被写体の明るさを検出し、露出演算および被写体追尾処理を行う。サブミラー２０４の背後にはフォーカルプレーンシャッタ２１０が配置され、さらに撮像素子２１１が位置する。メインミラー２０３およびサブミラー２０４が撮影光束上から退避し、フォーカルプレーンシャッタ２１０が開くことにより、撮像素子２１１が露光される。カメラ本体部２０１の背面には表示手段としてディスプレイユニット２１２が設けられており、ユーザが撮影情報や撮影画像を確認できる。
The AE (automatic exposure)
次に、本実施形態の撮像装置の機能について、図２（Ａ）の模式図および図２（Ｂ）の構成図を用いて説明する。なお、図２（Ｂ）は本発明に関連する構成要素のみを示す。
操作部３０１はユーザが操作する操作部材を備えており、カメラ本体部２０１に取り付けられたボタン、スイッチ、ダイヤル、接続機器等を介してユーザが行った操作を検知し、操作指示に応じた信号をシステム制御部３０６へ送る。操作部３０１は、ユーザがレリーズボタンを半押し操作した場合に発する指示信号（以下、ＳＷ１信号という）と、レリーズボタンを深く押し込む全押し操作を行った場合に発する指示信号（以下、ＳＷ２信号という）をシステム制御部３０６に出力する。ここで、ユーザがレリーズボタンの半押し操作を維持した状態を「ＳＷ１保持状態」と呼び、レリーズボタンの全押し操作を維持した状態を「ＳＷ２保持状態」と呼ぶこととする。また、操作部３０１は、ユーザがＳＷ１保持状態にてレリーズボタンを離した瞬間にＳＷ１解除信号をシステム制御部３０６に出力し、ＳＷ２保持状態にてユーザがレリーズボタンを離した瞬間にＳＷ２解除信号をシステム制御部３０６に出力する。
Next, functions of the imaging apparatus of the present embodiment will be described with reference to the schematic diagram of FIG. 2A and the configuration diagram of FIG. FIG. 2B shows only components related to the present invention.
The
自動焦点検出を行うＡＦ装置２０５は、ＡＦ制御部３０４および焦点状態検出センサ３０５を備える。第１演算処理手段を構成するＡＦ制御部３０４は、焦点状態検出センサ３０５の検出情報を取得して焦点調節に用いる測定点での焦点ずれ量を演算する。焦点状態検出センサ３０５は、図５に示すように、複数の検出位置に対応するラインセンサで構成される。図示の例では、撮像画面上での６１個の検出位置に対応する複数のラインセンサが設けられており、サブミラー２０４を介した入射光を電気信号に変換し、像信号をＡＦ制御部３０４に出力する。ＡＦ制御部３０４は、焦点状態検出センサ３０５が出力する像信号に基づいて、各ラインセンサに対応する測定点での焦点ずれ量、つまりデフォーカス量を計算し、焦点調節に用いる測定点を１つ選択する。そして、ＡＦ制御部３０４は、各測定点でのデフォーカス量をデータとして持つデフォーカスマップと、選択した測定点の位置情報をシステム制御部３０６に出力する。システム制御部３０６は、選択された測定点の位置情報およびデフォーカスマップのデータに基づいて焦点調節制御を行い、不図示の駆動部を介して可動の光学部材であるフォーカスレンズ２１３を駆動制御する。なお、焦点調節制御では、選択された測定点でのデフォーカス量に対応したフォーカスレンズ２１３の駆動量が算出される。あるいは、光学部材の駆動に伴って撮像素子等の位置制御を行う形態等でもよく、本発明の実施上、制御形態の如何は問わない。
An
自動露出演算および被写体追尾を行うＡＥ装置２０８は、ＡＥ制御部３０２および測光センサ３０３を備える。測光センサ３０３は、被写体の色情報を含む測光画像データを検出する。第２演算処理手段を構成するＡＥ制御部３０２は、測光センサ３０３が検出した測光画像データを取得して被写体の追尾用領域を決定して追尾処理の演算を行う。ＡＥ制御部３０２は、撮像画面に対応する測光画像データに対して追尾用領域内の画像との相関演算により追尾対象位置を設定する。連写撮影の場合、連続して取得される撮像信号に対応する測光画像データに対して、追尾用領域内の画像との相関演算が行われる。また、ＡＥ制御部３０２は、測光センサ３０３の測光画像データに基づいて自動露出演算を行い、演算結果をシステム制御部３０６に出力する。システム制御部３０６はＡＥ制御部３０２からの自動露出演算結果に基づいて、絞りシャッタ２１４の絞りを制御し、カメラ本体部２０１内の入射光量を調節する。さらに、自動露出演算結果に基づいて、レリーズ操作時にフォーカルプレーンシャッタ２１０の制御が行われ、撮像素子２１１の露光時間が調節される。また、ＳＷ１保持状態および連写撮影中において、ＡＥ制御部３０２は測光センサ３０３から取得した測光画像データを用いて被写体追尾処理を行い、追尾対象となる被写体の位置データをシステム制御部３０６に出力する。システム制御部３０６はＡＥ制御部３０２から出力された追尾対象の位置データをＡＦ制御部３０４に出力する。ＡＦ制御部３０４は、システム制御部３０６から出力された追尾対象の位置の近傍にある複数の測定点についてデフォーカス量をそれぞれ計算し、計算結果を予め設定された閾値と比較する。比較結果に応じて、ＡＦ制御部３０４は、システム制御部３０６に出力する測定点の位置データを、追尾対象位置の近傍にある何れかの測定点の位置データに再設定する。
An
システム制御部３０６は、操作部３０１の出力信号に基づいてメインミラー２０３、サブミラー２０４、およびフォーカルプレーンシャッタ２１０を制御する。システム制御部３０６は、操作部３０１の出力信号がＳＷ２信号である場合、メインミラー２０３およびサブミラー２０４のアップ動作制御を行って撮影光路上から退避させ、フォーカルプレーンシャッタ２１０を制御して撮像素子２１１へ光を照射させる。そして、シャッタ制御が終了すると、システム制御部３０６はメインミラー２０３およびサブミラー２０４のダウン動作制御を行う。
The
撮像素子２１１は撮影レンズ２０２を通して入射する被写体からの光を電気信号に変換して画像データを生成し、システム制御部３０６へ出力する。システム制御部３０６は撮像素子２１１から取得した画像データに従ってディスプレイユニット２１２の画面上に画像を表示させるとともに、画像記憶装置３０７へ画像データを書き込む制御を行う。
The
次に、本実施形態における撮像装置の動作について、図３から図５を参照して説明する。撮像装置では、３つの制御演算部、つまりシステム制御部３０６、ＡＥ制御部３０２、ＡＦ制御部３０４のそれぞれが並列的に動作する。図３および図４は各制御部の動作シーケンスを説明する図である、これらの図は、処理手順やモジュール間の並列性を図解したものであり、各処理ブロックの大きさと処理時間との間に関連性はない。時間の経過方向は図３および図４の上から下に向かう方向とする。また、図５は撮像画面上の測定点群の配置と選択の様子を模式的に示した説明図である。図５（Ａ）は第Ｎ−１コマ目の画像６０１を示し、図５（Ｂ）は第Ｎコマ目の画像６０２を示す（Ｎは自然数変数とする）。
Next, the operation of the imaging apparatus according to the present embodiment will be described with reference to FIGS. In the imaging apparatus, each of the three control operation units, that is, the
図３はＳＷ１保持状態における各制御部の動作シーケンスを例示する。
Ｓ４０１でユーザはレリーズボタンを操作し、操作部３０１はシステム制御部３０６へＳＷ１信号を出力する。ＳＷ１信号の入力を受け付けたシステム制御部３０６はＡＦ制御部３０４へＡＦ開始信号ＤＯ１を出力し、ＡＦ制御部３０４が動作を開始する。Ｓ４０２でシステム制御部３０６は、ＡＥ制御部３０２およびＡＦ制御部３０４から出力されるデータに基づいて焦点調節動作を制御する。Ｓ４０３でＡＦ制御部３０４は、焦点状態検出センサ３０５の電荷蓄積を行い、Ｓ４０４で焦点状態検出センサ３０５から像信号を読み出す。Ｓ４０５でＡＦ制御部３０４は、読み出した像信号に基づいて、ユーザが任意に選択した測定点について焦点検出演算を行い、デフォーカス量を算出する。この時、デフォーカス量を計算した測定点に対しては、対応するデフォーカスマップのデータを更新する処理が行われる。焦点検出演算の結果、ユーザが選択した測定点でデフォーカス量を計算できなかった場合には、全ての測定点に対してデフォーカス量が計算され、デフォーカスマップのデータが更新される。その後、近優先により、前記測定点の近傍に位置する測定点が選択される。ＡＦ制御用に選択された測定点（以下、選択測定点という）の位置情報およびデフォーカスマップのデータはデータＤＯ２としてシステム制御部３０６に出力される。システム制御部３０６はデータＤＯ２を取得してデフォーカスマップのデータおよび選択測定点の位置情報に基づいて焦点調節動作を制御する。焦点調節動作が完了すると、システム制御部３０６はＡＦ開始信号ＤＯ３をＡＦ制御部３０４に出力し、ＡＥ開始信号ＤＯ４をＡＥ制御部３０２に出力する。
FIG. 3 illustrates an operation sequence of each control unit in the SW1 holding state.
In step S <b> 401, the user operates the release button, and the
Ｓ４０６では、ＡＥ開始信号ＤＯ４を受信したＡＥ制御部３０２が測光センサ３０３の電荷蓄積を行い、輝度信号および色差信号から画像データを生成する。測光センサ３０３の蓄積動作と焦点状態検出センサ３０５の蓄積動作は同時に開始されるため、それぞれのセンサから得られる像信号は同じシーンを撮像した信号となる。Ｓ４０７でＡＥ制御部３０２は、測光センサ３０３から信号を読み出し、測光画像データを取得する。Ｓ４０８でＡＥ制御部３０２は被写体追尾処理を行い、追尾対象の検出位置を示す追尾対象位置データＤＯ５をシステム制御部３０６に出力する。追尾テンプレート生成処理（Ｓ４１３参照）で生成されたテンプレート画像を追尾対象とし、Ｓ４０７で取得した画像データに対してテンプレートマッチングを行うことで、追尾対象の位置が検出される。処理の詳細については後述する。Ｓ４０９でＡＥ制御部３０２は、Ｓ４０７で取得した画像データに基づいて露出演算を行い、演算結果をデータＤＯ８としてシステム制御部３０６に出力する。
In S <b> 406, the
一方、システム制御部３０６からＡＦ開始信号ＤＯ３を受け取ったＡＦ制御部３０４は、焦点状態検出センサ３０５の蓄積（１セット目のＳ４０３参照）と信号読み出し（Ｓ４０４参照）を行い、Ｓ４１０に処理を進める。Ｓ４１０では、Ｓ４０５と同様の処理により焦点検出演算が行われる。但し、デフォーカス量の計算対象は、図５（Ｂ）に示すように、直前のコマで選択した測定点Ｐａ０と、その上下左右にそれぞれ位置する測定点Ｐａ１，Ｐａ２，Ｐａ３，Ｐａ４の合計５点である。図５（Ｂ）は、測定点Ｐａ０と、これに隣接する測定点Ｐａ１からＰａ４の位置関係を示す。測定点Ｐａ０からＰａ４のうち、中央に位置する測定点Ｐａ０のデフォーカス量が閾値以下である場合、測定点Ｐａ０が選択測定点となる。測定点Ｐａ０のデフォーカス量が閾値を超える場合には、測定点Ｐａ１からＰａ４のうちで最もデフォーカス量の小さい測定点が選択測定点となる。
On the other hand, the
Ｓ４１１でＡＦ制御部３０４は、システム制御部３０６から追尾対象位置データＤＯ６を受け取り、追尾対象位置に最も近い測定点Ｐｂ０とその上下左右の測定点Ｐｂ１，Ｐｂ２，Ｐｂ３，Ｐｂ４を特定する。図５（Ｂ）は、測定点Ｐｂ０と、これに隣接する測定点Ｐｂ１からＰｂ４の位置関係を示す。ＡＦ制御部３０４は各測定点でのデフォーカス量を計算し、測定点Ｐｂ０からＰｂ４のうちで最もデフォーカス量の小さい測定点を１つ選択する。選択された測定点のデフォーカス量が閾値以下である場合、ＡＦ制御部３０４は、この測定点を、Ｓ４１０で選択した測定点と置き換えることで新たな選択測定点とする。また、選択された測定点のデフォーカス量が閾値を超える場合には、Ｓ４１０で選択した測定点がそのまま選択測定点となる。このように測定点Ｐｂ０の周辺の測定点Ｐｂ１からＰｂ４についても選択対象とされる。これにより、追尾対象位置に最も近い測定点Ｐｂ０にてコントラストが低く、デフォーカス量を計算できない場合であっても、測定点Ｐｂ０の周辺の測定点を選択して主被写体の焦点検出を行うことが可能となる。
In step S411, the
図５の撮影例では、図５（Ｂ）に示す第Ｎコマ目の画像６０２にて、被写体の追尾結果が位置Ｐｂ０であり、測定点の再選択が行われた結果、測定点Ｐｂ１が選択される。測定点Ｐｂ１が選択される理由は、測定点Ｐｂ０，Ｐｂ２ではコントラストが低いためデフォーカス量を計算できず、また、測定点Ｐｂ３は背景画像上にあるためデフォーカス量が大きくなるからであり、これらの測定点は選択から除外される。残る測定点Ｐｂ１，Ｐｂ４のうち、測定点Ｐｂ１は被写体の顔および胴体の画像部分と、背景の画像部分を測定領域内に含む。測定点Ｐｂ４は被写体の胴体の画像部分と、背景の画像部分を測定領域内に含んでいる。したがって、ほぼ同等のデフォーカス量を持つ顔と胴体の画像部分でコントラストが得られる測定点Ｐｂ１の方が、測定点Ｐｂ４よりもデフォーカス量が小さくなる。よって、再選択により測定点Ｐｂ１が選択測定点となる。なお、図５（Ｂ）において被写体追尾結果が測定点Ｐｂ０の位置となっている理由については、後述するＡＥ制御部３０２の被写体追尾処理Ｓ４０８および追尾テンプレート生成処理Ｓ４１３にて説明する。
In the shooting example of FIG. 5, in the
測定点の再選択結果に応じて所定のフラグ（以下、測定点再選択フラグという）の値が設定される。図５の撮影例において、測定点Ｐａ０からＰａ４のいずれかが選択測定点となった場合、測定点再選択フラグはＦＡＬＳＥ（偽値）に設定される。また測定点Ｐｂ０からＰｂ４のいずれかが選択測定点となった場合、測定点再選択フラグはＴＲＵＥ（真値）に設定される。このフラグ値は、後述するＳ４１３の追尾テンプレート生成処理で用いる。 A value of a predetermined flag (hereinafter referred to as a measurement point reselection flag) is set in accordance with the measurement point reselection result. In the imaging example of FIG. 5, when any of the measurement points Pa0 to Pa4 is the selected measurement point, the measurement point reselection flag is set to FALSE (false value). When any of the measurement points Pb0 to Pb4 becomes the selected measurement point, the measurement point reselection flag is set to TRUE (true value). This flag value is used in the tracking template generation process of S413 described later.
Ｓ４１１の処理の終わりでＡＦ制御部３０４は選択測定点、デフォーカスマップ、測定点再選択フラグの各情報を含むデータＤＯ７をシステム制御部３０６に出力する。システム制御部３０６はデータＤＯ７における、選択測定点およびデフォーカスマップの各情報に基づいて焦点調節動作を制御する。Ｓ４１１の後でＳ４１２に処理を進め、ＡＦ制御部は６１個の全測定点についてデフォーカス量を計算し、デフォーカスマップのデータを更新する。更新されたデフォーカスマップは、データＤＯ９としてシステム制御部３０６に出力される。システム制御部３０６は、データＤＯ７に含まれる選択測定点を示す情報および測定点再選択フラグと、データＤＯ９に含まれるデフォーカスマップデータの各情報を、データＤ１０としてＡＥ制御部３０２に出力する。Ｓ４１３でＡＥ制御部３０２は、データＤ１０に基づいて追尾テンプレート生成処理を行う。この処理の詳細については後述する。なお、図３には、第１セット目の処理が終了してから第２セット目の処理が同様に実行される様子を示す。
At the end of the processing of S411, the
次に、図４を参照して連写撮影中の動作について説明する。図４は、連写撮影中における各制御部の動作シーケンスを例示する。図３と同様の処理については既に使用した符号および記号を用いることにより、それらの詳細な説明を省略し、主として相違点を説明する。
Ｓ５０１でユーザがレリーズボタンを操作し、操作部３０１はシステム制御部３０６へＳＷ２信号を出力する。システム制御部３０６はメインミラー２０３およびサブミラー２０４を駆動制御し、ミラーアップ動作制御を開始させる。また、システム制御部３０６はＡＦ制御部３０４にレリーズ開始信号Ｄ１１を出力し、ＡＥ制御部３０２にレリーズ開始信号Ｄ１２を出力する。レリーズ開始信号Ｄ１１，Ｄ１２をそれぞれ受信したＡＦ制御部３０４およびＡＥ制御部３０２は、その時点で行っていた処理を中断する。
Ｓ５０２ではメインミラー２０３およびサブミラー２０４が駆動され、ミラーアップ動作が行われる。また、システム制御部３０６は、測定点再選択フラグの情報を含む焦点検出データＤＯ７および露出演算データＤＯ８に基づいて、焦点調節動作の制御および露出制御を行う。Ｓ５０３でシステム制御部３０６は、撮像素子２１１の露光処理により撮像動作を制御する。撮像動作が完了すると、システム制御部３０６は撮像素子２１１から画像データを取得して画像記憶装置３０７に書き込む制御を行う。Ｓ５０４でシステム制御部３０６は、メインミラー２０３およびサブミラー２０４を駆動してミラーダウン動作を制御する。連写撮影中、すなわちＳＷ２保持状態において、システム制御部３０６はＳ４０２およびＳ５０２からＳ５０４の処理を繰り返す。
Next, the operation during continuous shooting will be described with reference to FIG. FIG. 4 illustrates an operation sequence of each control unit during continuous shooting. With respect to the same processing as in FIG. 3, the reference numerals and symbols already used are used, and detailed descriptions thereof are omitted, and differences are mainly described.
In S <b> 501, the user operates the release button, and the
In S502, the
次に、図３および図４に示すＳ４０８およびＳ４１３の被写体追尾に関連する処理について図１、図６ないし図９を参照して説明する。
まず、追尾テンプレート生成処理Ｓ４１３について図１（Ａ）および図６を用いて説明する。図１（Ａ）は追尾テンプレート生成処理の手順を例示したフローチャートであり、Ｓ１０１ないしＳ１０９の処理はＡＥ制御部３０２が行う。
Ｓ１０１では、選択測定点の位置情報、デフォーカスマップのデータ、測定点再選択フラグの情報を含むデータＤ１０に基づいて、Ｓ４０７で取得した画像データからテンプレートとして抽出する領域が決定される。これは被写体の追尾用領域であり、以下、「テンプレート領域」という。ここで、測定点再選択フラグがＦＡＬＳＥ（偽値）の場合、直前の被写体追尾処理Ｓ４０８で検出した追尾対象位置を中心とする一定領域がテンプレート領域に設定される。一方、測定点再選択フラグがＴＲＵＥ（真値）の場合には、再選択後の選択測定点の位置を中心とする一定領域がテンプレート領域に設定される。この時点で設定された領域（第１追尾用領域）は、最終的に決定される追尾用領域の候補であることに注意を要する。
Next, processing related to subject tracking in S408 and S413 shown in FIGS. 3 and 4 will be described with reference to FIGS. 1 and 6 to 9. FIG.
First, tracking template generation processing S413 is demonstrated using FIG. 1 (A) and FIG. FIG. 1A is a flowchart illustrating the procedure of the tracking template generation process, and the
In S101, a region to be extracted as a template from the image data acquired in S407 is determined based on the data D10 including the position information of the selected measurement point, defocus map data, and measurement point reselection flag information. This is a subject tracking area and is hereinafter referred to as a “template area”. Here, when the measurement point reselection flag is FALSE (false value), a fixed area centered on the tracking target position detected in the immediately preceding subject tracking process S408 is set as the template area. On the other hand, when the measurement point reselection flag is TRUE (true value), a certain region centered on the position of the selected measurement point after reselection is set as the template region. It should be noted that the area (first tracking area) set at this point is a candidate for the tracking area that is finally determined.
図６（Ａ）は選択測定点Ｐｔ０を中心とする一定領域を例示した図であり、主被写体となる人物の胴体の画像部分に選択測定点Ｐｔ０が存在する例を示す。領域Ａ０は選択測定点Ｐｔ０の位置を中心とするテンプレート領域を例示する。なお、測定点再選択フラグの値に応じてテンプレート領域を変更する理由は、被写体追尾処理の結果により測定点が選択測定点として採用されていない場合、追尾用に不適切なテンプレート領域が設定されないようにするためである。 FIG. 6A is a diagram exemplifying a certain region centered on the selected measurement point Pt0, and shows an example in which the selected measurement point Pt0 exists in the image portion of the torso of the person who is the main subject. The region A0 exemplifies a template region centered on the position of the selected measurement point Pt0. Note that the reason for changing the template area according to the value of the measurement point reselection flag is that an inappropriate template area for tracking is not set when the measurement point is not adopted as the selected measurement point due to the result of the subject tracking process. It is for doing so.
図１（Ａ）のＳ１０２では、撮影した画像について、テンプレート領域内の画素の色分布が計算され、追尾対象の特徴色が検出される。特徴色の検出処理は以下の通りである。
・図９のようにＲ（赤）Ｇ（緑）Ｂ（青）のカラー信号について、Ｒ信号、Ｇ信号、Ｂ信号のそれぞれの強さを０から７の８段階に分割したＲＧＢヒストグラム空間を用意するステップ。
図９に例示するＲＧＢヒストグラム空間は、８×８×８＝５１２個のブロックを有する。
・テンプレート領域内の各画素の色信号をＲＧＢの色データに変換し、Ｒ信号、Ｇ信号、Ｂ信号のそれぞれの強さに基づいて、ＲＧＢヒストグラム空間の各ブロックに画素を分類するステップ。
テンプレート領域内の全ての画素について上記の分類が行われた後、５１２個のブロックのうちで最も度数の多いブロックが決定される。このブロックに対応する色が、追尾対象の特徴色として選択される。
In S102 of FIG. 1A, the color distribution of the pixels in the template area is calculated for the captured image, and the characteristic color to be tracked is detected. The feature color detection process is as follows.
As shown in FIG. 9, an RGB histogram space in which the intensity of each of the R signal, G signal, and B signal is divided into 8 levels from 0 to 7 for the color signals of R (red), G (green), and B (blue). Steps to prepare.
The RGB histogram space illustrated in FIG. 9 has 8 × 8 × 8 = 512 blocks.
Converting the color signal of each pixel in the template area into RGB color data, and classifying the pixel into each block of the RGB histogram space based on the strength of each of the R signal, G signal, and B signal.
After the above classification is performed for all the pixels in the template area, the block with the highest frequency is determined among 512 blocks. The color corresponding to this block is selected as the characteristic color to be tracked.
Ｓ１０３では、テンプレート領域内の画像のコントラストが検出される。コントラスト検出については、Ｓ１０２で求めた各画素のＲ信号、Ｇ信号、Ｂ信号に対してエッジ検出を行うことで判別できる。検出されたコントラスト値は閾値と比較され、テンプレート領域内に、閾値を超える高コントラスト部分が存在すると判定された場合、Ｓ１０４に処理を進める。図６（Ａ）の例では、テンプレート領域内において主被写体となる人物と背景との境界が存在するため、コントラストが高いと判定される。また、コントラスト値が閾値以下の場合、テンプレート領域内に高コントラスト部分が存在しないと判定され、Ｓ１０８の処理へ進む。なお、本実施形態におけるコントラストの検出方法については、前記の処理に限定されない。例えば、ＡＥ制御部３０２はＳ１０２で作成したＲＧＢヒストグラム空間から、テンプレート領域内の色の分布状態を解析してコントラストを検出してもよい。
In S103, the contrast of the image in the template area is detected. Contrast detection can be determined by performing edge detection on the R, G, and B signals of each pixel obtained in S102. The detected contrast value is compared with a threshold value, and if it is determined that a high-contrast portion exceeding the threshold value exists in the template area, the process proceeds to S104. In the example of FIG. 6A, since the boundary between the person who is the main subject and the background exists in the template area, it is determined that the contrast is high. If the contrast value is equal to or smaller than the threshold value, it is determined that there is no high contrast portion in the template area, and the process proceeds to S108. Note that the contrast detection method in the present embodiment is not limited to the above processing. For example, the
Ｓ１０４では、図６（Ｂ）に示す選択測定点Ｐｔ０と、その上下左右に隣接して位置する測定点Ｐｔ１，Ｐｔ２，Ｐｔ３，Ｐｔ４について、デフォーカス量の比較処理が行われる。測定点Ｐｔ１からＰｔ４のうちで、測定点Ｐｔ０でのデフォーカス量との差が閾値以下の測定点を抽出する処理が実行される。図６（Ｂ）は各測定点の位置関係を例示する。この例では測定点Ｐｔ１，Ｐｔ２，Ｐｔ３が主被写体の画像上に存在するため、これらの測定点では選択測定点Ｐｔ０とのデフォーカス量の差は閾値以下となる。一方、測定点Ｐｔ４は背景画像上に存在するため、選択測定点Ｐｔ０でのデフォーカス量との差は閾値より大きくなる。従って、測定点Ｐｔ１，Ｐｔ２，Ｐｔ３が候補として抽出されることになる。 In S104, a defocus amount comparison process is performed on the selected measurement point Pt0 shown in FIG. 6B and the measurement points Pt1, Pt2, Pt3, and Pt4 that are positioned adjacent to the top, bottom, left, and right. Among the measurement points Pt1 to Pt4, a process of extracting a measurement point whose difference from the defocus amount at the measurement point Pt0 is equal to or less than a threshold value is executed. FIG. 6B illustrates the positional relationship between the measurement points. In this example, since the measurement points Pt1, Pt2, and Pt3 are present on the image of the main subject, the difference in defocus amount from the selected measurement point Pt0 is equal to or less than the threshold value at these measurement points. On the other hand, since the measurement point Pt4 exists on the background image, the difference from the defocus amount at the selected measurement point Pt0 is larger than the threshold value. Therefore, the measurement points Pt1, Pt2, and Pt3 are extracted as candidates.
Ｓ１０５では、Ｓ１０４で抽出した各測定点の領域に対して、Ｓ１０２と同様の特徴色検出が行われる。図６（Ｂ）の例では、測定点Ｐｔ１，Ｐｔ２，Ｐｔ３をそれぞれ中心とする各領域に対して特徴色が検出される。その際、特徴色検出に用いるＲＧＢヒストグラム空間については、それぞれ別々の独立した空間が用いられる。Ｓ１０６では、Ｓ１０２で作成したＲＧＢヒストグラム空間において、少なくとも１以上の度数を持つブロックに、Ｓ１０５で作成した全てのＲＧＢヒストグラム空間中での対応するブロックの度数がそれぞれに加算される。そして、加算の結果、最も度数の高い色が追尾対象の特徴色として設定される。図６（Ｂ）では、特徴色検出に用いた測定点Ｐｔ０，Ｐｔ１，Ｐｔ２，Ｐｔ３をそれぞれ中心とする各領域の合計面積に応じて特徴色７０１が設定される。つまり、これらの領域については、人物の胴体の画像部分に位置する領域の合計面積が最も大きくなるため、人物の胴体の色が特徴色７０１となる。この処理により、選択測定点での色と同色の画像部分を含み、かつ選択測定点でのデフォーカス量との差が閾値以下である領域のみで特徴色検出を行うことができる。よって、選択測定点を中心とする領域内に背景色の画像部分が含まれる場合でも、精度良く主被写体の特徴色を検出できる。
In S105, feature color detection similar to that in S102 is performed on the area of each measurement point extracted in S104. In the example of FIG. 6B, characteristic colors are detected for the respective regions centered on the measurement points Pt1, Pt2, and Pt3. At this time, separate and independent spaces are used for the RGB histogram spaces used for feature color detection. In S106, the frequencies of the corresponding blocks in all the RGB histogram spaces created in S105 are added to the blocks having at least one frequency in the RGB histogram space created in S102. As a result of the addition, the color with the highest frequency is set as the characteristic color to be tracked. In FIG. 6B, the
Ｓ１０７では、Ｓ１０４で抽出した測定点の各領域のうち、最も特徴色を多く含む画像部分の領域が、新たなテンプレート領域として再設定される。図６（Ｂ）の例では、測定点Ｐｔ０，Ｐｔ１，Ｐｔ２，Ｐｔ３をそれぞれ含む、複数の領域（第２追尾用領域）のうち、特徴色７０１の画像部分を最も広く含む領域は、測定点Ｐｔ３の領域である。つまり、第２追尾用領域内の画像データに係る特徴色と、Ｓ１０２で検出した第１追尾用領域内の画像データに係る特徴色とが同色である画像部分の面積が算出される。算出された面積がＳ１０１で設定した第１追尾用領域内の画像データにて特徴色をもつ画像部分の面積に比べて大きいという条件を満たす場合、最大面積の画像部分を含む第２追尾用領域が最終的な追尾用領域として設定される。よって、図７（Ａ）に例示するように、測定点Ｐｔ３を含む領域が新たなテンプレート領域Ａ３として設定される。このように、追尾対象のコントラストが高く、かつテンプレート領域内に複数の色をもつ部分が存在する場合でも、周囲のコントラストの低い領域を探索してテンプレートとして採用することができる。その結果、被写体追尾処理の際、追尾対象と他の被写体とが判別し易くなる。
In S107, the area of the image portion that contains the most characteristic colors among the areas of the measurement points extracted in S104 is reset as a new template area. In the example of FIG. 6B, among the plurality of regions (second tracking regions) each including the measurement points Pt0, Pt1, Pt2, and Pt3, the region that includes the image portion of the
Ｓ１０８では、Ｓ１０１またはＳ１０７で設定されたテンプレート領域内の画像を入力画像から切り出す処理が行われ、テンプレート領域内の抽出画像のデータが作成される。図７（Ａ）では、図６（Ｂ）の測定点Ｐｔ３を含むテンプレート領域Ａ３にて、抽出画像７０２が得られる（図７（Ａ）の右下部参照）。次にＳ１０９では、抽出画像７０２に対して、特徴色の画像部分を高輝度に変換し、特徴色とは異なる色の画像部分を低輝度に変換する処理が行われ、輝度画像データが生成される。図７（Ｂ）は色変換処理を例示する。抽出画像７０２に対して、特徴色７０１の画像部分が高輝度に変換され、特徴色７０１でない画像部分が低輝度に変換されるので、追尾対象となる画像部分を強調したテンプレート画像７０３が生成される。図３および図４に示すＳ４０８の被写体追尾処理では、Ｓ１０９で生成したテンプレート画像７０３を用いてテンプレートマッチングが実行される。これにより、追尾対象の特徴色を強調した状態で輝度情報に反映させた輝度画像データによるテンプレートマッチングが行えるため、単にカラー画像によるテンプレートマッチングを行う場合に比べて演算負荷を軽減できる。
In S108, the image in the template area set in S101 or S107 is cut out from the input image, and the extracted image data in the template area is created. In FIG. 7A, an extracted
次に、図３および図４のＳ４０８の被写体追尾処理について図１（Ｂ）および図８を用いて説明する。図１（Ｂ）は被写体追尾処理を説明するフローチャートであり、Ｓ１２１およびＳ１２２の処理はＡＥ制御部３０２が行う。図８は入力画像８０１の色変換処理例を説明する図である。
Ｓ１２１では、測光センサ３０３から取得したカラー画像データに対して、以前のコマの追尾テンプレート生成処理Ｓ４１３で選択された特徴色７０１をもつ画像部分を高輝度に変換し、それ以外の色の画像部分を低輝度に変換する処理が行われる。これにより、図８に示す入力画像８０１から、テンプレートマッチング用の色変換画像８０２が生成される。Ｓ１２２では、現時点よりも前のコマの追尾テンプレート生成処理Ｓ４１３で作成したテンプレート画像７０３を用いてテンプレートマッチングが行われ、相関の高い色変換画像８０２の中で、テンプレート画像７０３と最も相関度の高い領域が検出される。図８の例では、最も相関度の高い領域が追尾対象位置８０３として設定される。ＡＥ制御部３０２は追尾対象位置８０３の情報を、図３および図４のデータＤＯ５としてシステム制御部３０６に出力する。システム制御部３０６は追尾対象位置８０３の情報を、データＤＯ６としてＡＦ制御部３０４に出力する。ＡＦ制御部３０４は、図３および図４に示す測定点の再選択処理Ｓ４１１において、データＤＯ６の示す追尾対象位置に最も近い測定点を、追尾対象の画像上の測定点として設定する。図５（Ｂ）に示す測定点Ｐｂ０は追尾対象位置８０３に最も近い測定点であり、測定点Ｐａ０は、直前の第Ｎ−１コマでの選択測定点である。
Next, the subject tracking process in S408 of FIGS. 3 and 4 will be described with reference to FIGS. FIG. 1B is a flowchart for explaining subject tracking processing. The processing in S121 and S122 is performed by the
In S121, with respect to the color image data acquired from the
図１（Ｂ）のＳ１２１で説明した色変換を施した画像データを用いてテンプレートマッチング処理を行うことにより、追尾対象の特徴色の情報を反映させた輝度画像を用いて被写体追尾処理を実行できる。このため、単にカラー画像によるテンプレートマッチングを行う場合に比べて演算負荷を小さくすることができる。
本実施形態では、テンプレートマッチングによる被写体追尾処理において、追尾対象の特徴色をより多く含む領域がテンプレート画像に設定されるので、追尾対象とそれ以外の物体との判別が容易になる。また、追尾用領域内の画像のコントラストが高い場合、追尾対象の画像部分をより多く含む領域での焦点検出情報を利用することで、誤った追尾動作を防止できるとともに、合焦制御の精度を高めることができる。
By performing the template matching process using the image data subjected to the color conversion described in S121 of FIG. 1B, the subject tracking process can be executed using the luminance image reflecting the tracking target feature color information. . For this reason, it is possible to reduce the calculation load as compared with the case of simply performing template matching using a color image.
In the present embodiment, in the subject tracking process by template matching, an area including more characteristic colors of the tracking target is set in the template image, so that it is easy to distinguish the tracking target from other objects. In addition, when the contrast of the image in the tracking area is high, by using the focus detection information in the area that includes a larger part of the tracking target image, it is possible to prevent an erroneous tracking operation and improve the accuracy of the focus control. Can be increased.
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
(Other embodiments)
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, or the like) of the system or apparatus reads the program. It is a process to be executed.
２１３ フォーカスレンズ
３０２ ＡＥ制御部
３０３ 測光センサ
３０４ ＡＦ制御部
３０５ 焦点状態検出センサ
３０６ システム制御部
213
Claims (7)
前記焦点状態検出手段の検出情報を取得して焦点調節に用いる前記測定点の選択および前記測定点での焦点ずれ量の演算を行う第１演算処理手段と、
前記測光手段が検出した前記測光画像データを取得して被写体の追尾用領域を決定して追尾処理の演算を行う第２演算処理手段と、
前記第１演算処理手段の演算結果を取得して前記光学部材を駆動して焦点調節動作を制御する制御手段を備え、
前記第２演算処理手段は、前記第１演算処理手段により選択された前記測定点の位置を含む第１追尾用領域内の画像データを前記測光画像データから抽出し、前記第１追尾用領域内の画像のコントラスト値が閾値を超える場合、選択された前記測定点に隣接する測定点の位置を含む第２追尾用領域内に、前記被写体の追尾対象位置を設定して追尾処理の演算を行い、
前記第１演算処理手段は、前記第２演算処理手段が設定した前記追尾対象位置から前記測定点を再選択して当該測定点の位置情報および焦点ずれ量を前記制御手段に出力することを特徴とする撮像装置。 An imaging apparatus having a focus state detection unit that detects a focus state using a plurality of measurement points set on an imaging screen, a photometry unit that detects photometric image data including color information of a subject, and an optical member used for focus adjustment Because
First calculation processing means for acquiring detection information of the focus state detection means and selecting the measurement points used for focus adjustment and calculating a defocus amount at the measurement points;
Second calculation processing means for acquiring the photometric image data detected by the photometry means, determining a tracking area of the subject, and calculating a tracking process;
A control unit that acquires a calculation result of the first calculation processing unit and drives the optical member to control a focus adjustment operation;
The second calculation processing means extracts image data in the first tracking area including the position of the measurement point selected by the first calculation processing means from the photometric image data, and stores the image data in the first tracking area. When the contrast value of the image exceeds the threshold value, the tracking target position of the subject is set in the second tracking area including the position of the measurement point adjacent to the selected measurement point, and the tracking process is calculated. ,
The first calculation processing unit reselects the measurement point from the tracking target position set by the second calculation processing unit, and outputs position information and a defocus amount of the measurement point to the control unit. An imaging device.
前記第１演算処理手段は、前記複数の測定点のうちで前記第２演算処理手段が設定した追尾対象位置に近い測定点および該測定点に隣接して位置する測定点から測定点を再選択することを特徴とする請求項２に記載の撮像装置。 The second calculation processing means sets the tracking target position by performing the correlation calculation on the photometric image data relating to continuously acquired imaging signals,
The first calculation processing unit reselects a measurement point from the measurement points close to the tracking target position set by the second calculation processing unit and the measurement points located adjacent to the measurement point among the plurality of measurement points. The imaging apparatus according to claim 2, wherein:
前記第１追尾用領域内の画像の特徴色を検出し、
前記第１追尾用領域内の画像のコントラスト値が閾値を超える場合、前記第１演算処理手段により選択された前記測定点に隣接して位置する複数の測定点の位置をそれぞれ含む複数の前記第２追尾用領域を特定し、
前記複数の第２追尾用領域のうち、該第２追尾用領域内の画像の特徴色が前記第１追尾用領域内の画像の特徴色と同色である画像部分の面積を算出し、
算出された前記画像部分の面積が、前記第１追尾用領域内で前記特徴色をもつ画像部分の面積に比べて大きいと判定した前記第２追尾用領域を追尾用領域として設定することを特徴とする請求項３に記載の撮像装置。 The second arithmetic processing means includes
Detecting a characteristic color of the image in the first tracking area;
When the contrast value of the image in the first tracking area exceeds a threshold value, a plurality of the first measurement points each including the positions of the plurality of measurement points located adjacent to the measurement point selected by the first calculation processing means. 2 Specify the tracking area,
Of the plurality of second tracking areas, an area of an image portion in which the characteristic color of the image in the second tracking area is the same color as the characteristic color of the image in the first tracking area;
The second tracking area determined to have a calculated area of the image portion larger than the area of the image portion having the characteristic color in the first tracking area is set as a tracking area. The imaging apparatus according to claim 3.
前記焦点状態検出手段の検出情報を取得して焦点調節に用いる前記測定点を選択して当該測定点での焦点ずれ量を演算するステップと、
選択された前記測定点の位置を含む第１追尾用領域内の画像データを前記測光画像データから抽出するステップと、
決定された前記第１追尾用領域内の画像のコントラスト値を閾値と比較する比較ステップと、
前記比較ステップにて前記第１追尾用領域内の画像のコントラスト値が閾値を超える場合、前記選択された測定点に隣接する測定点を含む第２追尾用領域内に、前記被写体の追尾対象位置を設定して追尾処理の演算を行うステップと、
設定された前記追尾対象位置から前記測定点を再選択して焦点ずれ量を算出し、前記光学部材を駆動して焦点調節動作を制御するステップを有することを特徴とする撮像装置の制御方法。
An imaging apparatus having a focus state detection unit that detects a focus state using a plurality of measurement points set on an imaging screen, a photometry unit that detects photometric image data including color information of a subject, and an optical member used for focus adjustment A control method executed in
Obtaining detection information of the focus state detection means and selecting the measurement point used for focus adjustment to calculate a defocus amount at the measurement point;
Extracting from the photometric image data image data in a first tracking region including the position of the selected measurement point;
A comparison step of comparing a contrast value of the image in the determined first tracking area with a threshold value;
If the contrast value of the image in the first tracking area exceeds the threshold value in the comparison step, the tracking target position of the subject is in the second tracking area including the measurement point adjacent to the selected measurement point. Step for performing tracking processing calculation by setting
A method of controlling an imaging apparatus, comprising: reselecting the measurement point from the set tracking target position to calculate a defocus amount, and driving the optical member to control a focus adjustment operation.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012070295A JP5930792B2 (en) | 2012-03-26 | 2012-03-26 | Imaging apparatus and control method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012070295A JP5930792B2 (en) | 2012-03-26 | 2012-03-26 | Imaging apparatus and control method thereof |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013200530A true JP2013200530A (en) | 2013-10-03 |
| JP5930792B2 JP5930792B2 (en) | 2016-06-08 |
Family
ID=49520794
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012070295A Expired - Fee Related JP5930792B2 (en) | 2012-03-26 | 2012-03-26 | Imaging apparatus and control method thereof |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5930792B2 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015219463A (en) * | 2014-05-20 | 2015-12-07 | オリンパス株式会社 | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM |
| CN110213494A (en) * | 2019-07-03 | 2019-09-06 | Oppo广东移动通信有限公司 | Photographing method and device, electronic equipment and computer readable storage medium |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08130674A (en) * | 1994-10-31 | 1996-05-21 | Sanyo Electric Co Ltd | Motion vector detection circuit and object tracking camera equipment using it |
| JP2007282188A (en) * | 2006-03-15 | 2007-10-25 | Nikon Corp | Subject tracking device, subject tracking method, subject tracking program, and optical device |
| JP2009265239A (en) * | 2008-04-23 | 2009-11-12 | Nikon Corp | Focus detecting apparatus, focus detection method, and camera |
| JP2010009057A (en) * | 2009-08-27 | 2010-01-14 | Olympus Corp | Camera |
| JP2011071925A (en) * | 2009-09-28 | 2011-04-07 | Canon Inc | Mobile tracking apparatus and method |
| JP2011107501A (en) * | 2009-11-19 | 2011-06-02 | Nikon Corp | Focusing device and imaging apparatus |
| JP2013131996A (en) * | 2011-12-22 | 2013-07-04 | Olympus Imaging Corp | Imaging apparatus |
-
2012
- 2012-03-26 JP JP2012070295A patent/JP5930792B2/en not_active Expired - Fee Related
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08130674A (en) * | 1994-10-31 | 1996-05-21 | Sanyo Electric Co Ltd | Motion vector detection circuit and object tracking camera equipment using it |
| JP2007282188A (en) * | 2006-03-15 | 2007-10-25 | Nikon Corp | Subject tracking device, subject tracking method, subject tracking program, and optical device |
| JP2009265239A (en) * | 2008-04-23 | 2009-11-12 | Nikon Corp | Focus detecting apparatus, focus detection method, and camera |
| JP2010009057A (en) * | 2009-08-27 | 2010-01-14 | Olympus Corp | Camera |
| JP2011071925A (en) * | 2009-09-28 | 2011-04-07 | Canon Inc | Mobile tracking apparatus and method |
| JP2011107501A (en) * | 2009-11-19 | 2011-06-02 | Nikon Corp | Focusing device and imaging apparatus |
| JP2013131996A (en) * | 2011-12-22 | 2013-07-04 | Olympus Imaging Corp | Imaging apparatus |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015219463A (en) * | 2014-05-20 | 2015-12-07 | オリンパス株式会社 | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM |
| CN110213494A (en) * | 2019-07-03 | 2019-09-06 | Oppo广东移动通信有限公司 | Photographing method and device, electronic equipment and computer readable storage medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5930792B2 (en) | 2016-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5564987B2 (en) | Subject tracking device and imaging device | |
| US9380200B2 (en) | Image pickup apparatus and control method in which object searching based on an image depends on pixel combining on the image | |
| JP5950664B2 (en) | Imaging apparatus and control method thereof | |
| JP6825203B2 (en) | Imaging controller and camera | |
| JP2014202875A (en) | Subject tracking device | |
| RU2549143C1 (en) | Image capturing device and control method thereof | |
| JP2013160832A (en) | Optical apparatus | |
| JP6525809B2 (en) | Focus detection apparatus and control method thereof | |
| JP4720673B2 (en) | Subject tracking device and camera | |
| JP2007003655A (en) | Apparatus for determining focal position of imaging lens and method thereof | |
| JP5930792B2 (en) | Imaging apparatus and control method thereof | |
| JP2012208507A (en) | Image tracking device | |
| JP5981898B2 (en) | Imaging apparatus and control method thereof | |
| JP2008187331A (en) | Image tracking device and imaging device | |
| JP4567538B2 (en) | Exposure amount calculation system, control method therefor, and control program therefor | |
| CN102300037B (en) | Camera head | |
| JP2016080738A (en) | Imaging device, automatic focusing method | |
| JP5447579B2 (en) | Tracking device, focus adjustment device, and photographing device | |
| JP2015075648A (en) | Focus detection device, control method therefor, control program and imaging device | |
| JP5233646B2 (en) | Image tracking device, imaging device, and image tracking method | |
| JP2019219566A (en) | Imaging device, exposure control method and program | |
| JP2015045759A (en) | Imaging apparatus and control method thereof | |
| JP2013218062A (en) | Focus detector | |
| JP2012065112A (en) | Imaging apparatus | |
| JP5360191B2 (en) | Imaging device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150313 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151216 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160105 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160304 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160329 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160426 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5930792 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |