JP5708097B2 - 撮像装置、撮像方法、及び撮像プログラム - Google Patents

撮像装置、撮像方法、及び撮像プログラム Download PDF

Info

Publication number
JP5708097B2
JP5708097B2 JP2011061631A JP2011061631A JP5708097B2 JP 5708097 B2 JP5708097 B2 JP 5708097B2 JP 2011061631 A JP2011061631 A JP 2011061631A JP 2011061631 A JP2011061631 A JP 2011061631A JP 5708097 B2 JP5708097 B2 JP 5708097B2
Authority
JP
Japan
Prior art keywords
image
imaging
motion vector
information
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011061631A
Other languages
English (en)
Other versions
JP2012199691A (ja
Inventor
晶 中野
晶 中野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2011061631A priority Critical patent/JP5708097B2/ja
Priority to US13/413,946 priority patent/US9019387B2/en
Publication of JP2012199691A publication Critical patent/JP2012199691A/ja
Application granted granted Critical
Publication of JP5708097B2 publication Critical patent/JP5708097B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6845—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by combination of a plurality of images sequentially taken
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6811—Motion detection based on the image signal
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20004—Adaptive image processing
    • G06T2207/20008—Globally adaptive
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Description

本発明は、撮像装置、撮像方法、及び撮像プログラムに係り、特に最適な電子手ぶれ補正画像を取得するための撮像装置、撮像方法、及び撮像プログラムに関する。
従来、デジタルカメラ等の撮像装置において手ぶれを抑制する技術としては、撮像面又は撮像面に対するレンズの位置を手ぶれ方向と反対方向にシフトすることにより手ぶれをキャンセルする光学的手ぶれ補正方式や、高速シャッターを用いて複数枚の時分割画像を撮影し、被写体の特徴点を基準にして各画像を合成することによる電子手ぶれ補正方式が既に知られている。上述した電子手ぶれ補正方式では、手ぶれに対して撮像面やレンズを作動させる必要がないためメカ機構が不要であり、撮像装置のスペースやコストが節約できる等のメリットがある。
なお従来では、手ぶれを補正する目的で、複数枚の撮影画像のうち一つの基準画像をもとに、それ以外の画像に対して動きベクトルの検出、画像合成を行うための手段が開示されている（例えば、特許文献１参照）。
また、従来の電子手ぶれ補正方式では、撮影した複数の画像の動きベクトル検出を行い、画像合成を行うことで撮影画像を生成する。つまり、撮影した複数枚の画像の動きベクトル検出を行う際、撮影画像を任意のサイズに縮小して動きベクトル検出を行うが、その際の画像サイズは、大きいほど精度のよい動きベクトル検出を行うことが可能となるが、処理時間は画像サイズに比例して長くなる。そこで、従来の手法では、動きベクトル検出用の画像のサイズは、撮影画像や撮像条件によらずに一定のサイズで動きベクトル検出を行っていた。
しかしながら、例えば撮影画像や撮影条件によって高精度な動きベクトル検出を行う必要がある場合や、動きベクトル検出精度は必要ないが高速に画像を作成したい場合等には、動きベクトル検出で使用する画像サイズを最適化できないという問題があった。
また、上述した特許文献１に示される技術は、手ぶれを補正する目的で画像合成を行っているが、動きベクトル検出を行う際の画像サイズに関する記載はなく、上述したように撮影画像や撮影条件等によって、動きベクトル検出で使用する画像サイズを最適化することはできなかった。
本発明は、上記の課題に鑑みてなされたものであり、最適な電子手ぶれ補正画像を取得するための撮像装置、撮像方法、及び撮像プログラムを提供することを目的とする。
上述した課題を解決するために、本件発明は、以下の特徴を有する課題を解決するための手段を採用している。
本発明は、撮像装置において、撮像素子により連続した複数の撮影画像を取得する画像取得制御手段と、前記画像取得制御手段により得られた複数の撮影画像の画像サイズを、前記複数の撮影画像のうち、少なくとも１つの撮影画像に対する撮影情報に基づいて設定された画像サイズに変更する画像サイズ変更手段と、前記画像サイズ変更手段により得られたサイズ変更画像に基づいて各撮影画像同士の動きベクトルを検出する動きベクトル検出手段と、前記動きベクトル検出手段により検出された動きベクトル情報に基づいて前記画像取得制御手段により得られた複数の撮影画像を合成する合成手段とを有することを特徴とする。
また本発明は、撮像装置により撮影された画像に対する手ぶれ補正を行うための撮像方法において、前記撮像装置が備える撮像素子により連続した複数の撮影画像を取得する画像取得制御ステップと、前記画像取得制御ステップにより得られた複数の撮影画像の画像サイズを、前記複数の撮影画像のうち、少なくとも１つの撮影画像に対する撮影情報に基づいて設定された画像サイズに変更する画像サイズ変更ステップと、前記画像サイズ変更ステップにより得られたサイズ変更画像に基づいて各撮影画像同士の動きベクトルを検出する動きベクトル検出ステップと、前記動きベクトル検出ステップにより検出された動きベクトル情報に基づいて前記画像取得制御ステップにより得られた複数の撮影画像を合成する合成ステップとを有することを特徴とする。
また本発明は、コンピュータを、上述した撮像装置として機能させるための撮像プログラムである。
本発明によれば、最適な電子手ぶれ補正画像を取得することができる。
本実施形態における撮像装置の外観の一例を示す図である。 本実施形態における撮像装置の内部システム構成の一例を示す図である。 ＣＰＵブロックの機能構成の一例を示す図である。 撮像装置の手ぶれ補正制御処理手順の一例を示すフローチャートである。 電子手ぶれ補正処理を説明するための図である。 画像合成を行う際の重ね合わせの内容を説明するための図である。 本実施形態における手ぶれ補正制御処理の第１の実施例を示すフローチャートである。 本実施形態における手ぶれ補正制御処理の第２の実施例を示すフローチャートである。 本実施形態における手ぶれ補正制御処理の第３の実施例を示すフローチャートである。 本実施形態における手ぶれ補正制御処理の第４の実施例を示すフローチャートである。
＜本発明について＞
本発明は、例えば電子手ぶれ補正方式等の手ぶれ補正手法において、撮影画像や撮影条件等の撮影情報によって必要な動きベクトル検出精度を自動的に判断し、動きベクトル検出を行う際の画像サイズを動的に設定することで、動きベクトル検出精度及び処理時間等の観点に基づいて最適な動きベクトル検出を行い、その検出結果に基づいて画像を合成する電子手ぶれ補正処理を行う。
つまり、本発明は、撮影画像や撮影条件等によって、高精度な動きベクトル検出を行う必要がある場合や、動きベクトル検出精度は必要ないが高速に画像を作成したい場合に、どのような精度での位置合わせが最適であるかを、その撮影画像や撮影条件等の撮影情報から判断し、それにより位置合わせ処理で使用する縮小画像サイズを変更する。また、本発明は、高精度で動きベクトル検出を行うか、高速で動きベクトル検出を行うかを選択することで、最適な動きベクトル検出を行い、それにより高精度な手ぶれ補正を実現する。
以下に、本発明における撮像装置、撮像方法、及び撮像プログラムを好適に実施した形態について、図面を用いて説明する。なお、以下に示す説明では、撮像装置の一例としてデジタルカメラを用い、処理内容の実施例として電子手ぶれ補正方式を用いることとするが、本発明における撮像装置の装置構成や処理内容についてはこれに限定されるものではない。
＜撮像装置：外観例＞
まず、本実施形態における撮像装置について図を用いて説明する。図１は、本実施形態における撮像装置の外観の一例を示す図である。なお、図１（Ａ）は、撮像装置の上面図の一例を示し、図１（Ｂ）は、撮像装置の正面図の一例を示し、図１（Ｃ）は、撮像装置の背面図の一例を示している。なお、以下に示す実施形態では、撮像装置の一例としてデジタルカメラを示すが本発明においては、これに限定されるものではなく、また形状や構成のレイアウト等についてもこれに限定されるものではなく、本発明の適用範囲に応じて任意に設定されるものである。
図１（Ａ）〜図１（Ｃ）に示す撮像装置１は、サブ液晶ディスプレイ（以下、液晶ディスプレイ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）を「ＬＣＤ」という）１１と、メモリカード／電池装填部１２と、ストロボ発光部１３と、光学ファインダ１４と、測距ユニット１５と、リモコン受光部１６と、鏡胴ユニット１７と、ＡＦ用ＬＥＤ１８と、ストロボ用ＬＥＤ１９と、ＬＣＤモニタ２０と、スイッチ（以下、「ＳＷ」という）１〜１３とを有するよう構成されている。
＜撮像装置：内部システム構成例＞
また、図２は、本実施形態における撮像装置の内部システム構成の一例を示す図である。図２に示す撮像装置１は、サブＬＣＤ１１と、ストロボ発光部１３と、測距ユニット１５と、リモコン受光部１６と、鏡胴ユニット１７、ＡＦ用ＬＥＤ１８と、ストロボ用ＬＥＤと、ＬＣＤモニタ２０と、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）３１と、Ｆ／Ｅ−ＩＣ３２と、ＳＤＲＡＭ（Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３３と、デジタルスチルカメラプロセッサ（以下、「プロセッサ」という）３４と、ＲＡＭ３５と、内蔵メモリ３６と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）３７と、音声入力ユニット３８と、音声再生ユニット３９と、ストロボ回路４０と、ＬＣＤドライバ４１と、サブＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、中央演算装置）４２と、操作キーユニット４３と、ブザー４４と、加速度センサ４５と、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）コネクタ４６と、シリアルドライバ回路４７と、ＲＳ−２３２Ｃコネクタ４８と、ＬＣＤドライバ４９と、ビデオアンプ５０と、ビデオジャック５１と、メモリカードスロットル５２と、メモリカード５３とを有するよう構成されている。
また、図２において、鏡胴ユニット１７は、例えば、ズームレンズ１７−１ａ及びズームモータ１７−１ｂからなるズーム光学系１７−１と、フォーカスレンズ１７−２ａ及びフォーカスモータ１７−２ｂからなるフォーカス光学系１７−２と、絞り１７−３ａ及び絞りモータ１７−３ｂからなる絞りユニット１７−３と、メカシャッタ１７−４ａ及びメカシャッタモータ１７−４ｂからなるメカシャッタユニット１７−４と、モータドライバ１７−５とを有するよう構成されている。
また、図２において、Ｆ／Ｅ−ＩＣ（フロントエンド−集積回路）３２は、画像ノイズの除去のために相関二重サンプリングを行うＣＤＳ（Ｃｏｒｒｅｌａｔｅｄ Ｄｏｕｂｌｅ Ｓａｍｐｌｉｎｇ）３２−１と、自動利得制御を行うＡＧＣ（Ａｕｔｏｍａｔｉｃ Ｇａｉｎ Ｃｏｎｔｒｏｌ）３２−２と、アナログ−デジタル変換を行うＡ／Ｄ変換部３２−３と、垂直同期信号ＶＤ・水平同期信号ＨＤに基づいて駆動タイミング信号を生成するＴＧ（タイミングジェネレータ）３２−４とを有するよう構成されている。
また、図２において、プロセッサ３４は、Ｉ２Ｃ（Ｉｎｔｅｒ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）ブロック３４−１、ＣＣＤ１信号処理ブロック３４−２、ＣＣＤ２信号処理ブロック３４−３、ＣＰＵブロック３４−４、ローカルＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３４−５、ＵＳＢブロック３４−６、シリアルブロック３４−７、ＪＰＥＧ圧縮・伸長を行うＪＰＥＧコーデックブロック３４−８、画像データのサイズを拡大・縮小するリサイズブロック３４−９、ＴＶ信号表示ブロック３４−１０、メモリカードコントローラブロック３４−１１を有しており、これらの各ブロック３４−１〜３４−１１は、バスラインを介して相互に接続されている。
また、図２において、音声入力ユニット３８は、音声記録回路３８−１と、マイクアンプ３８−２と、マイク３８−３とを有すように構成されている。また、図２において、音声再生ユニット３９は、音声再生回路３９−１と、オーディオアンプ３９−２と、スピーカ３９とを有するよう構成されている。
ここで、図１、図２における撮像装置１は、デジタルカメラとしての機能を有している。
具体的には、図１（Ａ）に示すように、撮像装置１の上部には、サブＬＣＤ１１、レリーズ用のＳＷ１、モードダイアル用のＳＷ２が設けられている。
また、図１（Ｂ）に示すように、撮像装置１の側部には、撮影された画像データ等を格納するメモリカードや撮像装置１の電源をＯＮして一連のシステムを駆動させるためのメモリカード／電池装填部１２の蓋が設けられている。また、撮像装置１の正面側には、撮影時のストロボを発光させるストロボ発光部１３、光学レンズを介して被写体の位置を視認する光学ファインダ１４、測距ユニット１５、別体のリモコン装置からの赤外線等によるリモコン信号を受光する受光部１６、及び撮影レンズを備えた鏡胴ユニット１７が設けられている。
また、図１（Ｃ）に示すように、撮像装置１の背面側には、光学ファインダ１４、ＡＦ用ＬＥＤ１８、ストロボ用ＬＥＤ１９、ＬＣＤモニタ２０、広角ズーム（ＷＩＤＥ）用のＳＷ３、望遠ズーム（ＴＥＬＥ）用のＳＷ４、撮影した画像や映像の再生用のＳＷ５、セルフタイマ設定／解除用のＳＷ６、メニュー及びＯＫスイッチ用のＳＷ７、ディスプレイであるＬＣＤモニタ２０のＯＮ／ＯＦＦ用のＳＷ８、上移動／ストロボ設定用のＳＷ９、右移動用のＳＷ１０、下移動／マクロ設定用のＳＷ１１、左移動／画像確認用のＳＷ１２、電源ＯＮ／ＯＦＦ用のＳＷ１３が設けられている。
また、図２において、プロセッサ３４は、ＣＰＵを内蔵しており、撮像装置１の各部はプロセッサ３４によって制御されている。プロセッサ３４の外部には、ＳＤＲＡＭ３３、ＲＡＭ３５、撮影された画像の画像データを記憶する内蔵メモリ３６、本実施形態における各種機能を実行させるための各種の制御プログラムやパラメータ等が格納されたＲＯＭ３７が設けられており、これらもバスラインを介してプロセッサ３４に接続されている。
なお、ＳＤＲＡＭ３３には、撮影された画像データの他にも、例えば画像データから変換されたＲＡＷ−ＲＧＢ画像データ（ホワイトバランス補正、γ補正が行われた画像データ）、ＹＵＶ画像データ（輝度データと色差データとに変換された画像データ）、ＪＰＥＧ画像データ（ＪＰＥＧ圧縮された画像データ）等が保存される。
本実施形態では、電源ＯＮ／ＯＦＦ用のＳＷ１３をＯＮにした際に、ＲＯＭ３７に格納された制御プログラムがプロセッサ３４内のメモリ又はプロセッサ３４に接続されたメモリ等にロードされて実行され、撮像装置１の各部は、この制御プログラムによって制御される。なお、本実施形態では、制御プログラムが実行される際には、例えばＲＡＭ３５のメモリが制御プログラムの作業用メモリとして使用される。つまり、必要に応じて、ＲＡＭ３５のメモリに対して制御プログラムの制御データやパラメータ等が書き込まれ、また読み出しが行われる。後述される全ての処理は、この制御プログラムを実行することにより、主にプロセッサ３４によって実行される。
鏡胴ユニット１７は、ズームレンズ１７−１ａ、フォーカスレンズ１７−２ａ、絞り１７−３ａ、メカシャッタ１７−４ａを、それぞれズームモータ１７−１ｂ、フォーカスモータ１７−２ｂ、絞りモータ１７−３ｂ、メカシャッタモータ１７−４ｂによって駆動させる。また、鏡胴ユニット１７は、これらの各モータ１８−１ｂ〜１８−４ｂを、モータドライバ１７−５によって駆動させる。モータドライバ１７−５は、プロセッサ３４のＣＰＵブロック３４−４によって制御される。
本実施形態では、上述した広角ズーム（ＷＩＤＥ）用のＳＷ３や望遠ズーム（ＴＥＬＥ）用のＳＷ４の操作等を行い、鏡胴ユニット１７の各光学系１８−１，１８−２によりＣＣＤ３１の受光部に被写体像を結像させる。結像された被写体像は、ＣＣＤ３１によって画像信号に変換され、この画像信号がＦ／Ｅ−ＩＣ３２に出力される。
Ｆ／Ｅ−ＩＣ３２において、ＣＤＳ３２−１は、取得した画像信号を相関二重サンプリングする。また、ＡＧＣ３２−２は、ＣＤＳ３２−１から得られる画像信号に対して自動的に利得の調整を行う。また、Ａ／Ｄ変換部３２−３は、ＡＧＣ３２−２から出力されるアナログ画像信号をデジタル画像信号に変換する。つまり、Ｆ／Ｅ−ＩＣ３２は、ＣＣＤ３１から出力されたアナログ画像信号にノイズ低減の処理や利得調整の処理等の所定の処理を施し、更にアナログ画像信号をデジタル画像信号に変換して、プロセッサ３４のＣＣＤ１信号処理ブロック３４−２に出力する。
ＴＧ３２−４は、プロセッサ３４のＣＣＤ１信号処理ブロック３４−２からフィードバックされるＶＤ（垂直同期）信号・ＨＤ（水平同期）信号に基づいて、Ｆ／Ｅ−ＩＣ３２による画像信号のサンプリング等のタイミング処理を行う。
Ｉ２Ｃブロック３４−１は、電子回路におけるシリアル通信方式によりＩＣ間において高速通信を行う。ＣＣＤ１制御ブロック３４−２は、ＣＣＤ３１よりＦ／Ｅ―ＩＣ３２の出力データにホワイトバランス設定やガンマ設定を行い、また上述したＶＤ信号、ＨＤ信号を供給する。ＣＣＤ２制御ブロック３４−３は、例えば入力されるデータに対するフィルタリング処理により、輝度データ、色差データへの変換を行う。ＣＰＵブロック３４−４は、撮像装置１の各部の動作を制御する。なお、ＣＰＵブロック３４−４についての具体的な機能構成については後述する。
ローカルＳＲＡＭ３４−５は、例えば撮像装置１における制御に必要な各種データを一時的に保存する。ＵＳＢブロック３４−６は、例えばパソコン等の外部機器とＵＳＢ通信を行う。シリアルブロック３４−７は、パソコン等の外部機器とシリアル通信を行う。ＪＰＥＧコーデックブロック３４−８は、例えばＪＰＥＧ圧縮、伸張を行う。
リサイズブロック３４−９は、後述するように画像データのサイズに対して拡大又は縮小処理を行って所定のサイズに変更したり、画像データに対する補間処理等を行う。ＴＶ信号表示ブロック３４−１０は、画像データを液晶モニタやＴＶ等の外部表示機器に表示するためのビデオ信号に変換する。また、メモリカードコントローラブロック３４−１１は、撮影された画像データを記録するメモリカードの制御を行う。
ここで、プロセッサ３４のＣＰＵブロック３４−４は、Ｆ／Ｅ−ＩＣ３２、モータドライバ１７−５、音声記録回路３８−１、音声再生回路３９−１、ストロボ発光部１３を発光させるストロボ回路４０、測距ユニット１５、サブＣＰＵ４２に接続されている。したがって、上述した各構成は、ＣＰＵブロック３４−４によって制御される。
また、音声入力ユニット３８及び音声再生ユニット３９について説明すると、マイク３８−３によって取り込まれた音声信号は、マイクアンプ３８−２によって増幅され、音声記録回路３８−１によってデジタル信号に変換されて、ＣＰＵブロック３４−４の制御命令に基づいて、例えば内蔵メモリ３６やメモリカード５３等に記録される。また、音声再生回路３９−１は、ＣＰＵブロック３４−４の制御命令に基づいて、例えばＲＯＭ３７等に予め記録されている適宜の音声データを音声信号に変換し、オーディオアンプ３９−２によって増幅し、スピーカ３９−３から出力させる。
測距ユニット１５は、例えば測距センサとしての２次元センサ等を有し、２次元センサ等を用いて撮像装置１の撮影エリアに含まれる所定の被写体までの距離を計測する測距手段である。なお、測距手段とは、例えば複数の２次元センサ等を用いた測距方式等を示し、例えば２つのレンズ及びＣＣＤ等の撮像素子から得られる画像の視差を用いて三角測量等によって距離の測定を行うものである。
サブＣＰＵ４２は、ＬＣＤドライバ４９を介してサブＬＣＤ１１、ＡＦ用ＬＥＤ１８、ストロボ用ＬＥＤ１９、リモコン受光部１６、上述したＳＷ１〜ＳＷ１３からなる操作キーユニット４３、及びブザー４４等が接続されている。したがって、上述した各構成は、サブＣＰＵ４２によって制御される。また、サブＣＰＵ４２は、リモコン受光部１６に対する信号の入力状態や、操作キーユニット（例えば、上述したＳＷ１〜ＳＷ１３等）に対する入力状態を監視する。
また、Ｉ２Ｃブロック３４−１には、加速度計測手段としての加速度センサ４５が接続されている。加速度センサ４５は、プリント回路基板（ＰＣＢ（Ｐｒｉｎｔｅｄ Ｃｉｒｃｕｉｔ Ｂｏａｒｄ））上に実装され、直交する２軸Ｘ、Ｙ方向の加速度データ、及び温度データＴを出力する。そのデータからカメラのロール角、ピッチ角等の傾きを演算し、Ｉ２Ｃブロック３４−１に出力して、最終的にはＬＣＤモニタ２０等に表示される。なお、加速度センサ４５の水平に対するロール角θは、以下の式（１）で表される。
θ［ｄｅｇ］＝１８０／π×ａｒｃｔａｎ（（Ｙ０−Ｇ０）／（Ｘ０−Ｇ０）） ・・・（１）
なお、上記式（１）において、Ｇ０は重力ゼロ時の出力を示している。
ここで、本実施形態においては、撮像装置１が図１(Ｂ)，図１(Ｃ)の姿勢の場合に、撮像装置１のロール角θが０度であるとし、例えばＬＣＤモニタ２０が時計回り方向に傾いた場合に正の傾き、また反時計回りに傾いた場合に負の傾きであるとする。
また、ＵＳＢブロック３４−６は、例えばＵＳＢコネクタ４６に接続されている。また、シリアルブロック３４−７は、例えばシリアルドライバ回路４７を介してＲＳ−２３２Ｃコネクタ４８に接続されている。したがって、本実施形態における撮像装置１は、上述したＵＳＢブロック３４−６やシリアルブロック３４−７によって、撮像装置１に接続された外部機器との間でデータ通信を行う。
ＴＶ信号表示ブロック３４−１０は、ＬＣＤモニタ２０を駆動するためのＬＣＤドライバ４９、ビデオ信号を増幅すると共にインピーダンス整合を行うためのビデオアンプ５０が接続されている。また、ＬＣＤドライバ４９には、ＬＣＤモニタ２０が接続されている。また、ビデオアンプ５０には、ＴＶ等の外部モニタ機器に接続するためのビデオジャック５１が接続されている。つまり、ＴＶ信号表示ブロック３４−１０は、画像データをビデオ信号に変換し、ＬＣＤモニタ２０やビデオジャック５１に接続された外部モニタ機器等の表示手段等に出力する。
また、ＬＣＤモニタ２０は、撮影中の被写体のモニタや、撮影された画像の表示、メモリカード５３又は内蔵メモリ３６等に記録された画像の表示等に使用される。なお、ＬＣＤモニタ２０は、タッチパネル等による入出力機能を有していてもよく、その場合には、ユーザ等のタッチ入力に基づいて、所定の被写体の特定や各種指示入力を行うことができる。
メモリカードコントローラブロック３４−１１は、メモリカードスロットル５２が接続されている。したがって、撮像装置１は、メモリカードスロットル５２に挿入された増設用のメモリカード５３との間で画像データのやり取りを行う。
なお、上述した撮像装置１の構成において、例えば鏡胴ユニット１７、ＣＣＤ３１、Ｆ／Ｅ−ＩＣ３２、及びＣＣＤ１信号処理ブロック３４−２は、本実施形態における撮像手段に相当する。また、上述した図２に示す構成では、被写体光像を光電変換するための固体撮像素子としてＣＣＤ３１を用いたが、本発明においてはこれに限定されるものではなく、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）を用いてもよい。その場合には、ＣＣＤ１信号処理ブロック３４−２及びＣＣＤ２信号処理ブロック３４−３は、それぞれＣＭＯＳ１信号処理ブロック３４−２及びＣＭＯＳ２信号処理ブロック３４−３に置き換えて同様の処理を行わせることになる。
＜ＣＰＵブロック３４−４の機能構成＞
次に、上述したＣＰＵブロック３４−４の本実施形態における具体的な機能構成例について図を用いて説明する。図３は、ＣＰＵブロックの機能構成の一例を示す図である。図３に示すＣＰＵブロック３４−４は、画像取得制御手段３４−４ａと、画像サイズ変更手段３４−４ｂと、動きベクトル検出手段３４−４ｃと、合成手段３４−４ｄと、画像記録制御手段３４−４ｅとを有するよう構成されている。
画像取得制御手段３４−４ａは、例えば上述したＣＣＤ３１等の撮像素子から連続して予め設定された複数枚の撮影画像を取得するように画像取得制御を行う。なお、画像取得制御手段３４−４ａは、上述した処理を行う前に、例えば電子手ぶれ補正を行う電子手ぶれ補正モードが設定されているか否かを判断してもよい。この場合、画像取得制御手段３４−４ａは、ユーザ等により設定されたモードが、電子手ぶれ補正モードであった場合には上述の処理を行い、電子手ぶれ補正モードでなかった場合には通常撮影モードとして１枚の撮影画像のみを取得するように画像取得制御を行う。なお、上述したモード設定は、例えば図１に示すモードダイアル用のＳＷ２等をユーザが操作することにより行われる。
画像サイズ変更手段３４−４ｂは、画像取得制御手段３４−４ａにより取得された複数の撮影画像の各画像サイズを撮影情報等に基づいて所定のサイズに変更する。具体的には、画像サイズ変更手段３４−４ｂは、撮影情報として、例えば画像取得制御手段３４−４ａによる撮像時の設定情報等に基づいて設定される拡大率又は縮小率等により、生成される画像サイズを設定する。なお、上述した撮像時の設定情報としては、例えば撮像装置１における撮影時のズームポジション、フォーカスポジション、レンズＦ値、ＩＳＯ感度、ホワイトバランスのパラメータ、ガンマ補正で使うガンマカーブ、アパーチャ補正、ノイズリダクション、及びディストーション補正値等から、１又は複数の設定情報を用いることができるが、本発明においてはこれに限定されるものではない。
なお、設定情報としては、特にズームポジションを用いることが好ましい。その理由は、例えばズームポジションが望遠側にある場合には、大きな手ぶれが発生しにくく、また被写体も細かい描写で撮影できるため、より高精度な動き検出が必要となるからである。したがって、ズームポジションを含む設定情報に対応させて画像サイズの拡大率又は縮小率等を設定するのが好ましい。なお、本発明においてはこれに限定されるものではない。
また、画像サイズ変更手段３４−４ｂは、撮影情報として、撮影画像に対する特徴情報に基づいて、拡大又は縮小等により生成される画像サイズを設定する。なお、上述した特徴情報としては、例えば撮影画像のコントラストの高さや、撮影画像に人物の顔やその他の特定形状、構造物や動物等の物体（オブジェクト）等が含まれているか否か等から、１又は複数の特徴情報を用いることができるが、本発明においてはこれに限定されるものではない。
なお、特定情報としては、コントラストの高さを用いることが好ましい。その理由は、例えばコンントラストが高い場合には、被写体間の境界がより鮮明になるため、より高精度な動き検出が必要とされるからである。したがって、コントラストの高さを含む特徴情報に対応させて画像サイズの拡大率又は縮小率等を設定するのが好ましい。なお、本発明においてはこれに限定されるものではない。
また、動きベクトル検出手段３４−４ｃは、画像サイズ変更手段３４−４ｂにより生成された画像に基づいて撮影画像同士の動きベクトルを検出する。また、動きベクトル検出手段３４−４ｃは、動きベクトル検出を行う画像サイズを、画像サイズ変更手段３４−４ｂから得られる撮像装置１に対する設定情報に基づいて変更し、その変更した領域内における動きベクトルを検出する。これにより、撮像装置１の設定情報から、自動的に最適な動きベクトル検出方法で動きベクトル検出を行うことができる。
また、動きベクトル検出手段３４−４ｃは、動きベクトル検出を行う画像サイズを、画像サイズ変更手段３４−４ｂから得られる撮像装置１が撮影した撮影画像の特徴情報に基づいて変更させ、その変更した領域内における動きベクトルを検出する。これにより、撮像装置１の撮影画像から、自動的に最適な動きベクトル検出方法で動きベクトル検出を行うことができる。なお、動きベクトル検出手段３４−４ｃは、上述した撮影情報としての設定情報と特徴情報とを両方用いて、動きベクトル検出を行うための画像サイズを設定し、設定した画像サイズに変更してもよい。
合成手段３４−４ｄは、動きベクトル検出手段３４−４ｃにより検出された動きベクトルを補正し、補正された複数の画像を加算して合成し、合成した１又は複数の画像を出力する。
画像記録制御手段３４−４ｅは、画像取得制御手段３４−４ａにより取得した画像、画像サイズ変更手段３４−４ｂにより撮影画像毎にサイズ変更された画像、合成手段３４−４ｄにより生成された合成画像等をＳＤＲＡＭ３３やＲＡＭ３５、内蔵メモリ３６、メモリカードスロットル５２に挿入されたメモリカード５３等に記録させる画像記録制御等を行う。
なお、上述したＣＰＵブロック３４−４による各機能構成により、本実施形態における手ぶれ補正を実現することができる。本実施形態における手ぶれ補処理の具体的な処理内容については後述する。
＜手ぶれ補正制御手法について＞
次に、撮像装置１を用いた本発明における手ぶれ補正制御手法について説明するが、本発明における手ぶれ補正制御手法をより明確にするため、まず一般的な手ぶれ補正制御処理手順について説明する。
図４は、撮像装置の手ぶれ補正制御処理手順の一例を示すフローチャートである。図４の例では、まず画像取得制御により、ある被写体等の物体（オブジェクト）に対して連続して４枚の画像を撮影する（Ｓ０１）。次に、Ｓ０１の処理により取得された撮影画像から、予め設定されたサイズ（ここでは一例として縮小サイズとする）の画像を作成する（Ｓ０２）。
次に、Ｓ０２の処理により得られた４枚の縮小画像を時系列に並べ、連続する画像間を比較し、各画像に含まれる撮影された物体（オブジェクト）等の動き検出を行う（Ｓ０３）。次に、Ｓ０３に処理得られる動き検出結果に基づいて縮小する前の４枚の画像に対して画像合成を行い（Ｓ０４）、得られた合成画像をメモリ等に保存する（Ｓ０５）。
つまり、図４の例では、電子手ぶれ補正処理を行う際、まず連続して４枚の画像を撮影し、それらの撮影画像からサイズの小さい縮小画像を作成する。次に作成した縮小画像を元に４枚の画像の相対的な動きベクトルの検出を行う。その後、動きベクトル検出結果を元に、縮小する前の４枚の撮影画像に対する合成を行い、合成結果画像を内蔵メモリ３６やメモリカードスロットル５２に挿入されたメモリカード５３等に記録手段に記録する。
ここで、図５は、電子手ぶれ補正処理を説明するための図である。撮像装置１により連続的に撮影された複数（例えば、４枚等）の画像６１−１〜６４−４は、それぞれが所定のサイズに縮小され、縮小画像６２−１〜６２−４が生成される。この縮小画像６２−１〜６２−４は、手ぶれ補正における位置合わせ用の画像である。その後、縮小画像６２−１〜６２−４に基づいて全画像の位置合わせ処理を行い、その位置合わせされた縮小画像６３の位置合わせ結果に基づいて、縮小前の連続した画像６１−１〜６１−４に対して画像合成処理を行い、その合成画像６４を内蔵メモリ３６やメモリカード５３等の記録手段に記録する。
ここで、本実施形態では、通常、動きベクトル検出を行う際の画像サイズが大きい方が精度のよい動きベクトル検出を行うことができ、画像合成時の位置ずれを低減することができる。しかしながら、上述の場合、動きベクトル検出の処理に時間がかかってしまう。そのため、例えばＶＧＡ程度のサイズ（例えば、横６４０×縦４８０、ピクセル総数３０７２００ピクセル等）に画像を縮小し、縮小した画像に対して動きベクトル検出を行うのが一般的である。
また、撮影条件や撮影対象物によっては、ＶＧＡサイズの画像で動きベクトル検出をする場合よりも精度の高い動きベクトル検出が必要な場合や、動きベクトル検出の精度が低くてもよい場合があり、それにあわせて動きベクトル検出時の画像サイズを変動させることが望ましい。
そこで、本実施形態では、電子手ぶれ補正を行う場合に、ＣＰＵ３４−４においてレリーズシャッターＳＷ１が押されたと判断すると、４枚の画像を連続してＳＤＲＡＭ３３等に取り込む。また、本実施形態では、ＳＤＲＡＭ３３への撮影画像の取り込みが完了すると、ＣＰＵ３４−４において撮影条件や撮影画像等を含む撮影情報等から、動きベクトル検出の必要精度の計算を行う。
また、本実施形態では、必要精度の計算結果に基づいて撮影画像の縮小を行い、動きベクトル検出を行って、その結果に基づく画像合成により１枚の画像を生成する。
＜画像合成時の重ね合わせのイメージ例＞
ここで、図６は、画像合成を行う際の重ね合わせの内容を説明するための図である。なお、図６の例では、画像合成前の４枚の画像６１−１〜６１−４の画角は、それぞれ異なるが、画像合成を行う際は１枚目に撮影した領域が基準となり、他の画像と重なっている領域が合成される。つまり、２枚以上が重なっている領域が合成可能面積となり、全ての領域で４枚合成を行う必要はなく、部分的に１枚〜４枚の少なくとも１つ画像を合成する。
図６に示す梨字模様で囲まれた領域は、合成した結果作成される画像６１−１〜６１−４の画角７１を示している。なお、図５のフローチャートでは、連続撮影する枚数は４枚としましたが、２枚以上であれば何枚でもよく、合成可能面積も上述したように２枚以上が重なっている領域に限定されず、例えば３枚以上、４枚以上等が重なっている領域と定義してもよい。また、上述の例では、基準画像を１枚目の画像として定義したが、本発明においてはこれに限定されるものではなく、例えば連続撮影した画像のうち、２枚目以降の任意の画像を選択してもよい。
また、画像合成により生成された画像は、例えば内蔵メモリ３６又はメモリカードスロットル５２に挿入されたメモリカード５３等の記録手段に記録する。
なお、上述した動きベクトル検出や画像合成手法については、上述した内容に限定されるものではなく、例えば特許文献１に示されている技術や、その他にも例えば特開２００６−１５７５６８号公報等に示されている技術を広く適用することができる。
次に、本実施形態における手ぶれ補正の実施例についてフローチャートを用いて説明する。
＜本実施形態における手ぶれ補正制御処理：第１の実施例＞
図７は、本実施形態における手ぶれ補正制御処理の第１の実施例を示すフローチャートである。通常、撮影を行う際に、撮像装置１（カメラ）のズームポジション（設定情報）が広角側にある場合は、同条件で望遠側にある場合と比べて、一般に被写体が小さく撮影され、また解像度も高い撮影となる。そのため、電子手ぶれ補正を行う際は、広角撮影の方が、より精度の高い動きベクトル検出が必要となる。
そこで、第１の実施例では、図７に示す処理を行う。まず、ＣＰＵ３４−４は、撮像装置１に電子手ぶれ補正を行う電子手ぶれ補正モードが設定されているか否かを判断する（Ｓ１１）。この判断の結果、電子手ぶれ補正モードであると判断した場合（Ｓ１１において、ＹＥＳ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で複数枚（例えば、４枚）連続で撮影を行い(Ｓ１２)、撮影された画像を例えばＳＤＲＡＭ３３等に取り込む。
そして、ＣＰＵ３４−４は、ＳＤＲＡＭ３３等に取り込まれた４枚の画像が撮影された際のズームポジション（設定情報）を確認し、確認したズームポジションに応じて動きベクトル検出を行う際の画像サイズを設定する（Ｓ１３）。
その後、ＣＰＵ３４−４は、撮影した４枚の画像サイズから、Ｓ１３の処理にて設定された画像サイズに縮小を行い、動きベクトル検出処理用の画像を作成し、作成した画像による設定した画像サイズでの動きベクトル検出処理を行う（Ｓ１４）。
次に、ＣＰＵ３４−４は、Ｓ１４の処理により得られた動きベクトル検出結果に基づいて、画像サイズを変更する前の撮影画像に対して画像合成を行う（Ｓ１５）。
なお、上述したＳ１１の処理において、電子手ぶれ補正モードでないと判断した場合（Ｓ１１において、ＮＯ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で通常の撮影時と同様に１枚の画像撮影（通常撮影）を行う（Ｓ１６）。
次に、Ｓ１５又はＳ１６の処理が終了後、生成された画像を内蔵メモリ３６又はメモリカードスロットル５２に挿入されたメモリカード５３等に保存する(Ｓ１７)。
以上説明したように、第１の実施例によれば、ＣＰＵ３４−４は、ズームポジション（設定情報）により、最適な精度で、より高速に動きベクトル検出処理を行った電子手ぶれ画像を作成することが可能となる。なお、図７に示す例では、連続撮影する枚数の例を４枚としたが、本発明においてはこれに限定されるものではなく、２枚以上であれば何枚でもよい。
＜本実施形態における手ぶれ補正制御処理：第２の実施例＞
図８は、本実施形態における手ぶれ補正制御処理の第２の実施例を示すフローチャートである。通常、撮影を行う際に、撮像装置１（カメラ）のＩＳＯ感度の設定値（設定情報）が高いと、同条件下ではＩＳＯ感度設定が低い場合と比べて、画像ノイズのＳ／Ｎ比が悪くなったりシャッタスピードが速くなる等の特徴がある。また、画像ノイズのＳ／Ｎ比が高い場合、画像合成を行う際の位置合わせ精度が少々悪くても、画像ノイズの影響で撮影画像のブレが目立たない傾向がある。そのため、電子手ぶれ補正を行う際にＩＳＯ感度の設定値が低い際は、ＩＳＯ感度の設定値が高い際と比べて、より精度の高い動きベクトル検出が必要となる。
そこで、第２の実施例では、図８に示す処理を行う。まず、ＣＰＵ３４−４は、撮像装置１に電子手ぶれ補正を行う電子手ぶれ補正モードが設定されているか否かを判断する（Ｓ２１）。この判断の結果、電子手ぶれ補正モードであると判断した場合（Ｓ２１において、ＹＥＳ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で複数枚（例えば、４枚）連続で撮影を行い (Ｓ２２)、撮影された画像を例えばＳＤＲＡＭ３３等に取り込む。
そして、ＣＰＵ３４−４は、ＳＤＲＡＭ３３等に取り込まれた４枚の画像が撮影された際のＩＳＯ感度の設定値を確認し、確認したＩＳＯ感度の設定値に応じて動きベクトル検出を行う際の画像サイズを設定する(Ｓ２３)。
その後、ＣＰＵ３４−４は、撮影した４枚の画像から、Ｓ２３の処理にて設定された画像サイズに縮小を行い、動きベクトル検出処理用の画像を作成し、作成した画像による設定した画像サイズでの動きベクトル検出処理を行う（Ｓ２４）。
次に、ＣＰＵ３４−４は、Ｓ２４の処理により得られた動きベクトル検出結果に基づいて、画像サイズを変更する前の撮影画像に対して画像合成を行う（Ｓ２５）。
なお、上述したＳ２１の処理において、電子手ぶれ補正モードでないと判断した場合（Ｓ２１において、ＮＯ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で通常の撮影時と同様に１枚の画像撮影（通常撮影）を行う（Ｓ２６）。
次に、Ｓ２５又はＳ２６の処理が終了後、生成された画像を内蔵メモリ３６又はメモリカードスロットル５２に挿入されたメモリカード５３等に保存する(Ｓ２７)。
以上説明したように、第２の実施例によれば、ＣＰＵ３４−４は、ＩＳＯ感度の設定値により、最適な精度で、より高速に動きベクトル検出処理を行った電子手ぶれ画像を作成することが可能となる。なお、図８に示す例では、連続撮影する枚数の例を４枚としたが、本発明においてはこれに限定されるものではなく、２枚以上であれば何枚でもよい。
また、上述した第１及び第２の実施例では、撮影時に得られる設定情報の一例として、ズームポジション及びＩＳＯ感度の設定情報を用いたが、本発明においてはこれに限定されるものではなく、他の設定情報を用いてもよく、また複数の設定情報を組み合わせてもよい。
＜本実施形態における手ぶれ補正制御処理：第３の実施例＞
図９は、本実施形態における手ぶれ補正制御処理の第３の実施例を示すフローチャートである。通常、撮影画像のコントラストが高い場合は、明部と暗部の境界が鮮明であるため、電子手ぶれ処理を行った際に位置ずれがあった場合に視認され易い。そのため、動きベクトル検出処理を行う際に必要な精度は高くなるので、動きベクトル検出処理を行う際の画像サイズは大きくする方が望ましい。
逆に、コントラストが低い場合は、明部と暗部の境界が不鮮明であるので、電子手ぶれ処理を行った際に位置ずれがあった場合でも視認しづらくなる。そのため、動きベクトル検出処理を行う際に高い精度は必要なく、動きベクトル検出処理を行う際の画像サイズを小さくして処理時間を短くするのが望ましい。
そこで、第３の実施例では、図９に示す処理を行う。まず、ＣＰＵ３４−４は、撮像装置１に電子手ぶれ補正を行う電子手ぶれ補正モードか設定されているか否かを判断する（Ｓ３１）。この判断の結果、電子手ぶれ補正モードであると判断した場合（Ｓ３１において、ＹＥＳ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で複数枚（例えば、４枚）連続で撮影を行い(Ｓ３２)、撮影された画像を例えばＳＤＲＡＭ３３等に取り込む。
そして、ＣＰＵ３４−４は、ＳＤＲＡＭ３３等に取り込まれた４枚の画像のうち、１枚目の画像のコントラストを解析し、例えば解析したコントラストの高さに応じて、動きベクトル検出を行う際の画像サイズを設定する（Ｓ３３）。
なお、Ｓ３３の処理では、上述した手法の他に、例えば撮影された４枚の画像のうち、複数枚（例えば、１枚目（最初）と４枚目（最後）等）の画像を用いてコントラストを解析し、解析したコントラストを平均化してもよい。これにより、撮影した複数枚の画像全体に対するコントラストを高精度に取得することができる。
その後、ＣＰＵ３４−４は、撮影した４枚の画像から、Ｓ３３の処理にて設定された画像サイズに縮小を行い、動きベクトル検出処理用の画像を作成し、作成した画像による設定した画像サイズでの動きベクトル検出処理を行う（Ｓ３４）。
次に、ＣＰＵ３４−４は、Ｓ３４の処理により得られた動きベクトル検出結果に基づいて、画像サイズを変更する前の撮影画像に対して画像合成を行う（Ｓ３５）。
なお、上述したＳ３１の処理において、電子手ぶれ補正モードでないと判断した場合（Ｓ３１において、ＮＯ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で通常の撮影時と同様に１枚の画像撮影（通常撮影）を行う（Ｓ３６）。
次に、Ｓ３５又はＳ３６の処理が終了後、生成された画像を内蔵メモリ３６又はメモリカードスロットル５２に挿入されたメモリカード５３等に保存する（Ｓ３７）。
以上説明したように、第３の実施例によれば、ＣＰＵ３４−４は、撮影画像のコントラスト（特徴情報）に応じて、最適な精度で、より高速に動きベクトル検出処理を行った電子手ぶれ画像を作成することが可能となる。なお、図９に示す例では、連続撮影する枚数の例を４枚としたが、本発明においてはこれに限定されるものではなく、２枚以上であれば何枚でもよい。
＜本実施形態における手ぶれ補正制御処理：第４の実施例＞
図１０は、本実施形態における手ぶれ補正制御処理の第４の実施例を示すフローチャートである。通常、撮影画像に人物の顔（特徴情報）が含まれている場合、顔の細部を表現するために繊細な描写が必要となる場合が多い。繊細な描写を保ったまま電子手ぶれ処理を行うには、動きベクトル検出処理を行う際に高精度で位置ずれ検出を行い、画像合成を行う必要がある。したがって、動きベクトル検出処理を行う際の画像サイズは大きくする方が望ましい。
そこで、第４の実施例では、図１０に示す処理を行う。まず、ＣＰＵ３４−４は、撮像装置１に電子手ぶれ補正を行う電子手ぶれ補正モードか設定されているか否かを判断する（Ｓ４１）。この判断の結果、電子手ぶれ補正モードであると判断した場合（Ｓ４１において、ＹＥＳ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で複数枚（例えば、４枚）連続で撮影を行い(Ｓ４２)、撮影された画像を例えばＳＤＲＡＭ３３等に取り込む。
そして、ＣＰＵ３４−４は、ＳＤＲＡＭ３３等に取り込まれた４枚の画像のうち、１枚目の撮影時に人物の顔が含まれているか否かを検出し、例えば検出結果として得られた顔の有無に応じて、動きベクトル検出を行う際の画像サイズを設定する(Ｓ４３)。
なお、Ｓ４３の処理では、上述した手法の他に、例えば撮影された４枚の画像全てで顔検出を行い、少なくとも１枚の画像で顔が検出された場合に、その検出情報に基づいて画像サイズを設定してもよい。また、複数の画像で顔が検出された場合には、検出された複数の画像のうち、例えば最初に検出した画像等を１枚選択し、その選択した画像の顔検出結果に応じて画像サイズを設定してもよい。
また、Ｓ４３の処理では、画像から顔が検出された場合に、その顔の大きさや位置、数等に応じて画像サイズを設定してもよい。更に、Ｓ４３の処理では、人物の顔に限定されず、予め設定された物体（オブジェクト）を検出し、その物体の有無や形状、大きさ、数等の物体検出情報により変更する画像サイズを設定してもよい。
その後、ＣＰＵ３４−４は、撮影した４枚の画像から、Ｓ４３の処理にて設定された画像サイズに縮小を行い、動きベクトル検出処理用の画像を作成し、作成した画像による設定した画像サイズでの動きベクトル検出処理を行う（Ｓ４４）。
次に、ＣＰＵ３４−４は、Ｓ４４の処理により得られた動きベクトル検出結果に基づいて、画像サイズを変更する前の撮影画像に対して画像合成を行う（Ｓ４５）。
なお、上述したＳ４１の処理において、電子手ぶれ補正モードでないと判断した場合（Ｓ４１において、ＮＯ）、ＣＰＵ３４−４は、レリーズシャッターＳＷ１が押された時点で通常の撮影時と同様に１枚の画像撮影（通常撮影）を行う（Ｓ４６）。
次に、Ｓ４５又はＳ４６の処理が終了後、生成された画像を内蔵メモリ３６又はメモリカードスロットル５２に挿入されたメモリカード５３等に保存する（Ｓ４７）。
以上説明したように、第４の実施例によれば、ＣＰＵ３４−４は、撮影画像に人物の顔が撮影されているか否かによって、その特徴情報を用いて、最適な精度で、より高速に動きベクトル検出処理を行った電子手ぶれ画像を作成することが可能となる。なお、図１０に示す例では、連続撮影する枚数の例を４枚としたが、本発明においてはこれに限定されるものではなく、２枚以上であれば何枚でもよい。
また、上述した第３及び第４の実施例では、撮影画像から得られる特徴情報の一例として、コントラスト及び人物の顔検出を用いたが、本発明においてはこれに限定されるものではなく、他の特徴情報を用いてもよく、また複数の特徴情報を組み合わせてもよい。
更に、本実施形態においては、上述した第１〜第４の各実施例は、適宜組み合わせて用いても同様の効果を得ることができる。したがって、上記の実施例の他にも、例えば設定情報と特徴情報とを含む撮影情報を用いて手ぶれ補正制御処理を行うこともできる。
なお、上述した各実施例における画像サイズを設定する際の拡大率又は縮小率については、例えばズームが広角端である場合には、より精度が必要となるため、例えば縮小率を撮影時の画像サイズに対して縦横１／２サイズ（縮小率２５％）に設定し、その縮小サイズで動き検出を行う。また、例えばズームが望遠端である場合には、精度がそれほど必要ではないため、縮小率を撮影時の画像サイズに対して縦横１／４サイズ（縮小率６．２５％）に設定し、その縮小サイズで動き検出を行う。なお、本発明においては、上記の例に限定されるものではなく、各種条件に基づき他の拡大率や縮小率等を設定することができる。
また、上述の各実施例に示すような撮像装置１を用いた手ぶれ補正制御処理は、各処理をコンピュータに実行させることができる制御プログラム（撮像プログラム）を生成し、例えば、上述した図２に示すようなハードウェア構成に撮像プログラムをインストールし、プロセッサ３４等により、撮像プログラムを実行することにより、本実施形態における手ぶれ補正制御処理を容易に実現することができる。
上述したように、本発明によれば、最適な電子手ぶれ補正画像を取得することができる。具体的には、例えば撮影画像や撮影条件等の撮影情報によって、高精度な動きベクトル検出を行う必要がある場合や、動きベクトル検出精度は必要ないが高速に画像を作成したい場合、どのような精度での位置あわせが最適であるかを撮影画像や撮影条件から判断を行い、それにより位置あわせ処理で使用する縮小画像サイズを変更し、高精度で動きベクトル検出を行うか、高速で動きベクトル検出を行うかを選択することで、最適な動きベクトル検出を行う。これにより、最適な電子手ぶれ補正処理を行うことができる。
以上本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。
１ 撮像装置
１１ サブ液晶ディスプレイ
１２ メモリカード／電池装填部
１３ ストロボ発光部
１４ 光学ファインダ
１５ 測距ユニット
１６ リモコン受光部
１７ 鏡胴ユニット
１８ ＡＦ用ＬＥＤ
１９ ストロボ用ＬＥＤ
２０ ＬＣＤモニタ
３１ ＣＣＤ
３２ Ｆ／Ｅ−ＩＣ
３３ ＳＤＲＡＭ
３４ デジタルスチルカメラプロセッサ
３５ ＲＡＭ
３６ 内蔵メモリ
３７ ＲＯＭ
３８ 音声入力ユニット
３９ 音声再生ユニット
４０ ストロボ回路
４１ ＬＣＤドライバ
４２ サブＣＰＵ
４３ 操作キーユニット
４４ ブザー
４５ 加速度センサ
４６ ＵＳＢコネクタ
４７ シリアルドライバ回路
４８ ＲＳ−２３２Ｃコネクタ
４９ ＬＣＤドライバ
５０ ビデオアンプ
５１ ビデオジャック
５２ メモリカードスロットル
５３ メモリカード
６１，６４ 画像
６２，６３ 縮小画像
７１ 画角
特開２００７−２２６６４３号公報

Claims (11)

  1. 撮像素子により連続した複数の撮影画像を取得する画像取得制御手段と、
    前記画像取得制御手段により得られた複数の撮影画像の画像サイズを、前記複数の撮影画像のうち、少なくとも１つの撮影画像に対する撮影情報に基づいて設定された画像サイズに変更する画像サイズ変更手段と、
    前記画像サイズ変更手段により得られたサイズ変更画像に基づいて各撮影画像同士の動きベクトルを検出する動きベクトル検出手段と、
    前記動きベクトル検出手段により検出された動きベクトル情報に基づいて前記画像取得制御手段により得られた複数の撮影画像を合成する合成手段とを有することを特徴とする撮像装置。
  2. 前記画像サイズ変更手段は、
    前記撮影情報として、前記少なくとも１つの撮影画像に対する撮像時の設定情報に基づいて、前記画像サイズを設定することを特徴とする請求項１に記載の撮像装置。
  3. 前記画像サイズ変更手段は、
    前記撮影情報として、前記少なくとも１つの撮影画像に対する特徴情報に基づいて、前記画像サイズを設定することを特徴とする請求項１又は２に記載の撮像装置。
  4. 前記設定情報は、
    前記複数の撮影画像に対する撮影時のズームポジション及び／又はＩＳＯ感度を含むことを特徴とする請求項２に記載の撮像装置。
  5. 前記特徴情報は、
    前記複数の撮影画像に対するコントラスト及び／又は物体検出情報を含むことを特徴とする請求項３に記載の撮像装置。
  6. 撮像装置により撮影された画像に対する手ぶれ補正を行うための撮像方法において、
    前記撮像装置が備える撮像素子により連続した複数の撮影画像を取得する画像取得制御ステップと、
    前記画像取得制御ステップにより得られた複数の撮影画像の画像サイズを、前記複数の撮影画像のうち、少なくとも１つの撮影画像に対する撮影情報に基づいて設定された画像サイズに変更する画像サイズ変更ステップと、
    前記画像サイズ変更ステップにより得られたサイズ変更画像に基づいて各撮影画像同士の動きベクトルを検出する動きベクトル検出ステップと、
    前記動きベクトル検出ステップにより検出された動きベクトル情報に基づいて前記画像取得制御ステップにより得られた複数の撮影画像を合成する合成ステップとを有することを特徴とする撮像方法。
  7. 前記画像サイズ変更ステップは、
    前記撮影情報として、前記少なくとも１つの撮影画像に対する撮像時の設定情報に基づいて、前記画像サイズを設定することを特徴とする請求項６に記載の撮像方法。
  8. 前記画像サイズ変更ステップは、
    前記撮影情報として、前記少なくとも１つの撮影画像に対する特徴情報に基づいて、前記画像サイズを設定することを特徴とする請求項６又は７に記載の撮像方法。
  9. 前記設定情報は、
    前記複数の撮影画像に対する撮影時のズームポジション及び／又はＩＳＯ感度を含むことを特徴とする請求項７に記載の撮像方法。
  10. 前記特徴情報は、
    前記複数の撮影画像に対するコントラスト及び／又は物体検出情報を含むことを特徴とする請求項８に記載の撮像方法。
  11. コンピュータを、請求項１乃至５の何れか１項に記載された撮像装置として機能させるための撮像プログラム。
JP2011061631A 2011-03-18 2011-03-18 撮像装置、撮像方法、及び撮像プログラム Expired - Fee Related JP5708097B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2011061631A JP5708097B2 (ja) 2011-03-18 2011-03-18 撮像装置、撮像方法、及び撮像プログラム
US13/413,946 US9019387B2 (en) 2011-03-18 2012-03-07 Imaging device and method of obtaining image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011061631A JP5708097B2 (ja) 2011-03-18 2011-03-18 撮像装置、撮像方法、及び撮像プログラム

Publications (2)

Publication Number Publication Date
JP2012199691A JP2012199691A (ja) 2012-10-18
JP5708097B2 true JP5708097B2 (ja) 2015-04-30

Family

ID=46828143

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011061631A Expired - Fee Related JP5708097B2 (ja) 2011-03-18 2011-03-18 撮像装置、撮像方法、及び撮像プログラム

Country Status (2)

Country Link
US (1) US9019387B2 (ja)
JP (1) JP5708097B2 (ja)

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5845464B2 (ja) * 2011-05-31 2016-01-20 パナソニックＩｐマネジメント株式会社 画像処理装置及び画像処理方法並びにデジタルカメラ
TWI511547B (zh) * 2012-04-10 2015-12-01 Acer Inc 利用旋轉操作輔助視訊壓縮的方法及其影像擷取裝置
JP6016546B2 (ja) * 2012-09-19 2016-10-26 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム
CN113259565B (zh) 2012-11-28 2023-05-19 核心光电有限公司 多孔径成像系统
JP2014160982A (ja) 2013-02-20 2014-09-04 Sony Corp 画像処理装置および撮影制御方法、並びにプログラム
US9185291B1 (en) 2013-06-13 2015-11-10 Corephotonics Ltd. Dual aperture zoom digital camera
CN108535839B (zh) 2013-07-04 2022-02-08 核心光电有限公司 小型长焦透镜套件
CN108989649B (zh) 2013-08-01 2021-03-19 核心光电有限公司 具有自动聚焦的纤薄多孔径成像系统及其使用方法
US9571720B2 (en) * 2013-12-10 2017-02-14 Olympus Corporation Image processing device, display device, imaging apparatus, image processing method, and program
JP6381212B2 (ja) * 2014-01-09 2018-08-29 キヤノン株式会社 撮像装置及びその制御方法
JP6282133B2 (ja) * 2014-02-17 2018-02-21 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム
JP6500419B2 (ja) * 2014-02-19 2019-04-17 株式会社リコー 端末装置、通信システム及びプログラム
JP6336341B2 (ja) * 2014-06-24 2018-06-06 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
US9392188B2 (en) 2014-08-10 2016-07-12 Corephotonics Ltd. Zoom dual-aperture camera with folded lens
US9787899B1 (en) 2014-08-12 2017-10-10 Amazon Technologies, Inc. Multiple captures with a variable aperture
US9749532B1 (en) 2014-08-12 2017-08-29 Amazon Technologies, Inc. Pixel readout of a charge coupled device having a variable aperture
US9646365B1 (en) 2014-08-12 2017-05-09 Amazon Technologies, Inc. Variable temporal aperture
JP6452414B2 (ja) * 2014-12-03 2019-01-16 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
CN112327463B (zh) 2015-01-03 2022-10-14 核心光电有限公司 微型长焦镜头模块和使用该镜头模块的相机
JP6548409B2 (ja) * 2015-03-04 2019-07-24 キヤノン株式会社 画像処理装置、その制御方法、および制御プログラム、並びに撮像装置
KR101914894B1 (ko) 2015-04-02 2018-11-02 코어포토닉스 리미티드 듀얼 광학 모듈 카메라의 듀얼 보이스 코일 모터 구조체
KR102088603B1 (ko) 2015-04-16 2020-03-13 코어포토닉스 리미티드 소형 접이식 카메라의 오토 포커스 및 광학 이미지 안정화
WO2016189455A1 (en) 2015-05-28 2016-12-01 Corephotonics Ltd. Bi-directional stiffness for optical image stabilization and auto-focus in a dual-aperture digital camera
EP4425424A3 (en) 2015-08-13 2024-11-20 Corephotonics Ltd. Dual aperture zoom camera with video support and switching / non-switching dynamic control
EP3474070B1 (en) 2015-09-06 2020-06-24 Corephotonics Ltd. Auto focus and optical image stabilization with roll compensation in a compact folded camera
KR102770499B1 (ko) 2015-12-29 2025-02-19 코어포토닉스 리미티드 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라
US11368620B2 (en) 2016-03-03 2022-06-21 Sony Corporation Image processing apparatus, image processing method, and electronic device
US10488631B2 (en) 2016-05-30 2019-11-26 Corephotonics Ltd. Rotational ball-guided voice coil motor
KR20240036133A (ko) 2016-06-19 2024-03-19 코어포토닉스 리미티드 듀얼 애퍼처 카메라 시스템에서의 프레임 동기화
WO2018007951A1 (en) 2016-07-07 2018-01-11 Corephotonics Ltd. Dual-camera system with improved video smooth transition by image blending
KR102903119B1 (ko) 2016-07-07 2025-12-22 코어포토닉스 리미티드 폴디드 옵틱용 선형 볼 가이드 보이스 코일 모터
WO2018122650A1 (en) 2016-12-28 2018-07-05 Corephotonics Ltd. Folded camera structure with an extended light-folding-element scanning range
US10884321B2 (en) 2017-01-12 2021-01-05 Corephotonics Ltd. Compact folded camera
KR102354134B1 (ko) 2017-02-23 2022-01-21 코어포토닉스 리미티드 폴디드 카메라 렌즈 설계
CN114137791A (zh) 2017-03-15 2022-03-04 核心光电有限公司 具有全景扫瞄范围的照相装置及移动装置
WO2019048904A1 (en) 2017-09-06 2019-03-14 Corephotonics Ltd. STEREOSCOPIC DEPTH CARTOGRAPHY AND COMBINED PHASE DETECTION IN A DOUBLE-OPENING CAMERA
US10951834B2 (en) 2017-10-03 2021-03-16 Corephotonics Ltd. Synthetically enlarged camera aperture
KR102456315B1 (ko) 2017-11-23 2022-10-18 코어포토닉스 리미티드 컴팩트 폴디드 카메라 구조
EP3848749A1 (en) 2018-02-05 2021-07-14 Corephotonics Ltd. Reduced height penalty for folded camera
US11640047B2 (en) 2018-02-12 2023-05-02 Corephotonics Ltd. Folded camera with optical image stabilization
US10694168B2 (en) 2018-04-22 2020-06-23 Corephotonics Ltd. System and method for mitigating or preventing eye damage from structured light IR/NIR projector systems
KR102795759B1 (ko) 2018-04-23 2025-04-11 코어포토닉스 리미티드 연장된 2 자유도 회전 범위를 갖는 광학 경로 폴딩 요소
KR102912051B1 (ko) 2018-07-04 2026-01-13 코어포토닉스 리미티드 자동차 또는 감시 애플리케이션을 위한 스캐닝 광학 경로 폴딩 요소들을 구비하는 카메라
JP7028983B2 (ja) 2018-08-04 2022-03-02 コアフォトニクス リミテッド カメラ上の切り替え可能な連続表示情報システム
US11635596B2 (en) 2018-08-22 2023-04-25 Corephotonics Ltd. Two-state zoom folded camera
US20200099862A1 (en) * 2018-09-21 2020-03-26 Qualcomm Incorporated Multiple frame image stabilization
US11436839B2 (en) * 2018-11-02 2022-09-06 Toyota Research Institute, Inc. Systems and methods of detecting moving obstacles
WO2020144528A1 (en) 2019-01-07 2020-07-16 Corephotonics Ltd. Rotation mechanism with sliding joint
JP2020136774A (ja) * 2019-02-14 2020-08-31 キヤノン株式会社 動きベクトルを検出する画像処理装置およびその制御方法ならびにプログラム
KR102268094B1 (ko) 2019-03-09 2021-06-22 코어포토닉스 리미티드 동적 입체 캘리브레이션을 위한 시스템 및 방법
KR102365748B1 (ko) 2019-07-31 2022-02-23 코어포토닉스 리미티드 카메라 패닝 또는 모션에서 배경 블러링을 생성하는 시스템 및 방법
US11659135B2 (en) 2019-10-30 2023-05-23 Corephotonics Ltd. Slow or fast motion video using depth information
EP4045959B1 (en) 2019-12-03 2025-02-05 Corephotonics Ltd. Actuators for providing an extended two-degree of freedom rotation range
US11770618B2 (en) 2019-12-09 2023-09-26 Corephotonics Ltd. Systems and methods for obtaining a smart panoramic image
US11949976B2 (en) 2019-12-09 2024-04-02 Corephotonics Ltd. Systems and methods for obtaining a smart panoramic image
KR102811003B1 (ko) 2020-02-22 2025-05-20 코어포토닉스 리미티드 매크로 촬영을 위한 분할 스크린 기능
JP7490983B2 (ja) 2020-03-02 2024-05-28 株式会社リコー 撮像装置および像振れ補正方法
EP4097773A4 (en) 2020-04-26 2023-11-01 Corephotonics Ltd. TEMPERATURE CONTROL FOR HALL BAR SENSOR CORRECTION
CN117372248A (zh) 2020-05-17 2024-01-09 核心光电有限公司 全视场参考图像的图像拼接
KR20250156831A (ko) 2020-05-30 2025-11-03 코어포토닉스 리미티드 슈퍼 매크로 이미지를 얻기 위한 시스템 및 방법
CN119355935A (zh) 2020-07-15 2025-01-24 核心光电有限公司 用于校正扫描折叠相机和包含这样的扫描折叠相机的多相机中的视点像差的方法
US11637977B2 (en) 2020-07-15 2023-04-25 Corephotonics Ltd. Image sensors and sensing methods to obtain time-of-flight and phase detection information
CN114270145B (zh) 2020-07-31 2024-05-17 核心光电有限公司 用于大行程线性位置感测的霍尔传感器-磁体几何结构
KR102598070B1 (ko) 2020-08-12 2023-11-02 코어포토닉스 리미티드 스캐닝 폴디드 카메라의 광학 이미지 안정화
KR102696960B1 (ko) 2020-12-26 2024-08-19 코어포토닉스 리미티드 스캐닝 줌 카메라를 갖는 멀티-애퍼처 모바일 카메라에서의 비디오 지원
TWI888016B (zh) 2021-03-11 2025-06-21 以色列商核心光電有限公司 彈出式照相機系統
EP4726455A2 (en) 2021-06-08 2026-04-15 Corephotonics Ltd. Systems and cameras for tilting a focal plane of a super-macro image
US11798136B2 (en) 2021-06-10 2023-10-24 Bank Of America Corporation Automated teller machine for detecting security vulnerabilities based on document noise removal
KR102940165B1 (ko) 2021-07-21 2026-03-16 코어포토닉스 리미티드 팝-아웃 모바일 카메라 및 액추에이터
US12273623B2 (en) 2021-08-05 2025-04-08 Omnivision Technologies, Inc. Hybrid dynamic vision sensor and CMOS device for motion compensation
EP4500266A1 (en) 2022-03-24 2025-02-05 Corephotonics Ltd. Slim compact lens optical image stabilization

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04268220A (ja) 1991-02-22 1992-09-24 Ricoh Co Ltd 光ピックアップのサーボ制御装置
US7782362B2 (en) * 2003-06-17 2010-08-24 Panasonic Corporation Image pickup device for changing a resolution of frames and generating a static image based on information indicating the frames
JP2006157568A (ja) 2004-11-30 2006-06-15 Konica Minolta Holdings Inc 撮像装置およびプログラム
JP5079271B2 (ja) * 2006-06-28 2012-11-21 京セラ株式会社 手ぶれ量検出装置、手ぶれ補正装置、撮像装置及び手ぶれ量検出方法
JP4620607B2 (ja) 2006-02-24 2011-01-26 株式会社モルフォ 画像処理装置
US7840085B2 (en) * 2006-04-06 2010-11-23 Qualcomm Incorporated Electronic video image stabilization
JP4762089B2 (ja) * 2006-08-31 2011-08-31 三洋電機株式会社 画像合成装置及び方法並びに撮像装置
JP4268220B2 (ja) 2007-08-03 2009-05-27 パナソニック株式会社 撮影装置、撮影方法、およびプログラム
JP2009118434A (ja) 2007-11-09 2009-05-28 Sanyo Electric Co Ltd ぶれ補正装置及び撮像装置
JP5111088B2 (ja) * 2007-12-14 2012-12-26 三洋電機株式会社 撮像装置及び画像再生装置
JP4952574B2 (ja) * 2007-12-28 2012-06-13 カシオ計算機株式会社 画像合成装置及びプログラム
JP5127731B2 (ja) * 2009-01-19 2013-01-23 三洋電機株式会社 ビデオカメラ
US7924317B2 (en) * 2008-03-12 2011-04-12 Aptina Imaging Corporation Method and apparatus for reducing motion blur in digital images
JP2009302731A (ja) * 2008-06-11 2009-12-24 Olympus Corp 画像処理装置、画像処理プログラム、画像処理方法、および電子機器
US20100208086A1 (en) * 2009-02-19 2010-08-19 Texas Instruments Incorporated Reduced-memory video stabilization
JP2010288110A (ja) * 2009-06-12 2010-12-24 Sony Corp 画像処理装置および画像処理方法
JP5668364B2 (ja) 2010-08-20 2015-02-12 株式会社リコー 撮像装置、撮像方法並びにプログラム

Also Published As

Publication number Publication date
US20120236164A1 (en) 2012-09-20
US9019387B2 (en) 2015-04-28
JP2012199691A (ja) 2012-10-18

Similar Documents

Publication Publication Date Title
JP5708097B2 (ja) 撮像装置、撮像方法、及び撮像プログラム
US8208034B2 (en) Imaging apparatus
JP6954414B2 (ja) 撮像装置
CN101547315B (zh) 摄像装置
TWI386040B (zh) 具備影像振動檢測機能的攝影裝置
JP5764740B2 (ja) 撮像装置
JP2011029735A (ja) 画像処理装置、撮像装置及び画像処理方法
JP2009284394A (ja) 撮像装置および撮像方法
JP2010187354A (ja) 撮像装置
JP2010178164A (ja) 撮像装置
JP2018165800A (ja) 像ブレ補正装置、撮像装置および撮像装置の制御方法
JP4952891B2 (ja) 動画撮影装置および動画撮影プログラム
US20080297632A1 (en) Imaging apparatus and image processing program
KR20170034299A (ko) 자세 추정 장치, 자세 추정 방법 및 기록 매체에 저장된 컴퓨터 프로그램
JP5668364B2 (ja) 撮像装置、撮像方法並びにプログラム
US20220400215A1 (en) Image pickup apparatus, image pickup method, and storage medium
JP5614244B2 (ja) 撮像装置
JP2011217334A (ja) 撮像装置および撮像装置の制御方法
JP2009065248A (ja) 撮像装置とその制御方法
US11653094B2 (en) Imaging apparatus with shaking state information display
KR20110125077A (ko) 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체
JP2000069353A (ja) 手ぶれ検出装置および手ぶれ補正装置
KR20110020521A (ko) 디지털 촬영장치
KR20090071324A (ko) 촬상장치 및 촬상방법
JP2006145567A (ja) カメラ、カメラの手ブレ量報知方法、及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140214

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141106

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150216

R151 Written notification of patent or utility model registration

Ref document number: 5708097

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees