JP7145638B2 - 電子機器、撮像方法、制御装置、及び制御プログラム - Google Patents

電子機器、撮像方法、制御装置、及び制御プログラム Download PDF

Info

Publication number
JP7145638B2
JP7145638B2 JP2018089317A JP2018089317A JP7145638B2 JP 7145638 B2 JP7145638 B2 JP 7145638B2 JP 2018089317 A JP2018089317 A JP 2018089317A JP 2018089317 A JP2018089317 A JP 2018089317A JP 7145638 B2 JP7145638 B2 JP 7145638B2
Authority
JP
Japan
Prior art keywords
subject
imaging
imaging device
control device
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018089317A
Other languages
English (en)
Other versions
JP2019197947A (ja
Inventor
賢二 木村
耕市 山口
充宏 羽田
章裕 児玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2018089317A priority Critical patent/JP7145638B2/ja
Priority to US16/398,124 priority patent/US10798295B2/en
Priority to CN201910365814.8A priority patent/CN110460768B/zh
Publication of JP2019197947A publication Critical patent/JP2019197947A/ja
Application granted granted Critical
Publication of JP7145638B2 publication Critical patent/JP7145638B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32Means for focusing
    • G03B13/34Power focusing
    • G03B13/36Autofocus systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)
  • Automatic Focus Adjustment (AREA)

Description

本発明は、電子機器、撮像方法、制御装置、及び制御プログラムに関する。
従来、撮像タイミングが自動的に決定される撮像装置が知られている。以下の特許文献1では、動画撮影時により好ましい構図の静止画像を取得可能な撮像装置が開示されている。
特開2009-89220号公報(2009年4月23日公開)
しかしながら、上述のような従来技術は、撮像装置の焦点を対象となる被写体を決定したのちに合わせるため、撮像処理に要する時間が長いという問題がある。また、ユーザが、撮像装置の焦点を合わせる対象となる被写体を指定する必要が有り、煩わしいという問題がある。
本発明は上記の問題に鑑みてなされたものであり、撮像までの時間を短縮可能な電子機器を実現し、また、ユーザが被写体を指定する手間を削減することを目的とする。
上記の課題を解決するために、本発明の一態様に係る電子機器は、少なくとも1つの撮像装置と、少なくとも1つの制御装置とを備えた電子機器であって、上記制御装置は、上記撮像装置から取得された画像において1又は複数の物体を検出し、上記1又は複数の物体の中から、上記撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理と、上記1又は複数の物体の中から、上記撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に上記撮像装置の焦点を合わせるオートフォーカス処理とを実行し、上記オートフォーカス処理を、上記撮像動作決定処理が完了するより前に開始する。
本発明の一態様によれば、撮像処理に要する時間を短縮可能な電子機器を実現できる。また、ユーザが被写体を指定する手間を削減できる。
実施形態1に係る電子機器を示す機能ブロック図である。 実施形態1における処理の流れを示すフローチャートである。 撮像までの処理が短縮されることを示す図である。 各実施形態における電子機器の動作を示す概略図である。
本発明の各実施形態について図1~図4を参照して説明すれば以下の通りである。
〔実施形態1〕
以下、本発明の一実施形態について、図1~図3を参照して説明する。本実施形態においては、撮像処理に要する時間を短縮可能な電子機器について説明する。
〔1.電子機器1の構成〕
図1は、本実施形態に係る電子機器1を示す機能ブロック図である。ここで、電子機器1は、例えばスマートフォン又はデジタルカメラ等であってよい。図1に示す通り、電子機器1は、撮像装置2、制御装置10、表示装置3、及び記憶装置4を備える。
撮像装置2は、静止画像の撮像に供するカメラである。なお、撮像装置2によって動画像が撮像可能であってもよい。
制御装置10は、電子機器1全体を統括する制御装置であって、物体検出部11、撮像決定部(撮像動作決定処理部)12、オートフォーカス処理部13、撮影処理部14、及び静止画エンコーダー15を備える。
また、制御装置10は、撮像処理において、撮像装置2における露出を自動的に調整するオートエクスポージャー処理を行う機能を有していてもよい。あるいは、制御装置10は、撮像処理において、自動的に撮像装置2の撮像画像における色温度を調整するオートホワイトバランス処理を行う機能を有していてもよい。
物体検出部11は、撮像装置2から取得された画像内において物体を検出する。また、物体検出部11は、当該物体の状態を検出する。当該物体の状態とは、例えば以下の各項目である。
・物体の位置、つまり物体の当該画像内における座標
・物体の大きさ
・物体の種類、つまり当該物体が、人物、動物、料理、景色等の何れであるか
・物体の状態、例えば人物が笑顔であるか、又は視線をカメラに向けているか等
撮像決定部12は、撮像装置2の撮像タイミングの基準となる第1被写体と、第1被写体の状態に応じた撮像タイミングとを決定する処理を行う。本明細書においては、撮像決定部12による上記処理を撮像動作決定処理と呼称する。
また、撮像決定部12は、第1被写体と、後述する第2被写体との一致の程度が所定の条件を充足するか否かを判定する。ここで、各被写体の一致の程度が所定の条件を充足する場合とは、各被写体が同一の物体であると推定される場合、又は撮像装置2から取得された画像内において各被写体を示す各領域が所定の大きさ若しくは比率以上の重畳範囲を有する場合であって、実質的に同一の物体とみなせる場合を意味する。
なお、撮像決定部12が各被写体の一致の程度が所定の条件を充足するか否かを判定する方法は、特定の方法に限定されず、例えば、各被写体の輪郭線どうしが所定の距離以内にあるか、又は各輪郭線内の領域が包含関係にあるか等によって判定を行ってもよい。
オートフォーカス処理部13は、オートフォーカスの対象となる第2被写体を決定する処理を行う。また、オートフォーカス処理部13は、第2被写体に撮像装置2の焦点を合わせる処理を行う。本明細書においては、オートフォーカス処理部13によるそれらの処理をオートフォーカス処理と呼称する。
また、第1被写体及び第2被写体は、物体検出部11が検出した物体の状態に応じて決定されるが、各被写体が決定される条件は特定の条件に限定されない。また、各被写体が決定される条件は互いに異なっていてもよい。上記条件とは、例えば以下の各項目である。
・対象となる物体が撮影画像内において最も大きい物体か
・対象となる物体が撮影画像内において最も中心寄りに位置するか
・対象となる物体が人物であるか
なお、物体検出部11、撮像決定部12、及びオートフォーカス処理部13における、物体が検出される条件及び各被写体が決定される条件は、周囲の撮影環境に応じて自動で設定されてもよいし、ユーザによって設定可能な構成でもよい。ただし、物体検出部11、撮像決定部12、及びオートフォーカス処理部13における処理そのものは、ユーザの指示操作によらずに実行される。上記指示操作の具体例としては、撮影画像内における物体を指定する操作等が挙げられる。
撮影処理部14は、撮像装置2に撮影を実行させる処理と、撮像決定部12からの指示に応じて撮像装置2に静止画像の撮像を実行させる処理とを実行させる。なお、本明細書においては、「撮影」とは、画像が記憶装置4に保存されないものを意味し、静止画像が記憶装置4に保存される「撮像」とは区別されるものとする。また、撮影処理部14は、撮像装置2の撮像画像を示す信号を、静止画エンコーダー15に出力する。
静止画エンコーダー15は、撮影処理部14から出力された上記信号を符号化して記憶装置4に格納する。
表示装置3は、静止画像又は動画像を表示する表示パネルである。また、表示装置3は、例えば電子機器1のバッテリー残量、又は撮像装置2の設定パラメータ等を示すオブジェクトを、静止画像又は動画像に適宜重畳させて表示してもよい。
記憶装置4は、撮像画像データ等の各種データを保存する記憶装置である。なお、記憶装置4は、電子機器1から取り外し可能な記録媒体として実現されてもよい。また、記憶装置4は、電子機器1の外部に設けられ、電子機器1との無線通信によって撮像画像を取得して保存する構成でもよい。
また、電子機器1は、図1には図示しない、ユーザの電子機器1への指示操作を受け付けるボタンやスライダー等を備える。なお、表示装置3がタッチパネルとして機能し、表示装置3に対するタッチ操作によって電子機器1に対する指示操作を行える構成でもよい。
なお、電子機器1が備える各部材は、単数であることに限定されず、当該複数の部材を備える構成でもよい。また、各部材における処理の一部又は全部が、他の部材によってなされてもよい。
〔2.処理の流れ〕
本実施形態における処理の流れについて図1~図3を参照してステップごとに説明する。図2は、本実施形態における処理の流れを示すフローチャートである。
(ステップS101)
ステップS101において、撮影処理部14は、撮像装置2による画像の撮影を開始する。そして、表示装置3は、撮像装置2が撮影した画像を画面に表示する。なお、ここで撮影される画像とは、通常、動画像である。また、撮像装置2による画像の撮影処理は、以降のステップにおいても継続される。
(ステップS102)
続いて、ステップS102において、物体検出部11は、ステップS101において撮像装置2が撮影した画像内において、物体の検出を試みる。
(ステップS103)
続いて、ステップS103において、物体検出部11は、撮像装置2の撮像範囲において、1又は複数の物体を検出したか否かを判定する。検出した場合は、続いて、ステップS104とステップ106との処理が並行して実行され、検出していない場合は、続いてステップS102の処理が実行される。
ただし、本ステップへの遷移が2回目以降である場合であって、ステップS104における処理が終了している場合、続いてステップS106の処理のみが実行される。
また、ステップS104とステップ106との処理が並行して実行されるとは、制御装置10が、後述するステップS104及びステップS105におけるオートフォーカス処理を、後述するステップS106等における撮像動作決定処理の少なくとも一部と並行して実行することを意味する。
上記の構成によれば、制御装置10は、オートフォーカス処理と撮像動作決定処理との一方の処理の完了を待たずして他方の処理を実行できる。
(ステップS104)
ステップS104において、オートフォーカス処理部13は、ステップS103において物体検出部11が検出した1又は複数の物体の中から、オートフォーカス処理の対象となる条件を満たす第2被写体を決定したか否かを判定する。オートフォーカス処理部13が第2被写体を決定した場合は、続いてステップS105の処理が実行され、撮影画像内の各物体が当該条件を満たさず、第2被写体を決定できなかった場合は、続いてステップS102の処理が実行される。
(ステップS105)
続いて、ステップS105において、オートフォーカス処理部13は、ステップS104において決定した第2の被写体に撮像装置2の焦点を合わせる処理を行う。このように、制御装置10は、上述したオートフォーカス処理において、撮像装置2の焦点を合わせる処理を、上記第2被写体を決定したのちに開始する。
上記の構成によれば、撮像装置2の焦点をまず合わせる対象が、第2被写体の決定によって定まる。
なお、上述した処理の前後に、又は並行して、制御装置10は、オートエクスポージャー処理又はオートホワイトバランス処理を実行してもよい。つまり制御装置10は、後述するステップS106等における撮像動作決定処理が完了するより前に、オートエクスポージャー処理及びオートホワイトバランス処理のうち、少なくとも一方を開始してもよい。
上記の構成によれば、制御装置10は、撮像動作決定処理の完了を待たずしてオートエクスポージャー処理、オートホワイトバランス処理、又はその両方を実行できる。
(ステップS106)
ステップS106において、撮像決定部12は、ステップS103において物体検出部11が検出した1又は複数の物体の中から、撮像動作決定処理の対象となる条件を満たす第1の被写体を決定したか否かを判定する。撮像決定部12が第1の被写体を決定した場合は、続いてステップS107の処理が実行され、撮影画像内の各物体が当該条件を満たさず、第1被写体を決定できなかった場合は、続いてステップS102の処理が実行される。
(ステップS107)
続いて、ステップS107において、撮像決定部12は、ステップS104においてオートフォーカス処理部13が決定した第2被写体と、ステップS106において撮像決定部12が決定した第1被写体との一致の程度が所定の条件を充足するか否かを判定する。
双方の一致の程度が所定の条件を充足する場合は、続いてステップS109の処理が実行され、充足しない場合は、続いてステップS108の処理が実行される。
なお、第1被写体が決定されたにも関わらず、第2被写体がまだ決定されていない場合、撮像決定部12は、第1被写体を第2被写体としても決定する。換言すると、制御装置10は、第2被写体を決定するよりも先に第1被写体を決定した場合、第1被写体を第2被写体として決定する。そして、続いてステップS108の処理が実行される。上記の構成によれば、第2被写体の決定に時間を要した場合においても、第1被写体の決定以降の処理時間の増加を抑制できる。
また、撮像決定部12は、自身が第1被写体と第2被写体との一致の程度が所定の条件を充足しないと判定した場合であって、かつステップS105におけるオートフォーカス処理部13の処理が実行中である場合、当該処理を中止させる。つまり、制御装置10は、第1被写体と第2被写体との一致の程度が所定の条件を充足しない場合、第2被写体に撮像装置2の焦点を合わせる処理を中止する。
上記の構成によれば、第1被写体となり得ない被写体に対して撮像装置2の焦点を合わせる無駄な処理を中止することにより、消費電力を節減できる。
また、上述したように、撮像決定部12は、オートフォーカス処理部13が第2被写体を決定する条件とは互いに異なる条件によって第1被写体を決定してもよい。換言すると、制御装置10は、第1被写体と第2被写体とを互いに異なる条件によって決定してもよい。
上記の構成によれば、何れかの被写体を決定する条件を、速やかに決定可能な条件に設定することにより、速やかに当該被写体における以降の処理を開始することができる。
(ステップS108)
ステップS108において、オートフォーカス処理部13は、ステップS106において撮像決定部12が決定した、第2被写体でもある第1被写体に対して、撮像装置2の焦点を合わせる処理を実行する。
(ステップS109)
ステップS109において、撮像決定部12は、ステップS108を経由して本ステップに至った場合にはステップ108において合わせられた焦点距離にて、ステップS108を経由せず本ステップに至った場合にはステップS105において合わせられた焦点距離にて、撮像装置2による、記憶装置4に保存する静止画像の撮像処理を実行する。
後者の処理は、制御装置10が、第1被写体と第2被写体との一致の程度が所定の条件を充足する場合に、第2被写体に焦点を合わせた状態にて撮像装置2に第1被写体を撮像させるとも換言できる。
また、図3は、後者の処理によって撮像までの時間が短縮されることを示す図である。図3に示すように、上記の構成によれば、撮像タイミングの基準となる被写体の決定から撮像までのタイムラグを減少させることができる。
また、撮像装置2が撮像を行うタイミングは、撮像決定部12が第1被写体の状態に応じて決定する。つまり上述したように、第1被写体が、撮像装置2における撮像タイミングの基準となる。撮像決定部12は、例えば第1被写体が人物である場合、当該人物が笑顔になったときに撮像装置2に撮像を実行させてもよい。また、撮像決定部12は、撮像装置2が撮像を行うタイミングをステップS106において決定する構成でもよい。上記構成においては、撮像装置2から取得された画像内において何れかの物体が静止画像の撮像が行われる条件を満たした場合、例えば何れかの人物が笑顔になった場合に、当該物体又は人物を第1被写体とする撮像が行われるとも言える。
そして撮影処理部14は、撮像装置2から当該静止画像を示すデータを取得して静止画エンコーダー15に出力する。
(ステップS110)
続いて、ステップS110において、静止画エンコーダー15は、ステップS109において撮影処理部14から出力された静止画像を示すデータを符号化して記憶装置4に格納する。
以上が、図2のフローチャートに基づく処理の流れである。
このように、本実施形態に係る電子機器1は、少なくとも1つの撮像装置2と、少なくとも1つの制御装置10とを備えた電子機器1であって、制御装置10は、撮像装置2から取得された画像において1又は複数の物体を検出し、上記1又は複数の物体の中から、撮像装置2における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理を行う。
また、本実施形態に係る電子機器1は、上記1又は複数の物体の中から、撮像装置2によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、第2被写体に撮像装置2の焦点を合わせるオートフォーカス処理とを実行し、上記オートフォーカス処理を、上記撮像動作決定処理が完了するより前に開始する。
上記の構成によれば、制御装置10が撮像動作決定処理の完了を待たずしてオートフォーカス処理を実行することにより、撮像処理に要する時間を短縮可能な電子機器1を実現できる。また、ユーザが被写体を指定する手間を削減できる。
〔実施形態2〕
本発明の第2の実施形態について、図1、図2及び図4を参照して説明する。本実施形態においても図1に示す構成を用い、各部材における重複する説明を繰り返さない。ただし、本実施形態に係る物体検出部11は、ステップS102及びステップS103における物体の検出及び判定処理を、ステップS109における撮像処理が開始されるまでの間、以降のステップにおいても継続する。
本実施形態に係る電子機器1は、撮像決定部12による撮像動作決定処理の実行中、又はオートフォーカス処理部13によるオートフォーカス処理の実行中に、物体検出部11が追加となる物体、つまり被写体を検出した場合に、撮像動作決定処理及びオートフォーカス処理を再度実行する構成である。
具体的には、図2のフローチャートにおけるステップS104以降の処理が実行中であって、かつステップS109における撮像処理がまだ実行されていない場合において、物体検出部11が、それまで検出していなかった追加の被写体を検出したとき、制御装置10は、実行中の処理を中断して、ステップS104とステップ106との処理を並行して再度実行しなおす。なお、双方の処理を再度実行した結果、第1被写体又は第2被写体が変更されてもよいし、変更されなくともよい。
図4は、各実施形態における電子機器1の動作を示す概略図である。図4の工程41~43は、上述した実施形態1における処理を示し、工程41、42及び44~46は、本実施形態における処理を示している。また、工程41~46を示す各図において、被写体51又は52が図示された領域は、電子機器1の表示装置3である。
具体的には、ステップS104~ステップS109の撮像処理前までに相当する工程42が実行されているときに、物体検出部11が追加の被写体52を検出した場合、工程44に遷移して以降の処理が実行される。ここで、図4の工程45及び46は、オートフォーカス処理及び撮像動作決定処理が再度実行された結果、被写体52に焦点が合った状態で撮像処理が行われていることを例示している。
また、工程46に遷移する前に、物体検出部11がそれまで検出していなかった追加の被写体を更に検出した場合、その度に工程44以降の処理が再実行されてもよい。
上述したように、制御装置10は、撮像装置2から取得された画像において追加となる被写体を検出した場合、上記撮像動作決定処理及び上記オートフォーカス処理を再実行する。上記の構成によれば、撮像決定部12は、上記追加となる被写体を第1被写体として決定できる。
〔ソフトウェアによる実現例〕
制御装置10の制御ブロック(特に撮像決定部12およびオートフォーカス処理部13)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、ソフトウェアによって実現してもよい。
後者の場合、制御装置10は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば少なくとも1つのプロセッサ(制御装置)を備えていると共に、上記プログラムを記憶したコンピュータ読み取り可能な少なくとも1つの記録媒体を備えている。そして、上記コンピュータにおいて、上記プロセッサが上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記プロセッサとしては、例えばCPU(Central Processing Unit)を用いることができる。上記記録媒体としては、「一時的でない有形の媒体」、例えば、ROM(Read Only Memory)等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムを展開するRAM(Random Access Memory)などをさらに備えていてもよい。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
〔まとめ〕
本発明の態様1に係る電子機器(1)は、少なくとも1つの撮像装置(2)と、少なくとも1つの制御装置(10)とを備えた電子機器であって、制御装置は、撮像装置から取得された画像において1又は複数の物体を検出し、上記1又は複数の物体の中から、撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理と、上記1又は複数の物体の中から、撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に撮像装置の焦点を合わせるオートフォーカス処理とを実行し、上記オートフォーカス処理を、上記撮像動作決定処理が完了するより前に開始する構成である。
上記の構成によれば、制御装置が撮像動作決定処理の完了を待たずしてオートフォーカス処理を実行することにより、撮像処理に要する時間を短縮可能な電子機器を実現できる。また、ユーザが被写体を指定する手間を削減できる。
本発明の態様2に係る電子機器は、上記の態様1において、制御装置10は、上記オートフォーカス処理を、上記撮像動作決定処理の少なくとも一部と並行して実行する構成としてもよい。
上記の構成によれば、制御装置は、オートフォーカス処理と撮像動作決定処理との一方の処理の完了を待たずして他方の処理を実行できる。
本発明の態様3に係る電子機器は、上記の態様1又は2において、制御装置は、上記オートフォーカス処理において、上記撮像装置の焦点を合わせる処理を、上記第2被写体を決定したのちに開始してもよい。上記の構成によれば、撮像装置の焦点をまず合わせる対象が、第2被写体の決定によって定まる。
本発明の態様4に係る電子機器は、上記の態様1から3までの何れかにおいて、制御装置は、上記第1被写体と上記第2被写体とを互いに異なる条件によって決定する構成としてもよい。
上記の構成によれば、何れかの被写体を決定する条件を、速やかに決定可能な条件に設定することにより、速やかに当該被写体における以降の処理を開始することができる。
本発明の態様5に係る電子機器は、上記の態様1から4までの何れかにおいて、制御装置10は、上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足する場合、上記第2被写体に焦点を合わせた状態にて撮像装置2に上記第1被写体を撮像させる構成としてもよい。
上記の構成によれば、撮像タイミングの基準となる被写体の決定から撮像までのタイムラグを減少させることができる。
本発明の態様6に係る電子機器は、上記の態様1から5までの何れかにおいて、制御装置は、撮像装置から取得された画像において追加となる被写体を検出した場合、上記撮像動作決定処理及び上記オートフォーカス処理を再実行する構成としてもよい。
上記の構成によれば、撮像決定部は、上記追加となる被写体を第1被写体として決定できる。
本発明の態様7に係る電子機器は、上記の態様1から6までの何れかにおいて、制御装置は、上記第2被写体を決定するよりも先に上記第1被写体を決定した場合、上記第1被写体を上記第2被写体として決定する構成としてもよい。
上記の構成によれば、第2被写体の決定に時間を要した場合においても、第1被写体の決定以降の処理時間の増加を抑制できる。
本発明の態様8に係る電子機器は、上記の態様1から7までの何れかにおいて、制御装置は、上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足しない場合、上記第2被写体に撮像装置2の焦点を合わせる処理を中止する構成としてもよい。
上記の構成によれば、第1被写体となり得ない被写体に対して撮像装置の焦点を合わせる無駄な処理を中止することにより、消費電力を節減できる。
本発明の態様9に係る電子機器は、上記の態様1から8までの何れかにおいて、制御装置は、上記撮像動作決定処理が完了するより前に、オートエクスポージャー処理及びオートホワイトバランス処理のうち、少なくとも一方を開始する構成としてもよい。
上記の構成によれば、制御装置は、撮像動作決定処理の完了を待たずしてオートエクスポージャー処理、オートホワイトバランス処理、又はその両方を実行できる。
本発明の態様10に係る撮像方法は、撮像装置(2)を備えた電子機器(1)によって実行される撮像方法であって、撮像装置から取得された画像において1又は複数の物体を検出する検出ステップと、上記1又は複数の物体の中から、撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理ステップと、上記1又は複数の物体の中から、撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に撮像装置の焦点を合わせるオートフォーカス処理ステップとを含み、上記オートフォーカス処理ステップを、上記撮像動作決定処理ステップが完了するより前に開始する方法である。
上記の方法によれば、撮像動作決定処理ステップの完了を待たずしてオートフォーカス処理ステップを実行することにより、撮像までの時間が短縮できる。また、ユーザが被写体を指定する手間を削減できる。
本発明の態様11に係る制御装置(10)は、少なくとも1つの撮像装置(2)を制御する制御装置であって、制御装置は、撮像装置から取得された画像において1又は複数の物体を検出し、上記1又は複数の物体の中から、撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理部(12)と、上記1又は複数の物体の中から、撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に撮像装置の焦点を合わせるオートフォーカス処理部(13)とを備え、上記オートフォーカス処理部における処理は、上記撮像動作決定処理部における処理が完了するより前に開始される構成である。
上記の構成によれば、制御装置は、撮像動作決定処理部における処理の完了を待たずしてオートフォーカス処理部における処理を実行することにより、撮像までの時間が短縮できる。また、ユーザが被写体を指定する手間を削減できる。
本発明の各態様に係る制御装置(10)は、コンピュータによって実現してもよく、この場合には、コンピュータを制御装置が備える各部(ソフトウェア要素)として動作させることにより制御装置をコンピュータにて実現させる制御装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
1 電子機器
2 撮像装置
3 表示装置
4 記憶装置
10 制御装置
11 物体検出部
12 撮像決定部(撮像動作決定処理部)
13 オートフォーカス処理部
14 撮影処理部
15 静止画エンコーダー

Claims (12)

  1. 少なくとも1つの撮像装置と、少なくとも1つの制御装置とを備えた電子機器であって、
    上記制御装置は、
    上記撮像装置から取得された画像において1又は複数の物体を検出し、
    上記1又は複数の物体の中から、上記撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理と、
    上記1又は複数の物体の中から、上記撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に上記撮像装置の焦点を合わせるオートフォーカス処理とを実行し、
    上記オートフォーカス処理を、上記撮像動作決定処理が完了するより前に開始し、
    上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足する場合、
    上記第2被写体に焦点を合わせた状態にて上記撮像装置に上記第1被写体を撮像させることを特徴とする電子機器。
  2. 上記制御装置は、
    上記オートフォーカス処理を、上記撮像動作決定処理の少なくとも一部と並行して実行する
    ことを特徴とする請求項1に記載の電子機器。
  3. 上記制御装置は、
    上記オートフォーカス処理において、
    上記撮像装置の焦点を合わせる処理を、上記第2被写体を決定したのちに開始する
    ことを特徴とする請求項1又は2に記載の電子機器。
  4. 上記制御装置は、
    上記第1被写体と上記第2被写体とを互いに異なる条件によって決定する
    ことを特徴とする請求項1から3までの何れか1項に記載の電子機器。
  5. 上記制御装置は、
    上記撮像装置から取得された画像において追加となる被写体を検出した場合、
    上記撮像動作決定処理及び上記オートフォーカス処理を再実行する
    ことを特徴とする請求項1からまでの何れか1項に記載の電子機器。
  6. 上記制御装置は、
    上記第2被写体を決定するよりも先に上記第1被写体を決定した場合、
    上記第1被写体を上記第2被写体として決定する
    ことを特徴とする請求項1からまでの何れか1項に記載の電子機器。
  7. 上記制御装置は、
    上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足しない場合、
    上記第2被写体に上記撮像装置の焦点を合わせる処理を中止する
    ことを特徴とする請求項1からまでの何れか1項に記載の電子機器。
  8. 上記制御装置は、
    上記撮像動作決定処理が完了するより前に、
    オートエクスポージャー処理及びオートホワイトバランス処理のうち、少なくとも一方を開始する
    ことを特徴とする請求項1からまでの何れか1項に記載の電子機器。
  9. 少なくとも1つの撮像装置と、少なくとも1つの制御装置とを備えた電子機器であって、
    上記制御装置は、
    上記撮像装置から取得された画像において1又は複数の物体を検出し、
    上記1又は複数の物体の中から、上記撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理と、
    上記1又は複数の物体の中から、上記撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に上記撮像装置の焦点を合わせるオートフォーカス処理とを実行し、
    上記オートフォーカス処理を、上記撮像動作決定処理が完了するより前に開始し、
    上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足しない場合、
    上記第2被写体に上記撮像装置の焦点を合わせる処理を中止することを特徴とする電子機器。
  10. 撮像装置を備えた電子機器によって実行される撮像方法であって、
    上記撮像装置から取得された画像において1又は複数の物体を検出する検出ステップと、
    上記1又は複数の物体の中から、上記撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理ステップと、
    上記1又は複数の物体の中から、上記撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に上記撮像装置の焦点を合わせるオートフォーカス処理ステップと
    上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足する場合、上記第2被写体に焦点を合わせた状態にて上記撮像装置に上記第1被写体を撮像させる撮像処理ステップと、を含み、
    上記オートフォーカス処理ステップを、上記撮像動作決定処理ステップが完了するより前に開始することを特徴とする撮像方法。
  11. 少なくとも1つの撮像装置を制御する制御装置であって、
    上記制御装置は、
    上記撮像装置から取得された画像において1又は複数の物体を検出し、
    上記1又は複数の物体の中から、上記撮像装置における撮像タイミングの基準となる第1被写体をユーザによる物体の指定なしに決定し、かつ上記第1被写体の状態に応じて撮像を行うタイミングを決定する撮像動作決定処理部と、
    上記1又は複数の物体の中から、上記撮像装置によるオートフォーカスの対象となる第2被写体をユーザによる物体の指定なしに決定し、上記第2被写体に上記撮像装置の焦点を合わせるオートフォーカス処理部と
    上記第1被写体と上記第2被写体との一致の程度が所定の条件を充足する場合、上記第2被写体に焦点を合わせた状態にて上記撮像装置に上記第1被写体を撮像させる撮影処理部と、を備え、
    上記オートフォーカス処理部における処理は、上記撮像動作決定処理部における処理が完了するより前に開始されることを特徴とする制御装置。
  12. 請求項11に記載の制御装置としてコンピュータを機能させるための制御プログラムであって、上記制御装置としてコンピュータを機能させるための制御プログラム。
JP2018089317A 2018-05-07 2018-05-07 電子機器、撮像方法、制御装置、及び制御プログラム Active JP7145638B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018089317A JP7145638B2 (ja) 2018-05-07 2018-05-07 電子機器、撮像方法、制御装置、及び制御プログラム
US16/398,124 US10798295B2 (en) 2018-05-07 2019-04-29 Electronic device, image capture method, and control device
CN201910365814.8A CN110460768B (zh) 2018-05-07 2019-04-30 电子设备、拍照方法、控制装置、及记录介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018089317A JP7145638B2 (ja) 2018-05-07 2018-05-07 電子機器、撮像方法、制御装置、及び制御プログラム

Publications (2)

Publication Number Publication Date
JP2019197947A JP2019197947A (ja) 2019-11-14
JP7145638B2 true JP7145638B2 (ja) 2022-10-03

Family

ID=68385456

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018089317A Active JP7145638B2 (ja) 2018-05-07 2018-05-07 電子機器、撮像方法、制御装置、及び制御プログラム

Country Status (3)

Country Link
US (1) US10798295B2 (ja)
JP (1) JP7145638B2 (ja)
CN (1) CN110460768B (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11385526B2 (en) * 2019-11-15 2022-07-12 Samsung Electronics Co., Ltd. Method of processing image based on artificial intelligence and image processing device performing the same
CN112822390A (zh) * 2019-11-15 2021-05-18 三星电子株式会社 处理图像的方法和图像处理设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010041255A (ja) 2008-08-01 2010-02-18 Sony Corp 撮像装置、撮像方法およびプログラム
JP2010068297A (ja) 2008-09-11 2010-03-25 Nikon Corp デジタルカメラ
JP2012150438A (ja) 2010-12-28 2012-08-09 Canon Inc 撮像装置およびその制御方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006072005A (ja) * 2004-09-02 2006-03-16 Nikon Corp オートフォーカス装置
JP4639271B2 (ja) * 2005-12-27 2011-02-23 三星電子株式会社 カメラ
KR101323735B1 (ko) 2007-01-17 2013-10-30 삼성전자주식회사 디지털 촬영장치, 그 제어방법 및 제어방법을 실행시키기위한 프로그램을 저장한 기록매체
JP4356778B2 (ja) * 2007-06-25 2009-11-04 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
JP4894708B2 (ja) 2007-10-02 2012-03-14 株式会社ニコン 撮像装置
JP5294647B2 (ja) * 2008-02-19 2013-09-18 キヤノン株式会社 焦点調節装置及びその制御方法
JP5195660B2 (ja) * 2009-06-15 2013-05-08 カシオ計算機株式会社 撮像装置、合焦方法及びプログラム
JP2011039499A (ja) * 2009-07-14 2011-02-24 Hoya Corp 自動焦点検出装置
KR20110015309A (ko) 2009-08-07 2011-02-15 삼성전자주식회사 디지털 촬영장치, 그 제어방법 및 이를 실행시키기 위한 프로그램을 저장한 기록매체
JP5990951B2 (ja) * 2012-03-15 2016-09-14 オムロン株式会社 撮影装置、撮影装置の制御方法、撮影装置制御プログラム、および該プログラムを記録したコンピュータ読み取り可能な記録媒体
US20130258167A1 (en) * 2012-03-28 2013-10-03 Qualcomm Incorporated Method and apparatus for autofocusing an imaging device
JP5950664B2 (ja) * 2012-04-10 2016-07-13 キヤノン株式会社 撮像装置およびその制御方法
KR102254703B1 (ko) * 2014-09-05 2021-05-24 삼성전자주식회사 촬영 장치 및 촬영 방법
CN104486552B (zh) * 2014-12-29 2018-10-12 联想(北京)有限公司 一种获取图像的方法及电子设备
CN106324945A (zh) * 2015-06-30 2017-01-11 中兴通讯股份有限公司 非接触式自动对焦方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010041255A (ja) 2008-08-01 2010-02-18 Sony Corp 撮像装置、撮像方法およびプログラム
JP2010068297A (ja) 2008-09-11 2010-03-25 Nikon Corp デジタルカメラ
JP2012150438A (ja) 2010-12-28 2012-08-09 Canon Inc 撮像装置およびその制御方法

Also Published As

Publication number Publication date
CN110460768A (zh) 2019-11-15
US20190342490A1 (en) 2019-11-07
CN110460768B (zh) 2021-02-09
JP2019197947A (ja) 2019-11-14
US10798295B2 (en) 2020-10-06

Similar Documents

Publication Publication Date Title
JP6439837B2 (ja) 電子機器および表示方法
US7791668B2 (en) Digital camera
US8019129B2 (en) Image pickup device, face detection method, and computer-readable recording medium
CN107124546A (zh) 一种自动切换终端对焦模式的方法及终端
JP2009098317A (ja) オートフォーカス制御回路、オートフォーカス制御方法及び撮像装置
JP2008288911A (ja) 撮像装置、顔領域検出プログラム、及び、顔領域検出方法
JP2009141475A (ja) カメラ
US11190704B2 (en) Imaging apparatus and control method for performing live view display of a tracked object
JP7145638B2 (ja) 電子機器、撮像方法、制御装置、及び制御プログラム
CN110519504B (zh) 电子设备、电子设备的控制装置、存储介质以及控制方法
JP6975144B2 (ja) 撮像処理装置、電子機器、撮像処理方法、撮像処理装置制御プログラム
JP2009157123A (ja) 撮像装置
CN110460766B (zh) 电子设备、控制装置及控制方法
US9930267B2 (en) Image pickup apparatus that automatically generates time-lapse moving image, moving image generation method, and storage medium
JP5257969B2 (ja) 合焦位置制御装置、及び合焦位置制御方法、合焦位置制御プログラム
US9282234B2 (en) Focus adjustment apparatus and method, and image capturing apparatus
JP2012168382A (ja) 撮像装置およびプログラム
US11258943B2 (en) Imaging apparatus and method for controlling the same
JP2004029105A (ja) オートフォーカス装置、及びaf評価値取得方法
JP2002258344A (ja) カメラ
JPH11331744A (ja) 電子カメラ
JP2010122358A (ja) オートフォーカス装置、オートフォーカス方法及び撮像装置
JP2020161892A (ja) 電子機器制御装置、制御方法、及びプログラム。
CN112954204A (zh) 拍照控制方法及装置、存储介质、终端
JPH11331759A (ja) 電子カメラ

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210324

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220419

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220920

R150 Certificate of patent or registration of utility model

Ref document number: 7145638

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150