JP2020197976A - 電子機器、電子機器の制御方法、プログラム、記憶媒体 - Google Patents

Abstract

【課題】ユーザーの視線に応じた位置において表示対象の拡大／縮小を行う電子機器であって、ユーザーが所望する倍率で表示対象の拡大／縮小を可能にする電子機器を提供する。【解決手段】電子機器は、表示手段に対するユーザーの視線位置を検出する視線検出手段と、特定の操作手段と、前記表示手段に表示された表示対象に対して注視があったことに対応する所定の条件が満たされた後に、前記特定の操作手段が操作されたことに応じて、前記表示対象のうち前記視線検出手段によって検出された前記注視の位置に基づいた位置を中心として、三段階以上の表示倍率のうち前記特定の操作手段に対する操作量または操作回数に応じた表示倍率で拡大または縮小するように制御する制御手段とを有する。【選択図】図３

Description

本発明は、電子機器、電子機器の制御方法、プログラム、記憶媒体に関する。

従来、表示部に表示された画像に対するユーザーの視線に応じて、画像を制御することのできる電子機器がある。特許文献１には、視線入力により入力された位置が選択可能な領域内であると判定されたときは、入力された位置を中心として画像を拡大させる技術が開示されている。

特開平７−２８３９９１号公報

しかしながら、特許文献１の技術では、表示対象である画像を所定倍率によって拡大することが記載されているのみで、ユーザーの所望する倍率に拡大／縮小することができない。

そこで、本発明は、ユーザーの視線に応じた位置において表示対象の拡大／縮小を行う電子機器であって、ユーザーが所望する倍率で表示対象の拡大／縮小を可能にする電子機器を提供することを目的とする。

本発明の１つの態様は、
表示手段に対するユーザーの視線位置を検出する視線検出手段と、
特定の操作手段と、
前記表示手段に表示された表示対象に対して注視があったことに対応する所定の条件が満たされた後に、前記特定の操作手段が操作されたことに応じて、
前記表示対象のうち前記視線検出手段によって検出された前記注視の位置に基づいた位置を中心として、三段階以上の表示倍率のうち前記特定の操作手段に対する操作量または操作回数に応じた表示倍率で拡大または縮小するように制御する制御手段と
を有することを特徴とする電子機器である。

本発明によれば、ユーザーの視線に応じた位置において表示対象の拡大／縮小を行う電子機器において、ユーザーが所望する倍率で画像の拡大／縮小ができる。

実施形態に係るデジタルカメラの外観図である。 実施形態に係るデジタルカメラのブロック図である。 実施形態に係る倍率変更処理を示すフローチャートである。 実施形態に係る倍率変更を説明する図である。

［実施形態１］
＜デジタルカメラ１００の外観図＞
以下、図面を参照して本発明の好適な実施形態を説明する。図１（ａ），１（ｂ）に、本発明を適用可能な装置の一例としてのデジタルカメラ１００の外観図を示す。図１（ａ）はデジタルカメラ１００の前面斜視図であり、図１（ｂ）はデジタルカメラ１００の背面斜視図である。

表示部２８は、デジタルカメラ１００の背面に設けられた表示部であり、画像や各種情報を表示する。タッチパネル７０ａは、表示部２８の表示面（タッチ操作面）に対するタッチ操作を検出することができる。ファインダー外表示部４３は、デジタルカメラ１００の上面に設けられた表示部であり、シャッター速度や絞りをはじめとするデジタルカメラ１００の様々な設定値を表示する。シャッターボタン６１は撮影指示を行うための操作部材である。モード切替スイッチ６０は、各種モードを切り替えるための操作部材である。端子カバー４０は、デジタルカメラ１００を外部機器に接続するコネクタ（不図示）を保護するカバーである。

メイン電子ダイヤル７１は回転操作部材であり、メイン電子ダイヤル７１を回すことで、シャッター速度や絞りなどの設定値の変更等が行える。電源スイッチ７２は、デジタルカメラ１００の電源のＯＮとＯＦＦを切り替える操作部材である。サブ電子ダイヤル７３は回転操作部材であり、サブ電子ダイヤル７３を回すことで、選択枠（カーソル）の移動や画像送りなどが行える。４方向キー７４は、上、下、左、右部分をそれぞれ押し込み可能に構成され、４方向キー７４の押した部分に応じた処理が可能である。ＳＥＴボタン７５は、押しボタンであり、主に選択項目の決定などに用いられる。

動画ボタン７６は、動画撮影（記録）の開始や停止の指示に用いられる。ＡＥロックボタン７７は押しボタンであり、撮影待機状態でＡＥロックボタン７７を押下することにより、露出状態を固定することができる。拡大ボタン７８は、撮影モードのライブビュー表示（ＬＶ表示）において拡大モードのＯＮとＯＦＦを切り替えるための操作ボタンである。拡大モードをＯＮとしてからメイン電子ダイヤル７１を操作することにより、ライブビュー画像（ＬＶ画像、ライブ画像）の拡大や縮小を行える。再生モードにおいては、拡大ボタン７８は、再生画像を拡大したり、その拡大率を増加させたりするための操作ボタンとして機能する。再生ボタン７９は、撮影モードと再生モードとを切り替えるための操作ボタンである。撮影モード中に再生ボタン７９を押下することで再生モードに遷移し、記録媒体２００（後述）に記録された画像のうち最新の画像を表示部２８に表示させることができる。メニューボタン８１はメニュー画面を表示させる指示操作を行うために用いられる押しボタンであり、メニューボタン８１が押されると各種の設定が可能なメニュー画面が表示部２８に表示される。ユーザーは、表示部２８に表示されたメニュー画面と、４方向キー７４やＳＥＴボタン７５とを用いて直感的に各種設定を行うことができる。

通信端子１０は、デジタルカメラ１００がレンズユニット１５０（後述；着脱可能）側と通信を行うための通信端子である。接眼部１６は、接眼ファインダー（覗き込み型のファインダー）の接眼部であり、ユーザーは、接眼部１６を介して内部のＥＶＦ２９（後述）に表示された映像を視認することができる（視認可能である）。接眼検知部５７は、接眼部１６にユーザー（撮影者）が接眼しているか否かを検知する接眼検知センサーである。蓋２０２は、記録媒体２００（後述）を格納するスロットの蓋である。グリップ部９０は、ユーザーがデジタルカメラ１００を構える際に右手で握りやすい形状とした保持部である。ユーザーが接眼部１６に接眼した姿勢で、かつ、グリップ部９０を右手の小指、薬指、中指で握ってデジタルカメラ１００を保持した状態で、右手の人差指で操作可能な位置にシャッターボタン６１とメイン電子ダイヤル７１が配置されている。また、同じ状態で、右手の親指で操作可能な位置に、サブ電子ダイヤル７３が配置されている。サムレスト部９１（親指待機位置）は、デジタルカメラ１００の背面側の、どの操作部材も操作しない状態でグリップ部９０を握った右手の親指を置きやすい箇所に設けられたグリップ部
材である。サムレスト部９１は、保持力（グリップ感）を高めるためのラバー部材などで構成される。

＜デジタルカメラ１００の構成ブロック図＞
図２は、デジタルカメラ１００の構成例を示すブロック図である。レンズユニット１５０は、交換可能な撮影レンズを搭載するレンズユニットである。レンズ１０３は通常、複数枚のレンズから構成されるが、図２では簡略して一枚のレンズのみで示している。通信端子６は、レンズユニット１５０がデジタルカメラ１００側と通信を行うための通信端子であり、通信端子１０は、デジタルカメラ１００がレンズユニット１５０側と通信を行うための通信端子である。レンズユニット１５０は、これら通信端子６，１０を介してシステム制御部５０と通信する。そして、レンズユニット１５０は、内部のレンズシステム制御回路４によって絞り駆動回路２を介して絞り１の制御を行う。また、レンズユニット１５０は、レンズシステム制御回路４によってＡＦ駆動回路３を介してレンズ１０３を変位させることで焦点を合わせる。

シャッター１０１は、システム制御部５０の制御で撮像部２２の露光時間を自由に制御できるフォーカルプレーンシャッターである。

撮像部２２は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子である。撮像部２２は、システム制御部５０にデフォーカス量情報を出力する撮像面位相差センサーを有していてもよい。

画像処理部２４は、Ａ／Ｄ変換器２３からのデータ、又は、メモリ制御部１５からのデータに対し所定の処理（画素補間、縮小といったリサイズ処理、色変換処理、等）を行う。また、画像処理部２４は、撮像した画像データを用いて所定の演算処理を行い、システム制御部５０は、画像処理部２４により得られた演算結果に基づいて露光制御や測距制御を行う。これにより，ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理、等が行われる。画像処理部２４は更に、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理を行う。

メモリ制御部１５は、Ａ／Ｄ変換器２３、画像処理部２４、メモリ３２間のデータの送受信を制御する。Ａ／Ｄ変換器２３からの出力データは、画像処理部２４及びメモリ制御部１５を介してメモリ３２に書き込まれる。あるいは、Ａ／Ｄ変換器２３からの出力データは、画像処理部２４を介さずにメモリ制御部１５を介してメモリ３２に書き込まれる。メモリ３２は、撮像部２２によって得られＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８やＥＶＦ２９に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。

また、メモリ３２は画像表示用のメモリ（ビデオメモリ）を兼ねている。メモリ３２に書き込まれた表示用の画像データはメモリ制御部１５を介して表示部２８やＥＶＦ２９により表示される。表示部２８とＥＶＦ２９のそれぞれは、ＬＣＤや有機ＥＬ等の表示器上で、メモリ制御部１５からの信号に応じた表示を行う。Ａ／Ｄ変換器２３によってＡ／Ｄ変換されメモリ３２に蓄積されたデータを表示部２８またはＥＶＦ２９に逐次転送して表示することで、ライブビュー表示（ＬＶ）が行える。以下、ライブビュー表示で表示される画像をライブビュー画像（ＬＶ画像）と称する。

視線検出部１６０は、接眼部１６におけるユーザーの視線を検出する。視線検出部１６０は、ダイクロイックミラー１６２、結像レンズ１６３、視線検知センサー１６４、視線
検出回路１６５、赤外発光ダイオード１６６により構成される。なお、視線の検出に応じて、システム制御部５０が所定の処理を実行することも可能であるため、視線検出部１６０は、操作部７０の一部であるともいえる。

赤外発光ダイオード１６６は、ファインダー画面内におけるユーザーの視線位置を検出するための発光素子であり、ユーザーの眼球（目）１６１に赤外光を照射する。赤外発光ダイオード１６６から発した赤外光は眼球（目）１６１で反射し、その赤外反射光はダイクロイックミラー１６２に到達する。ダイクロイックミラー１６２は、赤外光だけを反射して、可視光を透過させる。光路が変更された赤外反射光は、結像レンズ１６３を介して視線検知センサー１６４の撮像面に結像する。結像レンズ１６３は、視線検知光学系を構成する光学部材である。視線検知センサー１６４は、ＣＣＤ型イメージセンサ等の撮像デバイスから構成される。

視線検知センサー１６４は、入射された赤外反射光を電気信号に光電変換して視線検出回路１６５へ出力する。視線検出回路１６５は、視線検知センサー１６４の出力信号に基づき、ユーザーの眼球（目）１６１の動きからユーザーの視線位置を検出し、検出情報をシステム制御部５０および注視判定部１７０に出力する。

視線入力設定部１６７は、視線検出回路１６５（視線検出部１６０）による視線検出の有効または無効を設定する。または、視線入力設定部１６７は、システム制御部５０の視線入力による処理の有効または無効を設定する。例えば、このような有効／無効の設定は、メニュー設定にて、操作部７０に対する操作によってユーザーが任意に設定できる。

注視判定部１７０は、視線検出回路１６５から受け取った検出情報に基づいて、ユーザーの視線がある領域に固定されている期間が所定の閾値を越えた場合に、その領域を注視していると判定する。従って、当該領域は、注視が行われた位置である注視位置（注視領域）であるといえる。なお、「視線がある領域に固定されている」とは、例えば、所定の期間経過するまでの間、視線の動きの平均位置が当該領域内にあり、かつ、ばらつき（分散）が所定値よりも少ないことである。なお、所定の閾値は、システム制御部５０により任意に変更可能である。また、注視判定部１７０を独立したブロックとして設けず、システム制御部５０が視線検出回路１６５から受け取った検出情報に基づいて注視判定部１７０と同じ機能を実行するようにしてもよい。

ファインダー外表示部４３には、ファインダー外表示部駆動回路４４を介して、シャッター速度や絞りをはじめとするカメラの様々な設定値が表示される。

不揮発性メモリ５６は、電気的に消去・記録可能なメモリであり、例えば、ＦＬａｓｈ−ＲＯＭ等である。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記録される。ここでいうプログラムとは、本実施形態にて後述する各種フローチャートを実行するためのプログラムのことである。

システム制御部５０は、少なくとも１つのプロセッサーまたは回路からなる制御部であり、デジタルカメラ１００全体を制御する。システム制御部５０は、前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。システムメモリ５２は例えばＲＡＭであり、システム制御部５０は、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等をシステムメモリ５２に展開する。また、システム制御部５０は、メモリ３２、表示部２８等を制御することにより表示制御も行う。

システムタイマー５３は、各種制御に用いる時間や、内蔵された時計の時間を計測する
計時部である。

電源制御部８０は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出などを行う。また、電源制御部８０は、その検出結果及びシステム制御部５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。電源部３０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。

記録媒体Ｉ／Ｆ１８は、メモリカードやハードディスク等の記録媒体２００とのインターフェースである。記録媒体２００は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。

通信部５４は、無線または有線ケーブルによって接続された外部機器との間で、映像信号や音声信号の送受信を行う。通信部５４は無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）やインターネットとも接続可能である。また、通信部５４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＢｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙでも外部機器と通信可能である。通信部５４は撮像部２２で撮像した画像（ＬＶ画像を含む）や、記録媒体２００に記録された画像を送信可能であり、外部機器から画像データやその他の各種情報を受信することができる。

姿勢検知部５５は、重力方向に対するデジタルカメラ１００の姿勢を検知する。姿勢検知部５５で検知された姿勢に基づいて、撮像部２２で撮影された画像が、デジタルカメラ１００を横に構えて撮影された画像であるか、縦に構えて撮影された画像であるかを判別可能である。システム制御部５０は、姿勢検知部５５で検知された姿勢に応じた向き情報を撮像部２２で撮像された画像の画像ファイルに付加したり、画像を回転して記録したりすることが可能である。姿勢検知部５５としては、加速度センサーやジャイロセンサーなどを用いることができる。姿勢検知部５５である加速度センサーやジャイロセンサーを用いて、デジタルカメラ１００の動き（パン、チルト、持ち上げ、静止しているか否か等）を検知することも可能である。

接眼検知部５７は、接眼ファインダー１７（以後、単に「ファインダー」と記載する）の接眼部１６に対する目（物体）１６１の接近（接眼）および離脱（離眼）を検知する（接近検知）、接眼検知センサーである。システム制御部５０は、接眼検知部５７で検知された状態に応じて、表示部２８とＥＶＦ２９の表示（表示状態）／非表示（非表示状態）を切り替える。より具体的には、少なくとも撮影待機状態で、かつ、表示先の切替が自動切替である場合において、非接眼中は表示先を表示部２８として表示をオンとし、ＥＶＦ２９は非表示とする。また、接眼中は表示先をＥＶＦ２９として表示をオンとし、表示部２８は非表示とする。接眼検知部５７としては、例えば赤外線近接センサーを用いることができ、ＥＶＦ２９を内蔵するファインダー１７の接眼部１６への何らかの物体の接近を検知することができる。物体が接近した場合は、接眼検知部５７の投光部（図示せず）から投光した赤外線が物体で反射して赤外線近接センサーの受光部（図示せず）で受光される。受光された赤外線の量によって、物体が接眼部１６からどの距離まで近づいているか（接眼距離）も判別することができる。このように、接眼検知部５７は、接眼部１６への物体の近接距離を検知する接眼検知を行う。非接眼状態（非接近状態）から、接眼部１６に対して所定距離以内に近づく物体が検出された場合に、接眼されたと検出するものとする。接眼状態（接近状態）から、接近を検知していた物体が所定距離以上離れた場合に、離眼されたと検出するものとする。接眼を検出する閾値と、離眼を検出する閾値は例えばヒステリシスを設けるなどして異なっていてもよい。また、接眼を検出した後は、離眼を検出するまでは接眼状態であるものとする。離眼を検出した後は、接眼を検出するまでは
非接眼状態であるものとする。なお、赤外線近接センサーは一例であって、接眼検知部５７には、接眼とみなせる目や物体の接近を検知できるものであれば他のセンサーを採用してもよい。

システム制御部５０は、注視判定部１７０または接眼検知部５７を制御することによって、接眼部１６への以下の操作、あるいは状態を検出できる。
・接眼部１６へ向けられていなかった視線が新たに接眼部１６へ向けられたこと。すなわち、視線入力の開始。
・接眼部１６へ視線入力している状態であること。
・接眼部１６へ注視している状態であること。
・接眼部１６へ向けられていた視線を外したこと。すなわち、視線入力の終了。
・接眼部１６へ何も視線入力していない状態。

これらの操作・状態や、接眼部１６に視線が向いている位置（方向）は内部バスを通じてシステム制御部５０に通知され、システム制御部５０は、通知された情報に基づいて接眼部１６上にどのような操作（視線操作）が行われたかを判定する。

操作部７０は、ユーザーからの操作（ユーザー操作）を受け付ける入力部であり、システム制御部５０に各種の動作指示を入力するために使用される。図２に示すように、操作部７０は、モード切替スイッチ６０、シャッターボタン６１、電源スイッチ７２、タッチパネル７０ａ、等を含む。また、操作部７０は、その他の操作部材７０ｂとして、メイン電子ダイヤル７１、サブ電子ダイヤル７３、４方向キー７４、ＳＥＴボタン７５、動画ボタン７６、ＡＥロックボタン７７、拡大ボタン７８、再生ボタン７９、メニューボタン８１、等を含む。

モード切替スイッチ６０は、システム制御部５０の動作モードを静止画撮影モード、動画撮影モード、再生モード等のいずれかに切り替える。静止画撮影モードに含まれるモードとして、オート撮影モード、オートシーン判別モード、マニュアルモード、絞り優先モード（Ａｖモード）、シャッター速度優先モード（Ｔｖモード）、プログラムＡＥモード（Ｐモード）がある。また、撮影シーン別の撮影設定となる各種シーンモード、カスタムモード等がある。モード切替スイッチ６０により、ユーザーは、これらのモードのいずれかに直接切り替えることができる。あるいは、モード切替スイッチ６０で撮影モードの一覧画面に一旦切り替えた後に、表示された複数のモードのいずれかに、他の操作部材を用いて選択的に切り替えるようにしてもよい。同様に、動画撮影モードにも複数のモードが含まれていてもよい。

シャッターボタン６１は、第１シャッタースイッチ６２と第２シャッタースイッチ６４を備える。第１シャッタースイッチ６２は、シャッターボタン６１の操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり第１シャッタースイッチ信号ＳＷ１を発生する。システム制御部５０は、第１シャッタースイッチ信号ＳＷ１により、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の撮影準備動作を開始する。第２シャッタースイッチ６４は、シャッターボタン６１の操作完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから、撮像された画像を画像ファイルとして記録媒体２００に書き込むまでの、一連の撮影処理の動作を開始する。

タッチパネル７０ａと表示部２８とは一体的に構成することができる。例えば、タッチパネル７０ａは、光の透過率が表示部２８の表示を妨げないように構成され、表示部２８の表示面の上層に取り付けられる。そして、タッチパネル７０ａにおける入力座標と、表
示部２８の表示面上の表示座標とを対応付ける。これにより、あたかもユーザーが表示部２８上に表示された画面を直接的に操作可能であるかのようなＧＵＩ（グラフィカルユーザーインターフェース）を提供できる。システム制御部５０は、タッチパネル７０ａへの以下の操作、あるいは状態を検出できる。

・タッチパネル７０ａにタッチしていなかった指やペンが新たにタッチパネル７０ａにタッチしたこと、すなわちタッチの開始（以下、タッチダウン（Ｔｏｕｃｈ−Ｄｏｗｎ）と称する）。
・タッチパネル７０ａを指やペンでタッチしている状態（以下、タッチオン（Ｔｏｕｃｈ−Ｏｎ）と称する）。
・指やペンがタッチパネル７０ａをタッチしたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ−Ｍｏｖｅ）と称する）。
・タッチパネル７０ａへタッチしていた指やペンがタッチパネル７０ａから離れた（リリースされた）こと、すなわちタッチの終了（以下、タッチアップ（Ｔｏｕｃｈ−Ｕｐ）と称する）。
・タッチパネル７０ａに何もタッチしていない状態（以下、タッチオフ（Ｔｏｕｃｈ−Ｏｆｆ）と称する）。

タッチダウンが検出されると、同時にタッチオンも検出される。タッチダウンの後、タッチアップが検出されない限りは、通常はタッチオンが検出され続ける。タッチムーブが検出された場合も、同時にタッチオンが検出される。タッチオンが検出されていても、タッチ位置が移動していなければタッチムーブは検出されない。タッチしていた全ての指やペンがタッチアップしたことが検出された後は、タッチオフとなる。

これらの操作・状態や、タッチパネル７０ａ上に指やペンがタッチしている位置座標は内部バスを通じてシステム制御部５０に通知される。そして、システム制御部５０は通知された情報に基づいてタッチパネル７０ａ上にどのような操作（タッチ操作）が行われたかを判定する。タッチムーブについてはタッチパネル７０ａ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル７０ａ上の垂直成分・水平成分毎に判定できる。所定距離以上をタッチムーブしたことが検出された場合はスライド操作が行われたと判定するものとする。タッチパネル７０ａ上に指をタッチしたままある程度の距離だけ素早く動かして、そのまま離すといった操作をフリックと呼ぶ。フリックは、言い換えればタッチパネル７０ａ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判定できる（スライド操作に続いてフリックがあったものと判定できる）。更に、複数箇所（例えば２点）を共にタッチして（マルチタッチして）、互いのタッチ位置を近づけるタッチ操作をピンチイン、互いのタッチ位置を遠ざけるタッチ操作をピンチアウトと称する。ピンチアウトとピンチインを総称してピンチ操作（あるいは単にピンチ）と称する。タッチパネル７０ａは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサー方式等、様々な方式のタッチパネルのうちいずれの方式のものであってもよい。タッチパネルに対する接触があったことでタッチがあったと検出する方式や、タッチパネルに対する指やペンの接近があったことでタッチがあったと検出する方式があるが、いずれの方式でもよい。

＜拡大／縮小の処理＞
以下、本実施形態に係る静止画（表示対象）の拡大／縮小（変倍）の処理について、図３が示すフローチャートを用いて説明する。図３のフローチャートにおける各処理は、システム制御部５０が、不揮発性メモリ５６に格納されたプログラムをシステムメモリ５２に展開して実行し、各機能ブロックを制御することにより実現される。デジタルカメラ１００が起動され、システム制御部５０が、接眼検知部５７を制御して、接眼部１６にユー
ザーの眼球１６１が接眼したことを検知すると、本フローチャートの処理が開始される。

Ｓ３０１では、システム制御部５０は、ＥＶＦ２９において静止画が再生されているか否かを判定する。なお、図４（ａ）に示すように、静止画が再生されている状態であれば、撮影条件などの情報が同時にＥＶＦ２９に表示されていてもよい。静止画が再生されている場合はＳ３０２に遷移して、そうでない場合（静止画が再生されずＬＶやメニュー画面などが表示されている場合）は、Ｓ３０７に遷移する。なお、本実施形態では、システム制御部５０は、静止画が再生されているか否かを判定しているが、静止画に限らず、例えば、動画、文書、図柄、図表などの任意の表示対象が表示（再生）されているか否かを判定してもよい。

Ｓ３０２では、システム制御部５０は、注視判定部１７０（視線検出部１６０）を制御して、注視があったことに対応する所定の条件を満たしたか否かによって、ＥＶＦ２９に再生された静止画に対する注視がされたか否かを判定する。注視がされた場合はＳ３０３に遷移して、そうでない場合にはＳ３０１に遷移する。

なお、上述のように、注視とは、所定期間以上にわたって、視線位置（ユーザーが見ていた位置として算出した位置）が固定されていることである。例えば、ある時点から所定期間が経過するまで、視線位置が、ある位置を中心とする所定範囲を出なかった場合に注視があったものと判定される。あるいは、当該ある時点から所定期間が経過するまで視線位置のバラつきが閾値以下であった場合に注視があったものと判定される。

なお、Ｓ３０２においてシステム制御部５０が注視されたと判定する場合にＳ３０３に遷移することに限らず、これ以外の場合に、Ｓ３０３に遷移してもよい。例えば、Ｓ３０２では、システム制御部５０は、注視判定部１７０を制御して、注視が継続していた期間である注視期間が所定の閾値を超えているか否かを判定してもよい。そして、注視期間が所定の閾値を超えている場合には、Ｓ３０３に遷移し、そうでない場合にはＳ３０１に遷移するとよい。より具体的には、例えば、視線位置が２秒間固定されていることによって、システム制御部５０が注視があると判定しても、当該注視が５秒継続するまでは、処理工程はＳ３０３に遷移しない。

Ｓ３０３では、システム制御部５０は、非倍率変更モードから、サブ電子ダイヤル７３を回転する操作などによって静止画の倍率（表示倍率）を変更（変倍）することのできる動作モードである倍率変更モードに設定する。つまり、本実施形態では、１度でも注視があったと判定されると、その後に視線の位置が変化しても（注視が解除されても）、サブ電子ダイヤル７３を回転する操作などによって静止画の倍率を変更できる状態に遷移する。なお、倍率変更モードにおいて、静止画の倍率の変更が可能であるのは、サブ電子ダイヤル７３を回転する操作には限られない。例えば、倍率変更モードでは、４方向キー７４などの押しボタンへの押下やタッチパネル７０ａに対するタッチ、ＥＶＦ２９に表示される所定のアイコンへのユーザーの視線入力などの操作に応じて、静止画の倍率の変更が可能であってもよい。

なお、Ｓ３０３では、システム制御部５０は、図４（ｂ）に示すように、静止画において視線（注視）がある位置（箇所）を示す枠である視線枠を表示し、倍率変更モードであることを示す倍率変更モードマークなどのアイコンをＥＶＦ２９に表示する。例えば、静止画における視線位置に対して、点線によって視線枠である拡大枠４０１が表示（重畳）され、倍率変更モードであることを示すためのアイコンとして虫眼鏡マーク４０２が表示される。視線枠の大きさは、視線位置を中心としていればある程度大きく表示してもよいし、視線位置を示す表示であれば、視線枠ではなく、視線位置の中心点を示す表示であってもよい。アイコンは、虫眼鏡マーク４０２に限らず、矢印マークなど任意の表示でよく
、また、アイコン自体は表示されなくてもよい。

Ｓ３０４では、システム制御部５０は、サブ電子ダイヤル７３などの操作部材に対して、静止画の倍率（表示倍率）を変更するための操作がされたか否かを判定する。当該操作がされた場合は、Ｓ３０５に遷移して、そうでない場合にはＳ３０６に遷移する。

なお、サブ電子ダイヤル７３に対して、倍率変更モード以外の動作モードである非倍率変更モードでは、静止画の倍率を変更する機能以外の他の機能が割り当てられていてもよい。また、倍率変更モードとは異なる静止画再生モード（静止画再生中）であれば、サブ電子ダイヤル７３に対して、次の画像に変更したり、１０枚先の画像に変更する変更機能が割り当てられていてもよい。変更機能とは、すなわち、ＥＶＦ２９に表示された表示対象を別の表示対象に切り替える機能であり得る。

Ｓ３０５では、システム制御部５０は、操作部材の操作された方向や操作量（操作回数）に応じて、静止画（表示対象）の拡大／縮小（変倍）を行う。例えば、デジタルカメラ１００を背面から見て、サブ電子ダイヤル７３が右方向に回されたら、システム制御部５０は、注視の位置（視線枠）を中心に静止画を拡大する。デジタルカメラ１００を背面から見て、サブ電子ダイヤル７３が左方向に回されたら、システム制御部５０は、注視の位置（視線枠）を中心に静止画の縮小を行う。なお、必ずしも、注視の位置を中心に拡大／縮小される必要はなく、例えば、視線枠の四隅のいずれかを中心に拡大／縮小されてもよい。

ここで、図４（ｃ）は、所定倍率だけ拡大されたときの静止画の表示例を示している。図４（ｃ）は、図４（ｂ）における視線枠である拡大枠４０１を中心に、静止画が拡大して表示されている。なお、静止画は、拡大／縮小の機能が割り当てられた操作部材に対する操作量または操作回数によって、拡大／縮小がされる。例えば、クリック感があるダイヤルであればクリックの回数、クリック感がなければ回された移動量、押しボタンであれば押された回数、タッチパネルであれば動かした移動量などに応じた拡大倍率の割合で、静止画は拡大される。また、ＥＶＦ２９に表示されている所定のアイコンへの注視期間の長さを操作量と捉えて、拡大倍率の割合が決定されてもよい。例えば、システム制御部５０は、静止画を、ダイヤルの右回しの１クリック毎に一段階拡大し（例えば１．２倍に拡大）、左回しの１クリック毎に一段階縮小する（例えば５／６倍に縮小する）。なお、例えば、拡大、縮小は、それぞれ三段階以上実施することができ、ダイヤルを一度に多く（多クリック分）回せば、多段階拡大され、２倍、５倍、１０倍といった倍率まで拡大することができる。なお、拡大倍率の割合は、メニュー画面が表示されている状態において、ユーザーが変更できてもよい。

Ｓ３０６では、システム制御部５０は、倍率変更モードが解除されたか否かを判定する。倍率変更モードが解除されていれば、Ｓ３０１に遷移して、そうでない場合にはＳ３０４に遷移する。例えば、倍率変更モードマークなど所定のアイコンに対する注視時間が所定の値を超えた場合や、所定期間において何も操作なく放置される場合に、システム制御部５０が倍率変更モードを解除する。つまり、システム制御部５０は、例えば、サブ電子ダイヤル７３などの操作部材に対する操作によって、静止画の拡大／縮小（変倍）を実行しないように制御する。

Ｓ３０７では、システム制御部５０は、接眼検知部５７を制御して、ユーザーの接眼が継続しているか否かを判定する。接眼が継続していればＳ３０１に遷移して、そうでない場合には、本フローチャートにおける処理が全て終了する。

なお、Ｓ３０２にて注視がされた場合に、サブ電子ダイヤル７３の機能が倍率の変更機
能に変更されるが、機能が変更されるのは、注視された場合には限らない。例えば、システム制御部５０は、Ｓ３０３において倍率変更モードマークなどの所定のアイコンを表示して、当該アイコン上に視線が検出された場合に、倍率の変更機能に変更してもよい。また、システム制御部５０は、拡大ボタン７８などの所定のボタンが押下された場合や、タッチパネル７０ａにタッチが検出された場合に、倍率の変更機能に変更してもよい。なお、サブ電子ダイヤル７３の機能が変更される条件が注視でない場合には、例えば、注視されていない状態で、サブ電子ダイヤル７３が回されたら、システム制御部５０は、静止画の中心を中心点にして倍率を変更するようにしてもよい。

また、Ｓ３０３にて視線枠が表示された後における視線枠の動作の方法として、いくつか考えられる。一つ目は、Ｓ３０３に遷移すると視線枠が固定されて、倍率変更モードが解除されるまで同じ位置を保持し続ける方法である。この方法は、視線枠の位置を一度決めてしまえば、当該位置を中心として容易に倍率の変更ができるが、当該位置が誤っている場合には、その視線枠の位置の移動ができない。二つ目は、一度、視線枠を表示させたら、視線枠をユーザーの視線に追従させる方法である。追従の方法についても、例えば、注視した時点で枠を移動させるか、注視に関わらず常に視線に追従させる方法がある。その中でも、サブ電子ダイヤル７３が一度操作されるまで追従させ、その後は、倍率変更モードが解除されるまでは同じ位置を保持し続ける方法や、サブ電子ダイヤル７３の操作に関わらず常に追従させ続ける方法がある。上記のパターンは、状況に応じて使い分けられてもよいし、ユーザーが選択できるようにしておいてもよい。

なお、Ｓ３０５において、静止画が元の大きさ（等倍；原寸大）の状態から縮小操作がされた場合は、システム制御部５０は、図４（ｄ）に示すように、当該静止画を含む複数の画像をＥＶＦ２９に一覧表示してもよい。ここで、例えば、サブ電子ダイヤル７３が回される量（操作量）に応じて、システム制御部５０は、表示する画像数を多くしていってもよい。また、倍率変更モードマークなどの所定のアイコンに対するユーザーの注視期間が所定の期間を超え、かつ、サブ電子ダイヤル７３が縮小方向に回されると、システム制御部５０が、静止画を元の大きさ（等倍）に即座に戻すようにしてもよい。システム制御部５０は、拡大ボタン７８などの所定のボタンが押下されたときや、タッチパネル７０ａへのタッチが検出されたときに、静止画を元の大きさに戻してもよい。

以上のように、実施形態１に係るデジタルカメラは、ユーザーが所望する倍率で画像の拡大／縮小を可能にする。さらに、接眼ファインダーの接眼部に対する接眼を維持した状態で拡大／縮小ができるため、ユーザーは、画像の確認を快適に行うことができる。

なお、上述の実施形態では、拡大縮小の対象として再生表示された静止画の例を説明したが、これに限るものではない。ＬＶ表示モード（撮影モードにおけるＬＶ表示中）において倍率変更モードに変更された場合、サブ電子ダイヤル７３の操作に応じて、３段階以上の表示倍率の中からＬＶ画像の拡大縮小（光学ズームではなく、電子ズームによる処理）を行えるようにしてもよい。非倍率変更モードから倍率変更モードへの切替は、Ｓ３０２、Ｓ３０３で前述した処理と同様に行う。この場合、ＬＶ表示モードでかつ非倍率変更モードあれば、サブ電子ダイヤル７３に対して、シャッタースピード、絞り、露出補正、ＩＳＯ感度のうちいずれかの設定値の変更などの撮影設定（露出に関する設定や画質に関する設定）の変更機能が割り当てられてもよい。このようにすることで、ユーザーが接眼部１６に接眼したまま、視線とサブ電子ダイヤル７３を用いてＬＶ画像の所望の位置を素早く直感的に拡大することができ、そのままシャッターボタン１を押下できる。すなわち、ＬＶ画像の細部を素早く確認し、シャッターチャンスを逃さずに撮影することができる。

なお、本実施形態に係る電子機器はデジタルカメラ１００には限られない。例えば、電
子機器は、ＰＣモニターに対する視線位置を検出する視線検知手段を有するＰＣであってもよい。このようなＰＣであれば、例えば、ＰＣは、モニタに表示された表示対象に対する注視がある状態で、マウスのホイールが回転されると、注視点を中心にして回転量に応じて拡大／縮小するとよい。なお、視線検出手段は、ＰＣが内蔵していてもよいし、ＰＣと外部から接続されるものであってもよい（この場合はＰＣは外部機器である視線検出デバイスから通知された各種コマンドに基づいて上述と同様の処理を行う）。拡大縮小の対象は撮像された画像や再生された静止画に限るものではなく、ＰＣモニターに表示される表示対象であれば適用可能である。すなわち、拡大縮小の表示対象を、動画、アニメーション、図、表、文書、ＷＥＢサイトなどにした場合にも本発明を適用可能である。

また、視線検出部１６０（視線検出手段）の構成は図２で説明した構成に限らず、発光部である赤外発光ダイオード１６６を有さない構成であってもよい。この場合には、視線検出部１６０は、撮像センサーである視線検知センサー１６４によって撮像された目の白目、黒目の位置関係や、瞳に入射した光が反射された角膜反射像などの位置関係から、視線の方向を検出する。

なお、システム制御部５０が行うものとして説明した上述の各種制御は１つのハードウェアが行ってもよいし、複数のハードウェア（例えば、複数のプロセッサーや回路）が処理を分担することで、装置全体の制御を行ってもよい。

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。

また、上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されず、表示手段に表示されている表示対象に対するユーザーの視線を検出することのできる電子機器であれば適用可能である。すなわち、本発明はパーソナルコンピュータやＰＤＡ、携帯電話端末や携帯型の画像ビューワ、ディスプレイを備えるプリンタ装置、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなどに適用可能である。

また、撮像装置本体に限らず、有線または無線通信を介して撮像装置（ネットワークカメラを含む）と通信し、撮像装置を遠隔で制御する制御装置にも本発明を適用可能である。撮像装置を遠隔で制御する装置としては、例えば、スマートフォンやタブレットＰＣ、デスクトップＰＣなどの装置がある。制御装置側で行われた操作や制御装置側で行われた処理に基づいて、制御装置側から撮像装置に各種動作や設定を行わせるコマンドを通知することにより、撮像装置を遠隔から制御可能である。また、撮像装置で撮影したライブビュー画像を有線または無線通信を介して受信して制御装置側で表示できるようにしてもよい。

（他の実施形態）
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。

１００：デジタルカメラ、１６０：視線検出部、５０：システム制御部
７３：サブ電子ダイヤル

Claims (21)

1. 表示手段に対するユーザーの視線位置を検出する視線検出手段と、
   特定の操作手段と、
   前記表示手段に表示された表示対象に対して注視があったことに対応する所定の条件が満たされた後に、前記特定の操作手段が操作されたことに応じて、
   前記表示対象のうち前記視線検出手段によって検出された前記注視の位置に基づいた位置を中心として、三段階以上の表示倍率のうち前記特定の操作手段に対する操作量または操作回数に応じた表示倍率で拡大または縮小するように制御する制御手段と
   を有することを特徴とする電子機器。
2. 前記制御手段は、前記所定の条件が満たされる前には、前記特定の操作手段が操作されても前記表示対象の表示倍率を変更しないように制御する
   ことを特徴とする請求項１に記載の電子機器。
3. 表示手段に対するユーザーの視線位置を検出する視線検出手段と、
   特定の操作手段と、
   第１の動作モードの場合には、前記特定の操作手段に対する操作に応じて前記表示手段に表示された表示対象の拡大または縮小とは異なる特定の機能を実行するように制御し、
   前記第１の動作モードの場合に所定の条件が満たされると第２の動作モードに切り替え、
   前記第２の動作モードの場合には、前記特定の操作手段が操作されたことに応じて、前記表示対象のうち前記視線検出手段によって検出された前記視線位置に基づいた位置を中心として、拡大または縮小するように制御する制御手段と
   を有することを特徴とする電子機器。
4. 前記制御手段は、
   前記第２の動作モードの場合に前記特定の操作手段が操作されたことに応じて、前記表示対象のうち前記視線検出手段によって検出された視線の位置に基づいた位置を中心として、三段階以上の表示倍率のうち前記特定の操作手段に対する操作量または操作回数に応じた表示倍率で拡大または縮小するように制御する
   ことを特徴とする請求項３に記載の電子機器。
5. 前記所定の条件は、前記表示手段に表示された表示対象に対して注視があったことに対応する条件である
   ことを特徴とする請求項３または４に記載の電子機器。
6. 前記制御手段は、前記第１の動作モードの場合に前記特定の操作手段に対する操作があったことに応じて、前記特定の機能として、前記表示手段に表示された表示対象を別の表示対象に切り替える機能を実行するように制御する
   ことを特徴とする請求項３乃至５のいずれか１項に記載の電子機器。
7. 前記制御手段は、
   前記第１の動作モードの場合に前記特定の操作手段に対する操作があったことに応じて、前記特定の機能として、撮像手段での撮影に関する撮影設定の変更を実行するように制御し、
   前記第２の動作モードの場合に前記特定の操作手段に対する操作があったことに応じて、前記表示対象として表示されている前記撮像手段で撮像されたライブ画像のうち前記視線検出手段によって検出された前記視線位置に基づいた位置を中心として、拡大または縮小するように制御する
   ことを特徴とする請求項３乃至５のいずれか１項に記載の電子機器。
8. 前記撮影に関する撮影設定は、シャッタースピード、絞り、露出補正、ＩＳＯ感度の少なくとも１つの設定である
   ことを特徴とする請求項７に記載の電子機器。
9. 前記表示手段は、接眼ファインダーの接眼部を介して視認可能であり、
   前記特定の操作手段は、ユーザーが前記接眼ファインダーに接眼した姿勢で、前記電子機器を保持する手の指で操作可能な位置に配置されている
   ことを特徴とする請求項７または８に記載の電子機器。
10. 前記特定の操作手段は、ダイヤルであり、
    前記特定の操作手段に対する操作とは、前記ダイヤルの回転である
    ことを特徴とする請求項１乃至９のいずれか１項に記載の電子機器。
11. 前記特定の操作手段は、押しボタンであり、
    前記特定の操作手段に対する操作とは、前記押しボタンの押下である
    ことを特徴とする請求項１乃至９のいずれか１項に記載の電子機器。
12. 前記特定の操作手段は、タッチパネルであり、
    前記特定の操作手段に対する操作とは、前記タッチパネルに対するタッチである
    ことを特徴とする請求項１乃至９のいずれか１項に記載の電子機器。
13. 前記所定の条件とは、注視期間が所定の閾値を超えることである
    ことを特徴とする請求項１乃至１２のいずれか１項に記載の電子機器。
14. 前記制御手段は、前記所定の条件が満たされた場合、視線の位置を示す表示を前記表示手段に表示するように制御する
    ことを特徴とする請求項１乃至１３のいずれか１項に記載の電子機器。
15. 前記制御手段は、前記所定の条件が満たされた場合、前記特定の操作手段に対する操作によって拡大または縮小が可能であることを示すアイコンを、前記表示手段に表示するように制御する
    ことを特徴とする請求項１乃至１４のいずれか１項に記載の電子機器。
16. 前記制御手段は、前記アイコンに対する注視期間が第２の閾値を超え、かつ、前記特定の操作手段に対して操作された場合に、表示倍率を等倍に変更する
    ことを特徴とする請求項１５に記載の電子機器。
17. 前記制御手段は、前記アイコンに対する注視期間が第３の閾値を超えた場合には、前記特定の操作手段に対する操作によって拡大または縮小を実行しないように制御する、
    ことを特徴とする請求項１５または１６に記載の電子機器。
18. 表示手段に対するユーザーの視線位置を検出する視線検出手段と、特定の操作手段と、を有する電子機器の制御方法であって、
    前記表示手段に表示された表示対象に対して注視があったことに対応する所定の条件が満たされた後に、前記特定の操作手段が操作されたことに応じて、
    前記表示対象のうち前記視線検出手段によって検出された前記注視の位置に基づいた位置を中心として、三段階以上の表示倍率のうち前記特定の操作手段に対する操作量または操作回数に応じた表示倍率で拡大または縮小するように制御する制御工程を有する
    ことを特徴とする電子機器の制御方法。
19. 表示手段に対するユーザーの視線位置を検出する視線検出手段と、特定の操作手段と、を有する電子機器の制御方法であって、
    第１の動作モードの場合には、前記特定の操作手段に対する操作に応じて前記表示手段に表示された表示対象の拡大または縮小とは異なる特定の機能を実行するように制御し、
    前記第１の動作モードの場合に所定の条件が満たされると第２の動作モードに切り替え、
    前記第２の動作モードの場合には、前記特定の操作手段が操作されたことに応じて、前記表示対象のうち前記視線検出手段によって検出された前記視線位置に基づいた位置を中心として、拡大または縮小するように制御する制御工程を有する
    ことを特徴とする電子機器の制御方法。
20. コンピュータを、請求項１乃至１７のいずれか１項に記載された電子機器の各手段として機能させるためのプログラム。
21. コンピュータを、請求項１乃至１７のいずれか１項に記載された電子機器の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。

Images