JP5093784B2 - 画像表示装置、画像表方法、およびそのプログラム - Google Patents

Description

画像表示装置、画像表方法、およびそのプログラムに関し、特に、記憶部に記憶されている画像群の中からユーザが所望とする画像だけを表示することができる画像表示装置、画像表示方法、およびそのプログラムに関する。

オンラインアルバムやフォトアルバムサービスや画像管理ソフトウェアといった、利用者が撮影したデジカメ画像や動画の登録及び共有サービスや個人利用があり、共有サービスにおいてはインターネット等やＬＡＮ等の通信手段を介して多くの利用者がさまざまな機会に登録（アップロード）した画像や動画を、閲覧権限のある利用者が閲覧するケースがあり、利用者が登録された画像の中から所望の画像を簡単に表示する作業は非常に手間となっている。

またデジタルスチルカメラの操作画面は液晶モニター等やタッチパネル機能等が採用され、マウスを使用せず利用者の指操作により操作画面に撮影された後に記憶部に記憶された画像を操作画面に表示する事も可能となっている。

先行文献１では、画像処理装置の記憶部に登録された被写体を含む画像の中から、画像解析等の特定手段と、予め記憶させた対象人物情報といった分類情報に基づいて、画像を父、母、姉といった対象人物毎や日時や撮影場所に分類し分類結果を表示する技術が開示されている。

先行文献２では、デジタル画像データ中から人物の顔を検出して、検出された人物の顔の領域を表示し、「次へ」ボタンが表示されたら、同一画像中の他の人物の顔を検出して、検出できれば検出された人物の顔の領域を表示し、検出できなければ、次のデジタル画像データの表示を行う技術が開示されている。

特開２００７−２８７０１４号 特開２００５−１６５５６２号

しかしながら、上述したような背景技術においては、記憶部に記憶された画像（デジタル画像データ）を結局、順番に表示しているだけであり、ユーザが所望とする画像を表示するのに時間を要してしまうという問題がある。

また、サムネイル画像のように画像一覧を表示してユーザに表示させたい画像を選択させることも考えられるが、多くの画像の中から所望とする画像を探すのは大変であり、また、デジタルスチルカメラのような撮像装置の小さな表示領域ではすべての画像一覧を表示させることができず、使い勝手が悪いという問題がある。

また、表示部に画像を表示して、シリアル番号順に順次表示するシーケンスの場合、記憶部に記憶されている表示させたくない画像まで表示されてしまうという問題がある。この場合、他の人と一緒に画像を見ている場合に、他の人に見せたくない画像まで見られてしまい、セキュリティ上問題がある。

そこで、本願発明は、記憶部に記憶されたすべての画像データの中で、複雑な設定操作を行わずに、ユーザが所望とする複数の画像データだけを順次表示することが可能な画像表示装置、画像表示方法、プログラムを提供することを第１の目的とする。

そして、本願発明は、記憶部に記憶されたすべての画像データの中で、複雑な設定操作を行わずに、ユーザが所望とする複数の画像データだけで一覧表示することが可能な画像表示装置、画像表示方法、プログラムを提供することを第２の目的とする。

本願発明は、画像を表示する表示部を備える画像表示装置であって、人物の顔の領域を含む画像と、当該画像に含まれる人物の顔を識別する識別情報とを記憶する記憶手段と、画像表示指示を受け付けた場合に、前記記憶手段に記憶されている画像を表示部に表示する表示制御手段と、前記表示している画像に含まれる複数人の顔の領域を選択させる選択受付手段と、前記表示制御手段が前記記憶手段に記憶されている画像を表示部に表示した後に、前記表示制御手段が表示している画像の表示切替指示を受け付ける切替指示受付手段と、前記表示している画像に含まれる複数人の顔の領域が前記選択受付手段により選択されているか否か判断する判断手段と、前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により複数人の顔の領域を選択されていると判断されている場合に、前記記憶手段に記憶されている複数の画像のうち、前記選択されている複数人の顔を識別する識別情報と同じ識別情報の複数人の顔の領域を含む画像を特定する特定手段と、前記表示制御手段を用いて、前記表示部に表示されている画像を、前記特定手段により特定された画像に切り替える切替手段と、を備えることを特徴とする。

また、前記切替え手段が切替えたあとに、前記表示制御手段は、前記特定された画像に切り替えて前記表示部に表示するとともに、前記切り替えた画像に含まれている前記選択された複数人を識別できる枠を重ねて表示することを特徴とする。
また、前記表示制御手段が前記記憶手段に記憶されている画像を表示部に表示した後に、前記表示制御手段が表示部に画像を一覧で表示するべく一覧表示指示を受け付ける一覧表示指示受付手段と、前記表示制御手段を用いて、前記表示部に画像の一覧を表示する一覧表示手段と、をさらに備え、前記一覧表示指示受付手段が前記一覧表示指示を受け付け、かつ、前記判断手段により人物の顔の領域が選択されていると判断されている場合に、前記特定手段は、前記記憶手段に記憶されている複数の画像のうち、前記選択されている人物の顔を識別する識別情報と同じ識別情報の人物の顔の領域を含む画像を特定し、前記一覧表示手段は、前記表示制御手段を用いて、前記表示部に、前記特定手段により特定された複数の画像の一覧を表示することを特徴とする。

また、前記記憶手段により記憶された前記画像を解析して、人物の顔の領域の画像特徴量を取得する特徴量取得手段と、前記特徴量取得手段で取得された画像特徴量を用いて、類似する人物の顔があるか判定することにより、類似する人物の顔と同じ識別情報を、前記画像特徴量を取得した画像に付与する自動付与手段と、をさらに備えることを特徴とする。

また、前記記憶手段に記憶されている画像に含まれる人物の顔を指定し、かつ、該人物の顔の識別情報とする文字列をユーザ操作に応じて入力することにより、該入力された文字列を前記識別情報として前記画像に付与する手動付与手段をさらに備えることを特徴とする。
また、前記画像表示装置は、撮影対象を撮像して画像を生成する撮像部を備える撮像装置であることを特徴とする。

また、前記画像表示装置は、前記画像を記憶する画像管理サーバと、該画像管理サーバとネットワークを介して通信可能な情報端末装置とで構成されていることを特徴とする。

また、前記情報端末装置から前記画像表示装置に、前記情報端末装置においてクリックされた画像上の位置が送信され、前記画像表示装置では、クリックされた画像上の位置から、人物の顔の領域が選択されているかを判断することを特徴とする。

また、前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により人物の顔の領域が選択されていないと判断されている場合には、前記切替手段は、前記表示制御手段を用いて、前記表示部に表示されている画像を、所定の順序で、次の画像に切り替え、前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により人物の顔の領域が選択されていると判断されている場合には、前記切替手段は、前記表示制御手段を用いて、前記表示部に表示されている画像を、前記特定手段により特定された画像であって前記所定の順序で、次の画像に切り替えることを特徴とする。

本願の第１の発明によれば、記憶部に記憶されたすべての画像データの中で、ユーザが所望とする複数の画像データだけを順次表示することが複雑な設定操作を行わずに実現できる。

また、本願の第２の発明によれば、記憶部に記憶されたすべての画像データの中で、ユーザが所望とする複数の画像データだけで一覧表示することが複雑な設定操作を行わずに実現できる。

画像表示装置の一例を示すシステム構成図 画像管理サーバ、情報処理端末のハードウェア構成を示すブロック図 本願発明に係る画像の一例を示す図 本願発明に係る処理の一例を示すフローチャート 本願発明に係る処理の一例を示すフローチャート 本願発明に係る処理の一例を示すフローチャート 本願発明に係る情報処理端末の表示画面の一例を示す図 本願発明に係る情報処理端末の表示画面の一例を示す図 本願発明に係る情報処理端末の表示画面の一例を示す図 本願発明に係る各情報テーブルの項目の一例を示す図 本願発明に係る各情報テーブルの項目の一例を示す図 画像表示装置の一例である撮像装置のハードウェア構成を示すブロック図 本発明に係る撮像装置で生成される画像のデータ構成の一例を示す図 本発明に係る撮像装置の操作画面のうち、画像の表示、認識された顔の名前の登録、および表示状態で順送りされたときの画面例を示す図 本発明に係る撮像装置の操作画面のうち、異なる顔が選択された状態で順送りされたときの画面例を示す図 本発明に係る撮像装置の操作画面のうち、複数の顔が選択された状態で順送りされたときの画面例を示す図 本実施の形態で説明される撮像装置の記憶部に記憶されている複数の画像を示す図 本発明に係る撮像装置の操作画面のうち、任意の顔が選択された状態で一覧表示指示されたときの画面例を示す図 本発明に係る処理の一例を示すフローチャート 本発明に係る画像切替処理の一例を示すフローチャート 本発明に係る一覧表示処理の一例を示すフローチャート

本発明の技術的特徴を簡単に説明すると、画像のプレビューを表示している状態において、人物の顔の領域が選択されて画像の切り替えを行うことにより、その人物が映っている次の画像に切り替えることである。この技術的特徴によれば、記憶されているすべての画像データを順送りにプレビューせずに、ユーザが所望とする画像データだけを順次表示することができ、セキュリティ面および使い勝手が格段に向上するものである。

また、本発明の第２の技術的特徴を簡単に説明すると、画像のプレビューを表示している状態において、人物の顔の領域が選択されて画像の一覧表示を行うことにより、その人物が映っている複数の画像だけで一覧表示を行うことである。この技術的特徴によれば、記憶されているすべての画像データの一覧表示を行わずに、ユーザが所望とする複数の画像データだけで一覧表示することができ、セキュリティ面および使い勝手が格段に向上するものである。
以下、図面を参照して、本発明の技術的特徴を、第１および第２の実施形態を用いて、詳細に説明する。
［第１の実施の形態］

図１は、本発明の情報処理端末１３０、１４０、１５０（クライアントＰＣ）、画像管理サーバ１１０を含む画像表示装置の構成の一例を示すシステム構成図である。なお、第１の実施の形態では、本発明の画像表示装置は、情報処理端末と画像管理サーバを含むシステムとして構成しているが、これに限られるものではなく、１つの筺体のコンピュータで実現することも可能であるし、また、第２の実施の形態で説明するように、表示部を備える撮像装置で実現してもよい。

以下、第１の実施の形態について説明する。図１に示すように、本実施形態の画像表示装置は、１又は複数の情報処理端末１３０、１４０、１５０（例えば、ユーザＡ、ユーザＢ、ユーザＣ）、画像管理サーバ１１０がローカルエリアネットワーク（ＬＡＮ）１００を介して接続され、各装置が情報の送受信を行う通信可能な構成となっている。

なお、画像管理サーバ１１０には、情報処理端末１３０の表示画面にてユーザが入力後、画像管理サーバ１１０にＨＴＴＰ送信されたログイン情報（ユーザ識別情報やユーザ専用パスワード）とユーザ認証を行う登録ユーザ情報テーブル（図１０）が記憶されており、ユーザ認証が可能な構成となっている。本実施形態では、画像管理サーバに登録ユーザ情報テーブル（図１０）を記憶するように構成したが、不図示の認証サーバに認証テーブルを記憶し、認証サーバで認証を行わせるように構成することも可能である。つまり、利用するユーザを特定及び管理できればよく、認証処理はどの情報処理装置で行ってもよい。また情報処理端末がＩＣカードリーダの読み取り部を備える構成の場合、表示画面でユーザが入力した作業をＩＣカード内に予めに記憶されたログイン情報にて置き換える事も可能となる。
以下、図２を用いて、図１に示したクライアントＰＣ１３０，１４０、管理サーバ１６０に適用可能な情報処理装置のハードウエア構成について説明する。
図２は、図１に示したクライアントＰＣ、管理サーバ１６０に適用可能な情報処理装置のハードウエア構成を示すブロック図である。

図２において、１２０１はＣＰＵで、システムバス１２０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ１２０２あるいは外部メモリ１２１１には、ＣＰＵ１２０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、各サーバ或いは各ＰＣの実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。

１２０３はＲＡＭで、ＣＰＵ１２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ１２０１は、処理の実行に際して必要なプログラム等をＲＯＭ１２０２あるいは外部メモリ１２１１からＲＡＭ１２０３にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。

１２０５は入力コントローラで、キーボード（ＫＢ）１２０９や不図示のマウス等のポインティングデバイス等からの入力を制御する。１２０６はビデオコントローラで、ＣＲＴディスプレイ（ＣＲＴ）１２１０等の表示器への表示を制御する。なお、図２の表示部１２１０はＣＲＴだけでなく、液晶ディスプレイ等の他の表示器であってもよい。これらは必要に応じて管理者が使用するものである。また表示部は指やペン等にてユーザが表示画面内の対象位置を指定するタッチパネル機能を含むものであってもよい。

１２０７はメモリコントローラで、ブートプログラム，各種のアプリケーション，フォントデータ，ユーザファイル，編集ファイル，各種データ等を記憶するハードディスク（ＨＤ）や、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等の外部メモリ１２１１へのアクセスを制御する。

１２０８は通信Ｉ／Ｆコントローラで、ネットワーク（例えば、図１に示したＬＡＮ１００）を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信等が可能である。

なお、ＣＰＵ１２０１は、例えばＲＡＭ１２０３内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ＣＲＴ１２１０上での表示を可能としている。また、ＣＰＵ１２０１は、ＣＲＴ１２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。

本発明を実現するための後述する各種プログラムは、外部メモリ１２１１に記録されており、必要に応じてＲＡＭ１２０３にロードされることによりＣＰＵ１２０１によって実行されるものである。さらに、上記プログラムの実行時に用いられる定義ファイル及び各種情報テーブル等も、外部メモリ１２１１に格納されており、これらについての詳細な説明も後述する。
次に、図３について説明する。
３０１は本願発明で画像表示装置にて処理される画像であり、撮影対象として人物が含まれている。
３０２は本願発明で画像表示装置にて処理される画像であり、撮影対象として人物が含まれている。
３０３は本願発明で画像表示装置にて処理される画像であり、撮影対象として人物が含まれている。

３０４は本願発明で画像表示装置にて処理された画像であり、画像内に人物が含まれていた場合にその顔領域を合わすものである。顔領域が抽出された場合、その顔領域は画像内では正方形または長方形の領域として扱われる。顔領域は対角上に指定された少なくとも二点以上の縦横（表示部を平面とした場合のＸ，Ｙ）座標をもっている。また画像全領域に対する相対的な縦横の座標をもつ事になる。画像３０１においては画像認識により４つの顔領域が抽出され、４つの顔領域に対応する二点以上の縦横座標があることを示している。なお、人物画像の顔領域を検出する技術は既知の技術であるため、詳細な説明は省略する。

次に、図４、５、６を参照しながら、本発明に係る画像管理サーバ１１０、情報処理端末１３０、１４０、１５０による画像表示処理の詳細な処理について説明する。

図４は、画像管理サーバ１１０及び情報処理端末（クライアント端末）１３０による画像登録処理の一例を示すフローチャートである。なお、ステップＳ４０１〜ステップＳ４１９の各ステップでＳ４０１、Ｓ４０３、Ｓ４０９は情報処理端末のＣＰＵ１２０１が実行する。Ｓ４０２、Ｓ４０４〜Ｓ４０８、Ｓ４１０〜Ｓ４１９は画像管理サーバ１１０のＣＰＵ１２０１が実行する。

ステップＳ４０１では、情報処理端末１３０は当画像管理サーバ１１０にアクセスするように、ＵＲＬ情報を含んだＨＴＴＰリクエストを画像管理サーバ１１０に送信する。

ステップＳ４０２では、画像管理サーバはＨＴＴＰリクエストを受信し、ＨＴＴＰレスポンスを情報処理端末１３０に送信し、情報処理端末の表示部に初期操作画面を表示するために表示指示を行う。

ステップＳ４０３では、情報処理端末１３０は図７の７０１に示すような初期操作画面表示する。情報処理端末はキーボード等のインターフェースからユーザにより入力されたユーザＩＤ（ログイン名）やユーザパスワードのようなユーザ識別情報をＲＡＭに記憶し、図７の７０６にあるような送信ボタンが押下された後、画像管理サーバにユーザ識別情報を送信する。

ステップＳ４０４では画像管理サーバ１１０は受信したユーザ識別情報が新規かどうかを判定する。新規と判定された場合は新規登録が必要であると判定し、Ｓ４０５に進む。新規でないと判定された場合は既にユーザ登録が完了していると判定してＳ４０６に進む。
ステップＳ４０５では新規にユーザ登録を完了する処理であり、図５で詳細を説明する。

ステップＳ４０６では画像管理サーバはＳ４０４で判定されたログイン情報に係るユーザのみに閲覧権限（アクセス権）のある画面の表示指示を行い、情報処理端末１３０の表示部に図７の７０２のような画面を表示させる。またユーザが初めて当該画面を閲覧する場合には予め、登録された画像は無い為、図８の８０１のような画面を表示させる。この操作画面７０２や８０１はユーザが画像の追加登録や編集等のユーザ所望の操作ができるような構成をしている。

ステップＳ４０７では画像管理サーバ１１０は画像追加ボタンが押されたと判定した場合に、ユーザは所有画像を画像管理サーバに送信する処理を進めると判定してＳ４０８に進む。

ステップＳ４０８では画像管理サーバ１１０はユーザが画像管理サーバに送信したい画像を選択できる操作画面を情報処理端末が表示するように表示指示をする。

ステップＳ４０９では、情報処理端末１３０は画像管理サーバに送信したい画像を送信（アップロード）する。ユーザが送信する場合は少なくとも1以上の画像を送信する必要があるが、この後の処理において本願発明の効果を発揮する為には、ユーザは画像管理サーバに合計２以上の複数の画像を送信する必要がある。よってユーザが1つの画像のみを送信した場合で、当該画像表示装置にて処理を進めた場合は本願発明の効果は何ら発揮されない。更に送信された画像には撮影対象に少なくとも１つ以上の人物の顔を含んだ画像が少なくとも１つ以上含まれている事により本願発明の効果を発揮する。またこの情報端末による送信の処理は必ずしも、ネットワークを介した場合に限った場合ではなく、ＵＳＢメモリ等の外部記憶媒体を介した送信であっても何ら問題ではない。

ステップＳ４１０では画像管理サーバ１１０は、既存のＳ５０４で作成されたユーザ専用フォルダ（外部メモリ１２１１に作成されている）の中にＳ４０９にて送信された画像を保存し、送信された画像を全て外部メモリが記憶する。さらに画像管理サーバは外部メモリに記憶された全画像のサムネイル画像を自動で作成し、当該フォルダの中に記憶する。

ステップＳ４１１では画像管理サーバ１１０は画像が既に本願発明に係る登録処理を完了したかどうかを判定し、完了していないと判定した場合はＳ４１２に進める。完了していると判定した場合は、Ｓ４１２以降の処理が既に実施されている為、処理を終了する。更にこのＳ４１１の判定処理はＳ４１０にて送信された画像の記憶が完了した順序やユーザが画像送信した順序や画像送信の時にユーザが整列させた順序等の所定の順序で、Ｓ４１１の処理をされる準備が最も早く完了した画像から順次本願発明に係る処理が開始される。

ステップＳ４１２では画像管理サーバは画像内に顔画像が存在するかを判断する顔認識を行う。この顔認識の実行で使用する画像処理技術は既知の技術である。例えば肌色画素数を当該画像内でカウントする処理を行う。

ステップＳ４１３では画像管理サーバ１１０はＳ４１２の顔認識の結果、顔かどうかの判定をする、顔であると判定した場合は処理をＳ４１４に進める。この顔認識の判断で使用する画像処理技術は既知の技術である。例えば、肌色画素の領域内に黒目（黒画素の集合）・赤目（赤画素の集合）があるかを判定する処理を行う。顔でないとは例えば風景である、人物の胴体部分である、動物である等になるが、顔認識判定手段がもつ独自論理により判定されるものであり、人物の顔であると推定される画像であっても判定基準を満たさない画像は全て顔画像ではないと判定し、Ｓ４１７に進む。

ステップＳ４１４では画像管理サーバ１１０は顔認識処理で抽出された、顔画像領域に顔番号（顔ＩＤ）を自動で採番（発行）し、図１０の１００２に示す様な外部メモリに予め記憶された画像情報データベースに顔ＩＤ情報データ（画像情報）を登録する。更に顔画像領域の座標を抽出し、外部メモリ１２１１に予め記憶された画像情報データベース（図１１の１１０２）に図３の３０４で説明したような顔画像座標情報データ（画像情報）を登録する。

ステップＳ４１５では画像管理サーバ１１０は画像情報データベースに登録した顔画像情報に対応する様に当該顔画像の特徴量（画像特徴量）を算出し、図１１の１１０２に示すように、外部メモリに予め記憶された画像情報データベースに特徴量情報データ（画像情報）を更に登録する。この特徴量は顔ＩＤが同じかどうかを判定する為に使用される。当該特徴量は人物の顔を構成する情報のなかで、類似度を判定する為に、ある特定部分の顔の特徴を数値化したものである。例えば個人差がある顔の目鼻口の配置により算出される数値である。この特徴量の算出で使用する画像処理技術は既知の技術である。別々の顔画像を比較した場合、この特徴量の数値が近似している場合はある閾値以上にて、同じ顔であると判定され、本願発明においては同じ顔ＩＤが採番（発行）される。

このように、画像管理サーバ１１０の外部メモリ１２１１には、人物の顔の領域を含む画像と、当該画像に含まれる人物の顔を識別する識別情報（画像情報データベース１１０２の顔ＩＤ）とが記憶されている。

ステップＳ４１６では画像管理サーバ１１０は当該画像に別の顔画像情報があるかを判定し、一つの画像内に複数の顔画像情報があるかを判断する。複数の顔画像情報があると判定した場合は処理をＳ４１２に進め、画像内の顔画像情報を全て取得したと判定した場合は処理をＳ４１７に進める。

ステップＳ４１７では画像管理サーバ１１０は本願発明の処理が当該画像について完了した事を証明する終了情報を画像情報に付与し、図１０の１００２に示す様な外部メモリに予め記憶された画像情報データベースに処理済情報（画像情報）を更に登録する。

ステップＳ４１８では画像管理サーバ１１０は記憶部に記憶された他の画像があるかを判定する。他の画像があると判定した場合は、Ｓ４１１に進む。無いと判定した場合はＳ４１９に進む。Ｓ４１０〜Ｓ４１８の処理を、情報処理端末が画像管理サーバに送信し、受信した画像をユーザが再度閲覧する前に完了する。
ステップＳ４１９では画像管理サーバ１１０は情報処理端末１３０に表示指示をする。

図５は、画像管理サーバ１１０及び情報処理端末（クライアント端末）１３０によるユーザ登録処理の一例を示すフローチャートである。なお、ステップＳ５０１〜ステップＳ５０５の各ステップでＳ５０２は情報処理端末のＣＰＵ１２０１が実行する。Ｓ５０１、Ｓ５０３〜Ｓ５０５は画像管理サーバ１１０のＣＰＵ１２０１が実行する。
ステップＳ５０１では画像管理サーバ１１０はユーザ登録を新規に受け付ける画面の表示指示をする。

ステップＳ５０２では情報処理端末１３０はユーザ登録を新規に受け付ける画面を表示し、ユーザより入力されたユーザ認識情報を送信する。そのユーザ認識情報とは図１０に示すユーザを特定できる情報である。
ステップＳ５０３では画像管理サーバ１１０は送信された新規ユーザ認識情報を図１０に示すようなデータベースに登録する。
ステップＳ５０４では画像管理サーバ１１０は登録した新規ユーザ専用フォルダを作成する。
ステップＳ５０５では画像管理サーバ１１０はユーザ登録を新規が完了した事を通知する画面を表示させる表示指示をし、情報処理端末は表示する。

図６は、画像管理サーバ１１０及び情報処理端末（クライアント端末）１３０による画面操作処理の一例を示すフローチャートである。なお、ステップＳ６０１〜ステップＳ６１の各ステップでＳ６０１、Ｓ６０３は情報処理端末のＣＰＵ１２０１が実行する。Ｓ６０２、Ｓ６０４〜Ｓ６１１画像管理サーバ１１０のＣＰＵ１２０１が実行する。

ステップＳ６０１では、情報処理端末１３０は図７の７０２に示すような登録済み画像でサムネイル画像にて一覧画面を表示する。更にユーザが一覧画面のサムネイル画像からある特定の所望する画像を選択して選択状態に（例えば選択された画像に枠を表示）して、図示省略した拡大表示ボタンを押下すると、選択されたサムネイル画像の識別情報（画像ＩＤ）と拡大表示指示とを画像管理サーバに送信する。また、サムネイル画像が選択されることに応じて、画像の識別情報と拡大表示指示を送信するようにしてもよい。

ステップＳ６０２では、画像管理サーバ１１０はＳ６０１やＳ６１１で選択された画像が拡大されるように表示制御処理を行う。具体的にはサムネイル画像とは別の表示用の画像（サムネイル画像より大きいサイズ、高い解像度）の送信を行う。

ステップＳ６０３では、情報処理端末は図９の９０１に示すような操作画面を表示する。すなわち、画像管理サーバ１１０の記憶手段に記憶されている画像が、情報処理端末に送信され、情報処理端末１３０の表示部１２１０に表示されることになる（表示制御工程）。

ここで、情報処理端末は表示部に表示される情報処理端末の画面サイズに対する相対座標に係るマウス停止位置やクリック回数や間隔の情報処理端末の画面操作情報を、画像管理サーバ１１０に送信することができるものとする。なお、コンピュータシステムにおいて、マウス停止位置、クリック回数等の操作情報は、オペレーティングシステムを介して取得できることは広く知られているため、操作情報の取得に関する詳細な説明は省略する。

ステップＳ６０４では、画像管理サーバ１１０は情報処理端末１３０から送信されたマウス停止位置に係る座標情報を受信する。更にＳ６０４において画像管理サーバ１１０はＳ６０３にて送信されたマウス停止位置座標情報Ａ’と顔座標情報Ａを関連付けする。比例係数は画像の表示対象毎に変わる為、その比例係数は不図示のデータベースとして予め外部メモリに記憶されている。

上記関連付け手段により図１１の１１０３に示すような相対座標データベースに登録された顔座標を含む画像を表示部に表示させたい場合を説明する。顔座標が表示画面内にて定義される新しい座標は予め定めておいた縮尺計算が可能な比例係数をもとに変換されたＸ、Ｙ座標が算出される。この算出されたＸ、Ｙ座標により図４の説明にて完了した本願発明である処理済みの画像に関して、いかなる表示部に表示される場合においても関連付けが可能となる。

例えば図１１の１１０３で挙げた例ではデータベースに登録された顔画像の座標Ａ（１０,１００）はＸ、Ｙ座標ともに比例係数１００を乗じた値が表示部での顔画像は変換座標Ａ’（１０００,１００００）に計算される。つまり顔座標Ａは本願発明の画像処理における基準の座標であり、画像の同じ座標が表示部に表示された場合の配置座標Ａ’は比例定数にて変換されただけの相対的な座標である。これによりＳ６０５にて配置座標を元にマウス停止位置の座標位置が判定基準にしたがって判定される。

ステップＳ６０５では、画像管理サーバ１１０は送信されたマウス停止位置座標が顔認識の座標領域であるかどうかを判定する。図９の９０４で示した領域はＳ６０１においてユーザに選択され表示部に表示された画像において顔座標といった画像情報登録された領域を表示画面に便宜的に示したものである。９０４の領域内にマウスの停止位置がある場合、画像管理サーバは領域内であると判定しＳ６０６に進める。９０４では便宜的に画像情報登録された領域を表示部にて表示させたが、その表示させる形態は正方形または長方形の形状であればどのような形態であってもよい。さらにＳ６０４で受信した情報により画像管理サーバが領域内かどうかを判定できればよいので、表示部に画像情報登録を表示させない形態であっても何ら問題はない。

ステップＳ６０６では、画像管理サーバ１１０はクリック回数と間隔からシングルクリック操作が実行されたかを判定する。シングルクリックであると判定された場合、Ｓ６０７に進める。シングルクリックでないと判定された場合は、Ｓ６０９に進む。

ステップＳ６０７では、画像管理サーバ１１０は図９の９０２に示すような予めデータベースに登録された画像で次に該当する画像を情報処理端末の表示部に表示するように表示指示する。次にとは、現時点で表示されている画像がデータベースに登録されており、登録ＩＤの番号が現在の画像よりも次に大きい番号の画像であり、かつ現在表示されている画像の顔ＩＤと同じ顔ＩＤが含まれている別の画像である。また次に大きい番号がない場合は最も小さい番号であってもよい。情報処理端末は表示指示に従って図９の９０２に示すような画面を表示する。

すなわち、情報端末装置の表示部に表示されている画像の顔領域上でシングルクリックすることにより、その顔領域と同じ識別ＩＤの顔領域を含む画像に、現在表示されている画像から表示切替を指示することができる（切替指示工程：Ｓ６０６）。なお、本第１の実施の形態では、顔領域以外の画像上でシングルクリックすることにより、同一人物に特定されない、従来のような画像切替を指示することができる。この場合は、画像が所定の順序で表示が切り換えられることになる。所定の順序とは、画像のシリアル番号順でもいいし、画像管理サーバに登録された登録日時順でもいいし、ファイル名順でもいいし、撮像された日時順であってもいい。

そして、クリックされた領域が顔領域であるかを判断することにより、表示されている画像に含まれる人物の顔の領域が選択されているか否か判断している（判断工程：Ｓ６０５）。

そして、選択されている人物の顔を識別する識別情報と同じ識別情報の人物の顔の領域を含む画像を特定し（特定工程：Ｓ６０７）、表示部に表示されている画像を、特定された画像に切り替える（切替工程：Ｓ６０７）。

ステップＳ６０８では、画像管理サーバ１１０はユーザが所望する画像表示装置の処理を継続したいかを判定し、継続したくないと判定した場合は処理を終了する。継続したいと判定した場合はＳ６０３に進め、ユーザが所望する画像表示装置の処理を継続する。

ステップＳ６０９では、画像管理サーバ１１０はクリック回数と間隔からダブルクリック操作が実行されたかを判定する。ダブルクリックであると判定された場合、Ｓ６１０に進める。ダブルクリックでないと判定された場合は、Ｓ６０３に進む。

すなわち、情報端末装置の表示部に表示されている画像の顔領域上でダブルクリックすることにより、その顔領域と同じ識別ＩＤの顔領域を含む複数の画像を用いて、一覧表示することを指示することができる（一覧表示指示工程：Ｓ６０９）。

ステップＳ６１０では、画像管理サーバ１１０は図８の８０２に示すような予めデータベースに登録された画像で該当する全て画像のサムネイル画像を情報処理端末の表示部に表示するように表示指示する。全てとは現時点で表示されている画像がデータベースに登録されており、かつ現在選択されている画像の顔ＩＤと同じ顔ＩＤを含む全ての画像である。情報処理端末は表示指示に従って図８の８０２に示すような画面（ただし、同じ顔ＩＤを含まない画像については非表示にしている点で、図８の８０２とは異なる）を表示する。

ステップＳ６１１では、画像管理サーバ１１０は一覧画面のサムネイル画像からある特定の所望する画像を選択されたどうかを判定し、選択されたと判断した場合はＳ６０２に進む。選択されないと判定した場合は処理を終了する。

次に、図７の情報処理端末の表示部に表示する画面の一例について説明する。７０１は図４のＳ４０３にて表示する画面の一例である。７０２は図４のＳ４０９にて表示する画面の一例である。

次に、図８の情報処理端末の表示部に表示する画面の一例について説明する。８０１は図４のＳ４０９にて表示する画面の一例である。８０２は図６のＳ６１０にて表示する画面の一例である。

次に、図９の情報処理端末の表示部に表示する画面の一例について説明する。９０１は図６のＳ６０３にて表示する画面の一例である。９０２は図６のＳ６０７にて表示する画面の一例である。

次に、図１０について説明する。図１０は、ユーザ登録情報であり、画像管理サーバ１１０のデータベースとして外部メモリ１２１１に記憶される。新規ユーザ登録が情報処理端末から送信された場合は追加情報を登録する。

次に、図１１について説明する。１１０１はユーザ登録情報と画像ＩＤを関連付けた情報であり、画像管理サーバのデータベースとして外部メモリ１２１１に記憶される。情報処理端末から画像が送信された場合は追加情報を登録する。

１１０２は画像情報と画像ＩＤを関連付けた情報であり、画像管理サーバのデータベースとして外部メモリに記憶される。情報処理端末から画像が図４にて処理された場合は追加情報を登録する。

１１０３は顔座標と相対座標を関連付けた情報であり、画像管理サーバのデータベースとして外部メモリに記憶される。情報処理端末から画像が図４にて処理された場合は追加情報を登録する。

以上説明した本実施形態によれば、記憶部に記憶されたすべての画像データの中で、ユーザが所望とする複数の画像データだけを順次表示することが複雑な設定操作を行わずに実現できる。また、記憶部に記憶されたすべての画像データの中で、ユーザが所望とする複数の画像データだけで一覧表示することが複雑な設定操作を行わずに実現できる。

また、本発明におけるプログラムは、図４〜図６に示すフローチャートの処理に従って画像管理サーバ１１０、情報処理端末、コンピュータが実行可能なプログラムであり、本発明の記憶媒体は図４〜図６の処理方法を画像管理サーバ１１０、情報処理端末、コンピュータが実行可能なプログラムを記憶されている。なお、本発明におけるプログラムは図４〜図６の各装置の処理方法ごとのプログラムであってもよい。
［第２の実施の形態］

上記第１の実施形態では、本発明を、情報端末装置１３０と画像管理サーバ１１０のシステムとして適用した実施形態について説明したが、本第２の実施形態では、本発明を撮像装置であるデジタルカメラに適用した実施形態について説明する。本第２の実施形態では、被写体の特徴部分を自動的に検出して自動フォーカスした情報を記録するデジタルカメラにおいて、画像のプレビューを行う表示部で、簡単にユーザが所望とする画像に表示切替することが可能となる。
図１２は、本発明の第２の実施形態に係る撮像装置の一例としてデジタルカメラの主な機能構成を示すブロック図である。

撮影レンズ１０は、その焦点距離を連続的に変えるためのズームレンズと、ピントを調整するフォーカスレンズとから構成されている。これらのレンズは、ズーム制御部４４、測距制御部４２により駆動される。撮影レンズ１０は、撮像素子１４の撮像面上に被写体を結像する。撮像素子１４は、撮像面上に結像された被写体像の光強度に応じた電気信号を出力する光電変換撮像素子であり、ＣＣＤ型やＭＯＳ型の個体撮像素子が用いられる。

絞り１２は、露光制御部４０により稼働される。撮像素子１４からのアナログ映像信号は、Ａ／Ｄ変換器１６に入力され、アナログ信号からデジタル信号に変換される。Ａ／Ｄ変換されたデジタル信号は、ガンマ補正、ホワイトバランス補正などの種々の画像処理が画像処理部２０で施される。画像表示メモリ２４は、撮像素子１４で撮像された複数フレーム分のデータを記憶することができるメモリである。画像処理された画像データは、画像表示メモリ２４に一時記憶される。

システム制御部１１２は、露光制御部４０やカメラ姿勢検知部１０６等と接続され、カメラが動作する際のシーケンス制御を行う。システム制御部１１２には、カメラの電源をオン／オフする電源スイッチ７２、レリーズに連動してオン／オフするシャッタースイッチ６２及び全押しスイッチ６４、表示部５４に表示されるカメラを撮影する際の各種メニュー内容を選択するための操作部７０が設けられている。被写体輝度が低い場合には、フラッシュ４８を発光させる。なお、画像表示部２８と表示部５４を同一の構成としてもよい。また、本実施の形態における画像表示部２８（表示部５４）は、タッチパネル機能を有しており、ユーザによりタッチされた位置を特定することが可能となっている。このタッチパネル機能で必要なタッチ検出機構は画像表示部２８（表示部５４）に備えているものとして説明する。なお、タッチパネル機能自体は既知の技術であり、詳細な説明は省略する。

画像表示メモリ２４に記憶された画像データは、画像処理部２０で変換された画像データの他に被写体の顔などの特徴位置を求めるフォーカス情報または固定位置に配置されたピント確認位置とピントが一致した場所の情報やカメラ姿勢検知部１０６の情報などの撮影情報も一緒に記憶される。画像表示メモリ２４に記憶されたデータは、メモリカード等の記憶媒体２００，２１０（記録部２００、２１０）に記録される。画像データを記憶媒体２００，２１０に記録する際には、一般的に所定の圧縮形式、例えばＪＰＥＧ方式でデータ圧縮が行われる。圧縮伸長部３２は、画像データや撮影情報を記憶媒体２００，２１０に記録する際のデータ圧縮、及び記憶媒体２００，２１０から圧縮された画像データの伸長処理を行う。記憶媒体２００は、例えばＣＦ（コンパクトフラッシュ）メモリカード、ＳＤ（エスディ）メモリカードのことである。

不揮発性メモリ５６は記憶されたデータ等を電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。メモリ５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。通信部は、通信機能を有する。アンテナ（有線通信の場合はコネクタ）１１２は、通信部によりデジタルカメラを、パケット網、ネットワーク、インターネットを介して他の機器と接続する。コネクタ８２，８４は、電源制御部８０と電源８６とを接続する接続部である。電源８６は、アルカリ電池やリチウム電池等の一次電池、ＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。

画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換回路２６を介して画像表示部２８により表示される。画像データを画像表示部２８に逐次表示することで、電子ファインダ機能を実現することが可能である。光学ファインダ１０４は、画像表示部２８による電子ファインダ機能を使用することなしに、光学ファインダのみを用いて撮影を行うことが可能である。

タイミング発生回路１８は、メモリ制御部２２及びシステム制御部１１２により制御される。メモリ３０は撮影した静止画像や動画像を格納するためのメモリである。バリア制御部４６は保護部１０２の動作を制御する。モードダイアルスイッチ６０は、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、動画撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することができる。再生モードスイッチ６６は、本実施の形態で説明している画像再生処理を実行させるためのモードスイッチである。姿勢モードスイッチ６８は、カメラを縦位置で撮影しているか横位置で撮影しているかを自動的に判断するスイッチである。

記憶媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２と、デジタルカメラ１００との間のインターフェースであるＩ／Ｆ２０４と、デジタルカメラと接続を行うコネクタ２０６とを備える。記憶媒体２１０は、半導体メモリや磁気ディスク等から構成される記録部２１２と、デジタルカメラとの間のインターフェースであるＩ／Ｆ２１４と、デジタルカメラと接続を行うコネクタ２１６とを備える。Ｉ／Ｆ９０，９４はメモリカードやハードディスク等の記憶媒体２００，２１０とシステムバスとを接続するインターフェースである。コネクタ９２，９６は、メモリカードやハードディスク等の記憶媒体２００，２１０とＩ／Ｆ９０，９４とを接続する接続部である。記憶媒体着脱検知手段９８は、コネクタ９２，９６に記憶媒体２００，２１０が装着されているか否かを検知するセンサである。

この撮像装置であるデジタルカメラで撮影される画像データには、デジタルカメラ側で撮影情報が付加されている。撮影情報は、図１３に示すように、所定の形式で画像データに付加された撮影日時や縮小画像（サムネイル画像）、フォーカス情報などである。デジタルカメラで撮影された画像データのフォーマット１３０１には、ファイル名１３０２、撮影情報エリア１３０３、属性情報エリア１３０４、画像データエリア１３０５がある。

図１３において、デジタルカメラで撮影された画像データ１３０２（ファイル名：２００９１２０７０００１．ｊｐｇ）の撮影情報エリア１３０３には、フォーカス登録個数を含むパラメータ情報と、それぞれのフォーカスエリアの情報であるフォーカス情報とを構成している。このフォーカス情報は、フォーカス登録個数分格納されている。フォーカス情報には、座標情報として、各フォーカスエリアの位置（座標位置）、大きさ（幅と高さ）が情報として構成されている。なお、ここでいうフォーカスエリアとは、人物の顔検出機能を用いて検出された顔の領域のことである。

次に、属性情報エリアには、各フォーカスエリアでフォーカスされている人物の顔の領域に対して、その人物を識別する情報が記憶できる。後述するが、本実施形態の撮像装置では、人物の名称をユーザ操作に応じて登録する機能を備えている。その機能を用いて入力された人物を識別する情報（識別情報：ここでは、名称）がこの増勢情報エリアに記憶される。

画像データエリアには、オリジナルの画像が格納されている。画像データは、所定の圧縮形式、例えば、ＪＰＥＧ方式でデータ圧縮がなされているが、これに限定されるものではない。記憶装置５０４には、圧縮・伸長を行うソフトウェアが記憶されており、ＲＡＭ５０２に取り込んだ撮影情報を含む画像データの圧縮や圧縮された画像データの伸長処理を行う。

次に図１４を用いて、デジタルカメラの操作画面と装置本体の説明を行う。図１４（Ａ）は、デジタルカメラの操作画面とデジタルカメラ本体であり、１４０１はシャッターボタン（図１２で言うシャッタースイッチ６２）であり、ユーザがシャッター１４０１を押下することで、被写体が撮影され、画像データが記憶部に記憶される。１４０２は、表示画面であり、タッチパネル機能を備えており、ユーザが指で画面をさわることにより、触った位置を検出して、さまざまなユーザインタフェースを構築することができる。なお、表示部がタッチパネルになっているデジタルカメラは近年では主流となってきており、タッチパネルについての詳細な説明は省略する。１４０３は操作コントロール（図１２で言う操作部７０）であり、上下左右を押すことで、プレビュー表示されている画像の切替指示ができたり、機能項目を選択するときに項目切り替えを行ったりすることができる。また、１４０３の中央部のＦＵＮＣ−ＳＥＴボタン（以下、操作指示部）は、機能の設定を行ったり、決定の意思を表すために利用されるボタンである。１４０４はプレビュー開始ボタン（図１２で言う再生モードスイッチ６６）であり、このボタンが押下されると、撮像モードからプレビュー表示モードに切り替えることができる。１４０５はメニューボタンであり、このメニューボタンが押下されると、撮像時のパラメータ等の撮影条件を設定することができる。

１４０６は、顔検出された領域を示すフォーカス枠を示しており、実際に表示領域１４０２に、撮像されている画像データとともにフォーカス枠として重ねて表示されている。なお、このフォーカス枠は、ユーザにより顔の領域がタッチパネルで選択されることにより、重ねて表示されている。つまり、右側に移っている人物には、タッチパネルでタッチされていないため、フォーカス枠が表示されていないのである。

１４０７は、一覧コントロールであり、表示部に表示されているタッチパネルで操作するためのコントロールである。タッチパネルでこの領域が選択されると、画像の一覧表示、すなわち複数のサムネイル画像が並べて表示されるモードに切り替わる。

また、本実施の形態では、フォーカス枠１４０６が表示されている状態で、メニューボタン１４０５が押下されると、名前登録モードに移行することができるものとする。名前登録モードについては、図１４（Ｂ）を用いて説明する。

図１４（Ｂ）では、検出された顔の領域が表示され、その顔の人物を識別する情報として、ユーザが名前を登録するための画面の一例である。１４１０には、選択対象の人物の顔の領域（フォーカス領域）が表示されており、この人物の名称を登録することをユーザが認識可能となっている。

１４０８は、名称入力欄であり、ユーザにより入力設定された名前が表示される。なお、未入力時はブランクとなっている。１４０９は、文字入力コントロールであり、タッチパネルを用いて文字の入力が行えるようになっている。本実施の形態では、５０音を、行ごとに表示されており、たとえば「あ」を選択して、決定ボタン（操作コントロール１４０３の中央部）を押下すると「あ」が確定され、決定ボタンが押下されずに、もう一度「あ」がタッチされると表示が「い」に切り替わる。このように、順次押下することで、列を変更することが可能となっている。ここで、顔に対して名前が登録されると、図１３の属性情報エリアのフォーカスエリアに名前が登録され、画像ファイル内に、画像データととともに格納されることになる（記憶手段）。

そして、図１４（Ａ）のプレビュー画像が表示されている状態で、操作コントロール１４０３の右が押下されると、画像が図１４（Ｃ）のように切り替わる。なお、ここでは、１４０６の人物である「山田太郎」がタッチされて選択されている状態（フォーカス枠が表示）で、画像切替の指示がなされたため、「山田太郎」が映っている画像が選択されて、切替処理が行われた例であり、そのため、人物の顔のフォーカスエリアに、フォーカス枠が重ねて表示されている。

次に図１５を用いて、デジタルカメラの操作画面の遷移について説明を行う。図１５（Ａ）では、図１４（Ａ）とは異なり、右側の人物の顔の領域がユーザによりタッチされ、フォーカス枠１５０１が表示された状態を示している。この状態で、画像切替の指示がなされると、同一の人物の識別情報を有する別の画像に切り替わり、図１５（Ｂ）のように表示が遷移される。図１５（Ｂ）では、同じ識別情報を有するフォーカスエリアにフォーカス枠が重ねて表示され、この人物による画像切替であることを操作者は認識することができる。

次に図１６を用いて、デジタルカメラの操作画面の遷移について説明を行う。図１６の上の図では、図１５（Ａ）や図１４（Ａ）と異なり、二人の人物の顔の領域がユーザによりタッチされ、フォーカス枠１６０１と１６０２が表示された状態を示している。この状態（複数のフォーカスエリアが選択）で、画像切替の指示がなされると、選択されている複数の人物に対して、同一の人物の識別情報を有する別の画像に切り替わるため、図１６の下図のように表示が遷移される。図１６の下図１６０３では、複数の同じ識別情報を有するフォーカスエリアにフォーカス枠が重ねて表示され、この人物による画像切替であることを操作者は認識することができる。

図１７は、本実施の形態における、画像表示装置の記憶部（図１２の記憶媒体２００、図２の外部メモリ１２１１）に記憶されている画像データの一例である。各ファイルには、ファイル名１３０２として、「２００９１２０１０００１．ｊｐｇ」から「２００９１２０１０００５．ｊｐｇ」のように、シリアル番号でファイル名が生成されている。ここで、通常のプレビューにおける順送り表示では、所定の順序として、このシリアル番号順に画像が切り替わるものとするがこれに限るものではなく、撮影情報エリア１３０３にある撮影日時の順に表示してもよい。また、ファイル名とシリアル番号を別に管理し、表示をファイル名順に表示するようにしてもよい。

また、「２００９１２０１０００１．ｊｐｇ」の属性情報エリアには、名前「山田太郎」と「鈴木花子」が登録されているものとする。「２００９１２０１０００２．ｊｐｇ」の属性情報エリアには、人物の顔がないため、なにも登録されていない。または、犬の名前が登録されていてもよい。「２００９１２０１０００３．ｊｐｇ」の属性情報エリアには、少なくとも名前「山田太郎」が登録されているものとする。「２００９１２０１０００４．ｊｐｇ」の属性情報エリアには、少なくとも名前「山田太郎」と「鈴木花子」とが登録されているものとする。「２００９１２０１０００５．ｊｐｇ」の属性情報エリアには、名前「鈴木花子」が登録されているものとする。

そして図１４（Ａ）で説明したように、ファイル名「２００９１２０１０００１．ｊｐｇ」が表示され、かつ「山田太郎」が選択された状態で画像切替の指示が操作コントロール１４０３（画像切替指示手段）によりなされた場合には、シリアル番号順の「２００９１２０１０００２．ｊｐｇ」を表示せずに、次に同一の識別情報（名前）である「山田太郎」が含まれる画像である「２００９１２０１０００３．ｊｐｇ」に表示が切り替わっていることが説明できる。
次に図１８を用いて、デジタルカメラの操作画面における一覧表示を行う場合の画面の遷移について説明を行う。

図１８（Ａ）のプレビュー画像（「２００９１２０１０００１．ｊｐｇ」）が表示されている状態で、一覧表示指示部である一覧コントロール１８０２がタッチされると、表示部１８００に表示されている画像が、図１８（Ｂ）のように切り替わる。すなわち、フォーカス枠１８０１で選択状態となっている人物の顔の識別情報（「山田太郎」）と同一の識別情報を含む画像が図１７の記憶されている画像群の中から特定され、その特定された複数の画像が表示領域１８０３に一覧表示される。この一覧表示では、画像データエリア１３０５にある画像を縮小表示してもいいし、あらかじめ用意されている、撮影情報エリア１３０３にあるサムネイル画像データを用いて一覧表示してもよい。
このように、図１４〜図１８で説明した操作画面の遷移を行うための処理手順について、図１９、図２０、図２１のフローチャートを用いて説明する。

図１９は、画像表示装置である撮像装置による全体処理の一例を示すフローチャートである。なお、ステップＳ１９０１〜ステップＳ１９１４の各ステップは、撮像装置のシステム制御部１１２と、このシステム制御部１１２とともに動作する各制御部とが実行することになる。

ステップＳ１９０１では、撮像装置の撮影モードであるか否かを判断する。撮像装置の電源６６がＯＮされたときに、初期状態では撮像モードになっている。撮影モードであると判断された場合は、ステップＳ１９０２に処理を進める。

ステップＳ１９０２では、撮像素子１４から取り込まれた画像を画像処理部２０が処理するで、撮影されている（取り込まれている）画像に人物の顔の領域があるかを判定（顔認識処理）し、測距制御部４２を用いて被写体に焦点を合わす（フォーカス処理）ことが行われる。

そして、ステップＳ１９０３では、シャッタースイッチ６４（シャッター１４０１）が押下されたかを判断し、押下された場合には、ステップＳ１９０４で、撮像した画像を記憶媒体２００または２０１に記憶する。シャッタースイッチ６４（シャッター１４０１）が押下されない場合、また、ステップＳ１９０４で撮像した画像を記憶媒体に記憶した場合には、ステップＳ１９０１に処理を戻す。

ステップＳ１９０１で撮影モードではないと判断された場合には、ステップＳ１９０５でプレビューモードであるか判断する。再生モードスイッチ６６（プレビューボタン１４０４）が押下されると、本撮像装置は、プレビューモードに移行することになる。また、プレビューモードで、再生モードスイッチ６６（プレビューボタン１４０４）が押下されると、撮影モードに戻ることになる。

Ｓ１９０５でプレビューモードではないと判断された場合にはステップＳ１９１３でその他の処理を行うＳ１９１４に処理が移る。その他の処理は、本発明では関係がない処理であるので説明は省略する。

Ｓ１９０５でプレビューモードであると判断された場合、すなわち、再生モードスイッチ６６（プレビューボタン１４０４）が押下され、画像を表示する指示を受け付けた場合には、ステップＳ１９０６で、図１４（Ａ）に示すように、画像表示部２８（１４０２）に画像を表示する。ここで表示される画像は、記憶媒体２００（２０１）に記憶されている画像がＩ／Ｆを介して読み込まれたものであるが、最初に表示する画像は、撮影日時が一番新しい画像であることが望ましい。なぜなら、撮影した画像をプレビュー表示して確認するケースが一番多いためである。しかしながら最初に表示する画像は、本発明ではなんでもよい。

次にステップＳ１９０７で名前登録モードの指示がなされたかを判断する。図１４で説明したように、フォーカス枠（１４０６）が表示されている状態で、メニューボタン１４０５が押下されると、名前登録モードに移行することができる。名前登録モードであると判断された場合には、ステップＳ１９０８で、フォーカス枠で選択された画像の人物名を登録する処理が行われる。具体的な操作は、図１４（Ｂ）で説明したとおりである。また、本第２の実施の形態では、記憶されている画像に含まれる人物の顔を指定し、かつ、該人物の顔の識別情報とする文字列をユーザ操作に応じて入力することにより、該入力された文字列を名前（識別情報）として画像に付与する（手動付与手段）ことができる。しかしながら、撮像装置に、本第１の実施の形態の画像管理サーバ側の処理で説明したように、画像を解析して、人物の顔の領域の画像特徴量を取得し、得られた画像特徴量を用いて、類似する人物の顔があるか判定することにより、類似する人物の顔と同じ識別情報を、画像特徴量を取得した画像に付与する（自動付与手段）機能を持たせてもよい。

次に、名前登録モードでない場合には、ステップＳ１９０９で、画像切替の指示がなされたか否かを判断する。画像切替の指示は、前述したように、画像のプレビューが表示されている状態で、操作コントロール１４０３（画像切替指示手段）の左右が押下されることにより行われる。画像切替指示がなされた場合には、ステップＳ１９１０で画像切替処理が行われる。この画像切替処理の詳細は、図２０で後述する。

画像切替指示が行われないと、ステップＳ１９１１で、一覧表示指示がなされたか否かを判断する。一覧表示の指示は、前述したように、一覧ボタン１４０７（一覧表示指示手段）が押下されることにより行われる。一覧表示指示がなされた場合には、ステップＳ１９１２で一覧表示処理が行われる。この一覧表示処理の少佐は、図２１で後述する。

次にステップＳ１９１４では、電源がＯＦＦされたかを判断する。電源がＯＦＦされると撮像装置の電源供給が停止し処理を終了する。また電源ＯＦＦされるまでは、ステップＳ１９０１に処理を戻して、各処理を繰り返すことができるようになっている。

次に、図２０を用いて、撮像装置における画像切替処理を説明する。なお、図１９と同様に、各ステップは、撮像装置のシステム制御部１１２と、このシステム制御部１１２とともに動作する各制御部とが実行することになる。

ステップＳ２００１では、画像切替指示された際に、人物指定モードであるか判断する。この人物指定モードとは、具体的には、図１４（Ａ）、（Ｃ）で説明したように、人物の顔の領域が選択され、フォーカス枠が表示されている状態で、画像切替指示がなされたかを判断する。フォーカス枠が表示されている状態であれば、人物指定モードであると判断されて、ステップＳ２００３に処理を進める。また、フォーカス枠がなく、人物の顔が選択されていない状態で、画像切替指示がなされた場合には、人物指定モードではないと判断されて、ステップＳ２００２に処理を進める。

ステップＳ２００２では、通常のプレビュー画像の切替処理として、次のシリアル番号の画像を記憶媒体２００（２０１）から読みだして画像表示部に表示する。なお、前述したように、画像の表示順序は所定の順序であればよく、シリアル番号順、撮影日時順、ファイル名順のいずれであってもよい。画像の表示切替を行ったら、画像切替処理は終了して、図１９のステップＳ１９１４に処理を戻す。

一方、人物指定モードである場合には、ステップＳ２００３で、同一名の顔領域を含む画像を抽出する。すなわち、記憶媒体２００（２０１）に記憶されている複数の画像のうち、現在選択されている人物の顔を識別する識別情報（名前）と同じ識別情報（名前）の人物の顔の領域を含む画像（つまり属性情報エリアの名前が同じ画像）を特定する。同じ識別情報を有する画像が特定されたら、ステップＳ２００４で、特定された画像のうち、上記の所定の順序（例えば、シリアル番号順）でソートする。そして、ステップＳ２００５で、ソートされた順序において、次の画像に相当する画像を記憶媒体２００から読み込んで画像表示部に表示する。この表示が終わったら、画像切替処理は終了して、図１９のステップＳ１９１４に処理を戻す。

なお、図２０の説明では、ステップＳ２００３〜Ｓ２００５で、画像抽出、ソート、次の画像を表示の手順で説明したが、本発明の技術的特徴はこの手順に限るものではなく、所定の順序で１つづつ画像の属性情報に同一の識別情報が含まれているか判断し、含まれていたらその画像を表示し、含まれていなければ次の順序の画像について同様の処理を繰り返すように実現してもよい。すなわち、記憶媒体（記憶手段）に記憶されている複数の画像のうち、フォーカス枠で選択されている人物の顔を識別する識別情報と同じ識別情報の人物の顔の領域を含む画像を特定し、特定された画像を表示部に表示することができればよい。

また、図１６で説明したように、複数の人物の顔の領域がフォーカス枠で選択されている状態で画像切替の指示がなされた場合であっても、選択されているすべての顔の識別情報を用いて、画像の特定を行うことができる。つまり、２つの顔が選択されている場合には、２つの顔の識別情報の両方を含む異なる画像をステップＳ２００３で特定することになる。このように実現することで、図１６の下図のように「２００９１２０１０００１．ｊｐｇ」から「２００９１２０１０００４．ｊｐｇ」に表示を切り替えることができる。

次に、図２１を用いて、撮像装置における一覧表示処理を説明する。なお、図１９と同様に、各ステップは、撮像装置のシステム制御部１１２と、このシステム制御部１１２とともに動作する各制御部とが実行することになる。

ステップＳ２１０１では、一覧表示指示された際に、人物指定モードであるか判断する。この人物指定モードとは、具体的には、図１４（Ａ）、（Ｃ）で説明したように、人物の顔の領域が選択され、フォーカス枠が表示されている状態で、一覧表示指示（一覧ボタン１４０７タッチ）がなされたかを判断する。フォーカス枠が表示されている状態であれば、人物指定モードであると判断されて、ステップＳ２１０３に処理を進める。また、フォーカス枠がなく、人物の顔が選択されていない状態で、一覧表示指示がなされた場合には、人物指定モードではないと判断されて、ステップＳ２１０２に処理を進める。

ステップＳ２１０２では、通常の一覧表示処理として、シリアル番号順に画像を記憶媒体２００（２０１）から読みだして画像表示部に読みだした画像を一覧表示する。前述したように、この一覧表示では、画像データエリア１３０５にある画像を縮小表示してもいいし、あらかじめ用意されている、撮影情報エリア１３０３にあるサムネイル画像データを用いて一覧表示してもよい。すべての画像の一覧が表示部１８００に表示できない場合には、読みだした画像を、所定の順序で配置可能な分だけ配置して表示することになる。この所定の順序は、上述しているように、シリアル番号順、撮影日時順、ファイル名順のいずれであってもよい。画像の一覧表示処理を行ったら、一覧表示処理は終了して、図１９のステップＳ１９１４に処理を戻す。

一方、人物指定モードである場合には、ステップＳ２１０３で、同一名の顔領域を含む画像を抽出する。すなわち、記憶媒体２００（２０１）に記憶されている複数の画像のうち、現在選択されている人物の顔を識別する識別情報（名前）と同じ識別情報（名前）の人物の顔の領域を含む画像（つまり属性情報エリアの名前が同じ画像）を特定する。同じ識別情報を有する画像が特定されたら、ステップＳ２１０４で、特定された画像のうち、上記の所定の順序（例えば、シリアル番号順）でソートする。そして、ステップＳ２１０５で、ソートされた順序において、順番に複数の画像を記憶媒体２００から読み込んで画像表示部に一覧表示する。この表示が終わったら、一覧表示処理は終了して、図１９のステップＳ１９１４に処理を戻す。前述したように、この一覧表示では、画像データエリア１３０５にある画像を縮小表示してもいいし、あらかじめ用意されている、撮影情報エリア１３０３にあるサムネイル画像データを用いて一覧表示してもよい。

なお、ステップＳ２１０５の処理では、図１８（Ｂ）の１８０３のように表示領域内に対象となるすべての画像が表示される場合はこのまま対応し、すべての画像が表示できない場合には、上記の順序で配置できる数分だけ（例えば、４枚、や９枚等）配置することになる。配置しきれない画像は、一覧表示されている状態で、操作コントロール１４０３の右が押下されると残りの画像の一覧表示が行われるものとする。

以上説明した本実施形態によれば、記憶部に記憶されたすべての画像データの中で、ユーザが所望とする複数の画像データだけを順次表示することが複雑な設定操作を行わずに実現できる。また、記憶部に記憶されたすべての画像データの中で、ユーザが所望とする複数の画像データだけで一覧表示することが複雑な設定操作を行わずに実現できる。

また、本発明におけるプログラムは、図１９〜図２１に示すフローチャートの処理に従って画像表示装置である撮像装置が読み取り実行可能なプログラムであり、本発明の記憶媒体は図１９〜図２１の処理方法を画像表示装置が読み取り実行可能なプログラムを記憶されている。
（本発明の他の実施形態）

以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムを読出し実行することによっても、本発明の目的が達成されることは言うまでもない。

この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記憶した記録媒体は本発明を構成することになる。

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク，ハードディスク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ−Ｒ，ＤＶＤ−ＲＯＭ，磁気テープ，不揮発性のメモリカード，ＲＯＭ，ＥＥＰＲＯＭ，シリコンディスク等を用いることができる。

また、画像管理サーバ１１０、情報処理端末、コンピュータ、または撮像装置が読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。

また、本発明は、複数の機器から構成されるシステムに適用しても、１つの機器からなる装置に適用してもよい。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。

さらに、本発明を達成するためのプログラムをネットワーク上のサーバ，データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。
なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。

また上記のソフトウェアで実現する各処理を、ファームウェアやハードウェア構成にして、各処理を各手段として実現することも可能であり、本発明の技術的範囲はこのようなファームウェアやハードウェア構成による実現も含むものである。

１００ ＬＡＮ
１１０ 画像管理サーバ
１３０ 情報処理端末
１２０１ ＣＰＵ
１２０２ ＲＯＭ
１２０３ ＲＡＭ
１２１０ 表示部（操作部）
１２１１ 外部メモリ

Claims (11)

1. 画像を表示する表示部を備える画像表示装置であって、
   人物の顔の領域を含む画像と、当該画像に含まれる人物の顔を識別する識別情報とを記憶する記憶手段と、
   画像表示指示を受け付けた場合に、前記記憶手段に記憶されている画像を表示部に表示する表示制御手段と、
   前記表示している画像に含まれる複数人の顔の領域を選択させる選択受付手段と、
   前記表示制御手段が前記記憶手段に記憶されている画像を表示部に表示した後に、前記表示制御手段が表示している画像の表示切替指示を受け付ける切替指示受付手段と、
   前記表示している画像に含まれる複数人の顔の領域が前記選択受付手段により選択されているか否か判断する判断手段と、
   前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により複数人の顔の領域を選択されていると判断されている場合に、前記記憶手段に記憶されている複数の画像のうち、前記選択されている複数人の顔を識別する識別情報と同じ識別情報の複数人の顔の領域を含む画像を特定する特定手段と、
   前記表示制御手段を用いて、前記表示部に表示されている画像を、前記特定手段により特定された画像に切り替える切替手段と、
   を備えることを特徴とする画像表示装置。
2. 前記切替え手段が切替えたあとに、前記表示制御手段は、前記特定された画像に切り替えて前記表示部に表示するとともに、前記切り替えた画像に含まれている前記選択された複数人を識別できる枠を重ねて表示することを特徴とする請求項１に記載の画像表示装置。
3. 前記表示制御手段が前記記憶手段に記憶されている画像を表示部に表示した後に、前記表示制御手段が表示部に画像を一覧で表示するべく一覧表示指示を受け付ける一覧表示指示受付手段と、
   前記表示制御手段を用いて、前記表示部に画像の一覧を表示する一覧表示手段と、
   をさらに備え、
   前記一覧表示指示受付手段が前記一覧表示指示を受け付け、かつ、前記判断手段により人物の顔の領域が選択されていると判断されている場合に、前記特定手段は、前記記憶手段に記憶されている複数の画像のうち、前記選択されている人物の顔を識別する識別情報と同じ識別情報の人物の顔の領域を含む画像を特定し、
   前記一覧表示手段は、前記表示制御手段を用いて、前記表示部に、前記特定手段により特定された複数の画像の一覧を表示することを特徴とする請求項１または請求項２に記載の画像表示装置。
4. 前記記憶手段により記憶された前記画像を解析して、人物の顔の領域の画像特徴量を取得する特徴量取得手段と、
   前記特徴量取得手段で取得された画像特徴量を用いて、類似する人物の顔があるか判定することにより、類似する人物の顔と同じ識別情報を、前記画像特徴量を取得した画像に付与する自動付与手段と、
   をさらに備えることを特徴とする請求項１乃至請求項３のいずれか１項に記載の画像表示装置。
5. 前記記憶手段に記憶されている画像に含まれる人物の顔を指定し、かつ、該人物の顔の識別情報とする文字列をユーザ操作に応じて入力することにより、該入力された文字列を前記識別情報として前記画像に付与する手動付与手段をさらに備えることを特徴とする請求項１乃至請求項４のいずれか１項に記載の画像表示装置。
6. 前記画像表示装置は、撮影対象を撮像して画像を生成する撮像部を備える撮像装置であることを特徴とする請求項１乃至請求項５のいずれか１項に記載の画像表示装置。
7. 前記画像表示装置は、前記画像を記憶する画像管理サーバと、該画像管理サーバとネットワークを介して通信可能な情報端末装置とで構成されていることを特徴とする請求項１乃至請求項６のいずれか１項に記載の画像表示装置。
8. 前記情報端末装置から前記画像表示装置に、前記情報端末装置においてクリックされた画像上の位置が送信され、
   前記画像表示装置では、クリックされた画像上の位置から、人物の顔の領域が選択されているかを判断することを特徴とする請求項７に記載の画像表示装置。
9. 前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により人物の顔の領域が選択されていないと判断されている場合には、前記切替手段は、前記表示制御手段を用いて、前記表示部に表示されている画像を、所定の順序で、次の画像に切り替え、
   前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により人物の顔の領域が選択されていると判断されている場合には、前記切替手段は、前記表示制御手段を用いて、前記表示部に表示されている画像を、前記特定手段により特定された画像であって前記所定の順序で、次の画像に切り替えることを特徴とする請求項１乃至請求項８のいずれか１項に記載の画像表示装置。
10. 人物の顔の領域を含む画像と、当該画像に含まれる人物の顔を識別する識別情報とを記憶する記憶手段と、画像を表示する表示部を備える画像表示装置における画像表示方法であって、
    前記画像表示装置の表示制御手段が、画像表示指示を受け付けた場合に、前記記憶手段に記憶されている画像を表示部に表示する表示制御工程と、
    前記画像表示装置の選択受付手段が、前記表示している画像に含まれる複数人の顔の領域を選択させる選択受付工程と、
    前記画像表示装置の切替指示受付手段が、前記表示制御工程が前記記憶手段に記憶されている画像を表示部に表示した後に、前記表示制御工程が表示している画像の表示切替指示を受け付ける切替指示受付工程と、
    前記画像表示装置の判断手段が、前記表示している画像に含まれる複数人の顔の領域が前記選択受付工程により選択されているか否か判断する判断工程と、
    前記画像表示装置の特定手段が、前記切替指示受付工程が前記表示切替指示を受け付け、かつ、前記判断工程により複数人の顔の領域が選択されていると判断されている場合に、前記記憶手段に記憶されている複数の画像のうち、前記選択されている複数人の顔を識別する識別情報と同じ識別情報の複数人の顔の領域を含む画像を特定する特定工程と、
    前記画像表示装置の切替手段が、前記表示部に表示されている画像を、前記特定工程により特定された画像に切り替える切替工程と、
    を含むことを特徴とする画像表示方法。
11. 画像を表示する表示部を備える画像表示装置で読み取り実行可能なプログラムあって、
    前記画像表示装置を、
    人物の顔の領域を含む画像と、当該画像に含まれる人物の顔を識別する識別情報とを記憶する記憶手段と、
    画像表示指示を受け付けた場合に、前記記憶手段に記憶されている画像を表示部に表示する表示制御手段と、
    前記表示している画像に含まれる複数人の顔の領域を選択させる選択受付手段と、
    前記表示制御手段が前記記憶手段に記憶されている画像を表示部に表示した後に、前記表示制御手段が表示している画像の表示切替指示を受け付ける切替指示受付手段と、
    前記表示している画像に含まれる複数人の顔の領域が前記選択受付手段により選択されているか否か判断する判断手段と、
    前記切替指示受付手段が前記表示切替指示を受け付け、かつ、前記判断手段により複数人の顔の領域を選択されていると判断されている場合に、前記記憶手段に記憶されている複数の画像のうち、前記選択されている複数人の顔を識別する識別情報と同じ識別情報の複数人の顔の領域を含む画像を特定する特定手段と、
    前記表示制御手段を用いて、前記表示部に表示されている画像を、前記特定手段により特定された画像に切り替える切替手段と、
    して機能させることを特徴とするプログラム。

Images