JP2000276484A - 画像検索装置、画像検索方法及び画像表示装置 - Google Patents

Abstract

(57)【要約】 【課題】対象画像を効率よく迅速に検索することができ
る画像検索方法及び装置を提供し、また検索精度の高い
検索方法及び装置を提供する。 【解決手段】パソコン１０は、１又は複数のフォルダか
ら構成されるディレクトリ構造をもった画像データベー
ス内より、検索対象画像に類似の画像を検索し、検索さ
れた画像を表示する表示画面を有するので、かかるディ
レクトリ構造を利用することにより、効率よく画像を検
索することができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像データベース
に含まれている画像を効率よく検索する技術に関する。

【０００２】

【従来の技術】デジタルスチルカメラやスキャナを用い
て取得した画像を、電子アルバムなどの画像データベー
スに保存することが行われている。ところで、文字デー
タベースの場合には、キーワードを用いて検索ができる
ため、膨大な量のデータであっても、比較的短時間で検
索が可能である。これに対し、画像データベースの場合
には、検索対象が画像となるために、文字のごとく一致
検索ができないという検索上の問題がある。

【０００３】

【発明が解決しようとする課題】これに対し、例えば特
開平１０−２７５１６１号においては、画像に対応づけ
て記憶したキーワードを用いて、画像の検索を効率よく
行う技術が開示されている。しかしながら、かかる従来
技術によれば、画像を画像データベースに登録する際
に、対応するキーワードも登録する必要がある。従っ
て、例えば膨大な量の画像が既に存在する場合には、画
像データベースに登録する前に、ユーザがこれを分類
し、画像毎に適切なキーワードを付与するという非常に
手間のかかる作業が必要となる。

【０００４】一方、検索対象画像に類似する画像を検索
する技術は、例えば特開平１０−２６０９８３号に開示
されている。かかる従来技術によれば、画像をブロック
毎に分け、それぞれの特徴量を行列として類似度を決定
している。しかしながら、画像をブロック毎に分け、各
々特徴量を見つけているため、計算量が膨大となり、時
間がかかるという問題がある。

【０００５】更に、特開平１０−２５４９０１号には、
予め画像の一部を指定し、その属性を検出して画像の類
似度を求める技術が開示されている。しかしながら、属
性を検出するためには複雑な計算が必要で手間がかかる
という問題がある。また、画像を検索するためには、画
像データベース内の全ての画像の各部位において予め属
性が検出されていることが前提となるので、その手間が
かかるという問題もある。加えて、検索対象画像の属性
が判っていない場合に、これを求める手間もかかる。

【０００６】本発明の主たる目的は、かかる従来技術の
問題点に鑑み、画像データベースに含まれている画像を
効率よく検索する画像検索装置、画像検索方法及び、特
定の画像を表示できる画像表示装置を提供することにあ
る。

【０００７】より具体的に、本発明の第１の目的は、対
象画像を効率よく迅速に検索することができる画像検索
方法及び装置を提供し、また検索精度の高い検索方法及
び装置を提供することにある。

【０００８】更に、本発明の第２の目的は、画像検索、
閲覧などの作業を通して、ユーザの嗜好に沿った検索内
容を学習させ、より正確な検索ができる画像検索方法及
び装置を提供することにある。

【０００９】更に、本発明の第３の目的は、例えばイン
ターネットなどのネット上での画像検索を容易にし、ま
た、画像検索によって抽出された画像データのアップロ
ードを容易にすることができる技術を提供することにあ
る。

【００１０】更に、本発明の第４の目的は、検索しよう
とするものが、検索対象画像があいまいでも、画像デー
タベース内から該当する素早く検索でき、また画像デー
タベースの分類情報の利用を容易にし、画像に関するコ
メントやキーワードを入力しやすくする技術を提供する
ことにある。

【００１１】更に、本発明の第５の目的は、画像データ
ベース内の画像の概要を素早く閲覧することができ、画
像データベース内からあいまいな画像を素早く検索する
技術を提供することにある。

【００１２】

【課題を解決するための手段】かかる目的を達成するた
め、本発明の画像検索装置は、１又は複数のフォルダか
ら構成されるディレクトリ構造をもった画像データベー
ス内より、検索対象画像に類似の画像を検索する検索手
段と、検索された画像を表示する表示手段とを有するこ
とを特徴とする。

【００１３】本発明の画像検索装置は、画像データベー
ス内より、画像を検索する検索手段と、検索された画像
を表示する表示手段とを有し、前記検索手段は、同一あ
るいは時間軸上で近いフォルダ内の画像で、画像の端部
の類似度が高い画像を検索し、前記表示手段は、画像の
端部を重ねて複数の画像をつなぎ合わせることによって
得られる合成画像を表示することを特徴とする。

【００１４】本発明の画像検索装置は、画像データベー
ス内より、検索対象画像に類似の画像を検索する検索手
段と、検索された画像を表示する表示手段とを有し、前
記検索手段は、画像を選択した頻度を特徴量の１つとし
て類似画像を検索することを特徴とする。

【００１５】本発明の画像検索方法は、画像データベー
ス内における画像の選択頻度を記憶するステップと、画
像を選択した頻度を特徴量の１つとして、検索対象画像
に類似する画像を検索するステップとを有することを特
徴とする。

【００１６】本発明の画像検索装置は、画像データベー
ス内より、検索対象画像に類似の画像を検索する検索手
段と、検索された画像を表示する表示手段と、表示され
た画像の履歴を記録して、１度表示された画像の表示を
制限する表示制御手段とを有することを特徴とする。

【００１７】本発明の画像検索方法は、画像データベー
ス内における検索対象画像に類似する画像を検索するス
テップと、検索された画像を候補画像として表示するス
テップと、表示された画像の履歴を記録して、１度表示
された画像を候補画像から除外するステップとを有する
ことを特徴とする。

【００１８】本発明の画像検索装置は、画像データベー
ス内の画像をカテゴリに分類する手段と、画像データベ
ース内よりカテゴリ情報をもとに、検索対象画像に類似
の画像を検索する検索手段と、検索された画像を表示す
る表示手段とを有し、前記表示手段は、前記検索手段に
より検索された画像を表示する前に、それぞれのカテゴ
リを代表する画像を表示することを特徴とする。

【００１９】本発明の画像検索方法は、画像データベー
ス内の画像をカテゴリ毎に分類するステップと、前記カ
テゴリを代表する画像を表示するステップとを有するこ
とを特徴とする。

【００２０】本発明の画像検索装置は、画像データベー
ス内より、検索対象画像に類似の画像を検索する検索手
段と、検索された画像を表示する表示手段とを有し、前
記表示手段は、色を表す画像を表示可能となっており、
前記検索手段は、前記表示手段により表示された画像に
対応する色に類似の色を含んだ画像を検索することを特
徴とする。

【００２１】本発明の画像検索方法は、色を表す画像を
表示するステップと、画像データベースの中から、表示
された画像に対応する色に類似する色を含んだ画像を検
索するステップと、検索された画像を表示するステップ
とを有することを特徴とする。

【００２２】本発明の画像検索装置は、画像データベー
ス内より、検索対象画像に類似の画像を検索する検索手
段と、検索された画像を表示する表示手段とを有し、前
記表示手段は、前記画像データベースに含まれていない
画像を取得して表示し、前記検索手段は、前記表示手段
により表示された画像に類似する画像を検索することを
特徴とする。

【００２３】本発明の画像検索方法は、画像を取得して
表示するステップと、画像データベースの中から、取得
した画像に類似の画像を検索するステップと、検索され
た画像を表示するステップとを有することを特徴とす
る。

【００２４】本発明の画像検索装置は、画像データベー
ス内より、検索対象画像に類似の画像を検索する検索手
段と、表示された画像を一括してレタッチするレタッチ
手段とを有することを特徴とする。

【００２５】本発明の画像検索方法は、画像データベー
ス内の画像を検索するステップと、検索された画像を一
括してレタッチするステップとを有することを特徴とす
る。

【００２６】本発明の画像検索装置は、画像を表示する
表示手段と、前記表示手段において表示された画像上に
おいて、位置指定が行われた場合に、指定された位置を
記憶する記憶手段と、前記記憶手段に記憶された位置に
基づいて、画像データベース内の画像を検索する検索手
段とを有することを特徴とする。

【００２７】本発明の画像検索装置は、画像データベー
ス内の画像についてハードコピーに関する情報を記憶す
る記憶手段と、前記ハードコピーに関する情報に基づい
て、画像を検索する検索手段とを有することを特徴とす
る。

【００２８】本発明の画像検索装置は、文字キーワード
を入力可能な入力手段と、前記入力手段により入力され
た文字キーワードに基づいて、画像の特徴量とそのキー
ワードに関連するネットワークアドレスを設定する設定
手段とを有することを特徴とする。

【００２９】本発明の画像検索装置は、特定画像の特徴
量を抽出する抽出手段と、前記抽出手段が抽出した特徴
量を含む文字キーワードを決定する決定手段と、決定さ
れた文字キーワードに関連するネットワークアドレスか
ら画像を取得する手段と、取得された画像の特徴量を抽
出して、特定画像の特徴を含むか否かを判定する判定手
段とを有することを特徴とする。

【００３０】本発明の画像検索装置は、画像データベー
ス内の画像を検索する際に、同一カテゴリ内の画像を優
先的に検索する画像検索装置であって、１又は複数の画
像に共通するカテゴリを追加する追加手段を有すること
を特徴とする。

【００３１】本発明の画像検索装置は、画像データベー
スの画像に音情報を付随させる付随手段と、前記音情報
に基づいて画像を検索する検索手段とを有することを特
徴とする。本発明の画像表示装置は、画像データベース
内の画像を選択する選択手段と、選択された画像を筆頭
に、画像データベース内の画像を順序づける順序づけ手
段と、順序づけに従い画像を表示する表示手段とを有す
ることを特徴とする。

【００３２】

【作用】本発明の画像検索装置によれば、１又は複数の
フォルダから構成されるディレクトリ構造をもった画像
データベース内より、検索対象画像に類似の画像を検索
する検索手段と、検索された画像を表示する表示手段と
を有するので、かかるディレクトリ構造を利用すること
により、効率よく画像を検索することができる。本発明
の画像検索装置によれば、画像データベース内より、画
像を検索する検索手段と、検索された画像を表示する表
示手段とを有し、前記検索手段は、同一あるいは時間軸
上で近いフォルダ内の画像で、画像の端部の類似度が高
い画像を検索し、前記表示手段は、画像の端部を重ねて
複数の画像をつなぎ合わせることによって得られる合成
画像を表示するので、例えば画像データベースの画像を
用いてパノラマ画像を合成したい場合、検索手段が自動
的につながる画像を検索するため、効率的に画像を合成
することができる。

【００３３】本発明の画像検索装置によれば、画像デー
タベース内より、検索対象画像に類似の画像を検索する
検索手段と、検索された画像を表示する表示手段とを有
し、前記検索手段は、画像を選択した頻度を特徴量の１
つとして類似画像を検索するので、例えば画像データベ
ースの画像の内、良く利用された画像は共通する特徴を
有すると考えられるため、その頻度を利用すれば、より
効率的に画像を検索することができる。

【００３４】本発明の画像検索方法によれば、画像デー
タベース内における画像の選択頻度を記憶するステップ
と、画像を選択した頻度を特徴量の１つとして、検索対
象画像に類似する画像を検索するステップとを有するの
で、例えば画像データベースの画像の内、良く利用され
た画像は共通する特徴を有すると考えられるため、その
頻度を利用すれば、より効率的に画像を検索することが
できる。

【００３５】本発明の画像検索装置によれば、画像デー
タベース内より、検索対象画像に類似の画像を検索する
検索手段と、検索された画像を表示する表示手段と、表
示された画像の履歴を記録して、１度表示された画像の
表示を制限する表示制御手段とを有するので、表示手段
が１度表示した画像は、ユーザが既に考慮外としている
画像とみなすことで、より効率的な画像検索を可能とし
ている。

【００３６】本発明の画像検索方法によれば、画像デー
タベース内における検索対象画像に類似する画像を検索
するステップと、検索された画像を候補画像として表示
するステップと、表示された画像の履歴を記録して、１
度表示された画像を候補画像から除外するステップとを
有するので、１度表示された画像は、ユーザが既に考慮
外としている画像とみなすことで、より効率的な画像検
索を可能としている。本発明の画像検索装置によれば、
画像データベース内の画像をカテゴリに分類する手段
と、画像データベース内よりカテゴリ情報を元に、検索
対象画像に類似の画像を検索する検索手段と、検索され
た画像を表示する表示手段とを有し、前記表示手段は、
前記検索手段により検索された画像を表示する前に、そ
れぞれのカテゴリを代表する画像を表示するので、表示
された画像を見ることによって、その画像が含まれるカ
テゴリがいかなるものかユーザは直ちに認識でき、それ
により効率的な画像検索を可能にしている。

【００３７】本発明の画像検索方法によれば、画像デー
タベース内の画像をカテゴリ毎に分類するステップと、
前記カテゴリを代表する画像を表示するステップとを有
するので、表示された画像を見ることによって、その画
像が含まれるカテゴリがいかなるものかユーザは直ちに
認識でき、それにより効率的な画像検索を可能にしてい
る。

【００３８】本発明の画像検索装置によれば、画像デー
タベース内より、検索対象画像に類似の画像を検索する
検索手段と、検索された画像を表示する表示手段とを有
し、前記表示手段は、色を表す画像を表示可能となって
おり、前記検索手段は、前記表示手段により表示された
画像に対応する色に類似の色を含んだ画像を検索するの
で、色を用いることにより効率的な画像検索を可能とし
ている。

【００３９】本発明の画像検索方法によれば、色を表す
画像を表示するステップと、画像データベースの中か
ら、表示された画像に対応する色に類似する色を含んだ
画像を検索するステップと、検索された画像を表示する
ステップとを有するので、色を用いることにより効率的
な画像検索を可能としている。

【００４０】本発明の画像検索装置によれば、画像デー
タベース内より、検索対象画像に類似の画像を検索する
検索手段と、検索された画像を表示する表示手段とを有
し、前記表示手段は、前記画像データベースに含まれて
いない画像を取得して表示し、前記検索手段は、前記表
示手段により表示された画像に類似する画像を検索する
ので、例えば検索しようとする画像の特徴をユーザが指
摘できない場合でも、画像データベース外によく似た画
像があれば、これを用いることにより、より効率的な画
像検索が可能となる。

【００４１】本発明の画像検索方法によれば、画像を取
得して表示するステップと、画像データベースの中か
ら、取得した画像に類似の画像を検索するステップと、
検索された画像を表示するステップとを有するので、例
えば検索しようとする画像の特徴をユーザが指摘できな
い場合でも、画像データベース外によく似た画像があれ
ば、これを用いることにより、より効率的な画像検索が
可能となる。

【００４２】本発明の画像検索装置によれば、画像デー
タベース内より、検索対象画像に類似の画像を検索する
検索手段と、表示された画像を一括してレタッチするレ
タッチ手段とを有するので、レタッチが必要な類似画像
を一括してレタッチできる。本発明の画像検索方法によ
れば、画像データベース内の画像を検索するステップ
と、検索された画像を一括してレタッチするステップと
を有するので、レタッチが必要な類似画像を一括してレ
タッチできる。

【００４３】本発明の画像検索装置によれば、画像を表
示する表示手段と、前記表示手段において表示された画
像上において、位置指定が行われた場合に、指定された
位置を記憶する記憶手段と、前記記憶手段に記憶された
位置に基づいて、画像データベース内の画像を検索する
検索手段とを有するので、例えば人物画像の顔など指定
された位置を利用して、より効率的な検索が可能とな
る。

【００４４】本発明の画像検索装置によれば、画像デー
タベース内の画像についてハードコピーに関する情報を
記憶する記憶手段と、前記ハードコピーに関する情報に
基づいて、画像を検索する検索手段とを有するので、例
えばハードコピー回数の多少により画像を分けて、より
効率的に検索ができる。

【００４５】本発明の画像検索装置によれば、文字キー
ワードを入力可能な入力手段と、前記入力手段により入
力された文字キーワードに基づいて、画像の特徴量とそ
のキーワードに関連するネットワークアドレスを設定す
る設定手段とを有するので、文字キーワードを利用して
より効率的な画像検索が可能となる。

【００４６】本発明の画像検索装置によれば、特定画像
の特徴量を抽出する抽出手段と、前記抽出手段が抽出し
た特徴量を含む文字キーワードを決定する決定手段と、
決定された文字キーワードに関連するネットワークアド
レスから画像を取得する手段と、取得された画像の特徴
量を抽出して、特定画像の特徴を含むか否かを判定する
判定手段とを有するので、予め画像に文字キーワードが
付加されていなくても、前記決定手段が文字キーワード
を決定するので、それにより、より効率的な画像検索が
可能となる。

【００４７】本発明の画像検索装置によれば、画像デー
タベース内の画像を検索する際に、同一カテゴリ内の画
像を優先的に検索する画像検索装置であって、１又は複
数の画像に共通するカテゴリを追加する追加手段を有す
るので、例えばユーザがお気に入りの画像をひとまとめ
にして同一カテゴリに納め、かかるカテゴリを追加すれ
ば、以降の検索を効率的に行うことができる。

【００４８】本発明の画像検索装置によれば、画像デー
タベースの画像に音情報を付随させる付随手段と、前記
音情報に基づいて画像を検索する検索手段とを有するの
で、例えば画像に付随して、「ジンブツ」、「フウケ
イ」など関連する音声を吹き込んでおけば、これを利用
して、より効率的な画像検索が可能となる。

【００４９】本発明の画像表示装置によれば、画像デー
タベース内の画像を選択する選択手段と、選択された画
像を筆頭に、画像データベース内の画像を順序づける順
序づけ手段と、順序づけに従い画像を表示する表示手段
とを有するので、選択された画像に関連する度合いの高
い画像が順次表示され、より効率的に画像を閲覧可能と
なる。

【００５０】

【発明の実施の形態】以下、本発明による実施の形態
を、図面を参照して説明する。

【００５１】図１は、本実施の形態を説明するための図
である。図１において、パソコン１０は、ネットワーク
Ｎを介して大記憶容量のサーバー２０に接続されてい
る。一方、例えばラボなどに設置されているフィルムス
キャナ３０も、ネットワークＮを介してサーバー２０に
接続されている。サーバー２０には、画像データベース
が構築されている。尚、画像データベースは必ずしもサ
ーバー２０に構築される必要はなく、パソコン１０のハ
ードディスク内に構築されても良い。かかる場合、フィ
ルムスキャナ３０からの画像データは、ＣＤ−Ｒなどの
記憶媒体を介して、パソコン１０に入力されうる。

【００５２】サーバー２０の画像データベースに画像を
登録する態様について説明する。ラボにおいて、ユーザ
が銀塩カメラで撮影することによって得られたネガフィ
ルムを、フィルムスキャナ３０により画像データに変換
する。かかる画像データは、ネットワークＮを介してサ
ーバー２０に送信され、画像として画像データベースに
登録されることとなる。

【００５３】ここで、画像を登録する際に、そのまま保
存するのでは、後から特定の画像を検索する手間がかか
る。そこで、本実施の形態においては、ディレクトリ構
造を形成して、画像に係るデータを階層的に記憶するよ
うにしている。

【００５４】図２は、かかるディレクトリ構造の一例を
示す図である。図２において、上層ディレクトリには、
例えば「１９９８０１０１．００１」という名称のディ
レクトリが形成される。これは、かかる名称が（西暦年
号４文字）＋（月２文字）＋（日２文字）＋（数字３文
字）から構成され、すなわち１９９８年１月１日に読み
取られた１番目のネガフィルムであることを示してい
る。

【００５５】従って、このディレクトリ名から、画像の
登録日を読み取ることができる。同一ネガフィルム中の
画像にかかる各フォルダ（ＫＮ００１００１．ＪＰＧ
〜）は、このディレクトリ中に全て格納される。

【００５６】尚、デジタルスチルカメラなどにより撮像
された画像も、同様の態様で、かかるディレクトリ構造
内に記憶することが可能である。かかる場合、ネガフィ
ルムに対応するのが、メモリカードなどの記録媒体であ
るから、そのメモリカード毎に上層ディレクトリが一つ
形成されることとなる。このような上層ディレクトリに
おける各ディレクトリを、以下ロットと称する。

【００５７】更に、このディレクトリには、グルーピン
グした画像の一覧を示すＨＴＭＬファイルを置くディレ
クトリ（ＨＴＭＬ）が形成されている。本実施の形態に
おいては、画像フォーマットはｊｐｅｇ、ＦｌａｓｈＰ
ｉｘに対応している。

【００５８】図３は、ディレクトリ構造の変形例を示す
図である。図３による例の場合には、上層ディレクトリ
には、「Ａｌｂｕｍ＿０１Ｂ」、「Ａｌｂｕｍ＿０４
Ｂ」、Ａｌｂｕｍ＿１６Ｂ」なる名称のディレクトリが
形成されており、これは、それぞれ１Ｂａｓｅ、４Ｂａ
ｓｅ、１６Ｂａｓｅの画像を格納していることを意味し
ている。それより下層のディレクトリは、図２に示すも
のと同様である。

【００５９】次に、このようにして構築されている画像
データベース内から、特定の画像を検索する態様につい
て説明する。図４は、図１のパソコン１０の画面表示例
を示す図である。ユーザが画像検索ソフトウエアを起動
すると、初期画面として図４に示す表示が画面に現れる
ようになっている。

【００６０】ここで表示される複数枚の画像は、例えば
画像データベース内の画像をあらかじめ決められたクラ
スタ数になるように統計的に分類し、各クラスタを代表
する画像である。代表する画像は、例えば各ロットの１
番目の画像としても良い。

【００６１】ユーザは、自分が探したい画像に類似して
いる（例えば、風景で山が写っているとか、人物が写っ
てるなど）と思われる画像を選択し、マウス（不図示）
などを用いてかかる画像をクリックする。このとき、選
択された画像を今後キー画像と呼ぶ。

【００６２】パソコン１０は、キー画像に類似する画像
を画像データベース内から探索する。より具体的には、
選択された画像に対応する特徴量と、他の画像の特徴量
の相対距離を求めて類似度を計算する。ここで、距離が
短いほど類似度は高くなるように座標軸が設定される。
画像の特徴量のデータファイルは、パソコン１０のハー
ドディスク等に記録される。特徴量は、色、周波数分布
等の一般的な特徴の他に、時間を表す量として、例えば
データベース上での位置、あるいは日付に相当するフォ
ルダ名を取り入れ、画像が登録された日時、あるいは画
像が撮影された日時、場合によっては画像が修正された
日時も検索の際の考慮にいれる。すなわち、選択された
画像を撮影したあるいは、登録した日時等に近い画像ほ
ど優先的に検索されるようになる。

【００６３】これは、電子アルバムで検索する場合、時
間のファクターがキーとなる場合が多いためである。キ
ー画像と同一ロットの画像の内、類似度の高い順番に所
定の枚数は、とくに類似度を高くすると、より時間のフ
ァクターが大きくなるという傾向がある。

【００６４】パソコン１０は、類似度の高い順番にサム
ネール画像をディスプレイに表示する。図４において、
画像の右側の［Ｌｏｔ］のボタンＢＬをクリックする
と、パソコン１０は、画面を切り替えて同一ロットの画
像をすべて表示することができる。かかる場合、同一ロ
ット内で類似度を調べて、類似度の高い順に画像を並べ
替えて表示しても良い。これにより、ユーザーはより早
く探したい画像に到達することができる。

【００６５】図４の左上の画像をキー画像として選択し
た場合に、その類似画像を表示した画面例を図５に示
す。図５の例においては、パソコン１０は、画像データ
ベースの中から、主要被写体として二人の人物が撮影さ
れた画像を類似画像として探索している。

【００６６】１度目の検索で、ユーザの所望する画像が
得られなかった場合、更に、ユーザは検索を続行でき
る。例えば図５に示す例において、右下の画像をクリッ
クすることによって選択すると、それに類似する画像
（例えば海の風景画像を含んだもの）が、同様に画面上
に表示されることとなる。

【００６７】この際、パソコン１０は、画像が表示され
た履歴を保存しておき、検索の過程で１度表示された画
像は、表示されないようにすることもできる。ユーザが
１度閲覧したにもかかわらず、選択しなかった画像は、
検索対象画像でないとみなして、再度表示されることを
防止し、それにより迅速な検索を達成するのである。探
したい画像が見つかるまで同様の動作を繰り返せば良
い。かかる履歴は、不図示のリセットボタンをクリック
することにより、リセットされるようにしても良い。

【００６８】その他の機能として、パソコン１０に、以
下のような機能を付加することが考えられる。いずれ
も、検索しやすすくするための補助機能である。

【００６９】（１）画像の右側の［Ｉｎｆｏ］のボタン
ＢＩをクリックするとサムネールではなく、その元画像
が大きく表示され、併せて、撮影日時、大きさ等の画像
に関する情報がテキストで表示される。これらの情報
は、例えば画像がＩＸ２４０カートリッジ入りフィルム
（いわゆるＡＰＳフィルム）に記録されたものであれ
ば、フィルムの磁気記録層に書き込まれた情報から得ら
れるし、画像ファイルのへッダーに書き込まれた情報か
らも得られる。

【００７０】（２）［キー画像履歴表示］ボタンＢＫを
クリックすると、これまでに選択したキー画像のー覧が
表示され、その時の状態に戻ることができる。

【００７１】（３）［カテゴリー表示］ボタンＢＣをク
リックすると、初期画面に戻ることができる。

【００７２】（４）［ロット代表表示］ボタンＢＰをク
リックすると、スタート画面として、ロットを代表する
数枚の画像が時系列的に表示される。

【００７３】このように、本実施の形態によれば、時間
軸上の位置を特徴量に加えているために、高速的に探し
たい画像を検索することができる。また、画像データベ
ースが時間軸に対応したディレクトリ構造となっている
ため、時間軸上の位置を簡単に求めることができる。

【００７４】更に、本実施の形態によれば、ユーザが探
索しようとする画像を具体的に特定できなくても、例え
ば確か同じ頃撮影した画像があったとか、あるいは人物
が３人で写っていたとか、山をバックに撮影したはずだ
とか曖昧な情報でも、パソコン１０が、画像データベー
ス中から類似画像を検索することができるため、効率の
良い検索が可能となっている。また、そのような検索を
行う上で、予め画像に属性等を付与する必要がないとい
う利点もある。

【００７５】尚、記録媒体上の画像データをディレクト
リ構造ごと、パソコン上のハードディスクにコピーして
使用すると、アクセススピードが上がり、検索スピード
を上げることができる。

【００７６】更に、画像データベースの作成は、ラボの
サービスを利用することに限られるわけではなく、画像
検索のソフトウェアを利用して、ユーザー個人が自宅の
パソコンを用いて同様な構造をもったデータベースを作
成することも可能である。

【００７７】本実施の形態の変形例として、図４に示す
初期画面で［カテゴリー表示］ボタンＢＣをクリックす
るとメニューバーが表示され、初期画面に表示される代
表画像を変えることができるようにすることが考えられ
る。

【００７８】かかる場合、デフォルトとして、上述した
実施の形態のごとく、統計的に分類された各クラスタの
代表画像を表示し、［カラー画像］を選択すると、カラ
ーピッカー（不図示）が初期画面に表示され、ユーザー
が探したい画像の中で支配的な色を選択することができ
るようにしても良い。

【００７９】例えば、一般的に夏山の風景では、「緑」
色が支配的と考えられ、海の風景では、「青」色が支配
的と考えられる。従って、色を選択することによって、
ある程度画像の絞り込みが可能となる。このように、色
に関する特徴量を利用して検索を行い、選択した色の支
配率の高い程（すなわち、選択した色の割合が高いほ
ど）類似度が高いと判断し、その結果が画面上に表示さ
れる。

【００８０】上述の変形例では、カラーピッカーを用い
て色を選択しているが、その代わりに［山］［海］等の
画像の内容を表す言葉を選択できるようにして、それぞ
れの言葉を代表する画像が表示されるようにしても良
い。また、あらかじめキーワードが付加されている場合
は、対応する画像を表示すればよいし、［山］［海］を
代表する画像をあらかじめ決めておき、その画像と類似
度の高い画像を表示してもかまわない。尚、パソコン１
０は、画像の内容、又はキーワードが画像に付されてい
ればかかるキーワードに基づいて、画像が属すべきカテ
ゴリを決定することができる。

【００８１】このように本変形例によれば、ユーザーが
自分が探したい画像に最もマッチした初期画面を選択す
ることができるため、より早く所望の画像を見つけるこ
とができる。

【００８２】別な変形例としては、図４に示す初期画面
に表示される画像として、データべースに登録されてい
ない画像を取り込めるようにすることも考えられる。例
えば、図６に示すような［画像取り込み］のボタンＢＴ
を設け、このボタンＢＴをクリックすると画像選択のダ
イアログボックスが表示され、データベース外の画像
（インターネットを介して得ても良い）を選択するよう
にする。また、この画像のサムネール画像がない場合
は、自動的にサムネールを作成するか、また一部をトリ
ミングして選択された画像を表示できるようにすれば良
い。

【００８３】本変形例によれば、スタート画像の選択肢
として、データベース外の画像を選択できることで、ユ
ーザーが自分が探したい画像に最もマッチした初期画面
を選択することができるため、より早く見つけることが
できる。

【００８４】次に、第２の実施の形態について説明す
る。まず、パソコン１０で画像検索ソフトを起動する
と、図７に示す初期画面が表示される。ユーザが［レタ
ッチ…］ボタンＢＲをクリックすると、メニューバーが
表示され、「パノラマ」「赤目補正」等の項目が表示さ
れる（不図示）。ここでユーザが「パノラマ」を選択す
ると、パソコン１０は以下のような処理を行う。

【００８５】パソコン１０は、同一ロット（ロットが異
なると撮影場所も異なる可能性が高い）内で、画像の上
下左右の端部のエッジに関する特徴量の類似度の高い画
像の組み合わせを検索する。この際、対象画像の左端と
それ以外の画像の右端との類似度、右端と左端、上端と
下端、下端と上端との類似度をそれぞれ求め、類似度が
所定のしきい値よりも高い画像を、パノラマ画像を構成
する画像として検索する。

【００８６】パソコン１０は、類似度の高い端部につい
て、パターンマッチングを行い、重なり合う位置を求め
て、２枚の画像をつなぎ合わせることによって合成す
る。パターンマッチングについては、既に公知であるた
め、その詳細は省略する。合成された画像は、画面上に
表示される。

【００８７】一方、ユーザが「赤目補正」を選択した場
合には、パソコン１０は以下のような処理を行う。ま
ず、ユーザーはデータベースの中から赤目になっている
画像を１枚検索する。次に、ユーザが「赤目補正」を選
択すると、パソコン１０は、赤目の画像に対して類似度
の高い画像について、更に赤目が存在するかどうか判断
し、赤目であると判断した場合は赤目を補正する。更
に、パソコン１０は、赤目を補正した画像を表示する。

【００８８】このように、本実施の形態によれば、選択
した処理が必要な画像を自動で検索し、一括して処理す
ることができる。尚、画像の一括処理は、赤目に限ら
ず、例えば撮影された人物の衣服の色を統一するように
変えたりすることも可能である。

【００８９】次に、第３の実施の形態について説明す
る。かかる実施の形態においては、画像をクリックする
ユーザの操作に従って、かかる画像におけるユーザにと
って特徴あると考えられる部位を判別し、以降の検索に
これを利用する。より具体的には、まずユーザに、キー
画像において重要と思われる部位をクリックさせ、その
場所を重点情報としてファイルとともに保存しておく。
キー画像は何回も選択でき、次第にユーザの所望する画
像に近づけるようにする。更に、画像の特徴量を抽出す
るためには、画像の複雑さと色分布などを用いる。

【００９０】まず、第１のステップとして、パソコン１
０はキー画像を表示する。既に画像データベース中にあ
る画像をクラスタリングし、そのなかで代表的な画像を
表示する。図８は、検索座標上にプロットされ、クラス
タリングされた画像の関係を示すものであり、縦軸に画
像の色味、横軸に画像の複雑さをとって示している。画
像の複雑さは、ある特定の空間周波数成分で評価でき、
画像の色味は色相で評価できる。各画像を分析して、色
味と複雑さとを求め、検索座標上でプロットすると、例
えば５つのグループに分けられる。

【００９１】このようにすることで、画像データベース
内の画像を分析することによって、クラスタリングが可
能となり、新たな画像をデータベースに登録する場合で
も、同様なクラスタリングに従えば良く、新たな属性入
力をしなくてもすむ。ここで、属性とは、花、人、撮影
データ、などのことを指す。

【００９２】次に、第２のステップとして、画像の指定
を行う。具体的には、ユーザにもっとも重要と考える部
位を指定させる。この例では、一番最初の画面の人の顔
を指定している。図９の画像上に表示される×印がその
位置である。

【００９３】この処理は、キー画像（ユーザの所望する
画像にもっとも近い画像）の指定と兼用することで、効
率的に学習ができる。もちろん兼用せずに別の登録モー
ドで順に注目点を指定することも可能である。

【００９４】更に、第３のステップとして、座標の記録
を行う。この画像に対するｘｙ座標は取り込まれ、記録
される。この結果はそのファイルのデータに付け加えら
れるか、または、別ファイルに記録される。尚、位置指
定された画像に対応づけて、パソコン１０は、自動的
に、使用目的、使用者、使用アカウントなどの情報を記
憶するようにしても良い。

【００９５】繰り返し指定された場合には、ｘｙ座標が
複数発生するが、それらはすべて記録される。この結
果、複数の画像の集中度合いは画像の中の重要度を示す
ことになる。もし、複数の位置データが近接していれ
ば、注目範囲は狭いものと考えられる。また、分散して
いれば広いものと考えられる。

【００９６】第３の実施の形態の変形例として、画像内
の特殊な場所（例えば隅）を指定した場合には、重点位
置という認識を与える代わりに、別な情報を与えること
もできる。例えば、隅を指定したときには、画面全体を
注目範囲とし、中央のある範囲内であれば、注目範囲を
画面のサイズの半分とするというように決めれば、より
便利に検索ができる。

【００９７】更に、第４のステップとして、座標周辺画
像の特性を調査し、結果を表示する。注目点の周囲の画
像の分析を行い、指定した部位の周囲の色や複雑さを調
べる。同じ被写体であっても、例えば、広角レンズで撮
影して脇に写っている場合と、望遠レンズで撮影して中
央に大きく写っている場合とでは、被写体が異なって見
える場合もあるが、このような処理により、同一被写体
の認識を容易にし、検索をしやすくしている。

【００９８】図１０は、検索された画像が表示された例
を示す図である。各画像において、すでに注目画素が指
定された位置が、☆（スター）印で示されている。使用
者はさらに同じ場所を指定しても、別の場所を指定して
もよい。同じ位置であれば、その画像の注目点はその場
所であることが明確になり、違う位置であれば画像全体
を見ていると判断できる。

【００９９】第５のステップとして、検索の繰り返しを
行うことができる。図１０で表示された画像の中で、ユ
ーザは、まず自分の考えている画像を選び、位置を指定
しながら、次第に自分の所望する画像に近づくように
し、最終的にその画像に到達できるようにすると良い。
かかる場合、現在どこら辺りを探索しているのか、ユー
ザに知らせるために、検索マップを用いることができ
る。

【０１００】図１１は、検索マップを示す図である。例
えば、最初のキー画像をＧ１とし、次のキー画像をＧ２
とし、更に次のキー画像をＧ３とし、更に次のキー画像
をＧ４とし、各画像を矢印で結ぶと、この矢印は、検索
マップ上、ある画像ＧＴの周囲を取り巻くようになるこ
とがある。かかる場合、ユーザが所望する画像は、矢印
で囲われた領域内に収まっている可能性が高いことが判
る。一方、全画像を検索していないにも関わらず、キー
画像が重複するような場合には、検索が閉ループに入っ
てしまったものとして、警告表示することができる。

【０１０１】本実施の形態の変形例としては、画像のハ
ードコピー回数を記録に残すことが考えられる。画像検
索は、最終的にはハードコピーを得るために行うことが
多いので、例えばハードコピー回数の多い画像はユーザ
にとって重要な画像であると考えられ、それを記録に残
せば、より効率的に検索を行うことができる可能性が高
まる。また、ハードコピーしたものは、検索対象として
優先度を低めるというようなこともでき、表示順序を変
更することで、検索時にユーザの至便性を図れる。

【０１０２】更に、画像の作成、または修正時刻の情報
を用いて、常に近い時間の画像も表示するようにする
と、ユーザは記憶がよみがえりやすくなり、検索を効率
的に進めることができる。これには、画像が一回の撮影
（フイルム１本分、または、デジタルカメラで一回のメ
モリ分）分でデイレクトリ構造にすることが考えられ
る。

【０１０３】このように、本実施の形態によれば、画像
において位置指定した内容により検索を行うため、使用
するうちに次第に精度の高い検索を行うことができる。
また、ユーザに画像中の重要と思われる箇所を指定させ
ることにより、画像中の注目点が明確になり、精度の高
い検索を行うことができる。

【０１０４】更に、画像検索のキー画像の指定ととも
に、位置指定を行うため、特別な手間がいらないため検
索の簡便化を図れる。すでに注目点を指定した画像では
その情報を同時に表示することで、ユーザは注目点が複
数ある場合、２番目の注目点を指定することができる。
また、すでに注目したかどうかを画面を閲覧・検索中に
ユーザは把握することができる。

【０１０５】かかる実施の形態によれば、複数の人間、
または、複数の目的で検索を行うときに、それぞれにあ
った画像検索ができる。また、検索に用いるキー画像の
座標を表示することで、ユーザはどのように検索してい
るかを視覚的に把握することができる。更に、ハードコ
ピーした記録を残すことにより、ハードコピーのための
検索を容易にし、必要な画像だけハードコピーすること
ができるようになる。加えて、画像の検索精度を向上さ
せることができる。

【０１０６】次に、第４の実施の形態について説明す
る。図１２は、パソコン１０の表示画面を示す図であ
り、検索キーワードを用いて、サーバー２０の「画像デ
ータベース」フォルダ内の画像を検索する例を示してい
る。パソコン１０は、検索キーワードを、図１３に示す
ように、その特徴量と関連するＵＲＬとに対応づけて記
憶している。図１３に示す例では、「空」というキーワ
ードに対し、Ｌ^*，ａ^*，ｂ^*の色についての特徴と、そ
の色が存在する場所についての特徴を与えている。ＵＲ
Ｌは、「空」に関連するインターネット上のホームペー
ジを検索するために用いる。図１３の例では、Ｌ^*＝７
５、ａ^*＝−７，ｂ^*＝３５、画像の縦方向の上部３０％
・横方向に１００％領域を表している。

【０１０７】ユーザにより検索ボタンが押されると、パ
ソコン１０は、「画像データベース」フォルダ内の画像
データを解析し、図１３の特徴量を満たす画像領域が存
在するかを判定する。その条件を満たす画像は、順次画
面に表示される。「空」に関連するＵＲＬが下段に表示
される。ユーザがこの表示を選択すると、パソコン１０
は、そのＵＲＬに接続しＨＴＭＬファイル・画像データ
などをダウンロードし、画像を図示しない別のウィンド
ウに表示するか、または下段に表示する。

【０１０８】閲覧画面で、ユーザがＵＲＬボタンを選択
すると、パソコン１０は、表１のＵＲＬに順番に接続
し、画像データをダウンロードする。更にダウンロード
された画像に対し、特徴量の条件を満たす画像を検索
し、画面に表示する。また、下段には同様に図１３に登
録されたＵＲＬを表示する。

【０１０９】ダウンロードの際に、パソコン１０は、そ
のＵＲＬ名のついたフォルダを作成し、そこにＨＴＭＬ
ファイル・画像データ等を保存する。そして、このフォ
ルダ内の画像に対し検索を行う。

【０１１０】図１４は、画像ファイルを用いた画像検索
の例を示す図である。まず、パソコン１０は、サーバー
２０から初期画像データを読み込み画面に表示する。こ
こでユーザが検索ボタンを押すとその画像の特徴量を抽
出し、登録されているキーワードの特徴量と照合する。
その特徴量を含むキーワードのＵＲＬから画像データを
ダウンロードし、検索を行い画面表示する。

【０１１１】検索フォルダが選択されたときは、パソコ
ン１０は、そのフォルダ内の画像から特徴量を抽出し、
初期画像の特徴量を含む画像を画面に表示する。初期画
像の一部分を選択し、その選択された部分の特徴量
（色、座標）を使い検索することも可能である。

【０１１２】尚、図１３に示す例のごときテンプレート
を予めいくつか用意し、ユーザーが編集できるようにす
ることも可能である。また、図１３のＵＲＬに替えて、
ＩＰアドレスなどのネットワークアドレスを設定するこ
とも可能である。更に、特徴量は設定した数値に対し、
その前後に幅をもたせることも可能である。

【０１１３】このように本実施の形態によれば、ユーザ
の要求に応じ、インタネットから画像データをダウンロ
ードして、これを利用することができるため、より広範
囲な検索が可能となる。

【０１１４】次に、第５の実施の形態について説明す
る。検索の過程で、パソコン１０にはキー画像に類似す
る画像が順次表示されることとなるが、例えば同じよう
な画像が多数存在する場合に、これらが類似画像として
次々に検索され、狭い画面上に表示されると、なかなか
目的の画像に到達せず、検索に手間取ることも予想され
る。第５の実施の形態においては、かかる問題を以下の
ようにして緩和する。

【０１１５】尚、本実施の形態においても、上述した実
施の形態と同様に、キー画像に類似する画像を、画像デ
ータべースから順次選んで複数個表示し、その中から１
つの画像を選択することで次に表示される複数の画像が
決定する。これを、すべての画像が表示されるまで繰り
返すものとする。

【０１１６】パソコン１０は、画像の表示順序を、以下
のようにして決定する。まだ表示されていないデータべ
ース中の画像の、選択された画像に対する類似度を求
め、類似度の高い順に並べたときに、互いに類似画像は
表示しないようにするため、例えば２つおきというよう
に画像を間引いて表示する。つまり、例えば同一場所で
続けて撮影した画像のように、ほとんど同じ画像は、そ
のうち１枚のみが表示されるため、それにより高速閲覧
が可能となる。類似度の計算には、上述した実施の態様
のごとく、画像内容の色、周波数特性、構造、撮影時間
などを用いることができる。

【０１１７】更に、パソコン１０は、例えばディレクト
リ名などから、データベース内の画像をカテゴリ分け
し、カテゴリごとにまとめて表示することができる。順
次画像を表示していて、探したい画像に似た画像が表示
されたときに、その画像を基に画像検索モードに切り替
えることも可能である。そのときには、以前に表示した
画像も含めて検索を行うことで、見過ごした画像も検索
される。

【０１１８】また、パソコン１０は、表示画面を以下の
ように切り替えることができる。例えば、複数の画像を
表示し、画像をクリックするごとにその画像を基準とし
た複数の画像が表示されるようにできる。更に、任意の
時間ごとに次々と画像が切り替わり表示されるようにし
たり（図１５（ａ）参照）、１度にすべてが切り替わる
ようにしたり、画像が流れるように表示される（図１５
（ｂ）参照）ようにもできる。このような表示は、Ｊａ
ｖａによっても実現することが可能である。

【０１１９】この場合、表示間隔はユーザが任意に調整
でき、また表示を一時止めたり、前の画像や後の画像に
コマ送り表示することも可能である。図１５に示すよう
に、表示がどこまで進んだかがわかるように画像の表示
番号を、画像の右下に付加的に表示することもできる。
かかる番号は、画像に対応づけて履歴として保存しても
良い。また、画像の下方にスクロールバーなどを設け
て、全体の画像の内、現在閲覧している画像は、どの辺
りか表示しても良い。更に、画像の一部を重ねて、横や
縦にずらして表示することも可能である。加えて、最後
に表示される画像には、例えば「ＬＡＳＴ」という表示
を行って、最後であることをユーザに認識させるように
しても良い。

【０１２０】本実施の形態によれば、画像データベース
内の画像を素早く閲覧できると共に、ユーザが閲覧し易
い表示を提供でき、よりユーザフレンドリーなものとな
っている。

【０１２１】ところで、画像データベースにおいて、画
像に付随してキーワードなどを付せば、より効率的に画
像の検索が可能となる。しかしながら、キーワードなど
の入力は、画像が多く存在する場合には入力の手間が相
当にかかり、またキーワードの内容自体も撮影者本人で
なければ判らない場合もある。更に、行き当たりばった
りのキーワードを付しても、後の検索で使えないことも
ある。また、キーボードを用いて入力することは、キー
ボードに不慣れな人にとっては通常困難な作業であり、
時間がかかるという問題もある。そこで、以下に述べる
第６の実施の形態においては、かかる問題を以下のよう
にして緩和している。

【０１２２】図１６は、第６の実施の形態を説明するた
めの図である。図１６にしめすように、パソコン１０
は、画像データベース内から、複数の画像を選択して表
示する。その画像は、画像情報の特徴量でクラスタリン
グされた画像の中から１つずつ表示したり、例えば１週
間おきとか撮影時間を一定期間毎にずらした画像を表示
したり、乱数などを用いて適当な画像を表示することで
もよい。

【０１２３】次に、ユーザは、表示画像の中の気に入っ
た画像にチェックマークをいれる。より具体的には、表
示されている画像の中から、ユーザーが考えたテーマ
（例えば、「年賀状の候補」や「旅行中のスナップ」な
どの任意のテーマ）にあった画像、いわゆる「お気に入
り」画像の右横のチェックボックスＣＢに、マウスなど
を用いてクリックしてチェックマークをつける。図１６
の例では、中央下の画像と右下の画像にチェックマーク
が付されている。パソコン１０は、かかる画像を選択カ
テゴリーへ登録する。更に、高速閲覧で用いた表示順に
画像を表示することでも良い。

【０１２４】更に、ユーザは、表示している画像のなか
から、テーマに近い画像をクリックして、パソコン１０
に、その画像に対する類似度の高い画像や、時間の近い
画像などを複数表示させたり、ランダムに新たな画像を
表示させたりできる。このようなステップを繰り返し
て、お気に入り画像、テーマにあう画像をチェックして
いくことができる。

【０１２５】尚、チェックした画像を確認するために、
パソコン１０はユーザの要求に応じて、画像の一覧を表
示したり、画像の削除や追加登録などもできる。ユーザ
は、このカテゴリーに分別された画像に関して、一括し
てコメントやキーワード、音声情報などにより登録す
る。また、画像に個別に、例えば「年賀状」などとユー
ザが吹き込んだ音声を登録しても良い。

【０１２６】音声情報は、マイク（不図示）により入力
することができ、またパソコン１０内で文字に変換さ
れ、画像データベースにおいて画像と共に記録されるこ
ともできるし、音声自体を画像と共に記録しても良い。
かかる場合、画像の類似度は、記録された音声を周波数
分析し、その周波数特性が類似しているか否かで判別で
きる。

【０１２７】画像検索の際には、上述のようにしてユー
ザーが新たに作成したカテゴリも、画像検索の１つのカ
テゴリとして利用することができる。例えば、カテゴリ
の同じ画像を近似度の１つの指標とする検索機能の場合
は、選択カテゴリー内の画像も近似度の１つの指標とす
るのである。

【０１２８】また、複数の選択カテゴリにまたがって登
録されている画像は、ユーザーが重要と考えていて、そ
の利用価値は高い可能性があるので、カテゴリ情報に基
づいた検索の優先度をあげるようにすると良い。選択カ
テゴリとして、特定の人物の顔を登録した場合、同一又
は類似の顔を含む画像をそのカテゴリに登録し、人物別
のカテゴリ（すなわちアルバム）ができあがることとな
る。

【０１２９】このように、本実施の形態によれば、画像
データベース内の画像を、パソコン１０が自動的に決定
したカテゴリーに加え、ユーザが新たにカテゴリーを追
加できるため、個々のユーザにとってより検索のしやす
いものとなっている。

【０１３０】以上、本発明を実施の形態を参照して説明
してきたが、本発明は上記実施の形態に限定して解釈さ
れるべきではなく、適宜変更・改良が可能であることは
もちろんである。例えば、上述した実施の形態による画
像検索方法を実行する画像検索ソフトは、ＦＤやＣＤな
どの記録媒体に記録されて、パソコン１０にインストー
ルすることができる。

【０１３１】

【発明の効果】本発明によれば、画像データベースに含
まれている画像を効率よく検索することができる。

【図面の簡単な説明】

【図１】本実施の形態を説明するための図である。

【図２】本実施の形態のディレクトリ構造の一例を示す
図である。

【図３】ディレクトリ構造の変形例を示す図である。

【図４】図１のパソコン１０の画面表示例を示す図であ
る。

【図５】図４の左上の画像をキー画像として選択した場
合に、その類似画像を表示した画面例を示す図である。

【図６】画像取り込みボタンを設けた表示画面の例を示
す図である。

【図７】レタッチボタンを設けた表示画面の例を示す図
である。

【図８】検索座標でクラスタリングされた例を示す図で
ある。

【図９】画像における位置指定を行った例としての表示
画面を示す図である。

【図１０】検索された画像が表示された例を示す図であ
る。

【図１１】検索マップを示す図である。

【図１２】パソコン１０の表示画面を示す図である。

【図１３】検索キーワードと、画像の特徴量と、関連す
るＵＲＬと対応付けを示す図である。

【図１４】画像ファイルを用いた画像検索の例を示す図
である。

【図１５】表示画面上で、画像が表示される例を示した
図である。

【図１６】第６の実施の形態を説明するための図であ
る。

【符号の説明】

１０ パソコン ２０ サーバー ３０ フィルムスキャナ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 荘司 まどか 東京都八王子市石川町2970番地 コニカ株 式会社内 (72)発明者 鬼頭 伸一郎 東京都八王子市石川町2970番地 コニカ株 式会社内 (72)発明者 土生 祐介 東京都八王子市石川町2970番地 コニカ株 式会社内 Ｆターム(参考） 5B050 CA08 EA12 EA19 FA02 FA05 FA10 FA12 GA08 5B075 ND06 NK02 NK06 NK25 NR12 PP13 PP30 PQ02 PQ46 PQ48 PQ74 PR04 PR06 QM08

Claims (69)

【特許請求の範囲】
1. 【請求項１】 １又は複数のフォルダから構成されるデ
   ィレクトリ構造をもった画像データベース内より、検索
   対象画像に類似の画像を検索する検索手段と、検索され
   た画像を表示する表示手段とを有することを特徴とする
   画像検索装置。
2. 【請求項２】 前記検索手段は、画像を検索する際に、
   検索対象画像からの時間軸上の相対位置を求める手段を
   有し、前記相対位置を特徴量の１つとして類似画像を検
   索することを特徴とする請求項１に記載の画像検索装
   置。
3. 【請求項３】 検索対象画像からの時間軸上の相対位置
   を、フォルダ名、画像を登録した時間、画像を撮影した
   時間、画像を修正した時間の少なくとも一つより求める
   ことを特徴とする請求項２に記載の画像検索装置。
4. 【請求項４】 検索対象画像からの時間軸上の相対位置
   は、１又は複数の記録媒体に記憶されたデータより、ネ
   ットワークを介して得られることを特徴とする請求項２
   又は３に記載の画像検索装置。
5. 【請求項５】 前記検索手段は、画像を検索する際に、
   同一あるいは時間軸上で近いフォルダに含まれる画像の
   すべてもしくは一部を類似画像の候補とすることを特徴
   とする請求項２乃至４のいずれかに記載の画像検索装
   置。
6. 【請求項６】 前記表示手段は、類似画像の候補となっ
   た画像と、同一あるいは時間軸上で近いフォルダに含ま
   れる画像を表示することを特徴とする請求項２乃至５の
   いずれかに記載の画像検索装置。
7. 【請求項７】 フォルダに含まれる画像から複数の代表
   画像を抽出する手段を有し、検索の第一ステップとし
   て、この代表画像との類似度を求め、類似度が高い場合
   は、第二ステップとして、フォルダ内のすべての画像に
   ついて類似度を求めて検索することを特徴とする請求項
   １乃至６のいずれかに記載の画像検索装置。
8. 【請求項８】 画像データベース内より、画像を検索す
   る検索手段と、 検索された画像を表示する表示手段とを有し、 前記検索手段は、同一あるいは時間軸上で近いフォルダ
   内の画像で、画像の端部の類似度が高い画像を検索し、 前記表示手段は、画像の端部を重ねて複数の画像をつな
   ぎ合わせることによって得られる合成画像を表示するこ
   とを特徴とする画像検索装置。
9. 【請求項９】 画像データベース内より、検索対象画像
   に類似の画像を検索する検索手段と、 検索された画像を表示する表示手段とを有し、 前記検索手段は、画像を選択した頻度を特徴量の１つと
   して類似画像を検索することを特徴とする画像検索装
   置。
10. 【請求項１０】 画像データベース内における画像の選
    択頻度を記憶するステップと、 画像を選択した頻度を特徴量の１つとして、検索対象画
    像に類似する画像を検索するステップとを有することを
    特徴とする画像検索方法。
11. 【請求項１１】 画像データベース内より、検索対象画
    像に類似の画像を検索する検索手段と、 検索された画像を表示する表示手段と、 表示された画像の履歴を記録して、１度表示された画像
    の表示を制限する表示制御手段とを有することを特徴と
    する画像検索装置。
12. 【請求項１２】 前記表示制御手段は、前記履歴をリセ
    ットする機能を有することを特徴とする請求項１１に記
    載の画像検索装置。
13. 【請求項１３】 画像データベース内における検索対象
    画像に類似する画像を検索するステップと、 検索された画像を候補画像として表示するステップと、 表示された画像の履歴を記録して、１度表示された画像
    を候補画像から除外するステップとを有することを特徴
    とする画像検索方法。
14. 【請求項１４】 前記履歴をリセットするステップを更
    に有することを特徴とする請求項１３に記載の画像検索
    方法。
15. 【請求項１５】 画像データベース内の画像をカテゴリ
    に分類する手段と、 画像データベース内よりカテゴリ情報をもとに、検索対
    象画像に類似の画像を検索する検索手段と、 検索された画像を表示する表示手段とを有し、 前記表示手段は、前記検索手段により検索された画像を
    表示する前に、それぞれのカテゴリを代表する画像を表
    示することを特徴とする画像検索装置。
16. 【請求項１６】 前記表示手段は、統計的に分類された
    クラスタをカテゴリとすることを特徴とする請求項１５
    に記載の画像検索装置。
17. 【請求項１７】 前記表示手段は、画像に付加されたキ
    ーワードに基づき、画像をカテゴリ毎に分類することを
    特徴とす請求項１５又は１６に記載の画像検索装置。
18. 【請求項１８】 前記表示手段は、画像の内容に基づ
    き、画像をカテゴリ毎に分類することを特徴とする請求
    項１５乃至１７のいずれかに記載の画像検索装置。
19. 【請求項１９】 画像データベース内の画像をカテゴリ
    毎に分類するステップと、 前記カテゴリを代表する画像を表示するステップとを有
    することを特徴とする画像検索方法。
20. 【請求項２０】 統計的に分類されたクラスタをカテゴ
    リとするステップを有することを特徴とする請求項１９
    に記載の画像検索方法。
21. 【請求項２１】 画像に付加されたキーワードに基づ
    き、画像をカテゴリ毎に分類するステップを有すること
    を特徴とする請求項１９又は２０に記載の画像検索方
    法。
22. 【請求項２２】 画像の内容に基づき、画像をカテゴリ
    毎に分類することを特徴とする請求項１９乃至２１のい
    ずれかに記載の画像検索方法。
23. 【請求項２３】 画像データベース内より、検索対象画
    像に類似の画像を検索する検索手段と、 検索された画像を表示する表示手段とを有し、 前記表示手段は、色を表す画像を表示可能となってお
    り、前記検索手段は、前記表示手段により表示された画
    像に対応する色に類似の色を含んだ画像を検索すること
    を特徴とする画像検索装置。
24. 【請求項２４】 前記表示手段は、色を表す画像として
    カラーピッカーを表示することを特徴とする請求項２３
    に記載の画像検索装置。
25. 【請求項２５】 色を表す画像を表示するステップと、 画像データベースの中から、表示された画像に対応する
    色に類似する色を含んだ画像を検索するステップと、 検索された画像を表示するステップとを有することを特
    徴とする画像検索方法。
26. 【請求項２６】 色を表す画像としてカラーピッカーを
    表示するステップを有することを特徴とする請求項２５
    に記載の画像検索方法。
27. 【請求項２７】 画像データベース内より、検索対象画
    像に類似の画像を検索する検索手段と、 検索された画像を表示する表示手段とを有し、 前記表示手段は、前記画像データベースに含まれていな
    い画像を取得して表示し、前記検索手段は、前記表示手
    段により表示された画像に類似する画像を検索すること
    を特徴とする画像検索装置。
28. 【請求項２８】 前記表示手段は、取得した画像を縮
    小、あるいはトリミングして表示することを特徴とする
    請求項２７に記載の画像検索装置。
29. 【請求項２９】 画像を取得して表示するステップと、 画像データベースの中から、取得した画像に類似の画像
    を検索するステップと、 検索された画像を表示するステップとを有することを特
    徴とする画像検索方法。
30. 【請求項３０】 入力した画像を縮小、あるいはトリミ
    ングして表示するステップを有することを特徴とする請
    求項２９に記載の画像検索方法。
31. 【請求項３１】 画像データベース内より、検索対象画
    像に類似の画像を検索する検索手段と、 表示された画像を一括してレタッチするレタッチ手段と
    を有することを特徴とする画像検索装置。
32. 【請求項３２】 画像データベース内の画像を検索する
    ステップと、 検索された画像を一括してレタッチするステップとを有
    することを特徴とする画像検索方法。
33. 【請求項３３】 画像を表示する表示手段と、 前記表示手段において表示された画像上において、位置
    指定が行われた場合に、指定された位置を記憶する記憶
    手段と、 前記記憶手段に記憶された位置に基づいて、画像データ
    ベース内の画像を検索する検索手段とを有することを特
    徴とする画像検索装置。
34. 【請求項３４】 指定される前記位置は、前記表示手段
    に表示された画像を観察する観察者が注目する部位であ
    り、 更に、指定された位置の座標を求めて記憶する座標決定
    手段を有することを特徴とする請求項３３に記載の画像
    検索装置。
35. 【請求項３５】 指定される前記位置は、前記表示手段
    により、前記画像上に示されることを特徴とする請求項
    ３３又は３４に記載の画像検索装置。
36. 【請求項３６】 位置が指定された画像に対応づけて、
    使用目的、使用者、使用アカウントの少なくとも一つを
    記憶することを特徴とする請求項３３乃至３５のいずれ
    かに記載の画像検索装置。
37. 【請求項３７】 過去に指定した画像が、検索空間の座
    標中のいずれの位置に対応するかを図示することを特徴
    とする請求項３３乃至３６のいずれかに記載の画像検索
    装置。
38. 【請求項３８】 画像データベース内の画像についてハ
    ードコピーに関する情報を記憶する記憶手段と、 前記ハードコピーに関する情報に基づいて、画像を検索
    する検索手段とを有することを特徴とする画像検索装
    置。
39. 【請求項３９】 ハードコピーしていない画像を優先的
    に表示する表示手段を有することを特徴とする請求項３
    ８に記載の画像検索装置。
40. 【請求項４０】 画像データベース内の画像は、画像の
    作成または修正時刻が近い順にグループ化されているこ
    とを特徴とする請求項３３乃至３９のいずれかに記載の
    画像検索装置。
41. 【請求項４１】 文字キーワードを入力可能な入力手段
    と、 前記入力手段により入力された文字キーワードに基づい
    て、画像の特徴量とそのキーワードに関連するネットワ
    ークアドレスを設定する設定手段とを有することを特徴
    とする画像検索装置。
42. 【請求項４２】 特定画像の特徴量を抽出する抽出手段
    と、 前記抽出手段が抽出した特徴量を含む文字キーワードを
    決定する決定手段と、 決定された文字キーワードに関連するネットワークアド
    レスから画像を取得する手段と、 取得された画像の特徴量を抽出して、特定画像の特徴を
    含むか否かを判定する判定手段とを有することを特徴と
    する画像検索装置。
43. 【請求項４３】 前記画像の特徴量は、画像における色
    及び領域に関する情報を含むことを特徴とする請求項４
    １又は４２に記載の画像検索装置。
44. 【請求項４４】 画像データベース内の画像を検索する
    際に、同一カテゴリ内の画像を優先的に検索する画像検
    索装置であって、 １又は複数の画像に共通するカテゴリを追加する追加手
    段を有することを特徴とする画像検索装置。
45. 【請求項４５】 前記追加手段は、１又は複数の画像を
    選択することにより、新たなカテゴリを形成することを
    特徴とする請求項４４に記載の画像検索装置。
46. 【請求項４６】 画像の内容を判断して、画像をカテゴ
    リ毎に分別する分別手段を有することを特徴とする請求
    項４４又は４５に記載の画像検索装置。
47. 【請求項４７】 同一カテゴリの画像を表示する表示手
    段を有することを特徴とする請求項４４乃至４６のいず
    れかに記載の画像検索装置。
48. 【請求項４８】 前記表示手段により表示された同一カ
    テゴリ内の画像を選択することにより、新たにカテゴリ
    が形成されることを特徴とする請求項４４乃至４７のい
    ずれかに記載の画像検索装置。
49. 【請求項４９】 同一カテゴリの画像にコメントを付加
    する付加手段を有することを特徴とする請求項４４乃至
    ４８のいずれかに記載の画像検索装置。
50. 【請求項５０】 異なるカテゴリに共通した画像が含ま
    れている場合、その画像の検索の優先度を増大させるこ
    とを特徴とする請求項４４乃至４９のいずれかに記載の
    画像検索装置。
51. 【請求項５１】 画像に人物が含まれている場合、特定
    の人物の顔画像を含む画像は、同一カテゴリに分別され
    ることを特徴とする請求項４４乃至５０のいずれかに記
    載の画像検索装置。
52. 【請求項５２】 前記特定の人物の顔画像に類似する顔
    画像を含む画像も、前記同一カテゴリに含まれることを
    特徴とする請求項５１に記載の画像検索装置。
53. 【請求項５３】 画像データベースの画像に音情報を付
    随させる付随手段と、前記音情報に基づいて画像を検索
    する検索手段とを有することを特徴とする画像検索装
    置。
54. 【請求項５４】 前記検索手段は、前記音情報を文字キ
    ーワードに変換して、画像を検索することを特徴とする
    請求項５３に記載の画像検索装置。
55. 【請求項５５】 前記検索手段は、前記音情報に含まれ
    る周波数特性の近似度に基づいて、画像を検索すること
    を特徴とする請求項５３又は５４に記載の画像検索装
    置。
56. 【請求項５６】 画像を選択する選択手段を有し、 前記付随手段は、前記選択手段により選択された画像
    に、共通した音情報を付随させることを特徴とする請求
    項５３乃至５５のいずれかに記載の画像検索装置。
57. 【請求項５７】 画像データベース内の画像を選択する
    選択手段と、 選択された画像を筆頭に、画像データベース内の画像を
    順序づける順序づけ手段と、 順序づけに従い画像を表示する表示手段とを有すること
    を特徴とする画像表示装置。
58. 【請求項５８】 前記順序づけ手段は、選択された画像
    に対して類似度の高い画像ほど、選択された画像に近づ
    けた順序とすることを特徴とする請求項５７に記載の画
    像表示装置。
59. 【請求項５９】 前記順序づけ手段は、選択された画像
    に対して撮影時間の近い画像ほど、選択された画像に近
    づけた順序とすることを特徴とする請求項５７又は５８
    に記載の画像表示装置。
60. 【請求項６０】 前記順序づけ手段は、選択された画像
    に対して内容の近似した画像ほど、選択された画像に近
    づけた順序とすることを特徴とする請求項５７乃至５９
    のいずれかに記載の画像表示装置。
61. 【請求項６１】 前記表示手段は、前記順序づけ手段が
    順序づけた画像を、所定順位毎に表示することを特徴と
    する請求項５７乃至６０のいずれかに記載の画像表示装
    置。
62. 【請求項６２】 前記表示手段は、１度表示した画像は
    表示しないことを特徴とする請求項５７乃至６１のいず
    れかに記載の画像表示装置。
63. 【請求項６３】 前記表示手段は、順序づけされた画像
    を所定時間間隔で順次表示することを特徴とする請求項
    ５７乃至６２のいずれかに記載の画像表示装置。
64. 【請求項６４】 前記所定時間間隔を変更する変更手段
    を有することを特徴とする請求項６３に記載の画像表示
    装置。
65. 【請求項６５】 画像の順次表示を中断する中断手段を
    有することを特徴とする請求項６３又は６４に記載の画
    像表示装置。
66. 【請求項６６】 前記表示手段は、表示されている画像
    と、これから表示される画像との関係を示す情報を表示
    することを特徴とする請求項５７乃至６５のいずれかに
    記載の画像表示装置。
67. 【請求項６７】 前記表示手段により表示されている画
    像を元に、類似する画像を検索する検索手段を有するこ
    とを特徴とする請求項５７乃至６６のいずれかに記載の
    画像表示装置。
68. 【請求項６８】 最後に順序づけられた画像が表示され
    たことを知らせる手段を有することを特徴とする請求項
    ５７乃至６７のいずれかに記載の画像表示装置。
69. 【請求項６９】 前記表示手段により表示された画像の
    表示順を記憶する記憶手段を有することを特徴とする請
    求項５７乃至６９のいずれかに記載の画像表示装置。