JPH08249353A - 画像検索方法及び装置 - Google Patents

画像検索方法及び装置

Info

Publication number
JPH08249353A
JPH08249353A JP7055937A JP5593795A JPH08249353A JP H08249353 A JPH08249353 A JP H08249353A JP 7055937 A JP7055937 A JP 7055937A JP 5593795 A JP5593795 A JP 5593795A JP H08249353 A JPH08249353 A JP H08249353A
Authority
JP
Japan
Prior art keywords
image
exemplary
images
similar
designated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP7055937A
Other languages
English (en)
Inventor
Fumisada Yamazaki
文貞 山崎
Naoto Fujii
直人 藤井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP7055937A priority Critical patent/JPH08249353A/ja
Publication of JPH08249353A publication Critical patent/JPH08249353A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【目的】 検索を希望する画像の特徴とぴったり合致す
る例示画が得られない場合や、或いは基本コンセプトの
みを表した例示画により画像特徴を提示し、その後、そ
の例示画に対して軽微なバリエーションを加えつつ、デ
ザインコンセプトを膨らませて対応する画像を逐次検索
するような場合にも、これらの検索作業を効率よく実施
させることが可能な画像検索方法及び装置を提供する。 【構成】 互いに特徴の異なる２以上の例示画を含む例
示画メニューが表示され、前記表示された例示画メニュ
ーに含まれる例示画の中で、希望画像と類似する例示
画、及び／又は、類似しない例示画が１若しくは２以上
指定され、前記類否指定された例示画の各特徴量に基い
て、前記希望画像を検索するための検索条件が生成さ
れ、前記生成された検索条件に基いて、前記画像記憶手
段に記憶された画像から希望画像に類似する画像が１若
しくは２以上抽出され、前記抽出された１若しくは２以
上の画像が表示される。

Description

【発明の詳細な説明】
【０００１】
【産業上の利用分野】この発明は、予め用意された多数
の画像の中から希望画像を例示画を提示して検索する例
示画入力方条件の画像検索装置に係り、特に例示画とし
て最適なものが得難い場合にも、効率良く希望の画像を
検索できるようにした画像検索装置に関する。
【０００２】
【従来の技術】例えば、服地、カーテン地、壁紙、刺繍
等々のデザインにあたっては、既存の図柄見本の中から
所望のデザインコンセプトに近いものを選び出し、それ
に適宜の改変を加えることにより、新たな図柄を創作す
ることがしばしばデザイナの間で行われている。このよ
うなデザイン作業の効率化のためには、できる限り速や
かに所望のデザインコンセプトに近い図柄を図柄見本か
ら探し出さねばならない。しかし、図柄見本の数が膨大
なものとなるに連れて、このような図柄見本検索作業を
人手に頼ることには自ずと限界があった。
【０００３】そこで、従来、このような図柄見本検索作
業を機械化するために、コンピュータ技術を利用した画
像検索装置が種々提案されている。かかる画像検索装置
にあっては、上述の図柄見本のそれぞれは、イメージス
キャナ等を介して画像データに変換されて、ＣＤ−ＲＯ
Ｍ等の大容量記憶媒体に格納される。同時に、各画像デ
ータに対しては、濃度値の変換、雑音の消去、ぼけの復
元、輪郭の検出強調、連結部分の抽出等の様々な画像処
理が加えられた後、その画像処理結果に基いて種々の特
徴抽出演算が行われ、境界線画素数、ホール数、曲線
度、色数、色分布、コントラスト、境界線画素分布、色
分布等と言った様々な画像特徴量（以下、これを後述す
る「感性的特徴量」との対比の為に「物理的特徴量」と
称する）が求められる。今仮に、ｋ枚の画像をｙ1 ，ｙ
2 ，ｙ3 ，…ｙk 、そのｎ種類の物理的特徴量をｘ1 ，
ｘ2 ，ｘ3 ，…ｘn とおけば、各画像はｎ次元のベクト
ル（ｘ11，ｘ21，ｘ31，…ｘn1），（ｘ12，ｘ22，
ｘ32，…ｘn2），…（ｘ1k，ｘ2k，ｘ3k，…ｘnk）とし
て表される。従って、所望のデザインコンセプトに合致
する画像ｙp を上述の物理的量を用いてベクトル
（ｘ1p，ｘ2p，ｘ3p，…ｘnp）の如く表し、これと上述
した各画像ｙ1 ，ｙ2 ，ｙ3 ，…ｙk に対応するベクト
ルとの距離を求め、それらの中で最も距離の近いものを
選択すれば、所望の画像に最も類似する画像を機械的に
検索することができる訳である。
【０００４】この種の画像検索装置の改良に関する技術
文献としては、特開平５−６４３７号公報（発明の名
称：「画像特徴抽出装置、画像特徴照合装置および画像
検索装置」）、或いは、情報ＣＧ・ＣＡＤ研究会１９９
４年８月，Ｖｏｌ．９４，Ｎｏ．７２，ｐ．４３〜４８
（論文の名称：「デザイン画の感性特徴と画像特徴」）
が知られている。これらの文献においては、画像検索を
人間の感性的な表現を利用して行うことを可能としてい
る。すなわち、上述の画像検索装置で利用されている物
理的特徴量は、与えられた画像データを画像処理した結
果に対して所定の特徴抽出演算を適用することにより機
械的かつ一義的に抽出される利点を有する反面、その表
現は、例えば、境界線画素数、ホール数、曲線度、色
数、色分布、コントラスト、境界線画素分布、色分布等
の如く、任意のデザインコンセプトを表現するには必ず
しも適切さに欠ける。そこで、この改良された画像検索
装置にあっては、暖かい／冷たい、男性的／女性的、安
定さ／不安定さ、対称的／非対称的、単純さ／複雑さ等
々のように、人間（デザイナー）が任意の画像の印象を
特定するのに用いる感性的特徴に着目し、こられの感性
的特徴量と前述した物理的特徴量との相関関係を統計的
な手法を用いて求め、この相関関係を用いた感性的特徴
量による画像検索を可能とした。概念的に説明すれば、
任意の画像の感性的特徴量をｗ1 ，ｗ2 ，ｗ3 ，…
ｗm ，その物理的特徴量をｘ1 ，ｘ2 ，ｘ3 ，…ｘn と
定義すると、各感性的特徴量ｗ1 ，ｗ2 ，ｗ3 ，…ｗm
は、それぞれｎ次元のベクトル（ａ11・ｘ1 ，ａ12・ｘ
2 ，ａ13・ｘ3 ，…ａ1n・ｘn ），（ａ 21・ｘ1 ，ａ22
・ｘ2 ，ａ23・ｘ3 ，…ａ2n・ｘn ），（ａ31・ｘ1 ，
ａ32・ｘ 2 ，ａ33・ｘ3 ，…ａ3n・ｘn ），…（ａm1・
ｘ1 ，ａm2・ｘ2 ，ａm3・ｘ3 ，…ａmn・ｘn ）と表さ
れる。従って、物理的特徴量から感性的特徴量へ変換す
る際の重み付け値群（ａ11，ａ12，ａ13，…ａ1n），
（ａ21，ａ22，ａ23，…ａ2n），（ａ31，ａ32，ａ33，
…ａ3n），…（ａm1，ａm2，ａm3，…ａmn）をデザイナ
ーに対するアンケート調査等を通じた統計的手法で予め
求めておけば、任意の画像データからその感性的特徴量
を機械的に抽出することができる。その為、画像検索処
理に際しては、入力画像の感性的特徴量と登録画像の感
性的特徴量との距離を求めることにより、物理的特徴量
を利用した場合に比べ、デザイナーの感性をより加味し
た画像検索が行われる。
【０００５】
【発明が解決しようとする課題】ところで、この種の画
像検索装置において、所望の画像の検索を行わせるため
には、検索したい画像の特徴を何らかの方法で装置側に
提示する必要がある。この画像特徴提示を、例えば、直
線度［０．９］、シャープ／ソフト度［０．８］等々の
如くに全ての物理的特徴或いは感性的特徴を数値入力し
て行うとすれば繁雑に絶えない。そこで、従来、この種
の画像検索装置にあっては、検索を希望する画像の特徴
を図画を用いて例示的に表現してなる例示画を用いるこ
とがしばしば行われている。すなわち、入力された例示
画は、前述の画像処理過程を経て、物理的特徴量、及び
／又は、感性的特徴量に機械的に変換され、それらの特
徴量と各登録画像の特徴量との距離が比較されて、入力
画像に類似する１若しくは２以上の画像が最終的に検索
されるのである。
【０００６】しかしながら、このような従来の例示画入
力方条件の画像検索装置にあっては、画像特徴提示に際
して繁雑な数値入力操作が不要である反面、検索を希望
する画像の特徴とぴったり合致する例示画が得られない
場合には、所望の特徴を有する画像をなかなか探し出す
ことができず、かえって使い勝手が悪い。
【０００７】また、当初は、基本コンセプトのみを表し
た例示画により画像特徴を提示し、その後、その例示画
に対して着色変更、模様変更等の軽微なバリエーション
を加えつつ、デザインコンセプトを膨らませて対応する
画像を逐次検索するような場合には、その都度、例示画
に対して着色変更や模様変更を実際に加えねばならず、
甚だ使い勝手が悪い、等の問題点があった。
【０００８】この発明は、上述の問題点に鑑みてなされ
たものであり、その目的とするところは、検索を希望す
る画像の特徴とぴったり合致する例示画が得られない場
合や、或いは基本コンセプトのみを表した例示画により
画像特徴を提示し、その後、その例示画に対して軽微な
バリエーションを加えつつ、デザインコンセプトを膨ら
ませて対応する画像を逐次検索するような場合にも、こ
れらの検索作業を効率よく実施させることが可能な画像
検索装置を提供することにある。
【０００９】
【課題を解決するための手段】この出願の請求項１に記
載の発明は、複数の画像をそれぞれに複数種の特徴量を
付して記憶させる画像記憶ステップと、互いに特徴の異
なる２以上の例示画を含む例示画メニューを表示させる
例示画メニュー表示ステップと、前記表示された例示画
メニューに含まれる例示画の中で、希望画像と類似する
例示画、及び／又は、類似しない例示画を１若しくは２
以上指定する類否指定ステップと、前記類否指定された
例示画の各特徴量に基いて、前記希望画像を検索するた
めの検索条件を生成する検索条件生成ステップと、前記
生成された検索条件に基いて、前記画像記憶手段に記憶
された画像から希望画像に類似する画像を１若しくは２
以上抽出する画像抽出ステップと、前記抽出された１若
しくは２以上の画像を表示する画像表示ステップと、を
具備することを特徴とする。
【００１０】この出願の請求項２に記載の発明は、前記
請求項１に記載の発明において、前記検索条件生成ステ
ップは、類似例示画と非類似例示画との双方が指定され
た場合には、前記複数種の特徴量で定義される特徴座標
上において、前記類似指定例示画位置の平均位置と前記
非類似指定例示画位置の平均位置とを結ぶ直線を類似指
定例示画方向へ所定距離だけ延長した位置の近傍に希望
画像が存在するとの前提の元に検索条件を生成すること
を特徴とする。
【００１１】この出願の請求項３に記載の発明は、前記
請求項１に記載の発明において、前記検索条件生成ステ
ップは、類似例示画のみが指定された場合には、前記複
数種の特徴量で定義される特徴座標上において、前記類
似指定例示画位置の平均位置と原点とを結ぶ直線を類似
指定例示画方向へ所定距離だけ延長した位置の近傍に希
望画像が存在するとの前提の元に検索条件を生成するこ
とを特徴とする。
【００１２】この出願の請求項４に記載の発明は、前記
請求項１に記載の発明において、前記検索条件生成ステ
ップは、非類似例示画のみが指定された場合には、前記
複数種の特徴量で定義される特徴座標上において、前記
非類似指定例示画位置の平均位置と原点とを結ぶ直線を
原点方向へ所定距離だけ延長した位置の近傍に希望画像
が存在するとの前提の元に検索条件を生成することを特
徴とする。
【００１３】この出願の請求項５に記載の発明は、前記
請求項１に記載の発明において、前記抽出されて表示さ
れた１若しくは２以上の画像の中で、希望画像に類似す
る画像、及び／又は、類似しない画像を１若しくは２以
上再指定するための類否再指定ステップを具備すること
を特徴とする。
【００１４】この出願の請求項６に記載の発明は、複数
の画像をそれぞれに複数種の特徴量を付して記憶させた
画像記憶手段と、互いに特徴の異なる２以上の例示画を
含む例示画メニューを表示させる例示画メニュー表示手
段と、前記表示された例示画メニューに含まれる例示画
の中で、希望画像と類似する例示画、及び／又は、類似
しない例示画を１若しくは２以上指定可能な類否指定手
段と、前記類否指定された例示画の各特徴量に基いて、
前記希望画像を検索するための検索条件を生成する検索
条件生成手段と、前記生成された検索条件に基いて、前
記画像記憶手段に記憶された画像から希望画像に類似す
る画像を１若しくは２以上抽出する画像抽出手段と、前
記抽出された１若しくは２以上の画像を表示する画像表
示手段と、を具備することを特徴とする。
【００１５】この出願の請求項７に記載の発明は、前記
請求項６に記載の発明において、前記検索条件生成手段
は、類似例示画と非類似例示画との双方が指定された場
合には、前記複数種の特徴量で定義される特徴座標上に
おいて、前記類似指定例示画位置の平均位置と前記非類
似指定例示画位置の平均位置とを結ぶ直線を類似指定例
示画方向へ所定距離だけ延長した位置の近傍に希望画像
が存在するとの前提の元に検索条件を生成することを特
徴とする。
【００１６】この出願の請求項８に記載の発明は、前記
請求項６に記載の発明において、前記検索条件生成手段
は、類似例示画のみが指定された場合には、前記複数種
の特徴量で定義される特徴座標上において、前記類似指
定例示画位置の平均位置と原点とを結ぶ直線を類似指定
例示画方向へ所定距離だけ延長した位置の近傍に希望画
像が存在するとの前提の元に検索条件を生成することを
特徴とする。
【００１７】この出願の請求項９に記載の発明は、前記
請求項６に記載の発明において、前記検索条件生成手段
は、非類似例示画のみが指定された場合には、前記複数
種の特徴量で定義される特徴座標上において、前記非類
似指定例示画位置の平均位置と原点とを結ぶ直線を原点
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件を生成することを特徴と
するを特徴とする。
【００１８】この出願の請求項１０に記載の発明は、前
記請求項６に記載の発明において、前記抽出されて表示
された１若しくは２以上の画像の中で、希望画像に類似
する画像、及び／又は、類似しない画像を１若しくは２
以上再指定するための類否再指定手段を具備すること特
徴とする。
【００１９】
【作用】この出願の請求項１に記載の発明によれば、複
数の画像がそれぞれに複数種の特徴量を付して記憶さ
れ、互いに特徴の異なる２以上の例示画を含む例示画メ
ニューが表示され、前記表示された例示画メニューに含
まれる例示画の中で、希望画像と類似する例示画、及び
／又は、類似しない例示画が１若しくは２以上指定さ
れ、前記類否指定された例示画の各特徴量に基いて、前
記希望画像を検索するための検索条が生成され、前記生
成された検索条件に基いて、前記記憶された画像から希
望画像に類似する画像が１若しくは２以上抽出され、前
記抽出された１若しくは２以上の画像が表示される。
【００２０】この出願の請求項２に記載の発明によれ
ば、類似例示画と非類似例示画との双方が指定された場
合には、前記複数種の特徴量で定義される特徴座標上に
おいて、前記類似指定例示画位置の平均位置と前記非類
似指定例示画位置の平均位置とを結ぶ直線を類似指定例
示画方向へ所定距離だけ延長した位置の近傍に希望画像
が存在するとの前提の元に検索条件が生成される。
【００２１】この出願の請求項３に記載の発明によれ
ば、類似例示画のみが指定された場合には、前記複数種
の特徴量で定義される特徴座標上において、前記類似指
定例示画位置の平均位置と原点とを結ぶ直線を類似指定
例示画方向へ所定距離だけ延長した位置の近傍に希望画
像が存在するとの前提の元に検索条件が生成される。
【００２２】この出願の請求項４に記載の発明によれ
ば、非類似例示画のみが指定された場合には、前記複数
種の特徴量で定義される特徴座標上において、前記非類
似指定例示画位置の平均位置と原点とを結ぶ直線を原点
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件が生成される。
【００２３】この出願の請求項５に記載の発明によれ
ば、前記抽出されて表示された１若しくは２以上の画像
の中で、希望画像に類似する画像、及び／又は、類似し
ない画像が１若しくは２以上再指定される。
【００２４】この出願の請求項６に記載の発明によれ
ば、複数の画像がそれぞれに複数種の特徴量を付して記
憶され、互いに特徴の異なる２以上の例示画を含む例示
画メニューが表示され、前記表示された例示画メニュー
に含まれる例示画の中で、希望画像と類似する例示画、
及び／又は、類似しない例示画が１若しくは２以上指定
され、前記類否指定された例示画の各特徴量に基いて、
前記希望画像を検索するための検索条件が生成され、前
記生成された検索条件に基いて、前記記憶された画像か
ら希望画像に類似する画像が１若しくは２以上抽出さ
れ、前記抽出された１若しくは２以上の画像が表示され
る。
【００２５】この出願の請求項７に記載の発明によれば
類似例示画と非類似例示画との双方が指定された場合に
は、前記複数種の特徴量で定義される特徴座標上におい
て、前記類似指定例示画位置の平均位置と前記非類似指
定例示画位置の平均位置とを結ぶ直線を類似指定例示画
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件が生成される。
【００２６】この出願の請求項８に記載の発明によれ
ば、類似例示画のみが指定された場合には、前記複数種
の特徴量で定義される特徴座標上において、前記類似指
定例示画位置の平均位置と原点とを結ぶ直線を類似指定
例示画方向へ所定距離だけ延長した位置の近傍に希望画
像が存在するとの前提の元に検索条件が生成される。
【００２７】この出願の請求項９に記載の発明によれ
ば、非類似例示画のみが指定された場合には、前記複数
種の特徴量で定義される特徴座標上において、前記非類
似指定例示画位置の平均位置と原点とを結ぶ直線を原点
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件が生成される。
【００２８】この出願の請求項１０に記載の発明によれ
ば、前記抽出されて表示された１若しくは２以上の画像
の中で、希望画像に類似する画像、及び／又は、類似し
ない画像が１若しくは２以上再指定される。
【００２９】
【実施例】以下に、この発明の好適な一実施例を添付図
面を参照して詳細に説明する。この実施例の画像検索装
置のハードウェア構成を図１に示す。同図に示されるよ
うに、この画像検索装置のハードウェアは、中央処理装
置１、表示部２、操作部３、プリンタ４、画像記憶部５
及びイメージスキャナ６を備えたパーソナルコンピュー
タシステムとして構成されている。
【００３０】中央処理装置１は、良く知られているよう
に、ＭＰＵ，ＲＡＭ，ＲＯＭ等を主体として構成されて
おり、システムバス７を介して上述のシステム要素２〜
８を統括制御するものである。
【００３１】表示部２は、ＣＲＴ表示器、ＬＣＤ等で構
成されており、この表示部２の表示画面上には、図９及
び図１０を参照して後に詳細に説明するように、例示画
メニューとして表示された一位個数（この例では９個）
の例示画、或いは検索結果として抽出された一定個数
（この例では９個）の類似画がカラー表示されるように
なされている。
【００３２】操作部３は、キーボード、マウスなどで構
成されており、本装置に対する各種の指示入力は、この
操作部３を用いて行われる。
【００３３】プリンタ４は、レーザカラープリンタ等の
高精度プリンタで構成されており、検索された画像のハ
ードコピーを得るため等に用いられる。
【００３４】画像記憶部５は、追記型光ディスク、書き
替え型光ディスク等の大容量記憶装置で構成されてお
り、この画像記憶部５には、図２及び図１１を参照して
後に詳細に説明するように、検索対象となる多数の画像
が、その物理的特徴量、及び／または、感性的特徴量等
を付されて記憶される。
【００３５】イメージスキャナ６は、カラー表示された
任意の図柄見本８を画像データに変換するためのもので
あり、このイメージスキャナ６は、図１１を参照して後
に詳細に説明するように、画像登録処理のために、ある
いは図柄見本８を例示画として入力するため等に使用さ
れる。
【００３６】なお、以上のパーソナルコンピュータシス
テムを実現するためには、各種のオペレーティングシス
テム、描画用アプリケーションソフト等が必要であるこ
とは、当業者であれば用意に理解されるであろう。
【００３７】次に、図３は本発明装置のソフトウェア構
成を示す制御フローチャートであり、以下このフローチ
ャート及び図４〜図８の説明図を参照しながら、本発明
装置の動作を系統的に説明する。
【００３８】まず最初に、画像登録処理について説明す
る。図１１に示されるように、今仮に登録すべき画像乃
至図柄見本が１０００枚存在すると想定する。このよう
な場合、本発明では、まずその内の５０枚をサンプル分
析画像として確保し、このサンプル分析画像に対して、
感性的特徴量の抽出及び物理的特徴量の抽出を行う。感
性的特徴量の抽出は、適当な人数（例えば１００名）の
デザイナー或いは一般需要者に対するアンケート調査を
実施することにより行なわれる。その結果、サンプル分
析画像を構成する各画像の感性的特徴量は、例えばシャ
ープ・ソフト度は０．８、シンプル・デコラテブ度は
０．７、動的・静的度は０．６、モダン・クラッシック
度は０．３、抽象的・写実的度は０．９等のように定量
化される。なお、この例では、各特徴スケールの値は、
０．０〜１．０を１０段階に分割してなる各数値により
表されているが、これはあくまでも一例であって必要に
応じて任意の単位系を採用することができる。一方、物
理的特徴量の抽出はコンピュータ処理により機械的に行
われる。すなわち、５０枚のサンプル分析画像を構成す
る各画像に対しては、まず濃度値の変換、雑音の除去、
ぼけの復元、輪郭の検出強調、連結部分の抽出等の様々
な画像処理が施され、次いでその画像処理結果にに基づ
いて種々の特徴抽出演算が行われ、最終的に、例えば直
線度は０．９、コントラスト度は０．８、複雑度は０．
１等のように、各物理的特徴量が定量化される。
【００３９】このようにして、サンプル分析画像を構成
する各画像に対し、感性的特徴量及び物理的特徴量の抽
出が行われたならば、次いで両特徴量の相関関係を規定
するマッピングルールｆが、統計的手法により作成され
る。その結果、例えば、 シャープ／ソフト度＝０．９・直線度−０．２・複雑度 の如く、マッピングルールｆが求められる。
【００４０】以後、上で求められたマッピングルールｆ
を用いることにより、登録対象である１０００枚の画像
から感性的特徴量が機械的に求められ、こうして得られ
た物理的特徴量、感性的特徴量は、該当する画像とそれ
ぞれ関連付けられて画像データベースとして構成され、
最終的に画像記憶部５に記憶される。このようにして作
成された画像データベースの一例を図２に示す。同図に
示されるように、この例では、各画像データには画像Ｎ
ｏ．が付されており、また特徴量としては、感性的特徴
量である「ソフト／ハード度」、「静的／動的度」、
「シンプル／デコラティブ度」、「モダン／クラシック
度」、「抽象的／写実的度」、「ウォーム／クール度」
等が採用されている。尚、これは、あくまでも説明のた
めに簡素化して一例を示したに過ぎず、その他必要に応
じて、色数、複雑度、針数（刺繍模様の場合）、曲線
度、対称度等々のように任意の特徴スケールを採用する
ことができる。
【００４１】次に、本発明の要部である画像検索処理の
詳細を図３のフローチャート及び図４〜図８の説明図を
参照して説明する。同図において、処理が開始される
と、表示部２を構成する例えばＣＲＴ表示装置の画面上
には、互いに特徴の異なる２以上（この例では９個）の
例示画を含む例示画メニューが表示され（ステップ３０
１）、その後、類否指定操作を待機する状態となる（ス
テップ３０２ＮＯ）。
【００４２】例示画類否指定操作のために使用されるメ
ニュー表示の一例を図９に示す。同図に示されるよう
に、ＣＲＴ表示装置の画面９の略中央には正方形状のウ
インドウ１０が設けられ、このウインドウ１０内には９
枚の例示画Ｇ１〜Ｇ９が表示されている。また、ウイン
ドウ１０の右側縁部には上下方向に移動可能なスクロー
ル用カーソル１１が表示されている。このスクロール用
カーソル１１はマウス１５の操作により上下に移動させ
ることができ、それに伴いウインドウ１０内に表示され
た９枚の例示画Ｇ１〜Ｇ２を適宜にスクロールさせて、
別の例示画をウインドウ１０内に表示させることが可能
になされている。また、図９において矢印で示される画
像指定用カーソル１４もまたマウス１５の操作にて任意
の例示画位置に移動可能になされており、このカーソル
１４を例示画Ｇ１〜Ｇ９のいずれかの位置に移動させ、
その状態でマウス１５のクリック操作等により類似指定
操作を行うと、類似指定された例示画には図中丸印で示
される類似マーク１２が表示され、同様にして非類似指
定操作を行うと、非類似指定された例示画には図中×印
で示される非類似マーク１３が表示される。この例で
は、例示画Ｇ１と例示画Ｇ６とに類似マーク１２が表示
され、例示画Ｇ４と例示画Ｇ５とに非類似マーク１３が
表示された状態が示されている。
【００４３】図３のフローチャートに戻って、いずれか
の例示画Ｇ１〜Ｇ９について何らかの類否指定操作が検
出されると（ステップ３０２ＹＥＳ）、当該例示画は類
似指定例示画又は非類似指定例示画として記憶され、同
時にその例示画には前述の類似マーク１２又は非類似マ
ーク１３が表示される（ステップ３０３）。その後、類
否指定操作の完了を指示する所定操作が行われるまでの
間（ステップ３０４ＮＯ）、以上の処理（ステップ３０
１〜３０３）が繰り返される。この状態において、所定
の類否指定完了操作が確認されると（ステップ３０４Ｙ
ＥＳ）、続いて類似指定、及び／又は、非類似指定され
た例示画の特徴量に基いて検索条件生成処理が実行され
る（ステップ３０５）。
【００４４】次に、検索条件生成処理（ステップ３０
５）の詳細を図４〜図８を参照して説明する。検索条件
生成のための一般的な考え方から説明する。今仮に、感
性スケール座標上における類似指定された画像の平均位
置を ｘ1 ，ｘ2 ，…ｘn （なければ原点） とし、非類似指定された画像の平均位置を ｙ1 ，ｙ2 ，…ｙn （なければ原点） とすると、求められる仮想検索画像の位置は、 ａ1 ・（ｘ1 −ｙ1 ）＋ｘ1 ，ａ2 ・（ｘ2 −ｙ2 ）＋
ｘ2 ，…ａn ・（ｘn −ｙn ）＋ｘn として表される。尚、ここで、ａn は重み係数である。
従って、この位置に近い画像を検索すれば、求める類似
画を抽出することができる。これは、ユークリッド距離
の近いものから順に検索・抽出すれば良い。以上の一般
的な考え方を具体的な例を挙げて説明する。
【００４５】図４には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が２個、非類似
指定された例示画が２個の場合を示している。図中、白
丸印で示される点Ｐ１及び点Ｐ２はそれぞれ類似指定さ
れた画像位置、×印で示される点Ｐ３及び点Ｐ４はそれ
ぞれ非類似指定された画像位置、黒丸印で示された点Ｐ
５及び点Ｐ６はそれぞれ白丸印又は×印で示される画像
の感性的座標上における平均位置、二重丸印で示された
点Ｐ７は求める仮想検索画像の位置を示している。この
場合は、２個の類似指定画像位置Ｐ１，Ｐ２の平均位置
Ｐ５と２個の非類似指定画像位置Ｐ３，Ｐ４の平均位置
Ｐ６を結ぶ線分を類似指定画像側の平均位置Ｐ５側へと
延長し、Ｌ１：Ｌ２＝２：１となる点として、仮想検索
画像位置Ｐ７を求めることができる。従って、この仮想
検索画像位置Ｐ７と各登録画像位置とのユークリッド距
離をそれぞれ求め、それらの近いものから順に選ばれた
ｎ個を求める類似画として得ることができる。特に、こ
の例によれば、似ている例示画、及び／又は、似ていな
い例示画が複数存在するような場合には、希望画像の傾
向を装置に対してより的確に教示することができる。
【００４６】図５には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が１個、非類似
指定された例示画が０個の場合を示している。この場合
は、類似指定画像位置Ｐ８と原点Ｏとを結ぶ線分を類似
指定画像位置Ｐ８側へと延長し、Ｌ１：Ｌ２＝２：１と
なる点として、仮想検索画像位置Ｐ９を求めることがで
きる。従って、この仮想検索画像位置Ｐ９と各登録画像
位置とのユークリッド距離をそれぞれ求め、それらの距
離の近いものから順に選ばれたｎ個を求める類似画とし
て得ることができる。特に、この例によれば、ある程度
似ている例示画は存在する反面、全く似ていない例示画
が存在しないような場合にも、希望画像の傾向を装置側
に対して的確に教示することができる。
【００４７】図６には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が０個、非類似
指定された例示画が１個の場合を示している。この場合
は、非類似指定画像位置Ｐ１０と原点Ｏとを結ぶ線分を
原点Ｏ側へと延長し、Ｌ１：Ｌ２＝２：１となる点とし
て、仮想検索画像位置Ｐ１１を求めることができる。従
って、この仮想検索画像位置Ｐ１１と各登録画像位置と
のユークリッド距離をそれぞれ求め、それらの近いもの
から順に選ばれたｎ個を求める類似画として得ることが
できる。特に、この例によれば、全く似ていない例示画
ばかりで、似ている例示画が全く存在しないような場合
にも、希望画像の傾向を装置側に対して的確に教示する
ことができる。
【００４８】図７には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が２個、非類似
指定された例示画が１個の場合を示している。この場合
は、２個の類似指定画像位置Ｐ１２，Ｐ１３の平均位置
Ｐ１４と非類似指定画像位置Ｐ１５とを結ぶ線分を類似
指定画像側の平均位置Ｐ１４側へと延長し、Ｌ１：Ｌ２
＝２：１となる点として、仮想検索画像位置Ｐ１６を求
めることができる。従って、この仮想検索画像位置Ｐ１
６と各登録画像位置とのユークリッド距離をそれぞれ求
め、それらの近いものから順に選ばれたｎ個を求める類
似画として得ることができる。
【００４９】図８には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が１個、非類似
指定された例示画が２個の場合を示している。この場合
は、２個の非類似指定画像位置Ｐ１７，Ｐ１８の平均位
置Ｐ１９と類似指定画像位置Ｐ２０とを結ぶ線分を類似
指定画像位置Ｐ２０側へと延長し、Ｌ１：Ｌ２＝２：１
となる点として、仮想検索画像位置Ｐ２１を求めること
ができる。従って、この仮想検索画像位置Ｐ２１と各登
録画像位置とのユークリッド距離をそれぞれ求め、それ
らの近いものから順に選ばれたｎ個を求める類似画とし
て得ることができる。
【００５０】図３のフローチャートに戻って、検索条件
生成処理（ステップ３０５）にて検索条件が求められた
ならば、次いでその検索条件に従って所定個数の類似画
が画像記憶部５に格納された画像データベースから抽出
され（ステップ３０６）、抽出された類似画は画像表示
装置の画面上に表示される（ステップ３０７）。
【００５１】このようにして得られた検索結果の画面表
示例を図１０に示す。図９と図１０との比較から明らか
なように、図９に示される例示画メニューにおいて、縦
方向のストライプ模様を含む例示画Ｇ１，Ｇ６を類似指
定し、横方向のストライプ模様を含む例示画Ｇ４，Ｇ５
を非類似指定した結果、図１０に示される表示画面にお
いては、縦方向のストライプ模様を含む９個の画像Ｇ１
１〜Ｇ１９が検索表示されていることが理解されるであ
ろう。
【００５２】図３のフローチャートに戻って、装置側に
おいては、図１０に示されるように、抽出された９個の
画像Ｇ１１〜Ｇ１９を画面上に表示させつつ、検索オペ
レータが類否再指定操作を行うのを待機する状態となる
（ステップ３０８ＮＯ，ステップ３０９ＮＯ，ステップ
３０７）。この状態において、いずれかの画像Ｇ１１〜
Ｇ１９について何らかの類否指定操作が検出されると
（ステップ３０８ＹＥＳ）、当該画像は類似画像又は非
類似画像として記憶され、同時にその画像には前述の類
似マーク１２又は非類似マーク１３が表示される（ステ
ップ３１０）。その後、類否指定操作の完了を指示する
所定操作が行われるまでの間（ステップ３１１ＮＯ）、
以上の処理（ステップ３０７，３０８，３１０）が繰り
返される。この状態において、所定の類否指定完了操作
が確認されると（ステップ３１１ＹＥＳ）、続いて類似
指定、及び／又は、非類似指定された例示画の特徴スケ
ール値に基いて、前述の場合と同様にして検索条件生成
処理が再実行され（ステップ３０５）、画像抽出処理
（ステップ３０６）、抽出画像表示処理（ステップ３０
７）を経て、別の９個の画像が新たに表示される。
【００５３】上述の実施例の画像検索装置によれば、初
期設定された例示画メニューの中に希望の画像とぴった
り一致する例示画が存在しなくとも、ある程度類似する
例示画、及び／又は、あまり類似しない例示画が存在し
さえすれば、それらを用いて希望の画像の傾向を装置側
に間接的に教示することができ、更に類否指定操作を繰
り返すことにより、最終的には希望の画像を画像データ
ベースから効率良く検索することができる。
【００５４】尚、図４〜図８ではＬ１：Ｌ２＝２：１と
して仮想検索画像位置を求め、その近傍から類似画を抽
出したが、その他例えば特公平３−１９４６５５号公報
の第２図に示されるように、類似指定画像位置又はその
平均位置を頂点とする円錐体を類似画像側へと拡開さ
せ、その内部領域から類似画を検索抽出することもでき
る。
【００５５】
【発明の効果】この出願の請求項１又は請求項６の発明
によれば、互いに特徴の異なる２以上の例示画を含む例
示画メニューが表示され、前記表示された例示画メニュ
ーに含まれる例示画の中で、希望画像と類似する例示
画、及び／又は、類似しない例示画が１若しくは２以上
指定され、前記類否指定された例示画の各特徴スケール
値に基いて、前記希望画像を検索するための検索条件が
生成され、前記生成された検索条件に基いて、画像記憶
手段に記憶された画像から希望画像に類似する画像が１
若しくは２以上抽出され、前記抽出された１若しくは２
以上の画像が表示されることとなる。そのため、初期設
定された例示画メニューの中に希望の画像とぴったり一
致する例示画が存在しなくとも、ある程度類似する例示
画、及び／又は、あまり類似しない例示画が１以上存在
しさえすれば、それらを用いて希望の画像の傾向を装置
側に間接的に教示し、希望の画像を効率良く検索するこ
とができる。
【００５６】この出願の請求項２又は請求項７に記載の
発明によれば、類似例示画と非類似例示画との双方が指
定された場合には、前記複数種の特徴スケールで定義さ
れる特徴座標上において、前記類似例示画位置の平均位
置と前記非類似例示画位置の平均位置とを結ぶ直線を類
似例示画方向へ所定距離だけ延長した位置の近傍に希望
画像が存在するとの前提の元に検索条件の生成が行われ
る。そのため、似ている例示画、及び／又は、似ていな
い例示画が複数存在するような場合には、希望画像の傾
向を装置に対してより的確に教示することができる。
【００５７】この出願の請求項３又は請求項８に記載の
発明によれば、類似例示画のみが指定された場合には、
前記複数種の特徴スケールで定義される特徴座標上にお
いて、前記類似例示画位置の平均位置と原点とを結ぶ直
線を類似例示画方向へ所定距離だけ延長した位置の近傍
に希望画像が存在するとの前提の元に検索条件の生成が
行われる。そのため、ある程度似ている例示画は存在す
る反面、全く似ていない例示画が存在しないような場合
にも、希望画像の傾向を装置側に対して的確に教示する
ことができる。
【００５８】この出願の請求項４又は請求項９に記載の
発明によれば、非類似例示画のみが指定された場合に
は、前記複数種の特徴スケールで定義される特徴座標上
において、前記非類似例示画位置の平均位置と原点とを
結ぶ直線を原点方向へ所定距離だけ延長した位置の近傍
に希望画像が存在するとの前提の元に検索条件の生成が
行われる。そのため、全く似ていない例示画ばかりで、
似ている例示画が全く存在しないような場合にも、希望
画像の傾向を装置側に対して的確に教示することができ
る。
【００５９】この出願の請求項５又は請求項１０に記載
の発明によれば、前記抽出されて表示された１若しくは
２以上の画像の中で、希望画像に類似する画像、及び／
又は、類似しない画像が１若しくは２以上再指定され
る。そのため、一度の検索で求める画像が見つからない
場合でも、類否再指定操作を繰り返しつつ、最終的には
効率良く希望の画像を検索することができる。
【図面の簡単な説明】
【図１】本発明装置のハードウェア構成を示すブロック
図である。
【図２】本発明装置に適用される画像データベースの構
成図である。
【図３】画像検索処理の詳細を示すフローチャートであ
る。
【図４】検索条件生成処理の説明図である。
【図５】検索条件生成処理の説明図である。
【図６】検索条件生成処理の説明図である。
【図７】検索条件生成処理の説明図である。
【図８】検索条件生成処理の説明図である。
【図９】類否指定操作中の画面表示例を示す図である。
【図１０】検索結果の画面表示例を示す図である。
【図１１】感性的特徴量、物理的特徴量、及びマッピン
グルールの相互関係を示す図である。
【符号の説明】
１ 中央処理装置 ２ 表示部 ３ 操作部 ４ プリンタ ５ 画像記憶部 ６ イメージスキャナ ７ システムバス ８ 図柄見本 ９ 画面 １０ ウインドウ（画像表示用） １１ スクロール用カーソル（画像スクロール用） １２ 類似マーク １３ 非類似マーク １４ 画像指定用カーソル １５ マウス Ｇ１〜Ｇ９ 例示画メニューに含まれる例示画 Ｇ１１〜Ｇ１９ 検索された画像 Ｐ１，Ｐ２，Ｐ８，Ｐ１２，Ｐ１３，Ｐ２０ 類似指
定の例示画位置 Ｐ３，Ｐ４，Ｐ１０，Ｐ１５，Ｐ１７，Ｐ１８ 非類
似指定の例示画位置 Ｐ５，Ｐ６，Ｐ１４，Ｐ１９ 例示画の平均位置 Ｐ７，Ｐ９，Ｐ１１，Ｐ１６，Ｐ２１ 求められる仮
想検索画像位置
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成７年７月１０日
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正内容】
【書類名】 明細書
【発明の名称】 画像検索方法及び装置
【特許請求の範囲】
【発明の詳細な説明】
【０００１】
【産業上の利用分野】この発明は、予め用意された多数
の画像の中から希望画像を例示画を提示して検索する例
示画入力方条件の画像検索装置に係り、特に例示画とし
て最適なものが得難い場合にも、効率良く希望の画像を
検索できるようにした画像検索装置に関する。
【０００２】
【従来の技術】例えば、服地、カーテン地、壁紙、刺繍
等々のデザインにあたっては、既存の図柄見本の中から
所望のデザインコンセプトに近いものを選び出し、それ
に適宜の改変を加えることにより、新たな図柄を創作す
ることがしばしばデザイナの間で行われている。このよ
うなデザイン作業の効率化のためには、できる限り速や
かに所望のデザインコンセプトに近い図柄を図柄見本か
ら探し出さねばならない。しかし、図柄見本の数が膨大
なものとなるに連れて、このような図柄見本検索作業を
人手に頼ることには自ずと限界があった。
【０００３】そこで、従来、このような図柄見本検索作
業を機械化するために、コンピュータ技術を利用した画
像検索装置が種々提案されている。かかる画像検索装置
にあっては、上述の図柄見本のそれぞれは、イメージス
キャナ等を介して画像データに変換されて、ＣＤ−ＲＯ
Ｍ等の大容量記憶媒体に格納される。同時に、各画像デ
ータに対しては、濃度値の変換、雑音の消去、ぼけの復
元、輪郭の検出強調、連結部分の抽出等の様々な画像処
理が加えられた後、その画像処理結果に基いて種々の特
徴抽出演算が行われ、境界線画素数、ホール数、曲線
度、色数、色分布、コントラスト、境界線画素分布、色
分布等と言った様々な画像特徴量（以下、これを後述す
る「感性的特徴量」との対比の為に「物理的特徴量」と
称する）が求められる。今仮に、ｋ枚の画像をｙ1 ，ｙ
2 ，ｙ3 ，…ｙk 、そのｎ種類の物理的特徴量をｘ1 ，
ｘ2 ，ｘ3 ，…ｘn とおけば、各画像はｎ次元のベクト
ル（ｘ11，ｘ21，ｘ31，…ｘn1），（ｘ12，ｘ22，
ｘ32，…ｘn2），…（ｘ1k，ｘ2k，ｘ3k，…ｘnk）とし
て表される。従って、所望のデザインコンセプトに合致
する画像ｙp を上述の物理的量を用いてベクトル
（ｘ1p，ｘ2p，ｘ3p，…ｘnp）の如く表し、これと上述
した各画像ｙ1 ，ｙ2 ，ｙ3 ，…ｙk に対応するベクト
ルとの距離を求め、それらの中で最も距離の近いものを
選択すれば、所望の画像に最も類似する画像を機械的に
検索することができる訳である。
【０００４】この種の画像検索装置の改良に関する技術
文献としては、特開平５−６４３７号公報（発明の名
称：「画像特徴抽出装置、画像特徴照合装置および画像
検索装置」）、或いは、情報ＣＧ・ＣＡＤ研究会１９９
４年８月，Ｖｏｌ．９４，Ｎｏ．７２，ｐ．４３〜４８
（論文の名称：「デザイン画の感性特徴と画像特徴」）
が知られている。これらの文献においては、画像検索を
人間の感性的な表現を利用して行うことを可能としてい
る。すなわち、上述の画像検索装置で利用されている物
理的特徴量は、与えられた画像データを画像処理した結
果に対して所定の特徴抽出演算を適用することにより機
械的かつ一義的に抽出される利点を有する反面、その表
現は、例えば、境界線画素数、ホール数、曲線度、色
数、色分布、コントラスト、境界線画素分布、色分布等
の如く、任意のデザインコンセプトを表現するには必ず
しも適切さに欠ける。そこで、この改良された画像検索
装置にあっては、暖かい／冷たい、男性的／女性的、安
定さ／不安定さ、対称的／非対称的、単純さ／複雑さ等
々のように、人間（デザイナー）が任意の画像の印象を
特定するのに用いる感性的特徴に着目し、こられの感性
的特徴量と前述した物理的特徴量との相関関係を統計的
な手法を用いて求め、この相関関係を用いた感性的特徴
量による画像検索を可能とした。概念的に説明すれば、
任意の画像の感性的特徴量をｗ1 ，ｗ2 ，ｗ3 ，…
ｗm ，その物理的特徴量をｘ1 ，ｘ2 ，ｘ3 ，…ｘn と
定義すると、各感性的特徴量ｗ1 ，ｗ2 ，ｗ3 ，…ｗm
は、それぞれｎ次元のベクトル（ａ11・ｘ1 ，ａ12・ｘ
2 ，ａ13・ｘ3 ，…ａ1n・ｘn ），（ａ 21・ｘ1 ，ａ22
・ｘ2 ，ａ23・ｘ3 ，…ａ2n・ｘn ），（ａ31・ｘ1 ，
ａ32・ｘ 2 ，ａ33・ｘ3 ，…ａ3n・ｘn ），…（ａm1・
ｘ1 ，ａm2・ｘ2 ，ａm3・ｘ3 ，…ａmn・ｘn ）と表さ
れる。従って、物理的特徴量から感性的特徴量へ変換す
る際の重み付け値群（ａ11，ａ12，ａ13，…ａ1n），
（ａ21，ａ22，ａ23，…ａ2n），（ａ31，ａ32，ａ33，
…ａ3n），…（ａm1，ａm2，ａm3，…ａmn）をデザイナ
ーに対するアンケート調査等を通じた統計的手法で予め
求めておけば、任意の画像データからその感性的特徴量
を機械的に抽出することができる。その為、画像検索処
理に際しては、入力画像の感性的特徴量と登録画像の感
性的特徴量との距離を求めることにより、物理的特徴量
を利用した場合に比べ、デザイナーの感性をより加味し
た画像検索が行われる。
【０００５】
【発明が解決しようとする課題】ところで、この種の画
像検索装置において、所望の画像の検索を行わせるため
には、検索したい画像の特徴を何らかの方法で装置側に
提示する必要がある。この画像特徴提示を、例えば、直
線度［０．９］、シャープ／ソフト度［０．８］等々の
如くに全ての物理的特徴或いは感性的特徴を数値入力し
て行うとすれば繁雑に絶えない。そこで、従来、この種
の画像検索装置にあっては、検索を希望する画像の特徴
を図画を用いて例示的に表現してなる例示画を用いるこ
とがしばしば行われている。すなわち、入力された例示
画は、前述の画像処理過程を経て、物理的特徴量、及び
／又は、感性的特徴量に機械的に変換され、それらの特
徴量と各登録画像の特徴量との距離が比較されて、入力
画像に類似する１若しくは２以上の画像が最終的に検索
されるのである。
【０００６】しかしながら、このような従来の例示画入
力方条件の画像検索装置にあっては、画像特徴提示に際
して繁雑な数値入力操作が不要である反面、検索を希望
する画像の特徴とぴったり合致する例示画が得られない
場合には、所望の特徴を有する画像をなかなか探し出す
ことができず、かえって使い勝手が悪い。
【０００７】また、当初は、基本コンセプトのみを表し
た例示画により画像特徴を提示し、その後、その例示画
に対して着色変更、模様変更等の軽微なバリエーション
を加えつつ、デザインコンセプトを膨らませて対応する
画像を逐次検索するような場合には、その都度、例示画
に対して着色変更や模様変更を実際に加えねばならず、
甚だ使い勝手が悪い、等の問題点があった。
【０００８】この発明は、上述の問題点に鑑みてなされ
たものであり、その目的とするところは、検索を希望す
る画像の特徴とぴったり合致する例示画が得られない場
合や、或いは基本コンセプトのみを表した例示画により
画像特徴を提示し、その後、その例示画に対して軽微な
バリエーションを加えつつ、デザインコンセプトを膨ら
ませて対応する画像を逐次検索するような場合にも、こ
れらの検索作業を効率よく実施させることが可能な画像
検索装置を提供することにある。
【０００９】
【課題を解決するための手段】この出願の請求項１に記
載の発明は、複数の画像をそれぞれに複数種の特徴量を
付して記憶させる画像記憶ステップと、互いに特徴の異
なる２以上の例示画を含む例示画メニューを表示させる
例示画メニュー表示ステップと、前記表示された例示画
メニューに含まれる例示画の中で、希望画像と類似する
例示画、及び／又は、類似しない例示画を１若しくは２
以上指定する類否指定ステップと、前記類否指定された
例示画の各特徴量に基いて、前記希望画像を検索するた
めの検索条件を生成する検索条件生成ステップと、前記
生成された検索条件に基いて、前記画像記憶手段に記憶
された画像から希望画像に類似する画像を１若しくは２
以上抽出する画像抽出ステップと、前記抽出された１若
しくは２以上の画像を表示する画像表示ステップと、を
具備することを特徴とする。
【００１０】この出願の請求項２に記載の発明は、前記
請求項１に記載の発明において、前記検索条件生成ステ
ップは、類似例示画と非類似例示画との双方が指定され
た場合には、前記複数種の特徴量で定義される特徴座標
上において、前記類似指定例示画位置の平均位置と前記
非類似指定例示画位置の平均位置とを結ぶ直線を類似指
定例示画方向へ所定距離だけ延長した位置の近傍に希望
画像が存在するとの前提の元に検索条件を生成すること
を特徴とする。
【００１１】この出願の請求項３に記載の発明は、前記
請求項１に記載の発明において、前記検索条件生成ステ
ップは、類似例示画のみが指定された場合には、前記複
数種の特徴量で定義される特徴座標上において、前記類
似指定例示画位置の平均位置と原点とを結ぶ直線を類似
指定例示画方向へ所定距離だけ延長した位置の近傍に希
望画像が存在するとの前提の元に検索条件を生成するこ
とを特徴とする。
【００１２】この出願の請求項４に記載の発明は、前記
請求項１に記載の発明において、前記検索条件生成ステ
ップは、非類似例示画のみが指定された場合には、前記
複数種の特徴量で定義される特徴座標上において、前記
非類似指定例示画位置の平均位置と原点とを結ぶ直線を
原点方向へ所定距離だけ延長した位置の近傍に希望画像
が存在するとの前提の元に検索条件を生成することを特
徴とする。
【００１３】この出願の請求項５に記載の発明は、前記
請求項１に記載の発明において、前記抽出されて表示さ
れた１若しくは２以上の画像の中で、希望画像に類似す
る画像、及び／又は、類似しない画像を１若しくは２以
上再指定するための類否再指定ステップを具備すること
を特徴とする。
【００１４】この出願の請求項６に記載の発明は、複数
の画像をそれぞれに複数種の特徴量を付して記憶させた
画像記憶手段と、互いに特徴の異なる２以上の例示画を
含む例示画メニューを表示させる例示画メニュー表示手
段と、前記表示された例示画メニューに含まれる例示画
の中で、希望画像と類似する例示画、及び／又は、類似
しない例示画を１若しくは２以上指定可能な類否指定手
段と、前記類否指定された例示画の各特徴量に基いて、
前記希望画像を検索するための検索条件を生成する検索
条件生成手段と、前記生成された検索条件に基いて、前
記画像記憶手段に記憶された画像から希望画像に類似す
る画像を１若しくは２以上抽出する画像抽出手段と、前
記抽出された１若しくは２以上の画像を表示する画像表
示手段と、を具備することを特徴とする。
【００１５】この出願の請求項７に記載の発明は、前記
請求項６に記載の発明において、前記検索条件生成手段
は、類似例示画と非類似例示画との双方が指定された場
合には、前記複数種の特徴量で定義される特徴座標上に
おいて、前記類似指定例示画位置の平均位置と前記非類
似指定例示画位置の平均位置とを結ぶ直線を類似指定例
示画方向へ所定距離だけ延長した位置の近傍に希望画像
が存在するとの前提の元に検索条件を生成することを特
徴とする。
【００１６】この出願の請求項８に記載の発明は、前記
請求項６に記載の発明において、前記検索条件生成手段
は、類似例示画のみが指定された場合には、前記複数種
の特徴量で定義される特徴座標上において、前記類似指
定例示画位置の平均位置と原点とを結ぶ直線を類似指定
例示画方向へ所定距離だけ延長した位置の近傍に希望画
像が存在するとの前提の元に検索条件を生成することを
特徴とする。
【００１７】この出願の請求項９に記載の発明は、前記
請求項６に記載の発明において、前記検索条件生成手段
は、非類似例示画のみが指定された場合には、前記複数
種の特徴量で定義される特徴座標上において、前記非類
似指定例示画位置の平均位置と原点とを結ぶ直線を原点
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件を生成することを特徴と
するを特徴とする。
【００１８】この出願の請求項１０に記載の発明は、前
記請求項６に記載の発明において、前記抽出されて表示
された１若しくは２以上の画像の中で、希望画像に類似
する画像、及び／又は、類似しない画像を１若しくは２
以上再指定するための類否再指定手段を具備すること特
徴とする。
【００１９】
【作用】この出願の請求項１に記載の発明によれば、複
数の画像がそれぞれに複数種の特徴量を付して記憶さ
れ、互いに特徴の異なる２以上の例示画を含む例示画メ
ニューが表示され、前記表示された例示画メニューに含
まれる例示画の中で、希望画像と類似する例示画、及び
／又は、類似しない例示画が１若しくは２以上指定さ
れ、前記類否指定された例示画の各特徴量に基いて、前
記希望画像を検索するための検索条が生成され、前記生
成された検索条件に基いて、前記記憶された画像から希
望画像に類似する画像が１若しくは２以上抽出され、前
記抽出された１若しくは２以上の画像が表示される。
【００２０】この出願の請求項２に記載の発明によれ
ば、類似例示画と非類似例示画との双方が指定された場
合には、前記複数種の特徴量で定義される特徴座標上に
おいて、前記類似指定例示画位置の平均位置と前記非類
似指定例示画位置の平均位置とを結ぶ直線を類似指定例
示画方向へ所定距離だけ延長した位置の近傍に希望画像
が存在するとの前提の元に検索条件が生成される。
【００２１】この出願の請求項３に記載の発明によれ
ば、類似例示画のみが指定された場合には、前記複数種
の特徴量で定義される特徴座標上において、前記類似指
定例示画位置の平均位置と原点とを結ぶ直線を類似指定
例示画方向へ所定距離だけ延長した位置の近傍に希望画
像が存在するとの前提の元に検索条件が生成される。
【００２２】この出願の請求項４に記載の発明によれ
ば、非類似例示画のみが指定された場合には、前記複数
種の特徴量で定義される特徴座標上において、前記非類
似指定例示画位置の平均位置と原点とを結ぶ直線を原点
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件が生成される。
【００２３】この出願の請求項５に記載の発明によれ
ば、前記抽出されて表示された１若しくは２以上の画像
の中で、希望画像に類似する画像、及び／又は、類似し
ない画像が１若しくは２以上再指定される。
【００２４】この出願の請求項６に記載の発明によれ
ば、複数の画像がそれぞれに複数種の特徴量を付して記
憶され、互いに特徴の異なる２以上の例示画を含む例示
画メニューが表示され、前記表示された例示画メニュー
に含まれる例示画の中で、希望画像と類似する例示画、
及び／又は、類似しない例示画が１若しくは２以上指定
され、前記類否指定された例示画の各特徴量に基いて、
前記希望画像を検索するための検索条件が生成され、前
記生成された検索条件に基いて、前記記憶された画像か
ら希望画像に類似する画像が１若しくは２以上抽出さ
れ、前記抽出された１若しくは２以上の画像が表示され
る。
【００２５】この出願の請求項７に記載の発明によれば
類似例示画と非類似例示画との双方が指定された場合に
は、前記複数種の特徴量で定義される特徴座標上におい
て、前記類似指定例示画位置の平均位置と前記非類似指
定例示画位置の平均位置とを結ぶ直線を類似指定例示画
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件が生成される。
【００２６】この出願の請求項８に記載の発明によれ
ば、類似例示画のみが指定された場合には、前記複数種
の特徴量で定義される特徴座標上において、前記類似指
定例示画位置の平均位置と原点とを結ぶ直線を類似指定
例示画方向へ所定距離だけ延長した位置の近傍に希望画
像が存在するとの前提の元に検索条件が生成される。
【００２７】この出願の請求項９に記載の発明によれ
ば、非類似例示画のみが指定された場合には、前記複数
種の特徴量で定義される特徴座標上において、前記非類
似指定例示画位置の平均位置と原点とを結ぶ直線を原点
方向へ所定距離だけ延長した位置の近傍に希望画像が存
在するとの前提の元に検索条件が生成される。
【００２８】この出願の請求項１０に記載の発明によれ
ば、前記抽出されて表示された１若しくは２以上の画像
の中で、希望画像に類似する画像、及び／又は、類似し
ない画像が１若しくは２以上再指定される。
【００２９】
【実施例】以下に、この発明の好適な一実施例を添付図
面を参照して詳細に説明する。この実施例の画像検索装
置のハードウェア構成を図１に示す。同図に示されるよ
うに、この画像検索装置のハードウェアは、中央処理装
置１、表示部２、操作部３、プリンタ４、画像記憶部５
及びイメージスキャナ６を備えたパーソナルコンピュー
タシステムとして構成されている。
【００３０】中央処理装置１は、良く知られているよう
に、ＭＰＵ，ＲＡＭ，ＲＯＭ等を主体として構成されて
おり、システムバス７を介して上述のシステム要素２〜
８を統括制御するものである。
【００３１】表示部２は、ＣＲＴ表示器、ＬＣＤ等で構
成されており、この表示部２の表示画面上には、図９及
び図１０を参照して後に詳細に説明するように、例示画
メニューとして表示された一位個数（この例では９個）
の例示画、或いは検索結果として抽出された一定個数
（この例では９個）の類似画がカラー表示されるように
なされている。
【００３２】操作部３は、キーボード、マウスなどで構
成されており、本装置に対する各種の指示入力は、この
操作部３を用いて行われる。
【００３３】プリンタ４は、レーザカラープリンタ等の
高精度プリンタで構成されており、検索された画像のハ
ードコピーを得るため等に用いられる。
【００３４】画像記憶部５は、追記型光ディスク、書き
替え型光ディスク等の大容量記憶装置で構成されてお
り、この画像記憶部５には、図２及び図１１を参照して
後に詳細に説明するように、検索対象となる多数の画像
が、その物理的特徴量、及び／または、感性的特徴量等
を付されて記憶される。
【００３５】イメージスキャナ６は、カラー表示された
任意の図柄見本８を画像データに変換するためのもので
あり、このイメージスキャナ６は、図１１を参照して後
に詳細に説明するように、画像登録処理のために、ある
いは図柄見本８を例示画として入力するため等に使用さ
れる。
【００３６】なお、以上のパーソナルコンピュータシス
テムを実現するためには、各種のオペレーティングシス
テム、描画用アプリケーションソフト等が必要であるこ
とは、当業者であれば用意に理解されるであろう。
【００３７】次に、図３は本発明装置のソフトウェア構
成を示す制御フローチャートであり、以下このフローチ
ャート及び図４〜図８の説明図を参照しながら、本発明
装置の動作を系統的に説明する。
【００３８】まず最初に、画像登録処理について説明す
る。図１１に示されるように、今仮に登録すべき画像乃
至図柄見本が１０００枚存在すると想定する。このよう
な場合、本発明では、まずその内の５０枚をサンプル分
析画像として確保し、このサンプル分析画像に対して、
感性的特徴量の抽出及び物理的特徴量の抽出を行う。感
性的特徴量の抽出は、適当な人数（例えば１００名）の
デザイナー或いは一般需要者に対するアンケート調査を
実施することにより行なわれる。その結果、サンプル分
析画像を構成する各画像の感性的特徴量は、例えばシャ
ープ・ソフト度は０．８、シンプル・デコラテブ度は
０．７、動的・静的度は０．６、モダン・クラッシック
度は０．３、抽象的・写実的度は０．９等のように定量
化される。なお、この例では、各特徴スケールの値は、
０．０〜１．０を１０段階に分割してなる各数値により
表されているが、これはあくまでも一例であって必要に
応じて任意の単位系を採用することができる。一方、物
理的特徴量の抽出はコンピュータ処理により機械的に行
われる。すなわち、５０枚のサンプル分析画像を構成す
る各画像に対しては、まず濃度値の変換、雑音の除去、
ぼけの復元、輪郭の検出強調、連結部分の抽出等の様々
な画像処理が施され、次いでその画像処理結果にに基づ
いて種々の特徴抽出演算が行われ、最終的に、例えば直
線度は０．９、コントラスト度は０．８、複雑度は０．
１等のように、各物理的特徴量が定量化される。
【００３９】このようにして、サンプル分析画像を構成
する各画像に対し、感性的特徴量及び物理的特徴量の抽
出が行われたならば、次いで両特徴量の相関関係を規定
するマッピングルールｆが、統計的手法により作成され
る。その結果、例えば、 シャープ／ソフト度＝０．９・直線度−０．２・複雑度 の如く、マッピングルールｆが求められる。
【００４０】以後、上で求められたマッピングルールｆ
を用いることにより、登録対象である１０００枚の画像
から感性的特徴量が機械的に求められ、こうして得られ
た物理的特徴量、感性的特徴量は、該当する画像とそれ
ぞれ関連付けられて画像データベースとして構成され、
最終的に画像記憶部５に記憶される。このようにして作
成された画像データベースの一例を図２に示す。同図に
示されるように、この例では、各画像データには画像Ｎ
ｏ．が付されており、また特徴量としては、感性的特徴
量である「ソフト／ハード度」、「静的／動的度」、
「シンプル／デコラティブ度」、「モダン／クラシック
度」、「抽象的／写実的度」、「ウォーム／クール度」
等が採用されている。尚、これは、あくまでも説明のた
めに簡素化して一例を示したに過ぎず、その他必要に応
じて、色数、複雑度、針数（刺繍模様の場合）、曲線
度、対称度等々のように任意の特徴スケールを採用する
ことができる。
【００４１】次に、本発明の要部である画像検索処理の
詳細を図３のフローチャート及び図４〜図８の説明図を
参照して説明する。同図において、処理が開始される
と、表示部２を構成する例えばＣＲＴ表示装置の画面上
には、互いに特徴の異なる２以上（この例では９個）の
例示画を含む例示画メニューが表示され（ステップ３０
１）、その後、類否指定操作を待機する状態となる（ス
テップ３０２ＮＯ）。
【００４２】例示画類否指定操作のために使用されるメ
ニュー表示の一例を図９に示す。同図に示されるよう
に、ＣＲＴ表示装置の画面９の略中央には正方形状のウ
インドウ１０が設けられ、このウインドウ１０内には９
枚の例示画Ｇ１〜Ｇ９が表示されている。また、ウイン
ドウ１０の右側縁部には上下方向に移動可能なスクロー
ル用カーソル１１が表示されている。このスクロール用
カーソル１１はマウス１５の操作により上下に移動させ
ることができ、それに伴いウインドウ１０内に表示され
た９枚の例示画Ｇ１〜Ｇ２を適宜にスクロールさせて、
別の例示画をウインドウ１０内に表示させることが可能
になされている。また、図９において矢印で示される画
像指定用カーソル１４もまたマウス１５の操作にて任意
の例示画位置に移動可能になされており、このカーソル
１４を例示画Ｇ１〜Ｇ９のいずれかの位置に移動させ、
その状態でマウス１５のクリック操作等により類似指定
操作を行うと、類似指定された例示画には図中丸印で示
される類似マーク１２が表示され、同様にして非類似指
定操作を行うと、非類似指定された例示画には図中×印
で示される非類似マーク１３が表示される。この例で
は、例示画Ｇ１と例示画Ｇ６とに類似マーク１２が表示
され、例示画Ｇ４と例示画Ｇ５とに非類似マーク１３が
表示された状態が示されている。
【００４３】図３のフローチャートに戻って、いずれか
の例示画Ｇ１〜Ｇ９について何らかの類否指定操作が検
出されると（ステップ３０２ＹＥＳ）、当該例示画は類
似指定例示画又は非類似指定例示画として記憶され、同
時にその例示画には前述の類似マーク１２又は非類似マ
ーク１３が表示される（ステップ３０３）。その後、類
否指定操作の完了を指示する所定操作が行われるまでの
間（ステップ３０４ＮＯ）、以上の処理（ステップ３０
１〜３０３）が繰り返される。この状態において、所定
の類否指定完了操作が確認されると（ステップ３０４Ｙ
ＥＳ）、続いて類似指定、及び／又は、非類似指定され
た例示画の特徴量に基いて検索条件生成処理が実行され
る（ステップ３０５）。
【００４４】次に、検索条件生成処理（ステップ３０
５）の詳細を図４〜図８を参照して説明する。検索条件
生成のための一般的な考え方から説明する。今仮に、感
性スケール座標上における類似指定された画像の平均位
置を ｘ1 ，ｘ2 ，…ｘn （なければ原点） とし、非類似指定された画像の平均位置を ｙ1 ，ｙ2 ，…ｙn （なければ原点） とすると、求められる仮想検索画像の位置は、 ａ1 ・（ｘ1 −ｙ1 ）＋ｘ1 ，ａ2 ・（ｘ2 −ｙ2 ）＋
ｘ2 ，…ａn ・（ｘn −ｙn ）＋ｘn として表される。尚、ここで、ａn は重み係数である。
従って、この位置に近い画像を検索すれば、求める類似
画を抽出することができる。これは、ユークリッド距離
の近いものから順に検索・抽出すれば良い。以上の一般
的な考え方を具体的な例を挙げて説明する。
【００４５】図４には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が２個、非類似
指定された例示画が２個の場合を示している。図中、白
丸印で示される点Ｐ１及び点Ｐ２はそれぞれ類似指定さ
れた画像位置、×印で示される点Ｐ３及び点Ｐ４はそれ
ぞれ非類似指定された画像位置、黒丸印で示された点Ｐ
５及び点Ｐ６はそれぞれ白丸印又は×印で示される画像
の感性的座標上における平均位置、二重丸印で示された
点Ｐ７は求める仮想検索画像の位置を示している。この
場合は、２個の類似指定画像位置Ｐ１，Ｐ２の平均位置
Ｐ５と２個の非類似指定画像位置Ｐ３，Ｐ４の平均位置
Ｐ６を結ぶ線分を類似指定画像側の平均位置Ｐ５側へと
延長し、Ｌ１：Ｌ２＝２：１となる点として、仮想検索
画像位置Ｐ７を求めることができる。従って、この仮想
検索画像位置Ｐ７と各登録画像位置とのユークリッド距
離をそれぞれ求め、それらの近いものから順に選ばれた
ｎ個を求める類似画として得ることができる。特に、こ
の例によれば、似ている例示画、及び／又は、似ていな
い例示画が複数存在するような場合には、希望画像の傾
向を装置に対してより的確に教示することができる。
【００４６】図５には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が１個、非類似
指定された例示画が０個の場合を示している。この場合
は、類似指定画像位置Ｐ８と原点Ｏとを結ぶ線分を類似
指定画像位置Ｐ８側へと延長し、Ｌ１：Ｌ２＝２：１と
なる点として、仮想検索画像位置Ｐ９を求めることがで
きる。従って、この仮想検索画像位置Ｐ９と各登録画像
位置とのユークリッド距離をそれぞれ求め、それらの距
離の近いものから順に選ばれたｎ個を求める類似画とし
て得ることができる。特に、この例によれば、ある程度
似ている例示画は存在する反面、全く似ていない例示画
が存在しないような場合にも、希望画像の傾向を装置側
に対して的確に教示することができる。
【００４７】図６には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が０個、非類似
指定された例示画が１個の場合を示している。この場合
は、非類似指定画像位置Ｐ１０と原点Ｏとを結ぶ線分を
原点Ｏ側へと延長し、Ｌ１：Ｌ２＝２：１となる点とし
て、仮想検索画像位置Ｐ１１を求めることができる。従
って、この仮想検索画像位置Ｐ１１と各登録画像位置と
のユークリッド距離をそれぞれ求め、それらの近いもの
から順に選ばれたｎ個を求める類似画として得ることが
できる。特に、この例によれば、全く似ていない例示画
ばかりで、似ている例示画が全く存在しないような場合
にも、希望画像の傾向を装置側に対して的確に教示する
ことができる。
【００４８】図７には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が２個、非類似
指定された例示画が１個の場合を示している。この場合
は、２個の類似指定画像位置Ｐ１２，Ｐ１３の平均位置
Ｐ１４と非類似指定画像位置Ｐ１５とを結ぶ線分を類似
指定画像側の平均位置Ｐ１４側へと延長し、Ｌ１：Ｌ２
＝２：１となる点として、仮想検索画像位置Ｐ１６を求
めることができる。従って、この仮想検索画像位置Ｐ１
６と各登録画像位置とのユークリッド距離をそれぞれ求
め、それらの近いものから順に選ばれたｎ個を求める類
似画として得ることができる。
【００４９】図８には、ハード／ソフト軸（Ｘ軸）とウ
ォーム／クール軸（Ｙ軸）とからなる二次元の感性的特
徴座標において、類似指定された例示画が１個、非類似
指定された例示画が２個の場合を示している。この場合
は、２個の非類似指定画像位置Ｐ１７，Ｐ１８の平均位
置Ｐ１９と類似指定画像位置Ｐ２０とを結ぶ線分を類似
指定画像位置Ｐ２０側へと延長し、Ｌ１：Ｌ２＝２：１
となる点として、仮想検索画像位置Ｐ２１を求めること
ができる。従って、この仮想検索画像位置Ｐ２１と各登
録画像位置とのユークリッド距離をそれぞれ求め、それ
らの近いものから順に選ばれたｎ個を求める類似画とし
て得ることができる。
【００５０】図３のフローチャートに戻って、検索条件
生成処理（ステップ３０５）にて検索条件が求められた
ならば、次いでその検索条件に従って所定個数の類似画
が画像記憶部５に格納された画像データベースから抽出
され（ステップ３０６）、抽出された類似画は画像表示
装置の画面上に表示される（ステップ３０７）。
【００５１】このようにして得られた検索結果の画面表
示例を図１０に示す。図９と図１０との比較から明らか
なように、図９に示される例示画メニューにおいて、縦
方向のストライプ模様を含む例示画Ｇ１，Ｇ６を類似指
定し、横方向のストライプ模様を含む例示画Ｇ４，Ｇ５
を非類似指定した結果、図１０に示される表示画面にお
いては、縦方向のストライプ模様を含む９個の画像Ｇ１
１〜Ｇ１９が検索表示されていることが理解されるであ
ろう。
【００５２】図３のフローチャートに戻って、装置側に
おいては、図１０に示されるように、抽出された９個の
画像Ｇ１１〜Ｇ１９を画面上に表示させつつ、検索オペ
レータが類否再指定操作を行うのを待機する状態となる
（ステップ３０８ＮＯ，ステップ３０９ＮＯ，ステップ
３０７）。この状態において、いずれかの画像Ｇ１１〜
Ｇ１９について何らかの類否指定操作が検出されると
（ステップ３０８ＹＥＳ）、当該画像は類似画像又は非
類似画像として記憶され、同時にその画像には前述の類
似マーク１２又は非類似マーク１３が表示される（ステ
ップ３１０）。その後、類否指定操作の完了を指示する
所定操作が行われるまでの間（ステップ３１１ＮＯ）、
以上の処理（ステップ３０７，３０８，３１０）が繰り
返される。この状態において、所定の類否指定完了操作
が確認されると（ステップ３１１ＹＥＳ）、続いて類似
指定、及び／又は、非類似指定された例示画の特徴スケ
ール値に基いて、前述の場合と同様にして検索条件生成
処理が再実行され（ステップ３０５）、画像抽出処理
（ステップ３０６）、抽出画像表示処理（ステップ３０
７）を経て、別の９個の画像が新たに表示される。
【００５３】上述の実施例の画像検索装置によれば、初
期設定された例示画メニューの中に希望の画像とぴった
り一致する例示画が存在しなくとも、ある程度類似する
例示画、及び／又は、あまり類似しない例示画が存在し
さえすれば、それらを用いて希望の画像の傾向を装置側
に間接的に教示することができ、更に類否指定操作を繰
り返すことにより、最終的には希望の画像を画像データ
ベースから効率良く検索することができる。
【００５４】尚、図４〜図８ではＬ１：Ｌ２＝２：１と
して仮想検索画像位置を求め、その近傍から類似画を抽
出したが、その他例えば特公平３−１９４６５５号公報
の第２図に示されるように、類似指定画像位置又はその
平均位置を頂点とする円錐体を類似画像側へと拡開さ
せ、その内部領域から類似画を検索抽出することもでき
る。
【００５５】
【発明の効果】この出願の請求項１又は請求項６の発明
によれば、互いに特徴の異なる２以上の例示画を含む例
示画メニューが表示され、前記表示された例示画メニュ
ーに含まれる例示画の中で、希望画像と類似する例示
画、及び／又は、類似しない例示画が１若しくは２以上
指定され、前記類否指定された例示画の各特徴スケール
値に基いて、前記希望画像を検索するための検索条件が
生成され、前記生成された検索条件に基いて、画像記憶
手段に記憶された画像から希望画像に類似する画像が１
若しくは２以上抽出され、前記抽出された１若しくは２
以上の画像が表示されることとなる。そのため、初期設
定された例示画メニューの中に希望の画像とぴったり一
致する例示画が存在しなくとも、ある程度類似する例示
画、及び／又は、あまり類似しない例示画が１以上存在
しさえすれば、それらを用いて希望の画像の傾向を装置
側に間接的に教示し、希望の画像を効率良く検索するこ
とができる。
【００５６】この出願の請求項２又は請求項７に記載の
発明によれば、類似例示画と非類似例示画との双方が指
定された場合には、前記複数種の特徴スケールで定義さ
れる特徴座標上において、前記類似例示画位置の平均位
置と前記非類似例示画位置の平均位置とを結ぶ直線を類
似例示画方向へ所定距離だけ延長した位置の近傍に希望
画像が存在するとの前提の元に検索条件の生成が行われ
る。そのため、似ている例示画、及び／又は、似ていな
い例示画が複数存在するような場合には、希望画像の傾
向を装置に対してより的確に教示することができる。
【００５７】この出願の請求項３又は請求項８に記載の
発明によれば、類似例示画のみが指定された場合には、
前記複数種の特徴スケールで定義される特徴座標上にお
いて、前記類似例示画位置の平均位置と原点とを結ぶ直
線を類似例示画方向へ所定距離だけ延長した位置の近傍
に希望画像が存在するとの前提の元に検索条件の生成が
行われる。そのため、ある程度似ている例示画は存在す
る反面、全く似ていない例示画が存在しないような場合
にも、希望画像の傾向を装置側に対して的確に教示する
ことができる。
【００５８】この出願の請求項４又は請求項９に記載の
発明によれば、非類似例示画のみが指定された場合に
は、前記複数種の特徴スケールで定義される特徴座標上
において、前記非類似例示画位置の平均位置と原点とを
結ぶ直線を原点方向へ所定距離だけ延長した位置の近傍
に希望画像が存在するとの前提の元に検索条件の生成が
行われる。そのため、全く似ていない例示画ばかりで、
似ている例示画が全く存在しないような場合にも、希望
画像の傾向を装置側に対して的確に教示することができ
る。
【００５９】この出願の請求項５又は請求項１０に記載
の発明によれば、前記抽出されて表示された１若しくは
２以上の画像の中で、希望画像に類似する画像、及び／
又は、類似しない画像が１若しくは２以上再指定され
る。そのため、一度の検索で求める画像が見つからない
場合でも、類否再指定操作を繰り返しつつ、最終的には
効率良く希望の画像を検索することができる。
【図面の簡単な説明】
【図１】本発明装置のハードウェア構成を示すブロック
図である。
【図２】本発明装置に適用される画像データベースの構
成図である。
【図３】画像検索処理の詳細を示すフローチャートであ
る。
【図４】検索条件生成処理の説明図である。
【図５】検索条件生成処理の説明図である。
【図６】検索条件生成処理の説明図である。
【図７】検索条件生成処理の説明図である。
【図８】検索条件生成処理の説明図である。
【図９】類否指定操作中の画面表示例を示す図である。
【図１０】検索結果の画面表示例を示す図である。
【図１１】感性的特徴量、物理的特徴量、及びマッピン
グルールの相互関係を示す図である。
【符号の説明】 １ 中央処理装置 ２ 表示部 ３ 操作部 ４ プリンタ ５ 画像記憶部 ６ イメージスキャナ ７ システムバス ８ 図柄見本 ９ 画面 １０ ウインドウ（画像表示用） １１ スクロール用カーソル（画像スクロール用） １２ 類似マーク １３ 非類似マーク １４ 画像指定用カーソル １５ マウス Ｇ１〜Ｇ９ 例示画メニューに含まれる例示画 Ｇ１１〜Ｇ１９ 検索された画像 Ｐ１，Ｐ２，Ｐ８，Ｐ１２，Ｐ１３，Ｐ２０ 類似指
定の例示画位置 Ｐ３，Ｐ４，Ｐ１０，Ｐ１５，Ｐ１７，Ｐ１８ 非類
似指定の例示画位置 Ｐ５，Ｐ６，Ｐ１４，Ｐ１９ 例示画の平均位置 Ｐ７，Ｐ９，Ｐ１１，Ｐ１６，Ｐ２１ 求められる仮
想検索画像位置

Claims (10)

    【特許請求の範囲】
  1. 【請求項１】 複数の画像をそれぞれに複数種の特徴量
    を付して記憶させる画像記憶ステップと、 互いに特徴の異なる２以上の例示画を含む例示画メニュ
    ーを表示させる例示画メニュー表示ステップと、 前記表示された例示画メニューに含まれる例示画の中
    で、希望画像と類似する例示画、及び／又は、類似しな
    い例示画を１若しくは２以上指定する類否指定ステップ
    と、 前記類否指定された例示画の各特徴量に基いて、前記希
    望画像を検索するための検索条件を生成する検索条件生
    成ステップと、 前記生成された検索条件に基いて、前記画像記憶手段に
    記憶された画像から希望画像に類似する画像を１若しく
    は２以上抽出する画像抽出ステップと、 前記抽出された１若しくは２以上の画像を表示する画像
    表示ステップと、 を具備することを特徴とする画像検索方法。
  2. 【請求項２】 前記検索条件生成ステップは、類似例示
    画と非類似例示画との双方が指定された場合には、前記
    複数種の特徴量で定義される特徴座標上において、前記
    類似指定例示画位置の平均位置と前記非類似指定例示画
    位置の平均位置とを結ぶ直線を類似指定例示画方向へ所
    定距離だけ延長した位置の近傍に希望画像が存在すると
    の前提の元に検索条件を生成することを特徴とする請求
    項１に記載の画像検索方法。
  3. 【請求項３】 前記検索条件生成ステップは、類似例示
    画のみが指定された場合には、前記複数種の特徴量で定
    義される特徴座標上において、前記類似指定例示画位置
    の平均位置と原点とを結ぶ直線を類似指定例示画方向へ
    所定距離だけ延長した位置の近傍に希望画像が存在する
    との前提の元に検索条件を生成することを特徴とする請
    求項１に記載の画像検索方法。
  4. 【請求項４】 前記検索条件生成ステップは、非類似例
    示画のみが指定された場合には、前記複数種の特徴量で
    定義される特徴座標上において、前記非類似指定例示画
    位置の平均位置と原点とを結ぶ直線を原点方向へ所定距
    離だけ延長した位置の近傍に希望画像が存在するとの前
    提の元に検索条件を生成することを特徴とする請求項１
    に記載の画像検索方法。
  5. 【請求項５】 前記抽出されて表示された１若しくは２
    以上の画像の中で、希望画像に類似する画像、及び／又
    は、類似しない画像を１若しくは２以上再指定するため
    の類否再指定ステップを具備することを特徴とする請求
    項１に記載の画像検索方法。
  6. 【請求項６】 複数の画像をそれぞれに複数種の特徴量
    を付して記憶させた画像記憶手段と、 互いに特徴の異なる２以上の例示画を含む例示画メニュ
    ーを表示させる例示画メニュー表示手段と、 前記表示された例示画メニューに含まれる例示画の中
    で、希望画像と類似する例示画、及び／又は、類似しな
    い例示画を１若しくは２以上指定可能な類否指定手段
    と、 前記類否指定された例示画の各特徴量に基いて、
    前記希望画像を検索するための検索条件を生成する検索
    条件生成手段と、 前記生成された検索条件に基いて、前記画像記憶手段に
    記憶された画像から希望画像に類似する画像を１若しく
    は２以上抽出する画像抽出手段と、 前記抽出された１若しくは２以上の画像を表示する画像
    表示手段と、 を具備することを特徴とする画像検索装置。
  7. 【請求項７】 前記検索条件生成手段は、類似例示画と
    非類似例示画との双方が指定された場合には、前記複数
    種の特徴量で定義される特徴座標上において、前記類似
    指定例示画位置の平均位置と前記非類似指定例示画位置
    の平均位置とを結ぶ直線を類似指定例示画方向へ所定距
    離だけ延長した位置の近傍に希望画像が存在するとの前
    提の元に検索条件を生成することを特徴とする請求項６
    に記載の画像検索装置。
  8. 【請求項８】 前記検索条件生成手段は、類似例示画の
    みが指定された場合には、前記複数種の特徴量で定義さ
    れる特徴座標上において、前記類似指定例示画位置の平
    均位置と原点とを結ぶ直線を類似指定例示画方向へ所定
    距離だけ延長した位置の近傍に希望画像が存在するとの
    前提の元に検索条件を生成することを特徴とする請求項
    ６に記載の画像検索装置。
  9. 【請求項９】 前記検索条件生成手段は、非類似例示画
    のみが指定された場合には、前記複数種の特徴量で定義
    される特徴座標上において、前記非類似指定例示画位置
    の平均位置と原点とを結ぶ直線を原点方向へ所定距離だ
    け延長した位置の近傍に希望画像が存在するとの前提の
    元に検索条件を生成することを特徴とする請求項６に記
    載の画像検索装置。
  10. 【請求項１０】 前記抽出されて表示された１若しくは
    ２以上の画像の中で、希望画像に類似する画像、及び／
    又は、類似しない画像を１若しくは２以上再指定するた
    めの類否再指定手段を具備することを特徴とする請求項
    ６に記載の画像検索装置。
JP7055937A 1995-03-15 1995-03-15 画像検索方法及び装置 Pending JPH08249353A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP7055937A JPH08249353A (ja) 1995-03-15 1995-03-15 画像検索方法及び装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7055937A JPH08249353A (ja) 1995-03-15 1995-03-15 画像検索方法及び装置

Publications (1)

Publication Number Publication Date
JPH08249353A true JPH08249353A (ja) 1996-09-27

Family

ID=13012995

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7055937A Pending JPH08249353A (ja) 1995-03-15 1995-03-15 画像検索方法及び装置

Country Status (1)

Country Link
JP (1) JPH08249353A (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10188023A (ja) * 1996-12-24 1998-07-21 Fuji Xerox Co Ltd 画像デザイン支援装置
JPH10253389A (ja) * 1997-03-12 1998-09-25 Tsubasa Syst Kk 車両修理費見積システム
JPH1166309A (ja) * 1997-08-21 1999-03-09 Fuji Xerox Co Ltd 画像感性特性評価装置
JP2002536730A (ja) * 1999-01-29 2002-10-29 エルジー エレクトロニクス インコーポレーテッド マルチメディアデータの検索又はブラウジング方法
JP2002536731A (ja) * 1999-02-01 2002-10-29 エルジー エレクトロニクス インコーポレーテッド マルチメディアデータのサーチ方法
JP2003076717A (ja) * 2001-09-04 2003-03-14 Nippon Telegr & Teleph Corp <Ntt> 情報検索方法及び装置と、情報検索プログラム及びそのプログラムの記録媒体
JP2013004093A (ja) * 2011-06-16 2013-01-07 Fujitsu Ltd マルチインスタンス学習による検索方法及びシステム
US10216818B2 (en) 2014-02-28 2019-02-26 Fujifilm Corporation Product search apparatus, method, and system
US10229177B2 (en) 2014-02-28 2019-03-12 Fujifilm Corporation Product search apparatus, method, and system
CN112685586A (zh) * 2019-10-18 2021-04-20 富士施乐株式会社 检索条件确定系统、检索系统及存储介质

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10188023A (ja) * 1996-12-24 1998-07-21 Fuji Xerox Co Ltd 画像デザイン支援装置
JPH10253389A (ja) * 1997-03-12 1998-09-25 Tsubasa Syst Kk 車両修理費見積システム
JPH1166309A (ja) * 1997-08-21 1999-03-09 Fuji Xerox Co Ltd 画像感性特性評価装置
JP2002536730A (ja) * 1999-01-29 2002-10-29 エルジー エレクトロニクス インコーポレーテッド マルチメディアデータの検索又はブラウジング方法
US6643643B1 (en) 1999-01-29 2003-11-04 Lg Electronics Inc. Method of searching or browsing multimedia data and data structure
JP2002536731A (ja) * 1999-02-01 2002-10-29 エルジー エレクトロニクス インコーポレーテッド マルチメディアデータのサーチ方法
JP2003076717A (ja) * 2001-09-04 2003-03-14 Nippon Telegr & Teleph Corp <Ntt> 情報検索方法及び装置と、情報検索プログラム及びそのプログラムの記録媒体
JP2013004093A (ja) * 2011-06-16 2013-01-07 Fujitsu Ltd マルチインスタンス学習による検索方法及びシステム
US10216818B2 (en) 2014-02-28 2019-02-26 Fujifilm Corporation Product search apparatus, method, and system
US10229177B2 (en) 2014-02-28 2019-03-12 Fujifilm Corporation Product search apparatus, method, and system
CN112685586A (zh) * 2019-10-18 2021-04-20 富士施乐株式会社 检索条件确定系统、检索系统及存储介质

Similar Documents

Publication Publication Date Title
US11010421B2 (en) Techniques for modifying a query image
JP4074366B2 (ja) 画像検索装置及び方法並びに画像検索プログラムを記録した記録媒体
JP2816241B2 (ja) 画像情報検索装置
JPH09101970A (ja) 画像検索方法および画像検索装置
US7362922B2 (en) Image database apparatus and method of controlling operation of same
JPH08249352A (ja) 画像検索方法及び装置
JP2002288219A (ja) 情報検索システムおよび方法
CN113330455A (zh) 使用有条件的生成对抗网络查找互补的数字图像
JP4165160B2 (ja) デザイン制作支援システム及びデザイン制作支援プログラム
JPH08249353A (ja) 画像検索方法及び装置
JPH01161481A (ja) 表示装置
JPH09114853A (ja) 画像検索方法および画像検索装置
US20230419574A1 (en) Information processing apparatus and control method therefor
JPH1049544A (ja) 視覚的多次元データ分析支援方法及び装置
JP5413143B2 (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP3284528B2 (ja) 画像検索方法及び装置
JP6363547B2 (ja) 情報処理装置、及び文章画像化プログラム
JP2001117936A (ja) ３次元類似画像検索装置
JPH08287086A (ja) 適合度順画像強調表示方法及び装置
JPH08194716A (ja) 画像処理方法及びその装置
US20110016380A1 (en) Form editing apparatus, form editing method, and storage medium
US20230030087A1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
JPH10340272A (ja) 類似画像検索装置及び方法
US12412327B2 (en) Information processing apparatus, control method therefor, and storage medium
JP2000339463A (ja) 画像処理方法及びその装置並びに記憶媒体