JP2000217026A

JP2000217026A - 画像処理装置及び方法並びに記憶媒体

Info

Publication number: JP2000217026A
Application number: JP11017865A
Authority: JP
Inventors: Kitahiro Kaneda; 北洋金田
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1999-01-27
Filing date: 1999-01-27
Publication date: 2000-08-04

Abstract

(57)【要約】【課題】入力画像が写真の場合に撮影日時を自動入力
する。【解決手段】スキャナ１０は、写真を画像読取りす
る。スキャナ１０により読み取られた画像データは画像
メモリ１２に格納される。認識回路１４は、画像メモリ
１２から画像データを読み出し、所定の領域について文
字認識を行い、撮影日時の文字情報を出力する。変換回
路１６は、認識回路１４により認識された撮影日時を属
性情報として、画像メモリ１２に記憶される画像をフラ
ッシュピックス画像に変換する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像処理装置及び
方法並びに記憶媒体に関し、より具体的には、入力画像
に属性情報を付加する画像処理装置及び方法並びに記憶
媒体に関する。

【０００２】

【従来の技術】電子スチル・カメラ、イメージ・スキャ
ナ及びフィルム・スキャナなど、種々の画像入力装置が
容易に利用できるようになった。他方、画像データに入
力（撮影）時の情報を付加して、入力時の状況を反映し
た再生画像を得られるようにした画像ファイル形式が検
討されている。

【０００３】

【発明が解決しようとする課題】従来、例えば、銀塩写
真をイメージ・スキャナ又はフィルム・スキャナ等の読
取り装置で読み取ったものを入力画像とする場合、属性
情報を手入力する必要があり、ユーザに大きな負担を与
えていた。

【０００４】本発明は、このような面倒を緩和した画像
処理装置及び方法並びに記憶媒体を提示することを目的
とする。

【０００５】

【課題を解決するための手段】本発明の画像処理装置
は、入力画像を所定フォーマットに変換する画像処理装
置であって、当該入力画像を入力する入力手段と、当該
入力画像を記憶手段に記憶させる制御手段と、当該記憶
手段に記憶される画像から所望の情報を認識する認識手
段と、当該認識手段の認識結果に基づいて当該入力画像
を当該所定フォーマットに変換し、当該認識手段の認識
結果を所定位置に付加する変換手段とを具備することを
特徴とする。

【０００６】本発明に係る画像処理方法は、入力画像を
所定フォーマットに変換する画像処理方法であって、当
該入力画像を記憶手段に記憶させる書き込みステップ
と、当該記憶手段に記憶される画像から所望の情報を認
識する認識ステップと、当該認識ステップの認識結果に
基づいて当該入力画像を当該所定フォーマットに変換
し、当該認識ステップの認識結果を所定位置に付加する
変換ステップとを具備することを特徴とする。

【０００７】

【実施例】以下、図面を参照して、本発明の実施例を詳
細に説明する。

【０００８】図１は、本発明の一実施例の概略構成ブロ
ック図を示す。１０は写真又はそのフィルムを読み取る
スキャナ、１２は、スキャナ１０により入力された画像
を記憶する画像メモリ、１４は画像メモリ１２に格納さ
れた画像から所望の情報を認識する認識回路、１６は、
認識回路１４により認識された情報を参照して、画像メ
モリ１２に記憶される画像をフラッシュピックス画像に
変換する変換回路である。

【０００９】画像データに属性情報を付加する画像ファ
イル形式の１つとして、画像データを構造化したファイ
ル・フォーマッＦｌａｓｈＰｉｘ（フラッシュピック
ス）（米国イーストマンコダック社の商標）が知られて
いる。そのＦｌａｓｈＰｉｘファイル・フォーマットで
は、画像ヘッダ部に格納される画像属性情報と画像デー
タをさらに構造化してファイル化する。この構造化した
画像ファイルのファイル構造を、図７及び図８に示す。
ファイル内の各プロパティ及びデータには、パーソナル
・コンピュータの周知のオペレーティング・システムで
使用されるディレクトリとファイルに相当するストレー
ジとストリームによってアクセスする。図７及び図８に
おいて、二重枠がストレージを示し、一重枠がストリー
ムを示す。

【００１０】画像データ及びその画像属性情報は、スト
リーム部分に格納される。画像データは異なる解像度で
階層化されており、各解像度の画像をサブイメージ（Ｓ
ｕｂｉｍａｇｅ）と呼ぶ。図７では、各サブイメージを
Ｒｅｓｏｌｕｔｉｏｎ０、Ｒｅｓｏｌｕｔｉｏｎ
１、・・・、Ｒｅｓｏｌｕｔｉｏｎｎと記してある。
各解像度画像に対して、その画像を読み出すために必要
な情報がサブイメージ・ヘッダ（Ｓｕｂｉｍａｇｅｈ
ｅａｄｅｒ）に格納され、画像データ自体はサブイメー
ジ・データ（Ｓｕｂｉｍａｇｅｄａｔａ）に格納され
る。

【００１１】プロパティ・セットは、属性情報をその使
用目的及び内容に応じて分類して定義したものである。
サマリイ・インフォ・プロパティ・セット(Ｓｕｍｍａ
ｒｙｉｎｆｏ．ＰｒｏｐｅｒｔｙＳｅｔ）、イメー
ジ・インフォ・プロパティ・セット（Ｉｍａｇｅｉｎ
ｆｏ．Ｐｒｏｐｅｒｔｙｓｅｔ）、イメージ・コン
テンツ・プロパティ・セット（ＩｍａｇｅＣｏｎｔｅ
ｎｔｓＰｒｏｐｅｒｔｙｓｅｔ）、及びエクステン
ション・リスト・プロパティ・セット（Ｅｘｔｅｎｓｉ
ｏｎｌｉｓｔＰｒｏｐｅｒｔｙｓｅｔ）がある。

【００１２】各プロパティ・セットの内容を簡単に説明
する。サマリィ・インフォ・プロパティ・セットは、フ
ラッシュピックス特有のものではなく、米国マイクロソ
フト社のストラクチャード・ストレージでは必須のプロ
パティセットであり、そのファイルのタイトル、題名、
著者及びサムネール画像等を格納する。

【００１３】イメージ・コンテンツ・プロパティ・セッ
トは、画像データの格納方法を記述する属性であり、そ
の各プロパティを図１１に例示した。この属性には、画
像データの階層数、最大解像度の画像の幅及び高さ、各
解像度の画像の幅、高さ及び色の構成、並びに、ＪＰＥ
Ｇ圧縮の量子化テーブル及びハフマンテーブルの定義が
記述される。

【００１４】イメージ・インフォ・プロパティ・セット
は、画像を使用する際に利用できるさまざまな情報、例
えば、その画像がどのようにして取り込まれ、どのよう
に利用可能であるかの情報を格納する。例えば、ディジ
タルデータの取り込み方法又は生成方法に関する情報
（ＦｉｌｅＳｏｕｒｃｅ）、著作権に関する情報（Ｉ
ｎｔｅｌｌｅｃｔｕａｌｐｒｏｐｅｒｔｙ）、画像の
内容（画像中の人物及び場所など）に関する情報Ｃｏｎ
ｔｅｎｔｄｅｓｃｒｉｐｔｉｏｎ）、撮影に使われた
カメラに関する情報（Ｃａｍｅｒａｉｎｆｏｒｍａｔ
ｉｏｎ）、撮影時のカメラのセッティング（露出、シャ
ッタスピード、焦点距離及びフラッシュ使用の有無な
ど）の情報（ＰｅｒＰｉｃｔｕｒｅｃａｍｅｒａ
ｓｅｔｔｉｎｇ）、ディジタルカメラ特有の解像度及び
モザイクフィルタに関する情報（Ｄｉｇｉｔａｌｃａ
ｍｅｒａｃｈａｒａｃｔｅｒｉｚａｔｉｏｎ）、フィ
ルムのメーカ名、製品名及び種類（ネガ、ポジ、カラー
及び白黒）などの情報（Ｆｉｌｍｄｅｓｃｒｉｐｔｉ
ｏｎ）、オリジナルが書物や印刷物である場合の種類や
サイズに関する情報（Ｏｒｉｇｉｎａｌｄｏｃｕｍｅ
ｎｔｓｃａｎｄｅｓｃｒｉｐｔｉｏｎ）、並びに、
スキャン画像の場合に使用したスキャナ及びソフトウエ
ア及び操作した人に関する情報（Ｓｃａｎｄｅｖｉｃ
ｅ）がある。

【００１５】エクスティション・リスト・プロパティ・
セットは、以上のフラッシュピックスの基本仕様に含ま
れない情報を追加するさいに使用される。

【００１６】図８に示すフラッシュピックス・イメージ
・ビュー・オブジェクト（ＦｌａｓｈＰｉｘｉｍａｇ
ｅｖｉｅｗＯｂｊｅｃｔ）は、画像を表示する際に
用いるビューイングパラメータと画像データを併せて格
納するディレクトリ又は画像ファイルである。ビューイ
ングパラメータは、画像表示の際に適用する画像の回
転、拡大、縮小、移動、色変換及びフィルタリングの処
理の係数のセットである。

【００１７】ＳｏｕｒｃｅＦｌａｓｈＰｉｘｉｍａ
ｇｅＯｂｊｅｃｔ及びＲｅｓｕｌｔＦｌａｓｈＰｉ
ｘｉｍａｇｅＯｂｊｅｃｔは、フラッシュピックス
画像データの実体であり、ＳｏｕｒｃｅＦｌａｓｈＰ
ｉｘｉｍａｇｅＯｂｊｅｃｔは必須であるが、Ｒｅ
ｓｕｌｔＦｌａｓｈＰｉｘｉｍａｇｅＯｂｊｅｃ
ｔはオプションである。ＳｏｕｒｃｅＦｌａｓｈＰｉ
ｘｉｍａｇｅＯｂｊｅｃｔはオリジナルの画像デー
タを格納し、ＲｅｓｕｌｔＦｌａｓｈＰｉｘｉｍａｇ
ｅＯｂｊｅｃｔは、ビューイングパラメータを使って
画像処理した結果の画像データを格納する。

【００１８】Ｓｏｕｒｃｅｄｅｓｃ．Ｐｒｏｐｅｒ
ｔｙｓｅｔ及びＲｅｓｕｌｔｄｅｓｃ．Ｐｒｏｐ
ｅｒｔｙｓｅｔは、画像データの識別のためのプロパ
ティ・セットであり、画像ＩＤ、変更禁止のプロパティ
セット及び最終更新日時等を格納する。

【００１９】Ｔｒａｎｓｆｏｒｍｐｒｏｐｅｒｔｙ
ｓｅｔは、回転、拡大、縮小及び移動のためのアフィン
変換係数、色変換マトリクス、コントラスト調整値並び
にフィルタリング係数を格納する。

【００２０】次に、画像データの取り扱いを説明する。
図９に、解像度の異なる複数の画像の一例を示す。図９
で、最大解像度の画像は、列×行がＸ０×Ｙ０で構成さ
れており、その次に大きい画像はＸ０／２×Ｙ０／２で
構成され、以降、順次、列及び行ともに６４画素以下又
は６４画素に等しくなるまで、列及び行ともに２分の１
ずつ縮小することを繰り返す。

【００２１】このように階層化した結果、画像の属性情
報として、１つの画像ファイル中の階層数だけでなく、
各階層の画像に対して、従来の画像フォーマットで用い
られるヘッダ情報と画像データが必要となる。１つの画
像ファイル中の階層の数、最大解像度の画像の幅及び高
さ、並びに、各解像度の画像の幅、高さ、色構成及び圧
縮方式等に関する惰報は、図１１に例示するイメージ・
コンテンツ・プロパティ・セット中に記述される。

【００２２】各解像度のレイヤの画像は、図１０に示す
ように６４×６４のタイルに分割されている。画像の左
上部から順次、６４×６４のタイルに分割すると、画像
によっては右端及び下端のタイルの一部に空白が生ずる
場合がある。その場合、それぞれ最右端画像又は最下端
画像を繰り返し挿入することで、６４×６４画素を構築
する。フラッシュピックスでは、各タイル中の画像を、
ＪＰＥＧ圧縮方式、シングルカラー又は非圧縮の何れか
の方法で格納する。ＪＰＥＧ圧縮方式は、ＩＳＯ／ＩＥ
ＣＪＴＣ１／ＳＣ２９により国際標準化された画像圧縮
方式であり、その詳細な説明はここでは省略する。シン
グルカラーとは、１つのタイルがすべて同じ色で構成さ
れている場合に、個々の画素の値を記録することなく、
そのタイルの１つの色のみで表現する方式である。この
方法は、特にコンピュータグラフィックスにより生成さ
れた画像で有効である。

【００２３】このようにタイル分割された画像データ
は、サブイメージ・データ（Ｓｕｂｉｍａｇｅｄａｔ
ａ）ストリーム中に格納され、タイルの総数、個々のタ
イルのサイズ、データの開始位置及び圧縮方法はすべ
て、サブイメージ・ヘッダ（Ｓｕｂｉｍａｇｅｈｅａ
ｄｅｒ）（図１２）に格納される。

【００２４】本実施例の動作を説明する。スキャナ１０
により入力された画像データは画像メモリ１２に格納さ
れる。認識回路１４は、画像メモリ１２から画像データ
を読み出し、読み出した画像上の所定部分について文字
情報を認識する。変換回路１６は、認識回路１４で認識
された情報を参照して、画像メモリ１２に記憶される画
像をフラッシュピックス画像に変換する。

【００２５】図２は、認識回路１４の処理の流れを示す
フローチャートである。図２を参照して、認識回路１４
の動作を説明する。画像メモリ１２から画像を読み取り
（Ｓ１）、読み取った画像データを２値化し（Ｓ２）、
２値化された画像に対し、図３に例示するように、撮影
日時のプリント領域を含む矩形領域を抽出する（Ｓ
３）。これは、平成６年特許出願公開第６８３０１号に
記載されているブロックセレクション技術等を適用すれ
ばよい。

【００２６】Ｓ３で抽出されたエリア内の画像に対し文
字認識を実行し、撮影日時を文字情報として取得する
（Ｓ４）。そして、認識された撮影日時情報を変換回路
１６に出力する（Ｓ５）。

【００２７】図４は、変換回路１６の処理の流れを示す
フローチャートである。図４を参照して、変換回路１６
の動作を説明する。画像メモリ１２から画像を読み込み
（Ｓ１１）、フラッシュピックス画像に展開する（Ｓ１
２）。認識回路１４により文字認識された撮影日時情報
を読み込み（Ｓ１３）、読み込んだ撮影日時情報を、図
７に示すイメージ・インフォ・プロパティ・セット（Ｉ
ｍａｇｅｉｎｆｏ．ＰｒｏｐｅｒｔｙＳｅｔ）へ埋
め込む（Ｓ１４）。最終的なフラッシュピックス画像の
フォーマットに整えて外部に出力する（Ｓ１５）。

【００２８】このように、本実施例によれば、フラッシ
ュピックス画像の属性情報の付加を、この場合は銀塩写
真上の撮影日時の入力を、領域識別技術と文字認識技術
を組み合わせることにより自動的に行うことができ、ユ
ーザの負担を大幅に軽減できる。

【００２９】上記実施例では、ブロックセレクション技
術を適用して写真上の撮影日時領域を判断したが、予め
その位置が判明している場合には、予め作成したテンプ
レートなどを適用すれば、領域判断の手間を省ける。そ
のフローチャートを図５に示す。図２のＳ３を、図５の
Ｓ３ａに示すように変更するだけである。

【００３０】また、上記実施例では、属性情報として写
真上の撮影日時を自動認識しているが、これに限定され
ずに、他の属性情報であってもよい。例えば図６に示す
ように、メッセージ又は被写体の状態、及び露出アンダ
ー又は露出オーバーなどを示す情報であってもよい。

【００３１】更には、上記実施例では、写真上の撮影日
時を自動認識しているが、これに限定されずに、例え
ば、任意の画像上の手書きメッセージ等を認識させても
よい。

【００３２】本発明は、複数の機器（例えばホストコン
ピュータ、インタフェース機器、リーダ及びプリンタ
等）から構成されるシステムに適用しても、一つの機器
（例えば複写機及びファクシミリ装置）からなる装置に
適用してもよい。

【００３３】また、上述した実施形態の機能を実現する
ように各種のデバイスを動作させるべく当該各種デバイ
スと接続された装置又はシステム内のコンピュータに、
上記実施形態の機能を実現するためのソフトウェアのプ
ログラムコードを供給し、その装置又はシステムのコン
ピュータ（ＣＰＵ又はＭＰＵ）を、格納されたプログラ
ムに従って前記各種デバイスを動作させることによって
実施したものも、本願発明の範囲に含まれる。

【００３４】この場合、前記ソフトウエアのプログラム
コード自体が、前述した実施形態の機能を実現すること
になり、そのプログラムコード自体、及びそのプログラ
ムコードをコンピュータに供給するための手段、例え
ば、かかるプログラムコードを格納した記憶媒体は、本
発明を構成する。かかるプログラムコードを格納する記
憶媒体としては、例えば、フロッピーディスク、ハード
ディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯ
Ｍ、磁気テープ、不揮発性のメモリカード及びＲＯＭ等
を用いることが出来る。

【００３５】また、コンピュータが供給されたプログラ
ムコードを実行することにより、前述の実施形態の機能
が実現されるだけではなく、そのプログラムコードがコ
ンピュータにおいて稼働しているＯＳ（オペレーティン
グシステム）又は他のアプリケーションソフトウエア等
と共同して上述の実施形態の機能が実現される場合に
も、かかるプログラムコードが本出願に係る発明の実施
形態に含まれることは言うまでもない。

【００３６】更には、供給されたプログラムコードが、
コンピュータの機能拡張ボード又はコンピュータに接続
された機能拡張ユニットに備わるメモリに格納された
後、そのプログラムコードの指示に基づいて、その機能
拡張ボード又は機能拡張ユニットに備わるＣＰＵ等が実
際の処理の一部または全部を行い、その処理によって上
述した実施形態の機能が実現される場合も、本出願に係
る発明に含まれることは言うまでもない。

【００３７】

【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、属性情報を入力する手間を省くこ
とができる。

【図面の簡単な説明】

【図１】本発明の一実施例の概略構成ブロック図であ
る。

【図２】認識回路１４の処理の流れを示すフローチャ
ートである。

【図３】写真上の撮影日時のプリント領域を説明する
模式図である。

【図４】変換回路１６の処理の流れを示すフローチャ
ートである。

【図５】認識回路１４の処理の流れの別の例を示すフ
ローチャートである。

【図６】写真上の別のメッセージ例の模式図である。

【図７】構造化された画像ファイルの構造の説明図で
ある。

【図８】構造化された画像ファイルの構造の説明図で
ある。

【図９】解像度の異なる画像ファイルの一例である。

【図１０】タイル分割の説明図である。

【図１１】イメージ・コンテンツ・プロパティ・セッ
トの説明表である。

【図１２】サブイメージ・ヘッダの説明表である。

【符号の説明】

１０：画像入力装置１２：画像メモリ１４：認識回路１６：変換回路

Claims

【特許請求の範囲】

【請求項１】入力画像を所定フォーマットに変換する
画像処理装置であって、当該入力画像を入力する入力手段と、当該入力画像を記憶手段に記憶させる制御手段と、当該記憶手段に記憶される画像から所望の情報を認識す
る認識手段と、当該認識手段の認識結果に基づいて当該入力画像を当該
所定フォーマットに変換し、当該認識手段の認識結果を
所定位置に付加する変換手段とを具備することを特徴と
する画像処理装置。
【請求項２】当該入力画像がテキスト付き写真である
請求項１に記載の画像処理装置。
【請求項３】当該認識手段が、所定領域内の画像から
文字情報を認識する請求項１に記載の画像処理装置。
【請求項４】当該認識手段が、当該記憶手段に記憶さ
れる画像を２値化する２値化手段と、当該２値化手段に
よる２値画像から、当該所定の情報の配置される領域を
抽出する領域抽出手段と、当該領域抽出手段により抽出
された領域から当該所定の情報の文字を認識する文字認
識手段とからなる請求項３に記載の画像処理装置。
【請求項５】当該所定の情報が撮影日時情報である請
求項４に記載の画像処理装置。
【請求項６】当該入力画像が、文字メッセージを含む
画像である請求項１に記載の画像処理装置。
【請求項７】入力画像を所定フォーマットに変換する
画像処理方法であって、当該入力画像を記憶手段に記憶させる書き込みステップ
と、当該記憶手段に記憶される画像から所望の情報を認識す
る認識ステップと、当該認識ステップの認識結果に基づいて当該入力画像を
当該所定フォーマットに変換し、当該認識ステップの認
識結果を所定位置に付加する変換ステップとを具備する
ことを特徴とする画像処理方法。
【請求項８】当該入力画像がテキスト付き写真である
請求項７に記載の画像処理方法。
【請求項９】当該認識手段が、所定領域内の画像から
文字情報を認識する請求項７に記載の画像処理方法。
【請求項１０】当該認識ステップが、当該記憶手段に
記憶される画像を２値化する２値化ステップと、当該２
値化ステップによる２値画像から、当該所定の情報の配
置される領域を抽出する領域抽出ステップと、当該領域
抽出ステップにより抽出された領域から当該所定の情報
の文字を認識する文字認識ステップとからなる請求項９
に記載の画像処理方法。
【請求項１１】当該所定の情報が撮影日時情報である
請求項１０に記載の画像処理方法。
【請求項１２】当該入力画像が文字メッセージを含む
画像である請求項７に記載の画像処理方法。
【請求項１３】入力画像を記憶手段に記憶させる書き
込みステップと、当該記憶手段に記憶される画像から所望の情報を認識す
る認識ステップと、当該認識ステップの認識結果に基づいて当該入力画像を
所定フォーマットに変換し、当該認識ステップの認識結
果を所定位置に付加する変換ステップとからなるプログ
ラム・ソフトウエアを外部読み出し自在に記憶すること
を特徴とする記憶媒体。
【請求項１４】当該入力画像がテキスト付き写真であ
る請求項１３に記載の記憶媒体。
【請求項１５】当該認識手段が、所定領域内の画像か
ら文字情報を認識する請求項１３に記載の記憶媒体。
【請求項１６】当該認識ステップが、当該記憶手段に
記憶される画像を２値化する２値化ステップと、当該２
値化ステップによる２値画像から、当該所定の情報の配
置される領域を抽出する領域抽出ステップと、当該領域
抽出ステップにより抽出された領域から当該所定の情報
の文字を認識する文字認識ステップとからなる請求項１
５に記載の記憶媒体。
【請求項１７】当該所定の情報が撮影日時情報である
請求項１６に記載の記憶媒体。
【請求項１８】当該入力画像が文字メッセージを含む
画像である請求項１３に記載の記憶媒体。