JPH1021365A - 画像データ管理装置 - Google Patents
画像データ管理装置Info
- Publication number
- JPH1021365A JPH1021365A JP8172614A JP17261496A JPH1021365A JP H1021365 A JPH1021365 A JP H1021365A JP 8172614 A JP8172614 A JP 8172614A JP 17261496 A JP17261496 A JP 17261496A JP H1021365 A JPH1021365 A JP H1021365A
- Authority
- JP
- Japan
- Prior art keywords
- character
- image
- information
- image data
- template
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Character Discrimination (AREA)
Abstract
(57)【要約】
【課題】 ＩＤ情報を付されている画像の画像データを
そのＩＤ情報と対応付けて自動的にファイリングする。 【解決手段】 ＣＴ、ＭＲＩ等の撮像装置９で撮影され
たＩＤ情報を付された画像から、文字パターンマッチン
グによるＩＤ認識手段10によりＩＤ情報を認識し、ファ
イリング手段60によりそのＩＤ情報を検索情報として画
像データと対応付けて記憶手段65にファイリングする。
そのＩＤ情報と対応付けて自動的にファイリングする。 【解決手段】 ＣＴ、ＭＲＩ等の撮像装置９で撮影され
たＩＤ情報を付された画像から、文字パターンマッチン
グによるＩＤ認識手段10によりＩＤ情報を認識し、ファ
イリング手段60によりそのＩＤ情報を検索情報として画
像データと対応付けて記憶手段65にファイリングする。
Description
【０００１】
【発明の属する技術分野】本発明は、画像データ管理装
置に関するものであり、詳細には診断用の画像の外に撮
影用や患者に関するデータ等の文字を含む医用画像等の
ように、被写体画像の外に文字情報を含む画像を担持す
る画像データをファイリングする画像データ管理装置に
関するものである。
置に関するものであり、詳細には診断用の画像の外に撮
影用や患者に関するデータ等の文字を含む医用画像等の
ように、被写体画像の外に文字情報を含む画像を担持す
る画像データをファイリングする画像データ管理装置に
関するものである。
【０００２】
【従来の技術】従来より、人体等の被写体をＣＴ、ＭＲ
Ｉ等によって撮影して得られた医用画像の画像データ
を、各画像データに適切な画像処理を施した後、画像を
再生記録することが行われており、これらの画像データ
に基づき被写体の画像を写真感光材料等の記録材料、Ｃ
ＲＴ等に可視像として出力させる画像記録再生システム
がすでに実用化されている。
Ｉ等によって撮影して得られた医用画像の画像データ
を、各画像データに適切な画像処理を施した後、画像を
再生記録することが行われており、これらの画像データ
に基づき被写体の画像を写真感光材料等の記録材料、Ｃ
ＲＴ等に可視像として出力させる画像記録再生システム
がすでに実用化されている。
【０００３】これらの画像記録再生システムにおいて
は、各種モダリティ（ＣＴ、ＭＲＩ等の撮影方法や装
置）によって撮影された画像等が記憶されており、記憶
されている画像データの中から常時、必要な画像データ
を検索して再生することが行われている。
は、各種モダリティ（ＣＴ、ＭＲＩ等の撮影方法や装
置）によって撮影された画像等が記憶されており、記憶
されている画像データの中から常時、必要な画像データ
を検索して再生することが行われている。
【０００４】画像データを検索可能に蓄積する装置は、
一般にファイリング装置と呼ばれるものであり、上記画
像記録再生システムもファイリング装置を備えてなるも
のである。医用画像の画像データ検索に用いられる検索
情報は、一般に患者名、ＩＤ番号、撮影日、生年月日等
のＩＤ情報であり、画像データはこれらのＩＤ情報と対
応付けて記憶されている。なお、これらのＩＤ情報は、
通常医用画像撮影時に付されるものであり、漢字、か
な、英文字、数字、記号等（以下「文字」と総称する）
から構成される。
一般にファイリング装置と呼ばれるものであり、上記画
像記録再生システムもファイリング装置を備えてなるも
のである。医用画像の画像データ検索に用いられる検索
情報は、一般に患者名、ＩＤ番号、撮影日、生年月日等
のＩＤ情報であり、画像データはこれらのＩＤ情報と対
応付けて記憶されている。なお、これらのＩＤ情報は、
通常医用画像撮影時に付されるものであり、漢字、か
な、英文字、数字、記号等（以下「文字」と総称する）
から構成される。
【０００５】
【発明が解決しようとする課題】しかしながら、従来こ
のファイリング装置によるファイリング時における画像
データとＩＤ情報との対応付けは、外部入力装置から人
手によりＩＤ情報を入力することによって行われており
操作者側の負担となっていた。そのため、通常撮影時に
画像中に付されるＩＤ情報を画像から認識して自動的に
ＩＤ情報と画像データを対応付けてファイリングするこ
とができるファイリング装置すなわち画像データ管理装
置が望まれている。
のファイリング装置によるファイリング時における画像
データとＩＤ情報との対応付けは、外部入力装置から人
手によりＩＤ情報を入力することによって行われており
操作者側の負担となっていた。そのため、通常撮影時に
画像中に付されるＩＤ情報を画像から認識して自動的に
ＩＤ情報と画像データを対応付けてファイリングするこ
とができるファイリング装置すなわち画像データ管理装
置が望まれている。
【０００６】本発明は、上記事情に鑑みてなされたもの
であって、画像と該画像中に付されている文字を対応付
けて自動的にファイリングすることのできる画像データ
管理装置を提供することを目的とするものである。
であって、画像と該画像中に付されている文字を対応付
けて自動的にファイリングすることのできる画像データ
管理装置を提供することを目的とするものである。
【０００７】
【課題を解決するための手段】本発明の画像データ管理
装置は、各種装置で撮影された文字情報を含む画像を担
持する画像データを前記文字情報と対応付けて記憶する
画像データ管理装置において、前記画像から前記文字情
報を認識する文字認識手段と、前記認識された文字情報
と前記画像データとを自動的に対応付けるファイリング
手段とを備えることを特徴とするものである。
装置は、各種装置で撮影された文字情報を含む画像を担
持する画像データを前記文字情報と対応付けて記憶する
画像データ管理装置において、前記画像から前記文字情
報を認識する文字認識手段と、前記認識された文字情報
と前記画像データとを自動的に対応付けるファイリング
手段とを備えることを特徴とするものである。
【０００８】ここで、画像データとは、各種装置で撮影
された原画像を担持する画像データであってもよいし、
原画像データに対して所定の処理が施された処理済画像
データであってもよい。
された原画像を担持する画像データであってもよいし、
原画像データに対して所定の処理が施された処理済画像
データであってもよい。
【０００９】本発明の画像データ管理装置が内包する文
字認識手段は、各種装置によって生成された文字を含む
画像中から該文字を認識する文字認識手段であって、前
記各種装置毎に定められている前記画像中の文字領域お
よび文字間隔を含む文字位置情報と前記各種装置とを対
応させて記憶している文字位置情報記憶手段と、前記画
像を生成した装置の情報が入力され、該入力された情報
に応じて前記文字位置情報を前記文字位置情報記憶手段
から選択する文字位置情報選択手段と、前記文字位置情
報に基づいて、前記画像中の文字領域に対して、各種、
各サイズの文字のテンプレートを用いて文字パターンマ
ッチングさせることにより文字を認識するマッチング手
段とを備えてなるものとすることができる。
字認識手段は、各種装置によって生成された文字を含む
画像中から該文字を認識する文字認識手段であって、前
記各種装置毎に定められている前記画像中の文字領域お
よび文字間隔を含む文字位置情報と前記各種装置とを対
応させて記憶している文字位置情報記憶手段と、前記画
像を生成した装置の情報が入力され、該入力された情報
に応じて前記文字位置情報を前記文字位置情報記憶手段
から選択する文字位置情報選択手段と、前記文字位置情
報に基づいて、前記画像中の文字領域に対して、各種、
各サイズの文字のテンプレートを用いて文字パターンマ
ッチングさせることにより文字を認識するマッチング手
段とを備えてなるものとすることができる。
【００１０】またこのとき、前記テンプレートを前記文
字間隔分ずつ移動させて文字パターンマッチングさせて
もよい。
字間隔分ずつ移動させて文字パターンマッチングさせて
もよい。
【００１１】なお、ここで文字領域とは文字が付されう
る領域のことをいい、実際の文字が付されているかどう
かを問わない。また、文字間隔とは一文字の中心と次の
文字の中心との間隔のことをいう。
る領域のことをいい、実際の文字が付されているかどう
かを問わない。また、文字間隔とは一文字の中心と次の
文字の中心との間隔のことをいう。
【００１２】さらに、前記各種装置毎の固有の文字のテ
ンプレートを備えた辞書と、前記画像を生成した装置の
情報が入力され、該入力された情報に応じて該装置に固
有の文字のテンプレートを前記辞書から選択するテンプ
レート選択手段とを備え、前記画像中の文字に対して前
記テンプレートを用いて文字パターンマッチングさせる
ようにしてもよい。
ンプレートを備えた辞書と、前記画像を生成した装置の
情報が入力され、該入力された情報に応じて該装置に固
有の文字のテンプレートを前記辞書から選択するテンプ
レート選択手段とを備え、前記画像中の文字に対して前
記テンプレートを用いて文字パターンマッチングさせる
ようにしてもよい。
【００１３】ここで、各種装置毎の固有の文字のテンプ
レートとは、各種装置が画像撮影時に該画像にＩＤ情報
等の文字情報を付するのに用いている文字の種類、大き
さ等を含む文字フォントについてのテンプレートのこと
をいう。
レートとは、各種装置が画像撮影時に該画像にＩＤ情報
等の文字情報を付するのに用いている文字の種類、大き
さ等を含む文字フォントについてのテンプレートのこと
をいう。
【００１４】なお、上述の文字位置情報選択手段とテン
プレート選択手段は別個に設けてもよいし、一つの選択
手段が両者を兼ねるものであってもよい。
プレート選択手段は別個に設けてもよいし、一つの選択
手段が両者を兼ねるものであってもよい。
【００１５】また、前記画像を２値化して、２値化画像
を生成する２値化画像生成手段を備え、前記マッチング
を前記２値化画像に対してマッチングさせる形態であっ
てもよい。
を生成する２値化画像生成手段を備え、前記マッチング
を前記２値化画像に対してマッチングさせる形態であっ
てもよい。
【００１６】なお、前記２値化画像生成手段は、画像の
輪郭を抽出する手段を含むものであることが望ましい。
特に、前記２値化画像生成手段が、前記画像の各画素毎
に該画素の所定近傍範囲中の画素濃度の最大値と最小値
との差を求める演算手段と、前記濃度差と所定の閾値と
の比較により前記各画素を２値化して画像の輪郭を抽出
する２値化手段とから成るものとするのが望ましい。こ
の場合、各画素毎に該画素の所定近傍範囲中の画素濃度
の最大値と最小値との差を所定の閾値と比較して２値化
することにより画像中の文字の輪郭を抽出し、その輪郭
に対してパターンマッチングさせて文字認識を行うこと
を特徴とするものである。
輪郭を抽出する手段を含むものであることが望ましい。
特に、前記２値化画像生成手段が、前記画像の各画素毎
に該画素の所定近傍範囲中の画素濃度の最大値と最小値
との差を求める演算手段と、前記濃度差と所定の閾値と
の比較により前記各画素を２値化して画像の輪郭を抽出
する２値化手段とから成るものとするのが望ましい。こ
の場合、各画素毎に該画素の所定近傍範囲中の画素濃度
の最大値と最小値との差を所定の閾値と比較して２値化
することにより画像中の文字の輪郭を抽出し、その輪郭
に対してパターンマッチングさせて文字認識を行うこと
を特徴とするものである。
【００１７】そのほか、輪郭の抽出方法としては、例え
ば一次微分フィルタ（ロバーツのフィルタ、ブレヴィッ
トのフィルタ、ソーベルのフィルタ等）あるいはラプラ
シアンフィルタ等を用いる方法が挙げられる。
ば一次微分フィルタ（ロバーツのフィルタ、ブレヴィッ
トのフィルタ、ソーベルのフィルタ等）あるいはラプラ
シアンフィルタ等を用いる方法が挙げられる。
【００１８】なお、ここで画像とは文字および絵柄が混
在したものをいう。
在したものをいう。
【００１９】
【発明の効果】本発明の画像データ管理装置は、画像上
の文字情報を認識する文字認識装置を備えており、自動
的に画像上の文字情報を認識して、画像データをその文
字情報と対応付けてファイリングするので、ファイリン
グ時に外部入力手段によって人手により検索情報を入力
する必要がないため、作業効率を向上させることができ
る。
の文字情報を認識する文字認識装置を備えており、自動
的に画像上の文字情報を認識して、画像データをその文
字情報と対応付けてファイリングするので、ファイリン
グ時に外部入力手段によって人手により検索情報を入力
する必要がないため、作業効率を向上させることができ
る。
【００２０】
【発明の実施の形態】以下、本発明の画像データ管理装
置の具体的な実施の形態を図面を参照して説明する。
置の具体的な実施の形態を図面を参照して説明する。
【００２１】図１に示すように、本発明の画像データ管
理装置70は、ＣＴ、ＭＲＩ等の各種モダリティ９（以
下、撮像装置という）で撮像された原画像を担持する原
画像データＳが入力され、原画像に付されている文字情
報、すなわちＩＤ情報を認識するＩＤ認識手段（文字認
識手段）10と、原画像データＳとその原画像に付されＩ
Ｄ認識手段10によって認識されたＩＤ情報Ｉとの対応付
けをして後述の記憶手段65に記憶させるファイリング手
段60と、ファイリング手段60によって対応付けされた原
画像データＳとそのＩＤ情報Ｉとを記憶するハードディ
スク等の記憶手段65とからなるものである。
理装置70は、ＣＴ、ＭＲＩ等の各種モダリティ９（以
下、撮像装置という）で撮像された原画像を担持する原
画像データＳが入力され、原画像に付されている文字情
報、すなわちＩＤ情報を認識するＩＤ認識手段（文字認
識手段）10と、原画像データＳとその原画像に付されＩ
Ｄ認識手段10によって認識されたＩＤ情報Ｉとの対応付
けをして後述の記憶手段65に記憶させるファイリング手
段60と、ファイリング手段60によって対応付けされた原
画像データＳとそのＩＤ情報Ｉとを記憶するハードディ
スク等の記憶手段65とからなるものである。
【００２２】撮像装置９で撮像された画像は、デジタル
化されて原画像データＳとして画像データ管理装置70に
入力される。この際、その画像を生成した装置情報も同
時に入力手段50より入力される。画像データ管理装置70
においては、まず、ＩＤ認識装置10において、入力手段
50から入力された装置情報を基に、画像に付されている
ＩＤ情報Ｉが認識される（文字認識についての詳細は後
述する）。ＩＤ認識装置10において認識されたＩＤ情報
Ｉは原画像データＳと共にファイリング手段60に送られ
る。ファイリング手段60においては、ＩＤ認識装置10に
おいて認識されたＩＤ情報Ｉと原画像データＳとを対応
付けてハードディスク等の記憶手段65にファイリングす
る。ファイリングされた原画像データＳは、常時検索可
能であり、検索には検索情報として原画像データＳと対
応付けられて記憶されているＩＤ情報Ｉを用いる。
化されて原画像データＳとして画像データ管理装置70に
入力される。この際、その画像を生成した装置情報も同
時に入力手段50より入力される。画像データ管理装置70
においては、まず、ＩＤ認識装置10において、入力手段
50から入力された装置情報を基に、画像に付されている
ＩＤ情報Ｉが認識される（文字認識についての詳細は後
述する）。ＩＤ認識装置10において認識されたＩＤ情報
Ｉは原画像データＳと共にファイリング手段60に送られ
る。ファイリング手段60においては、ＩＤ認識装置10に
おいて認識されたＩＤ情報Ｉと原画像データＳとを対応
付けてハードディスク等の記憶手段65にファイリングす
る。ファイリングされた原画像データＳは、常時検索可
能であり、検索には検索情報として原画像データＳと対
応付けられて記憶されているＩＤ情報Ｉを用いる。
【００２３】このように、本発明の画像データ管理装置
においては、画像中のＩＤ情報を認識して、そのＩＤ情
報と画像データを対応付けて自動的にファイリングする
ので、画像データを生成した撮像装置の情報さえ入力し
ておけば、外部からＩＤ情報を入力する必要がなく、作
業効率を上げることができる。
においては、画像中のＩＤ情報を認識して、そのＩＤ情
報と画像データを対応付けて自動的にファイリングする
ので、画像データを生成した撮像装置の情報さえ入力し
ておけば、外部からＩＤ情報を入力する必要がなく、作
業効率を上げることができる。
【００２４】なお、検索情報として画像データと対応付
けられるのは認識されたＩＤ情報の全てであってもよい
し、またその一部であってもよい。例えば、ＩＤ情報と
して画像に付されている情報が、患者名、ＩＤ番号、撮
影日等、複数であった場合、それぞれの情報を検索情報
とすることができるように対応付けしてもよいし、これ
らのうちの一つを選んで、例えばＩＤ番号のみを検索情
報として対応付けをしてファイリングしてもよい。さら
に、複数の文字からなる各ＩＤ情報の最初の数文字のみ
を用いて検索情報として対応付けすることも可能であ
る。
けられるのは認識されたＩＤ情報の全てであってもよい
し、またその一部であってもよい。例えば、ＩＤ情報と
して画像に付されている情報が、患者名、ＩＤ番号、撮
影日等、複数であった場合、それぞれの情報を検索情報
とすることができるように対応付けしてもよいし、これ
らのうちの一つを選んで、例えばＩＤ番号のみを検索情
報として対応付けをしてファイリングしてもよい。さら
に、複数の文字からなる各ＩＤ情報の最初の数文字のみ
を用いて検索情報として対応付けすることも可能であ
る。
【００２５】次に、本発明の画像データ管理装置が内包
するＩＤ認識手段（文字認識手段）の詳細を説明する。
するＩＤ認識手段（文字認識手段）の詳細を説明する。
【００２６】文字認識手段の第一の形態を図２に示す。
本文字認識手段10は、原画像データＳが入力され、該原
画像データＳに基づく原画像を２値化して２値化画像を
生成する２値化画像生成手段20と、原画像を生成する各
種装置の固有の文字フォントのテンプレート５を備えた
辞書35と、原画像を生成する各種装置毎に定められてい
る画像中の文字領域および文字間隔等の文字位置情報を
有する文字位置情報記憶手段38と、外部入力手段50から
入力された装置情報に応じた文字フォントのテンプレー
ト５を辞書35から選択し、装置情報に応じた文字位置情
報を文字位置情報記憶手段38から選択する選択手段40
と、２値化画像生成手段20によって生成された２値化画
像に対して、選択手段40によって選択されたテンプレー
ト５を用いて、同様に選択された文字位置情報に基づい
て文字パターンマッチングさせることにより文字を認識
するマッチング手段30とから成る。
本文字認識手段10は、原画像データＳが入力され、該原
画像データＳに基づく原画像を２値化して２値化画像を
生成する２値化画像生成手段20と、原画像を生成する各
種装置の固有の文字フォントのテンプレート５を備えた
辞書35と、原画像を生成する各種装置毎に定められてい
る画像中の文字領域および文字間隔等の文字位置情報を
有する文字位置情報記憶手段38と、外部入力手段50から
入力された装置情報に応じた文字フォントのテンプレー
ト５を辞書35から選択し、装置情報に応じた文字位置情
報を文字位置情報記憶手段38から選択する選択手段40
と、２値化画像生成手段20によって生成された２値化画
像に対して、選択手段40によって選択されたテンプレー
ト５を用いて、同様に選択された文字位置情報に基づい
て文字パターンマッチングさせることにより文字を認識
するマッチング手段30とから成る。
【００２７】２値化画像生成手段20は、詳しくは原画像
の各画素毎の濃度を検出する濃度検出手段22と、該濃度
検出手段22により検出された濃度と所定の閾値との比較
により前記各画素を２値化する２値化手段24とからな
る。
の各画素毎の濃度を検出する濃度検出手段22と、該濃度
検出手段22により検出された濃度と所定の閾値との比較
により前記各画素を２値化する２値化手段24とからな
る。
【００２８】本文字認識手段の第一の形態による文字認
識手段10は、原画像データＳが入力され、同時に外部入
力手段50により認識すべき文字を含む原画像Ａ（原画像
データＳに対応する画像）を生成した装置の情報が入力
される。まず、２値化画像生成手段20において、原画像
Ａから２値化画像Ｂが生成される（図３(i) ）。画像の
２値化は、まず、濃度検出手段22により原画像Ａの各画
素の濃度を検出し、その後、２値化手段24において、検
出された濃度と所定の閾値との比較により各画素を２値
化することによって行われる。例えば、濃度を表す帯グ
ラフ８に示すｂの濃度に閾値を設け、ｂより濃い部分を
「１」薄い部分を「０」として２値化する。その結果２
値化画像Ｂが得られる。
識手段10は、原画像データＳが入力され、同時に外部入
力手段50により認識すべき文字を含む原画像Ａ（原画像
データＳに対応する画像）を生成した装置の情報が入力
される。まず、２値化画像生成手段20において、原画像
Ａから２値化画像Ｂが生成される（図３(i) ）。画像の
２値化は、まず、濃度検出手段22により原画像Ａの各画
素の濃度を検出し、その後、２値化手段24において、検
出された濃度と所定の閾値との比較により各画素を２値
化することによって行われる。例えば、濃度を表す帯グ
ラフ８に示すｂの濃度に閾値を設け、ｂより濃い部分を
「１」薄い部分を「０」として２値化する。その結果２
値化画像Ｂが得られる。
【００２９】次に、選択手段40によって、外部入力手段
50により入力された装置情報に応じたテンプレート、す
なわち原画像Ａを生成した装置が用いている文字フォン
トのテンプレート５が辞書35から選択され、同時にその
装置情報に応じた文字位置情報が文字位置情報記憶手段
38から選択されて、マッチング手段30において、選択さ
れたテンプレート５を用いて、２値化画像Ｂの文字領域
６に対してマッチングが行われる（図４）。
50により入力された装置情報に応じたテンプレート、す
なわち原画像Ａを生成した装置が用いている文字フォン
トのテンプレート５が辞書35から選択され、同時にその
装置情報に応じた文字位置情報が文字位置情報記憶手段
38から選択されて、マッチング手段30において、選択さ
れたテンプレート５を用いて、２値化画像Ｂの文字領域
６に対してマッチングが行われる（図４）。
【００３０】各種装置固有の文字位置情報には、文字領
域６のほか文字間隔に関する情報も含むため、文字領域
に付されうる文字同志の間隔すなわちそれぞれマッチン
グすべき文字の中心位置が明らかである。マッチング
は、文字の中心位置とテンプレートの中心位置を一致さ
せて行えば十分であり、そのため、図４に示すように文
字領域のマッチング開始位置から文字間隔分ずつテンプ
レート５を移動させてマッチングさせればよい。これに
よって、一画素毎にずらせてマッチングさせる場合と比
較して、高速に処理することができる。
域６のほか文字間隔に関する情報も含むため、文字領域
に付されうる文字同志の間隔すなわちそれぞれマッチン
グすべき文字の中心位置が明らかである。マッチング
は、文字の中心位置とテンプレートの中心位置を一致さ
せて行えば十分であり、そのため、図４に示すように文
字領域のマッチング開始位置から文字間隔分ずつテンプ
レート５を移動させてマッチングさせればよい。これに
よって、一画素毎にずらせてマッチングさせる場合と比
較して、高速に処理することができる。
【００３１】また、選択された、すなわち非常に限られ
た数のテンプレートについてのみマッチングすればよい
ため、高速な識別が可能となる。
た数のテンプレートについてのみマッチングすればよい
ため、高速な識別が可能となる。
【００３２】ここで、従来の一般的なテンプレートマッ
チングによる認識方法を説明する。画像パターンｆとテ
ンプレートパターンｇが、それぞれ図５に示すような大
きさと位置関係にあるとき、画像の点（m，n）における
画像パターンｆと、テンプレートパターンｇの類似度
は、以下に示す評価関数で表される。
チングによる認識方法を説明する。画像パターンｆとテ
ンプレートパターンｇが、それぞれ図５に示すような大
きさと位置関係にあるとき、画像の点（m，n）における
画像パターンｆと、テンプレートパターンｇの類似度
は、以下に示す評価関数で表される。
【００３３】
【数１】
【００３４】ここで通常、Ｒ(m,n)は相互相関係数と呼
ばれ、領域Ｄは、|i-m|＜M/2，|j-n|＜N/2を満たす
（i，j） の範囲である。画像上でテンプレートを動か
して順次、画像とテンプレートとの類似度を上記の相互
相関係数Ｒにより判別する。相互相関係数Ｒの値は大き
いほど画像の（m，n）を中心としてテンプレートに近い
図形が存在すること、すなわち、画像とテンプレートと
の相関が強いことを示し、画像とテンプレートとが完全
一致で１の値、全くの不一致で０の値をとる。通常、最
も相互相関係数Ｒの大きいものを認識結果とする。しか
しながら、上記のテンプレートマッチング方法では、上
記式に示されるように２乗や平方根の計算が必要である
ことから、計算量が多くなり認識に時間がかかるという
欠点がある。
ばれ、領域Ｄは、|i-m|＜M/2，|j-n|＜N/2を満たす
（i，j） の範囲である。画像上でテンプレートを動か
して順次、画像とテンプレートとの類似度を上記の相互
相関係数Ｒにより判別する。相互相関係数Ｒの値は大き
いほど画像の（m，n）を中心としてテンプレートに近い
図形が存在すること、すなわち、画像とテンプレートと
の相関が強いことを示し、画像とテンプレートとが完全
一致で１の値、全くの不一致で０の値をとる。通常、最
も相互相関係数Ｒの大きいものを認識結果とする。しか
しながら、上記のテンプレートマッチング方法では、上
記式に示されるように２乗や平方根の計算が必要である
ことから、計算量が多くなり認識に時間がかかるという
欠点がある。
【００３５】しかし本ＩＤ認識手段においては、２値化
された画像に対してマッチングを行うため、排他的積和
（exclusive or）による類似度評価関数Ｒ’を用いるこ
とができ、計算時間をさらに短縮することができる。な
おこの時、画像上の点（m，n）における画像パターンｆ
とテンプレートｇの類似度評価関数Ｒ'(m,n)は、
された画像に対してマッチングを行うため、排他的積和
（exclusive or）による類似度評価関数Ｒ’を用いるこ
とができ、計算時間をさらに短縮することができる。な
おこの時、画像上の点（m，n）における画像パターンｆ
とテンプレートｇの類似度評価関数Ｒ'(m,n)は、
【００３６】
【数２】
【００３７】で表されるものである。ただし領域Ｄは、
|i-m|＜M/2，|j-n|＜N/2を満たす（i，j ）の範囲であ
る。上述のＲの場合とは逆にＲ’が最も小さいテンプレ
ートが認識結果とされる。
|i-m|＜M/2，|j-n|＜N/2を満たす（i，j ）の範囲であ
る。上述のＲの場合とは逆にＲ’が最も小さいテンプレ
ートが認識結果とされる。
【００３８】なお、上述の２値化の際に、「１」，
「０」ではなく、「１」，「−１」に２値化して単純な
積和値を評価関数に用いてもよい。その場合の評価関数
Ｒ"(m,n)は、
「０」ではなく、「１」，「−１」に２値化して単純な
積和値を評価関数に用いてもよい。その場合の評価関数
Ｒ"(m,n)は、
【００３９】
【数３】
【００４０】で表され、Ｒ”が最も大きいテンプレート
が認識結果とされる。
が認識結果とされる。
【００４１】また、患者名、ＩＤ番号、撮影日等のＩＤ
情報が付さた画像において、特定のＩＤ情報のみ、例え
ばＩＤ番号のみを認識させたい場合には、ＩＤ番号に使
用される文字のみをテンプレートとして有し、文字領域
のうちＩＤ番号が付された領域のみに対してマッチング
させる形態をとることもできる（他のＩＤ情報について
も同様である）。
情報が付さた画像において、特定のＩＤ情報のみ、例え
ばＩＤ番号のみを認識させたい場合には、ＩＤ番号に使
用される文字のみをテンプレートとして有し、文字領域
のうちＩＤ番号が付された領域のみに対してマッチング
させる形態をとることもできる（他のＩＤ情報について
も同様である）。
【００４２】このようにして、文字の認識が行われ、認
識されたＩＤ番号等のＩＤ情報Ｉが出力される。
識されたＩＤ番号等のＩＤ情報Ｉが出力される。
【００４３】しかしながら、上記第一の形態のＩＤ認識
手段10においてなされる単なる閾値による２値化方法で
は、文字と絵柄が重なった画像等において文字の抽出が
うまくいかず正確な文字認識が困難な場合がある。その
一例として図６に示す黒文字１および白文字２を含む原
画像Ｄをある濃度閾値により２値化する場合について説
明する。例えば、濃度を表す帯グラフ８に示すｅの濃度
に閾値を設け、ｅより濃い部分を「１」薄い部分を
「０」として２値化する。その結果２値化画像Ｅが得ら
れる。また、ｆに閾値を設けて同様の処理を行うと２値
化画像Ｆが得られる。この時、２値化画像Ｅでは黒文字
１は明確に抽出されるが、白文字２はその一部が絵柄の
白い部分と重なり抽出不能になってしまう。一方、２値
化画像Ｆでは白文字２は明確に抽出されるが黒文字１は
その一部が絵柄と重なって抽出不能になってしまう。こ
のように、単に画像データを所定の濃度閾値で２値化す
る従来の方法では黒文字１と白文字２を同時に明確に抽
出することができない。当然ながら、２値化によって画
像中の文字を明確に抽出できない場合にはテンプレート
マッチングの精度があがらず文字認識に支障をきたすも
のとなる。
手段10においてなされる単なる閾値による２値化方法で
は、文字と絵柄が重なった画像等において文字の抽出が
うまくいかず正確な文字認識が困難な場合がある。その
一例として図６に示す黒文字１および白文字２を含む原
画像Ｄをある濃度閾値により２値化する場合について説
明する。例えば、濃度を表す帯グラフ８に示すｅの濃度
に閾値を設け、ｅより濃い部分を「１」薄い部分を
「０」として２値化する。その結果２値化画像Ｅが得ら
れる。また、ｆに閾値を設けて同様の処理を行うと２値
化画像Ｆが得られる。この時、２値化画像Ｅでは黒文字
１は明確に抽出されるが、白文字２はその一部が絵柄の
白い部分と重なり抽出不能になってしまう。一方、２値
化画像Ｆでは白文字２は明確に抽出されるが黒文字１は
その一部が絵柄と重なって抽出不能になってしまう。こ
のように、単に画像データを所定の濃度閾値で２値化す
る従来の方法では黒文字１と白文字２を同時に明確に抽
出することができない。当然ながら、２値化によって画
像中の文字を明確に抽出できない場合にはテンプレート
マッチングの精度があがらず文字認識に支障をきたすも
のとなる。
【００４４】そこで、文字と絵柄が重なった画像や黒、
白文字を含む画像等においては、以下に説明する第二の
形態に係る文字認識手段10’が適する。
白文字を含む画像等においては、以下に説明する第二の
形態に係る文字認識手段10’が適する。
【００４５】文字認識手段の第二の形態10’を図７に示
す。以下、上記の第一の形態の文字認識手段10との相違
点のみを説明する。
す。以下、上記の第一の形態の文字認識手段10との相違
点のみを説明する。
【００４６】本文字認識手段10' の２値化画像生成手段
20' は、原画像の各画素毎に該画素の所定近傍範囲中の
画素濃度の最大値と最小値との差を求める演算手段26
と、該演算手段26によって求められた濃度差と所定の閾
値との比較により各画素を２値化して画像の輪郭を抽出
する２値化手段28とから成る。なお、辞書35’の有する
テンプレートは各種装置に固有の文字のフォントに対応
する２値化された中抜き文字のテンプレート５’であ
る。
20' は、原画像の各画素毎に該画素の所定近傍範囲中の
画素濃度の最大値と最小値との差を求める演算手段26
と、該演算手段26によって求められた濃度差と所定の閾
値との比較により各画素を２値化して画像の輪郭を抽出
する２値化手段28とから成る。なお、辞書35’の有する
テンプレートは各種装置に固有の文字のフォントに対応
する２値化された中抜き文字のテンプレート５’であ
る。
【００４７】２値化画像生成手段20' においては、入力
された原画像データＳについて、まず演算手段26におい
て画像の各画素の所定の近傍範囲中における濃度の最大
値と最小値との差が求められる。例えば注目画素を２×
２画素マスク中の左下に位置させた場合、その２×２画
素マスク（所定近傍範囲）中の計４画素における階調濃
度（原画像データＳ）の最大値および最小値を求め、こ
れを注目画素の濃度差とする。当然ながら、２×２とい
う範囲は一例であり、これに限る必要はない。次に、２
値化手段28において、前記演算手段26によって求められ
た前記濃度差を所定の閾値と比較して、例えば閾値より
濃度差が大きい場合を「１」、小さい場合を「０」とし
て注目画素を２値化する。この２値化を画像中の各画素
について行うことにより、画像中の近傍画素同志の濃度
差の大きい部分、すなわち画像の輪郭が抽出され、原画
像Ａから２値化画像Ｃが生成される（図３(ii)）。通
常、文字と周辺画像の濃度差は大きいため、文字の輪郭
が抽出される。
された原画像データＳについて、まず演算手段26におい
て画像の各画素の所定の近傍範囲中における濃度の最大
値と最小値との差が求められる。例えば注目画素を２×
２画素マスク中の左下に位置させた場合、その２×２画
素マスク（所定近傍範囲）中の計４画素における階調濃
度（原画像データＳ）の最大値および最小値を求め、こ
れを注目画素の濃度差とする。当然ながら、２×２とい
う範囲は一例であり、これに限る必要はない。次に、２
値化手段28において、前記演算手段26によって求められ
た前記濃度差を所定の閾値と比較して、例えば閾値より
濃度差が大きい場合を「１」、小さい場合を「０」とし
て注目画素を２値化する。この２値化を画像中の各画素
について行うことにより、画像中の近傍画素同志の濃度
差の大きい部分、すなわち画像の輪郭が抽出され、原画
像Ａから２値化画像Ｃが生成される（図３(ii)）。通
常、文字と周辺画像の濃度差は大きいため、文字の輪郭
が抽出される。
【００４８】なお、一次微分フィルタ、ラプラシアンフ
ィルタ等を用いて画像の輪郭を抽出し、抽出された輪郭
部分の画素を「１」、輪郭部分以外の画素を「０」とし
て各画素の２値化を行うことによっても、上記第二の実
施の形態において生成される２値化画像Ｃと同様の、輪
郭が抽出された２値化画像を生成することができる。
ィルタ等を用いて画像の輪郭を抽出し、抽出された輪郭
部分の画素を「１」、輪郭部分以外の画素を「０」とし
て各画素の２値化を行うことによっても、上記第二の実
施の形態において生成される２値化画像Ｃと同様の、輪
郭が抽出された２値化画像を生成することができる。
【００４９】その後、選択手段40によって、外部入力手
段50により入力された装置の情報に応じたテンプレー
ト、すなわち原画像Ａを生成した装置が用いている文字
フォントに対応するテンプレート５’が辞書35’から選
択され、マッチング手段30’において、２値化画像Ｃの
文字領域に対してテンプレート５’を用いてマッチング
が行われる。このようにして認識されたＩＤ情報Ｉが出
力される。
段50により入力された装置の情報に応じたテンプレー
ト、すなわち原画像Ａを生成した装置が用いている文字
フォントに対応するテンプレート５’が辞書35’から選
択され、マッチング手段30’において、２値化画像Ｃの
文字領域に対してテンプレート５’を用いてマッチング
が行われる。このようにして認識されたＩＤ情報Ｉが出
力される。
【００５０】なお、以下に本発明の画像データ管理装置
70を内包した医用画像記録再生システムについて説明す
る。
70を内包した医用画像記録再生システムについて説明す
る。
【００５１】図８に示す医用画像記録再生システム100
は、ＣＴ、ＭＲＩ等の各種撮像装置９で撮像された原画
像を担持する原画像データＳが入力され、該原画像に付
されているＩＤ情報Ｉを認識するＩＤ認識手段（文字認
識手段）10と、原画像データＳに所定の信号処理を施す
フォーマッタ80と、該フォーマッタ80で所定の信号処理
が施された画像データ（以下、処理済画像データとい
う）Ｓ’を再生するプリンタ、ＣＲＴ等のイメージャー
85と、原画像データＳおよび処理済画像データＳ’をＩ
Ｄ認識手段10によって認識されたＩＤ情報と対応させて
記憶手段にファイリングするファイリング手段60とから
なる。なお、画像データ入力時には、その画像データを
生成した装置に関する装置情報を入力手段50よって画像
記録再生システム100 のＩＤ認識手段10に入力する必要
がある。
は、ＣＴ、ＭＲＩ等の各種撮像装置９で撮像された原画
像を担持する原画像データＳが入力され、該原画像に付
されているＩＤ情報Ｉを認識するＩＤ認識手段（文字認
識手段）10と、原画像データＳに所定の信号処理を施す
フォーマッタ80と、該フォーマッタ80で所定の信号処理
が施された画像データ（以下、処理済画像データとい
う）Ｓ’を再生するプリンタ、ＣＲＴ等のイメージャー
85と、原画像データＳおよび処理済画像データＳ’をＩ
Ｄ認識手段10によって認識されたＩＤ情報と対応させて
記憶手段にファイリングするファイリング手段60とから
なる。なお、画像データ入力時には、その画像データを
生成した装置に関する装置情報を入力手段50よって画像
記録再生システム100 のＩＤ認識手段10に入力する必要
がある。
【００５２】ここでフォーマッタ80とは、例えば、一枚
のフイルムを互いに異なる４つの小さい領域に分けて、
その各領域にそれぞれ異なる４つの画像を縮小してプリ
ントするフォーマット、１枚のフイルム上に１つの大き
な画像をそのままプリントするフォーマット等、画像を
再生するにあたっての各種のフォーマットに適合するよ
うに原画像データを信号処理するものである。
のフイルムを互いに異なる４つの小さい領域に分けて、
その各領域にそれぞれ異なる４つの画像を縮小してプリ
ントするフォーマット、１枚のフイルム上に１つの大き
な画像をそのままプリントするフォーマット等、画像を
再生するにあたっての各種のフォーマットに適合するよ
うに原画像データを信号処理するものである。
【００５３】撮像装置９で撮像された画像は、デジタル
化されて原画像データＳとして画像記録再生システム10
0 に入力される。この際、その画像を生成した装置情報
も同時に入力手段50より入力される。画像記録再生シス
テム100 においては、まず、ＩＤ認識装置10において、
入力手段50から入力された装置情報を基に、画像に付さ
れているＩＤ情報が認識される（ＩＤ認識は上述の方法
による）。認識されたＩＤ情報Ｉは原画像データＳと共
にファイリング手段60およびフォーマッタ80に送られ
る。フォーマッタ80では、原画像データＳに対して所定
の信号処理が施され、処理済画像データＳ’が生成さ
れ、処理済画像データＳ’を基にイメージャー85のおい
て可視画像が再生される。ファイリング手段60によっ
て、ＩＤ認識手段10において認識されたＩＤ情報Ｉと原
画像データＳおよび／またはフォーマッタで処理された
処理済画像データＳ’との対応付けをして記憶手段65に
ファイリングする。ファイリングされた画像データＳ、
Ｓ’は、常時検索可能であり、検索には検索情報として
画像データと対応付けられて記憶されているＩＤ情報を
用いる。
化されて原画像データＳとして画像記録再生システム10
0 に入力される。この際、その画像を生成した装置情報
も同時に入力手段50より入力される。画像記録再生シス
テム100 においては、まず、ＩＤ認識装置10において、
入力手段50から入力された装置情報を基に、画像に付さ
れているＩＤ情報が認識される（ＩＤ認識は上述の方法
による）。認識されたＩＤ情報Ｉは原画像データＳと共
にファイリング手段60およびフォーマッタ80に送られ
る。フォーマッタ80では、原画像データＳに対して所定
の信号処理が施され、処理済画像データＳ’が生成さ
れ、処理済画像データＳ’を基にイメージャー85のおい
て可視画像が再生される。ファイリング手段60によっ
て、ＩＤ認識手段10において認識されたＩＤ情報Ｉと原
画像データＳおよび／またはフォーマッタで処理された
処理済画像データＳ’との対応付けをして記憶手段65に
ファイリングする。ファイリングされた画像データＳ、
Ｓ’は、常時検索可能であり、検索には検索情報として
画像データと対応付けられて記憶されているＩＤ情報を
用いる。
【図１】本発明の画像データ管理装置の構成概略図
【図２】本発明の画像データ管理装置に内包される文字
認識手段の第一の形態を示すブロック図
認識手段の第一の形態を示すブロック図
【図３】第一および第二の形態の文字認識手段によって
生成される２値化画像を説明する図
生成される２値化画像を説明する図
【図４】パターンマッチング時に文字間隔ずつテンプレ
ートを移動させてマッチングさせる様子を説明する図
ートを移動させてマッチングさせる様子を説明する図
【図５】文字パターンマッチング方法を説明する図
【図６】第一の形態の文字認識手段によって画像の２値
化を行った場合の問題点を説明する図
化を行った場合の問題点を説明する図
【図７】本発明の画像データ管理装置に内包される文字
認識手段の第二の形態を示すブロック図
認識手段の第二の形態を示すブロック図
【図８】本発明の画像データ管理装置を内包する画像記
録再生システムの構成概略図
録再生システムの構成概略図
５ テンプレート ９ 医用画像撮像装置 10 ＩＤ認識手段（文字認識手段） 20 ２値化画像生成手段 22 濃度検出手段 24 ２値化手段 30 マッチング手段 35 辞書 38 文字位置情報記憶手段 40 選択手段 50 入力手段 60 ファイリング手段 65 記憶手段 70 画像データ管理装置 80 フォーマッタ 85 イメージャー 100 画像記録再生システム
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｇ０６Ｆ 15/62 ３９０Ｃ
Claims (7)
- 【請求項１】 各種装置で撮影された文字情報を含む画
像を担持する画像データを前記文字情報と対応付けて記
憶する画像データ管理装置において、 前記画像から前記文字情報を認識する文字認識手段と、 前記認識された文字情報と前記画像データとを自動的に
対応付けて記憶するファイリング手段とを備えることを
特徴とする画像データ管理装置。 - 【請求項２】 前記文字認識手段が、前記画像を２値化
して２値化画像を生成する２値化画像生成手段を備え、
前記２値化画像に対して文字パターンマッチングを行う
ものであることを特徴とする請求項１記載の画像データ
管理装置。 - 【請求項３】 前記２値化画像生成手段が、画像の輪郭
を抽出する手段を含むものであることを特徴とする請求
項２記載の画像データ管理装置。 - 【請求項４】 前記２値化画像生成手段が、前記画像の
各画素毎に該画素の所定近傍範囲中の画素濃度の最大値
と最小値との差を求める演算手段と、 前記濃度差と所定の閾値との比較により前記各画素を２
値化して画像の輪郭を抽出する２値化手段とから成るも
のであることを特徴とする請求項３記載の画像データ管
理装置。 - 【請求項５】 前記文字認識手段が、各種装置によって
生成された文字を含む画像中から該文字を認識する文字
認識手段であって、 前記各種装置毎の固有の文字のテンプレートを備えた辞
書と、 前記画像を生成した装置の情報が入力され、該入力され
た情報に応じて該装置に固有の文字のテンプレートを前
記辞書から選択するテンプレート選択手段とを備え、 前記画像中の文字に対して前記テンプレートを用いて文
字パターンマッチングさせるものであることを特徴とす
る請求項１から４いずれか記載の画像データ管理装置。 - 【請求項６】 前記文字認識手段が、各種装置によって
生成された文字を含む画像中から該文字を認識する文字
認識手段であって、 前記各種装置毎に定められている前記画像中の文字領域
および文字間隔を含む文字位置情報と前記各種装置とを
対応させて記憶している文字位置情報記憶手段と、 前記画像を生成した装置の情報が入力され、該入力され
た情報に応じて前記文字位置情報を前記文字位置情報記
憶手段から選択する文字位置情報選択手段と、 前記文字位置情報に基づく前記画像中の文字領域に対し
て、各種、各サイズの文字のテンプレートを用いて文字
パターンマッチングさせることにより文字を認識するマ
ッチング手段とを備えてなることを特徴とする請求項１
から５いずれか記載の画像データ管理装置。 - 【請求項７】 前記文字認識手段が、前記テンプレート
を前記文字間隔分ずつ移動させて文字パターンマッチン
グさせるものであることを特徴とする請求項６記載の画
像データ管理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17261496A JP3786221B2 (ja) | 1996-07-02 | 1996-07-02 | 画像データ管理装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP17261496A JP3786221B2 (ja) | 1996-07-02 | 1996-07-02 | 画像データ管理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH1021365A true JPH1021365A (ja) | 1998-01-23 |
| JP3786221B2 JP3786221B2 (ja) | 2006-06-14 |
Family
ID=15945150
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP17261496A Expired - Fee Related JP3786221B2 (ja) | 1996-07-02 | 1996-07-02 | 画像データ管理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3786221B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6954802B2 (en) | 1998-09-29 | 2005-10-11 | Tdk Electronics Corporation | Removable media recording station for the medical industry |
-
1996
- 1996-07-02 JP JP17261496A patent/JP3786221B2/ja not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6954802B2 (en) | 1998-09-29 | 2005-10-11 | Tdk Electronics Corporation | Removable media recording station for the medical industry |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3786221B2 (ja) | 2006-06-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4073156B2 (ja) | 画像検索装置 | |
| US11023708B2 (en) | Within document face verification | |
| US6285780B1 (en) | Apparatus for identifying individual animals and image processing method | |
| US10558851B2 (en) | Image processing apparatus and method of generating face image | |
| KR20040059313A (ko) | 치아영상으로부터 치아영역 추출방법 및 치아영상을이용한 신원확인방법 및 장치 | |
| US5943435A (en) | Body part recognition in radiographic images | |
| JP2011525017A (ja) | ハードコピーに基づく撮影日時の特定 | |
| WO2004051575A1 (ja) | 特徴領域抽出装置、特徴領域抽出方法および特徴領域抽出プログラム | |
| US7564999B2 (en) | Method for identifying markers in radiographic images | |
| JPH08235341A (ja) | ドキュメントファイリング装置および方法 | |
| JP6410450B2 (ja) | オブジェクト識別装置、オブジェクト識別方法及びプログラム | |
| JP2005537101A (ja) | Ｘ線フィルムユーザインタフェース用患者識別方法 | |
| JP5031504B2 (ja) | 画像処理装置および操作者検索方法 | |
| JP2000165648A (ja) | 画像処理方法および装置並びに記録媒体 | |
| JP6785181B2 (ja) | 物体認識装置、物体認識システム、及び物体認識方法 | |
| KR102381354B1 (ko) | 이미지에 포함된 물체에 대한 디자인권 검색 장치 및 방법 | |
| JP4419426B2 (ja) | 医用画像システム | |
| JP3786221B2 (ja) | 画像データ管理装置 | |
| JP3819074B2 (ja) | 文字認識装置 | |
| JP2004145592A (ja) | 移動ベクトル抽出装置及び方法及びプログラム及びその記録媒体 | |
| JPH10134071A (ja) | 画像記録再生装置 | |
| JPH1011536A (ja) | 文字認識装置 | |
| JPH1021334A (ja) | 文字認識装置 | |
| JPH1063779A (ja) | 文字認識方法および装置 | |
| JPH1063774A (ja) | 文字認識装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051212 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051220 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060220 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060314 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060315 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090331 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090331 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090331 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090331 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100331 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100331 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110331 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110331 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120331 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120331 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130331 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |