JPH02126382A - 文字切り出し装置 - Google Patents

文字切り出し装置

Info

Publication number
JPH02126382A
JPH02126382A JP63280564A JP28056488A JPH02126382A JP H02126382 A JPH02126382 A JP H02126382A JP 63280564 A JP63280564 A JP 63280564A JP 28056488 A JP28056488 A JP 28056488A JP H02126382 A JPH02126382 A JP H02126382A
Authority
JP
Japan
Prior art keywords
character
image data
rectangle
feature point
circumscribing frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP63280564A
Other languages
English (en)
Other versions
JP2844618B2 (ja
Inventor
Hidehiro Watanabe
渡辺 英裕
Masao Akaha
赤羽 正雄
Akira Mochida
持田 晃
Yuji Nakajima
雄二 中島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP63280564A priority Critical patent/JP2844618B2/ja
Publication of JPH02126382A publication Critical patent/JPH02126382A/ja
Application granted granted Critical
Publication of JP2844618B2 publication Critical patent/JP2844618B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Character Input (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 [産業上の利用分野コ 本発明は、文字認識システムの主要な構成要素の一つで
ある文字切り出し装置に関する。
[従来の技術] 従来は、文字列を読み取った文字画像データから、文字
画素の連結状態を1画素づつ追跡していくことで連結状
態にある画素集合を求め、画素集合に外接する文字外接
枠の座標を読み取ることによって、文字列の中から一文
字づつ文字をを切り出していた。例えば、「画像認識の
はなし」 (木内雄二著、日刊工業新聞社発刊、90頁
)のなかでは、文字認識の前処理の過程として文字切り
出しについて記述されている。
[発明が解決しようとする課題] 従来の文字切り出し装置では、画素の追跡に処理時間が
かかる上、1つの文字が多くの文字外接枠に分割される
場合があり、文字の位置や大きさの変動が多い場合に処
理が繁雑になる問題点があった。特にリアルタイムで文
字認識を行う場合には、認識時間を著しく長くさせる要
因となっており、短時間で切り出し処理のできる装置の
出現が望まれていた。
本発明は係る問題点を解決するために、直接文字外接枠
座標を求めるのではなく、文字矩形イメージデータ作成
手段により文字矩形イメージデータを作成し、文字列全
体にわたって特徴点を求め、論理的に一文字毎の文字外
接枠座標を求めることにより、自由度の高い文書から文
字の切り出しを高速に実行することのできる文字切り出
し装置を提供することを目的としている。
[課題を解決するための手段] 本発明の文字切り出し装置は、読み取った文字列を文字
画素と背景画素から成る文字画像データとして記憶する
文字画像記憶手段と、前記文字画像データから文字矩形
イメージデータを作成する文字矩形イメージデータ作成
手段と、前記文字矩形イメージデータを記憶する文字矩
形イメージデータ記憶手段と、前記文字矩形イメージデ
ータから文字矩形特徴点を抽出し、文字矩形特徴点座標
値を読み取る文字矩形特徴点読み取り手段と、前記文字
矩形特徴点座標値を記憶する文字矩形特徴点記憶手段と
、前記文字矩形特徴点座標値から文字外接枠を求める文
字外接枠構成手段と、前記文字外接枠の座標値を記憶す
る文字外接枠記憶手段とを有していることを特徴として
いる。
更に、本発明の文字切り出し装置の文字矩形イメージデ
ータ作成手段は、文字画像記憶手段に格納された文字画
像データから、文字連結画素集合に外接する枠内の画素
をすべて文字画素と同じ値に置換して文字矩形イメージ
データを作成する機能を有し、文字矩形特徴点読み取り
手段は、文字矩形イメージデータより少なくとも3種類
の特徴点を抽出する機能を有し、文字外接枠構成手段に
は、前記特徴点の座標より論理的に文字外接枠座標を求
める機能を有していることを特徴としている。
[作用] 本発明においては、スキャナ部より送られてくる文字画
素と背景画素から成る文字画像データは文字画像記憶手
段1に格納される。文字画像データから文字矩形イメー
ジデータ作成手段2により文字矩形イメージデータを作
成し、文字矩形イメージ記憶手段3に格納される。
更に、この文字矩形イメージデータを用いて文字矩形特
徴点読み取り手段4により文字矩形特徴点とその座標値
が求められ、文字矩形特徴点記憶手段5に格納する。文
字外接枠構成手段6において、文字矩形特徴点データか
ら論理的に文字外接枠を求め、文字外接枠記憶手段7に
格納する。かくして、読み取った文字画像データから各
文字の外接枠が決定され文字が切り出される。
通常、後工程となる文字認識部では、各外接枠内を一文
字の認識対象領域として処理が成されていく。
[実施例] 第1図は請求項 1 記載の文字切り出し装置の構成を
示すブロック図である。
文字画像記憶手段1は、スキャナ部より送られてくる文
字部と背景部とに2値化された文字列の文字画像データ
を格納する。
文字矩形イメージデータ作成手段2は、文字画像データ
から文字矩形イメージデータを作成し、文字矩形イメー
ジデータ記憶手段3に格納する。
文字矩形特徴点読み取り手段4は文字矩形イメージデー
タから文字矩形特徴点とその座標値を求め、文字矩形特
徴点記憶手段5に格納する。
文字外接枠構成手段6は文字矩形特徴点データから文字
外接枠を求め文字外接枠記憶手段7に格納する。
上記構成により、文字画像データから、文字矩形イメー
ジデータを作成し、画素の連結性を特徴づける文字矩形
特徴点を抽出し、その座標点を求め、論理的に文字外接
枠を求めることを可能としている。
請求項 2 記載の文字切り出し装置について以下に説
明する。まず、文字矩形イメージデータ作成手段の特徴
について、文字画像データと当該手段により作成される
文字矩形イメージデータの例(ひらがなの゛い゛)を用
いて説明する。
第3図(a)は入力された文字画像データ、第3図(b
)は処理中途のデータ(実施例として後述する第7図で
示すフローチャート図におけるステップ112の処理が
終了した段階のデータに相当)、第3図(C)は文字矩
形イメージ処理が終了した段階での文字矩形イメージデ
ータである。
文字矩形イメージデータ作成手段2によって作成する文
字矩形イメージデータ中の個々の矩形イメージには、以
下の性質を持たせている。
■ Xs≦X≦X、である任意のXについて、Y□i、、(
x)  =  Ys ■ X、≦X≦X0 である任意のXについて、G(x、k
)  ≠ 0゜ YmL。(x)≦に≦Y −a−(x )ここで、x、
、x、、y、、y、  は第3図(C)で図示するよう
に文字矩形イメージのX座標、Y座標における定義域で
ある。G (X、Y)は座標(x、y)における画素の
値であり、0(背景画素)、1(文字画素及び文字画素
として置換された画素)の値をとる。Y□1、(X)、
Y、、、(X)はX座標における文字画素群のY座標の
最小値、最大値である。■式は文字矩形イメージの上辺
に欠けが生じないことを示しており、0式は文字矩形イ
メージに中空領域や横方向(X座標に平行)の凹みが生
じないことを示している。
文字矩形イメージデータから文字外接枠を求めるために
は少なくとも3種類の画素の座標値がわかればよいが、
4種類以上用いる方法もある。これらの画素を特徴点と
呼ぶ。第4図(a)は特徴点を抽出する3×3マスクで
あり、第4図(b)は3X3マスクで各特徴点を抽出す
る際の特徴点の周辺画素の条件の一例を示している。具
体的には特徴点Pは文字矩形イメージの左上角の画素で
あり、特徴点Qは左下角の画素である。また特徴点Rは
右下に凹んでいる凹みの角の画素である。
特徴点となる画素の組み合わせは他にも考えられるが、
以下の説明は第4図(b)で示した条件によって得られ
る特徴点を対象として進める。
文字矩形イメージは■式で示される性質を持っているた
め特徴点Pは1個の文字矩形イメージに対して1個しか
存在し得ない。それに対して特徴点Qは文字矩形イメー
ジの下辺に欠けが存在する場合、複数存在する。左下が
欠けている場合は1個のみである。特徴点Qが複数存在
する場合特徴点Rが存在する。特徴点Rは0式で示され
る性質により、X座標の値が同値となる特徴点Qを必ず
対として持つことになる。またX座標値が同値であるこ
とから最も右端にある(X座標値が最大である)特徴点
Qには対をなす特徴点Rが存在しないことが判る(もし
特徴点Rが存在したとするとX座標値がより大きな値を
持つ特徴点Qが存在しなければならない)。よって特徴
点Rの個数は特徴点Qの個数−1となる。
第5図は一例として、第3図(C)で示した文字矩形イ
メージデータにおける3種類の特徴点を示している(タ
イプPが1点、タイプQが2点、タイプRが1点存在し
ている)。
特徴点の持つ性質をまとめると以下のようになる。
(ア)タイプPは1つの文字矩形イメージに1個だけ存
在する。
(イ)タイプQは1つの文字矩形イメージに1個以上存
在する。
(つ)タイプRの個数はタイプQの個数より1個だけ少
なく、必ず対をなすタイプQの特徴点があり、そのX座
標値は同値である。
以下に説明するように、(ア)(イ)(つ)の性質を利
用することにより、文字外接枠構成手段6を用いて特徴
点座標値から論理的に文字外接枠座標を求めることが可
能となる。
従って、文字矩形特徴点読み取り手段4においては、局
所的に各特徴点とその座標値を抽出するのみですみ、各
特徴点がどの文字矩形イメージのものであるかという情
報は一切抽出する必要がなくなる。従来、イメージデー
タから一文字一文字直接文字外接枠座標を求める場合に
比して、処理時間を大幅に短縮することができる根拠は
ここにある。
文字外接枠構成手段6の有している機能及び根拠につい
て以下に説明する。 第6図は文字矩形イメージの基本
的なパターンとその特徴点と文字外接枠を示す。どんな
複雑な文字矩形イメージも第6図のパターンに帰着でき
るので基本パターンを用いて原理を説明する。
あるタイプPの特徴点イとタイプQの特徴点口が以下の
条件を満たすときその2つの特徴点は同一の文字矩形イ
メージに属する。
(1) 点イのX座標値 く 点口のX座標値(2) 
点イのX座標値 く 点口のX座標値(3) 点イと点
口を対角点とする矩形を考えたとき矩形の中に対になっ
たタイプQ、R以外の特徴点は存在しない。
(4) 点イのX座標値より大きなX座標値を持ち、か
つ(1)(2)(3)の条件を満たすタイプPの特徴点
は存在しない。
(5) 点口のX座標値より小さなX座標値を持ち、か
つどの文字矩形イメージにも属していないタイプQの特
徴点は存在しない。
第6図の説明において条件(4)(5)は満たされてい
るものとする。(タイプQの特徴点のX座標値の小さい
順に特徴点の属する文字矩形を決定していくことによっ
て、条件(5)は自動的に満たされる。条件(4)は条
件(1)(2)(3)を満たすタイプPの特徴点の中で
X座標値が最大となる点を選ぶことによって満たされる
)また、条件(1)(2)(3)が満たされていること
は明らかである。よって第6図(a)(b)(C)で示
されている特徴点イ、口は同一の文字矩形イメージに属
していることがわかる。
第6図(a)の場合、特徴点イと口を対角点とする矩形
を考えたとき矩形内部に他の特徴点を含まないことから
特徴点イと口がそのまま文字外接枠の座標点となる。第
6図(b)の場合、特徴点イと口を文字外接枠とした場
合、内部にタイプRの特徴点二が含まれることから完全
な文字外接枠ではないことが判る。タイプRの特徴点の
場合、対になるタイプQの特徴点ハが必ず存在し、同一
の文字矩形イメージに属する。そこで特徴点ハを捜し、
特徴点口とハの座標値からタイプQの新しい特徴点とし
て特徴点ホを作り、特徴点二、ハ、口を削除する。そし
て特徴点イとホの組み合わせがどの基本パターンに一致
するかを調べていく。第6図(C)の場合、特徴点口そ
のものがタイプRの特徴点二と対になる。タイプRの特
徴点の定義から、文字矩形イメージは特徴点二の右側に
も存在し、その結果特徴点ホが存在しなければならない
ことが判明する。そこで特徴点二、口を削除し特徴点本
を捜し特徴点イ、ホの組み合わせがどの基本パターンと
一致するかを調べていく。
上で述べた処理を繰り返すことで完全な文字矩形を求め
ることができる。従って、すべての文字の外接枠は、少
なくとも3種類の特徴点座標から論理的に文字外接枠座
標を求めることができる。
第2図および第3図は本発明の一実施例である。
第2図は制御系統図であって、ポインタ12、ポインタ
13、ポインタ14は文字画像記憶手段8や文字矩形イ
メージデータ記憶手段9の中の画素を指すポインタであ
る。FLAG15は後述する画素Bの値を決定するため
の条件を選択する条件選択フラグである。
第7図(a)は文字矩形イメージデータ作成手段の一実
施例を示すフローチャートであり、第7図(b)は、(
a)図のステップ103のサブルーチンーンである。ス
テップ101で文字矩形イメージデータ記憶手段9がク
リアされ、ポインタ12は文字画像記憶手段内の画素A
 (x、y)、ポインタ13は文字矩形イメージデータ
記憶手段内の画素B (x+ y) 、ポインタ14は
画素Bの1つ上の画素C(x、y−1)を指すように設
定される。X+’lは文字画像記憶手段内および文字矩
形イメージデータ記憶手段内における画素の位置を示す
変数であり、x=O,y=1に設定される。ステップ1
02においてポインタ12,13゜14はそれぞれの画
素をさす番地がセットされ、FLAGはり1ノアされる
。ステップ103では第7図(b)のフローチャートで
示される、画素Bをセットするか否かを判定するための
サブルーチンを呼ぶ。
以下サブルーチンのフローチャートを説明する。
ステップ201でFLAGを調べ、FLAGがクリアさ
れている場合は、ステップ202でポインタ12が指す
画素イの状態を調べ画素イが0であれば終了する。1で
あれば、ステップ203でポインタ13が指す画素口を
1にした後、ステップ204でポインタ14が指す画素
ハを調べ、画素ハが0であれば終了し、1であればステ
ップ205でFLAGをセットして終了する。もしステ
ップ201でFLAGがセットされている場合は、ステ
ップ206で画素ハを調べ、1であればステップ207
で画素口を1にして終了し、画素ハが1であればステッ
プ208でFLAGをクリアしてステップ201に制御
を移す。
以上で述べたサブルーチンの処理から戻った後、ステッ
プ104でXが終点(画像領域の左端)であるかどうか
を調べ終点でなければステップ105でXを1つ増加さ
せた後、ステップ102に戻る。終点であればステップ
106で各ポインタに値をセットした後、FLAGをり
1ノアする。ステップ107でステップ102と同じサ
ブルーチンを呼び画素Bをセットするか否がを判定する
。ステップ108でXが0(画像領域の右端)であるか
どうかを調べ0でなければステップ109でXを1つ減
少させた後、ステップ106に戻る。Xが0であれば、
ステップ110でyを1つ増加させ、ステップ111で
yが終点(画像領域の右下の点)であるかどうか調べて
終点でなければ、ポインタを変更した後ステップ102
に戻る。終点であればステップ112でポインタ12が
文字矩形イメージデータ領域の画素Bの1つ下の画素D
(x、y+1)を指すようにアドレスを設定し直して、
ステップ113に進む。ステップ113〜120はそれ
ぞれステップ102〜109と同じである。ステップ1
21においてyを1つ減少させた後、ステップ122で
yが0であるがどうかを調べて0でなければポインタの
値を計算した後ステップ113に戻る。yがOであれば
終了する。
次に文字矩形特徴点読み取り手段4の実施例を説明する
。文字矩形特徴点の読み取りは、第4図(a)に示す3
X3マスクで文字矩形イメージデータの画素を順に走査
し、第4図(b)で示される各タイプの条件にマツチす
る画素を抽出することによって特徴点を求める。そして
その座標値を特徴点の種類別に文字矩形特徴点座標記憶
手段10のテーブルP、Q、Hに格納するため、それぞ
れの特徴点はy座標の値で昇順に並ぶことになる。
文字外接枠構成手段6は、文字矩形特徴点の座標値から
文字外接枠座標を求め文字外接枠記憶手段11に格納す
る。第8図は文字外接枠を構成する手段を示したフロー
チャートである。ステップ301でテーブルQに特徴点
データがあるか調べ、なければ終了し、あればステップ
302でテーフ゛ルQの先頭の特徴点データを特徴点口
としてその座標値をレジスタX1、Ylに読み込む。ス
テップ303で(0,O)、(Xi、Yl)を対角点と
する矩形領域の中にある特徴点をテーブルPから捜し、
もしあれば、その中でもっともX座標値の大きな特徴点
イを取り出しその座標値をレジスタX2、Y2に読み込
む(ステップ305)。なければレジスタX2.Y2に
0を読み込む(ステップ306)。ステップ307で(
Xl、Yl)、(X2.Y2)を対角点とする矩形によ
って囲まれる範囲にある特徴点をテーブルRから捜し、
もしなければ(第6図(a)の場合に相応)、ステップ
309で、(Xi、Yl)と(X2.Y2)を文字枠座
標値として文字外接枠座標装Wllに害き込み、テーブ
ルQから特徴点口を、テーブルPから特徴点イを削除(
ステップ310)L、てステップ301に戻る。もしあ
ればステップ311で、テーブルRから探した特徴点の
中でもっともX座標の値の大きな特徴点を取り出し特徴
点二としてその座標値をレジスタX3、Y3に読み込む
ステップ312でX3とXlが等しいかどうか調べ、等
しければステップ315に進む(第6図(C)に相応)
。等しくなければ、ステップ313でテーブルQの特徴
点でX座標がX3と等しく、かつy座標の値が最少なも
のを特徴点ハとしてその座標値をレジスタX4.Y4に
読み込む(第6図(b)に相応)。ステップ314でレ
ジスタX1、x4を比較し大きい方の値をレジスタX4
に代入し、次にレジスタYl、Y4を比較し、大きい方
の値をレジスタY4に代入して、レジスタX4、Y4の
値を特徴点ハの座標値としてテーブルQ上の値を書き換
える。ステップ315で特徴点二をテーブルRから、特
徴点口をテーブルQから削除して、ステップ301に戻
る。以上により本発明となる文字切り出し装置が実現出
来ることが実証できた。
[発明の効果〕 本発明によれば、中間データとして文字矩形イメージデ
ータを作成することにより、全ての文字は3種類の基本
パターンに帰着でき、全ての基本パターンは上記(ア)
(イ)(つ)の性質を持つ少なくとも3種類の特徴点に
より特徴付けられる。
そして、この特徴点座標から文字外接枠を論理的に求め
ることが出来る。すなわち、文字データが分離している
場合でも容易に統合された文字矩形イメージを窩速に作
成することができ、その結果、画素の連結性を考慮する
ことなく特徴点座標が抽出可能になる。更に、文字外接
枠座標は特徴点座標から求めるため、処理時間を大幅に
短縮した画像イメージ処理が可能になった。
【図面の簡単な説明】
第1図は本発明となる文字切り出し装置の構成を示すブ
ロック図である。 第2図は制#系統図である。 第3図(a)〜(C)は文字矩形イメージデータ作成手
段2における入力データ(a)、処理中途のデータ(b
)、出力データ(C)の例を示す図である。 第4図(a)(b)は文字矩形特徴点読み取り手段4に
おける特徴点を探すための3×3マスクと周辺画素の条
件を示す図である。 第5図は第3図で示した文字矩形イメージデータにおけ
る特徴点の例を示す図である。 第6図(a)〜(C)は文字矩形イメージのパターンと
して集約される3種の基本パターンと、その特徴点を示
す図である。 第7図(a)(b)は文字矩形イメージデータ作成手段
2の実施例を示すフローチャートである。 第8図は文字外接枠構成手段6の実施例を示すフローチ
ャートである。 以   上 出願人 セイコーエプソン株式会社 代理人 弁理士 鈴木喜三部 他1名 (CI) (b) (C) 第3図 3x3マスク 本け0,1どちらでtよし) (α) (b) 第4 図 0  −−−−  pタイプ ×ム −m−−Qダイア 尺タイプ 第6図 (Q) 第7図

Claims (2)

    【特許請求の範囲】
  1. (1)読み取った文字列を文字画素と背景画素から成る
    文字画像データとして記憶する文字画像記憶手段と、前
    記文字画像データから文字矩形イメージデータを作成す
    る文字矩形イメージデータ作成手段と、前記文字矩形イ
    メージデータを記憶する文字矩形イメージデータ記憶手
    段と、前記文字矩形イメージデータから文字矩形特徴点
    を抽出し、文字矩形特徴点座標値を読み取る文字矩形特
    徴点読み取り手段と、前記文字矩形特徴点座標値を記憶
    する文字矩形特徴点記憶手段と、前記文字矩形特徴点座
    標値から文字外接枠を求める文字外接枠構成手段と、前
    記文字外接枠の座標値を記憶する文字外接枠記憶手段と
    を有していることを特徴とする文字切り出し装置。
  2. (2)文字矩形イメージデータ作成手段は、文字画像記
    憶手段に格納された文字画像データから、文字連結画素
    集合に外接する枠内の画素をすべて文字画素と同じ値に
    置換して文字矩形イメージデータを作成する機能を有し
    、文字矩形特徴点読み取り手段は、文字矩形イメージデ
    ータより少なくとも3種類の特徴点を抽出する機能を有
    し、文字外接枠構成手段には、前記特徴点の座標より論
    理的に文字外接枠座標を求める機能を有していることを
    特徴とする請求項1記載の文字切り出し装置。
JP63280564A 1988-11-07 1988-11-07 文字切り出し装置 Expired - Lifetime JP2844618B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP63280564A JP2844618B2 (ja) 1988-11-07 1988-11-07 文字切り出し装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP63280564A JP2844618B2 (ja) 1988-11-07 1988-11-07 文字切り出し装置

Publications (2)

Publication Number Publication Date
JPH02126382A true JPH02126382A (ja) 1990-05-15
JP2844618B2 JP2844618B2 (ja) 1999-01-06

Family

ID=17626791

Family Applications (1)

Application Number Title Priority Date Filing Date
JP63280564A Expired - Lifetime JP2844618B2 (ja) 1988-11-07 1988-11-07 文字切り出し装置

Country Status (1)

Country Link
JP (1) JP2844618B2 (ja)

Also Published As

Publication number Publication date
JP2844618B2 (ja) 1999-01-06

Similar Documents

Publication Publication Date Title
US5129014A (en) Image registration
JP2940936B2 (ja) 表領域識別方法
US5774580A (en) Document image processing method and system having function of determining body text region reading order
JPH05242292A (ja) 分離方法
JPH0315793B2 (ja)
JPS59136875A (ja) パタ−ン識別装置
JPH02126382A (ja) 文字切り出し装置
JP4418726B2 (ja) 文字列探索装置、探索方法およびこの方法のプログラム
JP2643294B2 (ja) 辞書作成方法
JP3072126B2 (ja) 書体を識別する方法及び装置
JPH03126188A (ja) 文字認識装置
JPS6165378A (ja) 文字図形認識方法及び装置
JPS5875279A (ja) 文字分類方式
JP3037504B2 (ja) 画像処理方法及びその装置
JPH0132547B2 (ja)
CN114693901A (zh) 基于文档的表格定位方法、装置、设备和介质
JPH0436885A (ja) 光学式文字読取装置
JPS6337489A (ja) 文書文字切り出し画像処理方式
JPH03268088A (ja) 総合評価回路
JPH01277832A (ja) マイクロフィルム
JPS6231487A (ja) 文字列抽出装置
JPH05324918A (ja) 文字認識装置
JPS62290979A (ja) 枠線構成装置
JPH03240175A (ja) ヒストグラム計算回路
JPH02253340A (ja) 画像処理による知識処理方法

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081030

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091030

Year of fee payment: 11

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091030

Year of fee payment: 11