JPH09311904A

JPH09311904A - 文字認識装置

Info

Publication number: JPH09311904A
Application number: JP8126016A
Authority: JP
Inventors: Mayumi Takasugi; 真由美高杉
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 1996-05-21
Filing date: 1996-05-21
Publication date: 1997-12-02

Abstract

(57)【要約】【課題】各種形状の認識対象領域が簡単に指定でき、
傾いて読み取られた原稿でも文字認識方向を検出して文
字認識をする。【解決手段】原稿に記載されて文字列をイメージとし
て読み取るイメージ読取手段と、読み取られたイメージ
を画面上に表示する表示手段と、表示されたイメージに
含まれる文字列の認識対象領域の形状とその各頂点の座
標を行頭から行末方向または行末から行頭方向の順に少
なくとも３頂点を指定する領域指定手段と、指定された
形状と各頂点の座標に基づいて認識対象領域の切り出し
範囲を算出してイメージから認識対象領域を切り出す領
域切出手段と、前記領域指定手段により指定された行頭
と行末間の２頂点で結ぶ線分方向を文字認識方向として
切り出された認識対象領域の文字を認識する文字認識手
段とを備えている。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、例えば、ＯＣＲ
（光学式文字読み取り装置）等に用いられ、印刷した原
稿から光学的にイメージを読み取り文字認識を行う文字
認識装置に関する。

【０００２】

【従来の技術】近年、印刷された原稿をイメージデータ
として光学式的に読み取るＯＣＲ（光学式文字読み取り
装置）やＯＣＲソフトが開発されている。これらの技術
では、読み取ったイメージデータから、文字の部分を正
確に切り出すことが重要な課題となっている。例えば、
特開平７−２８９３３号公報の文字認識装置には、文字
を含むイメージデータから、画素集合の外接矩形ブロッ
クを抽出してその個数からヒストグラムを作成して行ブ
ロックを抽出し、行ブロックに含まれる文字行を切り出
し認識する技術が開示されている。

【０００３】また、特公昭６３‐４８２１９号公報の文
書画像の文字行検出方式、特開昭６３−１８７３８１号
公報の文字列領域検出方式、特開昭６３−２９２３８２
号公報の文字列傾き検出装置、及び特開平５−５４０７
４号公報のデジタル複写装置には、イメージデータ（文
字画像）が多少傾いた状態で読み取り走査がなされて
も、傾斜角度を自動検出して傾いた原稿を処理する技術
が開示されている。さらに、特開平５−２１６９３１号
公報の文書記憶装置には、特殊な範囲指示シートを用い
ることで文書シートに記録された内容のうち、任意の形
状をした領域に含まれる文書の切り出しを可能にする技
術が開示されている。

【０００４】図１９は従来の文字認識装置の構成を示す
ブロック図である。図１９に示すように、この文字認識
装置は、イメージスキャナなどのイメージ読取部１１、
キーボード、マウスなどからなる領域指定部１２、マイ
クロコンピュータのＣＰＵ等からなる文字認識部１３、
マイクロコンピュータのＲＡＭからなるイメージ記憶部
１４、マイクロコンピュータのＲＯＭからなる認識デー
タ記憶部１５、ＣＲＴディスプレイやＬＣＤ（液晶ディ
スプレイ）などからなる表示部１６、サーマルプリンタ
やレーザプリンタからなる印刷部１７、ハードディスク
やフロッピーディスクからなる外部記録装置１８を備え
ている。

【０００５】イメージスキャナ（光学式文字読み取り装
置）などのイメージ読取部１１から原稿のイメージを読
み取る。そして、読み込んだイメージをイメージ記憶部
１３に記憶するととともに表示部１６で表示する。次
に、領域指定部１２で認識対象とする領域の指定を行
う。領域指定部１２で指定した領域部分について、順
次、文字認識部１３において認識領域の文字の切り出
し、認識データ記憶部１５より文字認識データ（文字認
識用パターン、文字コードなど）を呼び出して文字認識
などの処理を行う。認識した結果は、表示部１６や印刷
部１６から出力される。そして必要に応じて、外部記録
装置１８においてハードディスクやフロッピーディスク
などにデータの保存が行われる。

【０００６】

【発明が解決しようとする課題】イメージ読取部１１で
読み込んだイメージの中から認識すべき文字の領域を指
定する方法として、例えば、マウスなどを用いた領域指
定部１２で対象とする部分を囲む方式が一般的である。
図２０は従来技術の領域指定画面上で認識領域の指定が
できない傾いた矩形状のイメージの一例を示す説明図で
ある。図２０の［２０−１］に示すように、読み込んだ
イメージの中に傾きを持つ図形があり、その図形中に認
識対象とする文字列が含まれることがある。

【０００７】しかしながら、傾きを持つ文字列を図形同
様の傾きを持つ矩形で認識領域を指定することはできな
いので、現状では、図２０の［２０−２］に示すよう
に、画面に平行／垂直な罫線からなる矩形に限って認識
領域を２点［２０−３］、［２０−４］を指定して文字
認識を実行させている。

【０００８】図２１は従来技術の領域指定画面上で認識
領域の指定ができない傾いた平行四辺形状のイメージの
一例を示す説明図である。図２１の［２１−１］に示す
ように、認識対象のイメージの形状（塊）が傾いた平行
四辺形であった場合、例えば、図２１の［２１−２］に
示すように、認識領域を傾きを持った矩形で囲んで指定
することができなかった。

【０００９】図２２は従来技術の領域指定画面上で認識
領域の指定ができない複数矩形に含まれるイメージの一
例を示す説明図である。図２２に示すように、読み込ん
だイメージの中には、文字列の空いた所に図形が挿入さ
れていることがある。現状では、このようなイメージの
場合に、一回の操作で認識領域の指定を行うことができ
ないため、図２２の［２２−１］、［２２−２］、［２
２−３］のように幾つかのブロックに分けて認識領域を
指定を行う必要があった。また、特開平５−２１６９３
１号公報の文書記憶装置では、範囲指示シートを用いて
切出範囲の領域指定ができるが、傾むきを持つ文字列の
切り出しについては何も記載されていない。

【００１０】図２３は従来技術の領域指定画面上で文字
列の傾きの指定ができないイメージの一例を示す説明図
である。図２３の［２３−１］に示すように、文字列の
認識領域の指定が簡単に行えても、認識領域に含まれる
文字列の傾斜を指定できないと認識を行うことは不可能
である。また、前記各公報には、自動的に文字行の傾斜
を検出する技術も開示されているが、垂直（９０度）を
越えるような傾きの文字行についての検出は不可能であ
る。また、自動的に文字行の傾斜を検出するために複雑
なデータ処理構成が必要になる。

【００１１】図２４は従来技術の領域指定画面上で指定
した認識領域の中に不必要な実線が含まれるイメージの
一例を示す説明図である。図２４の［２４−１］に示す
ように、対象とするイメージの中の文字の近郊に実線が
存在する場合や、図２４の［２４−２］に示すように、
１塊の文字領域に不必要な実線が含まれる場合、［２４
−１］や［２４−２］のように矩形で領域指定をする
と、どうしても不必要な実線が含まれる問題が発生す
る。図２４の［２４−１］に示すように、不必要な実線
で囲まれている認識領域を指定する場合には、領域指定
と不必要な部分の削除指定という２つの指定を行う必要
がある。

【００１２】図２５は従来技術の領域指定画面上で表に
含まれるイメージの認識領域を指定する一例を示す説明
図である。図２５に示すように、表を含むイメージで認
識領域を指定する場合には、図２５の［２５−１］、
［２５−２］に示すように、表のそれぞれの部分単位に
領域指定を行う必要がある。もし、罫線消去機能のある
文字認識装置で［２５−３］のように指定して罫線消去
をしても、文字列の区切りが分からなくなり、例えば、
１ブロック目の２行目の文字列と２ブロック目の１行目
の文字列がつながって処理されることがあり、後で行編
集などの作業が必要になる。

【００１３】本発明は以上の事情を考慮してなされたも
のであり、各種形状の認識対象領域が簡単に指定でき、
傾いて読み取られた原稿でも文字認識方向を検出して文
字認識ができる文字認識装置を提供するものである。

【００１４】

【課題を解決するための手段】本発明は、原稿に記載さ
れて文字列をイメージとして読み取るイメージ読取手段
と、読み取られたイメージを画面上に表示する表示手段
と、表示されたイメージに含まれる文字列の認識対象領
域の形状とその各頂点の座標を行頭から行末方向または
行末から行頭方向の順に少なくとも３頂点を指定する領
域指定手段と、指定された形状と各頂点の座標に基づい
て認識対象領域の切り出し範囲を算出してイメージから
認識対象領域を切り出す領域切出手段と、前記領域指定
手段により指定された行頭と行末間の２頂点で結ぶ線分
方向を文字認識方向として切り出された認識対象領域の
文字を認識する文字認識手段とを備えてなる文字認識装
置である。

【００１５】なお、本発明において、イメージ読取手段
はＣＣＤ（電荷結合素子）などからなるイメージスキャ
ナで構成される。表示手段はＣＲＴディスプレイ、ＬＣ
Ｄ（液晶ディスプレイ）、プラズマディスプレイなどか
らなる表示装置で構成される。領域指定手段は、キーボ
ード、マウス、ペン・タブレットなどからなる入力装置
で構成される。また、領域指定手段としては、例えば、
表示装置の画面上で各種機能を指定できるアイコン（絵
記号）を表示する構成にすることが分かり易い。

【００１６】領域切出手段、文字認識手段は、ＣＰＵ、
ＲＯＭ、ＲＡＭ、Ｉ／Ｏポートからなるマイクロコンピ
ュータで構成される。特に、ＲＯＭにはＣＰＵが本発明
の領域切出手段、文字認識手段として機能を有する制御
プログラムが記憶されている。また、ＲＡＭはイメージ
読取手段で読み取ったイメージを座標と対応したドット
データとして記憶するイメージ記憶手段として機能す
る。サーマルプリンタやレーザプリンタからなる印刷装
置、ハードディスクやフロッピーディスクからなる外部
記録装置をさらに備えた構成にしてもよい。

【００１７】前記構成によれば、傾いて読み取られた原
稿のイメージでも指定した認識対象領域の文字を切り出
し文字認識方向を判定して文字を認識することができ
る。また、傾いた原稿に対する文字認識率を大幅に改善
できる。

【００１８】前記領域指定手段は矩形または平行四辺形
である認識対象領域の形状とその３頂点の座標を指定し
た際、前記領域切出手段は、前記３頂点の座標から矩形
または平行四辺形の他の１頂点の座標を算出してイメー
ジから認識対象領域を切り出すよう構成されることが好
ましい。

【００１９】前記構成によれば、認識対象領域が平行四
辺形状でも簡単に指定して切り出し文字を認識すること
ができる。また、文字認識は最初に指定した行頭と行末
間の２頂点で結ぶ平行四辺形の１辺に平行に文字が記載
されているものとして実行される。当然、真っすぐに記
載された文字列の認識対象領域にも使用できる。

【００２０】前記領域指定手段は複数の矩形からなる認
識対象領域の形状とその各頂点の座標を行頭から行末方
向または行末から行頭方向の順に４頂点以上を指定した
際、前記領域切出手段は、指定された全頂点の座標を結
んでできる領域を一つの認識対象領域としてイメージか
ら切り出すよう構成されることが好ましい。文字認識は
最初に指定した１辺に平行に文字が記されているものと
して実行されるので、斜めに書かれている文字列の文字
を認識することができる。

【００２１】前記構成によれば、認識対象領域が複数の
矩形で構成されていても一つの認識領域として指定する
ことができる。すなわち、指定した全頂点の座標を直線
でつなぎ、始点と４番目以降で指定した頂点が一致した
ときに囲まれた領域を認識対象領域とする。従って、数
回に分けて指定していた複数の矩形領域を１回で指定す
ることができ、操作が簡単になる。また、他の領域の図
形や文字列に跨がって、指定できなかった認識対象領域
を指定することができる。

【００２２】前記領域指定手段により指定された認識対
象領域に含まれる文字列が最初に指定した認識対象領域
の辺に対して傾いている際、文字列の行頭と行末間を結
ぶ線分方向と平行になる２点の座標を指定する認識方向
指定手段をさらに備え、前記文字認識手段は前記認識方
向指定部により指定された２点を結ぶ線分方向を文字認
識方向として文字を認識するよう構成されることが好ま
しい。前記認識方向指定手段としては、前記入力装置と
アイコンで構成される。

【００２３】前記構成によれば、最初に指定した認識対
象領域の辺が文字認識方向に一致させられなかった場合
に、始点と終点の２点を入力して文字認識方向を直接指
定することができる。すなわち、認識対象領域を指定し
た後から、文字の傾きを指定して認識することができる
ので、今まで指定できなかった９０度を越えて傾いてい
るような原稿の認識も可能になる。

【００２４】前記イメージに認識対象外の実線が含まれ
る際、実線の一部を１点の座標で指定する実線削除指定
手段をさらに備え、前記文字認識部は、前記実線削除指
定手段により指定された座標から連続する実線を削除し
て文字を認識するよう構成されることが好ましい。前記
実線削除指定手段としては、前記入力装置とアイコンで
構成される。

【００２５】前記構成によれば、認識対象領域のイメー
ジに含まれる不必要な実線の一部を指定するだけで簡単
に削除することができる。従って、不必要な図形などを
認識領域に含まないようにするために、幾つものブロッ
クに分けて領域指定を行う必要がなくなる。領域指定が
簡単になり、文字認識の精度を高めることができる。

【００２６】前記イメージに実線で閉じた領域が含まれ
る際、実線の一部を１点の座標で指定する実線削除指定
手段をさらに備え、前記文字認識手段は、前記実線削除
指定手段により指定された座標から連続する実線を削除
して実線で閉じた領域に含まれる文字を認識するよう構
成されることが好ましい。前記構成によれば、不必要な
実線の削除と認識対象領域を指定を一度にすることがで
きる。

【００２７】前記イメージに実線で閉じた複数領域から
なる表が含まれる際、表の一部を１点の座標で指定する
表削除指定手段をさらに備え、前記文字認識手段は、前
記表削除指定手段により指定された座標から表を削除し
て実線で閉じた領域ごとに含まれる文字を認識するよう
構成されることが好ましい。前記表削除指定手段として
は、前記入力装置とアイコンで構成される。

【００２８】前記構成によれば、文字認識から除く実線
で閉じた複数領域からなる表が存在する場合、表の一部
を指定することで、指定した表を削除して、閉じた領域
を１つの単位として文字認識を行うことができる。従っ
て、表の実線を飛び越えて文字認識が行われるため文字
列の区切りが分からなくなり、後編集が必要であったが
これらの編集を軽減することができる。

【００２９】

【発明の実施の形態】以下、図に示す実施例に基づいて
本発明を詳述する。なお、これによって本発明は限定さ
れるものではない。本発明は、ＯＣＲ（光学式文字読み
取り装置）を備えた文書処理装置に用いられる。

【００３０】図１は本発明の文字認識装置の構成を示す
ブロック図である。図１において、ＣＣＤ（電荷結合素
子）などからなるイメージスキャナで構成されるイメー
ジ読取部（イメージ読取手段）１と、キーボード、マウ
ス、ペン・タブレットなどからなる入力装置で構成され
る領域指定部（領域指定手段）２ａ、認識方向指定部
（認識方向指定手段）２ｂ、実線削除指定部（実線削除
指定手段）２ｃ、表削除指定部（表削除指定手段）２ｄ
と、ＣＰＵ、ＲＯＭ、ＲＡＭ、Ｉ／Ｏポートからなるマ
イクロコンピュータで構成されるイメージ記憶部３、領
域切出部（領域切出手段）４、及び文字認識部（文字認
識手段）５、認識データ記憶部６と、ＣＲＴディスプレ
イ、ＬＣＤ（液晶ディスプレイ）、プラズマディスプレ
イなどからなる表示装置（表示手段）７と、サーマルプ
リンタやレーザプリンタからなる印刷装置（印刷手段）
８と、ハードディスクやフロッピーディスクからなる外
部記録装置９から構成される。

【００３１】例えば、領域指定部２ａ、認識方向指定部
２ｂ、実線削除指定部２ｃ、表削除指定部２ｄは表示装
置６の画面上で各種機能を指定できるアイコン（絵記
号）を表示する構成にすることが好ましい。特に、ＲＯ
ＭにはＣＰＵが本発明の領域切出部４、文字認識部５、
認識データ記憶部６として機能を有する制御プログラム
や、文字認識するための文字認識用パターン、文字コー
ドなどの各種データが記憶されている。また、ＲＡＭは
イメージ読取部１で読み取ったイメージを座標と対応し
たドットデータとして記憶するイメージ記憶部３として
機能する。また、切り出した認識対象領域の文字データ
を記憶し、文字認識処理のワークエリアとして機能す
る。

【００３２】イメージ読取部１から原稿のイメージを読
み取る。そして、表示装置７で読み込んだイメージを表
示する。次に、領域指定部２ａで認識対象とする文書の
認識領域を指定する。領域指定部２ａで指定した領域部
分について領域切出部４において、領域の切り分け、領
域の回転などの編集を行う。そして、各部分について順
次、文字認識部５において行の切り出し、文字の切り出
し、認識データ記憶部６から認識用文字パターンを呼び
出して文字認識処理を行う。認識した結果は、表示装置
７や印刷装置８に出力される。そして必要に応じて、外
部記録装置９において、ハードディスクやフレキシブル
ディスクなどにデータの保存が行われる。以下、領域指
定部による領域指定の実施例について述べる。

【００３３】図８は本発明における認識領域指定機能と
各処理のルーチンを示すフローチャートである。図８に
おいて、ステップＳ010：どのような形状の認識領域（認識対象
領域）を指定するか選択する（例えば、図２参照）。ステップＳ011：矩形状の認識領域を指定する場合は、
ルーチン（１）のフローチャートに進む（領域指定部２
ａのアイコンで指定）。ステップＳ012：回転矩形状の認識領域を指定する場合
は、ルーチン（２）のフローチャートに進む（領域指定
部２ａのアイコンで指定）。ステップＳ013：平行四辺形状の認識領域を指定する場
合は、ルーチン（３）のフローチャートに進む（領域指
定部２ａのアイコンで指定）。

【００３４】ステップＳ014：多角形状の認識領域を指
定する場合は、ルーチン（４）のフローチャートに進む
（領域指定部２ａのアイコンで指定）。ステップＳ015：実線削除を指定する場合は、ルーチン
（５）のフローチャートに進む（実線削除指定部２ｃの
アイコンで指定）。ステップＳ016：表削除を指定する場合は、ルーチン
（６）のフローチャートに進む（表削除指定部２ｄのア
イコンで指定）。ステップＳ017：認識文字の方向を指定する場合は、処
理ルーチン（７）のフローチャートに進む（認識方向指
定部２ｂのアイコンで指定）。

【００３５】図２は本発明の領域指定画面上で傾いた矩
形状のイメージの認識領域を指定する例を示す説明図で
ある。図２の［２−５］に示すように、選択されている
アイコン（ボックス）は太枠で表示され、例えば、傾い
た矩形（回転矩形）状の文書画像の領域指定が選択され
ている。

【００３６】図９は本発明における矩形状のイメージの
領域指定の処理手順を示すフローチャートである。図２
に基づいて図９のフローチャートを説明する。図２にお
いて、例えば、アイコン［２−６］が選択されると、傾
斜していない矩形領域［２−１０］に含まれるイメージ
の認識領域の処理として機能する。ここでは、矩形の対
角線を示す第１座標（Ｘ1，Ｙ1）と第２座標（Ｘ2，Ｙ
2）の２ポイントを指定するだけで認識領域と文字認識
方向が確定できる。また、座標（Ｘ0，Ｙ0）は、マウス
ポインタ（カーソル）が現在指している座標である。第
１座標（Ｘ1，Ｙ1）は、矩形［２−１０］の右上隅、も
しくは左上隅を指定したｘ座標、ｙ座標が代入される。
第２座標（Ｘ2，Ｙ2）は、上記第１座標（Ｘ1，Ｙ1）が
矩形の右上隅のときには左下隅、上記第１座標（Ｘ1，
Ｙ1）が左上隅の時には右下隅を指定したｘ座標、ｙ座
標が代入される。

【００３７】ステップＳ101：最初に指定したポイント
を第１座標として決定する。例えば、図２の［２−７］
のポイントを指定する。ステップＳ102：（Ｘ1，Ｙ1）に第１座標として［２−
７］のポイントの座標値を代入する。ステップＳ103：（Ｘ0，Ｙ0）に現在のマウスポインタ
の座標値を代入する。ステップＳ104：（Ｘ1，Ｙ1）と（Ｘ0，Ｙ1）を点線で
結ぶ。（Ｘ0，Ｙ1）と（Ｘ0，Ｙ0）を点線で結ぶ。（Ｘ
0，Ｙ0）と（Ｘ1，Ｙ0）を点線で結ぶ。（Ｘ1，Ｙ0）と
（Ｘ1，Ｙ1）を点線で結ぶ。

【００３８】図２の［２−９］にマウスポインタがある
場合には（Ｘ0，Ｙ0）に［２−９］の指す座標値が代入
され、図２に示すような点線で結ばれる。マウスポイン
タを認識対象としている領域まで移動させる。点線で結
ばれた領域は確定していない。ステップＳ105：次に指定したポイントを第２座標とし
て確定する。例えば、図２の［２−８］のポイントが指
定される。ステップＳ106：（Ｘ2，Ｙ2）に第２座標として［２−
８］のポイントの座標値を代入する。

【００３９】ステップＳ107：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ
1）を実線で結ぶ。（Ｘ2，Ｙ1）と（Ｘ2，Ｙ2）を実線
で結ぶ。（Ｘ2，Ｙ2）と（Ｘ1，Ｙ2）を実線で結ぶ。
（Ｘ1，Ｙ2）と（Ｘ1，Ｙ1）を実線で結ぶ。図２の［２
−１０］に示すような範囲が確定する。ステップＳ108：前記各座標で囲まれた領域を認識領域
とする。ステップＳ109：ｘ座標に平行、もしくはｙ座標に平行
な文字認識方向であるとする。本実施例では（Ｘ1，Ｙ
1）と（Ｘ1，Ｙ2）を結ぶ実線がｘ座標に平行である。
以上で、図２の領域［２−１０］が認識領域として確定
され、且つ（Ｘ1，Ｙ1）と（Ｘ1，Ｙ2）を結ぶ実線が文
字認識方向として確定される。

【００４０】図１０は本発明における傾いた矩形状のイ
メージの領域指定の処理手順を示すフローチャートであ
る。図２に基づいて図１０のフローチャートを説明す
る。図２において、例えば、アイコン［２−５］が選択
されると、傾いた矩形領域［２−４］に含まれるイメー
ジの認識領域の処理として機能する。ここでは、傾いた
矩形（回転矩形）の一辺と対角線を示す第１座標（Ｘ
1，Ｙ1）、第２座標（Ｘ2，Ｙ2）、第３座標（Ｘ3，Ｙ
3）の３ポイントを指定するだけで、認識領域と文字認
識方向が確定できる。

【００４１】また、第１座標（Ｘ1，Ｙ1）は、回転矩形
の右上隅、もしくは左上隅を指定したｘ座標、ｙ座標が
代入される。第２座標（Ｘ2，Ｙ2）は、上記第１座標が
回転矩形の右上隅の時には左上隅、左上隅の時には右上
隅を指定したｘ座標、ｙ座標が代入される。また、第３
座標（Ｘ3，Ｙ3）は、第２座標が矩形の右上隅の時には
右下隅、左下隅の時には左下隅を指定したｘ座標、ｙ座
標が代入される。

【００４２】ステップＳ201：最初に指定したマウスポ
イント（図２の［２−１］）を第１座標として決定す
る。ステップＳ202：（Ｘ1，Ｙ1）に第１座標として［２−
１］のポイントの座標値を代入する。ステップＳ203：（Ｘ1，Ｙ1）と現在のマウスポインタ
が示す座標（Ｘ0，Ｙ0）を点線で結ぶ。マウスポインタ
を認識対象としている領域まで移動させる。ステップＳ204：次に指定したポイント（図２の［２−
２］）を第２座標として決定する。ステップＳ205：（Ｘ2，Ｙ2）に第２座標として［２−
２］のポイントの座標値を代入する。

【００４３】ステップＳ206：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ
2）を実線で結ぶ。ステップＳ207：（Ｘ1，Ｙ1）と（Ｘ2、Ｘ2）と現在の
マウスポインタの（Ｘ0，Ｙ0）で矩形を形成するように
点線で₂ ぶ。ステップＳ208：次に指定したポイント（図２の［２−
３］）を第３座標として決定する。ステップＳ209：（Ｘ3，Ｙ3）に第３座標として［２−
３］のポイントの座標値を代入する。ステップＳ210：（Ｘ2，Ｘ2）と（Ｘ3，Ｙ3）を実線で
結ぶ。ステップＳ211：（Ｘ1，Ｙ1）、（Ｘ2，Ｙ2）、（Ｘ3，
Ｙ3）から、矩形を形成するように第４座標（Ｘ4，Ｙ
4）の座標値を計算し、代入する。

【００４４】ステップＳ212：（Ｘ3，Ｙ3）と（Ｘ4，Ｙ
4）を実線で結ぶ。（Ｘ4，Ｙ4）と（Ｘ1，Ｙ1）を実線
で結ぶ。ステップＳ213：前記各座標で囲まれた領域を認識領域
とする。ステップＳ214：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ2）を文字認
識方向として記憶する。以上で、図２の傾いた矩形領域
［２−４］が認識領域として確定され、且つ（Ｘ1，Ｙ
1）と（Ｘ2，Ｙ2）を結ぶ方向が文字認識方向として確
定される。次のステップでは文字列が正確に切り出さ
れ、文字認識テーブルを参照して１文字ごとに認識され
該当する文字コードに変換される。

【００４５】前記構成によれば、傾いて読み取られた原
稿でも文字認識領域が指定できるので文字認識ができ
る。従って、原稿のイメージの読み取りの段階で、原稿
を斜めに置いても、置き直して読み取る必要がなくなり
手間を省くことができる。また、傾いた原稿に対する文
字認識率を大幅に改善できる。

【００４６】図３は本発明の領域指定画面上で平行四辺
形状のイメージの認識領域を指定する例を示す説明図で
ある。図１１は本発明における平行四辺形状のイメージ
の領域指定の処理手順を示すフローチャートである。図
３に基づいて図１１のフローチャートを説明する。図３
において、例えば、アイコン［３−６］が選択される
と、平行四辺形状の領域［３−５］に含まれるイメージ
の認識領域の処理として機能する。

【００４７】ここでは、平行四辺形の一辺と対角線を示
す第１座標（Ｘ1，Ｙ1）、第２座標（Ｘ2，Ｙ2）、第３
座標（Ｘ3，Ｙ3）の３ポイントを指定するだけで、認識
領域と文字認識方向が確定できる。また、第１座標（Ｘ
1，Ｙ1）、第２座標（Ｘ2，Ｙ2）、第３座標（Ｘ3，Ｙ
3）、第４座標（Ｘ4，Ｙ4）にはそれぞれ平行四辺形の
頂点のｘ座標、ｙ座標が順に代入される（順序は時計方
向でも反時計方向でもよい）。

【００４８】ステップＳ301：最初に指定したポイント
を第１座標として決定する。本実施例では、図３の［３
−２］を第１座標とするのが望ましい。ステップＳ302：（Ｘ1，Ｙ1）に第１座標として［３−
２］のポイントの座標値を代入する。ステップＳ303：（Ｘ1，Ｘ1）と現在のマウスポインタ
の（Ｘ0，Ｙ0）を点線で結ぶ。

【００４９】ステップＳ304：次に指定したポイントを
第２座標として決定する。ここでは、図３の［３−１］
を指定している。ステップＳ305：（Ｘ2，Ｙ2）に第２座標として［３−
１］のポイントの座標値を代入する。ステップＳ306：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ2）を実線で
結ぶ。

【００５０】ステップＳ307：（Ｘ1，Ｙ1）と（Ｘ2，Ｘ
2）と現在のマウスポインタの（Ｘ0，Ｙ0）で平行四辺
形を形成するように点線で結ぶ。ステップＳ308：次に指定したポイントを第３座標とし
て決定する。ここでは、図３の［３−３］を指定してい
る。ステップＳ309：（Ｘ3，Ｙ3）に第３座標として［３−
３］のポントの座標値を代入する。

【００５１】ステップＳ310：（Ｘ2，Ｘ2）と（Ｘ3，Ｙ
3）を実線で結ぶ。ステップＳ311：（Ｘ1，Ｙ1）、（Ｘ2，Ｙ2）、（Ｘ3，
Ｙ3）から第４座標（Ｘ4，Ｙ4）の座標値を計算し、代
入する。本実施例では、図３の［３−４］のポイントが
（Ｘ4，Ｙ4）に割り当てられる。ステップＳ312：（Ｘ3，Ｙ3）と（Ｘ4，Ｙ4）を実線で
結ぶ。（Ｘ4，Ｙ4）と（Ｘ1，Ｙ1）を実線で結ぶ。本実
施例では、図３のような平行四辺形が作られる。ステップＳ313：前記各座標で囲まれた領域を認識領域
とする。

【００５２】ステップＳ314：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ
2）で結ばれる実線を文字認識方向として記憶する。以
上で、図３の領域［３−５］が認識領域として確定さ
れ、且つ（Ｘ1，Ｙ1）と（Ｘ2，Ｙ2）を結ぶ方向が文字
認識方向として確定される。次のステップでは文字列が
正確に切り出され、文字認識テーブルを参照して１文字
ごとに認識され該当する文字コードに変換される。従っ
て、文字認識対象のイメージが平行四辺形状でも認識領
域を簡単に指定することができる。文字認識方向を検出
して平行四辺形状の認識領域にある文字を認識すること
ができる。

【００５３】図４は本発明の領域指定画面上で多角形状
のイメージの認識領域を指定する例を示す説明図であ
る。図１２は本発明における多角形状のイメージの領域
指定の処理手順を示すフローチャートである。図４に基
づいて図１２のフローチャートを説明する。図４におい
て、例えば、アイコン［４−１２］が選択されると、多
角形状の領域［４−１１］に含まれるイメージの認識領
域の処理として機能する。

【００５４】ここでは、第１座標（Ｘ1，Ｙ1）から第ｎ
座標（Ｘn，Ｙn）はそれぞれ多角形の頂点のｘ座標、ｙ
座標が順に代入される。順序は時計方向でも、反時計方
向でもよい。また、第１座標（Ｘ1，Ｙ1）から第ｎ座標
（Ｘn，Ｙn）で囲まれる領域を認識領域として確定し、
第１座標（Ｘ1，Ｙ1）と第２座標（Ｘ2，Ｙ2）を結ぶ方
向を文字認識方向が確定する。

【００５５】ステップＳ401：最初に指定したポイント
を第１座標として決定する。図４では［４−１］を第１
座標としている。ステップＳ402：（Ｘ1，Ｙ1）に第１座標として［４−
１］のポイントの座標値を代入する。ステップＳ403：ｎに１を代入する。ステップＳ404：ｎにｎ＋１を代入する。ステップＳ405：（Ｘn‐1，Ｙn‐1）と現在のマウスポ
インタの（Ｘ0，Ｙ0）を点線で結ぶ。

【００５６】ステップＳ406：次に指定したポイントを
第ｎ座標として決定する。本実施例では、［４−２］を
第２座標、［４−３］を第３座標、……［４−１０］を
第１０座標としている。ステップＳ407：（Ｘn，Ｙn）に第ｎ座標として指定し
たポイントの座標値を代入する。ステップＳ408：（Ｘn‐1，Ｙn‐1）と（Ｘn，Ｙn）を
実線で結ぶ。ステップＳ409：（Ｘ1，Ｙ1）と（Ｘn，Ｙn）が一致す
れば、ステップＳ410に進む。本実施例では、［４−
１］が第１１座標と一致するので、終了条件に一致す
る。一致しない場合は、ステップＳ404に進む。

【００５７】ステップＳ410：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ
2）を文字認識方向として記憶する。以上で図４の領域
［４−１１］が認識領域として確定され、且つ（Ｘ1，
Ｙ1）と（Ｘ2，Ｙ2）を結ぶ方向が文字認識方向として
確定される。次のステップでは文字列が正確に切り出さ
れ、文字認識テーブルを参照して１文字ごとに認識され
該当する文字コードに変換される。前記構成によれば、
文字認識対象のイメージが複数の矩形で構成されていて
も一つの認識領域として指定することができる。従っ
て、数回に分けて指定していた複数の矩形領域を１回で
指定することができ、操作が簡単になる。また、他の領
域の図形や文字列に跨がって、指定できなかった認識領
域を指定することができる。

【００５８】図５は本発明の領域指定画面上で実線削除
を指定する例を示す説明図である。図１３は本発明にお
ける実線削除の処理手順を示すフローチャートである。
図５に基づいて図１３のフローチャートを説明する。図
５において、例えば、アイコン［５−４］が選択される
と、イメージ中に含まれる実線を削除する指定として機
能する。ここでは、座標（Ｘ1，Ｙ1）に削除したい実線
上のある１点のｘ座標、ｙ座標を代入することにより特
殊な線削除の指定を実施する。

【００５９】ステップＳ501：削除したい実線の一部を
マウスで指定。本実施例では、図５の［５−１］のポイ
ントで文字認識には関連のない実線を指定する。ステップＳ502：（Ｘ1，Ｙ1）に指定した座標値を代入
する。ここでは、（Ｘ1，Ｙ1）に［５−１］が指すポイ
ントの座標値が代入される。以上で図５の［５‐１］は削除する実線のポイントとし
て指定された。［５−２］、［５−３］についても同様
に指定することができる。次のステップで、指定した座
標とつながった実線部分は全て文字認識には必要のない
ドット集合であるとして削除される。前記構成によれ
ば、文字認識対象のイメージに含まれる不必要な実線を
簡単に除くことができる。従って、不必要な図形などを
認識領域に含まないようにするために、幾つものブロッ
クに分けて領域指定を行う必要がなくなる。

【００６０】図６は本発明の領域指定画面上で表削除を
指定する例を示す説明図である。図１４は本発明におけ
る表削除の処理手順を示すフローチャートである。図６
に基づいて図１４のフローチャートを説明する。図６に
おいて、例えば、アイコン［６−１１］が選択される
と、イメージ中に含まれる表を削除する指定として機能
する。ここでは、座標（Ｘ1，Ｙ1）に削除したい表のあ
る１点のｘ座標、ｙ座標を代入することにより表削除の
指定を実施する。また、指定する表の罫線は必ず閉じて
いるものとする。

【００６１】ステップＳ601：削除したい表の一部をマ
ウスで指定する。本実施例では、図６の［６−１］のポ
イントで囲まれた図形の一部を指定する。ステップＳ602：（Ｘ1，Ｙ1）に指定した座標値を代入
する。ここでは、（Ｘ1，Ｙ1）に［６−１］が指すポイ
ントの座標値が代入される。以上で、図６の［６−１］で指定された領域が表削除の
領域として確定したことになる。また、図６の［６−
１］を指定した際に、［６−２］〜［６−１０］のそれ
ぞれの領域が指定されたように構成することもできる。
前記構成によれば、罫線で囲まれている枠に含まれる文
字列の認識領域を指定する際、囲んでいる枠の一部を指
定するだけで、簡単に枠が削除できる。従って、表など
の枠で囲まれた領域単位の文書の文字認識を行うことが
できる。

【００６２】図７は本発明の領域指定画面上で文字認識
方向を指定する例を示す説明図である。図１５は本発明
における文字認識方向指定の処理手順を示すフローチャ
ートである。図７に基づいて図１５のフローチャートを
説明する。図７において、例えば、アイコン［７−３］
が選択されると、文字認識方向の指定として機能する。
ここでは、文字列が並んでいる方向と平行になる第１座
標（Ｘ1，Ｙ1）、第２座標（Ｘ2，Ｙ2）を指定すること
により文字認識方向を更新記憶する。各領域指定中で確
定され記憶している文字認識方向とちがう向きに文字列
が並んでいる場合、第１座標（Ｘ1，Ｙ1）、第２座標
（Ｘ2，Ｙ2）を指定し、二つの座標と結んだ方向を新た
な文字認識方向とする。

【００６３】ステップＳ701：第１座標を決定する。図
７で指定された領域の中にポイントを置く必要がある。
本実施例では、［７−１］のポイントを第１座標として
いる。ステップＳ702：（Ｘ1，Ｙ1）に第１座標として［７−
１］のポイントの座標値を代入する。ステップＳ703：（Ｘ1，Ｙ1）と現在のマウスポインタ
の（Ｘ0，Ｙ0）を点線で結ぶ。ステップＳ704：第２座標を決定する。本実施例では、
［７−２］を指定している。ステップＳ705：（Ｘ2，Ｙ2）に第２座標として［７−
２］のポイントの座標値を代入する。

【００６４】ステップＳ706：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ
2）を実線で結ぶ。ステップＳ707：（Ｘ1，Ｙ1）と（Ｘ2，Ｙ2）を文字認
識方向として記憶する。ここで、指定した文字認識方向
の方が、他の領域指定中で指定した文字認識方向より優
先される。以上で図７の［７−１］、［７−１］で矢印
を付けた方向が文字認識方向となる。前記構成によれ
ば、文字列の傾きの角度によらず文字認識方向を直接指
定することができる。

【００６５】図１６は本発明における認識領域指定と各
編集処理のルーチンを示すフローチャートである。図１
６において、ステップＳ020：認識実行アイコンが選択される。図２
では、領域指定アイコンの下の認識実行アイコンがマウ
スでクリックされた場合である。ステップＳ021：矩形状の認識領域が指定された場合
は、ルーチン（８）のフローチャートに進む。ステップＳ022：回転矩形状の認識領域が指定された場
合も、ルーチン（８）のフローチャートに進む。

【００６６】ステップＳ023：平行四辺形状の認識領域
が指定された場合も、ルーチン（８）のフローチャート
に進む。ステップＳ024：多角形状の認識領域が指定された場合
も、ルーチン（８）のフローチャートに進む。ステップＳ025：表削除が指定された場合は、ルーチン
（９）のフローチャートに進む。

【００６７】図１７は本発明における各形状の認識領域
編集の処理手順を示すフローチャートである。図１７の
フローチャートは、矩形、回転矩形、平行四辺形、多角
形の形状で指定された場合の編集処理を示す。ステップＳ801：認識領域の中に実線削除機能で指定し
た座標が含まれているかを調べる。含まれている場合
は、ステップＳ802へ進む、含まれていない場合は、ス
テップＳ803へ進む。ステップＳ802：実線削除機能で指定した座標から連続
する実線部分のドットを反転させ削除する。ステップＳ803：認識領域の中に文字認識方向指定機能
で指定した座標が含まれているかを調べる。含まれてい
る場合は、ステップＳ804に進む。含まれていない場合
は、ステップＳ805へ進む。

【００６８】ステップＳ804：文字認識方向指定機能で
決定した文字認識方向を文字例の傾き角度とする。ステップＳ805：各領域指定時に決められた文字認識方
向を文字列の傾き角度とする。ステップＳ806：指定領域内のすべての文字／文字間隔
について、傾きの角度分逆回転して水平または垂直にす
る。ステップＳ807：文字認識領域を切り出す。ステップＳ808：文字認識テーブルを参照して文字認識
を行う。ステップＳ809：認識した文字を画面表示したり、記憶
装置に保存したりする。

【００６９】図１８に本発明における表削除の処理手順
を示すフローチャートである。ステップＳ901：表削除機能で指定した座標から連続す
るポイントで囲まれた範囲を文字認識範囲として切り出
す。図６において、［６−１］〜［６−１０］により１
０個の文字認識範囲に分けられる。横書きの場合は、左
上優先、縦書きの場合は、右上優先に文字認識の順序を
決める。ステップＳ902：各々認識領域に含まれる文字の認識処
理は、ルーチン（８）のステップＳ807〜ステップＳ809
の処理を実行する。

【００７０】従って、前記構成によれば、（１）傾いて読み取られた原稿のイメージでも指定した
認識対象領域の文字を切り出し文字認識方向を判定して
文字を認識することができる。従って、原稿のイメージ
の読み取りの段階で、原稿を斜めに置いても、置き直し
て読み取る必要がなくなり手間を省くことができる。ま
た、傾いた原稿に対する文字認識率を大幅に改善でき
る。（２）認識対象領域が平行四辺形状でも簡単に指定して
切り出し文字を認識することができる。（３）認識対象領域が複数の矩形で構成されていても一
つの認識領域として指定することができる。従って、数
回に分けて指定していた複数の矩形領域を１回で指定す
ることができ、操作が簡単になる。また、他の領域の図
形や文字列に跨がって、指定できなかった認識対象領域
を指定することができる。

【００７１】（４）最初に指定した認識対象領域の辺が
文字認識方向に一致させられなかった場合に、始点と終
点の２点を入力して文字認識方向を直接指定することが
できる。文字列の傾きの角度によらず文字認識方向を直
接指定することができる。（５）認識対象領域のイメージに含まれる不必要な実線
の一部を指定するだけで簡単に削除することができる。
従って、不必要な図形などを認識領域に含まないように
するために、幾つものブロックに分けて領域指定を行う
必要がなくなる。領域指定が簡単になり、文字認識の精
度を高めることができる。（６）不必要な実線の削除と認識対象領域を指定を一度
にすることができる。（７）文字認識から除く実線で閉じた複数領域からなる
表が存在する場合、表の一部を指定することで、指定し
た表を削除して、閉じた領域を１つの単位として文字認
識を行うことができる。従って、表の実線を飛び越えて
文字認識が行われるため文字列の区切りが分からなくな
り、後編集が必要であったがこれらの編集を軽減するこ
とができる。

【００７２】

【発明の効果】本発明によれば、傾いて読み取られた原
稿のイメージでも指定した認識対象領域の文字を切り出
し文字認識方向を判定して文字を認識することができ
る。従って、原稿のイメージの読み取りの段階で、原稿
を斜めに置いても、置き直して読み取る必要がなくなり
手間を省くことができる。また、傾いた原稿に対する文
字認識率を大幅に改善できる。

【図面の簡単な説明】

【図１】本発明の文字認識装置の構成を示すブロック図
である。

【図２】本発明の領域指定画面上で傾いた矩形状のイメ
ージの認識領域を指定する例を示す説明図である。

【図３】本発明の領域指定画面上で平行四辺形状のイメ
ージの認識領域を指定する例を示す説明図である。

【図４】本発明の領域指定画面上で多角形状のイメージ
の認識領域を指定する例を示す説明図である。

【図５】本発明の領域指定画面上で実線削除を指定する
例を示す説明図である。

【図６】本発明の領域指定画面上で表削除を指定する例
を示す説明図である。

【図７】本発明の領域指定画面上で文字認識方向を指定
する例を示す説明図である。

【図８】本発明における認識対象領域指定機能と各処理
のルーチンを示すフローチャートである。

【図９】本発明における矩形状のイメージの領域指定の
処理手順を示すフローチャートである。

【図１０】本発明における傾いた矩形状のイメージの領
域指定の処理手順を示すフローチャートである。

【図１１】本発明における平行四辺形状のイメージの領
域指定の処理手順を示すフローチャートである。

【図１２】本発明における多角形状のイメージの領域指
定の処理手順を示すフローチャートである。

【図１３】本発明における実線削除の処理手順を示すフ
ローチャートである。

【図１４】本発明における表削除の処理手順を示すフロ
ーチャートである。

【図１５】本発明における文字認識方向指定の処理手順
を示すフローチャートである。

【図１６】本発明における認識領域指定と各編集処理の
ルーチンを示すフローチャートである。

【図１７】本発明における各形状の認識領域編集の処理
手順を示すフローチャートである。

【図１８】本発明における表削除の処理手順を示すフロ
ーチャートである。

【図１９】従来の文字認識装置の構成を示すブロック図
である。

【図２０】従来技術の領域指定画面上で認識領域の指定
ができない傾いた矩形状のイメージの一例を示す説明図
である。

【図２１】従来技術の領域指定画面上で認識領域の指定
ができない傾いた平行四辺形状のイメージの一例を示す
説明図である。

【図２２】従来技術の領域指定画面上で認識領域の指定
ができない複数矩形に含まれるイメージの一例を示す説
明図である。

【図２３】従来技術の領域指定画面上で文字列の傾きの
指定ができないイメージの一例を示す説明図である。

【図２４】従来技術の領域指定画面上で指定した認識領
域の中に不必要な実線が含まれるイメージの一例を示す
説明図である。

【図２５】従来技術の領域指定画面上で表に含まれるイ
メージの認識領域を指定する一例を示す説明図である。

【符号の説明】

１イメージ読取部２ａ領域指定部２ｂ認識方向指定部２ｃ実線削除指定部２ｄ表削除指定部３イメージ記憶部４領域切出部５文字認識部６認識データ記憶部７表示装置８印刷装置９外部記録装置

Claims

【特許請求の範囲】

【請求項１】原稿に記載された文字列をイメージとし
て読み取るイメージ読取手段と、読み取られたイメージを画面上に表示する表示手段と、表示されたイメージに含まれる文字列の認識対象領域の
形状とその各頂点の座標を行頭から行末方向または行末
から行頭方向の順に少なくとも３頂点を指定する領域指
定手段と、指定された形状と各頂点の座標に基づいて認識対象領域
の切り出し範囲を算出してイメージから認識対象領域を
切り出す領域切出手段と、前記領域指定手段により指定された行頭と行末間の２頂
点で結ぶ線分方向を文字認識方向として切り出された認
識対象領域の文字を認識する文字認識手段とを備えてな
る文字認識装置。
【請求項２】前記領域指定手段により矩形または平行
四辺形である認識対象領域の形状とその３頂点の座標を
指定した際、前記領域切出手段は、前記３頂点の座標か
ら矩形または平行四辺形の他の１頂点の座標を算出して
イメージから認識対象領域を切り出すことを特徴とする
請求項１記載の文字認識装置。
【請求項３】前記領域指定手段により複数の矩形から
なる認識対象領域の形状とその各頂点の座標を行頭から
行末方向または行末から行頭方向の順に４頂点以上を指
定した際、前記領域切出部は、指定された全頂点の座標
を結んでできる領域を一つの認識対象領域としてイメー
ジから切り出すことを特徴とした請求項１記載の文字認
識装置。
【請求項４】前記領域指定手段により指定された認識
対象領域に含まれる文字列が最初に指定した認識対象領
域の辺に対して傾いている際、文字列の行頭と行末間を
結ぶ線分方向と平行になる２点の座標を指定する認識方
向指定手段をさらに備え、前記文字認識手段は前記認識
方向指定手段により指定された２点を結ぶ線分方向を文
字認識方向として文字を認識することを特徴とする請求
項１記載の文字認識装置。
【請求項５】前記イメージに認識対象外の実線が含ま
れる際、実線の一部を１点の座標で指定する実線削除指
定手段をさらに備え、前記文字認識手段は、前記実線削
除指定手段により指定された座標から連続する実線を削
除して文字を認識することを特徴とする請求項１記載の
文字認識装置。
【請求項６】前記イメージに実線で閉じた領域が含ま
れる際、実線の一部を１点の座標で指定する実線削除指
定手段をさらに備え、前記文字認識手段は、前記実線削
除指定手段により指定された座標から連続する実線を削
除して実線で閉じた領域に含まれる文字を認識すること
を特徴とする請求項１記載の文字認識装置。
【請求項７】前記イメージに実線で閉じた複数領域か
らなる表が含まれる際、表の一部を１点の座標で指定す
る表削除指定手段をさらに備え、前記文字認識手段は、
前記表削除指定手段により指定された座標から表を削除
して実線で閉じた領域ごとに含まれる文字を認識するこ
とを特徴とする請求項１記載の文字認識装置。