JPH07192080A

JPH07192080A - 手書文字認識装置

Info

Publication number: JPH07192080A
Application number: JP5332489A
Authority: JP
Inventors: Tadashi Hirose; 斉志広瀬
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 1993-12-27
Filing date: 1993-12-27
Publication date: 1995-07-28

Abstract

(57)【要約】【構成】ペン１０による手書文字情報を文字として認
識できるように切り出して区分化し、各区分の手書文字
情報の文字特徴から候補文字を認識し、これら候補文字
を用いて作成された手書文字情報に対応する文字列を表
示するものである。文字列の表示領域がペン１０により
押圧されたときに、手書文字情報を表示させることによ
って、手書文字情報の区分をペン１０により指定させ、
この区分の手書文字情報の文字特徴から候補文字を再認
識させる制御部２を有している。【効果】手書文字情報の切り出し誤りによる誤認識が
生じた場合に、ペン１０により文字列の表示領域を押圧
して手書文字情報を表示させ、この表示された手書文字
情報に対してペン１０により区分を指定し、指定した区
分となるように手書文字情報を切り出させて再認識させ
ることができる。従って、切り出し誤りを修正する際の
作業量が僅かであるため、切り出し誤りを容易に修正で
きる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、タブレット等のペン型
の入力デバイスを用いて入力されたデータを認識する手
書文字認識装置に関するものである。

【０００２】

【従来の技術】従来のオンライン文字認識技術を利用し
た手書文字認識装置には、１個ないし複数個の文字入力
枠を備え、文字入力枠の１個に対してユーザが１文字を
記入して文字入力を行う機種がある。従って、手書文字
認識装置は、１個の枠に書かれた単数または複数のスト
ロークデータが１文字に対応することが容易に認識でき
るため、文字切り出し時におけるエラーを生じることが
ない。しかしながら、この手書文字認識装置では、文字
入力枠に記入するという筆記上の制限があるため、ペン
と紙の関係のように任意の場所に自由に入力することが
容易でない。

【０００３】そこで、手書文字認識装置には、上記の筆
記上の制限を緩和するため、文字入力枠を用いない機種
がある。この装置は、入力できる文字を仮名および英数
字に制限しており、漢字を入力する場合には、仮名を記
入した後、漢字に変換（例えば仮名漢字変換）するよう
になっている。

【０００４】

【発明が解決しようとする課題】しかしながら、上記の
手書文字認識装置では、少なくとも自分自身の名前や簡
単な漢字等を入力したいと思っても仮名を記入して漢字
に変換するという手間を踏まなければならず、文字入力
における操作が増加してしまうため操作性が悪い。さら
に、文字自体の誤認識だけでなく、「い」のように文字
の中に空白があるものは、空白で分離されることにより
「い」を２文字からなると誤認識することがある。誤認
識した文字を修正する場合には、誤認識した文字を削除
してから書き直すという作業を行うようになっている
が、このような作業は、操作数の増加および操作性の悪
化を招来することになっている。

【０００５】そこで、ユーザに対する入力時の負担を軽
減させるため、文字入力枠を用いずに認識対象文字を漢
字にまで拡大し、分離した文字も含めて修正できる手書
文字認識装置が望まれている。ところが、文字入力枠を
用いずに認識対象文字を漢字にまで拡大しようとする
と、文字の切り出し誤りが増加するという問題が生じる
ことになる。これは、漢字には、偏と旁のように文字内
に空白のある文字が数多く存在しており、偏および旁の
それぞれがそれ自身で文字として成立するもの（例えば
「仁」が「イ」と「二」、「認」が「言」と「忍」、
「動」が「重」と「力」）が存在するためである。

【０００６】切り出し誤りを生じている文字や文字列を
修正するには、誤認識文字を削除し、書き直すという作
業を行わねばならず、特に、画数の多い文字では、ペン
を操作する回数が多いため、ユーザの負担を増大させる
ことになる。一方、画数の少ない文字でも切り出し精度
が低ければ、書き直すための操作が増加するため、シス
テム全体の操作性を低下させることになる。また、この
削除および書き直しの作業は、切り出し誤り以外の原因
で誤認識した文字や文字列を修正する場合も同様に行わ
ねばならないものである。

【０００７】以上のことから考えると、文字または文字
列の修正がシステムの操作性に大きな影響を与えるた
め、容易に修正できる方式が必要になっている。従っ
て、本発明は、システムの操作性に関わる誤り修正を容
易に行うことができる手書文字認識装置を提供すること
を目的としている。

【０００８】

【課題を解決するための手段】請求項１の発明の手書文
字認識装置は、上記課題を解決するために、筆記手段に
より入力された手書文字情報を文字として認識できるよ
うに切り出して区分化し、各区分の手書文字情報の文字
特徴から候補文字を認識し、これらの候補文字を用いて
作成された手書文字情報に対応する文字列を表示するも
のであり、下記の特徴を有している。

【０００９】即ち、手書文字認識装置は、上記文字列の
表示領域が筆記手段により押圧されたときに、手書文字
情報を表示させることによって、手書文字情報の区分を
筆記手段により指定させ、この区分の手書文字情報の文
字特徴から候補文字を再認識させる第１修正手段を有し
ていることを特徴としている。

【００１０】また、請求項２および３の発明の手書文字
認識装置は、上記課題を解決するために、筆記手段によ
り入力された手書文字情報を文字として認識できるよう
に切り出して区分化し、各区分の手書文字情報の文字特
徴から候補文字を認識し、最も高い確度で認識された候
補文字を用いて作成された手書文字情報に対応する文字
列を表示するものであり、下記の特徴を有している。

【００１１】即ち、請求項２の手書文字認識装置は、文
字列の表示領域が筆記手段により押圧されたときに、候
補文字を用いて作成された手書文字情報に対応する候補
文字列を表示し、筆記情報により指定された候補文字列
を上記文字列に代えて表示する第２修正手段を有してい
ることを特徴としている。

【００１２】さらに、請求項３の手書文字認識装置は、
文字列の表示領域が筆記手段により押圧されたときに、
候補文字を用いて作成された手書文字情報に対応する候
補文字列を表示し、筆記情報により指定された候補文字
列を上記文字列に代えて表示する第２修正手段と、候補
文字列の表示領域が筆記手段により押圧されたときに、
この表示領域に存在する候補文字に対応する修正用候補
文字を表示し、筆記手段により指定された修正用候補文
字を上記候補文字に代えて表示する第３修正手段とを有
していることを特徴としている。

【００１３】

【作用】請求項１の構成によれば、手書文字情報の切り
出し誤りによる誤認識が生じた場合に、筆記手段により
文字列の表示領域を押圧して手書文字情報を表示させ、
この表示された手書文字情報に対して筆記手段により区
分を指定し、指定した区分となるように手書文字情報を
切り出させて再認識させることができる。従って、切り
出し誤りを修正する際の作業量が僅かであるため、切り
出し誤りをユーザが容易に修正できることになり、結果
として誤り修正を容易に行うことが可能になっている。

【００１４】また、請求項２の構成によれば、筆記手段
により文字列の表示領域を押圧して候補文字列を表示さ
せ、筆記情報により指定された候補文字列を文字列に代
えて表示するようになっているため、文字列を修正する
際の作業量が僅かとなり、結果として誤り修正を容易に
行うことが可能になっている。

【００１５】さらに、請求項３の構成によれば、請求項
２の構成による効果に加えて、候補文字列の各候補文字
を修正することができるため、候補文字列を表示させる
数量を減少させることが可能になり、正しい候補文字列
を見つけ出す際の負担が軽減され、結果として誤り修正
を容易に行うことが可能になっている。

【００１６】

【実施例】

〔実施例１〕本発明の一実施例を図１ないし図１４に基
づいて説明すれば、以下の通りである。

【００１７】本実施例に係る手書文字認識装置は、ペン
等の筆記手段と入力装置を用いて入力される筆記情報
（座標値、入力面にペンがタッチしたか否かを示すペン
のオン・オフ情報）に基づいて文字を認識して表示する
ものであり、図１に示すように、筆記情報を検出するタ
ブレット１と筆記情報および認識結果等を表示する表示
部３とを一体化して備えている。

【００１８】また、手書文字認識装置は、筆記情報を１
文字毎に切り分ける文字切り出し部４と、基準文字特徴
と文字コードとを対応付けて記憶している文字認識辞書
部９と、切り分けられた１文字毎の筆記情報を認識に必
要な文字特徴に変換し、この文字特徴と文字認識辞書部
９の各基準文字特徴とを照合することにより文字を認識
する文字認識部５と、文字認識部５で得られた認識結果
と、この認識結果に対応する筆記情報を記憶する文字認
識結果バッファ７と、入力された全ての筆記情報の文字
を認識した後、文字列を構成する文字列処理部６と、文
字列を記憶する文字列結果バッファ８と、第１文字認識
ルーチンおよび第１切り出し修正ルーチンを実行する第
１修正手段および第２修正手段としての制御部２とを有
している。

【００１９】上記の構成において、制御部２が第１文字
認識ルーチンおよび第１切り出し修正ルーチンを実行し
た場合について説明する。

【００２０】先ず、ユーザがペン１０でタブレット１上
に文字を記入していくと、この文字に関する筆記情報を
タブレット１が検出して制御部２に転送することにな
る。筆記情報を受け取った制御部２は、図２の第１文字
認識ルーチンを実行することになり、筆記情報を表示部
３と文字切り出し部４とに同時に転送し、表示部３に対
してユーザが記入している手書パターン（手書文字情
報）を筆記情報を基にして表示させることになる。一
方、文字切り出し部４に対しては、制御部２から受け取
った筆記情報を複数のグループ（以下、セグメントと称
する）に分割させ、各セグメントに区分された筆記情報
と切り出し情報とを文字認識部５に転送させることにな
る（Ｓ１）。

【００２１】文字認識部５に入力されたセグメントは、
認識に必要な文字特徴の抽出に使用されることになり
（Ｓ２）、抽出された文字特徴は、文字認識辞書部９の
各文字の基準文字特徴と照合されることになる（Ｓ
３）。そして、確度の高い順（例えば、類似度の高い
順）に認識結果が求められ、認識結果（文字コードと認
識スコア）に対応するセグメントの筆記情報と切り出し
情報とが文字認識結果バッファ７に記憶されることにな
る（Ｓ４）。

【００２２】全てのセグメントについての文字認識が完
了すると、処理の終了が文字認識部５から制御部２に通
知されることになる。制御部２は、文字認識処理が終了
したことを知ることによって、文字列処理部６に対して
認識文字列の出力を要求することになり、文字認識結果
バッファ７から文字コードを読み込ませ、文字の組み合
わせを求めさせることにより文字列を作成させ、これら
の文字列を文字列結果バッファ８に記憶させることにな
る。そして、文字列結果バッファ８から最も確度の高い
文字列が文字列処理部６により読み出されて制御部２に
転送されることによって、制御部２は、転送された文字
列を保持しながら表示部３に転送し、表示部３に対して
それまで表示されていた手書パターンの代わりに文字列
を表示させることになる（Ｓ５）。

【００２３】上記の第１文字認識ルーチンの実行により
文字列が表示部３に表示されると、続いて、図３の第１
切り出し修正ルーチンが実行されることになる。そし
て、文字列に誤りが存在することがユーザにより確認さ
れ、誤りを修正するために文字列（文字列を表示した領
域）がペン１０により押圧されて指示されると、この筆
記情報がタブレット１により検出されて制御部２に転送
されることになる。この際、制御部２は、第１切り出し
修正ルーチンを実行することによって、筆記情報が文字
列を指示したものであるか否かを判定しており（Ｓ１
１）、指示していないと判定した場合には、文字列の修
正を行わないとして第１切り出し修正ルーチンを終了す
ることになる（Ｓ１２）。

【００２４】一方、指示していると判定した場合には、
Ｓ１３を実行することになり、転送された筆記情報から
指示されたペン１０によるポインティング位置を求め、
このポインティング位置と指示された文字列とを文字列
処理部６に通知し、他の組み合わせの文字列である候補
文字列を要求することになる。これにより、文字列処理
部６は、文字列結果バッファ８から候補文字列を読み込
み、制御部２に転送することになる。そして、制御部２
は、受け取った候補文字列を表示部３に転送し、この候
補文字列を表示中の文字列の近傍に手書パターン表示ボ
タンと共に表示させることになる（Ｓ１３）。

【００２５】次に、表示された候補文字列が指示された
か否かが判定されることになる（Ｓ１４）。候補文字列
中に正解の文字列が存在し、この文字列がペン１０によ
りタッチされて指示された場合には、指示された候補文
字列が表示部３に表示された後（Ｓ１５）、Ｓ１１が再
実行され、新たに表示された文字列を修正するか否かが
判定されることになる。

【００２６】一方、正解の文字列が存在しなければ、手
書パターンを表示させるように設定された所定の領域が
ペン１０により指示され、この筆記情報がタブレット１
により検出されて制御部２に転送されることになる。制
御部２は、転送された筆記情報から指示されたペン１０
によるポインティング位置を求め、文字列を文字列処理
部６に転送し、各文字の筆記情報と、文字列に対応する
切り出し情報とを要求することになる。文字列処理部６
は、各文字の筆記情報と文字列に対応する切り出し情報
とを文字認識結果バッファ７から読み込み、制御部２に
転送することになる。そして、制御部２は、各文字の筆
記情報と切り出し情報とを保持し、表示部３に各文字毎
に筆記情報を転送することによって、表示部３に文字毎
の手書パターンを筆記情報を基にして表示させることに
なる（Ｓ１７）。

【００２７】手書パターンが表示部に表示され、ユーザ
がペン１０で正しい切り出し位置を指示して切り出しの
区分を指定すると、この筆記情報がタブレット１により
検出されて制御部２に転送されることになる（Ｓ１
８）。そして、制御部２は、転送された筆記情報を基
に、保持している切り出し情報を修正することになる。

【００２８】即ち、制御部２が筆記情報と修正した切り
出し情報とを文字切り出し部４に転送し、切り出し情報
に従ってセグメントに分割することを指示すると、文字
切り出し部４は、修正後の切り出し情報を利用して筆記
情報をセグメントに分割し、各セグメントの筆記情報を
文字認識部５に転送することになる。

【００２９】文字認識部５は、セグメントの筆記情報を
基に、認識に必要な文字特徴を抽出して文字認識辞書部
９の各文字の基準文字特徴と照合を行い、確度の高い順
（例えば、類似度の高い順）に認識結果を求めることに
なる。この後、文字認識部５は、全てのセグメントにつ
いて文字認識が終了したことを制御部２に通知すること
になり、制御部２は、文字列処理部６に認識文字列の出
力を要求することになる。これにより、文字コードが文
字認識結果バッファ７から文字列処理部６に読み込まれ
ることによって、文字の組み合わせが求められ、この組
み合わせが文字列結果バッファ８に記憶されることにな
る。そして、最も確度の高い文字列が文字列結果バッフ
ァ８から文字列処理部６に読み出され、制御部２に転送
されることによって、制御部２は、今まで表示部３に表
示されていた手書パターン等の情報の代わりに、最も確
度の高い文字列を表示させることになる（Ｓ１９）。

【００３０】この後、再認識を行うか否かが判定される
ことになり（Ｓ２０）、再認識を行う場合には、上述の
第１文字認識ルーチンが実行されることによって、Ｓ１
９において表示された文字列に代わって新たな文字列が
表示された後（Ｓ２１）、Ｓ１１が再実行されることに
なる。一方、再認識を行わない場合には、Ｓ１９におい
て表示された文字列の切り出し位置の修正を継続するか
否かが判定され（Ｓ２２）、修正を継続する場合には、
Ｓ１８が再実行されることになる一方、修正を継続しな
い場合には、Ｓ１１が再実行されることになる。

【００３１】このように、本実施例の手書文字認識装置
は、ペン１０やキー等の筆記手段により入力された手書
文字情報を文字として認識できるように切り出して区分
化し、各区分の手書文字情報の文字特徴から候補文字を
認識し、これらの候補文字を用いて作成された手書文字
情報に対応する文字列を表示するものである。そして、
文字列の表示領域が筆記手段により押圧されたときに、
手書文字情報を表示させることによって、手書文字情報
の区分を筆記手段により指定させ、この区分の手書文字
情報の文字特徴から候補文字を再認識させるようになっ
ている。

【００３２】これにより、手書文字情報の切り出し誤り
による誤認識が生じた場合に、筆記手段により文字列の
表示領域を押圧して手書文字情報を表示させ、この表示
された手書文字情報に対して筆記手段により区分を指定
し、指定した区分となるように手書文字情報を切り出さ
せて再認識させることができる。従って、切り出し誤り
を修正する際の作業量が僅かであるため、切り出し誤り
をユーザが容易に修正できることになり、結果として誤
り修正を容易に行うことが可能になっている。

【００３３】また、本実施例の手書文字認識装置は、文
字列の表示領域が筆記手段により押圧されたときに、候
補文字を用いて作成された手書文字情報に対応する候補
文字列を表示し、筆記情報により指定された候補文字列
を上記文字列に代えて表示するようになっている。

【００３４】これにより、筆記手段により文字列の表示
領域を押圧して候補文字列を表示させ、筆記情報により
指定された候補文字列を文字列に代えて表示するように
なっているため、文字列を修正する際の作業量が僅かと
なり、結果として誤り修正を容易に行うことが可能にな
っている。

【００３５】次に、上記の動作を具合的に説明する。

【００３６】先ず、ペン１０により「文字を切り出す」
が入力されたとすると、タブレット１は、「文」の第１
ストロークから順に筆記情報を検出し、制御部２に転送
することになる。尚、ストロークとは、オフ状態のタブ
レット１がペン１０によりオン状態とされてからオフ状
態なるまでの区間の曲線のことである。制御部２は、タ
ブレット１から受け取った筆記情報を保持すると同時
に、順に表示部３に転送することによって、図４に示す
ように、筆記した軌跡を表示部３に表示させることにな
る。この動作は、ユーザがタブレット１に文字を筆記し
ている期間において繰り返されることになる。

【００３７】制御部２が全ストロークの筆記情報を受け
取ると、保持していた筆記情報が文字切り出し部４に転
送されることになる。文字切り出し部４は、筆記情報か
らストロークの重なり、ストローク間の空白、セグメン
トの形状等を基にしてセグメントへの分割を行うことに
なる。即ち、図４に示すように、「切」の中に充分な空
白が存在する場合、文字切り出し部４は、図５に示すよ
うに、「文（２−１）」、「字（２−２）」、「を（２
−３）」、「七（２−４）」、「刀（２−５）」、「り
（２−６）」、「出（２−７）」、「す（２−８）」の
８個のセグメントに分割することによって、表１に示す
ように、各セグメントの筆記情報と切り出し情報とを得
ることになる。

【００３８】

【表１】

【００３９】ここで、筆記情報Ｓｉは、第ｉストローク
の座標点列ｐｉ₁，ｐｉ₂，…，ｐｉ_lであり、例えば
「文」の筆記情報Ｓｉは、下記のように示されることに
なる。

【００４０】Ｓ１＝ p11,p12,p13,p14,p15 Ｓ２＝ p21,p22,p23,p24,p25,p26,p27 Ｓ３＝ p31,p32,p33,p34,p35,p36,p37,p38,p39 Ｓ４＝ p41,p42,p43,p44,p45,p46,p47,p48,p49 次に、文字切り出し部４は、８個のセグメントの筆記情
報と切り出し情報とを文字認識部５に転送することにな
る。文字認識部５においては、図１０および図１１に示
すように、「文（２−１）」の筆記情報Ｓ１，Ｓ２，Ｓ
３，Ｓ４を認識に必要な文字特徴Ｓ'1，Ｓ'2，Ｓ'3，
Ｓ'4（Ｓ'i＝ｐ'i₁，ｐ'i₂，…，ｐ'i_k）に変換し、
文字認識辞書部９の各文字の基準文字特徴と照合を行
い、認識結果（文字コードと認識スコア）を得ることに
なる。

【００４１】上記の文字認識部５は、得られた認識結果
と、この認識結果に対応する筆記情報とを文字認識結果
バッファ７に記憶させることになる。この後、同様に、
表２に示すように、残りのセグメントに対して認識結果
を求め、これらの認識結果を文字認識結果バッファ７に
記憶させることになる。

【００４２】

【表２】

【００４３】文字列処理部６は、全セグメントについて
認識を行い、認識が終わると、処理の終了を制御部２に
通知することになる。処理の終了を知った制御部２は、
文字列処理部６に認識文字列を要求することになり、文
字列処理部６は、文字認識結果バッファ７から各文字コ
ードと認識スコアを読み込み、文字の組み合わせを求め
ることになる。そして、図１２に示すように、確度の高
い順に並び変え、文字列結果バッファ８に記憶させるこ
とになる。尚、本実施例においては、各文字列に対して
文字毎の認識スコアの総和を求め、総和の小さなものほ
ど確度が高いとして順位付けを行っている。例えば「文
字を七刀り出す」と「文字を切り出す」とは、表３およ
び表４に示すようになり、「文字を七刀り出す」のほう
が高い確度となる。

【００４４】

【表３】

【００４５】

【表４】

【００４６】文字列処理部６は、確度の一番高い文字列
「文字を七刀り出す」を制御部２に転送することにな
り、制御部２は、保持している筆記情報を基に転送され
た文字列の位置Ｐｓを計算することになる。

【００４７】Ｐｓ＝〔Ｐｓ(x) _min，Ｐｓ(y) _min，Ｐ
ｓ(x) _max，Ｐｓ(y) _max〕Ｐｓ(x) _min＝ｍｉｎ（ｐ１₁(x)，…, ｐ１_l(x) ，ｐ
２₁(x)，…, ｐ２_m(x) ，…, ｐｎ_n(x)) Ｐｓ(y) _min＝ｍｉｎ（ｐ１₁(y)，…, ｐ１_l(y) ，ｐ
２₁(y)，…, ｐ２_m(y) ，…, ｐｎ_n(y)) Ｐｓ(x) _max＝ｍａｘ（ｐ１₁(x)，…, ｐ１_l(x) ，ｐ
２₁(x)，…, ｐ２_m(x) ，…, ｐｎ_n(x)) Ｐｓ(y) _max＝ｍａｘ（ｐ１₁(y)，…, ｐ１_l(y) ，ｐ
２₁(y)，…, ｐ２_m(y) ，…, ｐｎ_n(y)) 計算された文字列の位置と文字列とは、制御部２に保持
されることになる。そして、制御部２は、文字列を表示
部３に転送し、図６に示すように、手書パターンの代わ
りに「文字を七刀り出す」を表示させることになる。

【００４８】上記の認識結果は、筆記した文字列が「文
字を切り出す」であるため、「切」が誤って２文字に分
割して認識されたものである。従って、ユーザは、この
誤りを修正するため、以下の操作を行うことになる。

【００４９】先ず、ユーザは「文字を七刀り出す」をペ
ン１０でタッチすることになる。タブレット１は、タッ
チされた筆記情報（位置）を制御部２に通知することに
なる。制御部２は、筆記情報が十分に小さなデータであ
ることから、ユーザがポインティングしたことを検知す
ることになる。そして、制御部２は、保持している文字
列「文字を七刀り出す」の位置Ｐｓとポインティング位
置Ｐｐとを比較し、Ｐｓ(x) _min≦Ｐｐ(x) ≦Ｐｓ(x) _max 且つＰｓ(y) _max≦Ｐｐ(y) ≦Ｐｓ(y) _max であれば、ユーザがポインティングした対象が、「文字
を七刀り出す」の文字列であると判断し、文字列処理部
６に対して「文字を七刀り出す」に対応する文字列の組
み合わせと、各文字毎の筆記情報および切り出し情報と
を要求することになる。

【００５０】文字列処理部６は、文字列結果バッファ８
から文字列の組み合わせを読み込むと共に、文字認識結
果バッファ７から切り出し情報と文字毎の筆記情報とを
読み込み、これらの情報を制御部２に転送することにな
る。制御部２は、各文字の切り出し情報と筆記情報とを
保持した後、文字列の組み合わせを表示部３に転送し、
これらの文字列と同時に手書パターン表示ボタンを画面
上に表示するように要求することになる。従って、表示
部３は、図７に示すように、文字列の組み合わせ画面３
ａと、手書パターン表示ボタン画面３ｂとを表示するこ
とになる。尚、上記の手書パターン表示ボタン画面３ｂ
を表示する代わりに、手書パターン表示ボタン画面３ｂ
と同等の機能を有するスイッチが装置に設けられていて
も良い。

【００５１】正しい切り出し位置を指定するため、手書
パターン表示ボタン画面３ｂがペン１０でタッチされ、
タッチされたポインティング位置がタブレット１から制
御部２に通知されると、制御部２は、ポインティング位
置からユーザが手書パターン表示ボタン画面３ｂをタッ
チしたと判断することになる。そして、文字毎の筆記情
報を表示部３に転送し、手書パターンを表示するように
表示部３に要求することによって、図８に示すように、
文字列、組み合わせ画面３ａおよび手書パターン表示ボ
タン画面３ｂに代わって、各文字の手書パターンと再認
識ボタン画面３ｃとを表示させることになる。

【００５２】この後、「七」と「刀」とが１個のセグメ
ントとなるのが正しいため、ペン１０により「七」と
「刀」の手書パターンが下線を引く等により選択される
と、このときの筆記情報がタブレット１により検出され
て制御部２に転送されることになる。そして、制御部２
は、筆記情報を基にして最大、最小の座標Ｐｃ１
_max(x) ，Ｐｃ１_min(x) を求めて保持することにな
る。一方、ユーザが再認識ボタン画面３ｃをペン１０で
タッチすると、タッチされたポインティング位置がタブ
レット１から制御部２に通知されることになり、制御部
２は、下記のようにポインティング位置から再認識処理
を実行することになる。

【００５３】先ず、制御部２は、座標Ｐｃ１_max(x) ，
Ｐｃ１_min(x) 間に入るストロークを１個のセグメント
であると判断し、保持している切り出し情報を修正する
ことになる。これにより、本実施例の切り出し情報は、
表５に示すようになる。

【００５４】

【表５】

【００５５】そして、修正前後の切り出し情報と、筆記
情報とを文字切り出し部４に転送し、修正後の切り出し
情報を使用してセグメントに分割することを要求する。
これにより、文字切り出し部４は、修正後の切り出し情
報を基にして表６に示すように７個のセグメントに分割
することになる。

【００５６】

【表６】

【００５７】この後、修正前後の切り出し情報と、各セ
グメントに対応した筆記情報とが文字認識部５に転送さ
れることになり、文字認識部５は、図１４に示すよう
に、修正前後の切り出し情報を比較することになる。そ
して、切り出し修正後の４番目のセグメント以外が修正
前のセグメントと１対１に一致するため、切り出し修正
後の４番目のセグメントが再認識する対象であると判断
し、特徴抽出、文字照合を実行することによって、表７
に示す認識結果を得ることになる。

【００５８】

【表７】

【００５９】この後、表７に示す認識結果に一致するよ
うに、文字認識部５は、文字認識結果バッファ７に記憶
している４番目および５番目のセグメントの認識結果を
削除し、代わりに修正後の４番目のセグメントの認識結
果と、この認識結果に対応する筆記情報、切り出し情報
を記憶させることになる。文字認識部５は、認識対象と
なるセグメントの認識が終了すると、処理の終了を制御
部２に通知することになる。そして、制御部２は、図１
３に示すように、文字列処理部スコアを読み込み、文字
の組み合わせを求め、確度の高い順に並び変えることに
なる。

【００６０】文字列処理部６は、文字認識結果バッファ
７からの確度の一番高い文字列「文字を切り出す」を読
み込み、制御部２に転送することになる。そして、制御
部２は、文字列を表示部３に転送し、図６に示すよう
に、表示部３に「文字を切り出す」を表示させることに
なる。

【００６１】〔実施例２〕本発明の他の実施例を図１５
ないし図２５に基づいて説明すれば、以下の通りであ
る。

【００６２】本実施例に係る手書文字認識装置は、図１
５に示すように、筆記情報を検出するタブレット１１と
筆記情報および認識結果等を表示する表示部１３とを一
体化して備えていると共に、筆記情報を１文字または複
数文字に分割する切り出し情報を求める文字切り出し部
１４と、基準文字特徴と文字コードとを対応付けて記憶
している文字認識辞書部１９と、切り出し情報を基にし
て１文字毎の筆記情報を認識に必要な文字特徴に変換
し、この文字特徴と文字認識辞書部１９の各基準文字特
徴とを照合することにより文字を認識する文字認識部１
５と、文字認識部１５で得られた認識結果と、切り出し
情報を記憶する文字認識結果バッファ１７と、文字認識
結果バッファ１７に記憶している切り出し情報を基にし
て切り出し候補を構成し、各切り出し候補に対する文字
列を作成する文字列処理部１６と、切り出し候補とこの
切り出し候補に対応する文字列を記憶する文字列結果バ
ッファ１８と、第２文字認識ルーチンおよび第２切り出
し修正ルーチンを実行する第２修正手段および第３修正
手段としての制御部１２とを有している。

【００６３】上記の構成において、制御部１２が第２文
字認識ルーチンおよび第２切り出し修正ルーチンを実行
した場合について説明する。

【００６４】文字がタブレット１１上にペン１０で記入
されていくと、タブレット１１により検出された筆記情
報が制御部１２に出力されることになる。この筆記情報
を受け取った制御部２は、図１６の第１文字認識ルーチ
ンを実行することになり、筆記情報を文字切り出し部１
４に出力すると同時に表示部１３に出力し、表示部１３
に筆記情報を表示させることになる。一方、文字切り出
し部１４に対しては、筆記情報を基にして１個または複
数個の文字に分割する切り出し情報を求めさせ、この切
り出し情報と筆記情報とを文字認識部１５に出力させる
ことになる（Ｓ２１）。

【００６５】文字認識部１５に入力された筆記情報は、
認識に必要な文字特徴に変換され（Ｓ２２）、文字認識
辞書部１９の各文字の基準文字特徴と照合されることに
よって、認識結果（文字コードと認識スコア）が求めら
れることになり（Ｓ２３）、認識結果が文字認識結果バ
ッファ１７に確度の高い順に切り出し情報と対応付けて
記憶されることになる。切り出された全ての文字につい
て認識が終了すると、処理の終了が文字認識部１５から
制御部１２に通知されることになり、制御部１２は、文
字列処理部１６に認識文字列の出力を要求することにな
る。

【００６６】これにより、文字列処理部１６は、文字認
識結果バッファ１７から切り出し情報を読み込み、切り
出しの組み合わせを求め（Ｓ２４）、この組み合わせを
基にして作成した文字列を確度の高い順に候補文字列と
して文字列結果バッファ１８に記憶させることになる。
そして、文字列結果バッファ１８に記憶させた確度の最
も高い候補文字列が制御部１２に出力されることによっ
て、制御部１２は、文字列を表示部１３に表示させるこ
とになる（Ｓ２５）。

【００６７】上記の第２文字認識ルーチンの実行により
文字列が表示部３に表示されると、続いて、図１７の第
２切り出し修正ルーチンが実行されることになる。そし
て、文字列に誤りが存在することがユーザにより確認さ
れ、誤りを修正するために文字列がペン１０でタッチさ
れると、このペン１０によるポインティング位置を示す
筆記情報がタブレット１１により検出されて制御部１２
に転送されることになる。この際、制御部１２は、第２
切り出し修正ルーチンを実行することによって、筆記情
報が文字列を指示したものであるか否かをポインティン
グ位置を基にして判定しており（Ｓ３１）、指示してい
ないと判定した場合には、文字列の修正を行わないとし
て第２切り出し修正ルーチンを終了することになる（Ｓ
３２）。

【００６８】一方、指示していると判定した場合には、
Ｓ３３を実行することになり、制御部１２は、筆記情報
からペン１０により指示されたポインティング位置を求
め、位置情報として文字列処理部１６に出力し、対応す
る文字列の候補を要求することになる。これにより、文
字列処理部１６は、位置情報と文字列結果バッファ１８
に記憶している各切り出し情報とを比較し、対応する文
字列を検索し、検索した文字列の候補文字列を制御部１
２に出力することになり、制御部１２は、表示部１３に
候補文字列を表示させることになる（Ｓ３３）。

【００６９】次に、表示された候補文字列が指示された
か否かが判定されることになり（Ｓ３４）、候補文字列
以外の領域がペン１０でタッチされた場合には、候補文
字列が消去された後（Ｓ３５）、選択されている候補文
字列が新たな文字列として表示部１３に表示されること
になる（Ｓ３６）。一方、候補文字列の中に正解あるい
は正解に近い文字列が存在し、この文字列を構成する文
字がペン１０でタッチされると、タッチされたポインテ
ィング位置を示す筆記情報がタブレット１１から制御部
１２に出力されることになる。制御部１２は、筆記情報
からポインティング位置を求め、このポインティング位
置からユーザが指示した文字列および文字を検出し、文
字の候補を文字列処理部１６に要求することになる。こ
れにより、文字列処理部１６は、文字列を構成する文字
の候補を文字認識結果バッファ１７から読み込み、制御
部１２に出力することになり、制御部１２は、修正用候
補文字として表示部１３に表示させることになる（Ｓ３
７）。

【００７０】次に、表示された修正用候補文字が指示さ
れたか否かが判定されることになり（Ｓ３８）、修正用
候補文字以外の領域がペン１０でタッチされた場合に
は、Ｓ３４が再実行されることになる。一方、正解文字
となる修正用候補文字をユーザがペン１０でタッチした
場合には、このポインティング位置を示す筆記情報がタ
ブレット１１から制御部１２に出力されることになる。
制御部１２は、筆記情報からポインティング位置を求
め、対応する修正用候補文字を検出し、ユーザが選択し
た文字を修正用候補文字に置き換えて表示部１３に表示
させた後（Ｓ３９）、Ｓ３８を再実行することになる。

【００７１】このように、本実施例の手書文字認識装置
は、筆記手段により入力された手書文字情報を文字とし
て認識できるように切り出して区分化し、各区分の手書
文字情報の文字特徴から候補文字を認識し、最も高い確
度で認識された候補文字を用いて作成された手書文字情
報に対応する文字列を表示するものである。そして、文
字列の表示領域が筆記手段により押圧されたときに、候
補文字を用いて作成された手書文字情報に対応する候補
文字列を表示し、筆記情報により指定された候補文字列
を上記文字列に代えて表示する第２修正手段と、候補文
字列の表示領域が筆記手段により押圧されたときに、こ
の表示領域に存在する候補文字に対応する修正用候補文
字を表示し、筆記手段により指定された修正用候補文字
を上記候補文字に代えて表示する第３修正手段とを有し
ている。

【００７２】これにより、候補文字列の各候補文字を修
正することができるため、候補文字列を表示させる数量
を減少させることが可能になり、正しい候補文字列を見
つけ出す際の負担が軽減され、結果として誤り修正を容
易に行うことが可能になっている。

【００７３】次に、上記の動作を具合的に説明する。

【００７４】先ず、図１８に示すように、ペン１０によ
り「手書き文字認識」が入力されたとする。タブレット
１１は、筆記情報を検出して制御部１２に出力し、制御
部１２は、表示部１３にペン１０の軌跡を表示させるこ
とになる。同時に、制御部１２から筆記情報が文字切り
出し部１４に出力されることになる。

【００７５】文字切り出し部１４は、図２４に示すよう
に、筆記情報からストロークの重なり、ストローク間の
空白を基にして全ストロークをグループ（以下、セグメ
ントと称する）に分割し、外接矩形座標である切り出し
情報を得ることになる。即ち、「手（２−１）」、「書
（２−２）」、「き（２−３）」、「文（２−４）」、
「字（２−５）」、「認（２−６）」、「識（２−
７）」の７個のセグメントの切り出し情報と、「認（２
−６）」が「言（２−８）」、「忍（２−９）」の２個
に分割する可能性があるとして、これらの２個のセグメ
ントを加えた合計９個のセグメントの切り出し情報とを
表８に示すように得ることになる。

【００７６】

【表８】

【００７７】この後、文字切り出し部１４は、上記の９
個のセグメントの切り出し情報を文字認識部１５に出力
することになる。文字認識部１５は、図２５に示すよう
に、「手（２−１）」の筆記情報を認識に必要な文字特
徴に変換し、文字認識辞書部１９の各文字の基準文字特
徴と照合を行うことにより文字認識を行い、表９に示す
認識結果（候補文字）を得ることになる。

【００７８】

【表９】

【００７９】文字認識部１５は、上記の認識結果とこの
認識結果に対応する切り出し情報とを文字認識結果バッ
ファ１７に記憶させることになる。そして、文字列処理
部１６は、文字認識結果バッファ１７から切り出し情報
を読み込み、切り出しの組み合わせを下記のように求め
ることになる。

【００８０】即ち、文字切り出し情報の各Ｍｉｎ、Ｍａ
ｘの関係から２−１〜２−９のＸ方向の位置関係は、
（２−１）＜（２−２）＜（２−３）＜（２−４）＜
（２−５）＜（２−６）〔（２−８）＜（２−９）〕＜
（２−７）である。従って、１．（２−１）、（２−２）、（２−３）、（２−
４）、（２−５）、（２−６）、（２−７）２．（２−１）、（２−２）、（２−３）、（２−
４）、（２−５）、２−８）、（２−９）、（２−７）の２通りの切り出しの組み合わせが求められることにな
る。

【００８１】次に、文字列処理部１６は、表１０に示す
ように、切り出しの組み合わせと、各組み合わせの候補
文字列と、スコアを作成することになる。

【００８２】

【表１０】

【００８３】尚、スコアとは、文字認識で得られた候補
文字のスコアの総和のことであり、「牛書き文字認識」
の場合には、１０＋２５＋４５＋２０＋３５＋８０＋７
５＝２９０となる。また、「牛書き文字言忍識」の場合
には、１０＋２５＋４５＋２０＋３５＋１０＋１５＋７
５＝２４０となる。

【００８４】本実施例では、スコアの小さな候補文字列
ほど確度が高いとしているため、スコアの小さな「牛書
き文字言忍識」および「牛書き文字認識」の順に、文字
列結果バッファ１８に記憶させることになる。そして、
「牛書き文字言忍識」が制御部１２に通知され、図１９
に示すように、表示部１３に表示されることになる。

【００８５】表示された文字列は、誤認識をしているた
め、ユーザが「牛書き文字言忍識」をペン１０でタッチ
することになる。タブレット１１は、ペン１０によるポ
インティング位置を検出し、このポインティング位置を
制御部１２に通知することになる。制御部１２は、ポイ
ンティング位置と文字列の表示位置とを比較することに
よって、ユーザの指示した文字列が「牛書き文字言忍
識」であると認識し、文字列処理部１６に対してこの文
字列の候補を要求することになる。これにより、文字列
処理部１６は、文字列結果バッファ１８に記憶されてい
る他の候補文字列と組み合わせ情報とを読み込み、制御
部１２に通知することになる。制御部１２は、送られて
きた候補文字列と組み合わせ情報を保持し、図２０に示
すように、「牛書き文字言忍識」の近くに候補文字列を
表示させることになる。

【００８６】ところで、筆記した文字数は、「牛書き文
字認識」の文字数と一致しているが、１文字目が誤認識
しているため、ユーザは、「牛」をペン１０でタッチす
ることになる。タブレット１１は、ペン１０によるポイ
ンティング位置を検出し、このポインティング位置を制
御部１２に通知することになる。制御部１２は、ポイン
ティング位置と文字列の表示位置とを比較することによ
って、ユーザの指示した文字列および文字が「牛書き文
字認識」およびこの文字列中の「牛」であると認識する
と、この文字列に対応する組み合わせ情報を文字列処理
部１６に通知し、１文字目の「牛」に対応する候補文字
を要求することになる。これにより、文字列処理部１６
は、制御部１２から受け取った組み合わせ情報を基にし
て１文字目の「牛」に対応する文字の候補を文字認識結
果バッファ１７から読み込んで制御部１２に通知するこ
とになり、制御部１２は、図２１に示すように、候補文
字を修正用候補文字として「牛書き文字認識」の近くに
表示させることになる。

【００８７】次に、ユーザは、修正用候補文字の「手」
をペン１０でタッチすることになる。タブレット１１
は、ペン１０によるポインティング位置を検出し、この
ポインティング位置を制御部１２に通知することにな
る。制御部１２は、ポインティング位置と候補文字の表
示位置とを比較することによって、ユーザが指示した文
字が「手」であることを認識し、図２２に示すように、
候補文字の表示を消去して修正用候補文字を表示させ、
候補文字列の表示を変更することになる。そして、ユー
ザが、候補文字列以外の場所をペン１０でタッチする
と、タブレット１１は、このポインティング位置を検出
して制御部１２に通知することになる。制御部１２は、
ポインティング位置と候補文字列の表示位置を比較する
ことによって、ユーザが候補文字列以外の位置を指示し
たと認識し、図２３に示すように、表示部１３に正解の
文字列を表示させることになる。

【００８８】

【発明の効果】請求項１の発明の手書文字認識装置は、
以上のように、筆記手段により入力された手書文字情報
を文字として認識できるように切り出して区分化し、各
区分の手書文字情報の文字特徴から候補文字を認識し、
これらの候補文字を用いて作成された手書文字情報に対
応する文字列を表示するものであり、文字列の表示領域
が筆記手段により押圧されたときに、手書文字情報を表
示させることによって、手書文字情報の区分を筆記手段
により指定させ、この区分の手書文字情報の文字特徴か
ら候補文字を再認識させる第１修正手段を有している構
成である。

【００８９】これにより、手書文字情報の切り出し誤り
による誤認識が生じた場合に、筆記手段により文字列の
表示領域を押圧して手書文字情報を表示させ、この表示
された手書文字情報に対して筆記手段により区分を指定
し、指定した区分となるように手書文字情報を切り出さ
せて再認識させることができる。従って、切り出し誤り
を修正する際の作業量が僅かであるため、切り出し誤り
をユーザが容易に修正できることになり、結果として誤
り修正を容易に行うことが可能であるという効果を奏す
る。

【００９０】請求項２の発明の手書文字認識装置は、以
上のように、筆記手段により入力された手書文字情報を
文字として認識できるように切り出して区分化し、各区
分の手書文字情報の文字特徴から候補文字を認識し、最
も高い確度で認識された候補文字を用いて作成された手
書文字情報に対応する文字列を表示するものであり、文
字列の表示領域が筆記手段により押圧されたときに、候
補文字を用いて作成された手書文字情報に対応する候補
文字列を表示し、筆記情報により指定された候補文字列
を上記文字列に代えて表示する第２修正手段を有してい
る構成である。

【００９１】これにより、筆記手段により文字列の表示
領域を押圧して候補文字列を表示させ、筆記情報により
指定された候補文字列を文字列に代えて表示するように
なっているため、文字列を修正する際の作業量が僅かと
なり、結果として誤り修正を容易に行うことが可能であ
るという効果を奏する。

【００９２】請求項３の手書文字認識装置は、以上のよ
うに、筆記手段により入力された手書文字情報を文字と
して認識できるように切り出して区分化し、各区分の手
書文字情報の文字特徴から候補文字を認識し、最も高い
確度で認識された候補文字を用いて作成された手書文字
情報に対応する文字列を表示するものであり、文字列の
表示領域が筆記手段により押圧されたときに、候補文字
を用いて作成された手書文字情報に対応する候補文字列
を表示し、筆記情報により指定された候補文字列を上記
文字列に代えて表示する第２修正手段と、候補文字列の
表示領域が筆記手段により押圧されたときに、この表示
領域に存在する候補文字に対応する修正用候補文字を表
示し、筆記手段により指定された修正用候補文字を上記
候補文字に代えて表示する第３修正手段とを有している
構成である。

【００９３】これにより、筆記手段により文字列の表示
領域を押圧して候補文字列を表示させ、筆記情報により
指定された候補文字列を文字列に代えて表示するように
なっているため、文字列を修正する際の作業量が僅かに
なると共に、候補文字列を表示させる数量を減少させる
ことができるため、正しい候補文字列を見つけ出す際の
負担が軽減されることによって、誤り修正を容易に行う
ことが可能であるという効果を奏する。

【図面の簡単な説明】

【図１】本発明の実施例１を示すものであり、手書文字
認識装置のブロック図である。

【図２】第１文字認識ルーチンのフローチャートであ
る。

【図３】第１切り出し修正ルーチンのフローチャートで
ある。

【図４】手書文字情報が表示された状態を示す説明図で
ある。

【図５】セグメントに分割した状態を示す説明図であ
る。

【図６】認識した文字列を表示した状態を示す説明図で
ある。

【図７】候補文字列を表示した状態を示す説明図であ
る。

【図８】切り出し区分を指定した状態を示す説明図であ
る。

【図９】修正後の文字列を表示した状態を示す説明図で
ある。

【図１０】文字入力パターンの説明図である。

【図１１】文字特徴パターンの説明図である。

【図１２】修正前の候補文字列を確度の高い順に並び代
えた状態を示す説明図である。

【図１３】修正後の候補文字列を確度の高い順に並び代
えた状態を示す説明図である。

【図１４】修正前後のセグメント番号の関係を示す説明
図である。

【図１５】本発明の実施例２を示すものであり、手書文
字認識装置のブロック図である。

【図１６】第２文字認識ルーチンのフローチャートであ
る。

【図１７】第２文字修正ルーチンのフローチャートであ
る。

【図１８】セグメントに分割した状態を示す説明図であ
る。

【図１９】認識した文字列を表示した状態を示す説明図
である。

【図２０】候補文字列を表示した状態を示す説明図であ
る。

【図２１】候補文字を表示した状態を示す説明図であ
る。

【図２２】候補文字に置き換えた状態を示す説明図であ
る。

【図２３】修正後の文字列を表示した状態を示す説明図
である。

【図２４】セグメントに分割した状態を示す説明図であ
る。

【図２５】文字特徴パターンの説明図である。

【符号の説明】

１・１１タブレット２・１２制御部（第１修正手段、第２修正手段、第
３修正手段）３・１３表示部３ａ組み合わせ画面３ｂ手書パターン表示ボタン画面３ｃ再認識ボタン画面４・１４文字切り出し部５・１５文字認識部６・１６文字列処理部７・１７文字認識結果バッファ８・１８文字列結果バッファ９・１９文字認識辞書部１０ペン（筆記手段）

Claims

【特許請求の範囲】

【請求項１】筆記手段により入力された手書文字情報を
文字として認識できるように切り出して区分化し、各区
分の手書文字情報の文字特徴から候補文字を認識し、こ
れらの候補文字を用いて作成された手書文字情報に対応
する文字列を表示する手書文字認識装置であって、上記文字列の表示領域が筆記手段により押圧されたとき
に、手書文字情報を表示させることによって、手書文字
情報の区分を筆記手段により指定させ、この区分の手書
文字情報の文字特徴から候補文字を再認識させる第１修
正手段を有していることを特徴とする手書文字認識装
置。
【請求項２】筆記手段により入力された手書文字情報を
文字として認識できるように切り出して区分化し、各区
分の手書文字情報の文字特徴から候補文字を認識し、最
も高い確度で認識された候補文字を用いて作成された手
書文字情報に対応する文字列を表示する手書文字認識装
置であって、上記文字列の表示領域が筆記手段により押圧されたとき
に、候補文字を用いて作成された手書文字情報に対応す
る候補文字列を表示し、筆記情報により指定された候補
文字列を上記文字列に代えて表示する第２修正手段を有
していることを特徴とする手書文字認識装置。
【請求項３】筆記手段により入力された手書文字情報を
文字として認識できるように切り出して区分化し、各区
分の手書文字情報の文字特徴から候補文字を認識し、最
も高い確度で認識された候補文字を用いて作成された手
書文字情報に対応する文字列を表示する手書文字認識装
置であって、上記文字列の表示領域が筆記手段により押圧されたとき
に、候補文字を用いて作成された手書文字情報に対応す
る候補文字列を表示し、筆記情報により指定された候補
文字列を上記文字列に代えて表示する第２修正手段と、候補文字列の表示領域が筆記手段により押圧されたとき
に、この表示領域に存在する候補文字に対応する修正用
候補文字を表示し、筆記手段により指定された修正用候
補文字を上記候補文字に代えて表示する第３修正手段と
を有していることを特徴とする手書文字認識装置。