JPH0744655A

JPH0744655A - 手書き入力表示装置

Info

Publication number: JPH0744655A
Application number: JP5191497A
Authority: JP
Inventors: Kimiyuki Chatani; 公之茶谷
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1993-08-03
Filing date: 1993-08-03
Publication date: 1995-02-14
Also published as: KR100320062B1; KR950006590A

Abstract

(57)【要約】【目的】手書き入力された文字を再入力することな
く、正しく認識させる。【構成】平仮名で「いしい」の文字を５個の画で入力
したとき、５個の画が所定の数の文字セグメンテーショ
ンに区分され、各文字セグメンテーション毎に文字認識
される。本来第１画と同一の文字を構成するものとして
認識されるべき第２画が、第３画とともに１つの文字と
して文字認識されている場合、この第２画と第３画の間
に、その分割を指示する分割指示記号（ジェスチャ）５
１を手書き入力する。これにより、異なる文字を構成す
る各画が、異なる文字セグメンテーションに分割され
る。その結果、正しい文字として認識させることが可能
となる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、例えば電子手帳装置、
携帯用のコンピュータなどに用いて好適な手書き入力表
示装置に関する。

【０００２】

【従来の技術】最近、例えば電子手帳装置などのよう
に、文字を手書き入力することができる装置が普及しつ
つある。このように文字を手書き入力することができる
装置は、通常のワードプロセッサなどとは異なり、キー
ボードではなく、ペンを用いてボード上に文字を書くこ
とにより、文字を入力することができるため、紙の上に
鉛筆などで文字を書く感覚で、手軽に文字を入力するこ
とができる。キーボードを用いる場合に較べて、キーの
位置などを記憶する必要がないため、初心者でも容易に
文字を入力することができる。

【０００３】このように文字を手書き入力することがで
きる装置においては、文字を入力する入力枠を設けてあ
るものと、入力枠を設けておらず、任意の位置に文字を
入力することができるものがある。

【０００４】入力枠を設けた装置においては、使用者
は、その入力枠の中に文字を１字ずつ手書き入力するこ
とになる。この入力枠は、通常、複数の領域に区分され
ており、使用者は各領域に１文字ずつ入力することにな
る。入力する位置が制限されるため、その分だけ、使用
者にとっては操作性が悪いことになるが、各文字を入力
する領域が区分されているため、入力された文字を１文
字ずつ切り出す必要がなく、各文字を比較的正確に認識
することが可能である。

【０００５】これに対して、入力枠を設けていない装置
においては、入力ボード（タブレット）上の任意の位置
に、使用者が文字を手書き入力することになる。この場
合、手書き入力された文字は、所定のタイミングで文字
として認識されていた。

【０００６】即ち、文字が入力されると、入力された文
字と文字の境界が決定される。そして、切り出されたそ
れぞれの文字を１字の文字として認識し、その認識結果
が表示される。

【０００７】その結果、例えば図１６（ａ）に示すよう
に、使用者が「明」という漢字を入力した場合、この
「日」と「月」の文字が、２つで１つの文字を構成する
ものとして切り出された場合においては、入力された文
字が「明」の漢字として認識されることになる。

【０００８】しかしながら、図１６（ｂ）に示すよう
に、この「日」と「月」の文字の間隔が比較的空いてし
まうなどして、これらの文字がそれぞれ別個の文字とし
て切り出されたような場合においては、「日」と「月」
の文字がそれぞれ別個の文字として認識されることにな
る。

【０００９】

【発明が解決しようとする課題】従来の装置は、このよ
うに、「明」の文字として認識された結果、あるいは
「日」と「月」の文字として認識された結果が、使用者
の意図と異なる場合、入力を再度行わなければならず、
意図する文字を入力するのに時間がかかる課題があっ
た。

【００１０】本発明はこのような状況に鑑みてなされた
ものであり、より迅速に所望の文字、図形などを入力す
ることができるようにするものである。

【００１１】

【課題を解決するための手段】本発明の手書き入力表示
装置は、筆跡を手書き入力する入力手段（例えば図１の
ペン１６）と、入力手段により入力された筆跡を認識す
る認識手段（例えば図２のプログラム上のステップＳ
１）と、入力手段により入力された筆跡と、認識手段に
より得られた認識結果とを表示する表示手段（例えば図
１におけるディスプレイ部１３）と、筆跡を認識する場
合における複数の筆跡の組み合わせを変更する変更手段
（例えば図４における分割指示記号５１）とを備えるこ
とを特徴とする。

【００１２】この装置は、ディスプレイ部１３に複数の
認識結果を表示させるとき、表示された複数の認識結果
の所定のものを選択する選択手段（例えば図８における
候補順位表示部６１）をさらに設けることができる。

【００１３】

【作用】上記構成の手書き入力表示装置においては、所
定の筆跡を入力したとき、これを認識して得られた認識
結果が表示される。そして、その表示された認識結果が
意図するものと異なる場合、入力、表示されている複数
の筆跡の組み合わせを所定のジェスチャを入力すること
で、分割したり、組み合わせることができる。従って、
新たな筆跡を再度入力することなく、意図する文字を入
力することが可能となる。

【００１４】

【実施例】図１は、本発明の手書き入力表示装置の一実
施例の構成を示すブロック図である。ＣＰＵ１は、ＲＯ
Ｍ２に記憶されているプログラムに従って各部を制御
し、文字入力表示動作を実行するようになされている。
ＲＡＭ３には、必要に応じて所定のデータなどが記憶さ
れる。バックアップＲＡＭ４には、バッテリ５から常に
所定の電力が供給されており、装置の電源をオフした場
合においても、記憶しておきたい情報を記憶するように
なされている。タイマ６は、水晶振動子７を基準にし
て、バッテリ５で常時動作するようになされている。

【００１５】ディスプレイコントローラ１１は、バスラ
イン８を介して入力されるデータをＶ−ＲＡＭ１２に展
開し、そこに展開された画像をディスプレイ部１３に表
示させるようになされている。入力タブレット１５は、
ペン１６を操作することにより、入力された座標位置デ
ータをタブレットインタフェース１４に出力し、タブレ
ットインタフェース１４は、このデータをバスライン８
を介してＣＰＵ１あるいはディスプレイコントローラ１
１に出力するようになされている。

【００１６】マイク１８は、集音した音声信号を固体録
音処理回路１７に出力し、記憶させるようになされてい
る。また、固体録音処理回路１７が出力した音声信号
は、加算器２０を介してスピーカ２１に供給され、放音
されるようになされている。ダイアラ１９は、ＣＰＵ１
に制御され、所定のダイアル信号を加算器２０を介して
スピーカ２１に出力するようになされている。

【００１７】複数のキースイッチ群２２は、装置の動作
を切り換えるとき操作され、その操作に対応する信号が
キーインタフェース２３からバスライン８を介してＣＰ
Ｕ１に出力されるようになされている。また、複数のキ
ースイッチ群２４の所定のものを操作することにより電
源回路２５をオンし、各部に電力を供給させるようにし
たり、固体録音処理回路１７による録音、再生、停止、
音量調整などを実行することができるようになされてい
る。

【００１８】さらに、ソケット２６には、図示せぬＩＣ
カードを挿入することができるようになされており、Ｉ
Ｃカードインタフェース２７は、このＩＣカードに対し
てデータを授受するようになされている。

【００１９】ピンコネクタ２９には、例えばモデムなど
を接続することができ、拡張用インタフェース２８とこ
のモデムを介して信号を授受できるようになされてい
る。

【００２０】尚、入力タブレット１５は、透明な材質に
より構成され、ディスプレイ部１３の上に形成されてい
る。その結果、ディスプレイ部１３の表示が入力タブレ
ット１５を介して見ることができるようになされてい
る。

【００２１】次に、図２のフローチャートを参照して、
文字を手書き入力する場合の動作について説明する。ペ
ン１６で入力タブレット１５上に文字を手書き入力する
と、その筆跡データがタブレットインタフェース１４を
介してＲＡＭ３の手書き筆跡データベースＤＢ１に供給
され、記憶される。また、この筆跡データは、ディスプ
レイコントローラ１１によりＶ−ＲＡＭ１２に供給さ
れ、ビットマップデータとして展開される。そして、こ
のビットマップデータがディスプレイコントローラ１１
により読み出され、ディスプレイ部１３に出力、表示さ
れる。これにより、ディスプレイ部１３上には、ペン１
６で入力した筆跡が表示されることになる。

【００２２】ＣＰＵ１は、ステップＳ１において、この
ようにして、手書き筆跡データベースＤＢ１に記憶され
ている筆跡データを読み出し、文字認識処理を実行す
る。認識の結果得られたデータは、認識結果データベー
スＤＢ２に供給され、記憶される。

【００２３】次にステップＳ２に進み、認識結果データ
ベースＤＢ２に記憶された認識結果のうち、最も高いス
コアを有する（類似度の高い）第１番目の認識結果が読
み出され、ディスプレイ部１３に表示される。

【００２４】図３は、以上の動作を模式的に表してい
る。即ち、いま平仮名で「いしい」の文字を入力したと
すると、この文字の筆跡データが文字認識処理され、こ
の実施例の場合、３つの候補が得られている。

【００２５】即ち、平仮名で「いしい」の文字は、５個
の画から構成されているが、第１の候補においては、こ
の５画が４個の文字セグメンテーションに区分されてい
る。第１画により１つの文字セグメンテーションが構成
され、これは、平仮名「し」として認識されている。そ
して、第２画と第３画により、１つの文字セグメンテー
ションが構成され、この実施例の場合、カタカナの
「ル」として認識されている。さらに、第４画と第５画
は、それぞれ異なる文字セグメンテーションとして認識
され、第４画は数字「１」として、また第５画は「）」
として認識されている。

【００２６】一方、第２の候補においては、第１の候補
と同様に、５個の画が４個の文字セグメンテーションに
区分されている。最初の文字セグメンテーションは、第
１画と第２画により構成され、平仮名の「い」として認
識されている。また第２番目の文字セグメンテーション
は、第３画により構成され、平仮名の「し」として認識
されている。さらに、第３番目と第４番目の文字セグメ
ンテーションは、第４画と第５画によりそれぞれ構成さ
れ、第１画における場合と同様に、数字「１」と記
号「）」として認識されている。

【００２７】さらに、第３の候補においては、５個の画
が３個の文字セグメンテーションに区分されている。最
初の文字セグメンテーションは、第１画と第２画により
構成され、平仮名の「い」として認識されている。また
第２番目の文字セグメンテーションは、第３画により構
成され、平仮名の「し」として認識されている。さら
に、第３番目の文字セグメンテーションは、第４画と第
５画により構成され、平仮名の「い」として認識されて
いる。

【００２８】この実施例の場合、上記した３つの候補の
うち、入力した筆跡と、その文字認識結果としての第１
番目の候補がディスプレイ部１３に表示される。

【００２９】尚、認識結果は、文字セグメンテーション
に関する情報（例えば、筆跡に外接する四角形（外接四
角形）の座標、文字を構成する画のデータなど）、それ
に対応する認識結果である文字コード、さらに、その文
字コードで表される文字に対する類似度（スコア）を有
している。

【００３０】文字セグメンテーション毎の外接四角形
は、これを表示しなくてもよいが、表示した方が、後述
する文字セグメンテーションの修正を入力し易くなる。

【００３１】図２に戻り、ステップＳ２の次にステップ
Ｓ３に進み、使用者の新たな入力を受け取る。そしてス
テップＳ４において、ステップＳ３で受け取った入力
が、文字セグメンテーションの修正を指示するものであ
るか否かを判定する。入力された筆跡が、文字セグメン
テーションの修正を指示するものでない場合、処理が終
了される。ステップＳ３で受け取った入力が、文字セグ
メンテーションの修正を指示するものである場合、ステ
ップＳ５に進み、修正指示に合致する認識結果をさらに
求める。

【００３２】即ち、ＣＰＵ１は、認識結果データベース
ＤＢ２にアクセスし、ステップＳ３で使用者が指示した
文字セグメンテーションの修正指示に従って、再度認識
処理をやり直す。そして、修正して得られた認識結果を
修正用認識結果データベースＤＢ３に供給し、記憶させ
る。

【００３３】文字セグメンテーションの修正は、例えば
図４と図５に示すように行われる。

【００３４】図４の実施例においては、ステップＳ２の
処理の結果、第１候補が文字認識結果として筆跡ととも
に表示されている。使用者は、平仮名で「いしい」の文
字を入力したのであるが、これらの筆跡のうち、文字
「い」を構成する第１画と第２画が１文字として認識さ
れておらず、そのうちの第２画が、独立した１文字とし
て認識されるべき第３画（「し」）と１つの文字を構成
するように認識されている。そこで、使用者は、図４に
示すように、第２画と第３画で構成される文字セグメン
テーションを分割することを指示する、略Ｖ字状の分割
指示記号（ジェスチャ）５１を入力する。

【００３５】ＣＰＵ１は、この分割指示記号５１の入力
を受け取ると、第２画と第３画により構成していた１つ
の文字セグメンテーションを、２つの文字セグメンテー
ションに分割する。即ち、第２画と第３画は、それぞれ
異なる文字を構成する筆跡であるとして認識処理を再度
実行する。

【００３６】図５の実施例においては、本来、１文字を
構成すべき第４画と第５画が、異なる文字セグメンテー
ションとされているので、この２つの文字セグメンテー
ションを１つの文字セグメンテーションとして結合する
ための結合指示記号（ジェスチャ）５２を入力した状態
を示している。この結合指示記号５２は、結合すべき複
数の文字セグメンテーションのそれぞれを横切るよう
に、略Ｖ字状の記号を横に寝かせたような記号とされ
る。このような入力が行われた場合、ＣＰＵ１は、この
結合指示記号５２にまたがる複数の文字セグメンテーシ
ョンを、１つの文字セグメンテーションとして処理す
る。

【００３７】図６は、図２におけるステップＳ５の修正
指示に合致する認識結果を再度求める処理の詳細を表し
ている。同図に示すように、最初にステップＳ３１にお
いて、入力された文字セグメンテーションの修正指示
が、セグメンテーション結合を指示するものであるか否
かが判定される。この実施例の場合、文字セグメンテー
ションの修正は、分割または結合のいずれかである。

【００３８】いま入力されたのが、文字セグメンテーシ
ョンの結合を指示するものでない場合、即ち、文字セグ
メンテーションの分割を指示するものである場合（図４
に示すような分割指示記号５１が入力された場合）、ス
テップＳ３５に進み、分割指示記号（分割指示ジェスチ
ャ）５１の筆跡の外接四角形の座標値から、分割対象と
なるセグメンテーションの分割位置を求める。

【００３９】図４の実施例の場合、分割指示記号５１の
外接四角形と交差する文字セグメンテーションは、第２
番目の文字セグメンテーションであるから、これを分割
対象となる文字セグメンテーションとして選択する。そ
して、この分割指示記号５１は、第２画と第３画の間に
位置しているため、この第２画と第３画の間を分割位置
として決定する。

【００４０】次にステップＳ３６に進み、認識結果デー
タベースＤＢ２から、ステップＳ３５で求めたセグメン
テーションの分割位置の前後に分割されるセグメンテー
ションを持つ結果列を求める。即ち、この実施例の場
合、第２画目と第３画目の筆跡が、それぞれ異なる文字
（文字セグメンテーション）を構成するものとして処理
されるため、第１画目と第２画目の筆跡が１つの文字
「い」として認識される。また、第３画が１つの文字
「し」として認識される。

【００４１】さらにステップＳ３７に進み、ステップＳ
３６で得られた結果が、修正用認識結果データベースＤ
Ｂ３に供給され、記憶される。即ち、図３における第３
候補が修正用認識結果データベースＤＢ３に格納され
る。

【００４２】一方、ステップＳ３１において、入力され
たジェスチャが結合を指示する結合指示記号５２である
と判定された場合、ステップＳ３２に進む。その筆跡の
外接四角形の座標値から、結合対象となるセグメンテー
ションの集合が求められる。

【００４３】図５の実施例の場合、結合指示記号５２が
第４画と第５画によりそれぞれ構成される文字セグメン
テーションにまたがって入力されているため、これらの
文字セグメンテーションが、１つの文字セグメンテーシ
ョンとして処理されるべき文字セグメンテーションとし
て選択される。

【００４４】そしてステップＳ３３に進み、認識結果デ
ータベースＤＢ２からステップＳ３２で求めた文字セグ
メンテーションの集合が、１つの文字セグメンテーショ
ンとなる結果を含む結果列を求める。図５の実施例の場
合、第４画と第５画を１つの文字として認識して得られ
る文字「い」が得られる。

【００４５】さらにステップＳ３４に進み、ステップＳ
３３で求めた結果を修正用認識結果データベースＤＢ３
に供給し、格納する。図５の実施例の場合、文字「い」
が修正用認識結果データベースＤＢ３に記憶されること
になる。

【００４６】図２におけるステップＳ５の修正指示に合
致する認識結果をまとめる処理が、以上のようにして行
われた後、ステップＳ５からステップＳ６以降の処理に
進み、認識した結果が複数存在する場合、そのうちの所
定のものが表示される。

【００４７】ステップＳ６では、内部変数ｊが１に初期
設定される。そしてステップＳ７に進み、第ｊ番目の認
識結果がディスプレイ部１３に表示される。即ち、ＣＰ
Ｕ１は、修正用認識結果データベースＤＢ３から、ステ
ップＳ５で記憶したデータのうち、最初の（ｊ＝１の）
データを読み出し、ディスプレイ部１３に出力し、表示
させる。次にステップＳ８に進み、使用者の新たな入力
を受け取る。そしてステップＳ９において、ステップＳ
８で受け取った筆跡が次の候補を表示することを指示す
るのであるか否かを判定する。次候補表示指示でない場
合、さらにステップＳ１３に進み、前の候補の表示を指
示するものであるか否かを判定する。

【００４８】ステップＳ９で次候補表示指示であると判
定された場合、ステップＳ１０に進み、変数ｊを１だけ
インクリメントし、ステップＳ１１に進む。ステップＳ
１１においては、ステップＳ１０でインクリメントした
変数ｊが、修正用認識結果データベースＤＢ３に記憶さ
れている候補数より大きくなったか否かが判定される。
変数ｊが記憶されている候補数以下の値であると判定さ
れた場合、次に表示すべき候補がまだ残っていることに
なるため、ステップＳ７に戻り、ステップＳ１０でイン
クリメントした変数ｊに対応する認識結果を表示する。
即ち、次候補を表示する。

【００４９】これに対して、ステップＳ１１で変数ｊが
修正用認識結果データベースＤＢ３に記憶されている候
補数より大きくなったと判定された場合、即ち、既に最
後の候補を表示している状態のとき、ステップＳ１２に
進み、変数ｊを１にセットし、ステップＳ７に戻り、１
番目の認識結果を表示する。即ち、認識結果の候補の表
示が順次次の候補に変更され、一番最後の候補に達した
ときは、一番最初の候補に戻るのである。

【００５０】一方、ステップＳ１３において、ステップ
Ｓ８で入力された筆跡が、前の候補の表示を指示するも
のであると判定された場合、ステップＳ１４に進み、変
数ｊを１だけデクリメントする。そしてステップＳ１５
において、この変数ｊが１以上であると判定された場
合、まだ前の候補が認識候補として残っているため、ス
テップＳ７に戻り、ステップＳ１４でデクリメントした
変数ｊに対応する認識結果を表示する。即ち、１つ前の
認識候補を表示する。

【００５１】ステップＳ１５において、変数ｊが１より
小さくなったと判定された場合、表示されているのが一
番最初の認識結果であるため、これよりさらに前の候補
は存在しないことになる。そこで、この場合において
は、ステップＳ１６に進み、変数ｊに修正用データベー
スの候補数と等しい値が設定される。即ち、一番最後の
候補が選択され、ステップＳ７に戻り、これが表示され
る。

【００５２】このようにして、表示すべき候補を順次前
候補に変更し、一番最初の候補に達したときは、表示を
一番最後の候補に変更するのである。

【００５３】ステップＳ１３において、ステップＳ８で
受け取った筆跡が前の候補の表示を指示するものでない
と判定された場合においては、ステップＳ３に戻り、再
度新たな入力を待機し、その筆跡に対応する処理を行う
ことになる。

【００５４】以上のようにして、ステップＳ６乃至Ｓ１
６において、複数の認識候補が存在する場合において
は、そのいずれか１つを順次選択し、表示させることが
できる。

【００５５】尚、以上のステップＳ３またはステップＳ
８における入力（指令）は、ジェスチャの他、ペン１６
で入力タブレット１５上の所定の位置を操作させること
で行うようにすることもできる。あるいはまた、マウ
ス、キーボードなどより入力させるようにすることも可
能である。

【００５６】このようにして、図３に示した第１候補乃
至第３候補のいずれか１つが順次順番に表示されること
になる。

【００５７】以上の処理をまとめると、図７に示すよう
になる。即ち、最初に同図（ａ）に示すように、「いし
い」の文字を手書き入力すると、その筆跡が表示され
る。そして、入力された筆跡の認識が行われると、同図
（ｂ）に示すように、認識結果の第１候補が筆跡の右下
に表示される。使用者はこの認識結果を見て、本来異な
る文字として認識されるべき第２画と第３画が、１つの
文字セグメンテーションに含まれていることを知ること
ができる。

【００５８】そこで使用者は、この第２番目の文字セグ
メンテーションを、２つの文字セグメンテーションに分
割するための分割指示記号５１を入力する。その結果、
同図（ｃ）に示すように、第１画と第２画により、１つ
の文字「い」が認識表示され、第３画により、１つの文
字「し」が認識表示される。

【００５９】さらに、１つの文字として認識されるべき
第４画と第５画が、それぞれ異なる文字セグメンテーシ
ョンとして認識処理されているため、これらを結合する
結合指示記号５２を入力すると、同図（ｄ）に示すよう
に、第４画と第５画を１つの文字として認識した結果得
られた文字「い」が表示される。

【００６０】以上のようにして、１度文字を手書き入力
した後、必要に応じて認識結果を参考にして、文字セグ
メンテーションを分割あるいは結合する指示を入力する
ことで、再度文字を書き直すことなく、本来意図する文
字を認識させることができる。

【００６１】図８は、他の表示例を示している。この実
施例においては、同図（ａ）に示すように、「いろい
ろ」の文字を入力すると、その筆跡が表示される。そし
て、この筆跡に対して文字セグメンテーションの切り出
しが行われ、各文字セグメンテーション毎に文字認識が
行われる。そして、同図（ｂ）に示すように、文字セグ
メンテーションを示す外接四角形が表示される。この実
施例の場合、第１画乃至第６画のそれぞれが異なる文字
セグメンテーションＡ乃至Ｆとして区分されている。

【００６２】さらに図８（ｃ）には、このような各文字
セグメンテーションＡ乃至Ｆが認識された結果が複数個
（この実施例の場合、４組）表示された状態が示されて
いる。この表示された複数の組のうち、所定の組を選択
するとき、最も左側に表示されている候補順位表示部６
１のうち、対応するものをペン１６でタッチする。これ
により、タッチした組み合わせが認識した結果として選
択される。

【００６３】また、この実施例においては、一番右側に
スクロールバー６２が表示され、その一番上側の上向き
の三角形の表示部６２ａ、または一番下側の下向きの三
角形の表示部６２ｂをペン１６でタッチすることによ
り、表示されている候補が５組以上存在するとき、その
表示状態を上下にスクロールさせることができる。表示
部６２ａをタッチすれば、候補が上側にスクロールさ
れ、表示部６２ｂをタッチすれば、候補が下側にスクロ
ールされる。

【００６４】図９は、さらに他の表示例を示している。
この実施例においては、同図（ａ）に示すように、第１
画乃至第６画の入力が行われると、その筆跡が表示され
る。そして、第１位の認識候補に対応する文字セグメン
テーションが、同図（ｂ）に示すように表示される。さ
らに、同図（ｃ）に示すように、複数の文字セグメンテ
ーションに対する複数の候補が同時に（この実施例の場
合、４組）表示されている。

【００６５】この場合においても、候補順位表示部６１
の所定のものをペン１６でタッチすることにより、所定
の認識結果を選択することができ、また、表示部６２ａ
または表示部６２ｂを操作することで、候補の表示をス
クロールさせることができるのは、図８における場合と
同様である。

【００６６】図１０は、さらに他の表示例を示してい
る。この実施例においては、同図（ａ）に示すように、
複数の認識結果が表示されている状態において、同図
（ｂ）に示すように、前候補表示指示ジェスチャ７１を
ペン１６で手書き入力したり、あるいは同図（ｃ）に示
すように、次候補表示指示ジェスチャ７２をペン１６で
手書き入力することで、認識候補を上または下側にそれ
ぞれスクロールさせることができるようになされてい
る。この実施例の場合、これらの前候補表示指示ジェス
チャ７１と次候補表示指示ジェスチャ７２は、上側また
は下側を向いた三角形の図形とされている。

【００６７】また、この実施例の場合、前候補表示指示
ジェスチャ７１または次候補表示指示ジェスチャ７２を
入力する代わりに、スクロールバー６２の表示部６２
ａ，６２ｂをペン１６でタッチすることによっても、同
様に表示をスクロールさせることが可能となっている。

【００６８】図１１は、手書き筆跡データベースＤＢ１
のフォーマットの例を表している。同図に示すように、
最初に画番号が配置され、次に、その画番号に対応する
画の座標点の数ｎが配置されている。そして、さらにそ
の次に、ｎ個の座標点の座標値（ｘ₀，ｙ₀），（ｘ₁，
ｙ₁），・・・，（ｘ_n-1，ｙ_n-1）が配置されている。
以下同様に、複数の画が入力されている場合において
は、その画の番号と座標点数、座標値が順次配置され
る。そして最後に、ファイル終了記号が配置される。

【００６９】図１２は、認識結果データベースＤＢ２お
よび修正用認識結果データベースＤＢ３のフォーマット
の例を表している。最初に各文字セグメンテーションに
対応する認識結果が順次配置される。各文字セグメンテ
ーションに対する認識結果においては、その先頭に、そ
の文字セグメンテーションのＩＤが配置され、次にその
文字セグメンテーションの開始画番号と終了画番号が配
置されている。その次には、その文字セグメンテーショ
ンの外接四角形の対角頂点の座標（ｘ₀，ｙ₀），
（ｘ₁，ｙ₁）が配置されている。さらにその次には、認
識候補の数Ｎが配置され、それに続いて、第１番目から
第Ｎ番目の認識候補の文字コードとグレード値が配置さ
れている。

【００７０】１文字セグメンテーションに対する認識結
果の最後には、１文字セグメンテーションに対する認識
結果終了コードが配置されている。そして、その次に、
文字セグメンテーションを、そのグレード値が高くなる
ようにして組み合わせて得られた文字認識結果を構成す
る文字セグメンテーションが順次配置されている。この
文字認識結果は、候補ＩＤと、その候補を構成する文字
セグメンテーションの数Ｍと、その文字セグメンテーシ
ョンのＩＤ（ＩＤ₀乃至ＩＤ_M）から構成されている。そ
して一番最後にファイル終了コードが付加されている。

【００７１】以上においては、文字を手書き入力する場
合を例として説明したが、図形を入力する場合にも本発
明は応用することが可能である。

【００７２】図１３および図１４は、この場合の実施例
を表している。図１３（ａ）においては、例えば電気ブ
ロック図を描く場合のように、３つの四角形と、各四角
形を結ぶ線分が入力され、その筆跡が表示された状態が
示されている。同図（ｂ）には、同図（ａ）に示した筆
跡が認識された結果がさらに表示されるとともに、各図
形の図形セグメンテーションも表示されている。

【００７３】この実施例の場合、入力された図形は、５
つの図形セグメンテーションに分割されているが、第２
番目の図形セグメンテーションが、本来第１番目の図形
を構成すべき線分を含んで区分されている。そこで、同
図（ｂ）に示すように、所定の位置に分割指示記号５１
を入力すると、同図（ｃ）に示すように、それまで第２
番目の図形セグメンテーションに含まれていた線分が、
第１番目の図形セグメンテーションに含まれるように変
更される。

【００７４】以上の処理により、四角形と、これを接続
する線分に図形セグメンテーションが区分されるので、
これで処理を終了させてもよいのであるが、そのうちの
複数の図形セグメントを、さらに１つの図形セグメント
にまとめることもできる。

【００７５】この場合、図１４（ａ）に示すように、１
つにまとめたい図形セグメンテーション（この実施例の
場合、第３番目乃至第５番目の図形セグメンテーショ
ン）にまたがるように、結合指示記号５２を入力する。
これにより、図１４（ｂ）に示すように、これら第３乃
至第５番目の図形セグメンテーションが、１つのセグメ
ンテーションとしてまとめられる。

【００７６】１つの図形セグメンテーションにまとめら
れた図形は、例えば、移転、消去等の処理をするとき、
全体として処理が行われる。

【００７７】このように、図形を入力する場合において
も、複数の認識候補がある場合、所望の候補を１つずつ
表示させるようにすることができる。図１５は、この実
施例を表している。即ち、図１５（ａ）には、１つの入
力筆跡と、それに対応する１つの認識結果が表示されて
いる。この認識結果は、例えば図１０に示す場合のよう
に、複数個同時に表示することも可能である。

【００７８】そして、図１５（ｂ）または（ｃ）に示す
ように、前候補表示指示ジェスチャ７１または次候補表
示指示ジェスチャ７２を入力することで、表示する認識
結果を前候補または次候補にスクロールさせるようにす
ることができる。

【００７９】このように本発明は、文字、図形など、任
意の形状を表示させる場合に適用することが可能であ
る。

【００８０】

【発明の効果】以上の如く本発明の手書き入力表示装置
によれば、複数の筆跡の組み合わせを変更手段により変
更させるようにしたので、手書き入力した形状が、意図
する形状に認識されなかった場合に、これを再度入力す
ることなく、意図する形状に迅速に認識させるようにす
ることができる。

【図面の簡単な説明】

【図１】本発明の手書き入力表示装置の一実施例の構成
を示すブロック図である。

【図２】図１の実施例の動作を説明するフローチャート
である。

【図３】図２のステップＳ１とステップＳ２の処理を説
明する図である。

【図４】文字セグメンテーションの分割を説明する図で
ある。

【図５】文字セグメンテーションの結合を説明する図で
ある。

【図６】図２のステップＳ５の詳細な処理を説明するフ
ローチャートである。

【図７】図２のステップＳ１乃至Ｓ５の処理を説明する
図である。

【図８】同一セグメンテーションに対する複数の候補の
表示例を説明する図である。

【図９】複数の文字セグメンテーションに対する複数の
候補の表示例を説明する図である。

【図１０】表示がスクロールする例を説明する図であ
る。

【図１１】手書き筆跡データベースのフォーマットを説
明する図である。

【図１２】認識結果データベースのフォーマットを説明
する図である。

【図１３】図形セグメンテーションを変更する例を説明
する図である。

【図１４】図１３に続く図である。

【図１５】図形の表示をスクロールする例を説明する図
である。

【図１６】従来の手書き入力表示装置の表示例を説明す
る図である。

【符号の説明】

１ＣＰＵ２ＲＯＭ３ＲＡＭ８バスライン１１ディスプレイコントローラ１２Ｖ−ＲＡＭ１３ディスプレイ部１４タブレットインタフェース１５入力タブレット１６ペン５１分割指示記号５２結合指示記号６１候補順位表示部６２スクロールバー７１前候補表示指示ジェスチャ７２次候補表示指示ジェスチャ

Claims

【特許請求の範囲】

【請求項１】筆跡を手書き入力する入力手段と、前記入力手段により入力された筆跡を認識する認識手段
と、前記入力手段により入力された筆跡と、前記認識手段に
より得られた認識結果とを表示する表示手段と、前記筆跡を認識する場合における複数の前記筆跡の組み
合わせを変更する変更手段とを備えることを特徴とする
手書き入力表示装置。
【請求項２】前記表示手段は、複数の認識結果を表示
し、前記表示手段に表示された複数の前記認識結果の所定の
ものを選択する選択手段をさらに備えることを特徴とす
る請求項１に記載の手書き入力表示装置。
【請求項３】前記変更手段は、ジェスチャであること
を特徴とする請求項１または２に記載の手書き入力表示
装置。