JPH06208654A - ペン入力図形編集システム - Google Patents
ペン入力図形編集システムInfo
- Publication number
- JPH06208654A JPH06208654A JP184793A JP184793A JPH06208654A JP H06208654 A JPH06208654 A JP H06208654A JP 184793 A JP184793 A JP 184793A JP 184793 A JP184793 A JP 184793A JP H06208654 A JPH06208654 A JP H06208654A
- Authority
- JP
- Japan
- Prior art keywords
- pen
- input
- recognition
- character
- editing system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/32—Digital ink
- G06V30/36—Matching; Classification
- G06V30/387—Matching; Classification using human interaction, e.g. selection of the best displayed recognition candidate
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Character Discrimination (AREA)
- Document Processing Apparatus (AREA)
- Processing Or Creating Images (AREA)
Abstract
(57)【要約】
【目的】 ペンを用いて画面上で余計なコマンド操作を
必要としない図形編集システムを提供する。 【構成】 ペンを用いて図形、文字、編集要求（以下、
ジェスチャと呼ぶ）等のデータを入力する入力装置１、
入力されたデータの処理を行うデータ処理装置２、さら
に入力されたデータの格納を行うデータ格納装置３、表
示装置４及びペン５によって構成される。 【効果】 文字と図形が混在する情報の入力・編集操作
を全てペンを用いることにより入力、コマンドを意識す
ることなく、文字、図形、コマンド処理ができる。
必要としない図形編集システムを提供する。 【構成】 ペンを用いて図形、文字、編集要求（以下、
ジェスチャと呼ぶ）等のデータを入力する入力装置１、
入力されたデータの処理を行うデータ処理装置２、さら
に入力されたデータの格納を行うデータ格納装置３、表
示装置４及びペン５によって構成される。 【効果】 文字と図形が混在する情報の入力・編集操作
を全てペンを用いることにより入力、コマンドを意識す
ることなく、文字、図形、コマンド処理ができる。
Description
【０００１】
【産業上の利用分野】本発明は、ペン入力によりデータ
の入力を行うコンピュータを用いて文字と図形の編集に
関するものである。
の入力を行うコンピュータを用いて文字と図形の編集に
関するものである。
【０００２】
【従来の技術】一般的に計算機システムを利用して図形
を編集する方法として、例えば、全てをキーボードから
操作することが知られているが、これは、文字や図形や
編集要求に対して特定のキーを割当て、このキーが利用
者により選択された場合、処理を行うものである。
を編集する方法として、例えば、全てをキーボードから
操作することが知られているが、これは、文字や図形や
編集要求に対して特定のキーを割当て、このキーが利用
者により選択された場合、処理を行うものである。
【０００３】また、予め、用意された図形を表示して利
用者が編集対象を選択することも知られており、選択装
置としてキーボードに加えてマウス・ジョイスティク・
トラックボールといったポインティングデバイス、そし
て指や電子化されたペンも利用されている。表示装置と
しては編集画面に選択対象を表示する方法や図形専用の
タブレット等の編集画面とは別の装置を利用するなどが
知られている。
用者が編集対象を選択することも知られており、選択装
置としてキーボードに加えてマウス・ジョイスティク・
トラックボールといったポインティングデバイス、そし
て指や電子化されたペンも利用されている。表示装置と
しては編集画面に選択対象を表示する方法や図形専用の
タブレット等の編集画面とは別の装置を利用するなどが
知られている。
【０００４】さらにキーボードや選択装置を併用し、文
字またはキーボード、編集要求や図形入力は選択装置に
よるなどの組合せも行われている。
字またはキーボード、編集要求や図形入力は選択装置に
よるなどの組合せも行われている。
【０００５】一方、ペンを利用したコンピュータでは文
字や図形の入力や編集操作をキーボードなどを用いずに
ペンを用いて行うことが知られている。
字や図形の入力や編集操作をキーボードなどを用いずに
ペンを用いて行うことが知られている。
【０００６】特にペンを利用した編集操作として、文章
の校正記号をベースに設計されたジェスチャがある。ジ
ェスチャとはペンの動きを編集コマンドとして解釈する
ことを意味し、例えば、日経バイト、１９９１年４月
号、Ｐ２３２〜Ｐ２３９に示されている。
の校正記号をベースに設計されたジェスチャがある。ジ
ェスチャとはペンの動きを編集コマンドとして解釈する
ことを意味し、例えば、日経バイト、１９９１年４月
号、Ｐ２３２〜Ｐ２３９に示されている。
【０００７】ペンを利用した文字図形編集として知られ
ている従来技術として、特開昭６２−１９０５６５号公
報には、表示画面上に文字認識、図形作成、手書き入力
等のコマンドが表示され、利用者がペンでコマンドを指
定するという編集モードにより、明示的に文字か図形か
編集要求かを判断することが開示されている。
ている従来技術として、特開昭６２−１９０５６５号公
報には、表示画面上に文字認識、図形作成、手書き入力
等のコマンドが表示され、利用者がペンでコマンドを指
定するという編集モードにより、明示的に文字か図形か
編集要求かを判断することが開示されている。
【０００８】また、特開昭６４−１３６８２号公報に
は、手書き情報の連続したビット情報群の数や長さ等の
属性に基づいて、手書き情報が文字か図形かを判定する
ことが開示されている。
は、手書き情報の連続したビット情報群の数や長さ等の
属性に基づいて、手書き情報が文字か図形かを判定する
ことが開示されている。
【０００９】さらに、特開平１−２３７８８２号公報に
は、ペンにより入力された文字や図形の入力と認識、そ
して、特定の図形形状をしたオペレータによりペンによ
る編集操作を実現している。
は、ペンにより入力された文字や図形の入力と認識、そ
して、特定の図形形状をしたオペレータによりペンによ
る編集操作を実現している。
【００１０】
【発明が解決しようとする課題】上記従来技術におい
て、一般に、キーボードを利用した方法ではキーボード
操作に対して特別な訓練が必要であり、さらに、図形の
持つ多次元的情報を文字列や記号列等の一次元の情報に
置き換える必要があり、図形処理には向いていない。さ
らに、表示対象を選択する方法としては、特定図形のみ
の操作では効率であるが、文字入力は困難である。
て、一般に、キーボードを利用した方法ではキーボード
操作に対して特別な訓練が必要であり、さらに、図形の
持つ多次元的情報を文字列や記号列等の一次元の情報に
置き換える必要があり、図形処理には向いていない。さ
らに、表示対象を選択する方法としては、特定図形のみ
の操作では効率であるが、文字入力は困難である。
【００１１】また、図形専用のタブレット等を利用する
場合は装置が高価になる。キーボードとタブレットなど
を混在させて編集する場合、利用者が編集の途中に両者
を持ち替える必要があり、操作が煩雑であるという問題
点があった。
場合は装置が高価になる。キーボードとタブレットなど
を混在させて編集する場合、利用者が編集の途中に両者
を持ち替える必要があり、操作が煩雑であるという問題
点があった。
【００１２】一方、従来のペンを利用した図形編集方法
は、編集ごとの切り替えを行う編集モードがあるため、
編集操作が手間取ったり、編集操作にペンが利用できな
い、また、キーボードが必要などの問題があった。
は、編集ごとの切り替えを行う編集モードがあるため、
編集操作が手間取ったり、編集操作にペンが利用できな
い、また、キーボードが必要などの問題があった。
【００１３】一般に、鉛筆で紙に文字や図形を書き、そ
の校正をする場合、利用者は編集モードを特に意識する
ことなく、文字、図形、編集要求を記入している。この
ため、従来の方法では、利用者、利用場所、利用時点に
制約があり、また、利用者に紙と鉛筆と同様な自然な操
作を提供しておらず、図形処理による計算機の利用範囲
を拡大できないという問題があった。
の校正をする場合、利用者は編集モードを特に意識する
ことなく、文字、図形、編集要求を記入している。この
ため、従来の方法では、利用者、利用場所、利用時点に
制約があり、また、利用者に紙と鉛筆と同様な自然な操
作を提供しておらず、図形処理による計算機の利用範囲
を拡大できないという問題があった。
【００１４】前記特開昭６４−１３６８２号公報は、図
面や文字の編集操作ではペンによる入力、編集操作につ
いて開示していない。また、ジェスチャコマンドも利用
できるように拡張すると、認識可能な文字または図形と
ジェスチャが類似な形状であるものは判定することがで
きず、正当な認識結果を得ることができない。また、前
記特開平１−２３７８８２号公報は、パラメータの設
定、データの保存、読み込み、消去、ハードコピー等の
処理はメニュー選択画面からキーボードにより操作して
おり、ペンによる編集については開示していない。
面や文字の編集操作ではペンによる入力、編集操作につ
いて開示していない。また、ジェスチャコマンドも利用
できるように拡張すると、認識可能な文字または図形と
ジェスチャが類似な形状であるものは判定することがで
きず、正当な認識結果を得ることができない。また、前
記特開平１−２３７８８２号公報は、パラメータの設
定、データの保存、読み込み、消去、ハードコピー等の
処理はメニュー選択画面からキーボードにより操作して
おり、ペンによる編集については開示していない。
【００１５】本発明の目的は、上記課題を解決し、ペン
を用いて画面上で余計なコマンド操作を必要としない図
形編集システムを提供するものである。
を用いて画面上で余計なコマンド操作を必要としない図
形編集システムを提供するものである。
【００１６】本発明の前記ならびにその他の目的及び新
規な特徴は、本明細書の記述及び添付図面によって明ら
かにする。
規な特徴は、本明細書の記述及び添付図面によって明ら
かにする。
【００１７】
【課題を解決するための手段】本発明では、上記問題点
を解決するためにペンによる入力手段を持つ計算機シス
テムにおいて、文字認識手段と、図形認識手段と、編集
要求認識手段と、編集結果を格納する手段と、編集結果
を表示する手段とを具備し、当該ペンによって描かれた
軌跡を文字または図形または編集要求のいずれかの種別
であるかを判定認識し、該認識結果を表示し、さらに、
前記文字認識手段と、該図形認識手段と、該編集要求認
識手段によって、該ペンによって描かれた文字または図
形または編集要求のいずれかの種別と判定したとき、該
各認識手段に優先順位を付加し、該各認識手段に付加さ
れた優先順位を動的に変更し、さらに、優先順位の低い
認識手段は認識対象から除外し、さらに、優先度を判定
する際にペンによる軌跡または以前の編集結果等の情報
を参照し、ペンによって入力された軌跡を対象となって
いる全ての認識処理を平行に実施し、妥当な認識結果の
うち優先度の高いものを採用する。さらに、ペンによる
データの入力の際にペンの軌跡に生じる誤差を補正し、
見やすい形状または配置に清書して表示し、ペン入力図
形編集システムにおいてペンによる軌跡を認識せずに表
示することによって達成できる。
を解決するためにペンによる入力手段を持つ計算機シス
テムにおいて、文字認識手段と、図形認識手段と、編集
要求認識手段と、編集結果を格納する手段と、編集結果
を表示する手段とを具備し、当該ペンによって描かれた
軌跡を文字または図形または編集要求のいずれかの種別
であるかを判定認識し、該認識結果を表示し、さらに、
前記文字認識手段と、該図形認識手段と、該編集要求認
識手段によって、該ペンによって描かれた文字または図
形または編集要求のいずれかの種別と判定したとき、該
各認識手段に優先順位を付加し、該各認識手段に付加さ
れた優先順位を動的に変更し、さらに、優先順位の低い
認識手段は認識対象から除外し、さらに、優先度を判定
する際にペンによる軌跡または以前の編集結果等の情報
を参照し、ペンによって入力された軌跡を対象となって
いる全ての認識処理を平行に実施し、妥当な認識結果の
うち優先度の高いものを採用する。さらに、ペンによる
データの入力の際にペンの軌跡に生じる誤差を補正し、
見やすい形状または配置に清書して表示し、ペン入力図
形編集システムにおいてペンによる軌跡を認識せずに表
示することによって達成できる。
【００１８】
【作用】本発明によれば、入力手段で文字や図形や編集
要求を入力し、入力されたペンの規制を文字または図形
または編集要求と判断し、認識する。そして、認識した
結果、文字の場合は文字コードと大きさやフォントとい
った属性情報、図形の場合は図形形状と太さといった編
集要求の場合は所定の編集対象についての編集操作を行
うことができる。さらに、その処理結果を見やすい形状
や配置に清書して表示する。
要求を入力し、入力されたペンの規制を文字または図形
または編集要求と判断し、認識する。そして、認識した
結果、文字の場合は文字コードと大きさやフォントとい
った属性情報、図形の場合は図形形状と太さといった編
集要求の場合は所定の編集対象についての編集操作を行
うことができる。さらに、その処理結果を見やすい形状
や配置に清書して表示する。
【００１９】
【実施例】以下、本発明の一実施例を図面を用いて詳細
に説明する。
に説明する。
【００２０】図１は、データ処理装置の構成を示す。
【００２１】本発明は、ペンを用いて図形、文字、編集
要求（以下、ジェスチャと呼ぶ）等のデータを入力する
入力装置１、入力されたデータの処理を行うデータ処理
装置２、さらに入力されたデータの格納を行うデータ格
納装置３、表示装置４及びペン５によって構成される。
要求（以下、ジェスチャと呼ぶ）等のデータを入力する
入力装置１、入力されたデータの処理を行うデータ処理
装置２、さらに入力されたデータの格納を行うデータ格
納装置３、表示装置４及びペン５によって構成される。
【００２２】さらに、データ処理装置２は、入力データ
処理装置６、文字認識部７、図形認識部８、ジェスチャ
認識部９、表示データ生成部１０、そしてデータ記憶部
１１によって構成される。ペン５と入力装置はペンの軌
跡を検知できるものであるなら、ペンの軌跡の入力方法
は電磁波、超音波、静電気、圧力等の検知方法は問わな
い。
処理装置６、文字認識部７、図形認識部８、ジェスチャ
認識部９、表示データ生成部１０、そしてデータ記憶部
１１によって構成される。ペン５と入力装置はペンの軌
跡を検知できるものであるなら、ペンの軌跡の入力方法
は電磁波、超音波、静電気、圧力等の検知方法は問わな
い。
【００２３】図２は、データ処理装置２の処理内容を示
すフローチャートである。
すフローチャートである。
【００２４】まず、入力装置１からペン５の軌跡のデー
タを入力し（ステップ２０１）、入力データを図形、文
字列、編集要求、その他のいずれかと判定し（ステップ
２０２）、判定結果の種別に従い（ステップ２０３）、
図形の場合は図形認識を要求し（ステップ２０４）、文
字の場合は文字の認識を要求し（ステップ２０５）、編
集要求の場合はジェスチャ認識を要求し（ステップ２０
６）、認識結果か妥当であるかどうかを判定し（ステッ
プ２０７）、この判定結果が妥当であれば、認識結果を
清書する（ステップ２０８）。
タを入力し（ステップ２０１）、入力データを図形、文
字列、編集要求、その他のいずれかと判定し（ステップ
２０２）、判定結果の種別に従い（ステップ２０３）、
図形の場合は図形認識を要求し（ステップ２０４）、文
字の場合は文字の認識を要求し（ステップ２０５）、編
集要求の場合はジェスチャ認識を要求し（ステップ２０
６）、認識結果か妥当であるかどうかを判定し（ステッ
プ２０７）、この判定結果が妥当であれば、認識結果を
清書する（ステップ２０８）。
【００２５】ステップ２０７での判定結果が妥当でない
場合、入力が無効である旨の表示データを作成する（ス
テップ２０９）。さらに、ステップ２０３で入力データ
の判定結果が「その他」である場合、入力データを表示
データとしてそのままセットする（ステップ２１０）。
さらに、ステップ２０８，２０９，２１０で作成された
表示データを表示装置４に出力し（ステップ２１１）、
操作終了であれば、完了する（ステップ２１２）。利用
者の操作が終了しない時はステップ２０１に戻る。さら
にステップ２０４，２０５，２０６の各認識手段のう
ち、認識処理の対象となっているものを各認識手段で並
行処理を行い、ステップ２０７での認識結果の妥当性の
判定の時、優先度の高いものから認識結果をチェック
し、最初の妥当な認識結果を採用することもできる。さ
らに優先順位の低い認識手段は認識対象から外すことも
できる。
場合、入力が無効である旨の表示データを作成する（ス
テップ２０９）。さらに、ステップ２０３で入力データ
の判定結果が「その他」である場合、入力データを表示
データとしてそのままセットする（ステップ２１０）。
さらに、ステップ２０８，２０９，２１０で作成された
表示データを表示装置４に出力し（ステップ２１１）、
操作終了であれば、完了する（ステップ２１２）。利用
者の操作が終了しない時はステップ２０１に戻る。さら
にステップ２０４，２０５，２０６の各認識手段のう
ち、認識処理の対象となっているものを各認識手段で並
行処理を行い、ステップ２０７での認識結果の妥当性の
判定の時、優先度の高いものから認識結果をチェック
し、最初の妥当な認識結果を採用することもできる。さ
らに優先順位の低い認識手段は認識対象から外すことも
できる。
【００２６】ステップ２０２において入力データを図
形、文字列、編集要求、その他のいずれかの種別とのい
ずれかという判定は入力データ処理部６で行う。この種
別の判定は入力されるデータには予め、その入力された
データが種別を示す情報が付加されている。この情報と
入力されたデータの大きさ、位置、編集状態、属性、ユ
ーザ指定、順序等を示し、この情報を参照していずれの
種別かを判定する。さらにこの入力データ処理部６で判
定できなかったデータについては各認識部に送られ、認
識結果が最も高いものを入力されたデータの種別として
判定する。
形、文字列、編集要求、その他のいずれかの種別とのい
ずれかという判定は入力データ処理部６で行う。この種
別の判定は入力されるデータには予め、その入力された
データが種別を示す情報が付加されている。この情報と
入力されたデータの大きさ、位置、編集状態、属性、ユ
ーザ指定、順序等を示し、この情報を参照していずれの
種別かを判定する。さらにこの入力データ処理部６で判
定できなかったデータについては各認識部に送られ、認
識結果が最も高いものを入力されたデータの種別として
判定する。
【００２７】図３は、ペン５により書いた入力データの
例を示す図である。
例を示す図である。
【００２８】３０１は手書きによる文字列「ＡＢＣ」を
示す。３０２は手書きによる図形である円、三角形、四
角形を示す。３０３はペンの軌跡による画面上での編集
要求を示すジェスチャである「削除要求」、「文字列編
集要求」、「改行要求」をそれぞれ示す。３０４は注意
書きやコメント等を示すメモ書きの例で、文字列「ＡＢ
Ｃ」にメモ書きの「ＦＥＧ？」を付加したものである。
示す。３０２は手書きによる図形である円、三角形、四
角形を示す。３０３はペンの軌跡による画面上での編集
要求を示すジェスチャである「削除要求」、「文字列編
集要求」、「改行要求」をそれぞれ示す。３０４は注意
書きやコメント等を示すメモ書きの例で、文字列「ＡＢ
Ｃ」にメモ書きの「ＦＥＧ？」を付加したものである。
【００２９】図４は、図３で示した手書き、編集要求、
メモ書きによる入力データを図２のフローチャートに従
って変換、清書したものである。
メモ書きによる入力データを図２のフローチャートに従
って変換、清書したものである。
【００３０】４０１は３０１の手書き文字を文字として
認識し、変換した文字列「ＡＢＣ」、４０２は３０２の
手書きによる図形を図形として認識し、変換した図形で
ある円、三角形、四角形、４０３は３０３で入力された
ペンの軌跡を編集要求と認識し、「削除要求」、「文字
列編集要求」、「改行要求」を行った結果を示す。４０
４のメモ書きは、文字列「ＡＢＣ」に付けられたコメン
ト「ＦＥＧ？」をそのまま表示したものである。
認識し、変換した文字列「ＡＢＣ」、４０２は３０２の
手書きによる図形を図形として認識し、変換した図形で
ある円、三角形、四角形、４０３は３０３で入力された
ペンの軌跡を編集要求と認識し、「削除要求」、「文字
列編集要求」、「改行要求」を行った結果を示す。４０
４のメモ書きは、文字列「ＡＢＣ」に付けられたコメン
ト「ＦＥＧ？」をそのまま表示したものである。
【００３１】図５は、ステップ２０２の判定を優先順位
を付けて行う方法の一例を示す。
を付けて行う方法の一例を示す。
【００３２】５０１の分類１は大分類として扱う。分類
１は入力されたデータの大きさ、位置、編集状態、属
性、ユーザ指定、順序を示す。５０２の分類２は、分類
１で分けられた内容を更に細分化するものである。分類
２は入力データの持つ各情報を示す。５０３の優先度
は、分類１と分類２が該当する場合、図形、文字、ジェ
スチャとしての認識の優先度を不等式で示したものであ
る。
１は入力されたデータの大きさ、位置、編集状態、属
性、ユーザ指定、順序を示す。５０２の分類２は、分類
１で分けられた内容を更に細分化するものである。分類
２は入力データの持つ各情報を示す。５０３の優先度
は、分類１と分類２が該当する場合、図形、文字、ジェ
スチャとしての認識の優先度を不等式で示したものであ
る。
【００３３】図６は、ステップ２０８の表示データに変
換する際に見やすい形状に清書する例を示す。
換する際に見やすい形状に清書する例を示す。
【００３４】入力されたデータが６０１のように端点が
交差している、また、端点が離れている状態の場合、６
０２で示されるように望ましい位置に端点を接続し、交
差や分離しないように変換し、表示する。６０３で書か
れている文字列のように指定された図形の中からはみで
てしまう場合は、６０４で示されるように文字が表示で
きる大きさに合わせて流し込みや整列の補正を行う。６
０５で書かれている線が図形の基準点に向いていない場
合は、６０６で示されるように基準点を通る向きに修正
する。６０７のように同じような形の図形が類似の位置
に書かれた場合、６０８で示されるようにグリッド補正
を行い、中心点や外接する格子の位置に合わせる。この
場合、異なる図形でも同様に行うことができる。６０９
で示すように交差したくない線が書かれた場合、６１０
で示されるように図形と線が交差しない位置に線を補正
した表示する。
交差している、また、端点が離れている状態の場合、６
０２で示されるように望ましい位置に端点を接続し、交
差や分離しないように変換し、表示する。６０３で書か
れている文字列のように指定された図形の中からはみで
てしまう場合は、６０４で示されるように文字が表示で
きる大きさに合わせて流し込みや整列の補正を行う。６
０５で書かれている線が図形の基準点に向いていない場
合は、６０６で示されるように基準点を通る向きに修正
する。６０７のように同じような形の図形が類似の位置
に書かれた場合、６０８で示されるようにグリッド補正
を行い、中心点や外接する格子の位置に合わせる。この
場合、異なる図形でも同様に行うことができる。６０９
で示すように交差したくない線が書かれた場合、６１０
で示されるように図形と線が交差しない位置に線を補正
した表示する。
【００３５】図７は、図１で示す入力装置１と表示装置
４が別装置で構成される例を示す。
４が別装置で構成される例を示す。
【００３６】図８は、図１で示す入力装置１と表示装置
４が一体化し、入力表示装置１２を付加した例を示す。
この入力表示装置１２の中にデータ処理装置２とデータ
格納装置３を実装させることもできる。
４が一体化し、入力表示装置１２を付加した例を示す。
この入力表示装置１２の中にデータ処理装置２とデータ
格納装置３を実装させることもできる。
【００３７】図９は、電子黒板等の入力装置１３と投影
装置等の表示装置１４を付加した例を示す。
装置等の表示装置１４を付加した例を示す。
【００３８】図１０は、１つのデータ処理装置に複数の
入力装置を付加した例を示す。タブレット１５，１６、
入力装置１７，１８のように複数個の入力装置が接続す
ることができる。制御装置１９は処理装置に対して一度
に１つのペンに入力を受け付ける装置であり、この入力
制御方法は先着順、優先付け、ラウンドロビン（巡回
式）等の方法を用いる。
入力装置を付加した例を示す。タブレット１５，１６、
入力装置１７，１８のように複数個の入力装置が接続す
ることができる。制御装置１９は処理装置に対して一度
に１つのペンに入力を受け付ける装置であり、この入力
制御方法は先着順、優先付け、ラウンドロビン（巡回
式）等の方法を用いる。
【００３９】図１１は、複数の処理装置をネットワーク
２０で接続した例を示す。ネットワーク２０に図７，図
８，図９，図１０で示した各構成を任意の複数個接続で
きる。なお、接続するネットワークは有線、無線、ロー
カルエリア、大域的等の方式を利用することができる。
２０で接続した例を示す。ネットワーク２０に図７，図
８，図９，図１０で示した各構成を任意の複数個接続で
きる。なお、接続するネットワークは有線、無線、ロー
カルエリア、大域的等の方式を利用することができる。
【００４０】以上、本発明を実施例に基づき具体的に説
明したが、本発明は、前記実施例に限定されるものでは
なく、その要旨を逸脱しない範囲において種々変更し得
ることは言うまでもない。
明したが、本発明は、前記実施例に限定されるものでは
なく、その要旨を逸脱しない範囲において種々変更し得
ることは言うまでもない。
【００４１】
【発明の効果】本発明によれば、文字と図形が混在する
情報の入力・編集操作を全てペンを用いることにより入
力、コマンドを意識することなく、文字、図形、コマン
ド処理ができる。
情報の入力・編集操作を全てペンを用いることにより入
力、コマンドを意識することなく、文字、図形、コマン
ド処理ができる。
【図１】 本発明の一実施例の基本システムを示す構成
図、
図、
【図２】 本発明の動作処理手順を示すフローチャー
ト、
ト、
【図３】 入力データを示す図、
【図４】 表示データを示す図、
【図５】 認識手段の優先順位を判定方法を示す図、
【図６】 表示する際に見やすい形状や配置に清書する
例を示す図、
例を示す図、
【図７】 入力装置と表示装置が異なる装置で構成され
る構成図、
る構成図、
【図８】 入力装置と表示装置が一体構成された図、
【図９】 入力装置と表示装置の位置を利用者が調整で
きる図、
きる図、
【図１０】 タブレットと入力表示装置を振り分けを示
す図、
す図、
【図１１】 複数の機器構成をネットワーク上で接続す
ることを示す図。
ることを示す図。
１…入力装置、２…データ処理部、３…データ格納装
置、４…表示装置、５…ペン、６…入力データ処理部、
７…文字認識部、８…図形認識部、９…ジェスチャ認識
部、１０…表示データ生成部、１１…データ記憶装置、
１２…入力表示装置、１３…電子黒板、１４…投影装
置、１５…タブレット、１９…制御装置、２０…ネット
ワーク。
置、４…表示装置、５…ペン、６…入力データ処理部、
７…文字認識部、８…図形認識部、９…ジェスチャ認識
部、１０…表示データ生成部、１１…データ記憶装置、
１２…入力表示装置、１３…電子黒板、１４…投影装
置、１５…タブレット、１９…制御装置、２０…ネット
ワーク。
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.5 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｇ０６Ｆ 15/20 ５８６ Ｅ 9288−5Ｌ 15/62 ３２０ Ｋ 9365−5Ｌ (72)発明者 臼田 裕 神奈川県横浜市中区尾上町６丁目81番地 日立ソフトウェアエンジニアリング株式会 社内
Claims (7)
- 【請求項１】 ペンによる入力手段を持つ計算機システ
ムにおいて、文字認識手段と、図形認識手段と、編集要
求認識手段と、編集結果を格納する手段と、編集結果を
表示する手段とを具備し、当該ペンによって描かれた軌
跡を文字または図形または編集要求のいずれかの種別で
あるかを判定認識し、該認識結果を表示することを特徴
とするペン入力図形編集システム。 - 【請求項２】 請求項１記載の該文字認識手段と、該図
形認識手段と、該編集要求認識手段によって、当該ペン
によって描かれた文字または図形または編集要求のいず
れかの種別と判定したとき、前記各認識手段に優先順位
を付加することを特徴とするペン入力図形編集システ
ム。 - 【請求項３】 請求項２記載の前記各認識手段に付加さ
れた優先順位を動的に変更することを特徴とするペン入
力図形編集システム。 - 【請求項４】 ペンによって入力された軌跡を対象とし
ている全ての認識処理を平行に実施し、認識結果のう
ち、優先度の高い種別を認識結果として採用することを
特徴とする請求項２記載のペン入力図形編集システム。 - 【請求項５】 ペンによる軌跡または以前の編集結果に
よって与えられた情報を参照し、優先度を判定すること
を特徴とする請求項２記載のペン入力図形編集システ
ム。 - 【請求項６】 ペンによるデータの入力の際にペンの軌
跡に生じる誤差を補正し、見やすい形状または配置に変
換し表示することを特徴とする請求項２記載のペン入力
図形編集システム。 - 【請求項７】 ペンによる軌跡を認識せずに表示するこ
とを特徴とする請求項２記載のペン入力図形編集システ
ム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP184793A JPH06208654A (ja) | 1993-01-08 | 1993-01-08 | ペン入力図形編集システム |
| GB9400169A GB2274186B (en) | 1993-01-08 | 1994-01-06 | System for editing characters and graphics by pen point entry |
| US08/646,610 US5913221A (en) | 1993-01-08 | 1996-05-08 | Automated recognition of and distinction among graphics input, text input, and editing commands in a pen based computer |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP184793A JPH06208654A (ja) | 1993-01-08 | 1993-01-08 | ペン入力図形編集システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH06208654A true JPH06208654A (ja) | 1994-07-26 |
Family
ID=11512947
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP184793A Pending JPH06208654A (ja) | 1993-01-08 | 1993-01-08 | ペン入力図形編集システム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US5913221A (ja) |
| JP (1) | JPH06208654A (ja) |
| GB (1) | GB2274186B (ja) |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0816723A (ja) * | 1994-06-30 | 1996-01-19 | Canon Inc | 画像認識装置及びその方法とデータ入力装置及びその方法 |
| JPH09245186A (ja) * | 1996-03-08 | 1997-09-19 | Casio Comput Co Ltd | 画像処理装置 |
| JPH1069344A (ja) * | 1996-06-14 | 1998-03-10 | Internatl Business Mach Corp <Ibm> | コンピュータでジェスチャと手書き文字を区別する方法及びシステム |
| JPH10111933A (ja) * | 1996-10-03 | 1998-04-28 | Meidensha Corp | 線分の編集処理方法 |
| US6078915A (en) * | 1995-11-22 | 2000-06-20 | Fujitsu Limited | Information processing system |
| JP2001175407A (ja) * | 2000-10-20 | 2001-06-29 | Sharp Corp | 文書情報処理装置および文書情報処理方法 |
| US6317762B1 (en) | 1995-11-22 | 2001-11-13 | Fujitsu Limited | Document creating apparatus creates free format document from handwritten data converting into normalized size |
| US6397233B1 (en) | 1995-11-22 | 2002-05-28 | Fujitsu Limited | Document processing apparatus and computer program product therefor |
| WO2002084993A1 (en) * | 2001-04-09 | 2002-10-24 | Omron Corporation | Image printing apparatus and image printing method |
| JP2007511814A (ja) * | 2003-10-15 | 2007-05-10 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 素描を通じたユーザーインターフェース記述の自動生成 |
| JP2008071300A (ja) * | 2006-09-15 | 2008-03-27 | Ntt Docomo Inc | 移動体端末装置及び文書編集方法 |
| WO2010061584A3 (ja) * | 2008-11-25 | 2010-07-29 | Yoshida Kenji | 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート |
| JP2013033548A (ja) * | 2012-11-12 | 2013-02-14 | Kenji Yoshida | 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート |
| JP2013061955A (ja) * | 2012-10-29 | 2013-04-04 | Kenji Yoshida | 手書き入出力システム |
| US8644612B2 (en) | 2008-12-26 | 2014-02-04 | Canon Kabushiki Kaisha | Information processing apparatus and locus data recognition method |
| US8665222B2 (en) | 2003-01-30 | 2014-03-04 | Fujitsu Limited | Handwriting-input device and method |
| JP2014041516A (ja) * | 2012-08-23 | 2014-03-06 | Casio Comput Co Ltd | データ処理装置及びプログラム |
| WO2018034052A1 (ja) * | 2016-08-19 | 2018-02-22 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
| US9910643B2 (en) | 2013-08-21 | 2018-03-06 | Mitsubishi Electric Corporation | Program for program editing |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2845149B2 (ja) * | 1994-12-28 | 1999-01-13 | 日本電気株式会社 | 手書文字入力装置および手書文字入力方法 |
| JP4356847B2 (ja) * | 1995-11-10 | 2009-11-04 | 万太郎 矢島 | フィールド定義情報生成方法、ならびび、フィールド定義情報生成装置 |
| JP3694149B2 (ja) * | 1997-07-07 | 2005-09-14 | 株式会社リコー | 画像検索装置、画像検索用キーテキストの生成方法、並びにその装置としてコンピュータを機能させるためのプログラムおよびその方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体 |
| US6279014B1 (en) * | 1997-09-15 | 2001-08-21 | Xerox Corporation | Method and system for organizing documents based upon annotations in context |
| US6766494B1 (en) * | 1998-06-15 | 2004-07-20 | Fuji Xerox Co., Ltd. | Method and system for creating ad-hoc links from free-form ink |
| US7302641B1 (en) * | 1999-12-03 | 2007-11-27 | Mantaro Yajima | Information processing method and apparatus for making document |
| US7533338B2 (en) * | 2003-08-21 | 2009-05-12 | Microsoft Corporation | Electronic ink processing |
| USD533183S1 (en) * | 2005-04-22 | 2006-12-05 | Microsoft Corporation | Icon for a portion of a display screen |
| US8643605B2 (en) | 2005-11-21 | 2014-02-04 | Core Wireless Licensing S.A.R.L | Gesture based document editor |
| US9141355B1 (en) * | 2007-04-18 | 2015-09-22 | Wolfram Research, Inc. | Receiving and evaluating generalized input |
| USD593124S1 (en) * | 2008-10-24 | 2009-05-26 | Microsoft Corporation | Icon for a display screen |
| USD599362S1 (en) * | 2008-10-24 | 2009-09-01 | Microsoft Corporation | User interface for a display screen |
| US20120005632A1 (en) * | 2010-06-30 | 2012-01-05 | Broyles Iii Paul J | Execute a command |
| CN102736830A (zh) * | 2011-04-13 | 2012-10-17 | 联想移动通信科技有限公司 | 一种手写输入法和终端设备 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6441081A (en) * | 1987-08-06 | 1989-02-13 | Nippon Telegraph & Telephone | System for inputting and editing on-line handwriting character graphic |
| JPH04324587A (ja) * | 1991-04-25 | 1992-11-13 | Hitachi Ltd | パターン認識方法とその装置 |
| JPH06111073A (ja) * | 1992-09-25 | 1994-04-22 | Sanyo Electric Co Ltd | 手書き情報認識装置 |
| JPH06119496A (ja) * | 1992-10-07 | 1994-04-28 | Sanyo Electric Co Ltd | 手書き情報処理装置 |
Family Cites Families (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4815029A (en) * | 1985-09-23 | 1989-03-21 | International Business Machines Corp. | In-line dynamic editor for mixed object documents |
| JPS62190565A (ja) * | 1986-02-18 | 1987-08-20 | Toshiba Corp | 手書き図形清書装置 |
| US4972496A (en) * | 1986-07-25 | 1990-11-20 | Grid Systems Corporation | Handwritten keyboardless entry computer system |
| GB2199169A (en) * | 1986-12-19 | 1988-06-29 | Sec Dep For Trade & Industry T | Machine editing of free-hand work |
| JPS6413682A (en) * | 1987-07-08 | 1989-01-18 | Toshiba Corp | Handwriting information processor |
| US5113492A (en) * | 1987-09-16 | 1992-05-12 | Canon Kabushiki Kaisha | Apparatus for processing character and image data |
| JP2695802B2 (ja) * | 1987-11-16 | 1998-01-14 | 株式会社日立製作所 | 電子ファイル装置 |
| JP2589999B2 (ja) * | 1988-03-18 | 1997-03-12 | 株式会社竹中工務店 | 図形入出力装置 |
| US4933880A (en) * | 1988-06-15 | 1990-06-12 | International Business Machines Corp. | Method for dynamically processing non-text components in compound documents |
| US5204946A (en) * | 1988-06-17 | 1993-04-20 | Canon Kabushiki Kaisha | Mixed text and image data processing |
| US5131053A (en) * | 1988-08-10 | 1992-07-14 | Caere Corporation | Optical character recognition method and apparatus |
| US5459826A (en) * | 1990-05-25 | 1995-10-17 | Archibald; Delbert M. | System and method for preparing text and pictorial materials for printing using predetermined coding and merging regimen |
| US5233685A (en) * | 1990-06-12 | 1993-08-03 | Wordperfect Corporation | Method and apparatus for integrated graphical and textual character printing |
| US5347295A (en) * | 1990-10-31 | 1994-09-13 | Go Corporation | Control of a computer through a position-sensed stylus |
| KR930010845B1 (ko) * | 1990-12-31 | 1993-11-12 | 주식회사 금성사 | 화상정보의 그림/문자 자동분리방법 |
| JPH05225181A (ja) * | 1991-03-14 | 1993-09-03 | Nec Corp | 編集装置 |
| US5220649A (en) * | 1991-03-20 | 1993-06-15 | Forcier Mitchell D | Script/binary-encoded-character processing method and system with moving space insertion mode |
| US5448692A (en) * | 1991-03-27 | 1995-09-05 | Ricoh Company, Ltd. | Digital image processing device involving processing of areas of image, based on respective contour line traces |
| US5388195A (en) * | 1991-03-28 | 1995-02-07 | Fuji Xerox Co., Ltd. | Image processing system with editing area correcting function |
| US5261038A (en) * | 1991-09-20 | 1993-11-09 | Hewlett-Packard Company | Pen qualification and verification in a graphics plotter |
| US5335290A (en) * | 1992-04-06 | 1994-08-02 | Ricoh Corporation | Segmentation of text, picture and lines of a document image |
-
1993
- 1993-01-08 JP JP184793A patent/JPH06208654A/ja active Pending
-
1994
- 1994-01-06 GB GB9400169A patent/GB2274186B/en not_active Expired - Fee Related
-
1996
- 1996-05-08 US US08/646,610 patent/US5913221A/en not_active Expired - Lifetime
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6441081A (en) * | 1987-08-06 | 1989-02-13 | Nippon Telegraph & Telephone | System for inputting and editing on-line handwriting character graphic |
| JPH04324587A (ja) * | 1991-04-25 | 1992-11-13 | Hitachi Ltd | パターン認識方法とその装置 |
| JPH06111073A (ja) * | 1992-09-25 | 1994-04-22 | Sanyo Electric Co Ltd | 手書き情報認識装置 |
| JPH06119496A (ja) * | 1992-10-07 | 1994-04-28 | Sanyo Electric Co Ltd | 手書き情報処理装置 |
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0816723A (ja) * | 1994-06-30 | 1996-01-19 | Canon Inc | 画像認識装置及びその方法とデータ入力装置及びその方法 |
| US6078915A (en) * | 1995-11-22 | 2000-06-20 | Fujitsu Limited | Information processing system |
| US6317762B1 (en) | 1995-11-22 | 2001-11-13 | Fujitsu Limited | Document creating apparatus creates free format document from handwritten data converting into normalized size |
| US6397233B1 (en) | 1995-11-22 | 2002-05-28 | Fujitsu Limited | Document processing apparatus and computer program product therefor |
| JPH09245186A (ja) * | 1996-03-08 | 1997-09-19 | Casio Comput Co Ltd | 画像処理装置 |
| JPH1069344A (ja) * | 1996-06-14 | 1998-03-10 | Internatl Business Mach Corp <Ibm> | コンピュータでジェスチャと手書き文字を区別する方法及びシステム |
| JPH10111933A (ja) * | 1996-10-03 | 1998-04-28 | Meidensha Corp | 線分の編集処理方法 |
| JP2001175407A (ja) * | 2000-10-20 | 2001-06-29 | Sharp Corp | 文書情報処理装置および文書情報処理方法 |
| WO2002084993A1 (en) * | 2001-04-09 | 2002-10-24 | Omron Corporation | Image printing apparatus and image printing method |
| US8665222B2 (en) | 2003-01-30 | 2014-03-04 | Fujitsu Limited | Handwriting-input device and method |
| JP2007511814A (ja) * | 2003-10-15 | 2007-05-10 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 素描を通じたユーザーインターフェース記述の自動生成 |
| JP2008071300A (ja) * | 2006-09-15 | 2008-03-27 | Ntt Docomo Inc | 移動体端末装置及び文書編集方法 |
| CN102224484A (zh) * | 2008-11-25 | 2011-10-19 | 吉田健治 | 手写输入输出系统、手写输入薄板、信息输入系统、信息输入辅助薄板 |
| JPWO2010061584A1 (ja) * | 2008-11-25 | 2012-04-26 | 吉田 健治 | 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート |
| WO2010061584A3 (ja) * | 2008-11-25 | 2010-07-29 | Yoshida Kenji | 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート |
| CN105094386A (zh) * | 2008-11-25 | 2015-11-25 | 吉田健治 | 手写输入输出系统、手写输入薄板、信息输入系统、信息输入辅助薄板 |
| US9594439B2 (en) | 2008-11-25 | 2017-03-14 | Kenji Yoshida | Handwriting input/output system, handwriting input sheet, information input system, and information input assistance sheet |
| US8644612B2 (en) | 2008-12-26 | 2014-02-04 | Canon Kabushiki Kaisha | Information processing apparatus and locus data recognition method |
| JP2014041516A (ja) * | 2012-08-23 | 2014-03-06 | Casio Comput Co Ltd | データ処理装置及びプログラム |
| US9524029B2 (en) | 2012-08-23 | 2016-12-20 | Casio Computer Co., Ltd | Indeterminable gesture recognition using accumulated probability factors |
| JP2013061955A (ja) * | 2012-10-29 | 2013-04-04 | Kenji Yoshida | 手書き入出力システム |
| JP2013033548A (ja) * | 2012-11-12 | 2013-02-14 | Kenji Yoshida | 手書き入出力システム、手書き入力シート、情報入力システム、情報入力補助シート |
| US9910643B2 (en) | 2013-08-21 | 2018-03-06 | Mitsubishi Electric Corporation | Program for program editing |
| WO2018034052A1 (ja) * | 2016-08-19 | 2018-02-22 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
| US10956765B2 (en) | 2016-08-19 | 2021-03-23 | Sony Corporation | Information processing device and information processing method |
Also Published As
| Publication number | Publication date |
|---|---|
| GB2274186A (en) | 1994-07-13 |
| GB2274186B (en) | 1996-06-19 |
| US5913221A (en) | 1999-06-15 |
| GB9400169D0 (en) | 1994-03-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH06208654A (ja) | ペン入力図形編集システム | |
| US5534893A (en) | Method and apparatus for using stylus-tablet input in a computer system | |
| EP0597379B1 (en) | Pen input processing apparatus | |
| US5479596A (en) | Method and apparatus for formatting paragraphs | |
| US7174042B1 (en) | System and method for automatically recognizing electronic handwriting in an electronic document and converting to text | |
| JP4235500B2 (ja) | 認識されたテキストおよびオブジェクトと共にインクオブジェクトを表示しリンクする方法、およびシステム | |
| EP0243925B1 (en) | Instruction input system for electronic processor | |
| US5455901A (en) | Input device with deferred translation | |
| US5583946A (en) | Method and apparatus for recognizing gestures on a computer system | |
| US5956423A (en) | Method and system for data entry of handwritten symbols | |
| US6535897B1 (en) | System and methods for spacing, storing and recognizing electronic representations of handwriting printing and drawings | |
| US7848573B2 (en) | Scaled text replacement of ink | |
| JP4694606B2 (ja) | ジェスチャ判定方法 | |
| US7409089B2 (en) | Writing guide for a free-form document editor | |
| US6249606B1 (en) | Method and system for gesture category recognition and training using a feature vector | |
| WO1995034047A1 (en) | System and methods for spacing, storing and recognizing electronic representations of handwriting, printing and drawings | |
| JP2010020795A (ja) | インクとのインターフェース | |
| EP0701720A1 (en) | Method and apparatus for grouping and manipulating electronic representations of handwriting, printing and drawings | |
| JP2003303047A (ja) | 画像入力及び表示システム、ユーザインタフェースの利用方法並びにコンピュータで使用可能な媒体を含む製品 | |
| JPH06332610A (ja) | 手書き情報入力処理方式 | |
| JP2000250866A (ja) | 電子書き込みペンツールと電子マーカツールを自動的に選択する方法 | |
| KR100713407B1 (ko) | 펜 컴퓨팅 시스템에서의 펜 입력 방법 및 장치 | |
| JP3353954B2 (ja) | 手書き入力表示方法および手書き入力表示装置 | |
| US7370288B1 (en) | Method and system for selecting objects on a display device | |
| US7427984B2 (en) | Point erasing |