JP2000250866A - 電子書き込みペンツールと電子マーカツールを自動的に選択する方法 - Google Patents

電子書き込みペンツールと電子マーカツールを自動的に選択する方法

Info

Publication number
JP2000250866A
JP2000250866A JP2000045528A JP2000045528A JP2000250866A JP 2000250866 A JP2000250866 A JP 2000250866A JP 2000045528 A JP2000045528 A JP 2000045528A JP 2000045528 A JP2000045528 A JP 2000045528A JP 2000250866 A JP2000250866 A JP 2000250866A
Authority
JP
Japan
Prior art keywords
stroke
tool
text
pen
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2000045528A
Other languages
English (en)
Other versions
JP3705986B2 (ja
Inventor
J Fang Andrew
アンドリュウ・ジェイ・フアング
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HP Inc
Original Assignee
Hewlett Packard Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Co filed Critical Hewlett Packard Co
Publication of JP2000250866A publication Critical patent/JP2000250866A/ja
Application granted granted Critical
Publication of JP3705986B2 publication Critical patent/JP3705986B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/171—Editing, e.g. inserting or deleting by use of digital ink

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Document Processing Apparatus (AREA)
  • Calculators And Similar Devices (AREA)

Abstract

(57)【要約】 【課題】書き込みペン機能とハイライトペンマーカ機能
を自動的に選択し、特定な筆跡、修正、注釈等によりよ
く適合するために、微細調整可能なものを提供する。 【解決手段】本発明は各ペンストロークの形状分析を利
用し、具体的にはストロークの長さを動的に求める。こ
の長さが２つの同じポイント間での直線の長さに近く、
ストロークが典型的な手書きストロークよりも長い場
合、ハイライト機能が自動的に選択する。本発明におい
て、ストロークが直線であるかどうかの判断は、直線距
離が設定されたピクセル数によっておこなわれる。ま
た、ストロークはペンツールが選択された状態で開始さ
せる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、文書作成および編
集のためのソフトウェアツールに関し、特に、ユーザに
よる入力の分析に基づいて、自動的に上記ツールを選択
する方法に関する。
【０００２】
【従来の技術】紙の文書で作業する際に、読み手は通常
２つの方法で文書に接し、加筆する（interact）。すな
わち、１）先細のペンを使用して、余白にメモを手書き
する、および２）ペン先の幅広いハイライトマーカを使
用して、重要なテキストを強調する、ことができる。真
面目な読み手は一般に、自由に使用できる両方のツール
を有している。電子リーディング／注釈装置においてこ
の種の加筆、相互作用をサポートするために、一般にユ
ーザには、各種編集ツール（各色のペン、蛍光ペン、消
しゴム等）、ならびにこれらのツールのうちの１つを選
択的に作動させる手段が提供される。広範なツールが利
用可能であるが、大抵のユーザはほぼ例外なく、加筆す
るために、普通のペンツールか、またはハイライトペン
ツールのいずれかを選ぶ。
【０００３】電子リーディング／注釈装置の最も簡便な
タイプは、表示画面と組み合わされたタッチパッドを備
える。一般に、画面は液晶ディスプレイ（ＬＣＤ）であ
る。ユニットに設けられている書き込みスタイラスを使
用して、ユーザ／読み手は、画面上に直接描画するか、
または書き込むことができる。画面上のスタイラスポイ
ントの経路は、ビットマップ化されたイメージとして記
録することができる。あるいは、手書きのテキストをＡ
ＳＣＩＩキャラクタに変換し、ユーザがハイライトした
いと望むＡＳＣＩＩテキストをハイライト属性でタグ付
けすることができる。
【０００４】タッチパッド表示スクリーンは、スケジュ
ーリングおよびその他の高度な移動性の操作のために最
適化されたオペレーティングシステムを内蔵した、超小
型パーソナルコンピュータであるパーソナルデジタルア
シスタント（ＰＤＡ）において広範な用途が見出されて
いる。過去数年間に、ＰＤＡの人気は急上昇している。
シャープ、カシオ、フィリップス、３−Ｃｏｍｍ、およ
びヒューレットパッカード等の企業が競争に加わってい
る。大部分は、フラッシュメモリ、小型液晶ディスプレ
イタッチパッドスクリーン、かろうじて使用可能な小型
キーボードであってもよいユーザ入力装置、および／ま
たは画面に内蔵されたタッチパッドならびにＰＤＡと可
搬性の低いコンピュータとの間でファイルを転送するた
めの通信ポートを備える。高性能ＰＤＡは、描画、文書
処理、および表計算ソフトウェアだけでなく、モデムお
よび通信ソフトウェアを組み込むことができる。書き込
みスタイラス、すなわち「ペン」を提供することもで
き、ユーザはこれを用いて、タッチパッドスクリーン上
に書き込んだり、描画することができる。ほぼすべての
ＰＤＡは、あまりに小さすぎて、ブラインドタッチに十
分な大きさのキーボードを組み込むことができないた
め、タッチパッド機能はＰＤＡに非常に有用である。こ
うして、手書きおよび描画がビットマップ化されたパタ
ーンとして記憶される。ＰＤＡの多くに供給される書き
込み認識ソフトウェアにより、ユーザの手書きしたもの
をＡＳＣＩＩテキストに変換できる。デスクトップおよ
びラップトップコンピュータシステムと比較して、ＰＤ
Ａは一般に、メモリ記憶能力が非常に限られている。し
かし、ＰＤＡに与えられるメモリの平均容量は、急速に
増加している。すでに、１６メガバイトのフラッシュメ
モリを有するＰＤＡが入手可能である。ＰＤＡのメモリ
に小説または教科書全体をロードできるようになるにつ
れ、ＰＤＡの電子編集および注釈装置としての広範な用
途が見出されそうである。
【０００５】ラップトップコンピュータは、ほぼ例外な
くＬＣＤディスプレイを備えている。過去１年間に、Ｌ
ＣＤ技術を利用したフラットスクリーンディスプレイは
十分安価になってきており、デスクトップシステムに使
用される陰極線管（ＣＲＴ）ディスプレイに取って代わ
り始めている。タッチパッドの機能性は、ＬＣＤディス
プレイに容易に組み込むことができるため、ラップトッ
プおよびデスクトップシステム両方の多くがすぐに、タ
ッチパッドの機能性を組み込むようになる。かかるシス
テムが入手可能になると、文書の電子的な編集および注
釈がさらに普及するようになるであろう。
【０００６】
【発明が解決しようとする課題】ユーザが、利用可能な
グラフィック作成ツールのパレットから書き込みペン機
能、あるいはハイライトペンマーカ機能のいずれかをは
っきりと選択する必要のない、電子リーディング／注釈
装置のための自動書き込みツール選択システムが必要と
されている。該システムは、ユーザの特定な筆跡（writ
ing style）ならびに編集および注釈の必要性によりよ
く適合するために、微細調整可能であるべきである。さ
らに望まれる機能は、選択プロセスが動的であるととも
に、ハイライトストロークがシステムによってきちんと
引き直されることである。
【０００７】
【課題を解決するための手段】本発明は、手書きタスク
に用いられる電子書き込みペンツールか、ハイライトタ
スクに用いられる電子マーカツールかを自動的に選択す
るための、電子リーディング／注釈装置と併用して採用
可能な方法から構成される。手書きは通常、方向を頻繁
に変えた半径の小さな曲線からなるが、ハイライトスト
ロークは通常、長く滑らかであり、方向は殆ど変わらな
い。
【０００８】自動選択方法は、各ペンストロークの形状
分析を利用する。より具体的には、各ペンストロークの
長さが、開始ポイントおよび後のポイントの間で動的に
計算される。ストロークの長さが２つの同じポイント間
での直線の長さに近く、ストロークが典型的な手書きス
トロークよりも長い場合、ハイライト機能が自動的に選
択される。「近い」についての正確な決定は、調整可能
なパラメータである。経験的に、ストロークの距離が直
線距離の長さの１１０％よりも短いと、ハイライト機能
の選択に効果的に役立つことが証明されている。
【０００９】自動選択プロセスが即時であるように見せ
るために、実際のストローク長と直線長との比較がオン
ラインまたはオンザフライで行われる。すなわち、各ス
トロークの終わりにオフラインで計算が開始されるので
はなく、新しい開始ストロークポイントが生成される際
に、計算が開始される。
【００１０】ハイライト機能を選択する前に、さらなる
要件をユーザの書き込んだストロークに課してもよい。
一般的な規則として、ハイライトは表示されているテキ
スト行に沿う。テキストはほぼ常に水平な行からなる形
式で表示されるため、ハイライトは通常、１つまたは複
数の行に沿う。しかし、ユーザによっては、ハイライト
のショートカットとしてテキストの多数の行の前または
後に１つまたは複数の縦のストロークを配することを選
ぶことがある。これは、ユーザがテキストの大きなセク
ションをハイライトしたい場合に特に当てはまる。この
ため、ユーザは通常、表示画面に対して、ハイライトス
トロークを水平または垂直のいずれかであるようにす
る。本選択方法へのさらなる強化として、ハイライトス
トロークは、完全に水平になるかまたは完全に垂直にな
るように適合される。
【００１１】自動選択プロセスをより堅牢なものとする
ために、他に３つの改善策が採られている。第１に、ス
トロークが直線を意味するものであるかどうかについて
の判断は、直線の距離が設定されたピクセル数を越える
まで延ばされる。この機能は、手書きには多くの短く直
線に近い部分が含まれ、書かれた語がそのような部分で
始まることが多いことを認識している。第２に、ストロ
ークを開始する際に、オンラインアルゴリズムが不必要
にペンツールとマーカツールとにころころ変わらないよ
うにするために、アルゴリズムはペンツールが選択され
た状態で開始する。常に書き込みペンで開始する論的根
拠は、書き込みペンが最も一般的に使用される書き込み
ツールであるということである。
【００１２】本発明は電子スタイラスおよびタッチパッ
ドスクリーンで最も都合よく実施できるが、本発明はい
かなるポインティングデバイス、例えばマウス、トラッ
クボール、またはタッチパッドを採用することができ
る。
【００１３】
【発明の実施の形態】文書のリーディング、編集および
注釈のための電子装置は、文書がその中にロードされる
デジタル半導体メモリと、文書またはその一部を表示す
ることができる表示画面とを備える。ユーザが使いやす
い、こういったリーディング／編集／注釈装置はタッチ
パッド機能を組み込んでおり、これにより、電子スタイ
ラスで画面の表面上につけられたトレースをビットマッ
プ化された画像として記憶することができる。タッチパ
ッド機能は、液晶マトリクスディスプレイ等のフラット
パネルスクリーンに容易に組み込むことができる。一般
に、電子書き込みおよび編集ツールのパレットは、書き
込みペンおよびハイライトマーカを含み、読み手が利用
することができる。本発明は、文書にメモを付したり、
テキストに校正マークを配したりなど、手書きおよび／
または描画タスクに用いられる電子書き込みペンツール
と、テキストのハイライトタスクに用いられる電子マー
カツールとを自動的に選択するための方法を含む。本方
法は、マウス、トラックボールや、タッチパッド等のい
ずれのポインティングデバイスにも採用することができ
るが、ＣＡＤ（computer aided drafting）プログラム
と組み合わせてマウスまたはトラックボールを使用し
て、テキストを手書きしようと試みたことがある人はい
ずれも、タッチパッド表示画面上で電子スタイラスを使
用する方がはるかに具合がよいことを認められる。
【００１４】自動選択は、手書きしたものが通常、方向
を頻繁に変えた半径の小さな曲線からなるという観察を
利用する。一方、ハイライトストロークは通常、長く滑
らかであり、方向は殆ど変わらない。電子スタイラスに
よるものであるか他のポインティングデバイスによるも
のであるかにかかわらず、ユーザストロークそれぞれの
形状が、選択アルゴリズムによって分析される。各スト
ロークは、開始ポイントと終了ポイントとを有してい
る。各ペンストロークの長さは、開始ポイントと終了ポ
イントの間で計算される。ストロークの長さが２つの同
じポイント間の直線距離の長さに近い場合には、ユーザ
がハイライト操作を実行していると想定し、ハイライト
機能が自動的に選択される。「近い」についての正確な
決定は、調整可能なパラメータである。経験的に、スト
ロークの距離が直線距離の長さの１１０％よりも短い
と、ハイライト機能の選択に効果的に役立つことが証明
されている。
【００１５】ハイライト機能を選択する前に、さらなる
要件をユーザの書き込んだストロークに課してもよい。
一般的な規則として、ハイライトは表示されているテキ
スト行に沿う。テキストはほぼ常に水平な行からなる形
式で表示されるため、ハイライトは通常、１つまたは複
数の行に沿う。ユーザによっては、テキストの多数の行
の前または後に１つまたは複数の縦のストロークを配す
ることを選ぶことがある。これは、ユーザがテキストの
大きなセクションをハイライトしたい場合に特に当ては
まる。このため、ユーザは通常、表示画面に対して、ハ
イライトストロークを水平または垂直いずれかであるよ
うにする。本選択方法へのさらなる改善として、ハイラ
イトストロークは、完全に水平になるかまたは完全に垂
直になるように適合される。水平である場合には、適合
プロセスはそれをテキスト行でセンタリングする。垂直
または水平についての公差は調整可能に設定することが
できる。しかし、真垂直または真水平から約５度の公差
が適当な公差であると考えられる。
【００１６】自動選択プロセスが即時であるように見せ
るために、実際のストローク長と直線長との比較がオン
ラインまたはオンザフライで行われる。すなわち、オフ
ライン（すなわち、各ストロークの終わり）で計算が開
始されるのではなく、新しい開始ストロークポイントが
生成される際に、計算が開始される。したがって、スト
ロークの開始ポイントから、終了ポイントではなく、開
始ポイントからストロークが完了する前にユーザの意図
を確認するのに十分離れたポイントまでの長さが計算さ
れる。
【００１７】自動選択プロセスをより堅牢なものとする
ために、他に２つの改善策が採られている。第１に、ス
トロークが直線を意図するものであるかどうかについて
の判断は、直線の距離が設定されたピクセル数を越える
まで延ばされる。この機能は、手書きには多くの短くて
直線に近い部分が含まれ、書かれた語がそのような部分
で始まることが多いことを認識している。第２に、スト
ロークを開始する際に、オンラインアルゴリズムが不必
要にペンツールとマーカツールとにころころ変わらない
ようにするために、書き込みペンツールが最初に選択さ
れる。常に書き込みペンで開始する論的根拠は、書き込
みペンが最も一般的に使用される書き込みツールである
ということである。あるいは、いずれのツールも一旦選
択されると、アルゴリズムが他方のツールが意図されて
いると判断するまで、存続される。次のストロークを開
始するにあたり、すでに選択されている書き込みツール
を継続することについての論的根拠は、ハイライト等の
特定の動作が多数の連続した行をハイライトするために
多数のストロークを要するためである。同様に、書き込
みペンが一旦選択されると、ユーザは多数のストローク
を要する多数の文字を書こうと意図する。
【００１８】次に図１を参照して、サンプルテキスト１
４の１段落が、フラットタッチスクリーンディスプレイ
１１に電子的に表示される。ディスプレイ１１は、フレ
ーム状ウィンドウ１２を有するエンクロージャ１３で囲
まれている。表示されているテキスト１４の一部には、
表示されている段落の３番目の文をハイライトする、５
本のストローク１５が引かれている。このストロークは
あるタイプのポインティングデバイス、たとえばマウ
ス、トラックボール、タッチパッドポインタ、専用スタ
イラス、または画面の表面を横切るように動かしたユー
ザの指先、で記されたものである。なお、５本のストロ
ークはいずれも完全な直線ではない。完全な直線だけが
幾何学的抽象概念であるが、ユーザがストロークを段落
の３番目の文を構成するテキスト行に重なるように意図
したことは明らかである。各ストロークの少しの部分を
分析するだけで、ストロークの方向および意図される直
線性も容易に認められる。このことにより、適切な書き
込み／マーカツールをオンザフライ（すなわちストロー
クが完了する前に）で選択することが可能になる。ハイ
ライトマーカツールが一旦選択されると、異なるツール
が意図されているとの経験的判断がなされるときまで、
選択したツールが次のストロークを開始するのに存続さ
れるということは、明らかに道理に適うものである。個
々のストロークは完全な直線ではないが、そうであるも
のとして適合することができる。適合プロセスは、関連
するテキスト行上の個々のハイライトストロークを中央
に配置することもできる。ハイライトマーカツールが選
択されるとすぐに、ユーザに明らかなように、ハイライ
ト機能は、テキスト行の背後および中央の画面の縞の色
を、デフォルトの画面色からハイライト機能に指定され
ている色に変えることができる。
【００１９】図２の画面１１に表示されているテキスト
は、語「ａｎｎｏｔａｔｉｎｇ」の綴りが間違っている
点を除いては、図１のものと同一である。ユーザは、多
数のストロークを記している。第１のストローク２２
は、綴りの間違った語を囲むストロークである。これ
は、ストロークの上部および下部部分はほぼ直線である
が、ハイライトストロークを意図するものではない。し
かし、直線部分がテキストの中央にないため、ハイライ
トストロークと区別することができる。手書きのテキス
ト「ｓｐ」２３は、囲んだ語の綴りが間違っていること
を示す。手書き文字を形成するのに必要なストローク
は、大抵曲線部分を有する。文字「Ｐ」だけが直線に近
い１つまたは２つの短い部分を有している。それでもや
はり、直線に近い部分は十分に短く、選択アルゴリズム
はそのような部分を無視するように適応できる。手書き
文字「ｓ」は、湾曲したほぼ斜めの上に向かったストロ
ークで始まり、これによりこのストロークがペンツール
でのものであるとほぼ即時に識別される。次に続く文字
「ｐ」におけるほぼ直線でほぼ垂直のストロークは、ペ
ンツールの選択がすでに行われており、ポインティング
デバイスが新しいストロークを開始するのに画面１１の
表面から持ち上げられておらず、また選択アルゴリズム
は、ストロークのほぼ直線部分が固定量よりも短い長さ
である場合に、ハイライトツールを選択しないように設
計されるため、無視される。
【００２０】やはり図２を参照して、交差したほぼ直線
のストロークの対２４がテキストの最初の１０行を通し
て配されている。これらの線は、テキストの最初の１０
行の削除を意図するものである。この目的には、書き込
みツールがおそらく最も適切な選択である。しかし、ほ
ぼ垂直でほぼ直線のストローク２５は、表示されている
段落全体を強調する意味のハイライトストロークであ
る。ツール選択アルゴリズムは、このストロークの長さ
と、ストロークがほぼ直線であるとともにほぼ垂直であ
ることから、このストロークをハイライトストロークと
して認識する。
【００２１】図３および図４の組み合わせは、ペン／マ
ーカツール選択プロセスを実施するのに採用されるステ
ップの、目下好ましい実施形態を確立する論理フローチ
ャートを構成する。基本的な選択アルゴリズムは図３に
示されている。このアルゴリズムへの強化は、図４に示
される。ユーザが行ったストローク３００がリーディン
グ／注釈装置システムに備えられているポインティング
デバイスによって開始されたことを、システムが検出す
ると、開始アルゴリズム３０１が呼び出される。リーデ
ィング／注釈装置システムには、専用ハードウェア、ラ
ップトップコンピュータ、デスクトップコンピュータ、
パーソナルデジタルアシスタント、またはテキスト記憶
装置および表示能力を有する他の装置を含めることがで
きる。一旦開始されると、ステップ３０２において、ア
ルゴリズムの設定値が変数である直線距離（StraightLi
neDistance）および走査長（RunningLength）の値をゼ
ロに設定し、ペンの初期設定をファインペン（FinePoin
t）にする。ステップ３０３において、ストロークの最
初のポイントが読み込まれる。次にシステムは、ポイン
ティングデバイスを使用してストロークの長さを延ばす
間、予め設定された期間待つ。ここでの期間は、ストロ
ークが書かれる際に、そのストロークについての適当な
サンプリングが行われるように、設定される。手書き文
字に用いられるストロークの最大長と同じように、期間
の長さを設定する際には、平均的なユーザのストローク
速度が考慮される。予め設定された期間待った後に、ス
テップ３０４において、ポインティングデバイスの最新
の位置ポイントである新規のポイントが読み込まれる。
ステップ３０５において、新規のポイントが前回のポイ
ントと同じであるかどうかが判断される。そうである場
合には、ユーザはおそらくポインティングデバイスを正
しく使用しなかったため、アルゴリズムが３０６におい
て終了する。新規のポイントが前回のポイントと同じで
はない場合、ステップ３０７において、現行のペン設定
を使用して、前回のポイントから新規のポイントまで線
を引く。ステップ３０８において、新規のポイントと第
１のポイントの間の距離が、直線距離（StraightLineDi
stance）の値として計算される。ステップ３０９におい
て、新規のポイントと前回のポイントの間の距離が走査
距離（RunningLength）の値に追加される。ステップ３
１０において、走査距離（RunningLength）の値が１０
０ピクセルよりも少ないかどうかが判断される。少ない
場合、手書き文字が書かれている途中であると仮定す
る。このため、ファインペンペン設定が存続され、アル
ゴリズムはステップ３０４に戻り、新しいポイントを読
み込む。発見的に、１００ピクセルの最小距離が、ハイ
ライトストロークを短い手書きのストロークと区別する
のに有効な数字であることが確認されている。１００ピ
クセルの距離は、手書き文字に必要なストロークの推定
最大長の約２または３倍である。RunningLengthの値が
少なくとも１００ピクセルである場合、ステップ３１１
において、RunningLengthの値をStraightLineDistance
の値で割ったものが１．１よりも大きいがどうかについ
て判断される。１．１よりも大きい場合、ユーザが非直
線のストロークを書いていると仮定し、アルゴリズムは
ステップ３０４に戻って、新規のポイントを読み出す。
走査長（RunningLength）の値を直線距離（StraightLin
eDistance）の値で割ったものが１．１以下である場
合、ストロークが直線であると仮定され、ステップ３１
２において、ペン設定がハイライト（マーカー）に変更
される。ステップ３１３において、線全体がハイライト
ツールで引き直される。次にアルゴリズムはステップ３
０４に戻り、ストロークにおける新しいポイントを読み
込む。ストロークが完了すると、ステップ３０５におけ
る判断に対する返答は「イエス」となり、ステップ３０
６においてアルゴリズムが終了する。
【００２２】図４では、書き込みツール選択アルゴリズ
ムにある強化が加えられている。ステップ３０６でアル
ゴリズムを終了させるのではなく、プロセスの流れは図
４のステップ４０１に続き、ストロークが引かれた(dra
w)かどうかについてが判断される。引かれていない場
合、アルゴリズムはステップ４０９において終了する。
しかし、ストロークが引かれている場合、ステップ４０
２において、ユーザが垂直のストロークを意図している
かどうかを判断する。垂直性について肯定的な判断がな
された場合、ストロークは、図２のストローク２５など
の、ショートカットの垂直なハイライトストロークであ
ると仮定し、ステップ４０６においてハイライトツール
が選択され、ステップ４０５において線全体が引き直さ
れる。一方、垂直を意図していないと判断されると、ス
テップ４０３において、ユーザが水平のストロークを意
図しているかどうかが判断される。水平を意図していな
いと判断されると、ステップ４０７において、FinePoin
t書き込みペンツールが選択される。このようなストロ
ークは斜めであってもよい。ストローク２４等の斜めの
ストロークは、テキストの部分を削除する際に用いられ
ることがある。ストロークが垂直または水平についての
予め設定されるパラメータ内に入る場合は、垂直または
水平が意図されていると判断できる。たとえば、ストロ
ークが完全な直交（すなわち完全な垂直または完全な水
平）から±５度内である場合、肯定的に判断される。ス
テップ４０３において、垂直性について肯定的に判断さ
れると、ステップ４０４において、ストロークがテキス
ト行に重なっているかどうかがさらに判断される。重な
っている場合、これは、ステップ４０６においてハイラ
イトツールを選択すべきであるというほぼ確実な兆候で
ある。次に、ステップ４０５において、線全体がハイラ
イトツールで完全に引き直される。オプションとして、
ハイライトストロークを完全に直線にし、かつハイライ
トするテキストの中央にくるよう適合できる。一方、ス
トロークが、多かれ少なかれ、表示されるテキスト行に
重なっていない場合、ステップ４０７において書き込み
ペンツールが選択され、ステップ４０８において、行
（line)全体がファインポイントペンツールで引き直さ
れる。テキスト行に重なっていない水平のストロークを
使用して、手書きのストロークを、表示されるテキスト
の中央部分で識別されたテキストと物理的および論理的
両方で相互に関連づける（interconnect）こともでき
る。たとえば、ページまたは画面上の過剰なクラスタに
より手書きのテキストとの論理的な関連が明確でない場
合、丸で囲むストロークに関連づけられてもよい。線が
引き直されると、アルゴリズムはステップ４０９で終了
する。
【００２３】容易に理解しうるように、論理フローチャ
ートは、電子的に格納された表示可能な文書をハイライ
ト、注釈付け、かつ編集することで、読み手／編集者を
補助するよう設計された選択方法を首尾よく実施するこ
とができる。選択アルゴリズムは、ユーザの書き込みお
よび編集スタイルに最も適合するように調整してもよ
い。
【００２４】以上、本発明の実施例について詳述した
が、以下、本発明の各実施態様の例を示す。 （実施態様１）グラフィック表示画面を備える電子リー
ディング／注釈装置との組み合わせにおいて、手書きお
よび／または描画タスクに用いられる電子書き込みペン
ツールと、ハイライトタスクに用いられる電子マーカツ
ールとを自動的に選択する方法であって、（ａ）ポイン
ティングデバイスで表示画面（１１）上に書かれたユー
ザのストローク（１５、２２、２３、２４、または２
５）が固定最小距離を上回るかどうかを判断するステッ
プと、（ｂ）前記ストロークが前記固定最小距離を上回
らない場合には、ペンツールを選択するステップ（３０
２）と、（ｃ）前記ユーザの書いたストロークが直線を
意図するものであるかどうかを判断するステップ（３１
１）と、（ｄ）意図された直線性について肯定的に判断
され、かつ前記ユーザの書いたストロークが前記固定最
小距離を上回る場合、マーカツールを選択するステップ
（３１２）と、（ｅ）前記ユーザの書いたストロークが
前記固定最小距離を上回わり、かつ意図された直線性に
ついて否定的に判断される場合、前記ペンツールを選択
するステップ（３０２）とを含む電子書き込みペンツー
ルと電子マーカツールを自動的に選択する方法。 （実施態様２）前記固定最小距離は約１００ピクセルで
あることを特徴とする前項(1)記載の方法。 （実施態様３）前記固定最小直線距離は、いかなる手書
きの文字にも必要な予期される最大ストローク長の少な
くとも２倍である前項(1)記載の方法。 （実施態様４）実際のストローク長と直線長さとの比較
は、ストロークが完了したときにではなく、実際のスト
ローク長が前記固定最小距離を上回るとすぐに行われる
前項(1)記載の方法。 （実施態様５）直線が意図されているかどうかを判断す
る前記ステップは、開始ポイントおよび終了ポイントを
有するストロークの少なくとも一部の長さを計算するス
テップ（３０９）と、前記開始ポイントから前記終了ポ
イントまでの、直線部分の長さを計算するステップ（３
０８）と、前記ストロークの前記部分の長さと前記直線
部分の長さとの割合が、確立された公差パラメータ内に
あるかどうかを判断するステップ（３１１）と、により
達成される前項(1)記載の方法。 （実施態様６）前記割合の前記公差パラメータは、約１
１０パーセント未満である前項(5)記載の方法。 （実施態様７）前記マーカツールを選択するステップ
（４０６）は、前記ユーザが書いたストロークが前記表
示画面に表示されるテキスト行に直交する線から固定度
数内にある（４０２）ことを条件とする前項(1)記載の
方法。 （実施態様８）真垂直から約５度が、ほぼ垂直であるこ
とに対する最大公差として設定される前項(7)記載の方
法。 （実施態様９）前記マーカツールは、前記ユーザが書い
たストロークが、前記表示画面に表示されるテキスト行
に平行な線から固定度数内にあり（４０３）、かつ該ス
トロークが表示されているテキスト行に重なっている
（４０４）場合にのみ、選択される前項(8)記載の方
法。 （実施態様１０）前記固定数は平行から約５度に設定さ
れる前項(9)記載の方法。
【００２５】以上、本発明の実施形態を１つだけ説明し
たが、特許請求される本発明の範囲および精神から逸脱
せずに、ここに変更および変形を加えてもよいことは、
当業者には明白であろう。
【図面の簡単な説明】
【図１】フラットなタッチスクリーンディスプレイに電
子的に表示されたサンプルテキストの図的表現であり、
テキストの一部がハイライトストロークの対象となって
いる、本発明を説明するための文書例を示す図である。
【図２】図１と同様のテキストの図的表現であり、テキ
ストは垂直のハイライトストローク、テキストの取り消
しセクション、および丸で囲まれ、手書きの文字ｓｐと
左側の余白に識別された綴りを間違えた語を有する、本
発明を説明するための文書例を示す図である。
【図３】本発明の動作を説明するための自動選択ツール
選択方法のステップを詳述するフローチャートの第１部
分である。
【図４】本発明の動作を説明するための自動選択ツール
選択方法のステップを詳述するフローチャートの第２部
分である。
【符号の説明】
１１：表示画面 １５、２２、２３、２４、２５：ストローク

Claims (1)

    【特許請求の範囲】
  1. 【請求項１】グラフィック表示画面を備える電子リーデ
    ィング／注釈装置との組み合わせにおいて、手書きおよ
    び／または描画タスクに用いられる電子書き込みペンツ
    ールと、ハイライトタスクに用いられる電子マーカツー
    ルを自動的に選択する方法であって、（ａ）ポインティ
    ングデバイスで表示画面上に書かれたユーザのストロー
    クが固定最小距離を上回るかどうかを判断するステップ
    と、（ｂ）前記ストロークが前記固定最小距離を上回ら
    ない場合には、ペンツールを選択するステップと、
    （ｃ）前記ユーザの書いたストロークが直線を意図する
    ものであるかどうかを判断するステップと、（ｄ）意図
    された直線性について肯定的に判断され、かつ前記ユー
    ザの書いたストロークが前記固定最小距離を上回る場
    合、マーカツールを選択するステップと、（ｅ）前記ユ
    ーザの書いたストロークが前記固定最小距離を上回わ
    り、かつ意図された直線性について否定的に判断される
    場合、前記ペンツールを選択するステップとを含む電子
    書き込みペンツールと電子マーカツールを自動的に選択
    する方法。
JP2000045528A 1999-02-24 2000-02-23 電子書き込みペンツールと電子マーカツールを自動的に選択する方法 Expired - Fee Related JP3705986B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/256,636 US6384815B1 (en) 1999-02-24 1999-02-24 Automatic highlighting tool for document composing and editing software
US256636 2002-09-27

Publications (2)

Publication Number Publication Date
JP2000250866A true JP2000250866A (ja) 2000-09-14
JP3705986B2 JP3705986B2 (ja) 2005-10-12

Family

ID=22972977

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000045528A Expired - Fee Related JP3705986B2 (ja) 1999-02-24 2000-02-23 電子書き込みペンツールと電子マーカツールを自動的に選択する方法

Country Status (3)

Country Link
US (1) US6384815B1 (ja)
JP (1) JP3705986B2 (ja)
GB (1) GB2352156B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010039572A (ja) * 2008-07-31 2010-02-18 Sky Co Ltd 文字装飾システム及び文字装飾プログラム

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001005816A (ja) * 1999-06-18 2001-01-12 Sony Corp 電子書籍表示装置及びその表示方法
US7337389B1 (en) 1999-12-07 2008-02-26 Microsoft Corporation System and method for annotating an electronic document independently of its content
US6690364B1 (en) * 2001-05-31 2004-02-10 Palm Source, Inc. Method and system for on screen text correction via pen interface
SE519621C2 (sv) * 2001-07-13 2003-03-18 Anoto Ab Sätt att redigera data
US7246321B2 (en) 2001-07-13 2007-07-17 Anoto Ab Editing data
US7114126B2 (en) 2001-07-18 2006-09-26 Wireless Generation, Inc. System and method for real-time observation assessment
US8898106B2 (en) * 2001-08-01 2014-11-25 T-System, Inc. Method for entering, recording, distributing and reporting data
US20050216456A1 (en) 2001-08-10 2005-09-29 T-Systemev, Ltd. Method for entering, recording, distributing and reporting data
US7062090B2 (en) * 2002-06-28 2006-06-13 Microsoft Corporation Writing guide for a free-form document editor
US7137077B2 (en) * 2002-07-30 2006-11-14 Microsoft Corporation Freeform encounter selection tool
CA2409114A1 (en) * 2002-10-22 2004-04-22 N-Liter Inc. Method for information retrieval
US7290016B2 (en) * 2003-05-27 2007-10-30 Frank Hugh Byers Method and apparatus for obtaining and storing medical history records
GB0321167D0 (en) * 2003-09-10 2003-10-08 Hewlett Packard Development Co Printing digital documents
GB2413420A (en) * 2004-04-23 2005-10-26 Hewlett Packard Development Co Interactive document reading
US20060277482A1 (en) * 2005-06-07 2006-12-07 Ilighter Corp. Method and apparatus for automatically storing and retrieving selected document sections and user-generated notes
US7831902B2 (en) * 2006-05-31 2010-11-09 Microsoft Corporation Displaying interrelated changes in a grid
US20090288889A1 (en) * 2008-05-23 2009-11-26 Synaptics Incorporated Proximity sensor device and method with swipethrough data entry
EP2175354A1 (en) * 2008-10-07 2010-04-14 Research In Motion Limited Portable electronic device and method of controlling same
US9442648B2 (en) 2008-10-07 2016-09-13 Blackberry Limited Portable electronic device and method of controlling same
US20110191356A1 (en) * 2010-02-01 2011-08-04 Gazula Krishna Advanced application for capturing, storing and retrieving digital images of a patient condition during a real-time virtual face-to-face encounter
US20120216113A1 (en) 2011-02-18 2012-08-23 Google Inc. Touch gestures for text-entry operations
US8954890B2 (en) * 2012-04-12 2015-02-10 Supercell Oy System, method and graphical user interface for controlling a game
JP6163863B2 (ja) * 2013-05-17 2017-07-19 株式会社リコー 情報処理装置、プログラム、情報処理システム及び情報表示方法
JP6164361B2 (ja) * 2014-03-25 2017-07-19 富士通株式会社 端末装置、表示制御方法及びプログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5142161A (en) * 1990-04-26 1992-08-25 Brackmann Rogers F Hand-held optical scanner and highlighter
US5539427A (en) * 1992-02-10 1996-07-23 Compaq Computer Corporation Graphic indexing system
US5475401A (en) * 1993-04-29 1995-12-12 International Business Machines, Inc. Architecture and method for communication of writing and erasing signals from a remote stylus to a digitizing display
JPH07160827A (ja) * 1993-12-09 1995-06-23 Matsushita Electric Ind Co Ltd 手書きストローク編集装置及び方法
US5862256A (en) * 1996-06-14 1999-01-19 International Business Machines Corporation Distinguishing gestures from handwriting in a pen based computer by size discrimination
US5982370A (en) * 1997-07-18 1999-11-09 International Business Machines Corporation Highlighting tool for search specification in a user interface of a computer system
US6310610B1 (en) * 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010039572A (ja) * 2008-07-31 2010-02-18 Sky Co Ltd 文字装飾システム及び文字装飾プログラム

Also Published As

Publication number Publication date
GB2352156A (en) 2001-01-17
US6384815B1 (en) 2002-05-07
GB0004322D0 (en) 2000-04-12
JP3705986B2 (ja) 2005-10-12
GB2352156B (en) 2002-12-04

Similar Documents

Publication Publication Date Title
JP3705986B2 (ja) 電子書き込みペンツールと電子マーカツールを自動的に選択する方法
KR101015291B1 (ko) 동적으로 확장하는 입력 패널로 사용자 입력을 추가하는방법
US6891551B2 (en) Selection handles in editing electronic documents
JP4694606B2 (ja) ジェスチャ判定方法
US7735007B2 (en) Adding and removing white space from a document
US9170731B2 (en) Insertion point bungee space tool
US7100119B2 (en) Page bar control
US8132125B2 (en) Freeform encounter selection tool
US7848573B2 (en) Scaled text replacement of ink
US7168038B2 (en) System and method for scaling and repositioning drawings
US7689927B2 (en) Viewable document section
US20030226113A1 (en) Automatic page size setting

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20041209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041227

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20050106

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20050112

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20050322

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20050325

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050609

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050726

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050727

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090805

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090805

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100805

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110805

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110805

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120805

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120805

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130805

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130805

Year of fee payment: 8

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

LAPS Cancellation because of no payment of annual fees