JPH01149121A - 情報処理装置 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 （産業上の利用分野） 本発明は、情報処理装置に関し、特に表示画面への直接
接触による入力を可能にする入力表示一体型情報処理装
置に関する。

〔従来の技術〕

従来の情報５Ｉ！＆理Ｖｔ置では、入力装置としてのキ
ーボード並びにマウス、表示装置としてのデイスプレィ
及び出力装置としてのプリンタ等をそれぞれ独立に配設
し、キーボード又はマウスから入力した情報を処理し、
上記処理工程や結果をデイスプレィに表示させたり、あ
るいはプリンタによって出力させるものがあった。しか
しながら上記装置では、入出力装置及び表示装置がそれ
ぞれ独立して配設しているために、装置の専有面積が広
くなって設置に広い場所が必要になるとともに各装置ご
との保守点検が必要であった。

そこで、近年特公昭６０−１６４６号、特開昭５９−６
７５７９号、特開昭６０−１８５９８４丹、特開昭６１
−４５２６９号および特開昭６１−１３７１８２号公報
に記載されるようにフラットパネルタイプのデイスプレ
ィを入力用ペン又は指等で接触して情報入力および表示
を行なうものが提案されてきている。

〔光間が解決しようとする問題点〕

ところがこれら装置は、上記入力装置のパターンそのも
のをデイスプレィ上に表示して、その表示された入力装
置の操作によって情報人力お、よび表示を行なうもので
なく、操作性が悪いという問題点があった。

本発明は、上記実情に鑑みなされたもので、入力装置の
部品点数を削減し、取り扱い及び運用管理が容易な情報
処３！Ｉ！装置を提供することを目的とするものである
。

〔問題点を解決するための手段および作用〕本発明は、
指等の接触による入力が可能なフラットパネルを利用し
た入力表示一体型情報処理装置に、操作情報を入力する
キーボード、マウス及びウィンドウに代表される電子的
なオブジェクトに対する操作の入力手段に対応した画像
（図形を含む）を画面上の所望の位置に表示する表示手
段と、前記表示手段によって表示された入力手段の画像
への接触に応じて操作指示を判断し、該指示に対応して
所望の情報の入力処理を実行する入力処理手段とを具え
、画面上に表示された入力手段、例えばキーボードの所
望のキー表示をオペレータが指等で接触することにより
、該キーに対応付けられた操作の実行を可能にしている
。

〔実施例〕

本発明の実施例を第１図乃至第１１図の図面にもとづき
詳細に説明する。

第１図は、本発明に係るフラットパネル型情報処理装置
のブロック図である。図において、１１は表示兼タッチ
式入力用のフラットパネルデイスプレィで、上記デイス
プレィ１１は、電子スクリーンになっており、第２図（
ａ）に示すように、操作ボタン１２ａ（Ｆ）領域を有す
る電子キーボード１２、操作ボタン１３ａを有して画面
上の位置及び命令を指定する電子ポインタ（マウス）１
３、操作ボタン１４ａを有するその他の電子オブジェク
ト（ウィンドウ、アイコン等）１４等の情報指示部を表
示制御０部１５の制御によって表示する。

これら表示の指定は電子的に予め作られた各オブジェク
トを示すいわゆるメニュー／ファンクションキーボード
、あるいは−時表示型のポツプアップ／プルダウン・メ
ニューと呼ばれているものからの指定、又は予め設けら
れたオブジェクトボックスから取り出し／複写によって
行なう。これらの機能は、通常のワークステーションに
用いられている機能と同様なので、詳細は省略する。上
記デイスプレィ１１には、例えば指等の押圧によって接
触位置を検出する感圧型の接触位置検出部１０が接続さ
れて勧る。接触位置検出部１０は、第３図に示す各領域
の位置情報が記憶されている各オブジェクトの識別子１
０ごとに分割されたオブジェクト管理テーブル１６の上
段のオープン領域または中段のコラプス領域のオブジェ
クト表示領域を検索し、どのオブジェクトが接触を受け
たか検出し、さらに検出したオブジェクトに対するどの
操作が指定されたかどうか、各ボタン領域の位置情報を
検索して判定する。なお上記オブジェクト管理テーブル
１６の各オブジェクトの識別子ＩＤの中段は、オブジェ
クトがアイコン化されたときのコラプス時領域を示し、
下段はオブジェクトのコラプス時表示イメージを示すエ
リアであり、オブジェクトがコラプスされている詩には
コラプス時領域が処理の対象となる。

キーボード制御部１７は、接触が検出されると、第４図
（ａ）に示すキーボード管理テーブル１８のキー表示領
域の位置情報を検索し、その接触がキーであるかどうか
判定し、キーであればキーマツプテーブル２４へのポイ
ンタで第４図（ｂ）に示すキーマツプテーブル２４の相
対表示エリアを検索し、どのキーか特定する。キーが決
まればそのキーの入力、または割り付けられている機能
の実行が行なわれる。またキーボード制御部１７は、接
触が検出されるとキーボード管理テーブル１８の操作ボ
タン群表示領域の位置情報を検索し、操作ボタンが押さ
れたか判定する。操作ボタンであれば各操作ボタンの表
示領域を検索し、どの操作ボタンが押されたか特定する
。

又、マウス制御部１９は、接触が検出されると、第５図
（ａ）に示すマウスボタン管理テーブル２０の操作指定
ボタン領域を検索し、次に当該する操作指定ボタン領域
のポインタによってどのボタンが押されたか第５図（ｂ
）に示すマウスボタンテーブル２１によって検出する。

マウスボタンが検出されると、上記マウスボタンによっ
て指示されるオブジェクト管理テーブルのボタン領域か
らオブジェクトの操作を判定する。操作制御部２２は、
オブジェクト管理テーブル１６から検出されたオブジェ
クトと操作命令にもとづき、オブジェクトを処理対象と
して、上記操作に対応する操作プログラムを操作プログ
ラム格納部２３から選択して、選択したプログラムにも
とづく処理を実行する。

又、操作制御部２２は、キーボード管理テーブル１８か
ら検出された操作命令に対しても上記同様操作に対応す
る操作プログラムを選択して、処理を実行する。

上述した第２図（ａ）のフラットパネルデイスプレィ１
１は、電源コード３０及び他の端末との通信を行なう通
信ケーブル３１を有し、第２図（ｂ）に示すように感圧
型で入力表示一体フラットパネル３２と制御ボード３３
の２層で構成されている。

制御ボード３３にはボード上に配列されたＲＡＭチップ
または追記型ＣＤ等からなり、フラットパネル３２上に
表示されるキーボードを定義するキーボード管理テーブ
ル、ポインタ（マウス）を定義するマウスボタン管理テ
ーブル及び動作プログラム等を格納した格納部等からな
る記憶装置３４、フラットパネル３２と接続され上記パ
ネルの抑圧による接触検出／処理及び表示制御を行なう
接触位置検出部１０、表示制御部１５、キーボード制御
部１７、マウス制御部２０及び操作制御部２２等からな
る制御部３５、上記電源コード３ｏが接続する電源トラ
ンス及び通信ケーブル３１が接続する通信制御部等から
なる実装機器収納部３６並びにＩＣカード等の外部記憶
媒体とのデータの交換を行なうドライバ３７が配設され
ている。なお上記構成では、ボードに電源コード３０及
び通信ケーブル３１が接続されているがこれに限らず電
源に電池を用い、通信を光通信によって行なうことによ
りコードレスにすることも可能である。

次に本発明に係る情報処理動作を第６図、第９図乃至第
１１図のフロチャートにもとづき説明する。

まずオペレータがフラットパネルデイスプレィ１１の電
源スィッチをオンにすると、フラットパネル３２は電子
スクリーンになり、表示制御部１５の制御によって予め
定義されたキーボード及びマウス１３とともにオブジェ
クトの入っている図示しないツールボックスのアイコン
を表示させる（ステップ１０１）。次に例えば表示され
たマウス１３を指等で押圧して移動させてカーソル１３
ｔ）をツールボックスにあわせて選択することにより、
あるいはツールボックス上の指定された領域への指など
の接触によって上記ツールボックスをオープンにする（
ステップ１０２）。これにより各オブジェクトの目録で
あるメニューが表示され（ステップ１０３）、オブジェ
クトの選択が可能になる。このメニューには前述したご
とくキーボードのファンクションキーで選択されるメニ
ュー、マウス１３のカーソル１３ｂによって選択される
ポツプアップ／プルダウンメニュー等があり、その他オ
ブジェクトボックスから取り出し／複写によって選択す
る方法もある。これらの中から所望の方法によってオブ
ジェクトの選択を行なう（ステップ１０４）、尚、キー
ボードやマウスは使用頻度が高いことが一般的であるた
め、上記実施例では利用者の選択を待つまでもなく、こ
れらをあらかじめ表示するものを例示している。しかし
ながら、原理的にはこれらも全てツールボックスに入れ
ておいて後から選択的に取り出すことにしてもよい。そ
の場合にステップ１０２から始めることになる。次に選
択されたオブジェクトに対する操作を指示する。ここで
、例えば選択されたオブジェクトを第７図に示すような
ウィンドウとし、ウィンドウを移動させる場合について
説明する。アイコンは、第８図に示すように、例えば４
分割にしてそれぞれのエリアを指等で押圧して移動、コ
ピー、拡大／縮小、消去等の操作ができるようになって
いる。また開示されたオブジェクト（ウィンドウ）の場
合には、上記各操作に対応するボタン群４１〜４４が適
宜配置され、やはり指等で直接操作できるようになって
いる。

ここで、まずオペレータが指で表示されたウィンドウ上
の操作ボタンの中から操作ボタン４０の移動エリアの部
分を押圧すると（ステップ１０５）、この接触がフラッ
トパネル３２に検出され、その位置情報等が制御部３５
の接触位置検出部１０に出力される。接触位置検出部１
０は、オブジェクト管理テーブルに登録される各オブジ
ェクト表示領域にもとづき、いずれかのオブジェクトが
接触を受けたか検索する（ステップ１０６）。ここでオ
ブジェクトの指定を示していない位置への接触があった
場合には操作を行なうことができないのでステップ１０
５に戻り次のパネル３２への接触を待つ。また接触した
位置が移動ボタンを持つウィンドウのときには、管理テ
ーブルに登録されているオブジェクトを指定していると
して、キーボード、マウス以外のその他を選択して（ス
テップ１０７）、ウィンドウに対するその他の操作フロ
ーチャートに移る（ステップ１０８）。上記操作フロー
チャートは、第８図に示すように、まずステップ１０６
での指定が単にウィンドウの指定なのか、それともウィ
ンドウに対する操作の指定なのか、を判定する（ステッ
プ２０１）。この判定は、オブジェクト管理テーブルの
ウィンドウを示す識別子１０の各操作ボタン領域を検索
し、登録されている操作ボタンの位置情報と接触位置の
情報とから、操作の種類を検索することにより行なう。

ここで、オブジェクトの指定の場合には、上記ウィンド
ウにフラグをたてて現在の処理対傘としくステップ２０
２＞　、ステップ１０５に戻り次の接触を待つ。また操
作指定の場合には、上記ウィンドウが現在の処理対象に
なっているかどうか判定する（ステップ２０３）。ここ
でウィンドウが処理対象になっていない場合には、ステ
ップ２０２と同様に当該ウィンドウにフラグをたてて現
在の処理対象とする（ステップ２０４）。そして検索し
た操作ボタン（移動ボタン）から操作の種類は、ウィン
ドウの移動と認識し、操作プログラム格納部２３に登録
されている各操作プログラムの中から移動に対応する操
作実効プログラムが検索され（ステップ２０５）、該操
作実効プログラムにしたがった移動操作が実行される（
ステップ２０６）。このプログラムは、例えばオペレー
タに移動先の位置をパネル３２への接触によって示すよ
うに要求し、接触による位置情報が再び検出されると、
ウィンドウの位置と接触位置との情報から移動距離等を
計算して、オブジェクト１！！テーブル１６に登録され
ているウィンドウの各領域値を計算結果にもとづき更新
登録し、表示制御部によって更新されたウィンドウの各
領域値に応じた表示の更新を行なう。そしてプログラム
の実行が終了するとステップ１０５に戻り、パネル３２
への次の接触を待つ。

なおステップ１．０６で、接触位置がキーボードのオー
プン領域を指定しているときには、ステップ１０７でキ
ーボードを選択し、キーボード制御部による制御フロー
チャートに移る（ステップ１０９）。キーボード制御部
は、第９図に示す制御フローチャートにもとづき、まず
オブジェクトの指定がキー指定か、操作ボタン指定か、
を判定する（ステップ３０１）。この判定は、キー表示
領域と操作ボタン群表示領域を検索して、キー又はボタ
ンの位Ｗ：１情報と接触位置の情報とから該当するキー
又はボタンを検索することにより行なう。

ここで、キー人力である場合には、キーマツプテーブル
２４によってキーを特定しくステップ３０２）、キー人
力の操作実効プログラムを実行して（ステップ３０３）
、ステップ１０５に戻り次の接触を待つ。また接触位置
が操作ボタンを指定している場合には、キーボード制御
部１７は、登録されている各操作ボタンの位置情報と接
触位置の情報とから、操作の種類を検索して特定する（
ステップ３０４）。そして特定された操作にもとづき、
操作プログラム格納部２３にＵ録されている操作プログ
ラムの中から該当するプログラムを選択し、当該操作プ
ログラムにしたがった操作を実行する（ステップ３０５
）、そしてブ【」グラムの実行が終了すると、ウィンド
ウの場合と同様ステップ１０５に戻り、パネル３２への
次の接触を待つ。

またステップ１０６で、接触位置がマウス管理テーブル
２０に登録されている操作指定ボタ、領域を指定してい
るときには、ステップ１０７　Ｔ−、ウスを選択し、第
１１図に示すマウス制御部１９による問罪フローチャー
トにもとづき、まずオブジェクトの指定が移動ボタンの
指定か、操作指定ボタンの指定か、を判定ツる（ステッ
プ４０１）。

この判定は、タッチ移動ボタン領域と操作指定ボタン領
域を検索して各ボタンの位置情報と接触位置の情報とか
ら該当するボタンを検索することにより行なう。ここで
タッチ移動ボタンを指定している場合には、移！７１ｍ
の計算を行なう（ステップ４０２）。移１ｊＪｆｆｉの
計算は、１　（タッチ移動ボタン領域の中心点）＝（タ
ーチ検゛出点）１として粋出される。そしてこの計算値
が所定の移！１ＪＩａより大きいかどうか判定する（ス
テップ４ｏ３）。

ここで移動Ｏがａより小さいとさ・には、移動はないも
のと判定してステップ１０５に戻り次の接触を待つ。ま
た移！ｌＪｍがａより大きいときには、マウスボタン管
理テーブル１８のタッチ移動ボタン領域を、新規な移動
位置が上記領域の中心になるように更新する（ステップ
４０４）。そして更新された値にもとづき、マウスの表
示を更新しくステップ４０５）、ステップ１０５に戻る
。

またステップ４０１において、接続位置が操作指定ボタ
ン領域を指定している場合には、マウス制御部１９は、
登録されている各操作指定ボタン領域の位置情報と接触
位置の情報とからボタンテーブルへのポインタ値を検索
し、該ポインタ値が示すボタンテーブルの所定の識別子
の各パターン領域を検索し、該当するマウスボタンを検
出する。

上記マウスボタンの検出は、ボタンの形状を示す基本パ
ターン、色を示す色パターン、シェードや網かけを示す
シェードパターン等によって行なわれる。マウスバタン
が検出されると、上記特定されたマウスボタンによって
指示されるオブジェクト管理テーブルのボタン領域から
オブジェクトの操作を、検索して特定する（ステップ４
０６）。操作制御部２２は、特定された操作にもとづき
、操作プログラム格納部２３に登録されている操作プロ
グラムの中から該当する操作プログラムを選択し、当該
操作プログラムにしたがった操作を実行する（ステップ
４０７）。そしてプログラムの実行が終了すると、・ウ
ィンドウの場合と同様ステップ１０５に戻り、パネル３
２への次の接触を待つ。

キーボードやマウスと他のウィンドウ等の電子オブジェ
クトを分けている理由としては、他にアクティブになっ
ている電子オブジェクトの有無と全く関係なく、キーボ
ードやマウスは基本的に常にアクティブであるからであ
る。したがっである１つのウィンドウをアクティブにし
て、次にキーボードに接触しても、アクティブフラグの
移動はおこらず通常は、キーボードからの操作がアクデ
イプであるウィンドウに対して行なわれることになる。

なお本願実施例では、情報の入力検出をフラットパネル
の抑圧による感圧検出によって行なっているが、これに
限らず例えば、ライトペンを用いて光感応検出によるも
の、パルスを発生するペンを用いてパルス検出によるも
の、静電誘導によるもの、電磁誘導によるものその他ス
トレインゲージを用いてひずみ検出によるもの等多種類
の実行手段が可能である。

したがって本発明では、フラットパネルに表示された情
報入力＄１を指等で直接指定し、かつオブジェクトの移
動や削除などの基本操作ができるので従来の選択、コマ
ンド選択肢の表示、コマンド選択肢の選択、移動位置の
指定といった長いオペレーションをなくし、操作性を飛
躍的に向上させることができる。また管理テーブルの登
録内容を変更することによって各情報パノＪ装置のパネ
ルの表示状態を変化させることも可能である。またパネ
ルの画面で展開されるソフトウェアは、従来オフィスワ
ークステーション用に開発されてきたものをそのまま利
用できるので、製作コストを削減することができる。さ
らに本発明の情報処理装置は、薄型のフラットパネルデ
イスプレィで構成されているが表面は基本的には平らな
台であり、使用中以外のときには机や７−プルとして使
用が可能である。このことは、情報機器としての専有空
間を無くし、大きな空間を解放することであり、オフィ
ス等の設計にも大きなメリットをもたらすものである。

またプリントａｌｌ！を内在させてパネル上から上記接
触による指示を与え、プリント機構を駆動させてコピー
ををることも可能である。

その飽水発明のフラットパネルデイスプレィは、水平に
して使用するので、従来のアップライトのＣＲＴに較べ
、デイスプレィのｔ１１ａＪｌ！！をオペレータがあび
るのを防止することができる。また操作の終了後はスイ
ッチを切ってもよいし、表示画面を電子アイドル状態に
して画面の一部に所定のパターンを点滅表示させること
もできる。また上記フラットパネルデイスプレィは、平
板ｆ１４ｆｉになっているので、不使用の際には立て掛
けたり、所定の隙間に収納したりすることができ、収納
性にも優れている。

〔発明の効果〕

以上説明したように本発明は、情報処理装置を入力表示
一体としたので、部品点数を削減し、取り扱い及び運用
管理を容易にすることができる。

【図面の簡単な説明】

第１図は本発明に係る情報処理装置のブロック図、第２
図は同じく構成図、第３図〜第５図は各管理テーブル、
キーマツプテーブル及びマウスボタンテーブルの登録内
容を示す図、第６図、第９図乃至第１１図は第１図の動
作を示すフローチャート、第７図はウィンドウを示す図
、第８図はアイコンの一例を示１図である。 １０・・・接触位置検出部、１１・・・フラットパネル
デイスプレィ、１２・・・キーボード、１３・・・電子
ポインタ（マウス）、１４・・・ウィンドウ、１５・・
・表示制御部、１６・・・オブジェクト（表示単位）管
理テーブル、１７・・・キーボード制御部、１８・・・
キーボード管理テーブル、１９・・・電子ポインタ（マ
ウス）制御部、２０・・・マウスボタン管理テーブル、
２１・・・マウスボタンテーブル、２２・・・操作制御
部、２３・・・操作プログラム格納部 ＠２図 第７図 Ｔシ自しエ１１ア　　　　　　　−　　　　　瑚号Δ−
ｅ＋７７第８図

Claims (2)

【特許請求の範囲】
1. （１）情報を入力する入力手段に対応した画像を画面上
   の所望位置に表示する表示手段と、前記画面上に表示さ
   れた前記入力手段の画像への接触操作に対応して所望の
   情報の入力処理を実行する入力処理手段と を具えたことを特徴とする情報処理装置。
2. （２）前記表示手段はキーボード、ポインタ及びオブジ
   ェクトのうちの少なくとも１つを表示することを特徴と
   する特許請求の範囲第（１）項記載の情報処理装置。