JP2015170102A

JP2015170102A - 情報処理装置

Info

Publication number: JP2015170102A
Application number: JP2014044189A
Authority: JP
Inventors: 西田　篤史; Atsushi Nishida; 篤史西田
Original assignee: Toyota Motor Corp
Current assignee: Toyota Motor Corp
Priority date: 2014-03-06
Filing date: 2014-03-06
Publication date: 2015-09-28
Also published as: CN104898877A; US20150253887A1; DE102015102426A1

Abstract

【課題】多点検知可能なタッチパネルを用いて、ユーザがディスプレイの画面を視認することなく所望の操作を実行することが可能な情報処理装置を提供すること。
【解決手段】複数の操作指の操作面への接触を検知する多点検知可能なタッチパネルであって、ディスプレイに表示される画面を操作するタッチパネルと、前記タッチパネルにより前記操作面への接触が検知された複数の操作指の接触位置の相対位置関係を認識する認識部と、前記認識部により認識された前記複数の操作指の接触位置の相対位置関係に基づいて、前記複数の操作指のそれぞれに対応する所定の動作を行った際の所定の機能を割り当てる割り当て部と、前記タッチパネルにより、前記複数の操作指のうち、いずれかの操作指による前記所定の動作が検知された場合、前記割り当て部により前記所定の動作を行った操作指に割り当てられた対応する前記所定の機能を実行する実行部と、を備えることを特徴とする。
【選択図】図２

Description

本発明は、多点検知可能なタッチパネルを備える情報処理装置に関する。

従来、多点検知可能なタッチパネルを備え、該タッチパネルからの操作入力に応じてディスプレイ上における処理を実行する情報処理装置において、マルチタッチによる独自の機能を付加する技術が開示されている（例えば、特許文献１）。

例えば、特許文献１では、画面上の仮想的に分割された複数の領域の中から一の領域を選択してタッチした状態で、別の指で文字列を選択し、コピーする技術が開示されている。また、上記選択した一の領域をタッチした状態で所望の位置でペースト操作をすることで、コピーした文字列の貼り付けを行う技術が開示されている。即ち、マルチタッチを活用して、分割された複数の領域のいずれかをタッチした状態で、別の指でコピー＆ペースト操作を行うことにより、異なる場所の文字列を連続してコピーし、それらを選択的に適切な場所にペーストすることが可能となる。

特開２０１２−９８８４４号公報

しかしながら、上述した情報処理装置では、操作の際、ユーザーがディスプレイ上の画面を視認する動作が必要であるため、ユーザにとっての負担となる場合があり、更なる改善の余地がある。特に、非常に多くの機能を実行可能な情報処理装置では、操作の対象となる要素（操作アイコン、操作メニュー等）を画面の視認により探す必要があり、ユーザへの負担は非常に大きい。

そこで、上記課題に鑑み、多点検知可能なタッチパネルを用いて、ユーザがディスプレイの画面を視認することなく所望の操作を実行することが可能な情報処理装置を提供することを目的とする。

上記目的を達成するため、一実施形態において、情報処理装置は、
複数の操作指の操作面への接触を検知する多点検知可能なタッチパネルであって、ディスプレイに表示される画面を操作するタッチパネルと、
前記タッチパネルにより前記操作面への接触が検知された複数の操作指の接触位置の相対位置関係を認識する認識部と、
前記認識部により認識された前記複数の操作指の接触位置の相対位置関係に基づいて、前記複数の操作指のそれぞれに対応する所定の動作を行った際の所定の機能を割り当てる割り当て部と、
前記タッチパネルにより、前記複数の操作指のうち、いずれかの操作指による前記所定の動作が検知された場合、前記割り当て部により前記所定の動作を行った操作指に割り当てられた対応する前記所定の機能を実行する実行部と、を備えることを特徴とする。

本実施の形態によれば、多点検知可能なタッチパネルを用いて、ユーザがディスプレイの画面を視認することなく所望の操作を実行することが可能な情報処理装置を提供することができる。

本実施形態に係る情報処理装置の構成の一例を示すブロック図である。本実施形態に係る情報処理装置におけるダイレクトコマンドモードの一例を示す図である。本実施形態に係る情報処理装置におけるダイレクトコマンドモードの他の例を示す図である。本実施形態に係る情報処理装置におけるダイレクトコマンドモードの更に他の例を示す図である。本実施形態に係る情報処理装置（制御部）による処理の一例を示すフローチャートである。

以下、図面を参照して発明を実施するための形態について説明する。

図１は、本実施形態に係る情報処理装置１の構成の一例を示すブロック図である。情報処理装置１は、例えば、車両に搭載され、車載装置や車載の各種センサ等からの情報（信号）を受信し、車載装置に関する情報や車両の走行情報等を後述するディスプレイ５０に表示させる処理を実行可能に構成されてよい。また、情報処理装置１は、後述する操作部としてのタッチパネル１０からの操作入力に応じて、ディスプレイ５０に表示される（操作）画面の制御処理を実行可能に構成されてよい。

情報処理装置１は、タッチパネル１０、入力制御部２０、制御部３０、表示制御部４０、ディスプレイ５０等を含む。

タッチパネル１０は、ディスプレイ５０に表示される（操作）画面を操作する操作手段である。図中において、便宜上、タッチパネル１０は、ディスプレイ５０と別体に描画されるが、実際は、ディスプレイ５０の画像表示部の表面に配置される。タッチパネル１０は、操作面への操作者の指（以下、「操作指」と呼ぶ）の接触を検知可能に構成され、検知情報を電気信号（操作信号）として入力制御部２０に出力する。また、タッチパネル１０は、多点検知（操作面への複数の操作指の同時接触を検知）可能なマルチタッチスクリーンである。タッチパネル１０としては、例えば、静電容量方式、抵抗膜方式等、既知の方式が採用されてよい。なお、タッチパネル１０は、透明であるため、ディスプレイ５０の表示を視認することが可能である。

入力制御部２０は、タッチパネル１０を含む情報処理装置１の操作部からの入力を制御し、入力された操作入力を制御部３０に伝達する制御手段である。

制御部３０は、ディスプレイ５０に表示される画面を制御する制御手段である。例えば、制御部３０は、車載装置や車載された各種センサ（例えば、燃料タンクの残量計、車速センサ等）からの情報、信号を受信可能に構成されてよい。そして、車載装置に関する情報や車両の走行情報等のコンテンツをディスプレイ５０に表示させるための制御を実行してよい。制御部３０は、ディスプレイ５０に表示させる画像（画面）に関する情報を表示制御部４０に出力する。

また、制御部３０は、タッチパネル１０からの操作信号に応じて、ディスプレイ５０に表示させる画面を制御してよい。例えば、タッチパネル１０における操作面を所定の方向になぞる操作（なぞり操作）に対応する操作信号が入力された場合、ディスプレイ５０の画面内のリストをスクロールさせたり、画面内のカーソルやポインタを移動させてよい。また、タッチパネル１０における操作面を弾く操作（フリック操作）に対応する操作信号が入力された場合、フリック操作による操作方向への画面スクロールを行ってよい。

更に、制御部３０は、複数の操作指による操作面への同時接触の検知（多点検知）を示す操作信号がタッチパネル１０から入力された場合であって、所定の場合に、「通常操作モード」から「ダイレクトコマンドモード」に移行する制御を行ってよい。また、ダイレクトコマンドモードにおけるタッチパネル１０を介した操作信号に対する制御を実行してよい。「通常操作モード」では、操作者がタッチパネル１０を用いて、画面に表示される選択項目（ボタンやアイコン等）をタッチ操作したり、カーソルを所望の選択項目になぞり操作で移動した上でタッチ操作（決定操作）したり等することにより画面の操作を行う。これに対して、「ダイレクトコマンドモード」では、画面に表示されている内容とは関係なく、タッチパネル１０の操作面に接触させた複数の操作指のそれぞれに所定の機能が割り当てられる。そして、これらの複数の操作指のいずれかで所定の動作を行うことで、所定の動作を行った操作指に割り当てられた機能をダイレクトに実行させることができる。ダイレクトコマンドモードの詳細、及び、ダイレクトコマンドモードにおける操作信号に対する具体的な処理動作については、後述する。

表示制御部４０は、制御部３０から入力されるディスプレイ５０に表示させる画像（画面）に関する情報に基づいて、画像生成処理を行う制御手段である。表示制御部４０は、生成した画像（画面）信号をディスプレイ５０に出力する。

ディスプレイ５０は、上述した車載装置に関する情報や車両の走行情報等を表示するための表示手段である。ディスプレイ５０は、上述したとおり、表示制御部４０により生成された表示させる画面に対応する画像信号を受信し、当該画面を画像表示部に表示する。これにより、運転者等は、車載装置に関する情報や車両の走行情報等を認知することが可能となる。

次に、本実施形態に係る情報処理装置１（制御部３０）による特徴的な処理動作、具体的には、ダイレクトコマンドモードへの移行、及びダイレクトコマンドモードにおける操作に対する処理動作について説明をする。

図２は、本実施形態に係る情報処理装置１におけるダイレクトコマンドモードの一例を示す図である。図２（ａ）は、通常操作モードにおいて、ディスプレイ５０に表示された画面を表し、具体的には、ナビゲーション装置の地図画面が表示されている。図２（ｂ）は、ダイレクトコマンドモードにおいて、ディスプレイ５０に表示された画面を表し、具体的には、図２（ａ）に示す通常操作モードにおいて、操作者によるダイレクトコマンドモードへの移行操作が行われた後のディスプレイ５０に表示された画面を表す。なお、操作者による図２（ａ）の通常操作モードから図２（ｂ）のダイレクトコマンドモードへの移行操作は、車両の停車時に実行される。

図２（ａ）を参照するに、地図画面には、自車両の位置を示す矢印６０が表示され、自車両周辺の地図が表示されている。通常操作モードでは、タッチパッド１０を用いて、画面に表示された選択項目（ボタン、アイコン等）を選択、決定することにより操作を行う。本図においては、画面の下端部、左端部に仮想的な（機械式の操作ボタンではないという意味）操作ボタンが配置され、タッチパネル１０を介して、カーナビゲーション装置の操作が可能となっている。

図２（ａ）の状態で、操作者がタッチパネル１０の操作面を手の５本の指で触ると、複数の操作指の同時接触を検出した制御部３０がダイレクトコマンドモードに移行させる。

図２（ｂ）の例では、タッチパネル１０の操作面を右手の５本の操作指で触ると、ダイレクトコマンドモードに移行し、地図画面がトーンダウンする。これにより、操作者は、ダイレクトコマンドモードに移行したことを確認することができる。

上述したとおり、ダイレクトコマンドモードでは、画面に表示された地図画面の内容とは関係なく、制御部３０がタッチパネル１０に接触した複数の操作指（本例では、右手の５本の操作指）のそれぞれに所定の機能を割り当てる。そして、いずれかの操作指による所定の動作（例えば、操作面のタップ操作）を検知すると所定の動作を行った操作指に対応して割り当てられた機能を実行する。本例では、制御部３０が、操作面における各操作指の接触位置の座標に対応するディスプレイ５０の画面上の座標の近傍に各操作指に対応して割り当てた機能を表すアイコンをトーンダウンさせた地図画面に対してオーバーレイ表示させる。具体的には、ディスプレイ５０の画面上の親指に対応する位置には、アイコンＩ１が表示され、アイコンＩ１には、ナビゲーション装置に予め設定された自宅への経路案内を指示する機能を示す「ＧｏＨｏｍｅ」と表記されている。また、人差し指に対応する位置には、アイコンＩ２が表示され、アイコンＩ２には、オーディオ装置の（操作）画面への表示切替を指示する機能を示す「Ａｕｄｉｏ」と表記されている。また、中指に対応する位置には、アイコンＩ３が表示され、アイコンＩ３には、空調装置の（操作）画面への表示切替を指示する機能を示す「Ｃｌｉｍａｔｅ」と表記されている。また、薬指に対応する位置には、アイコンＩ４が表示され、アイコンＩ４には、通信装置の電話発信画面への表示切替を指示する機能を示す「Ｐｈｏｎｅ」と表記されている。また、小指に対応する位置には、アイコンＩ５が表示され、アイコンＩ５には、通信装置の電子メール画面（電子メールの閲覧、作成、送信を行うための画面）への表示切替を指示する機能を示す「Ｍａｉｌ」と表記されている。このように、タッチパネル１０の操作面に接触させた各操作指の近傍に割り当てられた機能を表示することにより、操作者は、各操作指に対応して割り当てられた機能を確認して、確実に操作を行うことができる。

図２（ｂ）の例では、５本の操作指が全てタッチパネル１０の操作面に接触した状態から、操作者が、例えば、人差し指を操作面から離し、タップ操作を行うと、ナビゲーション装置の地図画面からオーディオ装置の操作画面への表示切替が実行される。

このように、制御部３０がタッチパネル１０の操作面への接触を検出した各操作指に対して所定の機能を割り当てることにより、操作者は、ディスプレイ５０を視認することなく、各操作指で所定の動作を行うことで、予め設定された機能を実行させることができる。また、ディスプレイ５０の画面の内容とは関係なく、所定の機能を実行するための操作を行うことができるため、本来複数回の操作により実行される機能を１回の操作で実行させることができる。これにより、特に、使用頻度の高い機能に関しての操作性を大きく向上させることができる。

ここで、図２に示す例では、ディスプレイ５０に表示される画面の内容とは関係なく、各操作指に対応する機能を割り当てたが、ディスプレイ５０に表示される画面の内容に応じて、各操作指に対応して割り当てる機能を決定（変更）してもよい。

以下、図３、図４を用いて、ディスプレイ５０に表示される画面の内容に応じて、各操作指に対応して割り当てる機能を決定する例について説明をする。

図３は、本実施形態に係る情報処理装置１におけるダイレクトコマンドモードの他の例を示す図である。図３（ａ）は、通常操作モードにおいて、ディスプレイ５０に表示された画面を表し、具体的には、通信装置の電話発信画面が表示されている。図３（ｂ）は、ダイレクトコマンドモードにおいて、ディスプレイ５０に表示された画面を表し、具体的には、図３（ａ）に示す通常操作モードにおいて、操作者によるダイレクトコマンドモードへの移行操作が行われた後のディスプレイ５０に表示された画面を表す。なお、操作者による図３（ａ）の通常操作モードから図３（ｂ）のダイレクトコマンドモードへの移行操作は、車両の停車時に実行される。

図３（ａ）を参照するに、電話発信画面では、発信先を特定するための３つの選択アイコン７０、８０、９０が表示される。選択アイコン７０は、直接、電話番号をダイヤルするためのダイヤル画面に遷移するための選択項目である。また、選択アイコン８０は、予め登録された連絡先から電話番号を選択するための連絡先画面に遷移するための選択項目である。また、選択アイコン９０は、過去の発着信履歴から発信先の電話番号を選択するための発着信履歴画面に遷移するための選択項目である。操作者は、タッチパネル１０を介して、選択アイコン７０〜９０のいずれかを選択し、遷移後の画面において、発信先を選択（入力）することで、電話をかけることができる。なお、操作者は、車室内の所定の位置に設置されたマイク及びスピーカー（又は、通信装置と無線、有線問わず接続されたヘッドセット等）を介して、発信先の相手と通話することができる。

図３（ａ）の状態で、操作者がタッチパネル１０の操作面を手の５本の指で触ると、複数の操作指の同時接触を検出した制御部３０がダイレクトコマンドモードに移行させる。

図３（ｂ）の例では、図２（ｂ）の例と同様、タッチパネル１０の操作面を右手の５本の操作指でタッチパネル１０を触ると、ダイレクトコマンドモードに移行し、電話発信画面がトーンダウンする。

上述したとおり、ダイレクトコマンドモードでは、制御部３０がタッチパネル１０に接触した複数の操作指（本例では、右手の５本の操作指）のそれぞれに所定の機能を割り当てる。そして、いずれかの操作指による所定の動作（例えば、操作面のタップ操作）を検知すると所定の動作を行った操作指に対応して割り当てられた機能を実行する。また、図２（ｂ）の例と同様、制御部３０が、操作面における各操作指の接触位置の座標に対応するディスプレイ５０の画面上の座標の近傍に各操作指に対応して割り当てた機能を表すアイコンをトーンダウンさせた電話発信画面に対してオーバーレイ表示させる。

ここで、本例では、図２（ｂ）の例とは異なり、ディスプレイ５０の画面に表示されている内容、即ち、情報処理装置１がディスプレイ５０に表示させている内容に応じて、各操作指に対応する機能を割り当てる。具体的には、図３（ａ）において、ディスプレイ５０には、電話発信画面が表示され、操作者は、発信先の選択（入力）を行う前の状態にいるので、制御部３０は、各操作指に対応して予め設定された発信先をショートカット機能として割り当てる。図３（ｂ）を参照するに、ディスプレイ５０の画面上の親指に対応する位置には、アイコンＩ１が表示され、アイコンＩ１には、電話の発信先として予め連絡先に登録された操作者の父親の電話番号へのショートカット機能を示す「父」と表記されている。また、人差し指に対応する位置には、アイコンＩ２が表示され、アイコンＩ２には、電話の発信先として予め連絡先に登録された操作者の妻の電話番号へのショートカット機能を示す「妻」と表記されている。また、中指に対応する位置には、アイコンＩ３が表示され、アイコンＩ３には、電話の発信先として予め連絡先に登録された操作者の子供の電話番号へのショートカット機能を示す「子」と表記されている。また、薬指に対応する位置には、アイコンＩ４が表示され、アイコンＩ４には、電話の発信先として予め連絡先に登録された操作者の特定の友人の電話番号へのショートカット機能を示す「友人」と表記されている。また、小指に対応する位置には、電話の発信先として予め連絡先に登録された操作者が勤務する会社の電話番号へのショートカット機能を示す「会社」と表記されている。

例えば、５本の操作指が全てタッチパネル１０の操作面に接触した状態から、操作者が中指を操作面から離し、タップ操作を行うと、操作者の子供の電話番号へのショートカット機能が実行され、当該電話番号への発信が行われる。

このように、上述した一例と同様、制御部３０がタッチパネル１０の操作面への接触を検出した各操作指に対して所定の機能を割り当てることにより、操作者は、ディスプレイ５０を視認することなく、各操作指で所定の動作を行うことで、予め設定された機能を実行させることができる。また、本例では、ディスプレイ５０の画面の内容に応じて、各操作指に対応して割り当てる機能を決定（変更）することにより、状況に合わせた操作支援を行うことができる。特に、ディスプレイ５０に表示された画面が操作者による選択（入力）画面である場合には、各操作指に当該選択画面における選択肢に応じたショートカット機能を割り当てることにより、操作者は、ダイレクトに所望の選択肢に関する機能を実行できる。そのため、操作性を大きく向上させることができる。

続いて、図４は、本実施形態に係る情報処理装置１におけるダイレクトコマンドモードの更に他の例を示す図である。図４（ａ）は、通常操作モードにおいて、ディスプレイ５０に表示された画面を表し、具体的には、ナビゲーション装置における目的地設定画面が表示されている。図４（ｂ）は、ダイレクトコマンドモードにおいて、ディスプレイ５０に表示された画面を表し、具体的には、図４（ａ）に示す通常操作モードにおいて、操作者によるダイレクトコマンドモードへの移行操作が行われた後のディスプレイ５０に表示された画面を表す。なお、操作者による図４（ａ）の通常操作モードから図４（ｂ）のダイレクトコマンドモードへの移行操作は、車両の停車時に実行される。

図４（ａ）を参照するに、目的地設定画面では、目的地を特定するための３つの選択アイコン１００、１１０、１２０が表示される。選択アイコン１００は、目的地を検索（例えば、電話番号、住所、キーワード等による検索）により決定（選択）するための目的地検索画面に遷移するための選択項目である。また、選択アイコン１１０は、予め登録された登録地点から目的地を選択するための登録地点リスト画面に遷移するための選択項目である。また、選択アイコン１２０は、過去に経路検索を行った目的地の履歴から目的地を選択するための目的地履歴画面に遷移するための選択項目である。操作者は、タッチパネル１０を介して、選択アイコン１００〜１２０のいずれかを選択し、遷移後の画面において、目的地を選択（目的地検索画面の場合、検索結果の中から選択）することで、目的地を決定し、ナビゲーション装置による経路案内を実行させることができる。

図４（ａ）の状態で、操作者がタッチパネル１０の操作面を手の５本の指で触ると、複数の操作指の同時接触を検出した制御部３０がダイレクトコマンドモードに移行させる。

図４（ｂ）の例では、図２（ｂ）、３（ｂ）の例と同様、タッチパネル１０の操作面を右手の５本の操作指でタッチパネル１０を触ると、ダイレクトコマンドモードに移行し、目的地設定画面がトーンダウンする。

上述したとおり、ダイレクトコマンドモードでは、制御部３０がタッチパネル１０に接触した複数の操作指（本例では、右手の５本の操作指）のそれぞれに所定の機能を割り当てる。そして、いずれかの操作指による所定の動作（例えば、操作面のタップ操作）を検知すると所定の動作を行った操作指に対応して割り当てられた機能を実行する。また、図２（ｂ）、３（ｂ）の例と同様、制御部３０が、操作面における各操作指の接触位置の座標に対応するディスプレイ５０の画面上の座標の近傍に各操作指に対応して割り当てた機能を表すアイコンをトーンダウンさせた目的地設定画面に対してオーバーレイ表示させる。

また、本例では、図３（ｂ）の例と同様、ディスプレイ５０の画面に表示されている内容、即ち、情報処理装置１がディスプレイ５０に表示させている内容に応じて、各操作指に対応する機能を割り当てる。具体的には、図４（ａ）において、ディスプレイ５０には、目的地設定画面が表示され、操作者は、ナビゲーション装置の経路案内機能における目的地の選択（入力）を行う前の状態にいるので、制御部３０は、各操作指に対応して予め設定された目的地をショートカット機能として割り当てる。図４（ｂ）を参照するに、ディスプレイ５０の画面上の親指に対応する位置には、アイコンＩ１が表示され、アイコンＩ１には、目的地として予め登録地点リストに登録された操作者の自宅へのショートカット機能を示す「自宅」と表記されている。また、人差し指に対応する位置には、アイコンＩ２が表示され、アイコンＩ２には、目的地として予め登録地点リストに登録された操作者の行きつけの店（ショップ）へのショートカット機能を示す「ショップ」と表記されている。また、中指に対応する位置には、アイコンＩ３が表示され、アイコンＩ３には、目的地として予め登録地点リストに登録された操作者が勤務する会社へのショートカット機能を示す「会社」と表記されている。また、薬指に対応する位置には、アイコンＩ４が表示され、アイコンＩ４には、目的地として予め登録地点リストに登録された操作者の実家へのショートカット機能を示す「実家」と表記されている。また、本例では、小指に対応して所定のショートカット機能の割り当てがないため、小指に対応する位置には、設定されていないことを示す「？」と表記されている。なお、操作指としての小指に対応してショートカット機能の割り当ての設定がされている場合には、当然のことながら、設定された割り当てに対応するショートカット機能を示す表記がアイコンＩ５になされる。

例えば、５本の操作指が全てタッチパネル１０の操作面に接触した状態から、操作者が薬指を操作面から離し、タップ操作を行うと、目的地として登録地点リストに登録された操作者の実家へのショートカット機能が実行され、現在地から操作者の実家への経路探索および経路案内が実行される。

このように、上述した一例及び他の例と同様、制御部３０がタッチパネル１０の操作面への接触を検出した各操作指に対して所定の機能を割り当てることにより、操作者は、ディスプレイ５０を視認することなく、各操作指で所定の動作を行うことで、予め設定された機能を実行させることができる。また、上述した他の例と同様、ディスプレイ５０の画面の内容に応じて、各操作指に対応して割り当てる機能を決定（変更）することにより、状況に合わせた操作支援を行うことができる。特に、ディスプレイ５０に表示された画面が操作者による選択（入力）画面である場合には、各操作指に当該選択画面における選択肢に応じたショートカット機能を割り当てることにより、操作者は、ダイレクトに所望の選択肢に関する機能を実行できる。そのため、操作性を大きく向上させることができる。

なお、図２〜４に示した例において、制御部３０が各操作指に割り当てる機能には、操作者により頻繁に利用されると想定される機能が予め設定されてよい。また、各操作指に割り当てる機能は、操作者が別途、設定画面等を通じて、自らの好みや使用頻度に合わせて、設定・変更が可能とされてよい。また、本例では、右手によるダイレクトコマンドモードの操作を示したが、左手によるダイレクトコマンドモードの操作が可能に構成されてもよいし、両手の操作指を画面に接触させることによるダイレクトコマンドモードの操作が可能に構成されてもよい。また、制御部３０は、統計データ等に基づく人間の各指の相対位置関係を判断する情報を予め内部メモリ等に有し、当該情報に基づき、タッチパネル１０からの操作信号に含まれる複数の検出点と人間の各指との対応づけを行ってよい。また、ダイレクトコマンドモードにおける操作指の所定の動作として、上述したタップ操作以外に、操作面から指を離す動作や所定時間内に２回のタップ操作を行うダブルタップ操作等、任意の操作が予め設定されてよい。

ここで、情報処理装置１（制御部３０）によるダイレクトコマンドモードへの移行処理、及びダイレクトコマンドモードにおける操作に対する処理の詳細について、図５を用いて説明をする。

図５は、本実施形態に係る情報処理装置１（制御部３０）による処理の一例を示すフローチャートである。具体的には、ダイレクトコマンドモードへの移行からダイレクトコマンドモードにおける操作入力に対する動作を含む処理動作の一例を示すフローチャートである。当該処理フローは、タッチパネル１０により所定数Ｎ（例えば、手の５本指に対して所定の機能を割り当てる場合は、５）以上のタッチ点（操作指の接触点）が検出される度に実行されてよい。

図５を参照するに、ステップＳ１０１では、所定数Ｎ点以上の操作指の接触が検出されてから所定時間Ｔ経過したか否かを判定する。所定時間Ｔ経過している場合、ステップＳ１０３に進み、所定時間Ｔ経過していない場合、ステップＳ１０２に進む。

ステップＳ１０２では、所定数Ｎ点以上の操作指の接触が継続して検出されているか否かを判定する。継続して検出されている場合は、ステップＳ１０１に戻り、継続して検出されていない場合は、今回の処理を終了する。

ステップＳ１０３では、所定時間Ｔ継続して所定数Ｎ点以上の操作指の接触が検出されていることに対応して、タッチパネル１０による操作モードを、通常操作モードからダイレクトコマンドモードに移行させる。これにより、操作者がダイレクトコマンドモードへの移行を意図してタッチパネル１０を複数の指で触った場合のみダイレクトコマンドモードへの移行を行うことができるため、偶然に触れた場合等、誤操作によるダイレクトコマンドモードへの移行を防止することができる。

続いて、ステップＳ１０４では、タッチパネル１０から入力された操作信号に基づき、検出された全てのタッチ点の相対位置関係を認識する。その上で、当該相対位置関係に基づいて、各タッチ点（即ち、各操作指）に対応する機能を割り当てる。例えば、上述したとおり、統計データ等に基づく人間の各指の相対位置関係を判断する情報を予め内部メモリ等に有し、当該情報に基づき、タッチパネル１０からの操作信号に含まれる複数のタッチ点と人間の各指との対応づけを行ってよい。そして、各タッチ点に対応づけられた所定の操作指に対応して予め設定された所定の機能割り当てる。この際、図２に示した例のように、ディスプレイ５０の画面の内容に関わらず、各操作指に対応して所定の機能を割り当ててもよいし、画面の内容に応じて各操作指に対応して割り当てる機能を決定（変更）してもよい。

続いて、ステップＳ１０５では、各タッチ点（に対応づけられた各操作指）に割り当てられた機能に対応するアイコンを画面に表示する。上述した例のように、各タッチ点（操作指の接触位置）に対応するディスプレイ５０の画面上の座標位置から所定の範囲内（好ましくは、操作面を覆う手のひらで表示が隠れない当該座標位置の上方近傍）にアイコンを表示する。これにより、各操作指に対応づけられた機能を確認することができるため、確実な操作を行うことができる。

続いて、ステップＳ１０６では、所定数（Ｎ−１）点以上の操作指の接触が継続して検出されているか否かを判定する。継続して検出されている場合は、ステップＳ１０７に進み、継続して検出されていない場合は、ステップＳ１０９に進む。本ステップでは、ダイレクトコマンドモードにおける操作者による操作の待ち状態において、当該フロー開始時にタッチパネル１０の操作面への接触が検出されていた複数のタッチ点が継続して検出されているかを確認する。ダイレクトコマンドモードにおける操作者による操作の待ち状態で、当該複数のタッチ点の検出がされなくなった場合は、ダイレクトコマンドモードを終了する（後述するステップＳ１０９）。なお、本ステップにて、所定数Ｎよりも１つ少ない所定数（Ｎ−１）点以上のタッチ点が継続して検出されているか否かを判定するのは、タップ操作の際、一度、操作指がタッチパネル１０の操作面を離れるので、それにより、ダイレクトコマンドモードが終了しないようにするためである。

ステップＳ１０７では、タッチパネル１０の操作面への接触が検出された各操作指のうち、いずれかの操作指によるタップ操作（所定の動作）に対応する操作信号が入力されたか否かを判定する。タップ操作に対応する操作信号が入力された場合、ステップＳ１０８に進み、タップ操作に対応する操作信号の入力がされなかった場合、ステップＳ１０６に戻る。

ステップＳ１０８では、タッチパネル１０から入力された操作信号に基づいて、タップ操作を行った操作指に対応して割り当てられた機能を実行する。

続いて、ステップＳ１０９では、ダイレクトコマンドモードを終了し、通常操作モードに移行して、今回の処理を終了する。

なお、操作者の両手のいずれかの指で操作されることを考慮すれば、所定数Ｎは、２≦Ｎ≦１０の任意の数に適宜設定されてよい。

以上、本発明を実施するための形態について詳述したが、本発明はかかる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

例えば、上述した実施形態では、タッチパネル１０は、ディスプレイ５０の画像表示部の表面に配置されるものであったが、ディスプレイ５０とは別に遠隔配置されてもよい。この場合でも、情報処理装置１は、上述した実施形態と同様の作用・効果を奏する。即ち、操作者は、例えば、手元に配置したタッチパネル（タッチパッド）に手の指を複数本接触させ、接触させた複数本の操作指のうち、いずれかにより所定の動作を行うことで、画面を視認することなく、各操作指に割り当てられた機能を実行することが可能である。

また、上述した実施形態では、情報処理装置１は、車載装置であったが、車両に搭載されない情報処理装置であってもよい。即ち、上述した実施形態で説明したダイレクトコマンドモードへの移行処理、及び、ダイレクトコマンドモードにおける操作に対する処理は、車載されるか否かを問わず、タッチパネルによる画面の操作に対する処理を行う、任意の情報処理装置に適用されてよい。

１情報処理装置
１０タッチパネル
２０入力制御部
３０制御部（認識部、割り当て部、実行部）
４０表示制御部
５０ディスプレイ

Claims

複数の操作指の操作面への接触を検知する多点検知可能なタッチパネルであって、ディスプレイに表示される画面を操作するタッチパネルと、
前記タッチパネルにより前記操作面への接触が検知された複数の操作指の接触位置の相対位置関係を認識する認識部と、
前記認識部により認識された前記複数の操作指の接触位置の相対位置関係に基づいて、前記複数の操作指のそれぞれに対応する所定の動作を行った際の所定の機能を割り当てる割り当て部と、
前記タッチパネルにより、前記複数の操作指のうち、いずれかの操作指による前記所定の動作が検知された場合、前記割り当て部により前記所定の動作を行った操作指に割り当てられた対応する前記所定の機能を実行する実行部と、を備えることを特徴とする、
情報処理装置。
前記割り当て部は、
前記タッチパネルにより所定時間継続して前記操作面への接触が検知された複数の操作指のそれぞれに対応する前記所定の機能を割り当てることを特徴とする、
請求項１に記載の情報処理装置。
前記実行部は、
前記タッチパネルにより前記操作面への接触が検知された複数の操作指それぞれの接触位置に対応する前記ディスプレイの画面上の座標位置から所定の範囲内に、前記割り当て部により前記複数の操作指のそれぞれに割り当てられた前記所定の機能に対応するアイコンを表示することを特徴とする、
請求項１又は２に記載の情報処理装置。
前記割り当て部は、
前記ディスプレイに表示されている画面に応じて、前記複数の操作指のそれぞれに対応して割り当てる前記所定の機能を変更することを特徴とする、
請求項１乃至３のいずれか一項に記載の情報処理装置。
前記ディスプレイは、
前記タッチパネルを画像表示部の表面に配置したタッチパネルディスプレイであることを特徴とする、
請求項１乃至４のいずれか一項に記載の情報処理装置。