JP5933468B2 - 情報表示制御装置、情報表示装置および情報表示制御方法 - Google Patents

Description

本発明は、情報表示制御装置、情報表示装置および情報表示制御方法に関する。

下記特許文献１には、プロンプター方式と称される遠隔操作技術を採用したカーナビゲーション装置が紹介されている。このカーナビゲーション装置では、表示装置が車両のセンターコンソールの上部に取り付けられ、タッチパネルが該センターコンソールの下部に取り付けられている。さらに、タッチパネル上を移動する手を撮影するためのカメラが設けられている。タッチパネルの表面に指を当てて上下左右に移動させると、カメラが、操作する手を含むタッチパネルの表面を撮影する。撮影映像から手の画像が抽出され、その手画像がメインの画像に重畳される。タッチパネル上での指の移動に併せて、表示画面上を手画像が移動するので、あたかもタッチパネル付き画面を操作しているような感覚が得られる。

下記特許文献２には、パーソナルコンピュータの使用環境において、タブレット上にペンで筆記することによって入力操作を行う技術が紹介されている。特にペンの３次元位置を検出する種々の技術が紹介されている。また、画面上のカーソルに影を付け、その影を、タブレット上方のペンの高さに応じて変化させることにより、手元を見なくても実際のペンが置かれている空間位置を把握できるとしている。

特許第４９１５５０３号公報 特開平９−３０５３０６号公報

特許文献１の技術では、カメラで撮影した画像は平面画像であるので、手の位置はその平面画像における２次元位置でしか識別できない。また、カメラによる撮影は、指がタッチパネルに接触している時に限られている。すなわち、手の２次元位置情報しか利用されない。

他方、特許文献２の技術では、ペンの３次元位置を検出することができ、ペンの高さをカーソルの影に反映させることによって画面上でペンの高さを把握できる。しかし、特許文献２の技術はパーソナルコンピュータの使用環境が前提であるので、特許文献２の技術をそのまま他の使用環境で採用すると不便が生じる可能性がある。

本発明は、指示物の３次元位置情報を使って画面表示を工夫することにより、操作性の向上等を図ることを目的とする。

本発明の一形態に係る情報表示制御装置は、表示装置用接続部と、入力装置用接続部と、制御部とを含む。表示装置用接続部は、表示面を有する表示装置が接続される。入力装置用接続部は、入力面上の空間に存在する指示物の３次元位置を検出する入力装置が接続され、入力装置から検出結果に関する３次元位置情報が入力される。制御部は、２次元位置変換処理と、表示画像データ生成処理とを行う。２次元位置変換処理では、制御部は、３次元位置情報に基づき、入力面のうちで入力面の法線に沿った指示物の直下位置にあたる入力面内位置を、表示装置の表示面内位置に変換する。表示画像データ生成処理では、制御部は、表示面に表示する表示画像のデータを生成する。また、表示画像データ生成処理では、制御部は、３次元位置情報に基づき、入力面から入力面の法線に沿った指示物までの距離が小さいほど、表示面内位置に表示するプロンプトが指し示す第１オブジェクトと、他のオブジェクトである第２オブジェクトとの視認性の差を拡大させる視認性調整処理を行う。第１オブジェクトはアイコンであり、第２オブジェクトは地図画像を含む。制御部は、視認性調整処理では、地図画像の情報量を減少することによって第２オブジェクトの視認性を下げ、それにより視認性の差を拡大させる。

上記一形態によれば、入力面から指示物までの距離が小さいほど、指示物の表示面内位置に表示する第１オブジェクト（第１オブジェクトはアイコンである）と他のオブジェクトである第２オブジェクト（第２オブジェクトは地図画像を含む）との視認性の差が拡大する。このため、ユーザは、入力面に向けた手元を見なくても、表示面を通じて、指示物の位置および入力面までの距離を把握することができる。それにより、視線移動が減り、操作性が向上する。

本発明の目的、特徴および利点は、以下の詳細な説明と添付図面とによって、より明白となる。

実施の形態１について、情報表示装置を例示するブロック図である。 実施の形態１について、表示面と入力面の配置位置を例示する図である。 実施の形態１について、情報表示制御装置を例示するブロック図である。 実施の形態１について、アイコンの視認性の調整を例示する図である。 実施の形態１について、情報表示装置の動作を例示するフローチャートである。 実施の形態１について、２次元位置変換処理を説明する図である。 実施の形態１について、アイコンの視認性の変化を例示する図である。 実施の形態１について、アイコンの視認性の変化を例示する図である。 実施の形態１について、アイコンの視認性の変化を例示する図である。 実施の形態１について、地図画像の視認性の調整を例示する図である。 実施の形態１について、地図画像の視認性の変化を例示する図である。 実施の形態１について、地図画像の視認性の変化を例示する図である。 実施の形態１について、アイコンの視認性の調整を例示する図である。 実施の形態２について、プロンプトの表現を例示する図である。 実施の形態２について、情報表示装置の動作を例示するフローチャートである。 実施の形態２について、プロンプトの表現の変化を例示する図である。 実施の形態２について、プロンプトの表現を例示する図である。 実施の形態２について、距離情報の変化を例示する図である。 実施の形態２について、距離情報の変化を例示する図である。 実施の形態２について、距離情報の変化を例示する図である。 実施の形態２について、情報表示装置の動作を例示するフローチャートである（付加情報ありの場合）。 実施の形態２について、距離情報の第２例を示す図である。 実施の形態２について、距離情報の第３例を示す図である。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトをナビゲーション関連のアイコン上に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトをＡＶ関連のアイコン上に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトをアイコン領域に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトを画面操作領域に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトを操作不許可アイコン上に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトを操作許可アイコン上に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトを操作不許可領域に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（プロンプトを操作許可領域に表示する場合）。 実施の形態２について、プロンプトの表現を例示する図である（操作不許可領域から操作許可領域への進入方向が複数存在しうる場合）。 実施の形態２について、プロンプトおよび面内状態情報の表現を例示する図である（面内状態連動条件）。 実施の形態２について、プロンプトの表現を例示する図である（ジェスチャ操作と関連付けた場合）。 実施の形態２について、プロンプトの表現を例示する図である（スタイラスペンの場合）。 実施の形態２について、情報表示制御装置を例示するブロック図である（スタイラスペンを利用する場合）。 実施の形態２について、複数の入力装置を利用する場合の構成を例示するブロック図である。 実施の形態２について、複数のプロンプトが表示された画面を例示する図である（非分割画面の場合）。 実施の形態２について、複数のプロンプトが表示された画面を例示する図である（分割画面の場合）。 実施の形態２について、複数のプロンプトが表示された画面を例示する図である（スプリットビュー画面の場合）。

＜実施の形態１＞
＜全体構成の概略＞
図１に、実施の形態１に係る情報表示装置１のブロック図を例示する。図１では情報表示装置１が、移動体の一例である自動車に搭載される場合を例示しており、そのような使用環境下で情報表示装置１に接続される種々の装置も例示している。なお、情報表示装置１は、自動車以外の車両（例えば鉄道車両）に搭載されてもよいし、車両以外の移動体（例えば飛行機、船）に搭載されてもよい。

図１の例によれば、情報表示装置１は表示装置２と情報表示制御装置３とに大別され、情報表示制御装置３に入力装置４と、スピーカ５と、ＡＶ（Audio-Visual）機器６と、現在位置検出装置７とが接続されている。なお、スピーカ５の接続は任意であり、ＡＶ機器６と現在位置検出装置７のそれぞれも同様である。

表示装置２は、各種情報を表示する。表示装置２は、例えば、複数の画素がマトリクス状に配置されることによって構成された表示面２ａと、情報表示制御装置３から取得した表示画像データに基づいて各画素を駆動する（換言すれば、各画素の表示状態を制御する）駆動装置と、を含んでいる。なお、表示画像データは、予め定められた信号フォーマットの映像信号（デジタル信号でもアナログ信号でもよい）として、情報表示制御装置３から表示装置２に供給される。表示装置２で表示する画像は、静止画像の場合もあるし、動画像の場合もあるし、さらには静止画像と動画像の組み合わせの場合もある。

表示装置２は、例えば液晶表示装置によって構成可能である。この例によれば、表示パネル（ここでは液晶パネル）の表示領域が表示面２ａに対応し、表示パネルに外付けされた駆動回路が上記駆動装置に対応する。なお、駆動回路の一部が表示パネルに内蔵される場合もある。液晶表示装置の他に、エレクトロルミネセンス（ＥＬ）表示装置、プラズマディスプレイ装置、等によって、表示装置２を構成することも可能である。

情報表示制御装置３は、各種の処理を行う。具体的には、情報表示制御装置３は、表示装置２およびスピーカ５に供給する信号を生成する。また、情報表示制御装置３は、入力装置４から入力される情報（指示を含む）を解析し、解析結果に応じた各種処理（例えば表示装置２の制御）を行う。また、情報表示制御装置３は、ＡＶ機器６から入力されるＡＶ信号を表示装置２およびスピーカ５向けに加工する。また、情報表示制御装置３は、ユーザ指示に応じてＡＶ機器６を制御する。また、情報表示制御装置３は、現在位置検出装置７から入力される情報を使って、ナビゲーション機能等を実現する。

入力装置４は、ユーザから情報（指示を含む）を受け付ける。入力装置４は、例えば、ユーザが入力のために用いる指示物を検出する検出部と、検出部によって検出された結果を検出信号として情報表示制御装置３へ出力する検出信号出力部と、を含んでいる。

特に、入力装置４は、入力面４ａを有し、入力面４ａ上の空間に存在する指示物の３次元位置を検出し、検出結果に関する３次元位置情報を出力する。ここでは、そのような３次元位置検出機能を有する入力装置４として、非接触型（３次元（３Ｄ）型とも称される）のタッチパネルを例示する。非接触型タッチパネルとして種々の方式が開発されているが、例えば、静電容量方式の一つである投影容量方式が知られている。以下では入力装置４をタッチパネル４と称する場合がある。なお、タッチパネルはタッチパッドと称される場合もある。

タッチパネル４の入力面４ａにはセンサが設けられており、各センサの出力信号の状態から、入力面４ａ上および入力面４ａ上方における指示物の３次元位置を特定可能である。特定された３次元位置は例えば、入力面４ａに予め設定された３次元座標上の座標データによって表現される。この場合、入力面４ａ上で指示物を移動させると指示物の位置を示す座標データが変化するので、連続的に取得される一連の座標データによって指示物の移動を検出可能である。なお、座標以外の手法によって指示物の３次元位置情報を表現してもよい。

タッチパネル４は、指示物の３次元位置の検出だけでなく、入力面４ａに対する指示物の押圧力を検出可能な構成を採用してもよい。

タッチパネル４は情報表示装置１専用であってもよいし、あるいは、汎用の情報端末機に搭載されているタッチパネルをタッチパネル４として利用してもよい。

なお、入力に用いる上記指示物が、ユーザの指（より具体的には、指先）である場合を例示する。但し、例えばスタイラスペン（タッチペンとも称される）等の道具を指示物として利用してもよい。

スピーカ５は、聴覚的情報を出力する。例えば、ＣＤ等の音声、操作音、通知音、効果音、ガイダンス音声、等がスピーカ５から出力される。ＡＶ機器６は例えば、ＣＤ、ＤＶＤ、ＳＤメモリカード等のメディアに記録されているＡＶデータを再生する。

現在位置検出装置７は、自動車の現在位置を検出する。現在位置検出装置７は、例えば、ＧＰＳ（Global Positioning System）受信装置である。ＧＰＳ受信装置は、ＧＰＳ受信用のアンテナを介してＧＰＳ衛星から受信した情報に基づいて自車位置の現在位置を取得する。なお、ＧＰＳに代えて、加速度センサ、ジャイロまたは車速検出器によって、現在位置検出装置７を構成してもよい。あるいは、それらの組み合わせによって、現在位置検出装置７を構成してもよい。

ここで、図２に、表示装置２の表示面２ａとタッチパネル４の入力面４ａの配置位置を例示する。図２の例では、表示装置２は統合インストルメントパネルを構成し、表示面２ａは運転席正面に配置されている。

統合インストルメントパネルとは、例えば、メータ（車速計、回転計、等）、各種警報、ナビゲーション画像、各種装置（ＡＶ機器６等）の動作状況、車載カメラによる撮影映像を、統合的に表示可能な表示盤である。統合インストルメントパネルによれば、１種類または複数種類の情報がレイアウト表示され、また、表示する情報を切り替え可能である。情報のレイアウトおよび切り替えはユーザが操作可能であってもよい。なお、統合インストルメントパネルは、統合ダッシュボード、メータクラスタ、等とも称される。

なお、図２に２点鎖線で示すように、表示面２ａはダッシュボード中央、すなわち運転席正面と助手席正面の間に配置されてもよい。

他方、タッチパネル４の入力面４ａは、表示面２ａとは別の場所に配置されている。図２の例では、入力面４ａは、運転席横（助手席側）に、天井に向く姿勢で配置されている。なお、図２に２点鎖線で示すように、入力面４ａはダッシュボードに、運転席後方に向く姿勢で配置されてもよい。入力面４ａの配置場所は上記に限るものではない。

いずれの配置例においても、ユーザ（運転手）は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい。このため、従来であれば、入力操作時に表示面と入力面とを交互に見ることになるであろう。さらに、運転中は、車両前方を特に注視する必要がある。このような環境下においても情報表示装置１によれば、後述のように、操作性の向上等を図ることができる。

なお、情報表示装置１の利用環境は自動車等の移動体内に限定されるものではない。例えば、表示面２ａおよび入力面４ａは卓上に配置されてもよいし、あるいは、表示面２ａを室内壁面に配置してもよい。すなわち、表示面２ａと入力面４ａとが離れるほど、表示面２ａと入力面４ａを同時に視界に入れるのが難しくなる。また、表示面２ａが大きくなるほど、同様の傾向が生じる。

図３に、情報表示制御装置３のブロック図を例示する。図３の例によれば、情報表示制御装置３は、制御部１１と、記憶部１２と、接続部２２，２４，２５，２６，２７とを含んでいる。

制御部１１は、情報表示制御装置３における（換言すれば、情報表示装置１における）各種の処理を行う。例えば、制御部１１は、タッチパネル４（図１参照）から入力された情報を解析し、その解析結果に応じた画像データを生成し、その画像データを表示装置２へ出力する。

ここでは、制御部１１が中央演算処理部（例えば１つまたは複数のマイクロプロセッサで構成される）と主記憶部（例えばＲＯＭ、ＲＡＭ、フラッシュメモリ等の１つまたは複数の記憶装置で構成される）とによって構成される場合を例示する。この例によれば、主記憶部に格納された各種プログラム（換言すれば、アプリケーション）を中央演算処理部が実行することによって（換言すれば、ソフトウェアによって）、各種処理が実行される。各種処理は並列的に実行させることも可能である。なお、各種処理によって、それに対応した各種機能が実現される。

制御部１１が実行するプログラムとして、入力解析、画像生成、ナビゲーション、ＡＶ再生、等のプログラムが挙げられる。

制御部１１が実行するプログラムは、予め制御部１１の主記憶部に格納されていてもよいし、あるいは、実行時に記憶部１２から読み出されて主記憶部に格納されてもよい。主記憶部は、プログラムだけでなく各種データの格納にも利用される。また、主記憶部は、中央演算処理部がプログラムを実行する際の作業領域を提供する。また、主記憶部は、表示装置２に表示する画像を書き込むため画像保持部を提供する。画像保持部はビデオメモリまたはグラフィックメモリと称される場合もある。

なお、制御部１１が行う処理の全部又は一部が、ハードウェア（例えば、特定の演算を行うように構成された演算回路等）として構成されていてもよい。

記憶部１２は、各種情報を格納する。ここでは、記憶部１２は、制御部１１が利用する補助記憶部として設けられている。記憶部１２は、例えば、ハードディスク装置、光ディスク、書き換え可能かつ不揮発性の半導体メモリ、等の記憶装置の１つ以上を利用して構成可能である。

記憶部１２に格納される情報として、画像データ（アイコン、プロンプト、地図、等）、音声データ（操作音、通知音、効果音、ガイダンス音声、等）、ＡＶデータ、等が挙げられる。

接続部２２は、表示装置２用に設けられ、表示装置２と制御部１１とを信号伝送可能に接続する。なお、表示装置２と制御部１１との間の信号伝送は、有線、無線、またはそれらの組み合わせのいずれであってもよい。

接続部２２は例えば配線である。また、接続部２２は例えば配線接続用のコネクタを含んでもよく、この場合、表示装置２は接続相手となるコネクタを有する。

また、接続部２２は例えば、制御部１１から表示装置２へ伝送する信号を生成する信号生成回路を含んでもよい。具体的に、その信号生成回路は、制御部１１で生成されたデジタル信号（制御指示、画像データ、等）を伝送するためのアナログ伝送信号を生成する。この場合、表示装置２は、接続部２２の信号生成回路に対応した信号生成回路を有する。なお、表示装置２が制御部１１へ向けて信号を伝送可能である場合、接続部２２の信号生成回路は、表示装置２から送られてきたアナログ伝送信号から、制御部１１が取り扱い可能なデジタル信号を生成する。

また、接続部２２および表示装置２の信号生成回路は、上記アナログ伝送信号として無線信号を生成する構成であってもよい。この場合、接続部２２および表示装置２はアンテナも含むことになる。

接続部２４はタッチパネル４用に設けられ、接続部２５はスピーカ５用に設けられ、接続部２６はＡＶ機器６用に設けられ、接続部２７は現在位置検出装置７用に設けられている。これらの接続部２４，２５，２６，２７も、表示装置２用の接続部２２と同様に構成可能である。

なお、スピーカ５用の接続部２５の搭載は任意である。また、スピーカ５用の接続部２５を搭載していても、スピーカ５を接続しない構成を採用してもよい。ＡＶ機器６用の接続部２６と現在位置検出装置７の接続部２７のそれぞれも同様である。

＜視認性調整の処理＞
情報表示装置１では、指示物に対応させて表示面２ａにプロンプト（指示物の入力面４ａ上の位置情報を表示面２ａにおいて表現する描画要素であり、カーソル、ポインタ、等と称される場合もある）を表示し、そのプロンプトが指し示す第１オブジェクトと、他のオブジェクトである第２オブジェクトとの視認性の差を調整する。以下ではまず、第１オブジェクトがアイコンであり、そのアイコンの視認性を上げる例を説明する。

図４に、アイコン４０の視認性の調整を説明する図を示す。図４の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、２つの閾値ｚｔｈａ，ｚｔｈｂが予め設定されている。但し、閾値の数は２つに限定されるものではない。なお、指示物の距離ｚ０は、入力面４ａの法線に沿った距離のことであり、指示物の高さｚ０と表現してもよい。

ここではｚｔｈａ＜ｚｔｈｂであり、例えば、ｚｔｈａ＝１ｃｍ、ｚｔｈｂ＝２ｃｍである。なお、ｚｔｈａ，ｚｔｈｂは不等間隔に設定してもよい。

２つの閾値ｚｔｈａ，ｚｔｈｂによって、指示物の距離ｚ０に対して、４つの距離レベル（換言すれば、高さレベル）ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃが予め設定されている。すなわち、距離レベルｚｌｖｌ０はｚ０＝０に対応し、距離レベルｚｌｖｌａは０＜ｚ０＜ｚｔｈａに対応し、距離レベルｚｌｖｌｂはｚｔｈａ＜ｚ０＜ｚｔｈｂに対応し、距離レベルｚｌｖｌｃはｚｔｈｂ＜ｚ０に対応する。なお、ｚ０＝ｚｔｈａを距離レベルｚｌｖｌａ，ｚｌｖｌｂのいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈｂも同様である。なお、図４の例では、ｚ０＝０に対して距離レベルｚｌｖｌ０を割り当てているが、ｚ０＝０を距離レベルｚｌｖｌａに含めてもよい。

また、図４の例では、入力面４ａの押下された状態に、距離レベルｚｌｖｌ００が設定されている。入力面４ａの押下は、タッチパネル４が、入力面４ａに対する押圧力がｚ０＝０の場合よりも強いことを検出することによって、判別可能である。入力面４ａが押下されたか否かの情報は、タッチパネル４が出力する３次元位置情報に含まれるものとする。なお、入力面４ａの押下を便宜的にｚ０＜０と表現する場合もある。

なお、距離レベルｚｌｖｌ００を採用可能である場合、すなわちタッチパネル４が入力面４ａに対する押下を検出可能である場合、例えば、距離レベルｚｌｖｌ０（ｚ０＝０）によって、アイコン４０の選択が決定され、距離レベルｚｌｖｌ００（ｚ０＜０）によって、アイコン４０に関連付けられている機能が実行される、という使い分けが可能である。逆に、距離レベルｚｌｖｌ００を採用できないまたは採用しない場合、距離レベルｚｌｖｌ０（ｚ０＝０）に、アイコン４０の選択決定と機能実行の両方が割り当てられる。

図４に示すように、各距離レベルｚｌｖｌｃ，ｚｌｖｌｂ，ｚｌｖｌａ，ｚｌｖｌ０，ｚｌｖｌ００に対して、表現（換言すれば、見た目）の異なるアイコン４０が予め設定されている。図４の例では、距離レベルｚｌｖｌｃに割り当てられたアイコン４０は、平面状の四角形であり、当該四角形は単色で塗りつぶされている。距離レベルｚｌｖｌｂに割り当てられたアイコン４０は、距離レベルｚｌｖｌｃのアイコン４０において上記四角形の中に影を模した模様が付加されている。距離レベルｚｌｖｌａに割り当てられたアイコン４０は、距離レベルｚｌｖｌｂのアイコン４０が手前に飛び出した立体形状をしている。距離レベルｚｌｖｌ０に割り当てられたアイコン４０は、距離レベルｚｌｖｌａのアイコン４０と同じ立体形状をしているが、影模様を有さず、距離レベルｚｌｖｌａのアイコン４０とは異なる色（特に、赤色等の強調色）に着色されている。

また、距離レベルｚｌｖｌ００に割り当てられたアイコン４０は、距離レベルｚｌｖｌ０の立体形状において手前の面を奥へ押し込んだ状態を模した形状をしている。但し、タッチパネル４が入力面４ａに対する押圧力を検出可能な構成を有していない場合、押下時用のアイコン４０は省略してもよい。あるいは、押下時用のアイコン４０を、距離レベルｚｌｖｌ０のアイコン４０の代わりに採用してもよい。

このように、距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃごとに、アイコン４０の表現が異なっている。表現の相違は、表現要素が少なくとも１つが異なることによって、生じる。表現要素は例えば、大きさ、形状、色、模様、アニメーション表示（例えば回転、揺動）である。このため、大きさと、形状と、色と、アニメーション表示とのうちの少なくとも１つの表現要素を、距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃで変化させればよい。

特に図４の例によれば、指示物の距離ｚ０が小さいほど、アイコン４０に対する注目度が増すように、アイコン４０の表現が設定されている。すなわち、指示物の距離ｚ０が小さいほど、アイコン４０の視認性が上がる。

図５に、アイコン４０の表現を指示物の距離ｚ０に応じて変化させる処理Ｓ１０のフローチャートを例示する。

図５の例によれば、ステップＳ１１において、タッチパネル４（図１参照）が入力面４ａ上の空間に存在する指示物を検出し、制御部１１（図１参照）がその検出結果である３次元位置情報を、接続部２４（図１参照）を介してタッチパネル４から取得する。

そして、制御部１１は、ステップＳ１２において、３次元位置情報に基づき、指示物の入力面内位置を、表示装置２の表示面内位置に変換する（２次元位置変換処理）。ここで、図６に２次元位置変換処理の説明図を示す。

図６に示すように、入力面内位置は、入力面４ａのうちで入力面４ａの法線（図６ではｚ軸に平行な線である）に沿った指示物の直下位置のことである。換言すれば、指示物から入力面４ａへ下ろした垂線と、入力面４ａとの交点が、指示物の入力面内位置である。より具体的には図６の左部に示すように、指示物の位置の座標が（ｘ０，ｙ０，ｚ０）である場合、入力面内位置の座標は（ｘ０，ｙ０，０）、換言すれば（ｘ０，ｙ０）である。

得られた入力面内位置（ｘ０，ｙ０）は、例えば予め規定された変換規則によって、表示装置２の表示面内位置（Ｘ０，Ｙ０）に変換される。変換規則は変換式、変換テーブル、等によって具現化可能である。例えば入力面４ａと表示面２ａとが相似形（相似比をｒとする）である場合、変換式はＸ０＝ｘ０×ｒ、Ｙ０＝ｙ０×ｒで与えられる。変換式を一般化すれば、Ｘ０＝ｆｘ（ｘ０，ｙ０）、Ｙ０＝ｆｙ（ｘ０，ｙ０）で与えられる。また、表示面２ａが曲面にデザインされている場合でも、その曲面デザインに応じて適切な変換式を規定することは可能である。

なお、図６では、入力面４ａの左上頂点を仮想的なｘｙｚ座標系の原点に選び、入力面４ａの横方向および縦方向にｘ軸およびｙ軸にそれぞれ設定し、入力面４ａの法線方向にｚ軸を設定している。但し、座標系の設定はこれに限定されるものではない。例えば、入力面４ａの中心に原点を設定してもよいし、あるいは、原点を入力面４ａの上方に設定してもよい。しかし、どのような座標系も（直交座標系以外も含む）、図６に例示したｘｙｚ座標系に変換可能である。すなわち、図６の例示したｘｙｚ座標系であっても、一般性を失うことはない。また、図６では表示面２ａに対しても同様にして、仮想的なＸＹ座標を設定している。

制御部１１は、ステップＳ１３（図５参照）において、３次元位置情報に基づき、入力面４ａと指示物との間の距離ｚ０が、距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃ（図４参照）のいずれに該当するかを判別する（距離レベル判別処理）。

次に、制御部１１は、ステップＳ１４において、表示画像データを生成する（表示画像データ生成処理）。例えば、プロンプト用のレイヤ（換言すれば、画像保持部）にプロンプトの画像データを書き込み、アイコン用のレイヤにアイコン４０の画像データを書き込み、それらのレイヤと他のレイヤ（例えば地図画像データが書き込まれたレイヤ）とを合成することによって、表示画像データが生成される。ここで、プロンプトは、ステップＳ１２で得られた表示面内位置に表示されるように、表示画像データが生成される。

特にステップＳ１４は、プロンプトが指し示す第１オブジェクト（ここではアイコン４０）と、他のオブジェクトである第２オブジェクトとの視認性の差を調整するステップＳ１４ａ（視認性調整処理）を含んでいる。より具体的には、制御部１１は、ステップＳ１３で判別した距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃを、予め定められた規則（図４参照）に照合することによって、アイコン４０の画像を選択する。これにより、指示物の距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃに応じて、プロンプトが指し示すアイコン４０の視認性を変化させることができる。

なお、プロンプトが指し示すアイコン４０は、例えば、アイコン４０の画像がプロンプトの画像と重なりを有することによって特定可能である。また、例えば、プロンプトの表示位置からその指し示す方向にプロンプト指示範囲（その大きさは予め設定すればよい）を設定し、そのプロンプト指示範囲に重なるアイコン４０を、プロンプトが指し示すアイコン４０として特定可能である。

ステップＳ１４で生成された表示画像データは、表示装置２へ伝送され、表示装置２によって表示面２ａに表示される。

そして、制御部１１は、後続の検出タイミングで得られた３次元位置情報に対して、処理Ｓ１０を繰り返す。

なお、２次元位置変換ステップＳ１２は、距離レベル判別ステップＳ１３よりも後で実行してもよい。

図７および図８に、アイコン４０の表現の変化、すなわちアイコン４０の視認性の変化を例示する。図７および図８から分かるように、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、アイコン４０の視認性が上がるようにその表現が変化する。逆に、指示物の距離ｚ０が増大するに従って、アイコン４０の表現は標準設定に近づき、アイコン４０の視認性が下がる。なお、図７および図８の例では、アイコン以外のオブジェクトである地図画像の視認性は、変化しないものとしている。

このように指示物の距離ｚ０が小さいほど、アイコン４０の視認性が上がり、アイコン４０と他のオブジェクト（図７および図８の例では地図画像）との視認性の差が拡大する。このため、ユーザ（ここでは運転手）は、入力面４ａに向けた手元を見なくても、表示面２ａを通じて、指示物の位置および入力面４ａまでの距離を把握することができる。それにより、視線移動が減り、操作性が向上する。この点は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい環境下において、特に好適である。また、運転中に視線を車両前方から大きくそらすのを回避可能である。

ここで、図４、図７および図８の例では、各距離レベルｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃ内においてアイコン４０の表現が変化しないものとした。これに対し、指示物の距離ｚ０が或る距離レベルに属している間に、アイコン４０の表現を、指示物の距離ｚ０に応じて連続的に（換言すれば、無段階に）変化させる連続的変化を採用してもよい。なお、距離レベルｚｌｖｌｃ，ｚｌｖｌｂ間でアイコン４０の表現が連続していてもよいし、あるいは、そのような連続性が無くてもよい。距離レベルｚｌｖｌｂ，ｚｌｖｌａ間での連続性についても同様である。また、距離レベルｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃのうちの一部の距離レベルだけで、アイコン４０の連続的変化を採用してもよい。それによれば、全ての距離レベルで連続的変化を採用する場合に比べて、アイコン４０の描画処理にかかる負荷を軽減できる。

これに対し、図４、図７および図８の例のようにアイコン４０の表現が指示物の距離レベルごとに変化することによって、アイコン４０が連続的に変化する場合に比べて、アイコン４０の変化に気付きやすい。換言すれば、認知性に優れる。

また、アイコン４０が連続的に変化する場合には、指示物の若干の揺れが、アイコン４０の変化に過敏に反映されてしまう。しかし、指示物の距離レベルごとの変化であれば、そのような過敏な変化を抑制できる。このため、例えば車中のように揺れが生じる環境下においても、アイコン４０の表現が安定し、快適な操作性を提供可能である。

また、例えば車中のように揺れが生じる環境下では、入力面４ａへの接触（ｚ０＝０）ではなく、入力面４ａの押下（ｚ０＜０）によって、アイコン４０に関連付けられている機能（図８の例ではＣＤの再生）が実行されるように処理設計をしておけば、誤操作を減らせる。これに関連して、図４および図８の例では接触（ｚ０＝０）と押下（ｚ０＜０）とでアイコン４０の表現を異ならせているので、ユーザは、接触と押下との違いを、入力面４ａに向けた手元を見なくても、表示面２ａを通じて確認することができる。かかる点からも、快適な操作性を提供可能である。

上記では、プロンプト３１が指し示す第１オブジェクトが１つのアイコン４０である場合を例示した。これに対して、第１オブジェクトは複数のアイコン４０であってもよい。総じて言うならば、第１オブジェクトは、１つまたは複数のアイコンが配置されたアイコン領域であってもよい。例えば図９に示すように、距離レベルｚｌｖｌｂでは、アイコン領域に在る全てのアイコン４０の視認性を上げる。

また、図９の例によれば、距離レベルｚｌｖｌａ，ｚｌｖｌ０では、プロンプト３１の直近に在るアイコン４０についてのみ視認性を上げ、他のアイコン４０は距離レベルｚｌｖｌｂと同じ表現に設定されている。これに対し、例えば、他のアイコン４０は、距離レベルｚｌｖｌｃ（図４参照）の表現に設定してもよい。いずれに例にしても、プロンプト３１の直近に在るアイコン４０に比べて、他のアイコン４０は視認性が低い状態になる。すなわち、指示物の距離ｚ０の変化の途中で、視認性を上げる第１オブジェクトの範囲を変更しても構わない。

なお、図９では、紙面の大きさの都合により、距離レベルｚｌｖｌｃ，ｚｌｖｌ００での画面表示は省略している。

ところで、上記では、プロンプト３１が指し示す第１オブジェクト自体の視認性を上げる例を説明した。これに対し、第１オブジェクト以外の他のオブジェクトである第２オブジェクトの視認性を下げることによって、第１オブジェクトの視認性を相対的に上げることも可能である。そのような例を図１０および図１１を参照して説明する。

図１０の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、２つの閾値ｚｔｈｈ，ｚｔｈｉが予め設定されている。但し、閾値の数は２つに限定されるものではない。

ここではｚｔｈｈ＜ｚｔｈｉであり、例えば、ｚｔｈｈ＝１ｃｍ、ｚｔｈｉ＝２ｃｍである。なお、ｚｔｈｈ，ｚｔｈｉは不等間隔に設定してもよい。また、ｚｔｈｈは、ｚｔｈａまたはｚｔｈｂ（図４参照）と同じ値であってもよいし、あるいは、ｚｔｈａおよびｚｔｈｂのいずれとも異なる値であってもよい。ｚｔｈｉについても同様である。

２つの閾値ｚｔｈｈ，ｚｔｈｉによって、指示物の距離ｚ０に対して、３つの距離レベル（換言すれば、高さレベル）ｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊが予め設定されている。すなわち、距離レベルｚｌｖｌｈは０≦ｚ０＜ｚｔｈｈに対応し、距離レベルｚｌｖｌｉはｚｔｈｈ＜ｚ０＜ｚｔｈｉに対応し、距離レベルｚｌｖｌｊはｚｔｈｉ＜ｚ０に対応する。なお、ｚ０＝ｚｔｈｈを距離レベルｚｌｖｌｈ，ｚｌｖｌｉのいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈｉも同様である。なお、図１０の例では、ｚ０＝０を距離レベルｚｌｖｌｈを含めているが、図４の例と同様にｚ０＝０に距離レベルｚｌｖｌ０を割り当ててもよい。

図１０に示すように、各距離レベルｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊに対して、表示画像に含める地図要素が予め設定されている。図１０の例では、距離レベルｚｌｖｌｊでは、地図要素の全て（ここでは主要道路と細い道路と建物とが例示される）が表示される（図１１の上段の表示画像を参照）。また、距離レベルｚｌｖｌｉでは、主要道路と細い道路とは表示されるが、建物は省略される（図１１の中段の表示画像を参照）。また、距離レベルｚｌｖｌｈでは、主要道路のみが表示される（図１１の下段の表示画像を参照）。

このように、距離レベルｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊごとに、地図画像の情報量が異なっている。このため、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、地図要素が間引かれ、それにより地図画像の情報量が減少する。その結果、地図画像の視認性を下げることができる。逆に、指示物の距離ｚ０が増大するに従って、地図画像の情報量が増大し、それにより地図画像の視認性が上がる。

なお、図１１の例では、距離レベルｚｌｖｌｉでは方向と縮尺の表示を、距離レベルｚｌｖｌｊに比べて、くすんだ表現に設定している。また、距離レベルｚｌｖｌｈでは方向と縮尺を表示しない。かかる表現設定も地図画像の情報量の調整に貢献している。

図１０および図１１の例によれば、視認性調整処理Ｓ１４ａ（図５参照）において、第２オブジェクトとしての地図画像の視認性を調整することにより、第１オブジェクトと第２オブジェクトとの視認性の差を調整することができる。

ここで、図１１に対応する図１２に例示するように、第２オブジェクトである地図画像だけでなく、第１オブジェクトであるアイコン４０も同時に、視認性を調整してもよい。図１２では、ｚｌｖｌｊ＝ｚｌｖｌｃ、ｚｌｖｌｉ＝ｚｌｖｌｂ、ｚｌｖｌｈ＝ｚｌｖｌａとした場合を例示している。これによれば、指示物の距離ｚ０が減少するに従って、アイコン４０の視認性が上がると共に、地図画像の視認性が下がる。このため、ｚ０の減少に伴う視認性の差の拡大が、より分かりやすくなり、操作性がさらに向上する。

なお、くすみ、透明度、鮮鋭性等を調整することによっても、地図画像の視認性を調整可能である。その際、連続的変化も適用可能である。また、くすみ、透明度、鮮鋭性等の調整は、地図画像だけでなく、ＡＶ再生画像等の他の画像、アイコン等にも適用可能である。例えばくすみの調整によってアイコン４０の視認性を調整する例を図１３に示す。

図１３には、アイコン４０が第２オブジェクトであり、指示物の距離ｚ０の減少に伴ってアイコン４０の視認性を下げる例が示されている。図１３の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、２つの閾値ｚｔｈｐ，ｚｔｈｑが予め設定されている。但し、閾値の数は２つに限定されるものではない。

ここではｚｔｈｐ＜ｚｔｈｑであり、例えば、ｚｔｈｐ＝１ｃｍ、ｚｔｈｑ＝２ｃｍである。なお、ｚｔｈｐ，ｚｔｈｑは不等間隔に設定してもよい。また、ｚｔｈｐは、ｚｔｈｈまたはｚｔｈｉ（図１０参照）と同じ値であってもよいし、あるいは、ｚｔｈｈおよびｚｔｈｉのいずれとも異なる値であってもよい。ｚｔｈｑについても同様である。

２つの閾値ｚｔｈｐ，ｚｔｈｑによって、指示物の距離ｚ０に対して、３つの距離レベル（換言すれば、高さレベル）ｚｌｖｌｐ，ｚｌｖｌｑ，ｚｌｖｌｒが予め設定されている。すなわち、距離レベルｚｌｖｌｐは０≦ｚ０＜ｚｔｈｐに対応し、距離レベルｚｌｖｌｑはｚｔｈｐ＜ｚ０＜ｚｔｈｑに対応し、距離レベルｚｌｖｌｒはｚｔｈｑ＜ｚ０に対応する。なお、ｚ０＝ｚｔｈｐを距離レベルｚｌｖｌｐ，ｚｌｖｌｑのいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈｑも同様である。なお、図１３の例では、ｚ０＝０を距離レベルｚｌｖｌｐを含めているが、図４の例と同様にｚ０＝０に距離レベルｚｌｖｌ０を割り当ててもよい。

図１３の例では、距離レベルｚｌｖｌｒでは、第２オブジェクトとしてのアイコン４０を、標準設定に従って表示する。また、距離レベルｚｌｖｌｑでは、標準設定よりも、くすんだ表現で、第２オブジェクトとしてのアイコン４０を表示する。また、距離レベルｚｌｖｌｐでは、第２オブジェクトとしてのアイコン４０を表示しない。このため、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、アイコン４０の視認性を下げることができる。その結果、第１オブジェクト（例えば地図画像）の視認性を相対的に上げることができる。

＜実施の形態２＞
実施の形態１では視認性調整という画面表示の工夫によって操作性を向上させる技術を説明した。実施の形態２では、その視認性調整に加えて、プロンプト３１に種々の工夫を施し、操作性をさらに向上させる技術を説明する。

図１４に、プロンプト３１の表現を例示する。図１４の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、３つの閾値ｚｔｈ１，ｚｔｈ２，ｚｔｈ３が予め設定されている。但し、閾値の数は３つに限定されるものではない。

ここではｚｔｈ１＜ｚｔｈ２＜ｚｔｈ３であり、例えば、ｚｔｈ１＝１ｃｍ、ｚｔｈ２＝２ｃｍ、ｚｔｈ３＝３ｃｍである。なお、ｚｔｈ１，ｚｔｈ２，ｚｔｈ３は不等間隔に設定してもよい。また、ｚｔｈ１は、ｚｔｈａ、ｚｔｈｂ、ｚｔｈｈ、ｚｔｈｉ、ｚｔｈｐまたはｚｔｈｑ（図４、図１０および図１３参照）と同じ値であってもよいし、あるいは、ｚｔｈａ、ｚｔｈｂ、ｚｔｈｈ、ｚｔｈｉ、ｚｔｈｐおよびｚｔｈｑのいずれとも異なる値であってもよい。ｚｔｈ２およびｚｔｈ３についても同様である。

３つの閾値ｚｔｈ１，ｚｔｈ２，ｚｔｈ３によって、指示物の距離ｚ０に対して、５つの距離レベル（換言すれば、高さレベル）ｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４が予め設定されている。すなわち、距離レベルｚｌｖｌ０はｚ０＝０に対応し、距離レベルｚｌｖｌ１は０＜ｚ０＜ｚｔｈ１に対応し、距離レベルｚｌｖｌ２はｚｔｈ１＜ｚ０＜ｚｔｈ２に対応し、距離レベルｚｌｖｌ３はｚｔｈ２＜ｚ０＜ｚｔｈ３に対応し、距離レベルｚｌｖｌ４はｚｔｈ３＜ｚ０に対応する。なお、ｚ０＝ｚｔｈ１を距離レベルｚｌｖｌ１，ｚｌｖｌ２のいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈ２およびｚ０＝ｚｔｈ３も同様である。なお、図１４の例では、ｚ０＝０に対して距離レベルｚｌｖｌ０を割り当てているが、ｚ０＝０を距離レベルｚｌｖｌ１に含めてもよい。

図１４に示すように、各距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３に対して、表現（換言すれば、見た目）の異なるプロンプト３１が予め設定されている。図１４の例では、距離レベルｚｌｖｌ３，ｚｌｖｌ２には、写実的に描画された指先の画像（写真でもよい）が、プロンプト３１の画像として割り当てられている。但し、距離レベルｚｌｖｌ３のプロンプト３１は、距離レベルｚｌｖｌ２のプロンプト３１よりも小さい。また、距離レベルｚｌｖｌ１には、物を指し示す際に一般に行われる人差し指を突き出した状態の手を、線図で簡略化した手画像が、割り当てられている。また、距離レベルｚｌｖｌ０には、距離レベルｚｌｖｌ１の簡略化された手画像に背景枠を追加した画像が、割り当てられている。なお、図１４の例では、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当する場合には、プロンプト３１を表示しない。

このように、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３ごとに、プロンプト３１の表現が異なっている。表現の相違は、表現要素が少なくとも１つが異なることによって、生じる。表現要素は例えば、大きさ、形状、色、模様、アニメーション表示である。このため、大きさと、形状と、色と、アニメーション表示とのうちの少なくとも１つの表現要素を、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３で変化させればよい。

図１５に、プロンプト３１の表現を指示物の距離ｚ０に応じて変化させる処理Ｓ２０のフローチャートを例示する。図１５の処理Ｓ２０は、図５の処理Ｓ１０にステップＳ２１（プロンプト表現設定処理）が追加されている。

図１５の例において、ステップＳ１１，Ｓ１２が図５の場合と同様に実行される。そして、距離レベル判別ステップＳ１３では、制御部１１は、ステップＳ１１で取得した３次元位置情報に基づき、入力面４ａと指示物との間の距離ｚ０が、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４（図１４参照）のいずれに該当するかも判別する。

次に、制御部１１は、ステップＳ２１において、プロンプト３１の表現を設定する（プロンプト表現設定処理）。特に、制御部１１は、ステップＳ１３で判別した距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４を、予め定められた規則（図１４参照）に照合することによって、プロンプト３１の画像を選択する。これにより、指示物の距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４に応じて、プロンプト３１の表現を変化させることができる。

その後、制御部１１は、ステップＳ１４において、プロンプト３１が、ステップＳ１２で得られた表示面内位置に、ステップＳ２１で設定された表現で以て表示されるように、表示画像データを生成する（表示画像データ生成処理）。なお、表示画像データは、実施の形態１での例示と同様にして、生成可能である。また、ステップＳ１４では、視認性調整処理ステップＳ１４ａが実行される。表示画像データは、表示装置２へ伝送され、表示装置２によって表示面２ａに表示される。

そして、制御部１１は、後続の検出タイミングで得られた３次元位置情報に対して、処理Ｓ２０を繰り返す。

図１６に、プロンプト３１の表現の変化を例示する。図１６から分かるように、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、プロンプト３１の表現が変化する。また、指示物の距離ｚ０が増大する場合にも、すなわち指示物が入力面４ａから遠ざかる場合にも、プロンプト３１の表現が変化する。

なお、２次元位置変換ステップＳ１２は、距離レベル判別ステップＳ１３またはプロンプト表現設定ステップＳ２１よりも後で実行してもよい。

このようにプロンプト３１の表現が指示物の距離ｚ０に応じて変化するので、ユーザ（ここでは運転手）は、タッチパネル４に向けた手元を見なくても、表示面２ａを通じて、タッチパネル４までの距離ｚ０を把握することができる。このため、視線移動が減り、操作性が向上する。この点は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい環境下において、特に好適である。また、運転中に視線を車両前方から大きくそらすのを回避可能である。

また、プロンプト３１の表現は、指示物の距離レベルごとに変化する。このため、プロンプトの大きさ等が連続的に変化する場合に比べて、プロンプト３１の変化に気付きやすい。換言すれば、認知性に優れる。

また、プロンプトの大きさ等が連続的に変化する場合には、指示物の若干の揺れが、プロンプトの変化に過敏に反映されてしまう。しかし、プロンプト３１のように指示物の距離レベルごとの変化であれば、そのような過敏な変化を抑制できる。このため、例えば車中のように揺れが生じる環境下においても、プロンプト３１の表現が安定し、快適な操作性を提供可能である。

ここで、図１４および図１６の例では、各距離レベルｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４内においてプロンプト３１の表現が変化しないものとした。これに対し、指示物の距離ｚ０が或る距離レベルに属している間に、プロンプト３１の表現を、指示物の距離ｚ０に応じて変化させてもよい。図１７にそのような例の説明図を示す。

図１７の例では、距離レベルｚｌｖｌ３において、プロンプト３１の大きさを指示物の距離ｚ０に応じて連続的に（換言すれば、無段階に）変化させる連続的変化を実行する。より具体的には、距離ｚ０が連続的に小さくなるのに従って、プロンプト３１を連続的に大きくする。逆に、距離ｚ０が連続的に大きくなるのに従って、プロンプト３１を連続的に小さくする。また、距離レベルｚｌｖｌ２においても、距離レベルｚｌｖｌ３と同様に、プロンプト３１の大きさについて連続的変化を実行する。なお、距離レベルｚｌｖｌ２，ｚｌｖｌ３間でプロンプト３１の大きさが連続していてもよいし、あるいは、そのような連続性が無くてもよい。

また、図１７の例では、距離ｚ０が距離レベルｚｌｖｌ３から距離レベルｚｌｖｌ２に変化するのに伴って、および、距離ｚ０が距離レベルｚｌｖｌ２から距離レベルｚｌｖｌ３に変化するのに伴って、プロンプト３１の色を変化させる。

すなわち、距離レベルｚｌｖｌ３では、距離レベルの変化に伴って変化させる表現要素とは異なる表現要素を、指示物の距離ｚ０に応じて連続的に変化させる。距離レベルｚｌｖｌ２においても同様である。このような連続的変化によれば、単一の距離レベル内においても指示物の距離ｚ０の変化を把握しやすくなる。

また、上記のように、かかる連続的変化において変化させる表現要素を、距離レベルの変化に伴って変化させる表現要素とは異ならせている。このため、距離レベル単位でプロンプト３１の表現を変化させることに起因した上記効果を損なうものではない。

図１７の例では距離レベルｚｌｖｌ１ではプロンプト３１の大きさを変化させないものとしているが、距離レベルｚｌｖｌ１内でプロンプト３１の大きさを連続的に変化させてもよい。すなわち、距離レベルｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３のうちの一部または全部の距離レベルにおいて連続的変化を採用可能である。特に一部の距離レベルで連続的変化を採用した場合、全ての距離レベルで連続的変化を採用する場合に比べて、プロンプト３１の描画処理にかかる負荷を軽減できる。

なお、図１７の例とは異なり、大きさに代えてまたは加えて、他の表現要素を連続的に変化させてもよい。

＜プロンプトの付加情報＞
プロンプト３１に付加情報を追加してもよい。付加情報の一例である距離情報について、図１８を参照して説明する。図１８の例では、指示物の距離ｚ０が距離レベルｚｌｖｌ１である場合に、距離情報３２をプロンプト３１に付加する。但し、他の距離レベルｚｌｖｌ０，ｚｌｖｌ２，ｚｌｖｌ３において距離情報３２を付加してもよい。

図１８に例示の距離情報３２は、帯状の図形であり、指示物の距離ｚ０に応じて長さ（ここでは縦寸法）が変化する。かかる帯状の図形は、プロンプト３１の背景として追加される。

帯状図形による距離情報３２は、指示物の距離ｚ０が小さいほど（すなわち、指示物が入力面４ａに近いほど）、長くなる。例えば、図１９に示すように、帯状図形の長さａ（ｚ０）はｚｔｈ１／ｓを最大寸法とし、ａ（ｚ０）＝ｚｔｈ１／ｓ−ｚ０／ｓという式で与えられる。ｓは、距離ｚ０と表示時の大きさとの変換係数である。なお、ｚ０＝ｚｔｈ１の際にも長さを有するように（図１８参照）、オフセットを与えてもよい。また、ここでは幅（ここでは横寸法）は固定とするが、幅も距離ｚ０に連動させてもよい。

図２０に、距離情報３２の変化を例示する。図２０から分かるように、指示物の距離ｚ０が減少するに従って、距離情報３２である帯状図形が長くなる。逆に、指示物の距離ｚ０が増大するに従って、帯状図形は短くなる。なお、図２０および後出の図面では、図面の煩雑化を避けるため、視認性調整の図示は省略している。

図２１に、距離情報３２を追加する場合のフローチャートを例示する。図２１の処理Ｓ３０は、図１５の処理Ｓ２０にステップＳ３１（付加情報設定処理）が追加されている。ステップＳ３１では、制御部１１は、指示物の距離ｚ０に応じて、距離情報３２である帯状図形の長さを設定する。そして、制御部１１は、ステップＳ１４において、距離情報３２付きのプロンプト３１を含んだ表示画像のデータを生成し、その表示画像が表示されるように表示装置２を制御する。

図２２および図２３に、距離情報３２の他の例を示す。図２２の例では、距離情報３２は、矢印状の図形であり、矢印の長さが指示物の距離ｚ０に応じて変化する。図２３の例では、距離情報３２は、指示物の距離ｚ０に対応する数値である。なお、当該数値は、距離ｚ０の絶対的な数値でなくてもよく、例えば、距離ｚ０を、予め定められた規則で変換した相対的な数値であってもよい。また、図形表示と数値表示とを組み合わせて、距離情報３２を構成してもよい。

距離情報３２によれば、表示面２ａを通じて、指示物の距離ｚ０を、さらに把握しやすくなる。また、距離情報３２を、入力面４ａに最も近い距離レベルｚｌｖｌ１において表示し、他の距離レベルｚｌｖｌ０，ｚｌｖｌ２，ｚｌｖｌ３では表示しない場合（図１８参照）、指示物が入力面４ａに近いことに気付きやすくなる。このため、指示物の入力面４ａへの接触をスムーズに行うことができる。

＜プロンプト等の他の例＞
以下に、プロンプト３１等の他の例を説明する。なお、以下の例示は、それぞれを単独で採用してもよいし、種々に組み合わせることも可能である。

プロンプト表現設定処理Ｓ２１（図１５および図２１を参照）において、プロンプト３１の表現をプロンプト３１の表示位置に応じて変化させるという位置連動条件を適用してもよい。例えば、次の第１〜第４の位置連動条件が挙げられる。

第１の位置連動条件は、プロンプト３１を機能アイコン上に表示する場合、その機能アイコンに関連付けられている機能の種類に応じて、プロンプト３１の表現を変化させる、という条件である。例えば、図２４に示すように、プロンプト３１がナビゲーション関連のアイコンと重なる場合は、指形状の表現を用いる。これに対し、図２５に例示するように、プロンプト３１がＡＶ関連のアイコンと重なる場合は、音符形状の表現を用いる。

第２の位置連動条件は、プロンプト３１をアイコン領域上に表示する場合と、プロンプト３１を画面操作領域上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。ここで、アイコン領域とは１つまたは複数のアイコンが配置された領域であり、図２６および図２７の画面例では、ＡＶ関連およびナビゲーション関連のアイコンが配置された画面右側の領域が、アイコン領域である。また、画面操作領域とはユーザが画面（換言すれば、表示内容）を操作可能な領域であり、表示内容操作領域と称してもよい。図２６および図２７の画面例では、中央部および左部からなる領域にスクロール等の操作が可能な地図画像が表示されており、この地図画像の領域が画面操作領域にあたる。第２の位置連動条件によれば、例えば、図２６に示すようにプロンプト３１をアイコン領域に表示する場合には線図の指画像を用い、図２７に示すようにプロンプト３１を画面操作領域に表示する場合は写実的な手画像を用いる。

第３の位置連動条件は、プロンプト３１を操作許可アイコン（ユーザによる操作が許可されたアイコン）上に表示する場合と、プロンプト３１を操作不許可アイコン（ユーザによる操作が許可されていないアイコン）上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。例えば、多くの手順が予想される操作（例えば５０音検索）を走行中に行うのは好ましくないので、そのような操作は、走行中は操作不許可に設定される。この場合、図２８に例示するように、５０音検索アイコンの位置にプロンプト３１が存在する場合、そのプロンプト３１は、通常よりも小さく、且つ、透明度を上げて、表示される。これに対し、図２９に例示するように、停車中は５０音検索アイコンは操作許可に設定され、当該アイコン上であってもプロンプト３１を通常表現で表示する。

第４の位置連動条件は、プロンプト３１を操作許可領域（ユーザによる操作が許可された領域）上に表示する場合と、プロンプト３１を操作不許可領域（ユーザによる操作が許可されていない領域）上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。例えば、図３０に示すように、表示面２ａにメータが表示されている場合、その表示領域は操作不許可領域に設定される。この場合、図３０の例では、操作不許可領域においてプロンプト３１は、指画像および手画像ではなく、十字印を丸で囲んだ形状で表示される。これに対し、図３１に例示するように、操作許可領域では、プロンプト３１を通常表現で表示する。なお、図３１では、操作許可領域として、スクロール等の操作が可能な地図画像が表示された画面操作領域を例示しているが、操作許可領域は例えばアイコン領域であってもよい。

ここで、図３２に例示するように、操作不許可領域から操作許可領域への進入方向が複数存在しうる場合、その進入方向に応じて、操作許可領域内でのプロンプト３１の表現を設定してもよい（移動方向連動条件）。

位置連動条件を適用することにより、操作の確認に役立つ。なお、第１〜第４の位置連動条件のうちの１つだけを採用してもよいし、あるいは、第１〜第４の位置連動条件のうちの２つ以上を採用してもよい。

また、第１〜第４の位置連動条件は、指示物の距離ｚ０に関わらず、適用可能である。換言すれば、ｚ０＝０の場合のみならずｚ０≠０の場合（指示物が入力面４ａの上方に存在する場合）にも、第１〜第４の位置連動条件を適用することにより、指示物が入力面４ａに接触する前に操作確認をすることができる。

また、プロンプト表現設定処理Ｓ２１（図１５および図２１を参照）において、プロンプト３１の表現を、指示物の入力面内位置の状態に応じて変化させるという面内状態連動条件を適用してもよい。具体的に図３３の例では、入力面内位置が静止している場合には、通常の手画像のプロンプト３１を表示し、これに対し、入力面内位置が移動している場合には、十字印を丸で囲んだ形状のプロンプト３１を表示する。これによれば、表示面２ａを通しての操作状況確認を容易化できる。

プロンプト３１の画像は図３３の例に限定されるものではない。但し、図３３の例のように、指示物の入力面内位置が移動状態である場合に簡略な画像を採用することにより、プロンプト３１の描画処理にかかる負荷を軽減できる。

面内状態連動条件は、指示物の距離ｚ０に関わらず、適用可能である。特にｚ０＝０の場合における適用は、指示物によって入力されるジェスチャ操作（スクロール操作、拡大縮小操作、回転操作、等）の開始および終了に伴って、プロンプト３１の表現を変化させることが可能である。具体的には、図３４の例では、スクロール操作の開始に伴ってプロンプト３１の表現を変化させ、スクロール操作の終了に伴ってプロンプト３１の表現を戻している。なお、図３４では、ｚ０＝０の場合の距離情報３２として、楕円図形を例示している。このように、プロンプト３１の表現変化と入力面４ａ上でのジェスチャ操作とを関連させることにより、ジェスチャ操作の実行状況が確認しやすくなる。

図３３に戻り、面内状態連動条件は、プロンプト３１の付加情報にも適用可能である。すなわち、付加情報の他の例として、指示物の入力面内位置の状態を示す面内状態情報３３がある。制御部１１は、付加情報設定処理Ｓ３１（図２１参照）において、指示物の入力面内位置が移動している場合と静止している場合とで、面内状態情報３３の表現を変化させる。図３３には面内状態情報３３として、指示物の移動方向を示す矢印状の図形と、背景枠とが例示されている。矢印状図形の長さは、固定であってもよいし、指示物の面内位置の移動量に応じて変化させてもよい。入力面内位置が静止している場合には面内状態情報３３を付加せず、これに対し、入力面内位置が移動している場合には面内状態情報３３をプロンプト３１に付加する。これによれば、表示面２ａを通しての操作状況確認を容易化できる。

図１４および図１８では指示物が指である場合に例示したが、指示物がスタイラスペンの場合におけるプロンプトの表現を、図３５に例示する。なお、図３５の例に、距離情報３２（図１８参照）と面内状態情報３３（図３３参照）の一方または両方を付加してもよい。

プロンプト表現設定処理Ｓ２１（図１５および図２１を参照）において、指示物の種類に応じてプロンプト３１の表現を変化させることにより、複数種類の指示物を使い分けることができ、便利である。例えば、ペン用プロンプト３１によって指示できる粒度（換言すれば、分解能）を指用プロンプト３１よりも小さく設定すれば、スタイラスペンを選択することにより、精細な画面に対しても操作性が向上する。また、指とスタイラスペンとの使い分けによって、動作モードが切り替わるようにしてもよい。例えば、指利用時には相対座標入力モードが設定され、ペン利用時には絶対座標入力モードが設定されてもよい。

図３６に、スタイラスペンを利用する場合について、情報表示制御装置３のブロック図を例示する。図３６の例によれば、図３の構成例に、ペン用の接続部２８が追加されている。具体的には、スタイラスペンに固有の識別情報を組み込んでおき、その識別情報が接続部２８を介して制御部１１へ伝送される。これによれば、制御部１１は、識別情報の入力がある場合には、スタイラスペンが利用されていることを判別可能である。他方、識別情報の入力がなければ場合には、指が利用されていることを判別可能である。また、識別情報自体を判別することによって、複数のスタイラスペンを判別することも可能である。

スタイラスペンへの識別情報の付与、および、接続部２８による識別情報の取得は、例えば、無線タグ技術を応用することによって、実現可能である。

ここで、図３７に、２つのタッチパネル４を情報表示装置１に接続した例を示す。この場合、タッチパネル４ごとに指示物が用いられる。すなわち、２つの指示物によって、情報表示装置１への入力操作が行われる。入力装置用接続部２４には、２つの指示物のそれぞれの３次元位置情報が、各指示物用のタッチパネル４から入力される。なお、２つの入力装置４の一方または両方がタッチパネル以外の装置であってもよい。

なお、それぞれのタッチパネル４に接続部（接続部２４に相当）が設けられる場合、それらの接続部を総称が上記の入力装置用接続部２４にあたる。また、例えば２つのタッチパネル４が共に無線通信で情報表示装置１に接続される場合、入力装置用接続部２４を１つの無線通信用信号生成回路で構成することも可能である。すなわち、２つのタッチパネル４に対して、接続部２４は種々の構成を採りうる。

制御部１１は、指示物ごとの３次元位置情報を取得し、２つの指示物のうちの少なくとも１つについて、上記のプロンプト表現設定処理Ｓ２１（図１５および図２１を参照）を実行する。図３８には、２つの指示物が同時に利用され、両方のプロンプト３１にプロンプト表現設定処理Ｓ１４が適用された場合の画面を例示する。また、２つの指示物のうちの少なくとも１つに対して、付加情報設定処理Ｓ２１（図２１参照）を実行してもよい。

また、２つの指示物のうちの少なくとも１つについて、上記の視認性調整処理Ｓ１４ａ（図１５および図２１を参照）を実行する。

同様にして３つ以上のタッチパネル４を接続して、３つ以上の指示物を利用することも可能である。なお、複数の指示物は同じ種類である必要はない。

ここで、図３９に、表示面２ａを２つの領域に分割し、一方のタッチパネル４を左画面用入力装置として利用し、他方のタッチパネル４を右画面用入力装置として利用する例を示す。また、図４０に、いわゆるスプリットビュー画面の説明図を示す。スプリットビュー画面では、表示面２ａを見る方向によって、見える画面が異なる。このため、例えば、一方のタッチパネル４は右側（ここでは運転席側）から見た画面用の入力装置として利用し、他方のタッチパネル４は左側（ここでは助手席側）から見た画面用の入力装置として利用することが可能である。

図４０には、右側から見た画面ではプロンプト３１の指画像を左向き（手首が右側に在り、人差し指が左側に在る）で表示し、左側から見た画面ではプロンプト３１の指画像を右向き（手首が左側に在り、人差し指が右側に在る）で表示する例を図示している。これに対し、両方の指画像を同じ方向に向けてもよい。但し、図４０の例によれば、指の向きが、表示面２ａと座席との位置関係を反映しているので、プロンプト３１を直感的に認識しやすい。図４０における２つの指画像の向きは図３８および図３９の例にも応用可能である。

また、制御部１１は、指示物の距離ｚ０に応じて画面全体の色相を変化させてもよい（画面色相制御処理）。これによれば、プロンプト３１を注視しなくても距離ｚ０の変化を判別可能であり、それによりプロンプト３１を探す時間を減らすことができる。このため、例えば、運転中に視線を長い時間、車両前方からそらすのを回避可能である。

また、制御部１１は、指示物が入力面４ａに接触した場合（すなわち距離ｚ０＝０になった場合）に、入力面４ａを振動させる指示を、接続部２４を介してタッチパネル４に与えてもよい。タッチパネル４は、入力面４ａを振動させる機能を有している場合、その指示に従って入力面４ａを振動させる。また、制御部１１は、入力面４ａを盛り上げる指示をタッチパネル４に与えてもよい。タッチパネル４は、入力面４ａを盛り上げる機能を有している場合、その指示に従って入力面４ａを盛り上げる。また、制御部１１は通知音を、スピーカ５からまたはタッチパネル４のスピーカから、発生させてもよい。これらによれば、入力面４ａを見なくても、さらには表示面２ａを見なくても、入力面４ａに接触したことが分かる。なお、上記３つの処理例を種々に組み合わせてもよい。

ここで、入力面４ａの振動は、圧電素子等の振動素子を利用すれば実現可能である。また、入力面４ａの盛り上げは、例えば、膨張素子を利用すれば実現可能である。膨張素子は、例えば、電解液の封止構造を有した素子によって実現可能である。具体的には、その電解液に電気を供給すると、素子内部に気体が発生し、それにより膨張する。なお、入力面４ａの振動は、入力面４ａの全体に発生させてもよいし、あるいは、指示物が接触した箇所を含む一部分に選択的に発生させてもよい。かかる点は入力面４ａの盛り上げについても同様である。

＜変形例＞
なお、上記では入力装置４として静電容量方式の３Ｄタッチパネルを例示した。しかし、入力面４ａ上の空間に存在する指示物の３次元位置を検出する機能を有した装置であれば、検出方式、名称等に関わらず、入力装置４として採用可能である。

また、上記では表示装置２の表示面２ａと入力装置４の入力面４ａとが別の場所に配置される例を挙げた。しかし、入力面４ａが表示面２ａ上に重ねられた構造にも、上記の各種工夫を採用可能である。

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。

１ 情報表示装置、２ 表示装置、２ａ 表示面、３ 情報表示制御装置、４ 入力装置、４ａ 入力面、１１ 制御部、２２ 表示装置用接続部、２４ 入力装置用接続部、３１ プロンプト、３２ 距離情報（付加情報）、３３ 面内状態情報（付加情報）、４０ アイコン、Ｓ１１ ３次元位置情報取得処理、Ｓ１２ ２次元位置変換処理、Ｓ１３ 距離レベル判別処理、Ｓ１４ 表示画像データ生成処理、Ｓ１４ａ 視認性調整処理、Ｓ２１ プロンプト表現設定処理、Ｓ３１ 付加情報設定処理、ｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃ，ｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊ，ｚｌｖｌｐ，ｚｌｖｌｑ，ｚｌｖｌｒ，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４ 距離レベル。

Claims (11)

1. 表示面を有する表示装置が接続される表示装置用接続部と、
   入力面上の空間に存在する指示物の３次元位置を検出する入力装置が接続され、前記入力装置から検出結果に関する３次元位置情報が入力される、入力装置用接続部と、
   前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、前記表示装置の表示面内位置に変換する２次元位置変換処理と、前記表示面に表示する表示画像のデータを生成する表示画像データ生成処理とを行い、前記表示画像データ生成処理では、前記３次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が小さいほど、前記表示面内位置に表示するプロンプトが指し示す第１オブジェクトと、他のオブジェクトである第２オブジェクトとの視認性の差を拡大させる視認性調整処理を行う、制御部と
   を備え、
   前記第１オブジェクトはアイコンであり、前記第２オブジェクトは地図画像を含み、
   前記制御部は、前記視認性調整処理では、前記地図画像の情報量を減少することによって前記第２オブジェクトの視認性を下げ、それにより前記視認性の差を拡大させる、
   情報表示制御装置。
2. 前記制御部は、前記指示物の前記距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する距離レベル判別処理を行い、前記視認性調整処理では、前記距離レベル判別処理で判別した距離レベルごとに、前記第１オブジェクトと前記第２オブジェクトとの視認性の差を拡大させる、請求項１に記載の情報表示制御装置。
3. 前記制御部は、前記視認性調整処理では、前記第１オブジェクトの視認性を上げることによって前記視認性の差を拡大させる、請求項１または請求項２に記載の情報表示制御装置。
4. 前記第１オブジェクトがアイコンである場合、前記制御部は、前記視認性調整処理では、前記指示物が前記入力面を押下したことに伴って前記アイコンの表現を変化させる、請求項３に記載の情報表示制御装置。
5. 前記制御部は、前記視認性調整処理では、表示する地図要素を減少させることによって、前記地図画像の情報量を減少させる、請求項１〜請求項４のうちのいずれか１項に記載の情報表示制御装置。
6. 前記第２オブジェクトは、前記第１オブジェクトであるアイコン以外の他のアイコンをさらに含む、請求項１〜請求項５のうちのいずれか１項に記載の情報表示制御装置。
7. 前記表示面は前記入力面とは別の場所に配置されている、請求項１〜請求項６のうちのいずれか１項に記載の情報表示制御装置。
8. 前記表示装置は移動体の統合インストルメントパネルである、請求項７に記載の情報表示制御装置。
9. 前記制御部は、前記プロンプトの表現を前記指示物の前記距離に応じて変化させるプロンプト表現設定処理を行い、前記表示画像データ生成処理では、前記プロンプトが、前記２次元位置変換処理で得られた前記表示面内位置に、前記プロンプト表現設定処理で設定された表現で表示されるように、前記表示画像のデータを生成する、請求項１〜請求項８のうちのいずれか１項に記載の情報表示制御装置。
10. 請求項１〜請求項９のうちのいずれか１項に記載の情報表示制御装置と、
    前記情報表示制御装置の前記表示装置用接続部に接続された表示装置と
    を備える情報表示装置。
11. （ａ）入力装置の入力面上の空間に存在する指示物の３次元位置情報を取得するステップと、
    （ｂ）前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、表示装置の表示面内位置に変換するステップと、
    （ｃ）前記表示装置の表示面に表示する表示画像のデータを生成する際に、前記３次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が小さいほど、前記指示物の前記表示面内位置に表示する第１オブジェクトと他のオブジェクトである第２オブジェクトとの視認性の差を拡大させる視認性調整処理を行うステップと
    を備え、
    前記第１オブジェクトはアイコンであり、前記第２オブジェクトは地図画像を含み、
    前記視認性調整処理では、前記地図画像の情報量を減少することによって前記第２オブジェクトの視認性を下げ、それにより前記視認性の差を拡大させる、
    情報表示制御方法。

Images