JP4801623B2 - 電子機器および有効な機能の選択方法 - Google Patents

Description

本発明は、マルチビュー指向性の表示手段を搭載した電子機器、および画面に対して有効となる機能の選択方法に関し、携帯電話やＰＤＡなどの個人で利用される端末や、カーナビやＴＶに適用して好適である。

液晶表示パネルは、二つの基板の間に注入されている異方性誘電率を有する液晶層を有し、その液晶層に印加する電界の強さを調節することで、基板を透過する光の量を調節し、所望の画像を表示させる表示器である。
このような液晶表示パネルは、軽量化、薄型化、低消費電力化等に優れており、携帯電話、カーナビ、ＰＤＡ（Personal Digital Assistant）、パーソナルコンピュータ、テレビ受信機等の身近な機器に限らず、計測機器、医療機器、産業機器全般等の表示器として採用されている。

このような液晶表示パネルは、テレビ受信における映像表示に限らず、ビデオ、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disk）等のソース源からの映像表示も可能であるが、あるソース源からの映像を表示しているときに、他のソース源からの映像を表示する場合、入力するソース源をあるソース源から他のソース源に切り替えるようにしている。

例えば、マルチ表示機能を搭載した機器では、液晶表示パネルの表示エリアを複数に分割し、それぞれの表示エリアにあるチャンネルの映像と他のソース源からの映像とを表示させることは可能である。ただし、この場合には、それぞれの表示エリアに映し出される映像が同時に見えてしまうため、映し出された映像を集中して見ることができないばかりか、それぞれの表示エリアが小さくなってしまうため、映し出された映像が小さくなってしまうという問題がある。

そこで、本出願人が提案した特許文献１に示されているデュアルビューディスプレイ技術を採用することで、表示エリアのサイズを変更することなく、あるソース源からの映像と他のソース源からの映像とを同時に表示させるデュアルビュー表示が可能となる。
即ち、デュアルビュー表示は、見る方向によって異なる画像が視認できるように、２つの視点からの画像をそれぞれ別個に同一画面に表示することである。

ここで、デュアルビューディスプレイ技術の基本原理について説明する。デュアルビューディスプレイは、図１７に示すように、複数の画素ａ、ｂを有する液晶表示パネル１の全面にパララックスバリア（光学系分離素子）２を配置している。パララックスバリア２は、不透明領域によって隔たれた垂直な透光性スリットを複数有するスクリーンである。

液晶表示パネル１の画素ａを通過した光は、パララックスバリア２の有する透光性スリットを介して、液晶表示パネル１の表示面に対し所定の視野角に位置する視聴者Ａ側に到達する。また、液晶表示パネル１の画素ｂを透過した光は、パララックスバリア２の有する透光性スリットを介して、液晶表示パネル１の表示面に対し所定の視野角に位置する視聴者Ｂ側に到達する。

液晶表示パネル１に表示された異なった画像は、パララックスバリア２の複数の透光性スリットによって空間上の規定された領域からしか見えないようにしたものである。これにより、視聴者Ａおよび視聴者Ｂは、各々、異なる画像を見ることが可能となる。
以下、２以上の複数の表示方向から視認可能に表示できる表示手段を、マルチビュー指向性表示手段と呼ぶことにする。

ところで、液晶表示パネルを用いた機器にあっては、リモコンの操作に限らず、タッチパネルの操作によって液晶表示パネルに表示される静止画像や動画像を操作することができるものがある。
タッチパネルは、液晶表示パネルの全面に重ね合わされるものであり、液晶表示パネルに表示される動作選択の指示に応じた例えばバーやキースイッチ等が表示されるタッチ操作画面にタッチすることで、タッチ操作コントロールを行うことができる。
つまり、タッチ操作画面の内容そのものがスイッチとなり、直感的な操作が行えるというものであり、視認性と操作性との向上が図れるばかりか、多彩な機能を自在にコントロールすることも可能とされる。なお、タッチパネルの方式としては、電磁誘導式、電気抵抗式、静電容量式、感圧式等が知られている。

このような特許文献１のデュアルビューディスプレイ技術を用いて表示させた各映像に対し、キーやリモコンやタッチパネル等で操作を行う場合、いずれの映像に対しての操作であるかを認識させる必要がある。
例えば、特許文献２の表示装置では、タッチパネルに視聴者Ａタッチ専用エリア及び視聴者Ｂタッチ専用エリアを設けるとともに、タッチパネルによって検出されたタッチ位置の座標データに基づき、視聴者Ａタッチ専用エリアまたは視聴者Ｂタッチ専用エリアのいずれがタッチされたかの判断が行われ、タッチされた視聴者Ａタッチ専用エリアまたは視聴者Ｂタッチ専用エリアに対応する映像を認識して表示動作を制御する。これにより、デュアルビュー表示において、タッチ操作がいずれの映像に対して有効であるかの判断を容易かつ確実に行うことができる。

また、特許文献３の表示装置は、リモコン位置検出センサによって検出されたリモコンの位置に対応する映像を認識し、その認識結果の映像を遠隔操作するようにした。これにより、リモコンによる遠隔操作を各映像に対応させるための選択操作が不要となった。

また、特許文献４の表示装置は、第１視野角方向から視認できる画像およびアイコンと、第２視野角方向から視認できる画像およびアイコンとを同時表示し、ユーザが指示する位置に表示されたアイコンに定義された命令に従って、表示手段に供給するデータを制御するようにした。これにより、各視野角方向から視認できる画像に適した操作を行なうことができる。
特開２００３−１７７３５７号公報 特開２００５−７１２８６号公報 特開２００５−７３０７６号公報 特開２００５−２８４５９２号公報

しかしながら、タッチパネルを用いた特許文献２や４の技術では、それぞれの画面用の専用エリアやアイコンを設けて、選択したエリアやアイコンに対応する画面への操作であることを識別するようにしている。しかし、それぞれの画面用のエリアやアイコンを設けているため、操作範囲が限られたものとなっている。

また、リモコンを用いた特許文献３の技術では、検出したリモコンの操作位置により、いずれの画面に対して操作しているのかを識別するようにしている。しかし、いずれの画面が操作対象であるかを常に意識して、１つのリモコンを移動させたり、または、画面に対応する複数のリモコンを用意して操作しなければならず、操作が面倒である。

本発明は、上述の実情を考慮してなされたものであって、マルチビュー指向性表示手段を用いた電子機器を操作（キー入力、音声制御、画像制御等）する際に、複数の画面に対応する電子機器の機能のうち、有効となる機能を自動的に選択する電子機器およびその選択方法を提供することを目的とする。

上記課題を解決するために、本発明の電子機器は次のような構成とする。
本発明の電子機器は、複数の方向に異なる画面を同時に表示可能なマルチビュー指向性表示手段を備えた電子機器において、前記表示手段の表示を制御する表示制御手段と、情報や指示の入力を検知する検知手段と、前記検知手段からの出力に応じて有効となる機能を選択する機能選択手段とを備えている。

前記検知手段は、例えば、キー、タッチパネル、赤外線センサ、人感センサ、ＲＦＩＤ等の電波を用いた無線、音声入力あるいは撮影手段（カメラやビデオ等）等からの情報を受け付けて、検知対象（例えば、利用者や特定のモノ（ワッペンや帽子など）や動植物等）のある方向を出力する。
また、撮影手段で撮影された画像の中の認証対象を認証する画像認証手段を備えている場合には、前記検知手段は、前記画像認証手段で認証された認証対象側から見て視認可能である方向を出力する。ここで、認証対象としては、特定の利用者や特定のモノ（ワッペンや帽子など）や動植物等がある。
前記画像認証手段は、複数の認証対象を認証した場合、優先順位に応じて認証対象を選択し、この認証対象側から見て視認可能である方向を出力する。
しかし、前記画像認証手段で認証が否認された場合には、前記表示制御手段では、前記表示手段の全ての画面に対する機能を無効とする。

前記機能選択手段は、上記のような前記検知手段からの出力だけでなく、当該電子機器の傾きを検知するセンサからの出力に基づいて、有効となる機能を選択するようにしてもよい。

さらに、通信手段を有している電子機器については、着信報知を次のいずれかによって行うようにして、作業中や視聴中の妨げにならないようにすることができる。
（１）選択状態になっている機能に対応する画面に着信報知する。
（２）非選択状態になっている機能に対応する画面に着信報知する。
（３）選択状態になっている機能および非選択状態になっている機能に対応するそれぞれの画面に着信報知する。
ここで、上記の着信報知は、音で報知するものであってもよい。

また、前記表示制御手段では、非選択状態になっている機能に対応する画面の表示を、クリアスクリーンにしたり、あるいは、ＯＦＦとすることにより、表示内容のセキュリティを保つようにすることができる。

また、前記表示制御手段は、選択状態の機能に対する画面と非選択状態の機能に対する画面に対して、次のいずれかあるいは組み合わせによって区別つくように表示するようにしてもよい。
・選択状態の機能に対する画面の枠の色を識別可能に表示する。
・選択状態の機能に対する画面の枠の太さを識別可能に表示する。
・選択状態の機能に対する画面に、区別がつくようなアイコン、絵、文字、記号等を表示する。これらの表示位置や大きさは、自由に設定可能である。
・カメラで検知対象を撮影する場合、選択状態の機能に対する画面の一部分として、撮影した検知対象を表示する。この表示位置や大きさは、自由に設定可能である。

さらに、本発明の有効な機能の選択方法は、マルチビュー指向性表示手段に表示された複数の方向に異なる画面に対応する有効な機能を選択する方法であって、前記表示手段の表示を制御する表示制御工程と、情報や指示を入力する検知工程と、前記検知工程からの出力に応じて有効となる機能を選択する機能選択工程とにより、複数の画面に対応するそれぞれの機能のうち、有効となる機能を自動的に選択して、電子機器の操作（キー入力、音声制御、画像制御等）を行えるようにできる。

また、上述した構成の電子機器の各手段として、コンピュータを機能させるためのプログラムを作成しておき、または、そのプログラムをコンピュータ読み取り可能な記録媒体に記録しておき、このプログラムをコンピュータで実行することによっても上記課題を解決することができる。

本発明によれば、マルチビュー指向性の表示装置を備える電子機器を操作（キー入力、音声制御、音声出力の指向性制御、画像制御等）する際に、複数の画面に対応するそれぞれの機能のうち、有効となる機能が自動的に選択されるので、利用者が手動で操作画面を切り替える必要がなくなり、利便性の向上が図れる。
また、非選択状態になっている機能に対応する画面の表示をクリアスクリーンやＯＦＦにすることにより、表示内容のセキュリティを保つことができ、さらに、表示手段を動作させないので電力の消費を減らすことができる。

以下、図面を参照して本発明の電子機器に係る好適な実施形態について説明する。

まず、本発明の概要を説明する。
本発明の電子機器は、見る方向によって異なる画像が視認できるように、２つの視点からの画像をそれぞれ別個に同一画面に表示可能なマルチビュー指向性の表示手段を搭載しており、検知対象（例えば、利用者や、帽子やワッペンなどのモノや、動植物等）がある方向を検知して、この検知結果から有効となる機能を選択する。
そして、有効となった機能（例えば、アプリケーションプログラム）に対する入出力制御等が行えるようになる。この入出力制御の例としては、タッチパネルやカーソルキーなどのキー操作、音声入出力制御、音声出力の指向性制御、および、画像入出力制御などである。
ここで、検知対象のある方向は、次のようにして判断する。

（ａ）カメラを用いる。
例えば、図１（Ａ）のように表示手段が左右の２画面をマルチビュー表示可能であり、それぞれの画面に音楽アプリケーションとメールソフトが表示されている。利用者は、位置Ａからは音楽アプリケーションの画面が確認でき、位置Ｂからはメールソフトのメール内容が確認できる。
そして、検知対象（利用者）が表示手段のいずれの方向にあるかを撮影するカメラを表示手段の中央に設置しておく。このカメラの撮影画像には、図１（Ｂ）のように、位置Ａにある検知対象（利用者）の画像が右に、位置Ｂにある検知対象（利用者）の画像が左に映っている。
図１（Ｃ）のように、カメラで撮影した画像の右側に検知対象（利用者）が写っていれば、図１（Ｄ）のように、位置Ａから見た画面に対応する機能が有効となり、音楽の音量調整等ができるようになる。

逆に、カメラで撮影した画像の左側に検知対象（利用者）が写っていれば、位置Ｂから見た画面に対応する機能が有効となり、メールソフトの操作等ができるようになる。
また、検知対象を利用者ではなく、特定のモノ（例えば、帽子やワッペン等）としておき、検知対象を位置Ａに置くことにより位置Ａから見た画面に対応する機能を有効としておき、利用者が位置Ｂに移動することにより、位置Ｂからメールの内容を見ることができる。

（ｂ）ＲＦＩＤを貼付した検知対象を用いる。
例えば、図２（Ａ）のように表示手段が左右の２画面をマルチビュー表示可能であり、それぞれの画面に音楽アプリケーションとメールソフトが表示されている。利用者は、位置Ａからは音楽アプリケーションの画面が確認でき、位置Ｂからはメールソフトのメール内容が確認できる。
そして、ＲＦＩＤを貼付したＩＤカード（検知対象）を読み取るリーダをそれぞれの画面を見る利用者の側に設置しておく。この場合には、表示手段の右側と左側に２つのリーダを設置するが、リーダと表示手段とを一体として設けても、あるいは、別体として設けてもよい。

次に、利用者が音楽アプリケーションを操作したい場合を考える。
図２（Ｂ）のように、利用者は、ＲＦＩＤを貼付したＩＤカード（検知対象）を所持して位置Ａへ移動すると、右側のリーダが利用者のＩＤカード（検知対象）を読み取り、右側の画面に対応する機能が有効となり、音楽の音量調整等ができるようになる。
逆に、利用者がＩＤカード（検知対象）を所持して表示手段の左側に移動すると、左側のリーダが利用者のＩＤカード（検知対象）を読み取り、左側の画面に対応する機能が有効となり、メールソフトの操作等ができるようになる。
また、このＲＦＩＤを貼付した検知対象を用いる場合、検知対象だけを左右のリーダの読取範囲に移動させることによって、利用者は移動することなく、利用者がいる位置の反対側の画面に対する機能を有効にすることもできる。

（ｃ）小型電子機器に搭載された傾きセンサを用いる。
例えば、図３に例示されるような、左右の２画面をマルチビュー表示可能な表示手段を有した小型電子機器において、当該小型電子機器から見て右側方向の画面に音楽アプリケーションが、左側方向の画面にメールソフトが表示されているとする。このとき、利用者が小型電子機器を右側に傾けると、音楽アプリケーションの画面を、左側に傾けるとメールソフトの画面を見ることができる。この小型電子機器に傾きセンサを搭載した場合、小型電子機器が左右どちら側に傾けられているかを検知できるので、諸機能を有効にする画面を自動的に判断できる。
この例の場合、小型電子機器を右側に傾ければ、傾きセンサが小型電子機器は右側に傾けられた、つまり、利用者は音楽アプリケーションを表示している画面を見ている、と判断し、音楽アプリケーションの操作ができるようになる。逆に、小型電子機器を左側に傾ければ、傾きセンサが小型電子機器は左側に傾けられた、つまり、利用者はメールソフトを表示している画面を見ている、と判断し、メールソフトの操作ができるようになる。

上記のように、有効となった機能に対する画面と、次のいずれかあるいは組み合わせて有効でない機能に対する画面と区別つくようにしてもよい（図４）。
・有効となった機能に対する画面の枠の色を識別可能に表示する（図４（Ａ））。
・有効となった機能に対する画面の枠の太さを識別可能に表示する（図４（Ｂ））。
・有効となった機能に対する画面に、区別がつくようなアイコン、絵、文字、記号等を表示する（図４（Ｃ））。これらの表示位置や大きさは、自由に設定可能である。
・カメラで検知対象を撮影する場合、有効となった機能に対する画面の一部分として、撮影した検知対象を表示する（図４（Ｄ））。この表示位置や大きさは、自由に設定可能である。

さらに、図５のように、複数人で複数のマルチビュー画面を見ているときにはどちらの画面に対して操作を可能とするか決定する必要がある。そのために、検知対象を認証することにより操作可能な画面を特定する。この場合には、検知対象を認証対象ということにする。
しかし、複数の認証対象が認証された場合には、認証対象に優先順位を付けておき、優先順位の高い認証対象を選択するようにする。

例えば、認証対象を特定の人物またはモノ（帽子やワッペンや動植物等）としておき、カメラで撮影した画像の中から特定の人物またはモノを認証することにより、認証対象が映っている画面に対する操作が可能になる。

また、認証が否認されたときには、表示手段の全ての画面に対応する機能を無効とし、これらの機能を操作できないようにできる。
また、認証された認証対象を図４（Ｄ）のように、操作可能になった画面の一部として表示してもよい。この表示により、認証されたものが何であるかがわかり易くなる。この表示位置や大きさは、固定であってもよいし、予め自由に設定されてもよい。

また、電子機器が通信機能を有している場合、作業中や視聴中の画面に対して着信を報知してしまうと、作業や視聴の妨げになってしまう。
このためには、選択状態や非選択状態となっている画面を自動的に判断し、各画面で有効となっている機能に応じて、選択状態となっている画面、非選択状態となっている画面、あるいは、両方の画面のいずれかに着信を報知する。

例えば、メールが着信したことを利用者に報知する場合、利用者が選択状態となっている画面で映画鑑賞をしていれば、報知メッセージがこの画面上に表示されると鑑賞しづらくなるため、着信報知を非選択状態となっている画面に報知するようにする。
しかし、非選択状態となっている画面に報知メッセージを表示させるだけでは、利用者が気付かない可能性もあるので、選択状態となっている画面にも報知メッセージを表示させたり、あるいは、音を鳴らして着信報知を気付かせるようにしてもよい。

また、例えば、利用者が非選択状態となっている画面では映画鑑賞をしており、選択状態となっている画面では音楽鑑賞をしているのであれば、報知メッセージを非選択状態となっている画面上に表示すると映画鑑賞し辛くなるため、着信報知を選択状態となっている画面に報知するようにする。
しかし、選択状態となっている画面に報知メッセージを表示させるだけでは、利用者が気付かない可能性もあるので、非選択状態となっている画面にも報知メッセージを表示させたり、あるいは、音を鳴らして着信報知を気付かせるようにしてもよい。

さらに、利用者が１人の場合には、利用者が見ていない画面はＯＦＦにしておいてもよい。これにより、表示手段を動作させないので電力の消費を減らすことができる。

＜実施形態１＞
まず、本実施形態１の電子機器として、携帯型の電子機器を例にして１人で利用する場合について説明する。ここで、携帯型の電子機器の例として、マルチビュー指向性表示手段を搭載した携帯電話を用いて説明するが、例えばＰＤＡのように携帯型であってマルチビュー指向性表示手段を搭載した電子機器であれば、本発明を同様に適用することができる。

図６は、本実施形態１に係る電子機器のハードウェア構成を示すブロック図である。同図において、電子機器は、主制御部１０、記憶部１３、操作部１４、外部入出力Ｉ／Ｆ１５、撮影部１６、画像処理部１７、表示制御部１８、マルチビュー指向性表示部１９、マイク２０、スピーカ２１を備えている。

主制御部１０は、記憶部１３に記憶された所定の制御プログラムを実行することにより、例えば、操作や表示等の入出力制御等の当該電子機器全体の動作を制御する。

記憶部１３は、例えば、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）、フラッシュメモリ、ＨＤＤ（Hard Disk Drive）などで構成され、主制御部１０で実行される制御プログラム、各種アプリケーションプログラムやデータを格納したり、制御プログラムや各種アプリケーションプログラムが実行時に一時的にデータ等を格納する。

操作部１４は、各種ファンクションや文字や数字等を入力するためのボタンやスイッチを備えており、電源、各種データ入力ボタン等を指示するためのボタン、カーソルを上下左右に移動させるスクロール、表示された内容の決定等の多機能ボタン等を備えている。そして、利用者が何らかのボタンやスイッチを操作する度に、どのボタンやスイッチが操作されたかが主制御部１０に通知される。

外部入出力Ｉ／Ｆ１５は、外部に備えるテレビ、ビデオ、ＣＤ、ＤＶＤ等からソースデータを取り込む機器インタフェースであり、また、当該電子機器からデータを外部機器へ書き出す機器インタフェースである。

撮影部１６は、当該電子機器に付けられたレンズを介して外界の光をＣＣＤ等に取り込んで光電変換して外部画像を取得し、画像処理部１７は、撮影部１６で取り込まれた外部画像を予め設定された撮影条件に基づいて画像処理を行って主制御部１０へ送信する。
この撮影部１６は、当該電子機器に搭載されたものでもよいし、外部インタフェースを介して当該電子機器に接続され、検知対象を撮影可能なものであればよい。

表示制御部１８は、マルチビュー表示の各画面に対応した表示ドライバを有しており、主制御部１０から指示された画面に対応した表示ドライバを起動して、マルチビュー表示となるように処理して、マルチビュー指向性表示部１９に送信する。ここで、マルチビュー表示の処理は、上述のデュアルビューディスプレイ技術を用い、複数の視野角方向からそれぞれ別の画面を見られるような画素配分となるように画像処理することである。

マルチビュー指向性表示部１９は、液晶表示パネルおよびパララックスバリヤ（光学系分離素子）を備えており、表示制御部１８を介して送られてくる入力情報や処理の中間・結果・警報等をマルチビュー表示して、利用者に伝達する。
この液晶表示パネルは、二つの基板の間に注入されている異方性誘電率をもつ液晶層を有し、その液晶層に印加される電界の強さに応じて基板を透過するバックライトからの光の量を調節し、所望の映像を表示させる。また、パララックスバリヤは、液晶表示パネルの全面に重ね合わされるものであり、不透明領域によって隔たれた垂直な透光性スリットを複数有するスクリーンである。

マイク２０は、マイクロフォンが設置された周辺の音や音声を集音して、所定方式で符号化して主制御部１０に送信する。
スピーカ２１は、マイク２０で集音した音や、アプリケーションの処理過程で出力される音を出力する。また、このスピーカ２１を超指向性のスピーカとすることで、マルチビュー表示のそれぞれの画面に応じた音のみを出力して、利用者に伝達させることが可能である。また、スピーカ２１は、ヘッドホンやイヤホン等を用いてもよい。

図７は、本実施形態１に係る電子機器の機能構成を示すブロック図である。同図において、電子機器は、検知部３１、機能選択部３２、制御部３３、表示制御部３４、マルチビュー指向性表示部３５、機能リスト３６、機能３７を備えている。
ここで、表示制御部３４およびマルチビュー指向性表示部３５は、それぞれ上述した表示制御部１８およびマルチビュー指向性表示部１９と同じ機能である。
機能３７_１〜ｎは、それぞれ現在実行中のアプリケーションに対応しており、マルチビュー表示がなされている。

検知部３１は、操作部１４、外部入出力Ｉ／Ｆ１５、撮影部１６、マイク２０等、例えば、キー、タッチパネル、赤外線センサ、人感センサ、ＲＦＩＤ等の電波を用いた無線、音声入力あるいはカメラ等からの情報を受け付ける。
ここで、マルチビュー表示の前面にタッチパネルを設けた場合には、画面とタッチセンサーとの視差ズレが起きるため、マルチビュー表示画面と利用者の位置関係が変化した場合に、タッチパネルと表示画面の位置関係を調整する必要がある。

検知部３１の処理機能について、撮影部１６からの情報を受け付ける場合について、図８のフローチャートを用いて説明する。
検知部３１は、撮影部１６を動作させて撮影し（ステップＳ１）、画像中から検知対象を検出し（ステップＳ２）、この検知対象が存在する撮影画像の位置から検知対象のある方向を決定して、この方向に対応する画面を決定し（ステップＳ３）、画面を識別する画面識別子を出力する（ステップＳ４）。

また、赤外線センサ、人感センサ、ＲＦＩＤ等の電波を用いた無線、音声による検知でも、これらから入力した情報に基づいて、検知対象がある方向を決定して、その方向に対応する画面を決定することができる。

次に、機能リスト３６は、マルチビュー表示の各画面に対応する機能３７_１〜ｎが選択状態にあるか、または、非選択状態にあるかを記憶するテーブルである。このテーブルには、各機能ごとに、機能３７を識別する機能識別子、この機能に対応している方向あるいは画面の識別子、および、選択状態／非選択状態を示すフラグとが記憶され、機能が起動されるときに登録され、機能の実行が終了すると解放される。
図９は、機能リスト３６のデータ例であり、４つの機能（音楽アプリケーション、ビデオアプリケーション、Ｗｅｂブラウザ、メールソフト）と、それらを操作する画面の識別子、およびこれらの機能が選択状態か非選択状態かを示すフラグが記憶されている。ここでは、画面識別子＝１の画面で音楽アプリケーションが有効機能として選択状態となっており、他の機能は非選択状態になっていることを示している。

機能選択部３２は、検知部３１から出力された画面識別子を受信して、機能リスト３６を参照して、同じ画面識別子を持つ機能識別子を検索する。そして、検索された機能識別子を出力するとともに、検索された機能のフラグを「選択状態」にし、現在選択状態の機能を「非選択状態」にする。
例えば、図９の機能リスト３６において、検知部３１から画面識別子＝４が出力された場合、音楽アプリケーションを非選択状態にし、メールソフトを選択状態にして、機能識別子（メールソフト）を出力する。

制御部３３は、機能選択部３２で出力された機能識別子に対応する機能３７に対して入出力制御を有効にする。
例えば、入出力制御としては、次のものがある。
・操作部１４のカーソルキー等のキー操作を行う。
・マイク２０、スピーカ２１や外部入出力Ｉ／Ｆ１５等の音声入出力制御を行う。
・撮影部１６やマルチビュー指向性表示部１９等の画像入出力制御を行う。
・記憶部１３への入出力制御を行う。
・スピーカ２１の出力の指向性制御を行う。

また、表示制御部３２では、非選択状態となっている機能に対する画面をクリアスクリーンとしたり、非選択状態となっている機能に対する画面への出力をＯＦＦにするようにしてもよい。
また、表示制御部３２では、選択状態の機能に対する画面に対して、次のいずれかあるいは組み合わせて非選択状態の機能に対する画面と区別つくように出力してもよい（図４）。
・選択状態の機能に対する画面の枠の色を識別可能に表示する（図４（Ａ））。
・選択状態の機能に対する画面の枠の太さを識別可能に表示する（図４（Ｂ））。
・選択状態の機能に対する画面に、区別がつくようなアイコン、絵、文字、記号等を表示する（図４（Ｃ））。これらの表示位置や大きさは、自由に設定可能である。
・カメラで検知対象を撮影する場合、選択状態の機能に対する画面の一部分として、撮影した検知対象を表示する（図４（Ｄ））。この表示位置や大きさは、自由に設定可能である。

以上のような構成により、マルチビュー指向性表示装置を備える電子機器を操作（キー入力、音声制御、音声出力の指向性制御、画像制御等）する際に、複数の画面に対応するそれぞれの機能のうち、有効となる機能が自動的に選択されるので、利用者が手動で操作画面を切り替える必要がなくなり、利便性の向上が図れる。
また、非選択状態になっている機能に対応する画面の表示をクリアスクリーンやＯＦＦにすることにより、表示内容のセキュリティを保つことができ、さらに、表示手段を動作させないので電力の消費を減らすことができる。

＜実施形態２＞
次に、本実施形態２の電子機器として、前面にタッチパネルを備えたマルチビュー指向性表示装置とこれを操作するＰＣを用いて説明するが、この代わりにマルチビュー指向性のテレビジョン受信装置等としても容易に適用可能である。

本実施形態２に係る電子機器のハードウェア構成は、実施形態１の図６と同一である。

図１０は、本実施形態２に係る電子機器の機能構成を示すブロック図である。同図において、電子機器は、検知部３１、機能選択部３２、制御部３３、表示制御部３４、マルチビュー指向性表示部３５、機能リスト３６、機能３７を備えている。同図において、上述した実施形態１の図７と同一部分については同一の符号を付して、説明を省略する。図１０において、図７と異なる点は、検知部３１に撮影部３１１（撮影部１６と同じもの）、画像認証部３１２、認証ファイル３１３を備えた点である。

次に、検知対象（以下、本実施形態２では認証対象と言う。）が複数個ある場合に、その中から特定の認証対象を決定する検知部３１について説明する。
複数個の認証対象を対象とした場合、認証システムを利用して、１つの認証対象をこの中から特定する。

予め、認証対象ごとに下記のデータを格納した認証ファイル３１３を用意する。
認証対象識別子：認証対象を識別するための識別子である。
認証画像：認証対象の撮影画像であり、撮影部３１１で撮影した画像の中に、この認証画像があるかを調べる。
優先度：認証対象が複数個発見されたときに、優先度の高い認証対象を認証したものとする。

画像認証部３１２は、撮影部３１１の動作を開始させ、撮影した認証対象の画像が認証ファイル３１３に登録されているかを検索する。
検索結果が１つの場合には、検索された認証対象識別子を出力する。
検索結果が複数の場合には、検索結果のうち優先度の最も高い認証対象の識別子を出力する。
また、検索結果が１つもない場合には、認証対象がないことを出力する。

検知部３１では、画像認証部３１２から出力された認証対象識別子に対応する認証画像を、撮影部３１１で撮影された画像中から抽出し、この認証対象が存在する撮影画像の位置から認証対象のある方向を決定して、この方向に対応する画面を決定し、画面を識別する画面識別子を機能選択部３２に出力する。

また、検知部３１では、画像認証部３１２から「認証対象が存在しない」という出力があった場合、「全ての画面への出力を非表示とする」ことを制御部３３へ出力し、制御部３３では、マルチビュー表示の全ての画面への出力を非表示（クリアスクリーン）にする。

次に、有効となる機能の選択処理を図１１のフローチャートを用いて説明する。
撮影部３１１により画像を取得し（ステップＳ１１）、撮影した認証対象の画像が認証ファイル３１３に登録されているかを検索する（ステップＳ１２）。
ここで、複数の認証対象が登録されていた場合、最も高い優先度を持つ認証対象が認証されたものとする。

認証が成功した場合（ステップＳ１３／ＹＥＳ）、認証された認証対象識別子に対応する認証画像を、撮影部３１１で撮影された画像中から抽出する（ステップＳ１４）。
次に、この認証された認証対象が存在する撮影画像の位置から認証対象のある方向を決定して、この方向に対応する画面の画面識別子を決定する（ステップＳ１５）。

機能リスト３６を参照して、画面識別子に対応する機能を有効機能として選択する（ステップＳ１６）。
ここで、画面識別子で示される画面を、次のいずれかあるいは組み合わせて非選択状態になっている機能に対する画面と区別つくようにしてもよい（図４）。
・画面識別子で示される画面の枠の色を識別可能に表示する（図４（Ａ））。
・画面識別子で示される画面の枠の太さを識別可能に表示する（図４（Ｂ））。
・画面識別子で示される画面に、区別がつくようなアイコン、絵、文字、記号等を表示する（図４（Ｃ））。これらの表示位置や大きさは、自由に設定可能である。
・画面識別子で示される画面の一部分として認証対象を表示する（図４（Ｄ））。この表示位置や大きさは、自由に設定可能である。

一方、認証が否認されるか、あるいは、認証対象が存在しない場合（ステップＳ１３／ＮＯ）、否認処理としてマルチビュー表示の全ての画面への出力を非表示（クリアスクリーン）にする（ステップＳ１７）。

これにより、予め登録しておいた特定の認証対象に限定して、この認証対象のある方向に応じて有効な機能を選択することができる。

＜実施形態３＞
次に、本実施形態３では、マルチビュー指向性表示手段と傾きセンサとを備える携帯型の電子機器を対象にして説明する。
例えば、携帯電話のような電子機器を利用する場合、利用者は通常手に持った電子機器を顔より若干下に持って利用するので、表示画面は斜め上または上を向いて利用される場合が多い。したがって、本実施形態３では、例えば、表示手段が左右の２画面をマルチビュー表示可能な場合に、表示画面の垂直方向への傾きを検知して、右側に傾けられたときは左側の画面に表示されているアプリケーションが視認可能となるので、同アプリケーションの諸機能の操作を可能とし、左側に傾けたときはその逆に右側の画面に表示されているアプリケーションが視認可能となるので、同アプリケーションの諸機能の操作を可能とする例に基づいて説明する。

図１２は、本実施形態３に係る電子機器のハードウェア構成を示すブロック図である。同図において、電子機器は、主制御部１０、記憶部１３、操作部１４、外部入出力Ｉ／Ｆ１５、表示制御部１８、マルチビュー指向性表示部１９、マイク２０、スピーカ２１、傾きセンサ２４を備えている。図１２において、上述した実施形態１の図６と同一部分については同一の符号を付して、説明を省略する。図１２において、図６と異なる点は、当該電子機器の傾きを回転角や加速度により検出し、主制御部１０へ通知する傾きセンサ２４を備えた点である。

図１３は、本実施形態３に係る電子機器の機能構成を示すブロック図である。同図において、電子機器は、傾きセンサ３８、機能選択部３２、制御部３３、表示制御部３４、マルチビュー指向性表示部３５、機能リスト３６、機能３７を備えている。同図において、上述した実施形態１の図７および実施形態２の図１０と同一部分については同一の符号を付して、説明を省略する。この傾きセンサ３８は、上記の傾きセンサ２４と同じものである。

次に、図１４のフローチャートを用いて、機能選択部３２の処理を説明する。
当該電子機器が傾けられると、傾きセンサ３８から当該電子機器の傾き情報を取得する（ステップＳ２１）。
機能選択部３２は、傾きセンサ３８から取得した傾き情報から傾きの方向を決定し、この方向に対応する画面の画面識別子を決定して、機能リスト３６を参照して、決定した画面識別子に対応する機能を有効となる機能として選択する（ステップＳ２２）。

これにより、マルチビュー指向性の表示装置を備える電子機器を操作（キー入力、音声制御、音声出力の指向性制御、画像制御等）する際に、複数の画面に対応するそれぞれの機能のうち、有効となる機能が自動的に選択されるので、利用者が手動で操作画面を切り替える必要がなくなり、利便性の向上が図れる。

＜実施形態４＞
本実施形態４は、上述した実施形態１乃至３のいずれかの電子機器に通信機能が備えられていた場合である。
図１５は、本実施形態４に係る電子機器のハードウェア構成を示すブロック図である。同図において、電子機器は、主制御部１０、通信Ｉ／Ｆ１１、通信制御部１２、記憶部１３、操作部１４、外部入出力Ｉ／Ｆ１５、撮影部１６、画像処理部１７、表示制御部１８、マルチビュー指向性表示部１９、マイク２０、スピーカ２１を備えている。この実施形態４の構成は、実施形態１の電子機器に通信機能が搭載された場合のハードウェア構成であるが、実施形態２および実施形態３のハードウェア構成に、通信Ｉ／Ｆ１１、通信制御部１２を備えるようにしても同様に適用することができる。
同図において、上述した実施形態１の図６および実施形態３の図１２と同一部分については同一の符号を付して、説明を省略する。

主制御部１０は、記憶部１３に記憶された所定の制御プログラムを実行することにより、例えば、無線通信の制御、操作や表示等の入出力制御等の当該電子機器全体の動作を制御する。
通信Ｉ／Ｆ１１は、無線電波を介して基地局（図示しない）を介して無線通信を行うときのインタフェースであり、通信制御部１２は、受信時には通信Ｉ／Ｆ１１を介して受信したデータを復調し、所定の通信プロトコルに基づいて主制御部１０に送り、また、送信時には主制御部１０から所定の通信プロトコルに基づいて送られたデータを変調して増幅し、通信Ｉ／Ｆ１１を介して基地局に送信する。この通信により、音声電話通信を行ったり、電子メールの送受信や情報提供サイトのコンテンツを閲覧したり、コンテンツをダウンロードする等のデータ通信が行える。

操作部１４は、各種ファンクションや文字や数字等を入力するためのボタンやスイッチを備えており、電源、各種データ入力ボタン、通信の開始や終了等を指示するためのボタン、カーソルを上下左右に移動させるスクロール、通信網との接続指示、表示された内容の決定等の多機能ボタン等を備えている。そして、利用者が何らかのボタンやスイッチを操作する度に、どのボタンやスイッチが操作されたかが主制御部１０に通知される。

スピーカ２１は、通信Ｉ／Ｆ１１で受信した音声や、アプリケーションの処理過程で出力される音を出力する。また、このスピーカ２１を聴指向性のスピーカとすることで、デュアルビュー表示のそれぞれのビューに応じた音のみを出力して、利用者に伝達させることが可能である。あるいは、スピーカをヘッドホンやイヤホン等としてもよい。

図１６は、本実施形態４に係る電子機器の機能構成のうち通信機能に係る部分を示すブロック図であり、その他の部分は、上述した実施形態１の機能構成と同じであるから、ここでは相違点のみ説明する。

本実施形態４に係る電子機器のように、通信機能を有している場合、着信の報知を次のいずれかで行うことにより、作業中や視聴中の妨げにならないようにして着信があったことを知らせることができる。

通信機能では、着信があると着信情報（送信相手情報、緊急性、タイトル等）を取得して、それらを着信報知部３９へ送る。
着信報知部３９では、機能リスト３６を参照して、次の処理を行う。

（１）着信情報を表示制御部３４に送信して、選択状態となっている機能に対応する画面に表示して着信報知させる。
これにより、作業中や視聴中であっても着信があったことを知ることができる。
（２）着信情報を表示制御部３４に送信して、非選択状態となっている機能に対応する画面に表示して着信報知させる。
これにより、作業中や視聴中の妨げにならなくなる。しかし、非選択状態となっている画面に着信を報知すると、着信したことが利用者に分からない場合もあるので、着信報知部３９は、着信音をスピーカ２１にも報知する。
（３）着信情報を表示制御部３４に送信して、選択状態となっている機能に対応する画面および非選択状態となっている機能に対応する画面の両方に表示して着信報知させる。
これにより、選択状態となっている画面では作業中であり手が離せなくても、非選択状態となっている画面を見ている他の利用者により着信処理を行えるようになる。

以上のような実施形態の構成により、マルチビュー指向性の表示装置を備える電子機器を操作（キー入力、音声制御、音声出力の指向性制御、画像制御等）する際に、複数の画面に対応するそれぞれの機能のうち、有効となる機能が自動的に選択されるので、利用者が手動で操作画面を切り替える必要がなくなり、利便性の向上が図れる。
また、非選択状態となっている機能に対応する画面の表示をクリアスクリーンやＯＦＦにすることにより、表示内容のセキュリティを保つことができ、さらに、表示手段を動作させないので電力の消費を減らすことができる。

尚、本発明の実施形態は、上記の電子機器の各機能をコンピュータプログラム化し、このコンピュータプログラムを電子機器へインストールして実行することでも実現できる。

また、本発明は上述した実施形態に限定されず、本発明の要旨を逸脱しない範囲内で各種の変形、修正が可能であるのは勿論である。

カメラを使った場合の検知対象のある方向を決定する方法を説明する図である。 ＲＦＩＤを使った場合の検知対象のある方向を決定する方法を説明する図である。 小型電子機器に搭載された傾きセンサを使った場合の検知対象のある方向を決定する方法を説明する図である。 機能が選択状態となった画面と機能が非選択状態である画面との区別を説明する図である。 複数の利用者の中から機能を操作できる特定の人を決定する方法を説明する図である。 実施形態１に係る電子機器のハードウェア構成を示すブロック図である。 実施形態１に係る電子機器の機能構成を示すブロック図である。 検知部の処理を説明するフローチャートである。 機能リストのデータ例を示す図である。 実施形態２に係る電子機器の機能構成を示すブロック図である。 有効となる機能の選択処理を説明するフローチャートである。 実施形態３に係る電子機器のハードウェア構成を示すブロック図である。 実施形態３に係る電子機器の機能構成を示すブロック図である。 有効となる機能の選択処理を説明するフローチャートである。 実施形態４に係る電子機器のハードウェア構成を示すブロック図である。 通信機能に係る機能構成を示すブロック図である。 デュアルビューディスプレイ技術の基本原理について説明するための図である。

符号の説明

１…液晶表示パネル、２…パララックスバリア、１０…主制御部、１１…通信Ｉ／Ｆ、１２…通信制御部、１３…記憶部、１４…操作部、１５…外部入出力Ｉ／Ｆ、１６…撮影部、１７…画像処理部、１８,３４…表示制御部、１９,３５…マルチビュー指向性表示部、２０…マイク、２１…スピーカ、２４,３８…傾きセンサ、３１…検知部、３１１…撮影部、３１２…画像認証部、３１３…認証ファイル、３２…機能選択部、３３…制御部、３６…機能リスト、３７,３７_１〜ｎ…機能、３９…着信報知部。

Claims (17)

1. 複数の方向に異なる画面を同時に表示可能なマルチビュー指向性の表示手段を備えた電子機器において、前記表示手段の表示を制御する表示制御手段と、情報や指示の入力を検知する検知手段と、前記検知手段からの出力に応じて有効となる機能を選択する機能選択手段と、撮影手段とを備え、
   前記検知手段は、前記撮影手段で撮影された画像の中の撮影対象の位置によって、前記撮影対象がある方向を出力することを特徴とする電子機器。
2. 複数の方向に異なる画面を同時に表示可能なマルチビュー指向性の表示手段を備えた電子機器において、前記表示手段の表示を制御する表示制御手段と、情報や指示の入力を検知する検知手段と、前記検知手段からの出力に応じて有効となる機能を選択する機能選択手段と、撮影手段と、前記撮影手段で撮影された画像の中の認証対象を認証する画像認証手段とを備え、
   前記検知手段は、前記画像認証手段で認証された認証対象側から見て視認可能である方向を出力することを特徴とする電子機器。
3. 請求項２に記載の電子機器において、前記画像認証手段は、複数の認証対象を認証した場合、優先順位に応じて認証対象を選択することを特徴とする電子機器。
4. 請求項２に記載の電子機器において、前記画像認証手段で認証が否認された場合には、前記表示制御手段は、前記表示手段の全ての画面に対する機能を無効とすることを特徴とする電子機器。
5. 請求項１乃至３のいずれかに記載の電子機器において、前記表示制御手段は、前記機能選択手段によって選択された機能に対する画面の枠の色を識別可能に表示することを特徴とする電子機器。
6. 請求項１乃至３のいずれかに記載の電子機器において、前記表示制御手段は、前記機能選択手段によって選択された機能に対する画面の枠の太さを識別可能に表示することを特徴とする電子機器。
7. 請求項１乃至３、５、６のいずれかに記載の電子機器において、前記表示制御手段は、前記機能選択手段によって選択された機能に対する画面に、区別がつくようなアイコン、絵、文字あるいは記号を表示することを特徴とする電子機器。
8. 請求項１乃至３、５、６のいずれかに記載の電子機器において、前記表示制御手段は、前記機能選択手段によって選択された機能に対する画面の一部分として、前記撮影手段で撮影した検知対象を表示することを特徴とする電子機器。
9. 請求項１乃至８のいずれかに記載の電子機器において、通信手段と、前記通信手段での着信を報知する着信報知手段とを備え、前記着信報知手段は、選択状態になっている機能に対応する画面に着信報知することを特徴とする電子機器。
10. 請求項１乃至８のいずれかに記載の電子機器において、通信手段と、前記通信手段での着信を報知する着信報知手段とを備え、前記着信報知手段は、非選択状態になっている機能に対応する画面に着信報知することを特徴とする電子機器。
11. 請求項９または１０に記載の電子機器において、前記着信報知手段は、着信報知を音で報知することを特徴とする電子機器。
12. 請求項１乃至３、５乃至１１のいずれかに記載の電子機器において、前記表示制御手段は、非選択状態になっている機能に対応する画面の表示をクリアスクリーンにすることを特徴とする電子機器。
13. マルチビュー指向性の表示手段に表示された複数の方向に異なる画面に対応する有効な機能の選択方法において、前記表示手段の表示を制御する表示制御工程と、情報や指示の入力を検知する検知工程と、前記検知工程からの出力に応じて有効となる機能を選択する機能選択工程とを備え、
    前記検知工程は、撮影手段で撮影された画像の中の撮影対象の位置によって、前記撮影対象がある方向を出力することを特徴とする有効な機能の選択方法。
14. マルチビュー指向性の表示手段に表示された複数の方向に異なる画面に対応する有効な機能の選択方法において、前記表示手段の表示を制御する表示制御工程と、情報や指示の入力を検知する検知工程と、前記検知工程からの出力に応じて有効となる機能を選択する機能選択工程と、撮影手段で撮影された画像の中の認証対象を認証する画像認証工程を備え、
    前記検知工程は、前記画像認証工程で認証された認証対象側から見て視認可能である方向を出力することを特徴とする有効な機能の選択方法。
15. マルチビュー指向性の表示手段に表示された複数の方向に異なる画面に対応する有効な機能の選択方法において、前記表示手段の表示を制御する表示制御工程と、情報や指示の入力を検知する検知工程と、前記検知工程からの出力に応じて有効となる機能を選択する機能選択工程と、通信手段での着信を報知する着信報知工程を備え、
    前記着信報知工程は、選択状態になっている機能に対応する画面に着信報知することを特徴とする有効な機能の選択方法。
16. マルチビュー指向性の表示手段に表示された複数の方向に異なる画面に対応する有効な機能の選択方法において、前記表示手段の表示を制御する表示制御工程と、情報や指示の入力を検知する検知工程と、前記検知工程からの出力に応じて有効となる機能を選択する機能選択工程と、通信手段での着信を報知する着信報知工程を備え、
    前記着信報知工程は、非選択状態になっている機能に対応する画面に着信報知することを特徴とする有効な機能の選択方法。
17. コンピュータに請求項１３乃至１６のいずれかに記載の方法を実行させるためのプログラム。

Images