JP4730663B2

JP4730663B2 - 遠隔制御装置、遠隔制御システムおよび遠隔制御方法

Info

Publication number: JP4730663B2
Application number: JP2006077587A
Authority: JP
Inventors: 基在大田; 岳志三沢; 丈司宮下
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2006-03-20
Filing date: 2006-03-20
Publication date: 2011-07-20
Anticipated expiration: 2026-03-20
Also published as: US20070217650A1; US8193901B2; JP2007258831A

Description

本発明は撮像素子により機器固有の情報を取得し、取得した機器固有の情報に基づいて所望の機器を遠隔制御する技術に関する。特に本発明は、詳細な遠隔制御を簡単に行うための情報を表示する技術に関する。

近年、単一のコントローラで所望の機器を直感的に分かりやすく制御するための技術が様々開発されている。例えば非特許文献１によると、携帯電話に搭載されたカスタムイメージセンサを用い、通常画像をリアルタイムに撮像しながら、機器からＩＤを受信する。受信したＩＤは撮像した背景画像上に重ねてディスプレイ上に表示される。ユーザはディスプレイ上で対象機器とそのＩＤを視認しながら操作することができる。
「部分領域高速読出し機能をもつ低消費電力ＩＤ受信ＣＭＯＳイメージセンサを用いた情報家電マルチリモコン「オプトナビ」システムの提案」、映像情報メディア学会誌Ｖｏｌ．５９、Ｎｏ１２、ｐｐ．１８３０〜１８４０（２００５）

操作対象の機器が増えると、単一のコントローラによる各機器の詳細な動作指示が複雑となるが、非特許文献１では、複数の機器のうち所望の機器について詳細な操作を簡単に行うための具体的手段は開示されていない。本発明はこのような問題点に鑑みてなされたもので、必要に応じて所望の機器の操作に関する情報を表示し、機器の遠隔操作をしやすくすることを目的とする。

本発明に係る遠隔制御装置は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報と機器の制御に関する詳細情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器に固有の情報の選択および固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、指示受付部から選択された制御内容に対応する遠隔制御信号を、指示受付部から固有の情報が選択された機器に送信する遠隔制御部と、を備え、表示部は指示受付部から固有の情報が選択されたことに応じ、固有の情報が選択された機器の制御に関する詳細情報を表示する。

本発明では、所望の機器の詳細情報を選択して閲覧できるから、複数の機器の各々の詳細情報を単一のコントローラで簡単に必要に応じて確認できる。

指示受付部は表示部に表示された機器の制御に関する詳細情報から所望の詳細情報の選択を受け付け、遠隔制御部は指示受付部から選択された詳細情報で規定される制御内容に対応する遠隔制御信号を指示受付部から固有の情報が選択された機器に送信するようにしてもよい。

本発明では、所望の機器からの詳細情報に基づいて、その機器に所望の制御内容の遠隔制御信号を送って制御できるから、複数の機器の詳細な遠隔制御が単一のコントローラを用いて非常に簡単に行える。

詳細情報が階層構造を有する場合、表示部は選択された機器の制御に関する詳細情報を階層ごとに表示するようにしてもよい。

本発明に係る遠隔制御システムは、固有の情報と機器の制御に関する詳細情報とを光学的に発信する機器と、機器を被写体とする画像と機器から光学的に発信される機器に固有の情報と機器の制御に関する詳細情報とを撮像素子により継続的に取得する取得部と、取得部が継続的に取得した画像と機器に固有の情報とを重畳して表示する表示部と、固有の情報が取得された機器の内遠隔制御する所望の機器に固有の情報の選択び固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、指示受付部から選択された制御内容に対応する遠隔制御信号を、指示受付部から固有の情報が選択された機器に送信する遠隔制御部と、を備え、表示部は指示受付部から固有の情報が選択されたことに応じ、固有の情報が選択された機器の制御に関する詳細情報を表示する。

本発明に係る詳細情報表示方法は、遠隔制御の対象となる機器を被写体とする画像と機器から光学的に発信される機器に固有の情報と機器の制御に関する詳細情報とを撮像素子により継続的に取得するステップと、固有の情報が取得された機器の内所望の機器に固有の情報の選択の指示をユーザから受け付けるステップと、固有の情報が選択されたことに応じ、固有の情報が選択された機器の制御に関する詳細情報を表示するステップと、を含む。

また、本発明では、所望の機器からの詳細情報に基づいて、その機器に所望の制御内容の遠隔制御信号を送って制御できるから、複数の機器の詳細な遠隔制御が単一のコントローラを用いて非常に簡単に行える。

図１は本発明の好ましい第１の実施形態に係る遠隔制御システムの概略構成図である。このシステムは、遠隔制御装置１と、遠隔制御装置１によって制御されるテレビ、ビデオ、ステレオなどのＡＶ機器、パソコン、調理機器その他の機器２とを含む。遠隔制御装置１は、移動体通信網やインターネットなどの外部ネットワークや、ローカルエリアネットワーク（ＬＡＮ）を介して各機器２と接続する。

機器２はすべての動作の遠隔制御可能状態（例えば主電源がオンの状態）になっているときは、自己に固有の情報（機器２の識別番号、ＩＤ、シリアル番号、メーカ番号、型式番号、機種、外部ネットワーク上のアドレスなど機器２に固有の情報であれば何でも可）である機器固有情報に、自己の情報発信位置を知らせる低周波数のパイロット信号を重畳して、赤外線などの光学信号により継続的に発信する。

図２に示すように、機器２は、機器固有情報のほか、詳細情報もさらに低周波数のパイロット信号と重畳して継続的に発信する。ここで、詳細情報とは、機器の動作（例えばオーディオプレーヤーであれば楽曲の選局、再生、停止など）の制御に関する詳細な情報である。

図２（ａ）では単純に機器固有情報と詳細情報とが交互に繰り返し発信される態様を示す。図２（ｂ）では機器固有情報と上位階層の詳細情報と下位階層の詳細情報からなる階層構造を有する詳細情報が交互に繰り返し発信される態様を示す。詳細情報の階層構造については後述する。

また、機器２は遠隔制御装置１からの遠隔制御信号（赤外線信号その他の光学的信号あるいはBluetooth、無線ＬＡＮその他の電気的信号で発信）を受信する。

図３は、本発明の好ましい実施形態に係る遠隔制御装置１の機能ブロック図である。遠隔制御装置１は、撮像レンズ、ＣＭＯＳやＣＣＤなどの固体撮像素子、ドライバが固体撮像素子から読み取ったアナログ画像をデジタル信号に処理するためのアナログフロントエンド回路、アナログフロントエンド回路からのデジタル画像信号を処理するＤＳＰ（Digital Signal Processor）等の信号処理回路などを含んだカメラ部２０、ワンチップマイコンなどで構成されカメラ部２０の撮像動作を制御するカメラ制御部２１を含む。

また、遠隔制御装置１は、テンキーや十字キーなどで構成された操作部１４への入力操作、リモコン信号送受信部２２が外部から受信した各種の操作信号、カメラ部２０の取得した画像や機器固有情報などに従って表示部１３の表示制御を行う表示制御部２６を備えている。

また、遠隔制御装置１は、各部の動作制御を統括するＣＰＵ１０、各種データやプログラムを記憶するＲＯＭ１２、ＣＰＵ１０の処理に必要な各種データを記憶するＲＡＭ１１を備えている。

特にＲＯＭ１２には、ＣＰＵ１０が操作部１４への操作に応じた機器２の制御コードを重畳した遠隔制御信号を発信するようリモコン信号制御部２３または無線制御部１６を制御するための制御プログラムおよび操作部１４の各部の操作とその操作によって重畳される制御コードとの関係を視覚的に表示するリモコンＧＵＩを、複数存在する機器２ごとに格納している。

撮像レンズには、例えば光学２倍ズームレンズが用いられ、操作部１４から入力される倍率変更操作に応じてモータドライバが撮像レンズを望遠（テレ）側又は広角（ワイド）側に進退駆動することで光学ズーム倍率が変更される。撮像レンズの倍率は上記に限定されない。撮像レンズには絞りが設けられており、モータドライバを介して絞りを制御して適正な露光量を得る。

操作部１４によって撮影モードが設定されると、ＣＰＵ１０は、動画（スルー画）を表示部１３に表示させ、撮影画角を確認可能にする。即ち、固体撮像素子は、撮像レンズの受光面に結像された被写体光をその光量に応じた量の信号電荷に変換する。このようにして蓄積された各画素の信号電荷は、ＣＰＵ１０の指令に従いタイミングジェネレータから与えられる駆動パルスに基づき、信号電荷に応じた電圧信号（画像信号）としてドライバによって順次個別に読み出され、アナログフロントエンド回路でデジタル信号に変換されてそれぞれ信号処理回路に加えられる。

信号処理回路は、ゲイン調整回路及びＡ／Ｄ変換器を含み、輝度・色差信号生成回路、ガンマ補正回路、シャープネス補正回路、コントラスト補正回路、ホワイトバランス補正回路、撮影画像に対する輪郭補正を含む画像処理を行う輪郭処理部、画像のノイズ低減処理を行うノイズ低減処理部等を含む画像処理手段であり、ＣＰＵ１０からのコマンドに従って画像信号を処理する。

信号処理回路に入力された画像データは、輝度信号（Ｙ信号）及び色差信号（Ｃｒ、Ｃｌ信号）に変換されるとともに、ガンマ補正等の所定の処理が施された後、ＶＲＡＭに格納される。

撮影画像を表示部１３にモニタ出力する場合、ＶＲＡＭからＹＣ信号が読み出され、表示制御部２６に送られる。表示制御部２６は、入力されたＹＣ信号を表示用の所定方式の信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換して表示部１３に出力する。

所定のフレームレートで処理された各フレームのＹＣ信号は、ＶＲＡＭのＡ領域とＢ領域とに交互に書き込まれ、ＶＲＡＭのＡ領域及びＢ領域のうち、ＹＣ信号が書き込まれている方の領域以外の領域から、書き込まれているＹＣ信号が読み出される。このようにしてＶＲＡＭ内のＹＣ信号が定期的に書き換えられ、そのＹＣ信号から生成される映像信号が表示部１３に供給されることにより、撮像中の映像がリアルタイムに表示部１３に表示される。ユーザは、表示部１３に表示される映像（スルー）によって撮影画角を確認できる。

ここで、操作部１４に設けられた撮影キーが押下されると、記憶用の撮影動作がスタートする。撮影キーの押下に応動して取得された画像データは信号処理回路において輝度／色差信号（Ｙ／Ｃ信号）に変換され、ガンマ補正等の所定の処理が施された後、ＲＡＭ１１に格納される。

ＲＡＭ１１に格納されたＹ／Ｃ信号は、圧縮伸長処理回路によって所定のフォーマットに従って圧縮された後、メモリカード２７にExifファイルなどの所定フォーマットの画像ファイルとして記憶される。画像ファイルはフラッシュメモリ２８に記憶することもできる。

操作部１４によって再生モードが設定されると、メモリカード２７に記憶されている最終の画像ファイル（最後に記憶されたファイル）の圧縮データが読み出される。最後の記憶に係るファイルが静止画ファイルの場合、この読み出された画像圧縮データは、圧縮伸長処理回路を介して非圧縮のＹＣ信号に伸長され、ＶＲＡＭに保存される。ＶＲＡＭに保存されたＹＣ信号は、表示制御部２６に加えられる。表示制御部２６は、入力するＹＣ信号からＮＴＳＣ方式のＲＧＢカラー複合映像信号を作成し、これを表示部１３に出力する。これにより、表示部１３にはメモリカード２７に記憶されている最終コマのコマ画像が表示される。

その後、操作部１４に設けられた十字キーの右キーが押されると、順方向にコマ送りされ、十字キーの左キーが押されると、逆方向にコマ送りされる。そして、コマ送りされたコマ位置の画像ファイルがメモリカード２７から読み出され、上記と同様にしてコマ画像が表示部１３に再生される。尚、最終コマのコマ画像が表示されている状態で順方向にコマ送りされると、メモリカード２７に記憶されている１コマ目の画像ファイルが読み出され、１コマ目のコマ画像が表示部１３に再生される。

記憶させる画像ファイルの画素数は、例えば、2832×2128（６Ｍ）、2048×1536（３Ｍ）、1280×960（１Ｍ）、640×480（ＶＧＡ）の何れかであり、記憶画質と記憶画素数との組合せによって撮影画像のデータ量（ファイルサイズ）が変化する。

遠隔制御装置１は、例えば非特許文献１に示すようにカメラ付き携帯電話やデジタルカメラで構成することができる。ただし、本実施形態において、画像の記録保存に関するブロック（メモリカード２７やフラッシュメモリ２８）は必須でない。

リモコン信号送受信部２２は、受光素子を備える。図３ではカメラ部２０とリモコン信号送受信部２２とは別体で示されているが、実際には、受光素子は、カメラ部２０の固体撮像素子と共通する。このため、カメラ部２０が機器２を被写体として撮像すると、画像と合わせて、各機器２が光学的に発信した機器固有情報や詳細情報を取得できる。

リモコン信号制御部２３は、外部の機器２からリモコン信号送受信部２２に入射した光学信号に重畳されている機器固有情報をデジタルデータに変換してＣＰＵ１０に出力する。

ＣＰＵ１０は、リモコン信号制御部２３から入力した機器固有情報に応じ、機器固有情報で特定される機器２に固有の制御コードを規定したテーブルをＲＯＭ１２からＲＡＭ１１に読み出す。そして、操作部１４から表示部１３上の所望の機器固有情報の指定操作に応じ、指定された機器固有情報で特定される機器２の制御コードをＲＡＭ１１から読み出して、リモコン信号制御部２３に送る。

リモコン信号送受信部２２は発光ダイオードや赤外線ＬＥＤなどで構成された光学的信号発信手段を備える。リモコン信号制御部２３は、ＣＰＵ１０から指示された制御コードその他のデータを重畳した光学的信号を、指定の機器２に発信する。このように、遠隔制御装置１から指定の機器２に光学的な制御信号を送ることで機器２の遠隔操作が可能である。

また、遠隔制御装置１は、移動体通信電波、IrDA、Bluetooth、無線ＬＡＮ、Wireless USBなどの無線信号を機器２との間で送受信する無線送受信部１７と、受信した無線信号をデータに変換してＣＰＵ１０に送信したり、あるいはＣＰＵ１０から指示された遠隔制御信号を無線信号に重畳する無線制御部１６、ＵＳＢその他の規格に従ってパソコンやプリンタなどの各種家電機器２と通信する外部インターフェース部１５を備える。

ＣＰＵ１０は、操作部１４の操作に応じた特定の機器２の制御コードをＲＡＭ１１から読み出して、無線制御部１６に送ることもできる。無線制御部１６は、ＣＰＵ１０から入力された制御コードその他のデータを重畳した無線信号を機器２に発信する。この無線信号はＬＡＮまたは外部ネットワーク経由で機器２に到達する。機器２は、制御コードを受信すると、制御コードに応じた動作を行う。このように、遠隔制御装置１から機器２に無線信号を送ることで操作部１４による特定の機器２の遠隔操作も可能である。

遠隔制御装置１は、音声を発するスピーカなどの拡声手段および音声を受けて電気信号に変換するマイクなどの受話手段を含む送受話部１９、拡声手段の発話内容を制御する音声制御部１８を備える。音声制御部１８は、送受話部１９から入力された音声信号から、ＣＰＵ１０の指定した特定の音声パターンを認識する機能を有する。

ＣＰＵ１０は、送受話部１９の受けた音声に応じた特定の機器２の制御コードをＲＡＭ１１から読み出して、リモコン信号制御部２３あるいは無線制御部１６に送ることもできる。すなわち、特定の機器２に光学的信号あるいは無線信号で発信する制御コードの指定は、操作部１４への入力操作に限られず、音声入力でも行える。

また、ＣＰＵ１０は、操作部１４への入力操作や送受話部１９への音声に応じ、制御コードをリモコン信号送受信部２２かまたは無線送受信部１７のいずれから発信するかを選択する。遠隔制御装置１が制御対象となる機器２の面前であればリモコン信号送受信部２２から制御コードを発信すればよいが、そうでない場合は、ユーザが無線送受信部１７から制御コードを発信する旨を操作部１４への入力操作や送受話部１９への音声によってＣＰＵ１０に指示する。ＣＰＵ１０はこの指示に応じ、無線送受信部１７から制御コードを発信するよう制御を行う。

図４は遠隔制御装置１の実行するガイドナビモード処理の流れを示すフローチャートである。

まず、Ｓ１では、ＣＰＵ１０は、操作部１４あるいは送受話部１９に入力された撮像指示に応じ、カメラ制御部２１に静止画取得動作の開始を指令する。カメラ制御部２１は、カメラ部２０を制御して静止画を取得し、ＲＡＭ１１に記憶する。

Ｓ２では、ＣＰＵ１０は、カメラ部２０の取得した画像から少なくとも１つのパイロット信号が検出されたか否かを判断する。少なくとも１つのパイロット信号が検出されたと判断した場合はＳ３に移行し、パイロット信号が１つも検出されなかったと判断した場合はＳ１に戻る。

Ｓ３では、ＣＰＵ１０は、パイロット信号の検出位置に基づき、情報発信位置を特定する。

Ｓ４では、ＣＰＵ１０は、情報発信位置部分に関しては高フレームレートで、それ以外の部分は低フレームレートで再び静止画取得動作を行う。

Ｓ５では、ＣＰＵ１０は、取得した静止画を表示部１３にスルー表示するとともに、重畳されている情報（機器固有情報と詳細情報の両方）を抽出する。

Ｓ６では、ＣＰＵ１０は、後述する詳細情報表示処理を実行する。

Ｓ７では、ＣＰＵ１０は、操作部１４により表示部１３上で機器固有情報の選択された所望の機器２に、操作部１４により選択された所望の制御コードを含んだ遠隔制御信号を発信する。

図５は詳細情報表示処理の流れを示すフローチャートである。

Ｓ１１では、ＣＰＵ１０は、抽出した機器固有情報とそれに対応する機器２のアイコンを静止画中の各機器２の情報発信位置付近に合成して表示部１３に表示させる。

Ｓ１２では、ＣＰＵ１０は、表示部１３上のいずれかの機器２の機器固有情報を操作部１４によって選択させる。機器固有情報を指定する操作は、例えば、選択された所望の機器２のアイコンをクリックすることが挙げられる。

Ｓ１３では、ＣＰＵ１０は、選択された所望の機器２の機器固有情報を点滅させたり半透明化したりハイライトしたり枠で囲んだりするなどして強調表示する。

図６は強調表示の一例として、選択された機器２の機器固有情報を枠で囲った様子を示している。

Ｓ１４では、ＣＰＵ１０は、選択された所望の機器２の詳細情報の表示を行う「詳細モード」を開始するか否かを、操作部１４によって指定させる。「詳細モード」を開始することを指定する操作は、例えば、選択された所望の機器２の機器固有情報の付近に表示された「実行」スイッチを押すこと、あるいは選択された所望の機器２のアイコンをダブルクリックすることが挙げられる。

Ｓ１５では、ＣＰＵ１０は、「詳細モード」を開始する機器２の指定があった場合、これを識別する。

Ｓ１６では、「詳細モード」を開始する。具体的には、静止画のスルー表示を停止し、選択された機器２から受信した詳細情報、詳細情報を囲む表示枠、機器２のアイコンなどを表示部１３に表示する。

図７は機器２の一種である「ＴＶ（テレビジョン受像機）」から受信した詳細情報として、放送中の各チャンネルのチャンネル名を表示している様子を示す。

図８は機器２の一種である「ａｕｄｉｏ（オーディオ機器）」から受信した詳細情報として、再生するアルバムおよび楽曲名が表示されている様子を示す。図８に示すように、詳細情報の一覧（楽曲名）が表示部１３のすべてに収まらない場合は、タッチパネル上で方向ボタンを押下したり画面をドラッグしたりする操作に応じ、詳細情報の一部を順次スクロール表示させてもよい。

Ｓ１７では、選択された機器２から受信した詳細情報が階層構造を有しているか否かを判断する。階層構造を有している場合はＳ１８、階層構造を有していない場合はＳ２６に移行する。機器２は詳細情報の階層を識別するヘッダを重畳することで、遠隔制御装置１に階層構造を識別させる。

Ｓ１８では、表示された詳細情報のうち、下位の階層構造の表示をすべき詳細情報を指定させる。詳細情報を指定する操作は、例えば、詳細情報の項目をクリックすることが挙げられる。

Ｓ１９では、選択された詳細情報を強調表示する。図７では所望する詳細情報として「2ch:nityanneru」が選択されて強調表示された様子を示す。

Ｓ２０では、選択された詳細情報の下位の階層の詳細情報を表示する画面に移行するか否かを選択させる。下位の階層の詳細情報を表示することが選択された場合はＳ２２に移行し、選択されない場合はＳ２７に移行する。

Ｓ２２では、ＣＰＵ１０は、「実行」スイッチが押下されたり詳細情報の項目をダブルクリックするなど、下位の詳細情報について「詳細モード」を開始する機器２の指定があった場合、これを識別する。

Ｓ２３では、指定された詳細情報の下位の階層の詳細情報を表示する。

図９では機器２の一種である「ＤＶＤ」からの詳細情報のうち「録画済み番組」の下位の階層の詳細情報を表示することが選択され、これに応じて下位の詳細情報である録画済み番組の一覧「1:hitotume」、「2:futatume」、「3:mittume」・・が表示される。

Ｓ２４では、画面スクロール操作に応じて詳細情報をスクロール表示する。

Ｓ２５では、「クリア」スイッチの操作を受け付けたことに応じて下位の詳細情報の表示を終了し、Ｓ１６に戻って上位の詳細情報の表示に切り替える。なおＳ２５で「クリア」スイッチをワンクリックしたときはＳ１６に戻り、「クリア」スイッチを長押ししたときはＳ１１に戻るようにしてもよい。

Ｓ２６では、画面スクロール操作に応じて詳細情報をスクロール表示する。Ｓ２７では、「クリア」スイッチの操作を受け付ける。Ｓ２８では、「クリア」スイッチの操作を受け付けたことに応じて詳細情報の表示を終了し、Ｓ１１と同様のスルー画像と機器固有情報との合成画像の表示に切り替える。そして、ガイドナビモード処理のＳ７に進む。

このように、本実施形態では、所望の機器２の詳細情報を選択して閲覧できるから、複数の機器の各々の詳細情報を単一のコントローラで簡単に必要に応じて確認できる。

＜第２実施形態＞
図１０は本発明の好ましい第２の実施形態に係る遠隔制御システムの概略構成図である。このシステムは、遠隔制御装置１と、遠隔制御装置１によって制御される機器２の一種であるＤＶＤプレーヤとを含む。遠隔制御装置１は、移動体通信網やインターネットなどの外部ネットワークや、ローカルエリアネットワーク（ＬＡＮ）を介してＤＶＤプレーヤと接続する。

本実施形態では、遠隔制御装置１が、機器２から受信した詳細情報に基づいて所望の遠隔制御内容を指定し、これを含んだ遠隔制御信号を、無線あるいは有線で機器２に送る。

図１１は機器２の一種であるＤＶＤプレーヤの全体構成の概略を示すブロック図である。本実施形態のＤＶＤプレーヤ１は、ＤＶＤビデオ規格に準じて映画又は音楽映像作品及びそれに関するメインメニュ画面等を再生可能な装置である。また、このＤＶＤプレーヤは、出力音量の調節バー、又は各種映像の調節メニュ等のＯＳＤを主映像等の上に重ねて表示するＯＳＤ機能を備えている。

ＤＶＤプレーヤ１は、ＭＰＥＧデコーダ１０１と、ＲＡＭ１０２と、ＤＶＤドライブ装置１０３とを有する映像及び音声のデータ処理系ブロックを備える。更に、ＤＶＤプレーヤ１は、ＣＰＵ１０４と、操作部１０５と、リモコン受信部１０６と、表示インターフェース１０７と、ＲＯＭ１０８とを備える。

ＭＰＥＧデコーダ１０１は、ＤＶＤドライブ装置１０３によって読み出されたＤＶＤビデオ規格の映像及び音声データに対してデコード処理等を行い、ＭＰＥＧ映像、サブピクチャ、及びハイライトを表示するためのＲＧＢビデオ信号と、ＰＣＭ（Pulse Code Modulation）形式のオーディオ信号とを生成する。

ＭＰＥＧデコーダ１０１は、ＣＰＵ１０４の制御に基づき、ＯＳＤの表示指示を受信すると、ＲＯＭ１０８に格納されている出力音量の調節バー、又は各種映像の調節メニュ等のフォントデータ又は圧縮データ等のＯＳＤデータに対してデコード処理等を行い、ＯＳＤを表示するためのＲＧＢビデオ信号を生成する。

ＭＰＥＧデコーダ１０１は、ＲＧＢビデオ信号を生成すると、生成されたＲＧＢビデオ信号を所定形式の輝度信号と色信号とに変換して表示インターフェース１０７に出力する。これにより、ＤＶＤプレーヤ１に表示インターフェース１０７を介して接続されている映像表示装置の表示画面に、ＭＰＥＧ映像やＯＳＤなどの各種映像が表示される。

リモコン受信部１０６は、遠隔制御装置１から遠隔制御信号を受信し、その信号をＣＰＵ１０４に送る。ＣＰＵ１０４は、遠隔制御信号から制御内容を解釈し、その制御内容に応じて、ＤＶＤドライブ装置１０３やＭＰＥＧデコーダ１０１などの各ブロックを制御する。

図１２は本システムで実行される遠隔制御処理の流れを示すフローチャートである。Ｓ４１〜Ｓ４６は遠隔制御装置１、Ｓ４７〜Ｓ４９は機器２が実行する。ここでは具体例として、機器２の一種であるＤＶＤプレーヤによる所望の映像コンテンツの再生を想定しながら説明する。

Ｓ４１では、遠隔制御装置１は前述のＳ１６あるいはＳ２３と同様、詳細情報を表示する。

Ｓ４２では、遠隔制御装置１は操作部１４の操作に応じ、再生すべきコンテンツを選択する。

Ｓ４３では、遠隔制御装置１は選択されたコンテンツを強調表示する。

Ｓ４４では、遠隔制御装置１は選択されたコンテンツの再生を開始する指示を受け付ける。再生開始の指示は、コンテンツの項目が選択された状態で別途設けられた「実行」スイッチを押下したり、あるいはコンテンツの項目をダブルクリックすることなどで行う（図１０参照）。

Ｓ４５では、遠隔制御装置１は選択されたコンテンツを再生する制御コードを識別する。

Ｓ４６では、遠隔制御装置１は選択されたコンテンツを再生する制御コードを規定した遠隔制御信号を機器２に送信する。

Ｓ４７では、機器２は遠隔制御装置１からの遠隔制御信号をリモコン受信部１０６を介して受信する。

Ｓ４８では、機器２のＣＰＵ１０４は受信した遠隔制御信号の規定する制御コードを解釈し、その制御内容に応じてＭＰＥＧデコーダ１０１、ＤＶＤドライブ装置１０３等を制御する。これにより、選択されたコンテンツの映像信号が生成される。

Ｓ４９では、機器２は、遠隔制御装置１で選択されたコンテンツの映像信号を、表示インターフェース１０７を介して映像表示装置に出力する。

なおこの詳細情報に基づく遠隔制御はＤＶＤプレーヤ以外の各種機器にも適用できる。例えば機器２がＴＶであれば、現在放送中のチャンネルの詳細情報から指定されたチャンネルを選局するようＴＶのチューナーに指令する制御コードを含んだ遠隔制御信号を送ることもできる。

このように、本実施形態では、所望の機器２からの詳細情報に基づいて、その機器２に所望の制御内容の遠隔制御信号を送って制御できるから、複数の機器の詳細な遠隔制御が単一のコントローラを用いて非常に簡単に行える。

第１実施形態に係る遠隔制御システムの概略構成図機器から発信される機器固有情報と詳細情報の概念説明図遠隔制御装置の構成図ガイドナビモード処理の流れを示すフローチャート詳細情報表示処理の流れを示すフローチャート選択された機器の固有情報を強調表示した状態を示す図機器（ＴＶ）から受信した詳細情報を表示した状態を示す図機器（オーディオ）から受信した詳細情報から所望の詳細情報が選択され、選択された詳細情報の下位の階層の詳細情報を表示した状態を示す図機器（ＤＶＤプレーヤ）から受信した詳細情報から所望の詳細情報が選択され、選択された詳細情報の下位の階層の詳細情報を表示した状態を示す図第２実施形態に係る遠隔制御システムの概略構成図機器の一例であるＤＶＤプレーヤのブロック構成図第２実施形態に係る遠隔制御処理の流れを示すフローチャート

符号の説明

１：遠隔制御装置、２：機器、１０：ＣＰＵ、１１：ＲＡＭ、１２：ＲＯＭ、１３：表示部、１４：操作部、１６：無線制御部、１７：無線送受信部、１８：音声制御部、１９：送受話部、２０：カメラ部、２１：カメラ制御部、２２：リモコン信号送受信部、２３：リモコン信号制御部

Claims

遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報と前記機器の制御に関する詳細情報と前記詳細情報の階層構造を識別するヘッダとを撮像素子により継続的に取得する取得部と、
前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
前記固有の情報が取得された機器の内遠隔制御する所望の機器に固有の情報の選択および前記固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
前記指示受付部から選択された制御内容に対応する遠隔制御信号を、前記指示受付部から固有の情報が選択された機器に送信する遠隔制御部と、
を備え、
前記表示部は前記指示受付部から固有の情報が選択されたことに応じ、前記固有の情報が選択された機器の制御に関する詳細情報の階層構造の有無を前記ヘッダに基づいて判断し、前記階層構造の有無の判断結果に応じて前記詳細情報を階層ごとに表示し、
前記指示受付部は、前記階層ごとに表示された詳細情報の中から前記固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付け、
前記遠隔制御部は、前記階層ごとに表示された詳細情報の中から選択された制御内容に対応する遠隔制御信号を、前記固有の情報が選択された機器に送信する遠隔制御装置。
前記指示受付部は前記表示部に表示された機器の制御に関する詳細情報から所望の詳細情報の選択を受け付け、
前記遠隔制御部は前記指示受付部から選択された詳細情報で規定される制御内容に対応する遠隔制御信号を前記指示受付部から固有の情報が選択された機器に送信する請求項１に記載の遠隔制御装置。
固有の情報と機器の制御に関する詳細情報とを光学的に発信する機器と、
前記機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報と前記機器の制御に関する詳細情報と前記詳細情報の階層構造を識別するヘッダとを撮像素子により継続的に取得する取得部と、
前記取得部が継続的に取得した画像と前記機器に固有の情報とを重畳して表示する表示部と、
前記固有の情報が取得された機器の内遠隔制御する所望の機器に固有の情報の選択および前記固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付ける指示受付部と、
前記指示受付部から選択された制御内容に対応する遠隔制御信号を、前記指示受付部から固有の情報が選択された機器に送信する遠隔制御部と、
を備え、
前記表示部は前記指示受付部から固有の情報が選択されたことに応じ、前記固有の情報が選択された機器の制御に関する詳細情報の階層構造の有無を前記ヘッダに基づいて判断し、前記階層構造の有無の判断結果に応じて前記詳細情報を階層ごとに表示し、
前記指示受付部は、前記階層ごとに表示された詳細情報の中から前記固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付け、
前記遠隔制御部は、前記階層ごとに表示された詳細情報の中から選択された制御内容に対応する遠隔制御信号を、前記固有の情報が選択された機器に送信する遠隔制御システム。
遠隔制御の対象となる機器を被写体とする画像と前記機器から光学的に発信される機器に固有の情報と前記機器の制御に関する詳細情報と前記詳細情報の階層構造を識別するヘッダとを撮像素子により継続的に取得するステップと、
前記固有の情報が取得された機器の内所望の機器に固有の情報の選択の指示をユーザから受け付けるステップと、
前記固有の情報が選択されたことに応じ、前記固有の情報が選択された機器の制御に関する詳細情報の階層構造の有無を前記ヘッダに基づいて判断し、前記階層構造の有無の判断結果に応じて前記詳細情報を階層ごとに表示するステップと、
前記階層ごとに表示された詳細情報の中から前記固有の情報が選択された機器に対する所望の制御内容の選択の指示をユーザから受け付けるステップと、
前記階層ごとに表示された詳細情報の中から選択された制御内容に対応する遠隔制御信号を、前記固有の情報が選択された機器に送信するステップと、
を含む遠隔制御方法。