JPH06153017A

JPH06153017A - 機器の遠隔制御装置

Info

Publication number: JPH06153017A
Application number: JP4294412A
Authority: JP
Inventors: Yutaka Hirono; 豊広野
Original assignee: Sanyo Electric Co Ltd
Current assignee: Sanyo Electric Co Ltd
Priority date: 1992-11-02
Filing date: 1992-11-02
Publication date: 1994-05-31

Abstract

(57)【要約】【目的】リモコン装置を必要とせず、且つ同一場所で
機器の遠隔制御を可能とした機器の遠隔制御装置を提供
することを目的とする。【構成】モニター７と、人体の画像を検出する撮像手
段１と、該撮像手段１により検出された人体画像を前記
モニター７上の画面に表示させると共に、被制御機器６
の複数の制御項目画像を前記モニター７上の画面に表示
させ、該表示画面において前記人体画像が前記制御項目
画像に所定量以上重複した場合に、該重複制御項目の制
御指令を前記被制御機器６に出力する制御手段４と、を
備えている機器の遠隔制御装置である。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、テレビやエアコン等の
各種の電気機器を遠隔制御する遠隔制御装置に関する。

【０００２】

【従来の技術】従来、テレビやエアコン等の機器を遠隔
制御するには、超音波、赤外線、電波等のリモートコン
トロール用の信号を発生する装置、所謂リモコン装置を
必要とし、このリモコン装置を操作者の手元において操
作して機器を制御している。

【０００３】そして、最近ではテレビやエアコンの他に
もステレオやビデオのように、リモコン装置で制御する
機器が増えてきているため、各家庭等で所有するリモコ
ン装置の数も当然増大し、どのリモコン装置がどの機器
のものであるかいちいち選択しなければならず、その置
場所にも困っていた。

【０００４】このため、１台のリモコン装置により複数
の被制御機器を遠隔制御する画像表示遠隔制御装置が、
特開昭６３−２０８３７２号公報などで提案されてい
る。この装置は、被制御機器を動作させるのに必要な動
作内容を表示するディスプレイを備え、１台のリモコン
装置によりディスプレイ上に表示された動作内容を選択
して複数の被制御機器を遠隔制御している。

【０００５】また、特開平３−２７８６９６号公報で
は、人体から放射される赤外線を検出し、その検出信号
の周波数を分析し、この分析結果に基づいて機器を遠隔
制御する装置が提案されている。

【０００６】

【発明が解決しようとする課題】しかしながら、特開昭
６３−２０８３７２号公報に開示の従来装置では、依然
としてリモコン装置を手元において機器の遠隔制御を行
う必要があり、リモコン装置を誤って紛失してしまう虞
れがあった。また、高齢者や身障者等の人々にとって
は、複数のボタンが配置されたリモコン装置を操作する
のは煩わしく、誤った命令を指示する虞れがあった。

【０００７】一方、特開平３−２７８６９６号公報に開
示の従来装置では、手元に置くリモコン装置を使わずに
機器の遠隔制御を行うことが可能となるが、複数の機器
を遠隔制御するためには各機器に赤外線検出手段を備え
ておく必要があり、同一場所で複数の機器を遠隔制御す
ることはできなかった。また、赤外線検出信号の周波数
は、赤外線検出手段により検出している人体の部位の動
作速度に左右されるため、誤った命令を指示する虞れが
あった。

【０００８】本発明は、斯かる点に鑑みてなされたもの
であって、手元に置くリモコン装置を必要とせず、且つ
同一場所で機器の遠隔制御を可能とした機器の遠隔制御
装置を提供することを目的とする。

【０００９】

【課題を解決するための手段】第１の発明は、モニター
と、人体の画像を検出する撮像手段と、該撮像手段によ
り検出された人体画像を前記モニター上の画面に表示さ
せると共に、被制御機器の複数の制御項目画像を前記モ
ニター上の画面に表示させ、該表示画面において前記人
体画像が前記制御項目画像に所定量以上重複した場合
に、該重複制御項目の制御指令を前記被制御機器に出力
する制御手段と、を備えている機器の遠隔制御装置であ
る。

【００１０】第２の発明は、モニターと、人体から放射
される赤外線を画像として検出する撮像手段と、該撮像
手段からの赤外画像を皮膚温度帯域の上限、及び下限を
閾値として抽出処理を行い、人体の部位抽出を行う手段
と、該部位抽出手段により抽出された抽出部位画像を前
記モニター上の画面に表示させると共に、被制御機器の
複数の制御項目画像を前記モニター上の画面に表示さ
せ、該表示画面において前記抽出部位画像が前記制御項
目画像に所定量以上重複した場合に、該重複制御項目の
制御指令を前記被制御機器に出力する制御手段と、を備
えている機器の遠隔制御装置である。

【００１１】

【作用】本発明によれば、被制御機器へ制御指令を出力
する複数の制御項目が仮想的に人体と同一の空間領域に
設けられるため、手元に置くリモコン装置を必要とせ
ず、人体の動作に基づいて被制御機器を遠隔制御するこ
とができる。

【００１２】

【実施例】以下、本発明をその実施例を示す図面に基づ
いて説明する。

【００１３】図１は、本発明の一実施例を示す機器の遠
隔制御装置の概略構成図である。同図において、１は人
体２の画像を検出する撮像手段であって、人体２から放
射される赤外線を画像データとして検出する赤外カメラ
によって構成されている。３は赤外カメラ１の駆動を制
御し、その検出画像データを２値化処理した後、その赤
外画像データをＣＰＵ（マイクロコンピュータ）４に供
給する画像処理部、５は画像処理部３からの赤外画像デ
ータに基づいて、人体２の部位抽出、及びエアコン，Ｖ
ＴＲ，ＴＶ，照明，ステレオの５種類の被制御電気機器
６を遠隔制御するプログラムを格納してあるＲＯＭ、７
は赤外カメラ１、画像処理部３、ＣＰＵ４、ＲＯＭ５に
よって抽出された人体２の抽出部位画像、及び機器６の
複数の制御項目を表す仮想スイッチを画面表示するモニ
ターであって、その画面表示画像データをＣＰＵ４にフ
ィードバックしている。８は機器６へＣＰＵ４から或る
制御指令が出力された場合にその内容を音声で報知する
スピーカーである。

【００１４】ここで、ＣＰＵ４はＲＯＭ５に記憶された
プログラムに従い、画像処理部３からの赤外画像データ
に基づいて人体２の部位抽出、及び部位の種類判別を行
うと共に、人体２の抽出部位画像と、その人体２周辺部
の空間領域に仮想的に配置させた機器６の仮想スイッチ
画像とをモニター７に同時に画面表示させ、その画面表
示画像データがフィードバックされている。そして、モ
ニター７に画面表示された人体２の抽出部位の所定領域
（本実施例では手部）が仮想スイッチ領域に所定量以上
重なり合った場合に、その仮想スイッチの制御指令を機
器６に出力する構成となっている。

【００１５】人体２の部位抽出は、皮膚温度帯域の上限
値、及び下限値に対応する赤外画像データの輝度値を閾
値としてデータの抽出処理を行い、部位を抽出してい
る。尚、本実施例では皮膚温度帯域の上限値を３８℃
に、下限値を３０℃とした。図２に、この際の抽出部位
の概略図を示す。図中の点描領域は抽出部位を示してい
る。また、抽出部位の種類の判別は、各抽出部位の面積
情報、及び位置情報に基づいて行っており、例えば部位
抽出結果が図２の場合には、面積の一番大きい抽出部位
領域Ａを頭部と、その他の抽出部位領域Ｂ，Ｃを手部と
判別し、手部の位置関係から領域Ｂは右手、領域Ｃは左
手と判別している。

【００１６】次に、本発明の機器の遠隔制御装置の動作
について図３のフローチャートを参照して説明する。

【００１７】先ず、機器６の仮想スイッチの内容を初期
設定する（Ｓ１０１）。具体的には、仮想スイッチ内容
を上記した５種類の機器６を選択する指令内容（以下、
機器選択指令と略記する）に設定する。

【００１８】次に、人体２の赤外画像データを赤外カメ
ラ１で検出し、その検出データを画像処理部３にて２値
化処理した赤外画像データを読み出す（Ｓ１０３）。

【００１９】そして、その赤外画像データを皮膚の温度
帯域に相当する輝度値の範囲で閾値処理を行い（Ｓ１０
５）、皮膚温度帯域の検出データについて領域毎にナン
バーを割り振る（以下、ラベリングと略記する）（Ｓ１
０７）。尚、本実施例では皮膚温度帯域を３０〜３８℃
に設定したが、環境、衣服などの条件により最適値を決
定するようにしてもよい。

【００２０】次に、ラベリングされた領域を面積の大き
い順からソートし、順に再度ラベルナンバーを割り振る
（Ｓ１０９）。そして、次のステップＳ１１１では、ラ
ベルの面積情報、位置情報に基づいて人体２の頭部、右
手、及び左手領域を判別する。具体的には、面積の一番
大きいラベル１を頭部と判断し、ラベル２、及び３うち
右側にある方を右手、他方を左手と仮定し、所定時間の
追跡処理後、右手、及び左手を判断する。

【００２１】次に、人体２の頭部領域が画面の略中心部
となるように抽出部位画像をモニター７に画面表示させ
ると共に、その頭部領域の近傍の空間領域に機器６の仮
想スイッチを画面表示させる（Ｓ１１３）。具体的に
は、仮想スイッチ内容が機器選択指令の場合には、図４
に示す画面がモニター７に表示される。また、仮想スイ
ッチ内容が選択した機器６の操作を制御する指令内容の
場合、選択機器の各種動作の制御指令に相当する領域と
選択機器の操作を終了させる制御指令に相当するＯＦＦ
領域とがモニター７に画面表示される。例えばＶＴＲ操
作時には、図５に示す画面がモニター７に表示される。
ここで、図中の点描領域は人体２の抽出部位領域を示
し、四角形領域が仮想スイッチ領域を示している。

【００２２】そして、そのモニター７に画面表示された
人体２の手部領域が、機器６の仮想スイッチ領域に重な
っている重複領域を抽出し（Ｓ１１５）、その重複領域
の面積が規定値以上かどうか判断する（Ｓ１１７）。
尚、本実施例では手部領域の最大射影面積の５０％を規
定値としている。

【００２３】具体的には、先ずモニター７の画面表示画
像データを仮想スイッチ画像データと人体２の抽出部位
画像データに分け、仮想スイッチ領域、及び人体２の手
部領域に夫々１を割り当て、その他の領域に０を割り当
てる。次に、仮想スイッチ画像データと人体２の抽出部
位画像データのＡＮＤ出力を求め、そのＡＮＤ出力が１
となる領域、つまり手部領域と仮想スイッチ領域の重複
領域を抽出する。そして、その抽出領域の面積を求め、
その面積が手部領域の最大射影面積の５０％以上かどう
か判断している。

【００２４】スッテプＳ１１７において、ＮＯの場合に
はステップＳ１０３に戻り、ＹＥＳの場合には手部領域
が重複している仮想スイッチ領域の制御指令を機器６に
出力すると共に、スピーカー８からその指令内容を音声
で報知し（Ｓ１１９）、次のステップＳ１２１に進む。

【００２５】ステップＳ１２１では、ステップＳ１１９
で選択された仮想スイッチ領域の制御指令がＯＦＦ指令
かどうか判断し、ＮＯの場合には次のステップＳ１２３
に進み、ＹＥＳの場合には仮想スイッチ内容を機器選択
指令に設定した（Ｓ１２５）後、ステップＳ１０３に戻
る。

【００２６】次のステップＳ１２３では、仮想スイッチ
内容が機器選択指令であるかどうか判断し、ＮＯの場合
にはステップＳ１０３に戻り、ＹＥＳの場合には次のス
テップＳ１２７に進む。

【００２７】ステップＳ１２７では、ステップＳ１１９
で選択された機器６の操作を制御する指令内容を仮想ス
イッチ内容に設定した後、ステップＳ１０３に戻る。

【００２８】以上のルーチンを繰り返すことにより、手
元にリモコン装置を必要とせず、且つ人体２周辺部の空
間領域に仮想スイッチ、つまり、仮想的な制御項目領域
を設け、同一場所で複数の機器６の遠隔制御が行うこと
ができる。

【００２９】従って、例えばＶＴＲを遠隔制御する場合
には、先ずモニター７に画面表示された画像を見なが
ら、図４に示すように人体２の手部を仮想スイッチ領域
のＶＴＲ領域に移動させる。これにより、ＣＰＵ４から
機器６にＶＴＲ選択指令が出力される。そして、モニタ
ー７に画面表示される仮想スイッチ内容が、図５に示す
ようにＶＴＲの操作を制御する指令に変更され、そのモ
ニター７に画面表示された画像を見ながら人体２の手部
を動かして、所望の操作指令を選択する。つまり、ＶＴ
Ｒの再生の場合には、図５に示すように人体２の手部を
仮想スイッチ領域のＰＬＡＹ領域に移動させ、再生の制
御指令をＣＰＵ４からＶＴＲに出力する。また、ＶＴＲ
の早送りの場合にはＣＵＥ領域に、一時停止の場合には
ＰＡＵＳＥ領域に、停止の場合にはＳＴＯＰ領域に、巻
戻しの場合にはＲＥＶ領域に、ＶＴＲ操作を終了させる
場合にはＯＦＦ領域に人体２の手部を移動させ、選択し
た所望の操作指令をＣＰＵ４からＶＴＲに出力する。

【００３０】更に、ＶＴＲ以外の機器６を遠隔制御する
場合も同様にして、モニター７に画面表示される仮想ス
イッチ内容が図４に示す機器選択指令において、そのモ
ニター７に画面表示された画像を見ながら人体２の手部
を移動させて所望の機器６指令を選択する。つまり、エ
アコンを遠隔制御する場合にはエアコン領域に、ＴＶを
遠隔制御する場合にはＴＶ領域に、照明を遠隔制御する
場合には照明領域に、ステレオを遠隔制御する場合には
ステレオ領域に人体２の手部を移動させることにより、
ＣＰＵ４から機器６に選択した所望の機器選択指令が出
力され、モニター７に画面表示される仮想スイッチ内容
が選択機器の各種操作を制御する指令に変更される。そ
して、ＶＴＲ操作時と同様に、そのモニター７に画面表
示された画像を見ながら人体２の手部を動かして、選択
した所望の操作指令をＣＰＵ４から選択機器に出力す
る。

【００３１】尚、上記実施例では人体の画像を検出する
撮像手段として、赤外カメラ１を用いる場合について説
明したが、赤外カメラに限らずこの他の撮像手段、例え
ばカラーカメラを用いても構わない。但し、この場合に
は画像データを皮膚の色（肌色）かどうかによってデー
タの抽出処理を行い、人体の部位抽出を行う必要があ
る。

【００３２】

【発明の効果】以上述べた通り本発明によれば、被制御
機器に制御指令を出力する複数の制御項目が仮想的に人
体と同一の空間領域に設けられるため、手元に置くリモ
コン装置を必要とせず、リモコン装置を紛失することが
ない。

【００３３】また、モニターの表示画面を見ながら人体
を動かして被制御機器を遠隔制御するので、被制御機器
への誤命令出力が低減されると共に、同一場所で複数の
機器の遠隔制御が可能となる。

【００３４】更に、第２の発明によれば、人体から放射
される赤外画像に基づいて、人体の部位抽出を行い、そ
の抽出部位の動作に基づいて被制御機器へ制御指令を出
力するので、装置の精度を一層向上させることができ
る。

【図面の簡単な説明】

【図１】本発明の一実施例を示す機器の遠隔制御装置の
概略構成図である。

【図２】本発明により人体の部位抽出を行った場合にお
ける抽出部位の概略図である。

【図３】本発明の機器の遠隔制御装置の動作を説明する
ためのフローチャートである。

【図４】仮想スイッチが機器選択指令の場合におけるモ
ニター７の表示画面を示す図である。

【図５】仮想スイッチが選択機器の操作を制御する制御
指令の場合におけるモニター７の表示画面を示す図であ
る。

【符号の説明】

１赤外カメラ（撮像手段）２人体３画像処理部４ＣＰＵ５ＲＯＭ６機器７モニター８スピーカー

Claims

【特許請求の範囲】

【請求項１】モニターと、人体の画像を検出する撮像手段と、該撮像手段により検出された人体画像を前記モニター上
の画面に表示させると共に、被制御機器の複数の制御項
目画像を前記モニター上の画面に表示させ、該表示画面
において前記人体画像が前記制御項目画像に所定量以上
重複した場合に、該重複制御項目の制御指令を前記被制
御機器に出力する制御手段とを備えていることを特徴と
する機器の遠隔制御装置。
【請求項２】前記人体画像から人体の部位抽出を行う手
段を備え、前記制御手段は、前記部位抽出手段により抽出された抽
出部位画像を前記モニター上の画面に表示させると共
に、被制御機器の複数の制御項目画像を前記モニター上
の画面に表示させ、該表示画面において前記抽出部位画
像が前記制御項目画像に所定量以上重複した場合に、該
重複制御項目の制御指令を前記被制御機器に出力するこ
とを特徴とする請求項１記載の機器の遠隔制御装置。
【請求項３】モニターと、人体から放射される赤外線を画像として検出する撮像手
段と、該撮像手段からの赤外画像を皮膚温度帯域の上限、及び
下限を閾値として抽出処理を行い、人体の部位抽出を行
う手段と、該部位抽出手段により抽出された抽出部位画像を前記モ
ニター上の画面に表示させると共に、被制御機器の複数
の制御項目画像を前記モニター上の画面に表示させ、該
表示画面において前記抽出部位画像が前記制御項目画像
に所定量以上重複した場合に、該重複制御項目の制御指
令を前記被制御機器に出力する制御手段とを備えている
ことを特徴とする機器の遠隔制御装置。
【請求項４】前記部位抽出手段により抽出された各部位
の面積情報、及び／または位置情報に基づいて抽出部位
の種類を判別する手段を備え、前記制御手段は、抽出部位画像を前記モニター上の画面
に表示させると共に、前記判別手段により判別された頭
部画像の近傍に被制御機器の複数の制御項目画像を前記
モニター上の画面に表示させ、該表示画面において前記
判別手段により判別された手部画像が前記制御項目画像
に所定量以上重複した場合に、該重複制御項目の制御指
令を前記被制御機器に出力することを特徴とする請求項
３記載の機器の遠隔制御装置。