JPH05197810A - 映像によるコマンド入力処理方法 - Google Patents
映像によるコマンド入力処理方法Info
- Publication number
- JPH05197810A JPH05197810A JP739192A JP739192A JPH05197810A JP H05197810 A JPH05197810 A JP H05197810A JP 739192 A JP739192 A JP 739192A JP 739192 A JP739192 A JP 739192A JP H05197810 A JPH05197810 A JP H05197810A
- Authority
- JP
- Japan
- Prior art keywords
- command
- motion vector
- input
- image
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Analysis (AREA)
Abstract
(57)【要約】
【目的】 本発明は、映像自体によりコマンドを入力
し、特に画像に含まれる動きベクトルを用いて簡易なコ
マンド入力手段を提供することを目的としている。 【構成】 動きベクトルを検出して動きベクトルの空間
的および時間的組み合せと予め用意しておいた動きベク
トルのパターンを現す辞書とによって、コマンドを抽出
して入力する。
し、特に画像に含まれる動きベクトルを用いて簡易なコ
マンド入力手段を提供することを目的としている。 【構成】 動きベクトルを検出して動きベクトルの空間
的および時間的組み合せと予め用意しておいた動きベク
トルのパターンを現す辞書とによって、コマンドを抽出
して入力する。
Description
【０００１】
【産業上の利用分野】本発明は、処理装置に対してコマ
ンドを入力する１つの手段を与えるものであって、特に
映像に含まれる動きベクトルによってコマンドを識別
し、当該コマンドを入力するようにした映像によるコマ
ンド入力処理方法に関する。
ンドを入力する１つの手段を与えるものであって、特に
映像に含まれる動きベクトルによってコマンドを識別
し、当該コマンドを入力するようにした映像によるコマ
ンド入力処理方法に関する。
【０００２】
【従来の技術】図７は一般的処理システムの構成を説明
する図である。入力手段１により処理装置２に対して処
理内容を示す指令（コマンド）が入力される。処理の状
況（レスポンス）は出力手段３により表示される。この
システムでは利用者は入力手段１と出力手段３とによ
り、会話的に処理を進めることが出来る。一般の処理装
置ではこの他、処理の対象となるデータ入力４、および
処理結果となるデータ出力５が別に処理装置に接続され
ることがある。
する図である。入力手段１により処理装置２に対して処
理内容を示す指令（コマンド）が入力される。処理の状
況（レスポンス）は出力手段３により表示される。この
システムでは利用者は入力手段１と出力手段３とによ
り、会話的に処理を進めることが出来る。一般の処理装
置ではこの他、処理の対象となるデータ入力４、および
処理結果となるデータ出力５が別に処理装置に接続され
ることがある。
【０００３】従来よりこの処理装置に対するコマンド入
力手段として、キーボード、マウス、タッチパネル、音
声入力等が一般に使用されている。
力手段として、キーボード、マウス、タッチパネル、音
声入力等が一般に使用されている。
【０００４】
【発明が解決しようとする課題】これらの方法を映像処
理装置のためのコマンド入力手段として使用することは
可能であるが、簡易なコマンドを入力すれば良いシステ
ムではこれらの入力手段がシステム構成上の負担にな
る。また映像処理装置に利用者の立場でアクセスする場
合には特殊な入力装置を用いることに抵抗がある。
理装置のためのコマンド入力手段として使用することは
可能であるが、簡易なコマンドを入力すれば良いシステ
ムではこれらの入力手段がシステム構成上の負担にな
る。また映像処理装置に利用者の立場でアクセスする場
合には特殊な入力装置を用いることに抵抗がある。
【０００５】すなわち、コマンドの入力手段と処理デー
タの入力手段とが別個に存在するために、インターフェ
−スが複雑化する問題があった。本発明は、映像自体に
よりコマンドを入力し、簡易インターフェ−スを実現す
ることを目的とし、特に画像に含まれる動きベクトルを
用いて簡易なコマンド入力手段を提供することを目的と
している。
タの入力手段とが別個に存在するために、インターフェ
−スが複雑化する問題があった。本発明は、映像自体に
よりコマンドを入力し、簡易インターフェ−スを実現す
ることを目的とし、特に画像に含まれる動きベクトルを
用いて簡易なコマンド入力手段を提供することを目的と
している。
【０００６】
【課題を解決するための手段】本発明では、映像に含ま
れる動きベクトルを検出し、動きベクトルの空間的およ
び時間的組み合せと予め用意しておいた動きベクトルの
パターンを現す辞書とを用いるようにしている。
れる動きベクトルを検出し、動きベクトルの空間的およ
び時間的組み合せと予め用意しておいた動きベクトルの
パターンを現す辞書とを用いるようにしている。
【０００７】
【作用】上記動きベクトルの空間的および時間的組み合
せと、動きベクトルのパターンを現す辞書とを照合し、
入力すべきコマンドを抽出し、当該コマンドを入力する
ようにする。
せと、動きベクトルのパターンを現す辞書とを照合し、
入力すべきコマンドを抽出し、当該コマンドを入力する
ようにする。
【０００８】
【実施例】図１は本発明の１実施例の説明図である。図
中の符号１０は映像入力端子、１１は動きベクトル検出
回路、１２は動きベクトル記憶メモリ、１３はコマンド
判定回路、１４はコマンド解析用の辞書、１５はコマン
ド出力端子である。
中の符号１０は映像入力端子、１１は動きベクトル検出
回路、１２は動きベクトル記憶メモリ、１３はコマンド
判定回路、１４はコマンド解析用の辞書、１５はコマン
ド出力端子である。
【０００９】映像入力端子１０より入力された映像信号
は動きベクトル検出回路１１に入力される。動きベクト
ル検出回路１１では映像を複数の画素から構成されるブ
ロックに分解し、各ブロック毎に動きベクトルを検出す
る。
は動きベクトル検出回路１１に入力される。動きベクト
ル検出回路１１では映像を複数の画素から構成されるブ
ロックに分解し、各ブロック毎に動きベクトルを検出す
る。
【００１０】動きベクトルとは入力された各映像フレー
ムにおいて、１つ前に入力された映像フレームからの画
像の移動量を現すパラメタ値である。通常画像符号化等
の分野では１６×１６画素を１ブロックとし、各ブロッ
クが直前の映像フレームのどこに最も類似しているかを
垂直方向および水平方向に対し±１５画素以内で表現し
た２次元ベクトルによって動きベクトルとしている。す
なわち動きベクトル検出回路１１からは、ブロック
（ｉ，ｊ）の動きベクトルＶ（ｉ，ｊ）が毎フレーム出
力される。
ムにおいて、１つ前に入力された映像フレームからの画
像の移動量を現すパラメタ値である。通常画像符号化等
の分野では１６×１６画素を１ブロックとし、各ブロッ
クが直前の映像フレームのどこに最も類似しているかを
垂直方向および水平方向に対し±１５画素以内で表現し
た２次元ベクトルによって動きベクトルとしている。す
なわち動きベクトル検出回路１１からは、ブロック
（ｉ，ｊ）の動きベクトルＶ（ｉ，ｊ）が毎フレーム出
力される。
【００１１】動きベクトルＶ（ｉ，ｊ）は動きベクトル
記憶メモリ１２によって数フレームの期間蓄積される。
コマンド判定回路１３は動きベクトル記憶メモリ１２か
ら読み出したベクトル値を、コマンド解析用の辞書１４
から読み出したパターンと照合することによって、登録
されているコマンドを識別する。判定されたコマンドは
コマンド出力端子１５より出力される。
記憶メモリ１２によって数フレームの期間蓄積される。
コマンド判定回路１３は動きベクトル記憶メモリ１２か
ら読み出したベクトル値を、コマンド解析用の辞書１４
から読み出したパターンと照合することによって、登録
されているコマンドを識別する。判定されたコマンドは
コマンド出力端子１５より出力される。
【００１２】コマンド判定回路の動作の詳細を図２ない
し図５を用いて説明する。図２は各ブロックの動きベク
トルをあるしきい値で量子化し＃０〜＃８の状態に分類
することを示している。領域＃０は動きベクトルが小さ
い領域すなわち動きの無い領域を示す。＃１〜＃８はそ
れぞれの方向の動きベクトルが存在している領域を示
す。
し図５を用いて説明する。図２は各ブロックの動きベク
トルをあるしきい値で量子化し＃０〜＃８の状態に分類
することを示している。領域＃０は動きベクトルが小さ
い領域すなわち動きの無い領域を示す。＃１〜＃８はそ
れぞれの方向の動きベクトルが存在している領域を示
す。
【００１３】各ブロックの動きベクトルがこのように表
現され、この結果が時間的に蓄積される。図３はこの様
子を示す。各ブロックより＃０〜＃８のベクトル値がフ
レーム毎に順次入力され、数フレームに渡ってメモリ中
に記憶される。図３の例では＃１方向のベクトルが発生
した後、＃５方向のベクトルが発生し・・・たことを示
している。
現され、この結果が時間的に蓄積される。図３はこの様
子を示す。各ブロックより＃０〜＃８のベクトル値がフ
レーム毎に順次入力され、数フレームに渡ってメモリ中
に記憶される。図３の例では＃１方向のベクトルが発生
した後、＃５方向のベクトルが発生し・・・たことを示
している。
【００１４】図４に示す（Ｃ１）〜（Ｃ４）はコマンド
解析用の辞書中に記憶さているパターンの例であり、と
くに動きベクトルの時間的順序関係に関するパターンを
示している。
解析用の辞書中に記憶さているパターンの例であり、と
くに動きベクトルの時間的順序関係に関するパターンを
示している。
【００１５】図３の結果より数フレーム中の順序関係の
みを抽出すると図４中の（Ｃ１）の結果が得られ（Ｃ
１）に相当するコマンドが検出される。（Ｃ１）〜（Ｃ
４）は動きベクトルが夫々上下、左右、左回転、右回転
している場合に相当する。
みを抽出すると図４中の（Ｃ１）の結果が得られ（Ｃ
１）に相当するコマンドが検出される。（Ｃ１）〜（Ｃ
４）は動きベクトルが夫々上下、左右、左回転、右回転
している場合に相当する。
【００１６】図５に示す（Ｄ１）〜（Ｄ８）は同じくコ
マンド解析用の辞書中に記憶されているパターンの例で
あり、とくに動きベクトルの空間的配置パターンを示し
ている。隣接または近くのブロック間で異なる動きベク
トルが検出される場合には（Ｄ１）〜（Ｄ８）に相当す
るコマンドが検出される。
マンド解析用の辞書中に記憶されているパターンの例で
あり、とくに動きベクトルの空間的配置パターンを示し
ている。隣接または近くのブロック間で異なる動きベク
トルが検出される場合には（Ｄ１）〜（Ｄ８）に相当す
るコマンドが検出される。
【００１７】以上の動きベクトルパターンの例は映像中
に存在する人物像によって発生されることを想定してい
る。例えば頭部画像の上下移動によりコマンド（Ｃ１）
を、左右運動によりコマンド（Ｃ２）を検出する。両手
を拡げたり閉じたりすることにより、コマンド（Ｄ
１），（Ｄ２）を検出する。以下同様に有効な動きベク
トルパターンと対応するコマンドを登録することによっ
て、コマンドシステムを構成出来る。
に存在する人物像によって発生されることを想定してい
る。例えば頭部画像の上下移動によりコマンド（Ｃ１）
を、左右運動によりコマンド（Ｃ２）を検出する。両手
を拡げたり閉じたりすることにより、コマンド（Ｄ
１），（Ｄ２）を検出する。以下同様に有効な動きベク
トルパターンと対応するコマンドを登録することによっ
て、コマンドシステムを構成出来る。
【００１８】上記の動作において画像中に含まれる一般
の動き（コマンドを入力するためのものでない動き）と
コマンド入力用の動きとがどの程度正しく分離され正し
くコマンドを入力できるかが性能を決定する。このた
め、動きパターンとして時間的組み合せ、空間的組み合
せ、ベクトルの大きさにより分類・量子化を適用してい
るが、さらに時間的・空間的なウィンドウを設けること
が出来る。すなわち画面中の有る領域だけコマンド検出
を行うことにより、コマンド領域以外からの影響を避け
ることができる。また、コマンド検出を行う時間帯をコ
マンド入力を必要とする期間だけに制限することも同じ
効果を持つ。量的な指示量をコマンドとして入力する場
合には、動きベクトルの大きさ、動きベクトルの発生し
たブロック間の間隔、動きベクトルの発生している継続
時間、動きベクトルの変化回数等を、上記コマンドと組
み合せて使用すれば良い。
の動き（コマンドを入力するためのものでない動き）と
コマンド入力用の動きとがどの程度正しく分離され正し
くコマンドを入力できるかが性能を決定する。このた
め、動きパターンとして時間的組み合せ、空間的組み合
せ、ベクトルの大きさにより分類・量子化を適用してい
るが、さらに時間的・空間的なウィンドウを設けること
が出来る。すなわち画面中の有る領域だけコマンド検出
を行うことにより、コマンド領域以外からの影響を避け
ることができる。また、コマンド検出を行う時間帯をコ
マンド入力を必要とする期間だけに制限することも同じ
効果を持つ。量的な指示量をコマンドとして入力する場
合には、動きベクトルの大きさ、動きベクトルの発生し
たブロック間の間隔、動きベクトルの発生している継続
時間、動きベクトルの変化回数等を、上記コマンドと組
み合せて使用すれば良い。
【００１９】本発明の利用態様を具体的に図６を用いて
説明する。１０は映像入力端子、１１は動きベクトル検
出回路、１２は動きベクトル記憶メモリ、１３はコマン
ド判定回路、１４はコマンド解析用の辞書、１５はコマ
ンド出力端子、１６は符号化回路、１７は映像記憶メモ
リ、１８は伝送装置、１９は回線接続端子である。
説明する。１０は映像入力端子、１１は動きベクトル検
出回路、１２は動きベクトル記憶メモリ、１３はコマン
ド判定回路、１４はコマンド解析用の辞書、１５はコマ
ンド出力端子、１６は符号化回路、１７は映像記憶メモ
リ、１８は伝送装置、１９は回線接続端子である。
【００２０】符号化回路１６は映像入力端子からの映像
信号を符号化し伝送装置１８に出力する。伝送装置１８
は符号化データを回線接続端子１９より出力する。符号
化回路１６では動きベクトル検出回路１１の出力を利用
して動き補償予測符号化を行う。すなわち本発明の主旨
の１つは、符号化処理部で本来有している動きベクトル
検出機能をコマンド入力手段として併用することによ
り、簡易にしてマンマシーンインターフェ−スの良いコ
マンド入力を実現することにある。コマンドによって処
理を実行せしめるその処理の指定には例えば映像記憶メ
モリ１７の利用条件を指定する。例えば（Ｄ１）コマン
ドにより映像記憶メモリ１７は入力映像の記憶を開始せ
しめる処理を実行し、（Ｄ２）コマンドによって終了す
るようにする。また（Ｃ１）コマンドにより映像記憶メ
モリ１７中のデータを送信し、（Ｃ２）コマンドにより
終了するようにする。
信号を符号化し伝送装置１８に出力する。伝送装置１８
は符号化データを回線接続端子１９より出力する。符号
化回路１６では動きベクトル検出回路１１の出力を利用
して動き補償予測符号化を行う。すなわち本発明の主旨
の１つは、符号化処理部で本来有している動きベクトル
検出機能をコマンド入力手段として併用することによ
り、簡易にしてマンマシーンインターフェ−スの良いコ
マンド入力を実現することにある。コマンドによって処
理を実行せしめるその処理の指定には例えば映像記憶メ
モリ１７の利用条件を指定する。例えば（Ｄ１）コマン
ドにより映像記憶メモリ１７は入力映像の記憶を開始せ
しめる処理を実行し、（Ｄ２）コマンドによって終了す
るようにする。また（Ｃ１）コマンドにより映像記憶メ
モリ１７中のデータを送信し、（Ｃ２）コマンドにより
終了するようにする。
【００２１】言うまでもなく本発明を復号化回路に適用
することも出来る。すなわち送信部よりコマンドを含ん
だ映像を送信し、受信部では復号化した動きベクトルを
用いてコマンド検出を行う。
することも出来る。すなわち送信部よりコマンドを含ん
だ映像を送信し、受信部では復号化した動きベクトルを
用いてコマンド検出を行う。
【００２２】
【発明の効果】以上説明したように、本発明によれば入
力映像を用いてコマンド入力が出来るので、映像処理装
置の簡易な入力手段として利用することができる。また
特殊な入力手段を必要としないので良好なマンマシーン
インターフェ−スを実現することが出来る。
力映像を用いてコマンド入力が出来るので、映像処理装
置の簡易な入力手段として利用することができる。また
特殊な入力手段を必要としないので良好なマンマシーン
インターフェ−スを実現することが出来る。
【図１】本発明の１実施例の説明図である。
【図２】コマンド判定回路の動作説明図である。
【図３】コマンド判定回路の動作説明図である。
【図４】コマンド判定回路の動作説明図である。
【図５】コマンド判定回路の動作説明図である。
【図６】本発明の利用態様を説明する図である。
【図７】一般的処理システムの説明図である。
１０ 映像入力端子 １１ 動きベクトル検出回路 １２ 動きベクトル記憶メモリ １３ コマンド判定回路 １４ コマンド解析用の辞書 １５ コマンド出力端子
Claims (1)
- 【請求項１】 映像に含まれる動きベクトルを検出し、
当該動きベクトルに対応するコマンドをデータ処理装置
に入力するコマンド入力処理方法において、 上記動きベクトルの空間的および時間的組み合せと予め
用意しておいた動きベクトルのパターンを現す辞書とに
よって、入力映像に含まれる動きベクトルに対応するコ
マンドを識別するようにしたことを特徴とする映像によ
るコマンド入力処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP739192A JPH05197810A (ja) | 1992-01-20 | 1992-01-20 | 映像によるコマンド入力処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP739192A JPH05197810A (ja) | 1992-01-20 | 1992-01-20 | 映像によるコマンド入力処理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH05197810A true JPH05197810A (ja) | 1993-08-06 |
Family
ID=11664623
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP739192A Pending JPH05197810A (ja) | 1992-01-20 | 1992-01-20 | 映像によるコマンド入力処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH05197810A (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07219703A (ja) * | 1994-02-03 | 1995-08-18 | Canon Inc | ジェスチャー入力方法及びその装置 |
| US6674424B1 (en) | 1999-10-29 | 2004-01-06 | Ricoh Company, Ltd. | Method and apparatus for inputting information including coordinate data |
| JP2005018654A (ja) * | 2003-06-27 | 2005-01-20 | Nissan Motor Co Ltd | 脇見状態検出装置 |
| JP2005018655A (ja) * | 2003-06-27 | 2005-01-20 | Nissan Motor Co Ltd | 運転者行動推定装置 |
| JP2006146479A (ja) * | 2004-11-18 | 2006-06-08 | Yasuhiro Fukui | 入力装置 |
| USRE42794E1 (en) | 1999-12-27 | 2011-10-04 | Smart Technologies Ulc | Information-inputting device inputting contact point of object on recording surfaces as information |
| US8692768B2 (en) | 2009-07-10 | 2014-04-08 | Smart Technologies Ulc | Interactive input system |
| US8902193B2 (en) | 2008-05-09 | 2014-12-02 | Smart Technologies Ulc | Interactive input system and bezel therefor |
| US9442607B2 (en) | 2006-12-04 | 2016-09-13 | Smart Technologies Inc. | Interactive input system and method |
-
1992
- 1992-01-20 JP JP739192A patent/JPH05197810A/ja active Pending
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07219703A (ja) * | 1994-02-03 | 1995-08-18 | Canon Inc | ジェスチャー入力方法及びその装置 |
| US6674424B1 (en) | 1999-10-29 | 2004-01-06 | Ricoh Company, Ltd. | Method and apparatus for inputting information including coordinate data |
| US7342574B1 (en) | 1999-10-29 | 2008-03-11 | Ricoh Company, Ltd. | Method and apparatus for inputting information including coordinate data |
| USRE43084E1 (en) | 1999-10-29 | 2012-01-10 | Smart Technologies Ulc | Method and apparatus for inputting information including coordinate data |
| USRE42794E1 (en) | 1999-12-27 | 2011-10-04 | Smart Technologies Ulc | Information-inputting device inputting contact point of object on recording surfaces as information |
| JP2005018654A (ja) * | 2003-06-27 | 2005-01-20 | Nissan Motor Co Ltd | 脇見状態検出装置 |
| JP2005018655A (ja) * | 2003-06-27 | 2005-01-20 | Nissan Motor Co Ltd | 運転者行動推定装置 |
| JP2006146479A (ja) * | 2004-11-18 | 2006-06-08 | Yasuhiro Fukui | 入力装置 |
| US9442607B2 (en) | 2006-12-04 | 2016-09-13 | Smart Technologies Inc. | Interactive input system and method |
| US8902193B2 (en) | 2008-05-09 | 2014-12-02 | Smart Technologies Ulc | Interactive input system and bezel therefor |
| US8692768B2 (en) | 2009-07-10 | 2014-04-08 | Smart Technologies Ulc | Interactive input system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101942808B1 (ko) | 객체 이미지 인식 dcnn 기반 cctv 영상분석장치 | |
| CN112954398B (zh) | 编码方法、解码方法、装置、存储介质及电子设备 | |
| JP2809659B2 (ja) | ビデオ画像処理 | |
| US6025879A (en) | System for moving object detection in moving picture | |
| KR20020021789A (ko) | 모델을 이용하여 영상에서 오브젝트의 위치를 정하는시스템 및 방법 | |
| JP2010136032A (ja) | 映像監視システム | |
| KR970078412A (ko) | 영상 신호 처리 장치 및 처리 방법 | |
| JP2001218210A (ja) | ノイズ検出方法、ノイズ検出装置、画像データ処理装置、記録媒体 | |
| CN106060486A (zh) | 一种基于DirectShow技术的智能视频监控系统 | |
| EP4195166A1 (en) | Apparatus and method for transmitting images and apparatus and method for receiving images | |
| JPH05197810A (ja) | 映像によるコマンド入力処理方法 | |
| US20230209066A1 (en) | Screen content encoding mode evaluation optimizations | |
| EP1787262B1 (en) | Video pre-processing before encoding and corresponding post-processing after decoding | |
| CN116233479A (zh) | 基于数据处理的直播信息内容审核系统及方法 | |
| JP3052893B2 (ja) | 動画像符号化装置 | |
| CN113706573B (zh) | 一种运动物体的检测方法、装置及存储介质 | |
| KR20030049804A (ko) | 카메라 움직임 판별 장치 및 방법 | |
| US20080181462A1 (en) | Apparatus for Monitor, Storage and Back Editing, Retrieving of Digitally Stored Surveillance Images | |
| JPH0869597A (ja) | 動きベクトル検出手段を用いた監視装置 | |
| US8126055B2 (en) | Telop detecting method, telop detecting program, and telop detecting device | |
| JPH07236153A (ja) | 動画像のカット点検出およびカット画面グループ検出装置 | |
| CN105451023A (zh) | 一种运动感知的视频存储系统和方法 | |
| CN101072343A (zh) | 图像处理装置、方法及集成电路 | |
| CN109862207B (zh) | 一种基于压缩域的kvm视频内容变化检测方法 | |
| CN119229438A (zh) | 目标检测方法、装置、电子设备和可读存储介质 |