JPH0620305B2 - 動きベクトル検出装置 - Google Patents
動きベクトル検出装置Info
- Publication number
- JPH0620305B2 JPH0620305B2 JP60042368A JP4236885A JPH0620305B2 JP H0620305 B2 JPH0620305 B2 JP H0620305B2 JP 60042368 A JP60042368 A JP 60042368A JP 4236885 A JP4236885 A JP 4236885A JP H0620305 B2 JPH0620305 B2 JP H0620305B2
- Authority
- JP
- Japan
- Prior art keywords
- correlation
- value
- motion vector
- correlation value
- determined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
【発明の詳細な説明】 〔発明の技術分野〕 この発明は、画面内の画像全体の平行移動量（動きベク
トル）を検出する動きベクトル検出装置に関する。
トル）を検出する動きベクトル検出装置に関する。
一般に、テレビジョン画面のような画面内における画像
の動きは、画像中の物体の移動によるものと、カメラの
平行移動（パン）によるものとに大別される。前者は画
像の局部的な動きであるのに対し、後者は画像全体が相
互関係をほぼ維持したまま動くく。後者の画像全体の平
行移動量（方向および大きさ）を動きベクトルと称す
る。即ち、第８図において画面上の画像が（ａ）〜
（ｂ）〜（ｃ）の如く矢印の方向に平行移動したとき、
動きベクトルは第９図に示されるように横方向および縦
方向の偏移（ξ，η）で与えられる。この動きベクトル
を検出し、これを用いて例えば現フレームの画像に前フ
レームを画像をシフトして重ね合せれば、重ね合せて得
られた画像と前フレームの画像との間の実際の動きを小
さくすることができ、ボケの少ない、より高品質の画像
が得られる。また、画像信号を符号化して伝送する場
合、動きベクトルを用いて重ね合せられた画像の動きが
小さくなることは、連続した２フレーム間の画像の時間
相関性を利用して予測符号化を行なう際の予測誤差が小
さくなるということであり、それによって符号化効率の
向上に寄与することができる。
の動きは、画像中の物体の移動によるものと、カメラの
平行移動（パン）によるものとに大別される。前者は画
像の局部的な動きであるのに対し、後者は画像全体が相
互関係をほぼ維持したまま動くく。後者の画像全体の平
行移動量（方向および大きさ）を動きベクトルと称す
る。即ち、第８図において画面上の画像が（ａ）〜
（ｂ）〜（ｃ）の如く矢印の方向に平行移動したとき、
動きベクトルは第９図に示されるように横方向および縦
方向の偏移（ξ，η）で与えられる。この動きベクトル
を検出し、これを用いて例えば現フレームの画像に前フ
レームを画像をシフトして重ね合せれば、重ね合せて得
られた画像と前フレームの画像との間の実際の動きを小
さくすることができ、ボケの少ない、より高品質の画像
が得られる。また、画像信号を符号化して伝送する場
合、動きベクトルを用いて重ね合せられた画像の動きが
小さくなることは、連続した２フレーム間の画像の時間
相関性を利用して予測符号化を行なう際の予測誤差が小
さくなるということであり、それによって符号化効率の
向上に寄与することができる。
ところが、実際の画像の動きは画像全体の平行移動と、
画像中の物体の動き等が混在しているため、物体の動き
による動きベクトルの誤検出が生じやすいという問題が
ある。即ち、従来の動きベクトル検出方法は具体的には
時間的に連続した２フレームの画面間の画像情報の相関
演算を行ない、それによって得られた相関値のなかで相
関性の比較的高い相関値と、その相関値を与える２点間
の偏移より動きベクトルを算出する方法がとられてい
る。この方法では、予め定められた動きベクトル検出範
囲より相関性の最も高い相関値を与える偏移を動きベク
トルとして検出するため、得られた動きベクトルの確度
を判断する手段はない。一般に、画像が静止画か、また
はそれに近いときは、動きベクトルは零として検出され
る。しかしながら、カメラの平行移動がなくとも、画像
中の物体の動きの画面に占める割合いが大きくなると、
零ではない偏移で相関性が高くなる可能性があり、この
ような偏移をも動きベクトルとすると誤検出となるわけ
である。
画像中の物体の動き等が混在しているため、物体の動き
による動きベクトルの誤検出が生じやすいという問題が
ある。即ち、従来の動きベクトル検出方法は具体的には
時間的に連続した２フレームの画面間の画像情報の相関
演算を行ない、それによって得られた相関値のなかで相
関性の比較的高い相関値と、その相関値を与える２点間
の偏移より動きベクトルを算出する方法がとられてい
る。この方法では、予め定められた動きベクトル検出範
囲より相関性の最も高い相関値を与える偏移を動きベク
トルとして検出するため、得られた動きベクトルの確度
を判断する手段はない。一般に、画像が静止画か、また
はそれに近いときは、動きベクトルは零として検出され
る。しかしながら、カメラの平行移動がなくとも、画像
中の物体の動きの画面に占める割合いが大きくなると、
零ではない偏移で相関性が高くなる可能性があり、この
ような偏移をも動きベクトルとすると誤検出となるわけ
である。
本発明の目的は、画像中の物体の動き等による動きベク
トルの誤検出を少なくすることができる動きベクトル検
出装置を提供することにある。
トルの誤検出を少なくすることができる動きベクトル検
出装置を提供することにある。
本発明は上記目的を達成するため、時間的に連続する２
フレームの画像情報から、画像全体の平行移動量を示す
動きベクトルを検出する動きベクトル検出装置におい
て、時間的に連続する２フレームの画面間の画像情報の
相関演算を行ない、第１の相関値を出力する第１の手段
と、この第１の手段により得られた複数の第１の相関値
のなかで最も相関性の高い第２の相関値とその第２の相
関値を与える２点間の偏移を得る第２の手段と、この第
２の手段により得られた第２の相関値の相関性の有効・
無効を前記複数の第１の相関値を参照して判定する第３
の手段と、この第３の手段により第２の相関値が無効と
判定されたときには動きベクトル検出出力を零とし、第
２の相関値が有効と判定されたときには第２の手段によ
り得られた偏移を動きベクトル検出出力する第４の手段
とを具備することを特徴とする。
フレームの画像情報から、画像全体の平行移動量を示す
動きベクトルを検出する動きベクトル検出装置におい
て、時間的に連続する２フレームの画面間の画像情報の
相関演算を行ない、第１の相関値を出力する第１の手段
と、この第１の手段により得られた複数の第１の相関値
のなかで最も相関性の高い第２の相関値とその第２の相
関値を与える２点間の偏移を得る第２の手段と、この第
２の手段により得られた第２の相関値の相関性の有効・
無効を前記複数の第１の相関値を参照して判定する第３
の手段と、この第３の手段により第２の相関値が無効と
判定されたときには動きベクトル検出出力を零とし、第
２の相関値が有効と判定されたときには第２の手段によ
り得られた偏移を動きベクトル検出出力する第４の手段
とを具備することを特徴とする。
本発明によれば、画面内での物体の動き等に起因する局
部的な画像の動きに対しては、第２の手段により得られ
た最も相関性の高い相関値が無効と判定され、動きベク
トル検出出力が零とされることによって、物体の動き等
による動きベクトルの誤検出を効果的に減少させること
ができる。
部的な画像の動きに対しては、第２の手段により得られ
た最も相関性の高い相関値が無効と判定され、動きベク
トル検出出力が零とされることによって、物体の動き等
による動きベクトルの誤検出を効果的に減少させること
ができる。
第１図は本発明の一実施例に係る動きベクトル検出装置
の概略構成を示すブロック図である。入力端子１より入
力される画像情報は２分岐され、一方はフレームメモリ
２に前フレームの画像情報として導かれ、他方は相関器
３に現フレームの画像情報として導かれる。入力画像情
報は例えばテレビジヨン画像情報のようなシリアルな走
査信号であり、一般的にディジタル化されているものと
する。フレームメモリ２はアドレスコントローラ４から
読出しアドレスデータ１１が与えられることによって、
前フレームの画像情報のうち入力端子１からの画像情報
の画素と同一画素の画像情報を順次相関器３へ供給す
る。こにより、相関器３では時間的に連続する２フレー
ムの画像情報間について、例えば相対応する画像情報間
の２乗誤差演算や差分絶対値演算、あるいは相互相関演
算等の公知の相関演算を行なう。
の概略構成を示すブロック図である。入力端子１より入
力される画像情報は２分岐され、一方はフレームメモリ
２に前フレームの画像情報として導かれ、他方は相関器
３に現フレームの画像情報として導かれる。入力画像情
報は例えばテレビジヨン画像情報のようなシリアルな走
査信号であり、一般的にディジタル化されているものと
する。フレームメモリ２はアドレスコントローラ４から
読出しアドレスデータ１１が与えられることによって、
前フレームの画像情報のうち入力端子１からの画像情報
の画素と同一画素の画像情報を順次相関器３へ供給す
る。こにより、相関器３では時間的に連続する２フレー
ムの画像情報間について、例えば相対応する画像情報間
の２乗誤差演算や差分絶対値演算、あるいは相互相関演
算等の公知の相関演算を行なう。
相関器３から出力される相関値は累積加算器５に入力さ
れ、アドレスコントローラ４から与えられるアドレスデ
ータ１２に従って、対応する累積加算器に加算されてゆ
く。即ち、アドレスコントローラ４からフレームメモリ
２に供給される読出しアドレスデータ１１は、入力端子
１に入力された現フレームの画像情報の画素に対して、
前フレームの画素が持つ偏移に対応しており、またアド
レスコントローラ４から累積加算器５に供給されるアド
レスデータ１２はこの読出しアドレスデータ１１に対応
しているので、累積加算器５では相関器３から新たに入
力されるある偏移に対応する相関値が、それ以前までの
同じ偏移に対応する累積加算値に加算されることにな
る。
れ、アドレスコントローラ４から与えられるアドレスデ
ータ１２に従って、対応する累積加算器に加算されてゆ
く。即ち、アドレスコントローラ４からフレームメモリ
２に供給される読出しアドレスデータ１１は、入力端子
１に入力された現フレームの画像情報の画素に対して、
前フレームの画素が持つ偏移に対応しており、またアド
レスコントローラ４から累積加算器５に供給されるアド
レスデータ１２はこの読出しアドレスデータ１１に対応
しているので、累積加算器５では相関器３から新たに入
力されるある偏移に対応する相関値が、それ以前までの
同じ偏移に対応する累積加算値に加算されることにな
る。
入力端子１に１フレーム分の画像情報が入力され、相関
演算と相関値の累積加算が終了すると、アドレスコント
ローラ４は累積加算器５へアドレスデータ１２として、
前記の各偏移に対応したアドレスデータを供給し、それ
によって累積加算器５は複数の累積加算相関値（第１の
相関値）１３を出力する。累積加算器５から出力される
相関値１３は、相関性有効・無効判定回路６と相関性探
索回路７に入力される。
演算と相関値の累積加算が終了すると、アドレスコント
ローラ４は累積加算器５へアドレスデータ１２として、
前記の各偏移に対応したアドレスデータを供給し、それ
によって累積加算器５は複数の累積加算相関値（第１の
相関値）１３を出力する。累積加算器５から出力される
相関値１３は、相関性有効・無効判定回路６と相関性探
索回路７に入力される。
相関性有効・無効判定回路６は累積加算器５からの相関
値１３のなかで最も相関性の高い相関値の有効・無効を
判定し、その判定結果１４を判定回路９へ出力する。ま
た、相関性探索回路７は相関値１３のなかから最も相関
性の高い第２の相関値１５を探索して判定回路９に出力
するとともに、アドレス保持回路８へアドレスデータ１
２のうち相関値１５に対応するアドレスデータを保持す
る指示信号１６を出力する。アドレス保持回路８はアド
レスデータ１２のうち指示信号１６によって指示された
アドレスデータを偏移に変換し、その偏移１７を判定回
路９へ出力する。
値１３のなかで最も相関性の高い相関値の有効・無効を
判定し、その判定結果１４を判定回路９へ出力する。ま
た、相関性探索回路７は相関値１３のなかから最も相関
性の高い第２の相関値１５を探索して判定回路９に出力
するとともに、アドレス保持回路８へアドレスデータ１
２のうち相関値１５に対応するアドレスデータを保持す
る指示信号１６を出力する。アドレス保持回路８はアド
レスデータ１２のうち指示信号１６によって指示された
アドレスデータを偏移に変換し、その偏移１７を判定回
路９へ出力する。
判定回路９は相関性有効・無効判定回路６からの判定結
果１４，相関性探索回路７からの相関値１５およびアド
レス保持回路８からの偏移１７という３つの入力を受
け、動きベクトルの有無を判定する。第６図は判定回路
９の具体例を示すもので、ゼロ発生器６１と選択回路６
２とにより構成されている。即ち、選択回路６２は相関
性有効・無効判定回路６からの判定結果１４を受け、判
定回路６により相関性が有効と判定されたときには、第
１図のアドレス保持回路８から供給される偏移１７を動
きベクトル検出出力１８として出力端子１０へ出力し、
また判定回路で相関性が無効と判定されたときにはゼロ
発生器６１の出力を選択して、出力端子１０への動きベ
クトル検出出力を零とする。
果１４，相関性探索回路７からの相関値１５およびアド
レス保持回路８からの偏移１７という３つの入力を受
け、動きベクトルの有無を判定する。第６図は判定回路
９の具体例を示すもので、ゼロ発生器６１と選択回路６
２とにより構成されている。即ち、選択回路６２は相関
性有効・無効判定回路６からの判定結果１４を受け、判
定回路６により相関性が有効と判定されたときには、第
１図のアドレス保持回路８から供給される偏移１７を動
きベクトル検出出力１８として出力端子１０へ出力し、
また判定回路で相関性が無効と判定されたときにはゼロ
発生器６１の出力を選択して、出力端子１０への動きベ
クトル検出出力を零とする。
次に、相関性有効・無効判定回路６の具体例を説明す
る。第２図は相関性有効・無効判定回路６の第１の具体
例であり、第１図における累積加算器５からの相関値１
３が入力され、その平均値が平均値算出回路２１で算出
される。この平均値は比較回路２２に入力され、予め設
定された設定値Ｃ１と比較される。比較回路２２は平均
値が設定値Ｃ１を下回ると、相関値１３の相関性を無効
と判定し、それ以外のとき有効と判定して判定結果１４
を出力する。この例は相関性が低いときは相関値の大き
さが平均的に小さくなることに着目したものである。こ
の例は画像の絵柄に変化が乏しく、相関値が全体的に小
さい場合、特に有効である。
る。第２図は相関性有効・無効判定回路６の第１の具体
例であり、第１図における累積加算器５からの相関値１
３が入力され、その平均値が平均値算出回路２１で算出
される。この平均値は比較回路２２に入力され、予め設
定された設定値Ｃ１と比較される。比較回路２２は平均
値が設定値Ｃ１を下回ると、相関値１３の相関性を無効
と判定し、それ以外のとき有効と判定して判定結果１４
を出力する。この例は相関性が低いときは相関値の大き
さが平均的に小さくなることに着目したものである。こ
の例は画像の絵柄に変化が乏しく、相関値が全体的に小
さい場合、特に有効である。
第３図は相関性有効・無効判定回路６の第２の具体例で
ある。平均値算出回路３１で相関値１３の平均値を算出
するまでは第２図と同様であるが、この例では算出され
たた平均値が平均値補正回路３２により例えば定数倍さ
れた後、比較回路３３の一方の入力に与えられる。比較
回路３３の他方の入力には、第１図における相関性探索
回路７からの相関性の最も高い相関値１５が与えられて
いる。ここで、第１図における相関器３での相関演算が
例えば連続する２フレームの画像情報間の差分絶対値ま
たは２乗誤差の演算のように、相関値の小さいほど相関
性が高くなるような演算によって構成される場合は、算
出された平均値が相関性の最も高い相関値１５を下回る
とき、累積加算器５からの相関値１３の相関性を無効と
判定し、それ以外のとき有効と判定して判定結果１４を
出力する。一方、相関演算が相互相関演算のように相関
値が大きいほど相関性が高くなるような演算によって構
成される場合は、逆に算出された平均値が相関性の最も
高い相関値１５を上回るとき、累積加算器５からの相関
値１３の相関性を無効と判定し、それ以外のとき有効と
判定する。即ち、この第３図の例は相関値のピークがよ
り深いものを有効と判定するため、画像の絵柄に変化は
あるが、画像内に動物体があるようなとき特に有効であ
る。
ある。平均値算出回路３１で相関値１３の平均値を算出
するまでは第２図と同様であるが、この例では算出され
たた平均値が平均値補正回路３２により例えば定数倍さ
れた後、比較回路３３の一方の入力に与えられる。比較
回路３３の他方の入力には、第１図における相関性探索
回路７からの相関性の最も高い相関値１５が与えられて
いる。ここで、第１図における相関器３での相関演算が
例えば連続する２フレームの画像情報間の差分絶対値ま
たは２乗誤差の演算のように、相関値の小さいほど相関
性が高くなるような演算によって構成される場合は、算
出された平均値が相関性の最も高い相関値１５を下回る
とき、累積加算器５からの相関値１３の相関性を無効と
判定し、それ以外のとき有効と判定して判定結果１４を
出力する。一方、相関演算が相互相関演算のように相関
値が大きいほど相関性が高くなるような演算によって構
成される場合は、逆に算出された平均値が相関性の最も
高い相関値１５を上回るとき、累積加算器５からの相関
値１３の相関性を無効と判定し、それ以外のとき有効と
判定する。即ち、この第３図の例は相関値のピークがよ
り深いものを有効と判定するため、画像の絵柄に変化は
あるが、画像内に動物体があるようなとき特に有効であ
る。
第４図は相関性有効・無効判定回路７の第３の具体例で
あり、相関値１３の最小値および最大値が最小値探索回
路４１および最大値探索回路４２で求められ、比算出回
路４３において両者の比、即ち最小値／最大値が算出さ
れる。この比は比較回路４４において所定の閾値Ｃ
２（０≦Ｃ２≦１）と比較される。ここで、相関性の低
い場合には最小値と最大値は接近しているから、その比
が閾値Ｃ２を上回るとき相関性が無効と判定され、それ
以外のとき有効と判定されて判定結果１４が出力され
る。なお、この第４図の例における最大値と最小値との
比を算出することの代りに、差を算出してもよい。
あり、相関値１３の最小値および最大値が最小値探索回
路４１および最大値探索回路４２で求められ、比算出回
路４３において両者の比、即ち最小値／最大値が算出さ
れる。この比は比較回路４４において所定の閾値Ｃ
２（０≦Ｃ２≦１）と比較される。ここで、相関性の低
い場合には最小値と最大値は接近しているから、その比
が閾値Ｃ２を上回るとき相関性が無効と判定され、それ
以外のとき有効と判定されて判定結果１４が出力され
る。なお、この第４図の例における最大値と最小値との
比を算出することの代りに、差を算出してもよい。
第５図は相関性有効・無効判定回路７の第４の具体例で
あり、以上説明した第２図〜第４図の例の複合形であ
る。即ち、平均値算出回路５１は第２図，第３図におけ
る２１，３１に、また比較回路５２，５３，５８はそれ
ぞれ第２図〜第４図における２２，３３，４４に、また
補正回路５３は第３図における３２に、また最小値探索
回路５５，最大値探索回路５６は第４図における４１，
４２にそれぞれ相当する。そして、この例では３つの比
較回路５２，５４，５８の判定結果の論理和をオア回路
５９で求め、その結果を判定出力１４として出力する構
成となっている。
あり、以上説明した第２図〜第４図の例の複合形であ
る。即ち、平均値算出回路５１は第２図，第３図におけ
る２１，３１に、また比較回路５２，５３，５８はそれ
ぞれ第２図〜第４図における２２，３３，４４に、また
補正回路５３は第３図における３２に、また最小値探索
回路５５，最大値探索回路５６は第４図における４１，
４２にそれぞれ相当する。そして、この例では３つの比
較回路５２，５４，５８の判定結果の論理和をオア回路
５９で求め、その結果を判定出力１４として出力する構
成となっている。
この第５図の例によれば、第２図〜第４図でそれぞれ説
明した３つの条件のいずれか１つでも成立すると、相関
値１３の相関性が無効と判定され、３つの条件のいずれ
も成立しないとき有効と判定されるわけである。
明した３つの条件のいずれか１つでも成立すると、相関
値１３の相関性が無効と判定され、３つの条件のいずれ
も成立しないとき有効と判定されるわけである。
次に、第７図を参照して本発明の実施例を説明する。こ
の実施例は各フレームについて複数の動きベクトル検出
領域と、該動きベクトル検出領域の少なくとも１つをそ
れぞれ含む複数の代表点抽出領域を設定し、現フレーム
における各動きベクトル検出領域の各点の画像情報と、
前記フレームにおける該動きベクトル検出領域が含まれ
る代表点抽出領域から抽出された代表点の画像情報との
相関演算を行なうようにした動きベクトル検出装置に本
発明を適用した例である。
の実施例は各フレームについて複数の動きベクトル検出
領域と、該動きベクトル検出領域の少なくとも１つをそ
れぞれ含む複数の代表点抽出領域を設定し、現フレーム
における各動きベクトル検出領域の各点の画像情報と、
前記フレームにおける該動きベクトル検出領域が含まれ
る代表点抽出領域から抽出された代表点の画像情報との
相関演算を行なうようにした動きベクトル検出装置に本
発明を適用した例である。
第７図において、入力端子１より入力される画像情報は
２分岐され、一方はラッチ回路７１に前フレームの画像
情報として導かれ、他方は相関器３に現フレームの画像
情報として導かれる。ラッチ回路７１は入力端子１に予
め定められた代表点の画像情報が入力されると、それを
代表点の画像情報の入力タイミングに合せて発生される
ラッチパルス８１によりラッチする。このラッチ回路７
１にラッチされた代表点の画像情報は、転送許可信号８
２により適当なタイミングで代表点保存メモリ７２に転
送され、その代表点について予め定められたアドレスに
保存される。
２分岐され、一方はラッチ回路７１に前フレームの画像
情報として導かれ、他方は相関器３に現フレームの画像
情報として導かれる。ラッチ回路７１は入力端子１に予
め定められた代表点の画像情報が入力されると、それを
代表点の画像情報の入力タイミングに合せて発生される
ラッチパルス８１によりラッチする。このラッチ回路７
１にラッチされた代表点の画像情報は、転送許可信号８
２により適当なタイミングで代表点保存メモリ７２に転
送され、その代表点について予め定められたアドレスに
保存される。
代表点保存メモリ７２は、第１図の実施例におけるフレ
ームメモリ２に代えて設けられたものであり、書込み／
読出しのモード切換信号８３により制御され、書込みモ
ード時にはアドレスコントローラ４から発生される書込
みアドレスデータ８４が、また読出しモード時には読出
しアドレスデータ８５がそれぞれアドレス切換回路７４
を介してアドレス入力８６として供給される。代表点保
存メモリ７２から読出される代表点の画像情報はラッチ
回路７３にラッチされ、相関器３に導かれる。相関器３
は入力端子１に入力された現フレームの画像情報と、ラ
ッチ回路７３からの前フレームの代表点の画像情報との
相関演算を行なう。ここで、ラッチ回路７３は代表点保
存メモリ７２から読出される代表点の画像情報がそれぞ
れ代表点抽出領域内の１つの画素の画像情報を代表して
おり、それが各代表点抽出領域に含まれる動きベクトル
検出領域内の各画素の画像情報との相関演算のために複
数回使用される関係で、その複数回使用される期間中、
代表点保存メモリ７２から読出された画像情報を保持す
るために設けられている。また、ラッチ回路７１は代表
点保存メモリ７２が読出しモードにあるときに現フレー
ムにおける代表点の画像情報が到来しても、それを受付
けられるようにするために設けられている。
ームメモリ２に代えて設けられたものであり、書込み／
読出しのモード切換信号８３により制御され、書込みモ
ード時にはアドレスコントローラ４から発生される書込
みアドレスデータ８４が、また読出しモード時には読出
しアドレスデータ８５がそれぞれアドレス切換回路７４
を介してアドレス入力８６として供給される。代表点保
存メモリ７２から読出される代表点の画像情報はラッチ
回路７３にラッチされ、相関器３に導かれる。相関器３
は入力端子１に入力された現フレームの画像情報と、ラ
ッチ回路７３からの前フレームの代表点の画像情報との
相関演算を行なう。ここで、ラッチ回路７３は代表点保
存メモリ７２から読出される代表点の画像情報がそれぞ
れ代表点抽出領域内の１つの画素の画像情報を代表して
おり、それが各代表点抽出領域に含まれる動きベクトル
検出領域内の各画素の画像情報との相関演算のために複
数回使用される関係で、その複数回使用される期間中、
代表点保存メモリ７２から読出された画像情報を保持す
るために設けられている。また、ラッチ回路７１は代表
点保存メモリ７２が読出しモードにあるときに現フレー
ムにおける代表点の画像情報が到来しても、それを受付
けられるようにするために設けられている。
相関器３は入力端子１に現フレームの各画素の画像情報
が入力される毎に、その画像情報とラッチ回路７３から
供給される前フレームにおける代表点抽出領域の代表点
の画像情報との相関演算を行なう。この場合、ラッチ回
路７３から相関器３に供給される画像情報は、入力端子
１に入力された画像情報の画素が属する動きベクトル検
出領域を含む代表点抽出領域の前フレームにおける代表
点の画像情報である。相関器３以降の構成および動作は
第１図の実施例と同様であるため、説明を省略する。
が入力される毎に、その画像情報とラッチ回路７３から
供給される前フレームにおける代表点抽出領域の代表点
の画像情報との相関演算を行なう。この場合、ラッチ回
路７３から相関器３に供給される画像情報は、入力端子
１に入力された画像情報の画素が属する動きベクトル検
出領域を含む代表点抽出領域の前フレームにおける代表
点の画像情報である。相関器３以降の構成および動作は
第１図の実施例と同様であるため、説明を省略する。
この第７図の実施例によれば、動きベクトル検出のため
に要する演算回数が１フレーム当り高々１フレームを構
成する画素の個数程度で済み、大幅に少なくなる利点が
ある。この程度の演算量であれば１フレームあるいは１
フィールド内での処理、即ち実時間処理が十分可能であ
り、またハードウェア、特に記憶手段として必要なもの
は１フレームの画素数より大幅に少なく、しかも１フレ
ーム分についての代表点の画像情報を保存するメモリ
と、相関値の累積加算用メモリのみであり、装置を実現
する上で大きなメリットとなる。
に要する演算回数が１フレーム当り高々１フレームを構
成する画素の個数程度で済み、大幅に少なくなる利点が
ある。この程度の演算量であれば１フレームあるいは１
フィールド内での処理、即ち実時間処理が十分可能であ
り、またハードウェア、特に記憶手段として必要なもの
は１フレームの画素数より大幅に少なく、しかも１フレ
ーム分についての代表点の画像情報を保存するメモリ
と、相関値の累積加算用メモリのみであり、装置を実現
する上で大きなメリットとなる。
なお、本発明は上記実施例に限定されるものではなく、
その要旨を逸脱しない範囲で種々変形実施することが可
能である。
その要旨を逸脱しない範囲で種々変形実施することが可
能である。
第１図は本発明の一実施例に係る動きベクトル検出装置
の構成を示すブロック図、第２図〜第５図は本発明に係
る動きベクトル検出装置における相関性有効・無効判定
回路の種々の具体例を示すブロック図、第６図は動きベ
クトル検出出力を得るための判定回路の具体例を示すブ
ロック図、第７図は本発明の他の実施例に係る動きベク
トル検出装置の構成を示すブロック図、第８図および第
９図は動きベクトルの概念を説明するための図である。 １……画像情報入力端子、２……フレームメモリ、３…
…相関器、４……アドレスコントローラ、５……累積加
算器、６……相関性有効・無効判定回路、７……相関性
探索回路、８……アドレス保持回路、９……判定回路、
１０……動きベクトル出力端子、２１，３１，５１……
平均値算出回路、２２，３３，４４，５２，５４，５８
……比較回路、３２，５３……補正回路、４１，５５…
…最小値探索回路、４２，５６……最大値探索回路、４
３，５７……比算出回路、５９……オア回路、６１……
ゼロ発生器、６２……選択回路、７１，７３……ラッチ
回路、７２……代表点保存メモリ、７４……アドレス切
換回路。
の構成を示すブロック図、第２図〜第５図は本発明に係
る動きベクトル検出装置における相関性有効・無効判定
回路の種々の具体例を示すブロック図、第６図は動きベ
クトル検出出力を得るための判定回路の具体例を示すブ
ロック図、第７図は本発明の他の実施例に係る動きベク
トル検出装置の構成を示すブロック図、第８図および第
９図は動きベクトルの概念を説明するための図である。 １……画像情報入力端子、２……フレームメモリ、３…
…相関器、４……アドレスコントローラ、５……累積加
算器、６……相関性有効・無効判定回路、７……相関性
探索回路、８……アドレス保持回路、９……判定回路、
１０……動きベクトル出力端子、２１，３１，５１……
平均値算出回路、２２，３３，４４，５２，５４，５８
……比較回路、３２，５３……補正回路、４１，５５…
…最小値探索回路、４２，５６……最大値探索回路、４
３，５７……比算出回路、５９……オア回路、６１……
ゼロ発生器、６２……選択回路、７１，７３……ラッチ
回路、７２……代表点保存メモリ、７４……アドレス切
換回路。
フロントページの続き (72)発明者 二宮 佑一 東京都世田谷区砧１丁目10番11号 日本放 送協会放送技術研究所内 (72)発明者 大塚 吉道 東京都世田谷区砧１丁目10番11号 日本放 送協会放送技術研究所内 (72)発明者 和泉 吉則 東京都世田谷区砧１丁目10番11号 日本放 送協会放送技術研究所内 (72)発明者 合志 清一 東京都世田谷区砧１丁目10番11号 日本放 送協会放送技術研究所内 (56)参考文献 特開 昭60−28392（ＪＰ，Ａ) 特開 昭58−107785（ＪＰ，Ａ) 特開 昭58−15990（ＪＰ，Ａ) 特開 昭61−113377（ＪＰ，Ａ)
Claims (5)
- 【請求項１】時間的に連続する２フレームの画像情報か
ら、画像全体の平行移動量を示す動きベクトルを検出す
る動きベクトル検出装置において、 時間的に連続する２フレームの画面間の画像情報の相関
演算を行ない、第１の相関値を出力する第１の手段と、 この第１の手段により得られた複数の第１の相関値のな
かでも最も相関性の高い第２の相関値とその第２の相関
値を与える２点間の偏移を得る第２の手段と、 この第２の手段により得られた第２の相関値の相関性の
有効・無効を前記複数の第１の相関値を参照して判定す
る第３の手段と、 この第３の手段により第２の相関値が無効と判定された
ときには動きベクトル検出出力を零とし、第２の相関値
が有効と判定されたときには第２の手段により得られた
偏移を動きベクトル検出出力とする第４の手段とを具備
することを特徴とする動きベクトル検出装置。 - 【請求項２】第３の手段は、第１の手段により得られた
複数の第１の相関値の平均値を算出し、この平均値と予
め定められた設定値とを比較して、平均値が設定値を下
回るとき第２の相関値の相関性を無効と判定し、それ以
外のとき第２の相関値の相関性を有効と判定することを
特徴とする特許請求の範囲第１項記載の動きベクトル検
出装置。 - 【請求項３】第３の手段は、第１の手段により得られた
複数の第１の相関値の平均値を算出し、この平均値に定
数を乗じて得た設定値と第２の相関値とを比較して、設
定値が第２の相関値を下回るとき（第１の相関値が小さ
いほど相関性が高い場合）、または設定値が第２の相関
値を上回るとき（第１の相関値が大きいほど相関性が高
い場合）第２の相関値を無効と判定し、それ以外のとき
第２の相関値を有効と判定することを特徴とする特許請
求の範囲第１項記載の動きベクトル検出装置。 - 【請求項４】第３の手段は、第１の手段により得られた
複数の第１の相関値の最大値に対する最小値の比を所定
の閾値と比較して、この比が閾値を上回るとき第２の相
関値を無効と判定し、それ以外のとき第２の相関値を有
効と判定することを特徴とする特許請求の範囲第１項記
載の動きベクトル検出装置。 - 【請求項５】第３の手段は、(a)複数の第１の相関値の
平均値が予め定められた設定値を下回るか、あるいは
(b)該平均値に定数を乗じて得た設定値が第２の相関値
を下回るか（第１の相関値が小さいほど相関性が高い場
合）または該設定値が第２の相関値を上回るか（第１の
相関値が大きいほど相関性が高い場合）、あるいは(c)
複数の第１の相関値の最大値に対する最小値の比が所定
の閾値を上回るか、の３つの条件の少なくとも一つが成
立したとき第２の相関値の相関性を無効と判定し、これ
ら３つの条件がいずれも成立しないとき第２の相関値の
相関性を有効と判定することを特徴とする特許請求の範
囲第１項記載の動きベクトル検出装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP60042368A JPH0620305B2 (ja) | 1985-03-04 | 1985-03-04 | 動きベクトル検出装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP60042368A JPH0620305B2 (ja) | 1985-03-04 | 1985-03-04 | 動きベクトル検出装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPS61201588A JPS61201588A (ja) | 1986-09-06 |
| JPH0620305B2 true JPH0620305B2 (ja) | 1994-03-16 |
Family
ID=12634098
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP60042368A Expired - Lifetime JPH0620305B2 (ja) | 1985-03-04 | 1985-03-04 | 動きベクトル検出装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0620305B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007000117A (ja) * | 2005-06-27 | 2007-01-11 | Yoshiro Nakamatsu | ミニ具大寿司 |
| CN113556979B (zh) | 2019-03-19 | 2025-02-11 | 奥林巴斯株式会社 | 超声波观测装置、超声波观测装置的工作方法以及超声波观测装置的工作程序 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS56102179A (en) * | 1980-01-18 | 1981-08-15 | Nec Corp | Device for encoding high-efficient forecasting of television signal |
| JPH0546155A (ja) * | 1991-08-09 | 1993-02-26 | Sharp Corp | 情報処理装置の罫線設定機構 |
-
1985
- 1985-03-04 JP JP60042368A patent/JPH0620305B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPS61201588A (ja) | 1986-09-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3149840B2 (ja) | 動きベクトル検出装置及び方法 | |
| JP3226020B2 (ja) | 動きベクトル検出装置 | |
| EP0181215B1 (en) | Apparatus for detecting motion of television images | |
| JPS61269475A (ja) | 動きベクトル検出装置 | |
| KR20030008150A (ko) | 단일 텔레비전 신호 필드들에서 병렬로 발생하는 필름 및비디오 오브젝트들의 인식 | |
| JP2003533800A (ja) | Ｍｃアップコンバージョンにおけるハローを低減する動き推定器 | |
| US5940145A (en) | Method and apparatus for motion compensated image processing using two separate motion measurement techniques | |
| JP4489033B2 (ja) | フレームレート変換装置、パン・チルト判定装置および映像装置 | |
| JPH05122586A (ja) | 画像の手振れ補正装置 | |
| US9106926B1 (en) | Using double confirmation of motion vectors to determine occluded regions in images | |
| JP4075238B2 (ja) | 動きベクトル検出方法及び記録媒体 | |
| US6650362B1 (en) | Movement detecting apparatus with feature point extractor based on luminance gradient in current frame | |
| JPH0620305B2 (ja) | 動きベクトル検出装置 | |
| JP2000201328A (ja) | 動きベクトルの検出方法および回路 | |
| JPH0728406B2 (ja) | 動きベクトル検出装置 | |
| JPH0220988A (ja) | 動画像符号化装置における動ベクトル検出方式 | |
| CN100423557C (zh) | 图像处理装置以及图像处理方法 | |
| JPH1075453A (ja) | 動きベクトル検出装置及び動きベクトル検出方法 | |
| JP3366059B2 (ja) | ビデオ信号処理装置 | |
| JPH0279584A (ja) | 画像動き検出装置 | |
| JP3271387B2 (ja) | 動き量検出装置及び動き量検出方法 | |
| JP4039273B2 (ja) | 動きベクトル検出装置 | |
| JP4241021B2 (ja) | 動きベクトル検出方法、動きベクトル検出装置、画像符号化装置 | |
| JPS62105587A (ja) | 動きベクトル検出装置 | |
| JP3033291B2 (ja) | 画素間相関適応型動き検出方式 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| EXPY | Cancellation because of completion of term |