JPH07203409A - 動画像の再現装置及び符号化・復号システム - Google Patents
動画像の再現装置及び符号化・復号システムInfo
- Publication number
- JPH07203409A JPH07203409A JP33399193A JP33399193A JPH07203409A JP H07203409 A JPH07203409 A JP H07203409A JP 33399193 A JP33399193 A JP 33399193A JP 33399193 A JP33399193 A JP 33399193A JP H07203409 A JPH07203409 A JP H07203409A
- Authority
- JP
- Japan
- Prior art keywords
- image
- sequence
- motion
- moving image
- circuit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
(57)【要約】
【目的】 第１に、簡単な動きパラメータのみで、動画
像を再現する方式を提供し、第２に、それを用いて、既
存のフレーム間予測符号化方式と互換性のある動画像の
再現方式を提供し、第３に、それらとは別に、ごく少量
の情報量で動画像の伝送・記録を可能とする動画像の符
号化・復号システムを提供することにある。 【構成】 動き情報１０１から、主要な動きパラメータ
１０２を抽出する動きパラメータ抽出回路１１と、動き
パラメータから再現動画像１０５を生成する動画像生成
回路１２と、予め種々の動き画像を保持している画像シ
ーケンス記憶回路１３から構成されている。
像を再現する方式を提供し、第２に、それを用いて、既
存のフレーム間予測符号化方式と互換性のある動画像の
再現方式を提供し、第３に、それらとは別に、ごく少量
の情報量で動画像の伝送・記録を可能とする動画像の符
号化・復号システムを提供することにある。 【構成】 動き情報１０１から、主要な動きパラメータ
１０２を抽出する動きパラメータ抽出回路１１と、動き
パラメータから再現動画像１０５を生成する動画像生成
回路１２と、予め種々の動き画像を保持している画像シ
ーケンス記憶回路１３から構成されている。
Description
【０００１】
【産業上の利用分野】本発明は動画像の再現装置および
動画像の符号化・復号システムに関するものである。
動画像の符号化・復号システムに関するものである。
【０００２】
【従来の技術】従来の動画像符号化装置は、画像信号の
波形を数学的に近似する波形符号化方式が主であった。
例えば、ＩＴＵ−Ｔで国際標準化されたＨ．２６１動画
像符号化装置では、フレーム間差分を求めた後、線形後
変換符号化している。
波形を数学的に近似する波形符号化方式が主であった。
例えば、ＩＴＵ−Ｔで国際標準化されたＨ．２６１動画
像符号化装置では、フレーム間差分を求めた後、線形後
変換符号化している。
【０００３】このような波形符号化装置とは異なり、画
像信号固有の特徴量を用いて、近似的な動画を再現する
方法が考案されている。例えば、特願平５−１２８５６
７号記載の「動画像の符号復号化方法および装置」が、
その例である。この装置では、符号化に際し、入力画像
に固有の特徴量を検出し、それを過去に符号化した画像
の特徴量の記録と比較して類似したものがあれば、どれ
と類似しているかという制御情報のみを実際の画像の代
わりに符号化することにより、高能率符号化を実現して
いた。復号に際しては、制御情報が送られて来た場合に
は、それに基づいて、記憶された過去の画像を選択して
復号画像として出力すれば良い。
像信号固有の特徴量を用いて、近似的な動画を再現する
方法が考案されている。例えば、特願平５−１２８５６
７号記載の「動画像の符号復号化方法および装置」が、
その例である。この装置では、符号化に際し、入力画像
に固有の特徴量を検出し、それを過去に符号化した画像
の特徴量の記録と比較して類似したものがあれば、どれ
と類似しているかという制御情報のみを実際の画像の代
わりに符号化することにより、高能率符号化を実現して
いた。復号に際しては、制御情報が送られて来た場合に
は、それに基づいて、記憶された過去の画像を選択して
復号画像として出力すれば良い。
【０００４】
【発明が解決しようとする課題】しかし、この特願平５
−１２８５６７号記載の「動画像の符号復号化方法およ
び装置」では、入力画像を解析し、その特徴を表すパラ
メータを抽出して、符号化側の持つ過去のパラメータ情
報と比較するため、過去に符号化した全ての画像のパラ
メータを符号化側で保持する必要があるだけでなく、最
も適合するパラメータを捜し出す処理が繁雑である。ま
た、この方法は現在広く使われているフレーム間予測差
分符号化装置との互換性がないなどの問題点がある。
−１２８５６７号記載の「動画像の符号復号化方法およ
び装置」では、入力画像を解析し、その特徴を表すパラ
メータを抽出して、符号化側の持つ過去のパラメータ情
報と比較するため、過去に符号化した全ての画像のパラ
メータを符号化側で保持する必要があるだけでなく、最
も適合するパラメータを捜し出す処理が繁雑である。ま
た、この方法は現在広く使われているフレーム間予測差
分符号化装置との互換性がないなどの問題点がある。
【０００５】本発明の目的は、第１に、簡単な動きパラ
メータのみで、動画像を再現する装置を提供し、第２
に、それを用いて、既存のフレーム間予測符号化装置と
互換性のある動画像の再現装置を提供し、第３に、それ
らとは別に、ごく少量の情報量で動画像の伝送・記録を
可能とする動画像の符号化・復号システムを提供するこ
とにある。
メータのみで、動画像を再現する装置を提供し、第２
に、それを用いて、既存のフレーム間予測符号化装置と
互換性のある動画像の再現装置を提供し、第３に、それ
らとは別に、ごく少量の情報量で動画像の伝送・記録を
可能とする動画像の符号化・復号システムを提供するこ
とにある。
【０００６】
【課題を解決するための手段】第１の発明は、動画像の
動き情報のみを用いて動画を再現する装置において、動
画像の動き情報から主要な動きパラメータを抽出するパ
ラメータ抽出手段と、、前記動きパラメータに対応する
画像シーケンスを記憶する画像シーケンス記憶手段と、
抽出された動きパラメータに従って前記画像シーケンス
記憶手段より画像シーケンスを出力させて再現動画像を
生成する生成手段とを備えることを特徴とする。
動き情報のみを用いて動画を再現する装置において、動
画像の動き情報から主要な動きパラメータを抽出するパ
ラメータ抽出手段と、、前記動きパラメータに対応する
画像シーケンスを記憶する画像シーケンス記憶手段と、
抽出された動きパラメータに従って前記画像シーケンス
記憶手段より画像シーケンスを出力させて再現動画像を
生成する生成手段とを備えることを特徴とする。
【０００７】第２の発明は、第１の発明において、動画
像を表現するデータ列で、動き情報を含むものを入力と
して、そのデータ列の中から動き情報のみを取り出し、
その他の情報を捨てる手段を備え、その動き情報を用い
て動画を再現することを特徴とする。
像を表現するデータ列で、動き情報を含むものを入力と
して、そのデータ列の中から動き情報のみを取り出し、
その他の情報を捨てる手段を備え、その動き情報を用い
て動画を再現することを特徴とする。
【０００８】第３の発明は、符号化器と復号器とを備え
た動画像の符号化・復号システムにおいて、前記符号化
器は、画像などの被写体情報を入力とし、画像などの前
記被写体情報から動きパラメータを抽出するパラメータ
抽出手段を備え、前記復号器は、その動きパラメータに
対応する画像シーケンスを記憶する画像シーケンス記憶
手段と、前記符号化器から送られた動きパラメータに従
って該画像シーケンス記憶手段より画像シーケンスを出
力させて再現動画像を生成する生成手段とを備えること
を特徴とする。
た動画像の符号化・復号システムにおいて、前記符号化
器は、画像などの被写体情報を入力とし、画像などの前
記被写体情報から動きパラメータを抽出するパラメータ
抽出手段を備え、前記復号器は、その動きパラメータに
対応する画像シーケンスを記憶する画像シーケンス記憶
手段と、前記符号化器から送られた動きパラメータに従
って該画像シーケンス記憶手段より画像シーケンスを出
力させて再現動画像を生成する生成手段とを備えること
を特徴とする。
【０００９】第４の発明は、第３の発明において、前記
復号器は、前記画像シーケンス記憶手段で記憶すべきシ
ーケンスを前記符号化器へ要求する要求手段と、符号化
された信号を復号し、前記画像シーケンス記憶手段に記
憶させる手段を備え、前記符号化器は、前記要求を受
け、画像信号から前記符号化された信号を出力する符号
化手段を備えることを特徴とする。
復号器は、前記画像シーケンス記憶手段で記憶すべきシ
ーケンスを前記符号化器へ要求する要求手段と、符号化
された信号を復号し、前記画像シーケンス記憶手段に記
憶させる手段を備え、前記符号化器は、前記要求を受
け、画像信号から前記符号化された信号を出力する符号
化手段を備えることを特徴とする。
【００１０】
【実施例】図１は、第１の発明の動画像の再現装置の一
実施例を示すブロック図である。この動画像の再現回路
１４は、入力として与えられる動き情報１０１から、再
現動画像１０５を再現するものであり、動き情報から主
要なパラメータを抽出する動きパラメータ抽出回路１２
と、各種の動きを持つ画像シーケンスを記憶した画像シ
ーケンス記憶回路１３と、前記の動きパラメータにした
がって動画像を再現するのに必要な画像シーケンスを画
像シーケンス記憶回路１３から受け取り、それを用いて
動画像を再現する動画像生成回路１２からなる。
実施例を示すブロック図である。この動画像の再現回路
１４は、入力として与えられる動き情報１０１から、再
現動画像１０５を再現するものであり、動き情報から主
要なパラメータを抽出する動きパラメータ抽出回路１２
と、各種の動きを持つ画像シーケンスを記憶した画像シ
ーケンス記憶回路１３と、前記の動きパラメータにした
がって動画像を再現するのに必要な画像シーケンスを画
像シーケンス記憶回路１３から受け取り、それを用いて
動画像を再現する動画像生成回路１２からなる。
【００１１】本実施例の動作を説明する。ここでは、画
像シーケンス記憶回路４５には、入力される動き情報か
ら動画像を再現するのに必要な、各方向への動き画像が
すでに保存されているものとする。例えば、テレビ電話
等の用途に限定すれば、人物の上半身画像で、右を向い
たり、左を向いたり、喋ったりする画像などが入ってい
る。
像シーケンス記憶回路４５には、入力される動き情報か
ら動画像を再現するのに必要な、各方向への動き画像が
すでに保存されているものとする。例えば、テレビ電話
等の用途に限定すれば、人物の上半身画像で、右を向い
たり、左を向いたり、喋ったりする画像などが入ってい
る。
【００１２】入力信号である動き情報１０１は、動きパ
ラメータ抽出回路１１に入力され、動画像再現回路１４
で再現すべき動きを記述する少数の主要な動きパラメー
タ１０２が抽出される。前述のテレビ電話の例では、口
が動いた、体が左に傾いた、右に傾いた等の動きを示す
パラメータである。動きパラメータの抽出法としては、
動きを再現すべき対象物全体の動きを表現できる単一の
動き情報を動きパラメータ１０２として、動き情報１０
１の対象物に相当する部分の平均を取ることにより抽出
する方法や、画像中の特徴的な各部分の動きのみを選択
してそれを動きパラメータ１０２として抽出する方法な
どがある。なお、動きパラメータ抽出回路１１には、動
き情報１０１を代表する動きパラメータ１０２を抽出す
るだけでなく、再現する必要のない微小な動きなど取り
除く機能を付け加えることもできる。
ラメータ抽出回路１１に入力され、動画像再現回路１４
で再現すべき動きを記述する少数の主要な動きパラメー
タ１０２が抽出される。前述のテレビ電話の例では、口
が動いた、体が左に傾いた、右に傾いた等の動きを示す
パラメータである。動きパラメータの抽出法としては、
動きを再現すべき対象物全体の動きを表現できる単一の
動き情報を動きパラメータ１０２として、動き情報１０
１の対象物に相当する部分の平均を取ることにより抽出
する方法や、画像中の特徴的な各部分の動きのみを選択
してそれを動きパラメータ１０２として抽出する方法な
どがある。なお、動きパラメータ抽出回路１１には、動
き情報１０１を代表する動きパラメータ１０２を抽出す
るだけでなく、再現する必要のない微小な動きなど取り
除く機能を付け加えることもできる。
【００１３】動画像生成回路１２は、動きパラメータ抽
出回路１１から出力される動きパラメータ１０２に基づ
いて、再現動画像画像１０５の生成を行う。例えば、対
象物全体の動きが動きパラメータ１０２として与えられ
た場合には、１フレーム前の画像から動きパラメータ１
０２よって移動するはずの場所への動きシーケンス１０
４を生成し、それをこれまでの再現動画像に合成するこ
とによって行われる。動きシーケンス１０４の生成は、
種々の動きシーケンスを記憶している画像シーケンス記
憶回１３に対して、どのシーケンスが必要であるかとい
う制御信号１０３を送ることによって行われる。画像シ
ーケンス記憶回路１３は、送られて来た制御信号１０３
に基づき記憶装置内のシーケンスを検索し、所定の動き
シーケンス１０４を動画像生成回路１２へ送り返す。
出回路１１から出力される動きパラメータ１０２に基づ
いて、再現動画像画像１０５の生成を行う。例えば、対
象物全体の動きが動きパラメータ１０２として与えられ
た場合には、１フレーム前の画像から動きパラメータ１
０２よって移動するはずの場所への動きシーケンス１０
４を生成し、それをこれまでの再現動画像に合成するこ
とによって行われる。動きシーケンス１０４の生成は、
種々の動きシーケンスを記憶している画像シーケンス記
憶回１３に対して、どのシーケンスが必要であるかとい
う制御信号１０３を送ることによって行われる。画像シ
ーケンス記憶回路１３は、送られて来た制御信号１０３
に基づき記憶装置内のシーケンスを検索し、所定の動き
シーケンス１０４を動画像生成回路１２へ送り返す。
【００１４】前述のテレビ電話の例では、これらの処理
で人物が左を向いたり、右を向いたり、喋ったりする画
像が得られる。
で人物が左を向いたり、右を向いたり、喋ったりする画
像が得られる。
【００１５】図２は第２の発明の動画像の再現装置の一
実施例を示すブロック図である。
実施例を示すブロック図である。
【００１６】この動画像の再現装置は、動画像を表現す
るデータ列２０１を入力としている。そしてこのデータ
列２０１は動き情報を含んでおり、この動画像の再現装
置は、本発明第１の動画像再現回路１４に、入力される
動き情報を含む動画像データ列２０１から動き情報１０
１のみを取り出し、その他のデータ列を廃棄する逆多重
化回路２１を付け加え、それにより再現動画像１０５を
再現する構成になっている。
るデータ列２０１を入力としている。そしてこのデータ
列２０１は動き情報を含んでおり、この動画像の再現装
置は、本発明第１の動画像再現回路１４に、入力される
動き情報を含む動画像データ列２０１から動き情報１０
１のみを取り出し、その他のデータ列を廃棄する逆多重
化回路２１を付け加え、それにより再現動画像１０５を
再現する構成になっている。
【００１７】本実施例の動作を説明する。ここでは、動
画像再現回路１４中の画像シーケンス記憶回路には、動
画像を再現するのに必要な、各方向への動き画像がすで
に保存されているものとする。
画像再現回路１４中の画像シーケンス記憶回路には、動
画像を再現するのに必要な、各方向への動き画像がすで
に保存されているものとする。
【００１８】この装置への入力信号は、動き情報を含む
動画像データ列２０１である。動き情報を含む動画像デ
ータ列２０１は、例えばＩＴＵ−Ｔ勧告のＨ．２６１ビ
ットストリームやＭＰＥＧのビットストリームなどの、
動き情報を符号化データ中に含んでいる既存の符号化器
が生成する動画像符号がその例である。
動画像データ列２０１である。動き情報を含む動画像デ
ータ列２０１は、例えばＩＴＵ−Ｔ勧告のＨ．２６１ビ
ットストリームやＭＰＥＧのビットストリームなどの、
動き情報を符号化データ中に含んでいる既存の符号化器
が生成する動画像符号がその例である。
【００１９】動き情報を含む動画像データ列２０１は、
逆多重化回路２０１へ入力される。逆多重化回路２１で
は、動き情報を含む動画像データ列２０１を解析して、
その中に含まれている動き情報１０１のみを取り出す。
動き情報を含む動画像データ列２０１中に含まれてい
る、例えば輝度や色を記述しているデータなどの、動き
情報１０１以外のデータはこの装置によって廃棄され
る。取り出された動き情報１０１は、本発明の１に記載
の動画像再現回路１４に与えられ、再現動画像１０５が
再現される。前述した第２の実施例では、動き情報を含
む動画像データ列２０１の例として、既存の符号化器の
生成する動画像符号をあげたが、動き情報を含む動画像
データ列２０１としては、関連する動画像の動きを推定
できる情報を含む音声信号や文章信号などでも良い。こ
の場合には逆多重化回路２１は、音声または文章を解析
し、その音声や文章の中に含まれている、再現する対象
物の動作に関する記述を抜き出し、それから動き情報１
０１を生成する。動き情報１０１の生成後の動作は、上
述の動画像符号から再現する場合と同様である。例えば
前述のテレビ電話の例では、この動き情報によって口を
動かしているシーケンスと、そうでないシーケンスを切
替える。
逆多重化回路２０１へ入力される。逆多重化回路２１で
は、動き情報を含む動画像データ列２０１を解析して、
その中に含まれている動き情報１０１のみを取り出す。
動き情報を含む動画像データ列２０１中に含まれてい
る、例えば輝度や色を記述しているデータなどの、動き
情報１０１以外のデータはこの装置によって廃棄され
る。取り出された動き情報１０１は、本発明の１に記載
の動画像再現回路１４に与えられ、再現動画像１０５が
再現される。前述した第２の実施例では、動き情報を含
む動画像データ列２０１の例として、既存の符号化器の
生成する動画像符号をあげたが、動き情報を含む動画像
データ列２０１としては、関連する動画像の動きを推定
できる情報を含む音声信号や文章信号などでも良い。こ
の場合には逆多重化回路２１は、音声または文章を解析
し、その音声や文章の中に含まれている、再現する対象
物の動作に関する記述を抜き出し、それから動き情報１
０１を生成する。動き情報１０１の生成後の動作は、上
述の動画像符号から再現する場合と同様である。例えば
前述のテレビ電話の例では、この動き情報によって口を
動かしているシーケンスと、そうでないシーケンスを切
替える。
【００２０】さらに、動き情報を含む動画像データ列２
０１として、前述した既存の符号化器の生成する動画像
符号と、関連する動画像の動きを推定できる情報を含む
音声信号や文章信号などを組み合わせた信号でも同様に
取り扱うことができる。
０１として、前述した既存の符号化器の生成する動画像
符号と、関連する動画像の動きを推定できる情報を含む
音声信号や文章信号などを組み合わせた信号でも同様に
取り扱うことができる。
【００２１】図３は第３の発明の符号化・復号システム
の一実施例を示すブロック図である。
の一実施例を示すブロック図である。
【００２２】この動画像の符号化・復号システムは、入
力として与えられる、画像に代表される被写体情報３０
１から、再現動画像１０５を再生するものである。この
動画像の符号化・復号装置において、符号化器は、動き
パラメータ抽出回路３１からなり、復号器は、各種の動
きを持つ画像シーケンスを記憶した画像シーケンス記憶
回路１３と、符号器から送られて来る動きパラメータに
したがって、動画像を再現するのに必要な画像シーケン
スを画像シーケンス記憶回路１３から受け取り、それを
用いて動画像を再現する動画像生成回路１２からなる。
力として与えられる、画像に代表される被写体情報３０
１から、再現動画像１０５を再生するものである。この
動画像の符号化・復号装置において、符号化器は、動き
パラメータ抽出回路３１からなり、復号器は、各種の動
きを持つ画像シーケンスを記憶した画像シーケンス記憶
回路１３と、符号器から送られて来る動きパラメータに
したがって、動画像を再現するのに必要な画像シーケン
スを画像シーケンス記憶回路１３から受け取り、それを
用いて動画像を再現する動画像生成回路１２からなる。
【００２３】本実施例の動作を説明する。ここでは、画
像シーケンス記憶回路１３中には、入力画像の動きを再
現するために、各方向の画像がすでに保存されているも
のとする。
像シーケンス記憶回路１３中には、入力画像の動きを再
現するために、各方向の画像がすでに保存されているも
のとする。
【００２４】本システムへの入力信号である、画像など
の被写体情報３０１は、被写体の動作を表す各種の情報
である。例えば、画像そのものや、被写体の動作を測定
したセンサー出力、被写体にマークをつけそれを取り込
んだ画像情報、コンピュータ・グラフィックスを生成す
るための情報、音声情報、文章情報などがその例であ
る。
の被写体情報３０１は、被写体の動作を表す各種の情報
である。例えば、画像そのものや、被写体の動作を測定
したセンサー出力、被写体にマークをつけそれを取り込
んだ画像情報、コンピュータ・グラフィックスを生成す
るための情報、音声情報、文章情報などがその例であ
る。
【００２５】符号器を構成する動きパラメータ抽出回路
３１は、入力された画像などの被写体情報３０１を解析
し、そこから被写体の動作を表現する少数の動きパラメ
ータ１０２を抽出し、それを伝送もしくは記録する。
３１は、入力された画像などの被写体情報３０１を解析
し、そこから被写体の動作を表現する少数の動きパラメ
ータ１０２を抽出し、それを伝送もしくは記録する。
【００２６】パラメータ抽出方法としては、様々な手法
がある。
がある。
【００２７】例えば画像が入力された場合には、フレー
ム間予測符号化装置で一般に使われているブロックマッ
チングを用いて動き情報を導出し、それから第１の発明
の実施例で述べたようにして動きパラメータを抽出する
方法などがある。
ム間予測符号化装置で一般に使われているブロックマッ
チングを用いて動き情報を導出し、それから第１の発明
の実施例で述べたようにして動きパラメータを抽出する
方法などがある。
【００２８】また、例えば動作を測定したセンサー出力
が入力された場合には、それらから算出される動作の方
向および量を動きパラメータとする方法などがある。
が入力された場合には、それらから算出される動作の方
向および量を動きパラメータとする方法などがある。
【００２９】さらに、例えば音声や文章信号が入力され
た場合には、音声信号の有無により口などの発音物の動
作状態を検出してそれを動きパラメータとしたり、音声
や文章信号中に含まれる特定の動作に対応するキーワー
ドを音声認識もしくは、文章解析技術により抽出し、そ
れが意味する動作内容を動きパラメータとする方法など
がある。
た場合には、音声信号の有無により口などの発音物の動
作状態を検出してそれを動きパラメータとしたり、音声
や文章信号中に含まれる特定の動作に対応するキーワー
ドを音声認識もしくは、文章解析技術により抽出し、そ
れが意味する動作内容を動きパラメータとする方法など
がある。
【００３０】復号器へ入力される動きパラメータ１０２
は、動画像生成回路１２へ送られる。動画像生成回路１
２は、符号化器から出力される動きパラメータ１０２に
基づいて、再現動画像画像１０５の生成を行う。例え
ば、対象物全体の動きが動きパラメータ１０２として与
えられた場合には、１フレーム前の画像から動きパラメ
ータ１０２よって移動するはずの場所への動きシーケン
ス１０４を生成し、それをこれまでの再現動画像に合成
することによって行われる。動きシーケンス１０４の生
成は、種々の動きシーケンスを記憶している画像シーケ
ンス記憶回１３に対して、どのシーケンスが必要である
かという制御信号１０３を送ることによって行われる。
画像シーケンス記憶回路１３は、送られて来た制御信号
１０３に基づき記憶装置内のシーケンスを検索し、所定
の動きシーケンス１０４を動画像生成回路１２へ送り返
す。
は、動画像生成回路１２へ送られる。動画像生成回路１
２は、符号化器から出力される動きパラメータ１０２に
基づいて、再現動画像画像１０５の生成を行う。例え
ば、対象物全体の動きが動きパラメータ１０２として与
えられた場合には、１フレーム前の画像から動きパラメ
ータ１０２よって移動するはずの場所への動きシーケン
ス１０４を生成し、それをこれまでの再現動画像に合成
することによって行われる。動きシーケンス１０４の生
成は、種々の動きシーケンスを記憶している画像シーケ
ンス記憶回１３に対して、どのシーケンスが必要である
かという制御信号１０３を送ることによって行われる。
画像シーケンス記憶回路１３は、送られて来た制御信号
１０３に基づき記憶装置内のシーケンスを検索し、所定
の動きシーケンス１０４を動画像生成回路１２へ送り返
す。
【００３１】図４は第４の発明の符号化・復号システム
の一実施例を示すブロック図である。 この動画像の符
号化・復号システムは、本発明第３の動画像符号化・復
号システムに、未登録の画像シーケンスが復号に際して
必要になった場合、画像シーケンスそのものを符号器よ
り伝送して、それを記憶する手段を付け加えたもので、
入力として与えられる、画像を含む被写体情報４０１か
ら、再現動画像１０５を再生するものである。この動画
像の符号化・復号装置において、符号化器は、動きパラ
メータ抽出回路３１と、画像シーケンスを符号化する画
像符号化回路４３からなり、復号器は、各種の動きを持
つ画像シーケンスを記憶した画像シーケンス記憶回路４
５と、符号器から送られて来る動きパラメータにしたが
って、動画像を再現するのに必要な画像シーケンスを画
像シーケンス記憶回路４５から受け取り、それを用いて
動画像を再現する動画像生成回路４１と、画像シーケン
ス記憶回路４５に未登録の画像シーケンスを符号器に要
求する画像送信要求回路４２と、送られて来た画像シー
ケンスの符号を復号する画像復号回路４４からなる。
の一実施例を示すブロック図である。 この動画像の符
号化・復号システムは、本発明第３の動画像符号化・復
号システムに、未登録の画像シーケンスが復号に際して
必要になった場合、画像シーケンスそのものを符号器よ
り伝送して、それを記憶する手段を付け加えたもので、
入力として与えられる、画像を含む被写体情報４０１か
ら、再現動画像１０５を再生するものである。この動画
像の符号化・復号装置において、符号化器は、動きパラ
メータ抽出回路３１と、画像シーケンスを符号化する画
像符号化回路４３からなり、復号器は、各種の動きを持
つ画像シーケンスを記憶した画像シーケンス記憶回路４
５と、符号器から送られて来る動きパラメータにしたが
って、動画像を再現するのに必要な画像シーケンスを画
像シーケンス記憶回路４５から受け取り、それを用いて
動画像を再現する動画像生成回路４１と、画像シーケン
ス記憶回路４５に未登録の画像シーケンスを符号器に要
求する画像送信要求回路４２と、送られて来た画像シー
ケンスの符号を復号する画像復号回路４４からなる。
【００３２】符号化器では、画像を含む被写体情報４０
１が動きパラメータ抽出回路３１へ送られる。動きパラ
メータ抽出回路３１は、第３の発明の実施例と同様の方
法で、動きパラメータ１０２を抽出し、それを復号器へ
出力する。
１が動きパラメータ抽出回路３１へ送られる。動きパラ
メータ抽出回路３１は、第３の発明の実施例と同様の方
法で、動きパラメータ１０２を抽出し、それを復号器へ
出力する。
【００３３】復号器では、符号化器から送られて来る動
きパラメータ１０２を、動画像生成回路４１に送る。動
画像生成回路４１は、符号化器から出力される動きパラ
メータ１０２に基づいて、再現動画像画像１０５の生成
を行う。例えば、対象物全体の動きが動きパラメータ１
０２として与えられた場合には、１フレーム前の画像か
ら動きパラメータ１０２よって移動するはずの場所への
動きシーケンス１０４を生成し、それをこれまでの再現
動画像に合成することによって行われる。動きシーケン
ス１０４の生成は、種々の動きシーケンスを記憶してい
る画像シーケンス記憶回４５に対して、どのシーケンス
が必要であるかという制御信号１０３を送ることによっ
て行われる。画像シーケンス記憶回路４５は、送られて
来た制御信号１０３に基づき記憶装置内のシーケンスを
検索し、所定の動きシーケンス１０４を動画像生成回路
４１へ送り返す。
きパラメータ１０２を、動画像生成回路４１に送る。動
画像生成回路４１は、符号化器から出力される動きパラ
メータ１０２に基づいて、再現動画像画像１０５の生成
を行う。例えば、対象物全体の動きが動きパラメータ１
０２として与えられた場合には、１フレーム前の画像か
ら動きパラメータ１０２よって移動するはずの場所への
動きシーケンス１０４を生成し、それをこれまでの再現
動画像に合成することによって行われる。動きシーケン
ス１０４の生成は、種々の動きシーケンスを記憶してい
る画像シーケンス記憶回４５に対して、どのシーケンス
が必要であるかという制御信号１０３を送ることによっ
て行われる。画像シーケンス記憶回路４５は、送られて
来た制御信号１０３に基づき記憶装置内のシーケンスを
検索し、所定の動きシーケンス１０４を動画像生成回路
４１へ送り返す。
【００３４】動画像生成回路４１が画像シーケンス記憶
回路４５に指示した、制御信号１０３に相当する画像シ
ーケンスが画像シーケンス記憶回路４５中に未登録であ
る場合には、動画像生成回路４１は、画像送信要求回路
４２に画像シーケンス未登録通知４０２を出力する。画
像送信要求回路４２は、画像シーケンス未登録通知４０
２が入力されると、符号化器内の画像符号化回路４３に
対して、画像送信要求４０３を出力する。
回路４５に指示した、制御信号１０３に相当する画像シ
ーケンスが画像シーケンス記憶回路４５中に未登録であ
る場合には、動画像生成回路４１は、画像送信要求回路
４２に画像シーケンス未登録通知４０２を出力する。画
像送信要求回路４２は、画像シーケンス未登録通知４０
２が入力されると、符号化器内の画像符号化回路４３に
対して、画像送信要求４０３を出力する。
【００３５】画像符号化回路４３は、画像送信要求４０
３が入力されると、符号化器への入力信号である画像を
含む被写体情報４０１から取り出した入力画像４０４を
符号化し、符号化データ４０５を復号器内の画像復号回
路４４へ出力する。画像復号回路４４は、入力された符
号化データ４０５を復号して画像シーケンスを４０６を
生成し、それを画像シーケンス記憶回路４５に記憶させ
る。
３が入力されると、符号化器への入力信号である画像を
含む被写体情報４０１から取り出した入力画像４０４を
符号化し、符号化データ４０５を復号器内の画像復号回
路４４へ出力する。画像復号回路４４は、入力された符
号化データ４０５を復号して画像シーケンスを４０６を
生成し、それを画像シーケンス記憶回路４５に記憶させ
る。
【００３６】画像符号化回路４３および画像復号回路４
４で用いる画像シーケンスの符号化・復号装置は、フレ
ーム間予測符号化などの従来の符号化・復号装置を適用
する。
４で用いる画像シーケンスの符号化・復号装置は、フレ
ーム間予測符号化などの従来の符号化・復号装置を適用
する。
【００３７】
【発明の効果】この発明を用いれば動き情報のみから、
簡単に動画像を再現することができる。また、本発明の
別の構成に従えば、既存のフレーム間予測符号化装置と
互換性のある動画像の簡単な再現装置を提供することが
できる。
簡単に動画像を再現することができる。また、本発明の
別の構成に従えば、既存のフレーム間予測符号化装置と
互換性のある動画像の簡単な再現装置を提供することが
できる。
【００３８】また、本発明の別の構成に従えば、画像な
どの被写体情報から抽出した、ごく少量の動きパラメー
タのみで、動画像の伝送・記録を行うことができる。
どの被写体情報から抽出した、ごく少量の動きパラメー
タのみで、動画像の伝送・記録を行うことができる。
【図面の簡単な説明】
【図１】第１の発明の一実施例を示すブロック図。
【図２】第２の発明の一実施例を示すブロック図。
【図３】第３の発明の一実施例を示すブロック図。
【図４】第４の発明の一実施例を示すブロック図。
１１ 動きパラメータ抽出回路 １２ 動画像生成回路 １３ 画像シーケンス記憶回路 １４ 動画像再現回路 ２１ 逆多重化回路 ３１ 動きパラメータ抽出回路 ４１ 動画像生成回路 ４２ 画像送信要求回路 ４３ 画像符号化回路 ４４ 画像復号回路 ４５ 画像シーケンス記憶回路 １０１ 動き情報 １０２ 動きパラメータ １０３ 制御信号 １０４ 動きシーケンス １０５ 再現動画像 ２０１ 動き情報を含む動画像データ列 ３０１ 画像などの被写体情報 ４０１ 画像を含む被写体情報 ４０２ 画像シーケンス未登録通知 ４０３ 画像送信要求 ４０４ 入力画像 ４０５ 符号化データ ４０６ 画像シーケンス
Claims (4)
- 【請求項１】 動画像の動き情報のみを用いて動画を再
現する装置において、動画像の動き情報から主要な動き
パラメータを抽出するパラメータ抽出手段と、前記動き
パラメータに対応する画像シーケンスを記憶する画像シ
ーケンス記憶手段と、抽出された動きパラメータに従っ
て前記画像シーケンス記憶手段より画像シーケンスを出
力させて再現動画像を生成する生成手段とを備えること
を特徴とする動画像の再現装置。 - 【請求項２】 動画像を表現するデータ列で、動き情報
を含むものを入力として、そのデータ列の中から動き情
報のみを取り出し、その他の情報を捨てる手段を備え、
その動き情報を用いて動画を再現することを特徴とする
請求項１記載の動画像の再現装置。 - 【請求項３】 符号化器と復号器とを備えた動画像の符
号化・復号システムにおいて、 前記符号化器は、画像などの被写体情報を入力とし、画
像などの前記被写体情報から動きパラメータを抽出する
パラメータ抽出手段を備え、 前記復号器は、その動きパラメータに対応する画像シー
ケンスを記憶する画像シーケンス記憶手段と、前記符号
化器から送られた動きパラメータに従って該画像シーケ
ンス記憶手段より画像シーケンスを出力させて再現動画
像を生成する生成手段とを備えることを特徴とする動画
像の符号化・復号システム。 - 【請求項４】 前記復号器は、前記画像シーケンス記憶
手段で記憶すべきシーケンスを前記符号化器へ要求する
要求手段と、符号化された信号を復号し、前記画像シー
ケンス記憶手段に記憶させる手段を備え、 前記符号化
器は、前記要求を受け、画像信号から前記符号化された
信号を出力する符号化手段を備えることを特徴とする請
求項３記載の動画像の符号化・復号システム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33399193A JP2795150B2 (ja) | 1993-12-28 | 1993-12-28 | 動画像の再現装置及び符号化・復号システム |
| US08/365,001 US5657415A (en) | 1993-12-28 | 1994-12-28 | Apparatus for reproducing moving pictures from motion parameters and moving picture coding and decoding system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33399193A JP2795150B2 (ja) | 1993-12-28 | 1993-12-28 | 動画像の再現装置及び符号化・復号システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH07203409A true JPH07203409A (ja) | 1995-08-04 |
| JP2795150B2 JP2795150B2 (ja) | 1998-09-10 |
Family
ID=18272278
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP33399193A Expired - Fee Related JP2795150B2 (ja) | 1993-12-28 | 1993-12-28 | 動画像の再現装置及び符号化・復号システム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5657415A (ja) |
| JP (1) | JP2795150B2 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100202575B1 (ko) * | 1996-06-21 | 1999-06-15 | 구자홍 | 디브이디 재생기의 재생 관련 정보 저장 장치 및방법 |
| JP3384314B2 (ja) * | 1997-12-02 | 2003-03-10 | ヤマハ株式会社 | 楽音応答画像生成システム、方法、装置、及び、そのための記録媒体 |
| JP2000357234A (ja) * | 1999-06-16 | 2000-12-26 | Canon Inc | 画像処理装置およびその方法 |
| KR20010009273A (ko) * | 1999-07-08 | 2001-02-05 | 김영환 | 움직임 정도 기술방법을 이용한 동영상 색인 및 검색방법 |
| JP2010034918A (ja) * | 2008-07-30 | 2010-02-12 | Hitachi Ltd | 動画像再生装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6269741A (ja) * | 1985-09-21 | 1987-03-31 | Nippon Telegr & Teleph Corp <Ntt> | 情報通信方式 |
| JPH01190187A (ja) * | 1988-01-26 | 1989-07-31 | Fujitsu Ltd | 画像伝送方式 |
| JPH0220185A (ja) * | 1988-07-08 | 1990-01-23 | Ricoh Co Ltd | 動画像伝送方式 |
| JPH05153581A (ja) * | 1991-12-02 | 1993-06-18 | Seiko Epson Corp | 顔画像符号化方式 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6268384A (ja) * | 1985-09-20 | 1987-03-28 | Nippon Telegr & Teleph Corp <Ntt> | 画像通信方式 |
| JP2797404B2 (ja) * | 1989-04-20 | 1998-09-17 | ソニー株式会社 | 動画像データの記録方式 |
| JP2969782B2 (ja) * | 1990-05-09 | 1999-11-02 | ソニー株式会社 | 符号化データ編集方法及び符号化データ編集装置 |
| US5450209A (en) * | 1991-09-30 | 1995-09-12 | Kabushiki Kaisha Toshiba | Band-compressed signal processing apparatus |
| JP3161614B2 (ja) * | 1991-11-30 | 2001-04-25 | ソニー株式会社 | 動画像復号化装置 |
| US5502571A (en) * | 1992-11-18 | 1996-03-26 | U.S. Philips Corporation | Device for processing digital signals first coded by means of variable length coding and device for inversely processing signals thus processed |
| US5377051A (en) * | 1993-01-13 | 1994-12-27 | Hitachi America, Ltd. | Digital video recorder compatible receiver with trick play image enhancement |
-
1993
- 1993-12-28 JP JP33399193A patent/JP2795150B2/ja not_active Expired - Fee Related
-
1994
- 1994-12-28 US US08/365,001 patent/US5657415A/en not_active Expired - Lifetime
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6269741A (ja) * | 1985-09-21 | 1987-03-31 | Nippon Telegr & Teleph Corp <Ntt> | 情報通信方式 |
| JPH01190187A (ja) * | 1988-01-26 | 1989-07-31 | Fujitsu Ltd | 画像伝送方式 |
| JPH0220185A (ja) * | 1988-07-08 | 1990-01-23 | Ricoh Co Ltd | 動画像伝送方式 |
| JPH05153581A (ja) * | 1991-12-02 | 1993-06-18 | Seiko Epson Corp | 顔画像符号化方式 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2795150B2 (ja) | 1998-09-10 |
| US5657415A (en) | 1997-08-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0225729B1 (en) | Image encoding and synthesis | |
| KR101387212B1 (ko) | 2ｄ 영상 미디어 표준을 기반으로 3ｄ 입체영상 파일을생성 및 재생하기 위한 시스템 및 방법 | |
| EP1763253A3 (en) | Moving picture decoding method and device | |
| KR960005588A (ko) | 화상 데이타 편집 장치 | |
| KR940017883A (ko) | 화상 부호화 및 복호화 방법 또는 장치와 화상 기록 매체 | |
| EP1569461A3 (en) | Image encoding apparatus, image encoding method, image encoding program, image decoding apparatus, image decoding method, and image decoding program | |
| KR880001161A (ko) | 비데오 정보 기록 및 재생장치와 기록 및 재생방법 | |
| EP1798988A3 (en) | Video encoding/decoding method and apparatus | |
| EP1906671A3 (en) | Moving picture encoding method and decoding method | |
| EP0771117A3 (en) | Method and apparatus for encoding and decoding a video signal using feature point based motion estimation | |
| Makar et al. | Interframe coding of feature descriptors for mobile augmented reality | |
| KR960019083A (ko) | 화상 데이타 기록 및 재생 장치 | |
| WO2024212822A1 (zh) | 一种基于ai的视频编码方法、装置、设备和存储介质 | |
| JP2795150B2 (ja) | 動画像の再現装置及び符号化・復号システム | |
| US6256344B1 (en) | Variable bit rate encoder | |
| KR20120019872A (ko) | 보간 프레임 생성 시스템 | |
| CN114600463A (zh) | 视频编码和视频解码 | |
| KR20040037099A (ko) | 비짐 기반 비디오 부호화 | |
| US6356667B1 (en) | Encoding apparatus and method, decoding apparatus and method and recording medium | |
| JP2669354B2 (ja) | 代表動画像の生成および更新と動画像の符号化復号方式 | |
| JP2004080094A (ja) | 情報処理装置及び情報処理方法並びにプログラム及びコンピュータ読み取り可能な記録媒体 | |
| JPH10294943A (ja) | 映像信号符号化方式と映像信号符号化装置と映像信号復号化方式と映像信号復号化装置 | |
| JP2825079B2 (ja) | 動画像の生成方式および符号化復号方式 | |
| JPH0698175A (ja) | 画像・データ多重化回路 | |
| JP2633683B2 (ja) | ベクトル量子化装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 19980526 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080626 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090626 Year of fee payment: 11 |
|
| LAPS | Cancellation because of no payment of annual fees |