JP2003199112A - 動画像符号化方法および動画像復号化方法 - Google Patents

動画像符号化方法および動画像復号化方法

Info

Publication number
JP2003199112A
JP2003199112A JP2002290693A JP2002290693A JP2003199112A JP 2003199112 A JP2003199112 A JP 2003199112A JP 2002290693 A JP2002290693 A JP 2002290693A JP 2002290693 A JP2002290693 A JP 2002290693A JP 2003199112 A JP2003199112 A JP 2003199112A
Authority
JP
Japan
Prior art keywords
picture
decoded
coded
decoding
pictures
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002290693A
Other languages
English (en)
Other versions
JP2003199112A5 (ja
JP4142929B2 (ja
Inventor
Shinya Sumino
眞也 角野
Toshiyuki Kondo
敏志 近藤
Makoto Hagai
誠 羽飼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=19136615&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2003199112(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2002290693A priority Critical patent/JP4142929B2/ja
Publication of JP2003199112A publication Critical patent/JP2003199112A/ja
Publication of JP2003199112A5 publication Critical patent/JP2003199112A5/ja
Application granted granted Critical
Publication of JP4142929B2 publication Critical patent/JP4142929B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/58Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

(57)【要約】 【目的】 画像符号化信号の途中の画面内符号化された
ピクチャから再生を行うことができ、また、ストリーム
にエラーが発生した場合であっても画面内符号化された
ピクチャ以降はエラー無く再生することができる動画像
符号化方法および動画像復号化方法等を提供する。 【解決手段】 動画像符号化装置1は、画面内符号化さ
れたピクチャからのピクチャ数の計数を行うカウンタユ
ニット102と、カウンタユニット102よる計数結果
である参照可能ピクチャ数Num に基づいて、メモリ40
8〜410に格納されている参照画像Ref1、参照画像Re
f2、参照画像Ref3の中から画面内符号化以降のものだけ
を対象として、それぞれ画像信号Vin と比較することで
画面間差分値の大きさが最も小さい参照画像を決定する
動き検出ユニット101とを備える。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、複数の符号化ピク
チャもしくは復号化ピクチャを参照して動画像信号を符
号化もしくは復号化する動画像符号化方法、動画像符号
化装置、動画像復号化方法、動画像復号化装置、並びに
それをソフトウェアで実施するためのプログラムを格納
した記録媒体に関する。
【0002】
【従来の技術】近年、音声、画像、およびその他の画素
値等の情報を統合的に扱うマルチメディア時代を迎え、
従来からの情報メディア、つまり新聞、雑誌、テレビ、
ラジオ、電話等の情報を人に伝達する手段がマルチメデ
ィアの対象として取り上げられるようになってきた。一
般に、マルチメディアとは、文字だけでなく、図形、音
声、特に画像等を同時に関連づけて表すことをいうが、
上記従来の情報メディアをマルチメディアの対象とする
には、その情報をディジタル形式として表すことが必須
条件となる。
【0003】ところが、上記各情報メディアの持つ情報
量をディジタル情報量として見積もってみると、文字の
場合1文字当たりの情報量は1〜2バイトであるのに対
し、音声の場合1秒当たり64kbits (電話品質)、更に
動画については1秒当たり100Mbits(現行テレビ受信品
質)以上の情報量が必要となり、上記情報メディアでそ
の膨大な情報をディジタル形式でそのまま扱うことは現
実的では無い。例えば、テレビ電話は64kbps〜1.5Mbps
の伝送速度を持つサービス総合ディジタル通信網(IS
DN:Integrated Services Digital Network )によっ
て既に実用化されているが、テレビカメラにより撮影さ
れた映像の情報をそのままISDNで送ることは不可能
である。
【0004】そこで、必要となってくるのが情報の圧縮
技術であり、例えば、テレビ電話の場合、ITU―T
(国際電気通信連合 電気通信標準化部門)で国際標準
化されたH.261 やH.263 規格の動画圧縮技術が用いられ
ている。また、MPEG-1規格の情報圧縮技術によると、通
常の音楽用CD(コンパクト・ディスク)に音声情報と
ともに画像情報を入れることも可能となる。
【0005】ここで、MPEG(Moving Picture Exper
ts Group)とは、動画像信号のディジタル圧縮の国際規
格であり、MPEG-1は、動画像信号を1.5Mbps まで、つま
りテレビ信号の情報を約 100分の1にまで圧縮する規格
である。また、MPEG-1規格を対象とする伝送速度が主と
して約1.5Mbps に制限されていることから、更なる高画
質化の要求を満たすべく規格化されたMPEG-2では、動画
像信号が2〜15Mbpsに圧縮される。
【0006】更に現状では、MPEG-1、MPEG-2と標準化を
進めてきた作業グループ(ISO/IECJTC1/SC29/WG11)に
よって、より圧縮率が高いMPEG-4が規格化された。MPEG
-4では、低ビットレートで効率の高い符号化が可能にな
るだけでなく、伝送路誤りが発生しても主観的な画質劣
化を小さくできる強力な誤り耐性技術も導入されてい
る。また、ITU―Tでは次世代画像符号化方式とし
て、H.26L の標準化活動が開始された。
【0007】MPEG-1、MPEG-2、MPEG-4では直前に符号化
もしくは復号化したピクチャの画像信号(参照画像)を
参照し、参照画像と被符号化・復号化画像との差分値を
符号化・復号化する画面間符号化(Inter Predictive C
oded Picture:以下Inter Pictureと略す)を用いるこ
とで、大幅な圧縮率を可能にした(例えば、非特許文献
1参照。)。
【0008】更に、時間方向および空間方向の冗長性を
削減することによって情報量の圧縮が実現できる。そこ
で時間的な冗長性の削減を目的とする画面間予測符号化
では、既に符号化・復号化したピクチャ(参照画像)を
参照して予測画像の作成を行い、得られた予測画像と符
号化対象ピクチャとの差分値に対して符号化を行う。こ
こで、ピクチャとは1枚の画面を表す用語であり、プロ
グレッシブ画像ではフレームを意味し、インタレース画
像ではフレームもしくはフィールドを意味する。
【0009】2001年9月時点のH.26L 規格案では更
に圧縮率を向上するため、直前に符号化もしくは復号化
したピクチャのみを参照するだけでなく、被符号化・復
号化画像より前に符号化・復号化した複数のピクチャか
ら任意のピクチャを選択して参照画像とすることが可能
になっている。
【0010】図15に従来の動画像符号化方法および動
画像復号化方法の概念の説明図を示す。図15は被符号
化・復号化ピクチャより前の3ピクチャから任意のピク
チャを選択し、参照画像とする例である。図15で各ピ
クチャは表示時刻の順序で並んでおり、左のピクチャの
表示時刻が早い。符号化の順序も左のピクチャが早く符
号化される。従って、ビットストリームの順序もピクチ
ャJ、ピクチャJ、ピクチャJ、ピクチャJ
ある。従って、被符号化・復号化ピクチャがピクチャJ
の場合は、ピクチャJ、ピクチャJ、ピクチャJ
の中から1つを選択して参照画像とすることが可能で
あり、被符号化・復号化ピクチャがピクチャJの場合
は、ピクチャJ、ピクチャJ、ピクチャJの中か
ら1つを選択して参照画像とすることが可能である。
【0011】図16は従来の動画像符号化装置の構成を
示すブロック図である。動画像符号化装置4は、入力さ
れる画像信号Vin を圧縮符号化して可変長符号化等のビ
ットストリームに変換した画像符号化信号Str を出力す
る装置であり、動き検出ユニット401、選択ユニット
402、画像信号減算ユニット403、符号化ユニット
404、復号化ユニット405、加算ユニット406、
選択ユニット407、およびメモリ408〜410を備
えている。
【0012】動き検出ユニット401は、メモリ408
〜410に格納されている既に符号化された画像である
参照画像をそれぞれ読み出し、入力された画像信号Vin
と比較することで画面間差分値の大きさ(誤差エネルギ
ー)が小さい参照画像Refとその画面間差分値が小さく
なる画素位置を示す動き情報MVを決定する。通常は、誤
差エネルギーが最小となる参照画像Refおよび画素位置
を決定することが多いが、最近は単純に誤差エネルギー
が最小となるのではなく、誤差エネルギーが小さく且つ
圧縮率が大きくできるように動き情報MVを決定する手法
も利用されている。なお、参照画像Refおよび画素位置
の情報をまとめて動き情報MVと呼ぶことにする。選択ユ
ニット402は、切り替え指示信号である参照画像指示
信号RefFrmに基づいてメモリ408〜410に格納され
ている参照画像Ref1、参照画像Ref2、参照画像Ref3の中
から選択された参照画像Ref を出力する。減算ユニット
403は、画像信号Vin と参照画像Ref の差分画像信号
Dif を計算する。
【0013】符号化ユニット404は、差分画像信号Di
f と参照画像を特定するための情報である動き情報MVと
を符号化する。復号化ユニット405は、符号化ユニッ
ト404により符号化された符号化データCoded を復号
化して復元差分画像信号RecDifを得る。加算ユニット4
06は、参照画像Ref と復元差分画像信号RecDifとを加
算する。選択ユニット407は、入力された復号画像信
号Recon を後続のピクチャの符号化で参照画像として参
照可能とするため、メモリ408〜410のいずれかに
復号画像信号Rec1、復号画像信号Rec2、復号画像信号Re
c3として出力する。
【0014】次に、上記のように構成された動画像符号
化装置の動作について説明する。
【0015】画像信号Vin は、画像信号減算ユニット4
03と動き検出ユニット401に入力される。動き検出
ユニット401は、メモリ408〜410に格納されて
いる既に復号化された画像である参照画像Ref1、参照画
像Ref2、参照画像Ref3を読み出し、入力された画像信号
Vin と比較することで画面間差分値の大きさが最小とな
る参照画像を決定し、その参照画像および参照する画素
位置を特定するための情報である動き情報MVを出力す
る。
【0016】また同時に、動き検出ユニット401は、
選択ユニット402が動き情報MVに対応する参照画像を
選択して参照画像Ref として出力できるように、切り替
え指示信号である参照画像指示信号RefFrmを出力する。
なお、シーンチェンジ等では画面間の相関が失われるた
め、画面間符号化すると被符号化ピクチャの画像符号化
信号のみで復元可能な画面内符号化(Intra Coding Pic
ture:以下Intra Pictureと略す)よりも圧縮率が低下
することがある。その場合には、動き検出ユニット40
1は、動き情報MVで画面内符号化であることを示し、常
に値0を出力する参照画像Ref4を参照画像Ref として出
力するための参照画像指示信号RefFrmを出力する。な
お、参照画像Ref4の値は必ずしも0である必要は無く、
例えば値0から255をとる輝度信号やRGBカラー信号
の場合は平均値の128としてもよい。
【0017】また、エラー伝播防止や画像符号化信号の
途中からの画像再生を可能にするためには、一定数のピ
クチャ毎に被符号化ピクチャの画像符号化信号のみで復
元可能な画面内符号化を行う必要がある。そこで、外部
から与える画面内符号化指示信号Reset の指示により、
強制的に動き検出ユニット401で画面内符号化に切り
替えることができる。
【0018】一方、画像信号Vin が入力された減算ユニ
ット403は、この画像信号Vin と選択ユニット402
により選択された参照画像Ref との差分を計算し、差分
画像信号Dif を符号化ユニット404へ出力する。次
に、符号化ユニット404は、差分画像信号Dif と動き
検出ユニット401が出力した動き情報MVを符号化し、
画像符号化信号Str と符号化データCoded を出力する。
ここで、符号化データCoded は画像を復元するために必
要なデータであり、画像符号化信号Str は符号化データ
Coded を更に可変長符号化等のビットストリームに変換
したものである。
【0019】復号化ユニット405は、符号化データCo
ded を復号化して復元差分画像信号RecDifを加算ユニッ
ト406へ出力する。加算ユニット406は、復元差分
画像信号RecDifと、選択ユニット402により選択され
た参照画像Ref とを加算し、復号画像信号Recon を選択
ユニット407へ出力する。選択ユニット407は、復
号画像信号Recon を後続のピクチャの符号化時に参照画
像として参照可能とするため、メモリ408〜410の
いずれかに復号画像信号Rec1、復号画像信号Rec2、復号
画像信号Rec3として出力する。本例では、最も古い時刻
にメモリに保存した画像が新しい復号画像信号Recon で
上書きされるように選択ユニット407で切り替えが行
われる。
【0020】図17は従来の動画像復号化装置の構成を
示すブロック図である。動画像復号化装置5は、上記の
ように動画像符号化装置4により符号化された画像符号
化信号Str を復号化する装置である。
【0021】復号化ユニット501は、入力された画像
符号化信号Str を復号化し、復元差分画像信号RecDifと
動き情報MVとを出力する。動き復元ユニット502は動
き情報MVを復号化し、参照画像指示信号RefFrmを出力す
る。選択ユニット503、選択ユニット505、メモリ
506〜508の動作は図16に示す動画像符号化装置
4の選択ユニット402、選択ユニット407、および
メモリ408〜410と同じである。加算ユニット50
4は復元差分画像信号RecDifと参照画像Ref を加算して
復号画像信号Vout(これは図16では復号画像信号Reco
n に相当)を出力する。
【0022】なお、前記動画像符号化装置4および動画
像復号化装置5には、図示しない動き補償ユニットがそ
れぞれ選択ユニット402および選択ユニット503の
出力側に設けられ、メモリから出力した参照画像の画素
値から1/2画素位置精度等の画素値である小数画素位置
精度の画素値を補間生成する動き補償を行っている。
【0023】
【非特許文献1】ISO/IEC 13818-2 「INTERNATI
ONAL STANDARD Information technology ? Generic cod
ing of moving pictures and associated audio inform
ation : Video」2000年12月15日、p.7、Int
ro.4.1.1
【0024】
【発明が解決しようとする課題】ところで、上記のよう
な従来の動画像符号化装置および従来の動画像復号化装
置では、参照画像が画面内符号化された画像(Intra Pi
cture)であるか画面内符号化された画像以降に画面間
符号化された画像(Inter Picture)であるかを全く区
別していない。例えば、図15の従来の動画像符号化方
法および動画像復号化方法の概念の説明図では、ピクチ
ャJが画面内符号化されたピクチャであり、それ以外
のピクチャJ、ピクチャJ、ピクチャJ、ピクチ
ャJが画面間符号化されたピクチャであるが、ピクチ
ャJの参照画像としてピクチャJ の参照も可能にな
る。もし、ピクチャJが参照画像としてピクチャJ
を参照した場合、画面内符号化されたピクチャJより
前のピクチャを参照画像として参照したことになる。
【0025】しかしながら、画像を途中から再生しよう
した場合、例えば画像符号化信号の途中の画面内符号化
されたピクチャJから画像を復号化し再生しようとし
ても、ピクチャJを復号化する際には復号化されたピ
クチャJの参照が必要となる。このため、ピクチャJ
以降のピクチャが正しく復号化できないという問題が
生じる。
【0026】また、例えば画像符号化信号の途中でスト
リーム誤りが発生し、ピクチャJが誤りによって正し
く復号化できない場合、画面内符号化されたピクチャJ
は正しく復号化できるが、ピクチャJを復号化する
際にはピクチャJの参照を必要となるため、ピクチャ
以降のピクチャが正しく復号化できないという問題
が生じる。
【0027】そこで、本発明は上記の事情に鑑みてなさ
れたものであり、画像符号化信号の途中の画面内符号化
されたピクチャから再生を行うことができ、また、スト
リームにエラーが発生した場合であっても画面内符号化
されたピクチャ以降はエラー無く再生することができる
動画像符号化方法および動画像復号化方法等を提供する
ことを目的とする。
【0028】
【課題を解決するための手段】上記目的を達成するため
に、本発明に係る動画像符号化方法は、動画像をピクチ
ャの単位で符号化する方法であって、メモリに格納され
た複数のピクチャの中から、画面内符号化されたピクチ
ャ以降に符号化された1つのピクチャを参照ピクチャと
して特定する特定ステップと、特定された参照ピクチャ
を前記メモリから読み出し、読み出した参照ピクチャと
被符号化ピクチャとの差分である差分画像信号を算出
し、得られた差分画像信号を符号化する符号化ステップ
と、符号化された前記差分画像信号を復号化し、前記参
照ピクチャの画像信号と加算し、得られたピクチャを前
記メモリに格納する格納ステップとを含むことを特徴と
する。
【0029】また、本発明に係る動画像符号化方法は、
動画像をピクチャの単位で符号化する方法であって、メ
モリに格納された複数のピクチャであって画面内符号化
されたピクチャを、参照ピクチャを制限するときに基準
となるピクチャとして指定する指定ステップと、前記指
定ステップで指定されたピクチャ以降に符号化されるピ
クチャは、前記指定ステップで指定されたピクチャ以降
に符号化されたピクチャのみを参照し、前記参照ピクチ
ャを制限するときに基準となるピクチャであることを示
す信号を符号化する符号化ステップと、を含むことを特
徴とする。
【0030】また、本発明に係る動画像符号化方法は、
動画像をピクチャの単位で符号化する方法であって、メ
モリに格納された複数のピクチャであって画面内符号化
されたピクチャを、参照ピクチャを制限するときに基準
となるピクチャとして指定する指定ステップと、前記指
定ステップで指定されたピクチャより前に符号化された
ピクチャを削除するステップと、前記指定ステップで指
定されたピクチャ以降に符号化されるピクチャは、前記
指定ステップで指定されたピクチャ以降に符号化された
ピクチャのみを参照するように、前記指定ステップで指
定されたピクチャより前に符号化されたピクチャを削除
することを示す信号を符号化する符号化ステップと、を
含むことを特徴とする。
【0031】また、本発明に係る動画像復号化方法は、
動画像をピクチャの単位で復号化する方法であって、入
力された画像符号化信号を復号化する復号化ステップ
と、メモリに格納された複数のピクチャの中から、画面
内復号化されたピクチャ以降に復号化された1つのピク
チャを参照ピクチャとして特定する特定ステップと、特
定された参照ピクチャを前記メモリから読み出し、読み
出した参照ピクチャの画像信号を、復号化された被復号
化ピクチャの差分画像信号と加算し、得られたピクチャ
を外部に出力するとともに、前記メモリに格納する格納
ステップとを含むことを特徴とする。
【0032】また、本発明に係る動画像復号化方法は、
動画像をピクチャの単位で復号化する方法であって、復
号化対象ピクチャを復号するときに参照する参照ピクチ
ャを制限するときに基準となるピクチャであることを示
す信号を復号化する復号化ステップと、前記基準となる
ピクチャ以降に復号化されるピクチャは、前記基準とな
るピクチャであって画面内復号化されたピクチャ以降に
復号化されたピクチャのみを参照ピクチャとして特定す
る特定ステップと、を含むことを特徴とする。
【0033】また、本発明に係る動画像復号化方法は、
動画像をピクチャの単位で復号化する方法であって、復
号化対象ピクチャを復号するときに参照する参照ピクチ
ャを制限するときに基準となるピクチャであることを示
す信号を復号化する復号化ステップと、前記基準となる
ピクチャであって画面内復号化されたピクチャより前に
復号化されたピクチャを削除するステップと、前記基準
となるピクチャ以降に復号化されるピクチャは、前記基
準となるピクチャであって画面内復号化されたピクチャ
以降に復号化されたピクチャのみを参照ピクチャとして
特定する特定ステップと、を含むことを特徴とする。
【0034】また、本発明に係る動画像符号化装置は、
動画像をピクチャの単位で符号化する動画像符号化装置
であって、メモリに格納された複数のピクチャの中か
ら、画面内符号化されたピクチャ以降に符号化された1
つのピクチャを参照ピクチャとして特定する特定手段
と、特定された参照ピクチャを前記メモリから読み出
し、読み出した参照ピクチャと被符号化ピクチャとの差
分である差分画像信号を算出し、得られた差分画像信号
を符号化する符号化手段と、符号化された前記差分画像
信号を復号化し、前記参照ピクチャの画像信号と加算
し、得られたピクチャを前記メモリに格納する格納手段
とを備えたことを特徴とする。
【0035】また、本発明に係る動画像復号化装置は、
動画像をピクチャの単位で復号化する動画像復号化装置
であって、入力された画像符号化信号を復号化する復号
化手段と、メモリに格納された複数のピクチャの中か
ら、画面内復号化されたピクチャ以降に復号化された1
つのピクチャを参照ピクチャとして特定する特定手段
と、特定された参照ピクチャを前記メモリから読み出
し、読み出した参照ピクチャの画像信号を、復号化され
た被復号化ピクチャの差分画像信号と加算し、得られた
ピクチャを外部に出力するとともに、前記メモリに格納
する格納手段とを備えたことを特徴とする。
【0036】さらに、本発明は、前記動画像符号化方法
および動画像復号化方法におけるステップをコンピュー
タに実行させるプログラムとして、また前記動画像符号
化方法により符号化したストリームデータとして実現
し、CD−ROMや通信ネットワーク等の記録媒体や伝
送媒体を介して流通させたりすることもできる。
【0037】例えば、ピクチャがピクチャJ、ピクチ
ャJ、ピクチャJ、ピクチャJ 、ピクチャJ
順に符号化され、ピクチャJが画面内符号化されたピ
クチャであり、それ以外のピクチャJ、ピクチャ
、ピクチャJ、ピクチャJ が画面間符号化され
たピクチャであるとする。すなわち、ビットストリーム
の順序はピクチャJ、ピクチャJ、ピクチャJ
ピクチャJ、ピクチャJ の順序である。
【0038】この場合、本発明に係る動画像符号化方法
および動画像復号化方法では、画面間符号化および復号
化を行う時に参照画像として選択可能なピクチャは、例
えばピクチャJを符号化する時には、ピクチャJ
ピクチャJ、ピクチャJの参照が可能である。ま
た、ピクチャJを符号化する時には、画面内符号化さ
れたピクチャJより前のピクチャJを参照すること
は禁止されるため、ピクチャJとピクチャJのみが
参照可能となる。
【0039】
【発明の実施の形態】以下、本発明の実施の形態につい
て、図1から図14を用いて説明する。
【0040】(実施の形態1)図1は本発明に係る動画
像符号化装置の一実施の形態の構成を示すブロック図で
ある。なお、図16に示す従来の動画像符号化装置4の
各ユニットと同じ動作をする機器は同じ記号を付す。
【0041】動画像符号化装置1は、入力される画像信
号Vin を圧縮符号化して可変長符号化等のビットストリ
ームに変換した画像符号化信号Str を出力する装置であ
り、動き検出ユニット101、選択ユニット402、画
像信号減算ユニット403、符号化ユニット404、復
号化ユニット405、加算ユニット406、選択ユニッ
ト407、メモリ408〜410、およびカウンタユニ
ット102を備えている。
【0042】カウンタユニット102は、外部から入力
される画面内符号化指示信号Resetで画面内符号化が指
示されると、画面内符号化されたピクチャからのピクチ
ャ数の計数を開始し、その結果を参照可能ピクチャ数Nu
mとして動き検出ユニット101に通知する。
【0043】動き検出ユニット101は、参照可能ピク
チャ数Num に基づいて、メモリ408〜410に格納さ
れている参照画像Ref1、参照画像Ref2、参照画像Ref3の
中から画面内符号化以降に符号化および復号化したもの
だけを対象として、それぞれ画像信号Vin と比較するこ
とで画面間差分値の大きさ(誤差エネルギー)が小さい
参照画像Refとその画面間差分値の大きさが小さくなる
画素位置を示す動き情報MVを決定する。なお、通常は、
誤差エネルギーが最小となる参照画像Refおよび画素位
置を決定することが多いが、誤差エネルギーが最小とな
るのではなく、誤差エネルギーが小さく且つ圧縮率が大
きくできるように動き情報MVを決定してもよい。参照画
像Refを示すために、参照画像指示信号RefFrmを選択ユ
ニット402に出力する。
【0044】選択ユニット402は、切り替え指示信号
である参照画像指示信号RefFrmに基づいてメモリ408
〜410に格納されている参照画像Ref1、参照画像Ref
2、参照画像Ref3の中から選択し、参照画像Ref として
出力する。
【0045】減算ユニット403は、画像信号Vin と参
照画像Ref の差分画像信号Dif を計算する。符号化ユニ
ット404は、差分画像信号Dif と、参照画像を特定す
るための情報である動き情報MVとを符号化し、画像符号
化信号Str と符号化データCoded を出力する。ここで、
符号化データCoded は画像を復元するために必要なデー
タ(動き情報MVや差分画像信号Difを符号化したデー
タ)であり、画像符号化信号Strは符号化データCoded
を更に可変長符号化等のビットストリームに変換したも
のである。
【0046】復号化ユニット405は、符号化データCo
ded を復号化して復元差分画像信号RecDifを得る。加算
ユニット406は、参照画像Ref と復元差分画像信号Re
cDifを加算する。選択ユニット407は、入力された復
号画像信号Recon を後続のピクチャの符号化時に参照画
像として参照可能とするため、メモリ408〜410の
いずれかに復号画像信号Rec1、復号画像信号Rec2、復号
画像信号Rec3として出力する。本実施の形態では、最も
古い時刻にメモリに保存した復号画像信号が新しい復号
画像信号Recon で上書きされるように選択ユニット40
7で切り替えを行う。
【0047】次に、上記のように構成された動画像符号
化装置の動作について説明する。
【0048】図2は、動き検出ユニット101の動作を
示すフロー図である。画像信号Vin は、画像信号減算ユ
ニット403および動き検出ユニット101に入力され
る。
【0049】動き検出ユニット101は、画像信号Vin
が入力されると、メモリ408に格納されている参照画
像Ref1を読み出す(ステップS1)。次に、動き検出ユ
ニット101は、この参照画像Ref1が画面内符号化され
たピクチャ以降のピクチャであるか否かの判断を行う。
すなわち、各ピクチャ固有のピクチャ番号とカウンタユ
ニット102より通知された参照可能ピクチャ数Num と
に基づいて、例えば式(A)を用いて判断を行う(ステ
ップS2)。ここでピクチャ番号は符号化されたピクチ
ャにつく識別番号であり、下記の特徴を有する。
【0050】つまり、画像信号Vin のピクチャ番号は、
メモリ408〜410に保存されて参照画像となるピク
チャで最も最近保存されたピクチャのピクチャ番号より
1だけ大きい。
【0051】 参照画像のピクチャ番号 ≧ 画像信号Vin のピクチャ番号−参照可能ピクチャ数Num ……(A)
【0052】この結果、上式(A)を満たす場合は参照
画像Ref1が画面内符号化されたピクチャ以降のピクチャ
であるので、動き検出ユニット101は、画像信号Vin
と参照画像Ref1との差分値を算出する(ステップS
3)。一方、上式(A)を満たさない場合は、差分の算
出を行わない。
【0053】次に、動き検出ユニット101は、メモリ
409に格納されている参照画像Ref2およびメモリ41
0に格納されている参照画像Ref3について、上記の参照
画像Ref1について行った処理と同様の処理をそれぞれ行
う(ステップS1〜ステップS3)。
【0054】次に、動き検出ユニット101は、上記の
ように差分の算出を行った参照画像の中で画面間差分値
の大きさが最も小さい参照画像を決定する(ステップS
4)。そして、動き検出ユニット101は、決定した参
照画像を特定するための情報である動き情報MVとして出
力し、同時に、決定した参照画像を選択ユニット402
が選択して参照画像Ref として出力できるように、切り
替え指示信号である参照画像指示信号RefFrmを出力する
(ステップS5)。
【0055】なお、ステップS3における差分値の算出
をした後、ステップS4において差分の算出を行った参
照画像の中で画面間差分値の大きさが小さい参照画像を
決定し、ステップS1,ステップS2,ステップS3,
ステップS4をメモリ408から410において繰返す
ようにしてもよい。
【0056】一方、画像信号Vin が入力された減算ユニ
ット403は、この画像信号Vin と、選択ユニット40
2により選択された参照画像Ref との差分を計算し、差
分画像信号Dif を符号化ユニット404へ出力する。次
に、符号化ユニット404は、差分画像信号Dif と、動
き検出ユニット101が出力した動き情報MVとを符号化
し、画像符号化信号Str と符号化データCoded を出力す
る。
【0057】復号化ユニット405は、符号化データCo
ded を復号化して復元差分画像信号RecDifを加算ユニッ
ト406へ出力する。加算ユニット406は、復元差分
画像信号RecDifと、選択ユニット402により選択され
た参照画像Ref とを加算し、復号画像信号Recon を選択
ユニット407へ出力する。選択ユニット407は、復
号画像信号Recon を後続のピクチャの符号化時に参照画
像として参照可能とするため、メモリ408〜410の
いずれかに復号画像信号Rec1、復号画像信号Rec2、復号
画像信号Rec3として出力する。
【0058】図3は、画像符号化時に参照画像として選
択可能なピクチャを示す説明図である。図15と同様に
ピクチャJが画面内符号化されたピクチャであり、そ
れ以外のピクチャJ、ピクチャJ、ピクチャJ
ピクチャJが画面間符号化されたピクチャである。ビ
ットストリームの符号化順序はピクチャJ、ピクチャ
、ピクチャJ、ピクチャJ、ピクチャJの順
序である。
【0059】上記のように動画像符号化装置1が動作す
ることによって、画面間符号化を行う時に参照画像とし
て選択可能なピクチャは、図3に示すように例えばピク
チャJを符号化する時には、ピクチャJ、ピクチャ
、ピクチャJの参照が可能である。また、ピクチ
ャJを符号化する時には、画面内符号化されたピクチ
ャJより前のピクチャJを参照することは禁止され
るため、ピクチャJとピクチャJのみが参照可能と
なる。
【0060】以上のように、画面内符号化されたピクチ
ャ以降に符号化したピクチャのみを参照画像として参照
した符号化を行っているので、画像符号化信号の途中の
画面内符号化されたピクチャから再生を行うことができ
る。また、ストリームにエラーが発生した場合であって
も画面内符号化されたピクチャ以降はエラー無く再生す
ることが可能なストリームである画像符号化信号Str が
生成できる。
【0061】また、DVDやハードディスクに記録された
画像信号を途中から再生するためには、この途中から復
元可能な仕組みが必要であり、途中から再生を開始した
いピクチャでReset の指示を行う。このReset の指示は
画像を符号化する際に操作者が決定し指示をしても良い
し、一定のピクチャ周期もしくは時間が経過する毎にRe
set の指示を出すようにしてもよい。
【0062】なお、各ピクチャが画面内符号化されてい
るか、画面間符号化されているか等の情報は各ピクチャ
の補助情報として各ピクチャが有している。そこで、さ
らに上記実施の形態1で説明した画面内符号化されたピ
クチャが、画面内符号化指示信号Resetにより特定され
たピクチャであることを示す信号を符号化してもよい
(図4)。そして、画面内符号化されたピクチャであり
かつ、この画面内符号化指示信号Resetにより特定され
たピクチャであることを示されたピクチャであるとき
に、この特定されたピクチャより前にメモリに記憶され
たピクチャを参照しないようにしてもよい。
【0063】また、画面内符号化されているピクチャを
基準に、画面内符号化されているピクチャより前に記憶
されたピクチャを参照しないことを意味したが、画面内
符号化されているピクチャによって、画面内符号化され
ているピクチャを基準に、画面内符号化されているピク
チャより前に記憶されたピクチャをメモリ内から削除す
るようにしてもよい。
【0064】また、画面内符号化指示信号Resetは、画
面内符号化されているピクチャより前に記憶されたピク
チャを参照しないことを意味したが、画面内符号化され
ているピクチャより前に記憶されたピクチャをメモリ内
から削除するために、この画面内符号化指示信号Reset
とは別の制御命令を符号化してもよい。
【0065】図5は本発明に係る動画像復号化装置の一
実施の形態の構成を示すブロック図である。なお、図1
7に示す従来の動画像復号化装置5の各ユニットと同じ
動作をする機器は同じ記号を付す。
【0066】動画像復号化装置2は、上記実施の形態1
に示した動画像符号化装置1が符号化した画像符号化信
号Str を復号化する装置であり、復号化ユニット20
1、動き復元ユニット202、選択ユニット503、加
算ユニット504、選択ユニット505、メモリ506
〜508、およびカウンタユニット203を備えてい
る。
【0067】復号化ユニット201は、入力された画像
符号化信号Str を復号化し、復元差分画像信号RecDif、
動き情報MV、および画面内符号化指示信号Reset を出力
する。カウンタユニット203は、画面内符号化指示信
号Reset で画面内符号化が指示されると、画面内符号化
からのピクチャ数の計数を開始し、その結果を参照可能
ピクチャ数Num として動き復元ユニット202に通知す
る。
【0068】動き復元ユニット202は動き情報MVを復
号化し、この動き情報MVに対応する参照画像が、参照可
能ピクチャ数Num に基づいて参照可能なピクチャである
か否かの判断を行った上で、参照画像を決定する。
【0069】選択ユニット503は、切り替え指示信号
である参照画像指示信号RefFrmに基づいてメモリ506
〜508に格納されている参照画像Ref1、参照画像Ref
2、参照画像Ref3の中から選択し、参照画像Ref として
出力する。加算ユニット504は復元差分画像信号RecD
ifと参照画像Ref を加算して復号画像信号Vout1 (これ
は図1では復号画像信号Recon に相当)を出力する。
【0070】選択ユニット505は、入力された復号画
像信号Vout1 を後続のピクチャの復号化時に参照画像と
して参照可能とするため、メモリ506〜508のいず
れかに復号画像信号Rec1、復号画像信号Rec2、復号画像
信号Rec3として出力する。本実施の形態では、最も古い
時刻にメモリに保存した画像が新しい復号画像信号Reco
n で上書きされるように選択ユニット505で切り替え
が行われる。
【0071】次に、上記のように構成された動画像復号
化装置の動作について説明する。
【0072】図6は、動き復元ユニット202の動作を
示すフロー図である。画像符号化信号Str は、復号化ユ
ニット201に入力される。復号化ユニット201は、
入力された画像符号化信号Str を復号化し、復元差分画
像信号RecDifと動き情報MVとを出力する。また、復号化
ユニット201は、入力された画像符号化信号Str が画
面内符号化されたピクチャである場合、画面内符号化指
示信号Reset を出力する。
【0073】カウンタユニット203は、復号化ユニッ
ト201より画面内符号化指示信号Reset が入力される
と、画面内符号化されたピクチャからのピクチャ数の計
算を開始し、参照可能ピクチャ数Num として動き復元ユ
ニット202に通知する。
【0074】動き情報MVと参照可能ピクチャ数Num とが
入力された動き復元ユニット202は、参照画像を特定
するための情報である動き情報MVに基づいて符号化時に
参照した参照画像を特定する(ステップS11)。次
に、動き復元ユニット202は、この参照画像が画面内
復号化されたピクチャ以降のピクチャであるか否かの判
断を行う。すなわち、各ピクチャ固有のピクチャ番号と
カウンタユニット203より通知された参照可能ピクチ
ャ数Num とに基づいて、例えば以下の式(B)を用いて
判断を行う(ステップS12)。
【0075】 参照画像のピクチャ番号 ≧ 画像符号化信号Str のピクチャ番号−参照可能ピクチャ数Num ……(B)
【0076】この結果、上式(B)を満たす場合は参照
画像が画面内復号化されたピクチャ以降のピクチャであ
るので、動き復元ユニット202は、動き情報MVに基づ
いて特定された参照画像を復号化に使用する参照画像と
して選択する(ステップS13)。
【0077】一方、上式(B)を満たさない場合は、参
照画像が画面内復号化されたピクチャより前のピクチャ
である。本来、符号化時には画面内符号化されたピクチ
ャ以降のピクチャのみを参照して符号化されているはず
である。従って、動き情報MVに基づいて特定された復号
化に必要な参照画像は、参照可能ピクチャ数Num から得
られる画面内復号化されたピクチャ以降に復号化したピ
クチャであるはずである。しかしながら、伝送誤り等に
より画面内復号化されたピクチャより前に復号化したピ
クチャを参照する、すなわち上式(B)を満たさない可
能性がある。そこで、動き復元ユニット202は、上式
(B)を満たさない場合に復号化に使用する参照画像を
あらかじめ設定する以下に説明する方法1〜3のいずれ
かによって選択する(ステップS14)。
【0078】図7は復号化に使用する参照画像の方法1
〜3による選択について説明する説明図であり、(a) 復
号化に使用する参照画像の説明図、(b) ピクチャの位置
関係を示す説明図である。ここでは、ピクチャPの復
号化時を示し、ピクチャPが画面内復号化されたピク
チャであり、それ以外のピクチャP、ピクチャP
ピクチャPが画面間復号化されたピクチャである。ピ
クチャの表示時刻の順序およびピクチャの復号開始時刻
(ストリーム中の位置)の順序はピクチャP、ピクチ
ャP、ピクチャP、ピクチャPの順序で古い時刻
である。
【0079】(方法1)動き情報MVに基づいて特定され
た参照画像(ピクチャP)を、そのまま復号化に使用
する参照画像として選択する。この場合、もし、符号化
時に誤って画面内符号化されたピクチャより前のピクチ
ャを参照して符号化されていても、ピクチャPが正し
く復号化できていれば正しく復号化できる。
【0080】(方法2)画面内復号化されたピクチャ
(ピクチャP)を、復号化に使用する参照画像として
選択する。この場合、画面内復号化されたピクチャは参
照画像として参照可能なピクチャの中で最も前に復号化
されたピクチャであるから、参照可能なピクチャの中で
画面内復号化されたピクチャより前のピクチャと最も相
関が強く、符号化した際の参照画像が画面内復号化され
たピクチャより前に復号化されたピクチャであった場合
に画質が損なわれない可能性が高い。
【0081】(方法3)直前に復号化されたピクチャ
(ピクチャP)を、復号化に使用する参照画像として
選択する。一般的に画像信号は時間間隔が短いほど相関
が高く、その結果、直前に復号化されたピクチャが参照
画像となる確率が非常に高い。従って、動き情報MVに基
づいて特定された参照画像が間違っているとすれば、最
も相関が強い直前に復号化されたピクチャが本来の参照
画像である可能性が高く、画質が損なわれない可能性が
高い。
【0082】なお、これらの方法1から方法3はいずれ
か1つを用いても、複数の方法を組み合わせて用いても
いずれでもよい。組合せの例としては、方法1において
動き情報MVに基づいて特定された参照画像(ピクチャP
)を、そのまま復号化に使用する参照画像として選択
できないときに、例えば方法3に示す直前に復号化され
たピクチャを、復号化に使用する参照画像として選択す
るといったデフォルト処理を行うようにする。
【0083】次に、動き復元ユニット202は、メモリ
506〜508に格納されている参照画像Ref1、参照画
像Ref2、参照画像Ref3を順次読み出し、上記のように選
択された参照画像であるか否かの判断を行う(図6、ス
テップS15)。すなわち、選択された参照画像がメモ
リ506〜508のどこに格納されているかを特定す
る。そして、特定した参照画像Ref1、参照画像Ref2、参
照画像Ref3のいずれかを選択ユニット503が選択して
参照画像Ref として出力できるように、切り替え指示信
号である参照画像指示信号RefFrmを出力する(図6、ス
テップS16)。
【0084】加算ユニット504は、参照画像Ref と復
号化ユニット201の出力した復元差分画像信号RecDif
とを加算して、復号画像信号Vout1 (これは図1では復
号画像信号Recon に相当)を選択ユニット505へ出力
する。選択ユニット505は、入力された復号画像信号
Vout1 を後続のピクチャの復号化時に参照画像として参
照可能とするため、メモリ506〜508のいずれかに
復号画像信号Rec1、復号画像信号Rec2、復号画像信号Re
c3として出力する。
【0085】以上のように、画面内復号化されたピクチ
ャ以降のピクチャのみを参照画像として参照して符号化
した画像符号化信号Str を正しく復号化して復号画像信
号Vout1 を得ることができ、画像符号化信号の途中の画
面内符号化されたピクチャから再生を行うことができ
る。また、ストリームにエラーが発生した場合であって
も画面内符号化されたピクチャ以降はエラー無く再生す
ることが可能である。
【0086】なお、本実施の形態では、動き復元ユニッ
ト202が復号化に使用する参照画像を選択する方法1
〜3があらかじめ設定されているが、本発明はこれに限
られるものではない。例えば、動き情報MVで特定される
ピクチャが参照可能なピクチャ数と大きく違っている場
合は方法3、動き情報MVで特定されるピクチャがメモリ
内に格納されていて参照可能な場合は方法1、それ以外
は方法2というように状況に応じて3つの方法を、もし
くはその中の2つの方法を動的に切り替えてもよい。
【0087】また、各ピクチャが画面内復号化される
か、画面間復号化されるか等の情報は各ピクチャの補助
情報として各ピクチャが有している。そこで、さらに上
記実施の形態1で説明した画面内符号化されたピクチャ
が、画面内符号化指示信号Resetにより特定されたピク
チャであることを示す信号を含む画像符号化信号Strを
受信し、画面内符号化指示信号Resetにより特定された
ピクチャであることを示す信号を復号化してもよい。そ
して、画面内符号化されたピクチャでありかつ、この画
面内符号化指示信号Resetにより特定されたピクチャで
あることを示されたピクチャであるときに、この特定さ
れたピクチャより前にメモリに記憶された(復号化され
た)ピクチャを参照しないようにしてもよい。
【0088】また、画面内復号化されているピクチャを
基準に、画面内復号化されているピクチャより前に記憶
されたピクチャを参照しないことを意味したが、画面内
復号化されているピクチャによって、画面内復号化され
ているピクチャを基準に、画面内復号化されているピク
チャより前に記憶されたピクチャをメモリ内から削除す
るようにしてもよい。
【0089】さらに、画面内符号化されているピクチャ
より前に記憶されたピクチャをメモリ内から削除するた
めに、この画面内符号化指示信号Resetとは別の制御命
令を含む画像符号化信号Strを受信し、この制御命令を
復号し、画面内符号化指示信号Resetにより特定された
ピクチャであることを示す信号とともに受信しているか
を判別し、エラー制御をするようにしてもよい。
【0090】(実施の形態2)次に、本発明の実施の形
態2の動画像復号化装置について説明する。
【0091】図8は本発明に係る動画像復号化装置の実
施の形態2の構成を示すブロック図である。なお、図5
に示す動画像復号化装置2の各ユニットと同じ動作をす
る機器は同じ記号を付し、説明を省略する。
【0092】動画像復号化装置3は、図5に示す動画像
復号化装置2の構成に選択ユニット301を加えて備
え、伝送誤り等により動き情報MVにより特定される参照
画像が、画面内復号化されたピクチャより前に復号化し
たピクチャである場合の動作が実施の形態1と異なる。
【0093】選択ユニット301は、動き復元ユニット
302より通知されるエラー通知信号Err に基づいて、
加算ユニット504より出力される復号画像信号Recon
、または選択ユニット503より出力される参照画像R
ef のどちらかを復号画像信号Vout2 として出力する。
【0094】次に、上記のように構成された動画像復号
化装置の動作について説明するが、上記実施の形態1と
同様の部分については説明を省略する。
【0095】図9は、動き復元ユニット302の動作を
示すフロー図である。図9に示すステップS21〜S2
2までの動作は、図6に示すステップS11〜S12ま
での動作と同様である。次に、動き復元ユニット302
は、特定した参照画像が画面内復号化されたピクチャ以
降のピクチャであるか否かの判断を行った結果、上式
(B)を満たさない場合、すなわち参照画像が画面内復
号化されたピクチャより前に復号化したピクチャである
場合、誤りがあるとしてエラー通知信号Err を選択ユニ
ット301に対して通知する。また、動き復元ユニット
302は、直前に復号化した復号化画像を参照画像およ
び復号画像信号として選択する(ステップS23)。す
なわち、エラー通知信号Errを通知した場合は選択ユニ
ット301は参照画像Refを復号画像信号Vout2として出
力するため、直前に復号化した復号化画像を参照画像と
することは、直前に復号化した復号化画像を復号画像信
号とすることになる。
【0096】一方、上記判断の結果、上式(B)を満た
す場合は参照画像が画面内復号化されたピクチャ以降の
ピクチャであるので、上記実施の形態2と同様に動き復
元ユニット302は、動き情報MVに基づいて特定された
参照画像を復号化に使用する参照画像として選択する
(ステップS24)。
【0097】次の図9に示すステップS25〜S26ま
での動作は、図6に示すステップS15〜S16までの
動作と同様である。
【0098】次に、加算ユニット504は、参照画像Re
f と復号化ユニット201の出力した復元差分画像信号
RecDifとを加算して、復号画像信号Recon を出力する。
選択ユニット301は、動き復元ユニット302よりエ
ラー通知信号Err が通知されていない場合には、加算ユ
ニット504より出力される復号画像信号Recon を復号
画像信号Vout2 として出力し、エラー通知信号Err が通
知された場合には、選択ユニット503より出力される
参照画像Ref を復号画像信号Vout2 として出力する。す
なわち、エラー通知信号Err が通知された場合には、直
前に復号化された復号化画像をそのまま復号画像信号Vo
ut2 として出力することになる。
【0099】選択ユニット505は、入力された復号画
像信号Vout2 を後続のピクチャの復号化時に参照画像と
して参照可能とするため、メモリ506〜508のいず
れかに復号画像信号Rec1、復号画像信号Rec2、復号画像
信号Rec3として出力する。
【0100】以上のように、例えば伝送誤り等により画
面内復号化されたピクチャより前のピクチャを参照する
という誤りが発生した場合に、最も画素の相関が強い直
前の復号化画像である参照画像Ref を復号画像信号Vout
2として出力しているので、誤りによる画像劣化の影響
を最小限に抑えることができる。
【0101】なお、上記各実施の形態では、メモリの個
数は3としたため最大3ピクチャの符号化画像を参照可
能であるが、これに限られるものではなく、メモリの個
数を増加すればより多くの符号化画像を参照した符号化
および復号化が可能である。
【0102】また、上記各実施の形態では、前記動画像
符号化装置1および動画像復号化装置2、3には、図示
しない動き補償ユニットがそれぞれ選択ユニット402
および選択ユニット503の出力側に設けられ、画素の
ピクチャ間の動き量を補正する動き補償を行っている。
【0103】また、上記各実施の形態では、画面間符号
化を行う時に、画面内符号化されたピクチャが存在する
とそのすべてについて、それより前に符号化されたピク
チャを参照画像として参照しないように制限している
が、本発明はこれに限られるものではない。例えば、画
面内符号化されたピクチャであっても、それより前に符
号化されたピクチャを参照画像として参照しないように
制限しない、すなわち従来のようにそれより前に符号化
されたピクチャを参照画像として参照することができる
種類の画面内符号化されたピクチャを設け、必要に応じ
て使い分けることも可能である。この場合、2種類の画
面内符号化されたピクチャを区別するための情報は、例
えば画像符号化信号Str 内のヘッダ情報等に格納するこ
とができる。
【0104】さらに、上記各実施の形態におけるカウン
タユニット102、203での計数は、ピクチャの符号
化および復号化順(Decoding order)でなく、ピクチャ
の表示順(Display order )であっても構わない。
【0105】(実施の形態3)更に、上記各実施の形態
で示した動画像符号化方法または動画像復号化方法の構
成を実現するためのプログラムを、フレキシブルディス
ク等の記録媒体に記録するようにすることにより、上記
各実施の形態で示した処理を、独立したコンピュータシ
ステムにおいて簡単に実施することが可能となる。
【0106】図10は、上記実施の形態1および実施の
形態2の動画像符号化方法または動画像復号化方法を格
納したフレキシブルディスクを用いて、コンピュータシ
ステムにより実施する場合の説明図である。
【0107】図10(b) は、フレキシブルディスクの正
面からみた外観、断面構造、及びフレキシブルディスク
を示し、図10(a) は、記録媒体本体であるフレキシブ
ルディスクの物理フォーマットの例を示している。フレ
キシブルディスクFDはケースF内に内蔵され、該ディ
スクの表面には、同心円状に外周からは内周に向かって
複数のトラックTrが形成され、各トラックは角度方向
に16のセクタSeに分割されている。従って、上記プ
ログラムを格納したフレキシブルディスクでは、上記フ
レキシブルディスクFD上に割り当てられた領域に、上
記プログラムとしての動画像符号化方法および動画像復
号化方法が記録されている。
【0108】また、図10(c) は、フレキシブルディス
クFDに上記プログラムの記録再生を行うための構成を
示す。上記プログラムをフレキシブルディスクFDに記
録する場合は、コンピュータシステムCsから上記プロ
グラムとしての動画像符号化方法または動画像復号化方
法をフレキシブルディスクドライブFDDを介して書き
込む。また、フレキシブルディスク内のプログラムによ
り上記動画像符号化方法および動画像復号化方法をコン
ピュータシステム中に構築する場合は、フレキシブルデ
ィスクドライブFDDによりプログラムをフレキシブル
ディスクFDから読み出し、コンピュータシステムに転
送する。
【0109】なお、上記説明では、記録媒体としてフレ
キシブルディスクを用いて説明を行ったが、光ディスク
を用いても同様に行うことができる。また、記録媒体は
これに限らず、ICカード、ROMカセット等、プログ
ラムを記録できるものであれば同様に実施することがで
きる。
【0110】さらにここで、上記実施の形態で示した動
画像符号化方法や動画像復号化方法の応用例とそれを用
いたシステムを説明する。
【0111】図11エラー! 参照元が見つかりません。
は、コンテンツ配信サービスを実現するコンテンツ供給
システムex100の全体構成を示すブロック図である。
通信サービスの提供エリアを所望の大きさに分割し、各
セル内にそれぞれ固定無線局である基地局ex107〜ex
110が設置されている。
【0112】このコンテンツ供給システムex100は、
例えば、インターネットex101にインターネットサー
ビスプロバイダex102および電話網ex104、および
基地局ex107〜ex110を介して、コンピュータ
ex111、PDA(personaldigital assistant)ex1
12、カメラex113、携帯電話ex114、カメラ付き
の携帯電話ex115などの各機器が接続される。
【0113】しかし、コンテンツ供給システムex100
は図11のような組合せに限定されず、いずれかを組み
合わせて接続するようにしてもよい。また、固定無線局
である基地局ex107〜ex110を介さずに、各機器が
電話網ex104に直接接続されてもよい。
【0114】カメラex113はデジタルビデオカメラ等
の動画撮影が可能な機器である。また、携帯電話は、P
DC(Personal Digital Communications)方式、CD
MA(Code Division Multiple Access)方式、W−C
DMA(Wideband-Code Division Multiple Access)方
式、若しくはGSM(Global System for Mobile Commu
nications)方式の携帯電話機、またはPHS(Persona
l Handyphone System)等であり、いずれでも構わな
い。
【0115】また、ストリーミングサーバex103は、
カメラex113から基地局ex109、電話網ex104を
通じて接続されており、カメラex113を用いてユーザ
が送信する符号化処理されたデータに基づいたライブ配
信等が可能になる。撮影したデータの符号化処理はカメ
ラex113で行っても、データの送信処理をするサーバ
等で行ってもよい。また、カメラ116で撮影した動画
データはコンピュータex111を介してストリーミング
サーバex103に送信されてもよい。カメラex116は
デジタルカメラ等の静止画、動画が撮影可能な機器であ
る。この場合、動画データの符号化はカメラex116で
行ってもコンピュータex111で行ってもどちらでもよ
い。また、符号化処理はコンピュータex111やカメラ
ex116が有するLSIex117において処理すること
になる。なお、画像符号化・復号化用のソフトウェアを
コンピュータex111等で読み取り可能な記録媒体であ
る何らかの蓄積メディア(CD−ROM、フレキシブル
ディスク、ハードディスクなど)に組み込んでもよい。
さらに、カメラ付きの携帯電話ex115で動画データを
送信してもよい。このときの動画データは携帯電話ex1
15が有するLSIで符号化処理されたデータである。
【0116】このコンテンツ供給システムex100で
は、ユーザがカメラex113、カメラex116等で撮影
しているコンテンツ(例えば、音楽ライブを撮影した映
像等)を上記実施の形態同様に符号化処理してストリー
ミングサーバex103に送信する一方で、ストリーミン
グサーバex103は要求のあったクライアントに対して
上記コンテンツデータをストリーム配信する。クライア
ントとしては、上記符号化処理されたデータを復号化す
ることが可能な、コンピュータex111、PDAex11
2、カメラex113、携帯電話ex114等がある。この
ようにすることでコンテンツ供給システムex100は、
符号化されたデータをクライアントにおいて受信して再
生することができ、さらにクライアントにおいてリアル
タイムで受信して復号化し、再生することにより、個人
放送をも実現可能になるシステムである。
【0117】このシステムを構成する各機器の符号化、
復号化には上記各実施の形態で示した動画像符号化装置
あるいは動画像復号化装置を用いるようにすればよい。
その一例として携帯電話について説明する。
【0118】図12は、上記実施の形態で説明した動画
像符号化方法と動画像復号化方法を用いた携帯電話ex1
15を示す図である。携帯電話ex115は、基地局ex1
10との間で電波を送受信するためのアンテナex20
1、CCDカメラ等の映像、静止画を撮ることが可能な
カメラ部ex203、カメラ部ex203で撮影した映像、
アンテナex201で受信した映像等が復号化されたデー
タを表示する液晶ディスプレイ等の表示部ex202、操
作キーex204群から構成される本体部、音声出力を
するためのスピーカ等の音声出力部ex208、音声入力
をするためのマイク等の音声入力部ex205、撮影した
動画もしくは静止画のデータ、受信したメールのデー
タ、動画のデータもしくは静止画のデータ等、符号化さ
れたデータまたは復号化されたデータを保存するための
記録メディアex207、携帯電話ex115に記録メディ
アex207を装着可能とするためのスロット部ex206
を有している。記録メディアex207はSDカード等の
プラスチックケース内に電気的に書換えや消去が可能な
不揮発性メモリであるEEPROM(Electrically Era
sable and Programmable Read Only Memory)の一種で
あるフラッシュメモリ素子を格納したものである。
【0119】さらに、携帯電話ex115について図13
を用いて説明する。携帯電話ex115は表示部ex202
及び操作キーex204を備えた本体部の各部を統括的
に制御するようになされた主制御部ex311に対して、
電源回路部ex310、操作入力制御部ex304、画像符
号化部ex312、カメラインターフェース部ex303、
LCD(Liquid Crystal Display)制御部ex302、画
像復号化部ex309、多重分離部ex308、記録再生部
ex307、変復調回路部ex306及び音声処理部ex30
5が同期バスex313を介して互いに接続されている。
【0120】電源回路部ex310は、ユーザの操作によ
り終話及び電源キーがオン状態にされると、バッテリパ
ックから各部に対して電力を供給することによりカメラ
付ディジタル携帯電話ex115を動作可能な状態に起動
する。
【0121】携帯電話ex115は、CPU、ROM及び
RAM等でなる主制御部ex311の制御に基づいて、音
声通話モード時に音声入力部ex205で集音した音声信
号を音声処理部ex305によってディジタル音声データ
に変換し、これを変復調回路部ex306でスペクトラム
拡散処理し、送受信回路部ex301でディジタルアナロ
グ変換処理及び周波数変換処理を施した後にアンテナex
201を介して送信する。また携帯電話機ex115は、
音声通話モード時にアンテナex201で受信した受信信
号を増幅して周波数変換処理及びアナログディジタル変
換処理を施し、変復調回路部ex306でスペクトラム逆
拡散処理し、音声処理部ex305によってアナログ音声
信号に変換した後、これを音声出力部ex208を介し
て出力する。
【0122】さらに、データ通信モード時に電子メール
を送信する場合、本体部の操作キーex204の操作に
よって入力された電子メールのテキストデータは操作入
力制御部ex304を介して主制御部ex311に送出され
る。主制御部ex311は、テキストデータを変復調回路
部ex306でスペクトラム拡散処理し、送受信回路部ex
301でディジタルアナログ変換処理及び周波数変換処
理を施した後にアンテナex201を介して基地局ex11
0へ送信する。
【0123】データ通信モード時に画像データを送信す
る場合、カメラ部ex203で撮像された画像データをカ
メラインターフェース部ex303を介して画像符号化部
ex312に供給する。また、画像データを送信しない場
合には、カメラ部ex203で撮像した画像データをカメ
ラインターフェース部ex303及びLCD制御部ex30
2を介して表示部ex202に直接表示することも可能で
ある。
【0124】画像符号化部ex312は、本願発明で説明
した画像符号化装置を備えた構成であり、カメラ部ex2
03から供給された画像データを上記実施の形態で示し
た画像符号化装置に用いた符号化方法によって圧縮符号
化することにより符号化画像データに変換し、これを多
重分離部ex308に送出する。また、このとき同時に携
帯電話機ex115は、カメラ部ex203で撮像中に音声
入力部ex205で集音した音声を音声処理部ex305を
介してディジタルの音声データとして多重分離部ex30
8に送出する。
【0125】多重分離部ex308は、画像符号化部ex3
12から供給された符号化画像データと音声処理部ex3
05から供給された音声データとを所定の方式で多重化
し、その結果得られる多重化データを変復調回路部ex3
06でスペクトラム拡散処理し、送受信回路部ex301
でディジタルアナログ変換処理及び周波数変換処理を施
した後にアンテナex201を介して送信する。
【0126】データ通信モード時にホームページ等にリ
ンクされた動画像ファイルのデータを受信する場合、ア
ンテナex201を介して基地局ex110から受信した受
信信号を変復調回路部ex306でスペクトラム逆拡散処
理し、その結果得られる多重化データを多重分離部ex3
08に送出する。
【0127】また、アンテナex201を介して受信され
た多重化データを復号化するには、多重分離部ex308
は、多重化データを分離することにより画像データの符
号化ビットストリームと音声データの符号化ビットスト
リームとに分け、同期バスex313を介して当該符号化
画像データを画像復号化部ex309に供給すると共に当
該音声データを音声処理部ex305に供給する。
【0128】次に、画像復号化部ex309は、本願発明
で説明した画像復号化装置を備えた構成であり、画像デ
ータの符号化ビットストリームを上記実施の形態で示し
た符号化方法に対応した復号化方法で復号することによ
り再生動画像データを生成し、これをLCD制御部ex3
02を介して表示部ex202に供給し、これにより、例
えばホームページにリンクされた動画像ファイルに含ま
れる動画データが表示される。このとき同時に音声処理
部ex305は、音声データをアナログ音声信号に変換し
た後、これを音声出力部ex208に供給し、これによ
り、例えばホームページにリンクされた動画像ファイル
に含まる音声データが再生される。
【0129】なお、上記システムの例に限られず、最近
は衛星、地上波によるディジタル放送が話題となってお
り、図14エラー! 参照元が見つかりません。に示すよ
うにディジタル放送用システムにも上記実施の形態の少
なくとも画像符号化装置または画像復号化装置のいずれ
かを組み込むことができる。具体的には、放送局ex40
9では映像情報の符号化ビットストリームが電波を介し
て通信または放送衛星ex410に伝送される。これを受
けた放送衛星ex410は、放送用の電波を発信し、この
電波を衛星放送受信設備をもつ家庭のアンテナex406
で受信し、テレビ(受信機)ex401またはセットトッ
プボックス(STB)ex407などの装置により符号化
ビットストリームを復号化してこれを再生する。また、
記録媒体であるCDやDVD等の蓄積メディアex402に記
録した符号化ビットストリームを読み取り、復号化する
再生装置ex403にも上記実施の形態で示した画像復号
化装置を実装することが可能である。この場合、再生さ
れた映像信号はモニタex404に表示される。また、ケ
ーブルテレビ用のケーブルex405または衛星/地上波
放送のアンテナex406に接続されたセットトップボッ
クスex407内に画像復号化装置を実装し、これをテレ
ビのモニタex408で再生する構成も考えられる。この
ときセットトップボックスではなく、テレビ内に画像復
号化装置を組み込んでも良い。また、アンテナex411
を有する車ex412で衛星ex410からまたは基地局ex
107等から信号を受信し、車ex412が有するカーナ
ビゲーションex413等の表示装置に動画を再生するこ
とも可能である。
【0130】更に、画像信号を上記実施の形態で示した
画像符号化装置で符号化し、記録媒体に記録することも
できる。具体例としては、DVDディスクex421に画
像信号を記録するDVDレコーダや、ハードディスクに記
録するディスクレコーダなどのレコーダex420があ
る。更にSDカードex422に記録することもできる。
レコーダex420が上記実施の形態で示した画像復号
化装置を備えていれば、DVDディスクex421やSDカ
ードex422に記録した画像信号を再生し、モニタe
x408で表示することができる。
【0131】なお、カーナビゲーションex413の構成
は例えば図13に示す構成のうち、カメラ部ex203と
カメラインターフェース部ex303、画像符号化部ex
312を除いた構成が考えられ、同様なことがコンピュ
ータex111やテレビ(受信機)ex401等でも考えら
れる。
【0132】また、上記携帯電話ex114等の端末は、
符号化器・復号化器を両方持つ送受信型の端末の他に、
符号化器のみの送信端末、復号化器のみの受信端末の3
通りの実装形式が考えられる。
【0133】このように、上記実施の形態で示した動画
像符号化方法あるいは動画像復号化方法を上述したいず
れの機器・システムに用いることは可能であり、そうす
ることで、上記実施の形態で説明した効果を得ることが
できる。
【0134】また、上記実施の形態に示した動画像符号
化方法および動画像復号化方法は、例えばDVD、SD
カード、メモリ等の記憶メディアに記録したストリーム
データを途中再生する場合に有効である。
【0135】
【発明の効果】以上の説明から明らかなように、本発明
に係る動画像符号化方法は、動画像をピクチャの単位で
符号化する方法であって、メモリに格納された複数のピ
クチャの中から、画面内符号化されたピクチャ以降に符
号化された1つのピクチャを参照ピクチャとして特定す
る特定ステップと、特定された参照ピクチャを前記メモ
リから読み出し、読み出した参照ピクチャと被符号化ピ
クチャとの差分である差分画像信号を算出し、得られた
差分画像信号を符号化する符号化ステップと、符号化さ
れた前記差分画像信号を復号化し、前記参照ピクチャの
画像信号と加算し、得られたピクチャを前記メモリに格
納する格納ステップとを含むことを特徴とする。
【0136】これによって、画面内符号化されたピクチ
ャより前のピクチャを参照画像として参照した符号化を
行わないので、画像符号化信号の途中の画面内符号化さ
れたピクチャから再生を行うことができる。また、スト
リームにエラーが発生した場合であっても画面内符号化
されたピクチャ以降はエラー無く再生することが可能な
ストリームである画像符号化信号が生成できる。このよ
うに、蓄積メディアで重要な途中からの再生や、無線・
有線伝送時に重要な伝送時の誤り耐性の点での長所が大
きく、実際のアプリケーションにおいて優れている。
【0137】また、本発明に係る動画像復号化方法は、
動画像をピクチャの単位で復号化する方法であって、入
力された画像符号化信号を復号化する復号化ステップ
と、メモリに格納された複数のピクチャの中から、画面
内復号化されたピクチャ以降に復号化された1つのピク
チャを参照ピクチャとして特定する特定ステップと、特
定された参照ピクチャを前記メモリから読み出し、読み
出した参照ピクチャの画像信号を、復号化された被復号
化ピクチャの差分画像信号と加算し、得られたピクチャ
を外部に出力するとともに、前記メモリに格納する格納
ステップとを含むことを特徴とする。
【0138】これによって、画面内復号化されたピクチ
ャ以降のピクチャのみを参照画像として参照して符号化
した画像符号化信号を正しく復号化して復号画像信号を
得ることができ、画像符号化信号の途中の画面内符号化
されたピクチャから再生を行うことができる。また、ス
トリームにエラーが発生した場合であっても画面内符号
化されたピクチャ以降はエラー無く再生することが可能
である。
【図面の簡単な説明】
【図1】本発明に係る動画像符号化装置の一実施の形態
の構成を示すブロック図である。
【図2】上記実施の形態での動き検出ユニットの動作を
示すフロー図である。
【図3】上記実施の形態での画像符号化時に参照画像と
して選択可能なピクチャを示す説明図である。
【図4】本発明に係る動画像符号化装置の他の実施の形
態の構成を示すブロック図である。
【図5】本発明に係る動画像復号化装置の一実施の形態
の構成を示すブロック図である。
【図6】上記実施の形態での動き復元ユニットの動作を
示すフロー図である。
【図7】上記実施の形態での復号化に使用する参照画像
の方法1〜3による選択について説明する説明図であ
り、(a) 復号化に使用する参照画像の説明図、(b) ピク
チャの位置関係を示す説明図である。
【図8】本発明に係る動画像復号化装置の実施の形態2
の構成を示すブロック図である。
【図9】上記実施の形態での動き復元ユニットの動作を
示すフロー図である。
【図10】上記実施の形態1および実施の形態2の動画
像符号化方法および動画像復号化方法をコンピュータシ
ステムにより実現するためのプログラムを格納するため
の記録媒体についての説明図であり、(a) 記録媒体本体
であるフレキシブルディスクの物理フォーマットの例を
示した説明図、(b) フレキシブルディスクの正面からみ
た外観、断面構造、及びフレキシブルディスクを示した
説明図、(c) フレキシブルディスクFDに上記プログラ
ムの記録再生を行うための構成を示した説明図である。
【図11】コンテンツ配信サービスを実現するコンテン
ツ供給システムの全体構成を示すブロック図である。
【図12】携帯電話の一例を示す図である。
【図13】携帯電話の内部構成を示すブロック図であ
る。
【図14】ディジタル放送用システムの全体構成を示す
ブロック図である。
【図15】従来の動画像符号化方法および動画像復号化
方法の概念の説明図である。
【図16】従来の動画像符号化装置の構成を示すブロッ
ク図である。
【図17】従来の動画像復号化装置の構成を示すブロッ
ク図である。
【符号の説明】
1、4 動画像符号化装置 2、3、5 動画像復号化装置 101 動き検出ユニット 102、203 カウンタユニット 201、405 復号化ユニット 202、302 動き復元ユニット 301、402、407、503、505 選択ユニッ
ト 403 画像信号減算ユニット 404 符号化ユニット 406、504 加算ユニット 408〜410、506〜508 メモリ Cs コンピュータシステム FD フレキシブルディスク FDD フレキシブルディスクドライブ
───────────────────────────────────────────────────── フロントページの続き (72)発明者 羽飼 誠 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 Fターム(参考) 5C059 KK36 MA00 MA05 PP05 PP06 RB14 RC22 RC26 RC32 RC40 RF14 SS07 SS10 SS14 SS19 SS20 SS26 UA02 UA05 UA33 5D044 GK08 GK11 5J064 AA00 BA04 BB07 BC01 BC02 BC05 BC08 BC25 BD02 BD04

Claims (24)

    【特許請求の範囲】
  1. 【請求項1】 動画像をピクチャの単位で符号化する方
    法であって、 メモリに格納された複数のピクチャの中から、画面内符
    号化されたピクチャ以降に符号化された1つのピクチャ
    を参照ピクチャとして特定する特定ステップと、 特定された参照ピクチャを前記メモリから読み出し、読
    み出した参照ピクチャと被符号化ピクチャとの差分であ
    る差分画像信号を算出し、得られた差分画像信号を符号
    化する符号化ステップと、 符号化された前記差分画像信号を復号化し、前記参照ピ
    クチャの画像信号と加算し、得られたピクチャを前記メ
    モリに格納する格納ステップとを含むことを特徴とする
    動画像符号化方法。
  2. 【請求項2】 動画像をピクチャの単位で符号化する方
    法であって、 メモリに格納された複数のピクチャであって画面内符号
    化されたピクチャを、参照ピクチャを制限するときに基
    準となるピクチャとして指定する指定ステップと、 前記指定ステップで指定されたピクチャ以降に符号化さ
    れるピクチャは、前記指定ステップで指定されたピクチ
    ャ以降に符号化されたピクチャのみを参照し、前記参照
    ピクチャを制限するときに基準となるピクチャであるこ
    とを示す信号を符号化する符号化ステップと、 を含むことを特徴とする動画像符号化方法。
  3. 【請求項3】 動画像をピクチャの単位で符号化する方
    法であって、 メモリに格納された複数のピクチャであって画面内符号
    化されたピクチャを、参照ピクチャを制限するときに基
    準となるピクチャとして指定する指定ステップと、 前記指定ステップで指定されたピクチャより前に符号化
    されたピクチャを削除するステップと、 前記指定ステップで指定されたピクチャ以降に符号化さ
    れるピクチャは、前記指定ステップで指定されたピクチ
    ャ以降に符号化されたピクチャのみを参照するように、
    前記指定ステップで指定されたピクチャより前に符号化
    されたピクチャを削除することを示す信号を符号化する
    符号化ステップと、 を含むことを特徴とする動画像符号化方法。
  4. 【請求項4】 前記特定ステップでは、画面内符号化さ
    れたピクチャ以降に符号化されたピクチャの数を計数
    し、計数した数に基づいて、前記参照ピクチャを特定す
    ることを特徴とする請求項1記載の動画像符号化方法。
  5. 【請求項5】 前記メモリに格納されたピクチャには、
    符号化の順を示すピクチャ番号が付され、 前記特定ステップでは、前記メモリに格納された複数の
    ピクチャを読み出し、読み出したピクチャのそれぞれの
    ピクチャ番号が、被符号化ピクチャのピクチャ番号より
    前記計数した数を減算した値以上であるか否かにより、
    読み出したピクチャが画面内符号化されたピクチャ以降
    に符号化されたピクチャであるか否かを判断することを
    特徴とする請求項4記載の動画像符号化方法。
  6. 【請求項6】 前記特定ステップでは、前記判断の結
    果、前記読み出したピクチャが画面内復号化されたピク
    チャ以降に復号化されたピクチャである場合、前記読み
    出したピクチャと被符号化ピクチャとの差分を算出し、
    この算出した差分の大きさが最も小さいピクチャを前記
    参照ピクチャとして特定することを特徴とする請求項5
    記載の動画像符号化方法。
  7. 【請求項7】 動画像をピクチャの単位で復号化する方
    法であって、 入力された画像符号化信号を復号化する復号化ステップ
    と、 メモリに格納された複数のピクチャの中から、画面内復
    号化されたピクチャ以降に復号化された1つのピクチャ
    を参照ピクチャとして特定する特定ステップと、 特定された参照ピクチャを前記メモリから読み出し、読
    み出した参照ピクチャの画像信号を、復号化された被復
    号化ピクチャの差分画像信号と加算し、得られたピクチ
    ャを外部に出力するとともに、前記メモリに格納する格
    納ステップとを含むことを特徴とする動画像復号化方
    法。
  8. 【請求項8】 動画像をピクチャの単位で復号化する方
    法であって、 復号化対象ピクチャを復号するときに参照する参照ピク
    チャを制限するときに基準となるピクチャであることを
    示す信号を復号化する復号化ステップと、 前記基準となるピクチャ以降に復号化されるピクチャ
    は、前記基準となるピクチャであって画面内復号化され
    たピクチャ以降に復号化されたピクチャのみを参照ピク
    チャとして特定する特定ステップと、 を含むことを特徴とする動画像復号化方法。
  9. 【請求項9】 動画像をピクチャの単位で復号化する方
    法であって、 復号化対象ピクチャを復号するときに参照する参照ピク
    チャを制限するときに基準となるピクチャであることを
    示す信号を復号化する復号化ステップと、 前記基準となるピクチャであって画面内復号化されたピ
    クチャより前に復号化されたピクチャを削除するステッ
    プと、 前記基準となるピクチャ以降に復号化されるピクチャ
    は、前記基準となるピクチャであって画面内復号化され
    たピクチャ以降に復号化されたピクチャのみを参照ピク
    チャとして特定する特定ステップと、 を含むことを特徴とする動画像復号化方法。
  10. 【請求項10】 前記基準となるピクチャであることを
    示す信号は画面内符号化されていることを示す信号であ
    ることを特徴とする請求項8または請求項9記載の動画
    像復号化方法。
  11. 【請求項11】 前記基準となるピクチャであることを
    示す信号は画面内符号化されているか画面間符号化され
    ているかを示す信号とは別の信号であることを特徴とす
    る請求項8または請求項9記載の動画像復号化方法。
  12. 【請求項12】 前記特定ステップは、 復号化された情報に基づいて参照ピクチャとすべきピク
    チャを特定し、特定したピクチャが画面内復号化された
    ピクチャ以降に復号化されたピクチャであるか否かを判
    断する判断ステップと、 前記判断の結果、前記特定したピクチャが画面内復号化
    されたピクチャ以降に復号化されたピクチャである場
    合、前記特定したピクチャを参照ピクチャとして特定す
    る通常処理ステップと、 前記判断の結果、前記特定したピクチャが画面内復号化
    されたピクチャ以降に復号化されたピクチャでない場
    合、あらかじめ設定する所定のピクチャを参照ピクチャ
    として特定するエラー処理ステップとを含むことを特徴
    とする請求項7記載の動画像復号化方法。
  13. 【請求項13】 前記判断ステップでは、画面内復号化
    されたピクチャ以降に復号化されたピクチャの数を計数
    し、計数した数に基づいて、前記判断を行うことを特徴
    とする請求項12記載の動画像復号化方法。
  14. 【請求項14】 前記メモリに格納されたピクチャに
    は、復号化の順を示すピクチャ番号が付され、 前記判断ステップでは、前記メモリに格納された前記特
    定したピクチャを読み出し、読み出したピクチャのピク
    チャ番号が、被復号化ピクチャのピクチャ番号より前記
    計数した数を減算した値以上であるか否かにより前記判
    断を行うことを特徴とする請求項12記載の動画像復号
    化方法。
  15. 【請求項15】 前記エラー処理ステップでは、画面内
    復号化したピクチャを参照ピクチャとして特定すること
    を特徴とする請求項12記載の動画像復号化方法。
  16. 【請求項16】 前記エラー処理ステップでは、直前に
    復号化したピクチャを参照ピクチャとして特定すること
    を特徴とする請求項12記載の動画像復号化方法。
  17. 【請求項17】 さらに、直前に復号化したピクチャを
    前記メモリから読み出し、読み出したピクチャをそのま
    ま出力するエラー修正ステップを含むことを特徴とする
    請求項12記載の動画像復号化方法。
  18. 【請求項18】 動画像をピクチャの単位で符号化する
    動画像符号化装置であって、 メモリに格納された複数のピクチャの中から、画面内符
    号化されたピクチャ以降に符号化された1つのピクチャ
    を参照ピクチャとして特定する特定手段と、 特定された参照ピクチャを前記メモリから読み出し、読
    み出した参照ピクチャと被符号化ピクチャとの差分であ
    る差分画像信号を算出し、得られた差分画像信号を符号
    化する符号化手段と、 符号化された前記差分画像信号を復号化し、前記参照ピ
    クチャの画像信号と加算し、得られたピクチャを前記メ
    モリに格納する格納手段とを備えたことを特徴とする動
    画像符号化装置。
  19. 【請求項19】 さらに、画面内符号化されたピクチャ
    以降に符号化されたピクチャの数を計数するカウンタ手
    段を備え、 前記特定手段は、前記カウンタ手段が計数した数に基づ
    いて、前記参照ピクチャを特定することを特徴とする請
    求項18記載の動画像符号化装置。
  20. 【請求項20】 動画像をピクチャの単位で復号化する
    動画像復号化装置であって、 入力された画像符号化信号を復号化する復号化手段と、 メモリに格納された複数のピクチャの中から、画面内復
    号化されたピクチャ以降に復号化された1つのピクチャ
    を参照ピクチャとして特定する特定手段と、 特定された参照ピクチャを前記メモリから読み出し、読
    み出した参照ピクチャの画像信号を、復号化された被復
    号化ピクチャの差分画像信号と加算し、得られたピクチ
    ャを外部に出力するとともに、前記メモリに格納する格
    納手段とを備えたことを特徴とする動画像復号化装置。
  21. 【請求項21】 さらに、画面内復号化されたピクチャ
    以降に復号化されたピクチャの数を計数するカウンタ手
    段を備え、 前記特定手段は、前記カウンタ手段が計数した数に基づ
    いて、前記参照ピクチャを特定することを特徴とする請
    求項20記載の動画像復号化装置。
  22. 【請求項22】 動画像をピクチャの単位で符号化する
    ためのプログラムを格納した記録媒体であって、 請求項1記載の動画像符号化方法におけるステップをコ
    ンピュータに実行させるプログラムを格納したことを特
    徴とする記録媒体。
  23. 【請求項23】 動画像をピクチャの単位で復号化する
    ためのプログラムを格納した記録媒体であって、 請求項7記載の動画像復号化方法におけるステップをコ
    ンピュータに実行させるプログラムを格納したことを特
    徴とする記録媒体。
  24. 【請求項24】 動画像をピクチャの単位で符号化した
    ストリームデータを格納した記録媒体であって、 請求項1記載の動画像符号化方法により符号化したスト
    リームデータを格納したことを特徴とする記録媒体。
JP2002290693A 2001-10-17 2002-10-03 動画像符号化方法および動画像符号化装置 Expired - Lifetime JP4142929B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002290693A JP4142929B2 (ja) 2001-10-17 2002-10-03 動画像符号化方法および動画像符号化装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2001-319002 2001-10-17
JP2001319002 2001-10-17
JP2002290693A JP4142929B2 (ja) 2001-10-17 2002-10-03 動画像符号化方法および動画像符号化装置

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2008039281A Division JP4275719B2 (ja) 2001-10-17 2008-02-20 動画像復号化方法および動画像復号化装置
JP2008040319A Division JP4234771B2 (ja) 2001-10-17 2008-02-21 送信装置

Publications (3)

Publication Number Publication Date
JP2003199112A true JP2003199112A (ja) 2003-07-11
JP2003199112A5 JP2003199112A5 (ja) 2008-04-03
JP4142929B2 JP4142929B2 (ja) 2008-09-03

Family

ID=19136615

Family Applications (18)

Application Number Title Priority Date Filing Date
JP2002290693A Expired - Lifetime JP4142929B2 (ja) 2001-10-17 2002-10-03 動画像符号化方法および動画像符号化装置
JP2008039281A Expired - Lifetime JP4275719B2 (ja) 2001-10-17 2008-02-20 動画像復号化方法および動画像復号化装置
JP2008040319A Expired - Lifetime JP4234771B2 (ja) 2001-10-17 2008-02-21 送信装置
JP2009007869A Expired - Lifetime JP4615604B2 (ja) 2001-10-17 2009-01-16 動画像復号化方法および動画像復号化装置
JP2009160293A Expired - Lifetime JP4368942B2 (ja) 2001-10-17 2009-07-06 復号化システム
JP2009211097A Expired - Lifetime JP4405587B1 (ja) 2001-10-17 2009-09-11 復号化システム
JP2010133450A Expired - Lifetime JP4560135B1 (ja) 2001-10-17 2010-06-10 符号化復号化装置
JP2010133449A Expired - Lifetime JP4560134B1 (ja) 2001-10-17 2010-06-10 動画像復号化方法および動画像復号化装置
JP2010158191A Expired - Lifetime JP4615623B2 (ja) 2001-10-17 2010-07-12 動画像復号化方法および動画像復号化装置
JP2010158198A Expired - Lifetime JP4581035B1 (ja) 2001-10-17 2010-07-12 符号化復号化装置
JP2010158197A Expired - Lifetime JP4615624B2 (ja) 2001-10-17 2010-07-12 受信装置
JP2010158188A Expired - Lifetime JP4615622B2 (ja) 2001-10-17 2010-07-12 動画像復号化方法および動画像復号化装置
JP2010197152A Expired - Lifetime JP4907730B2 (ja) 2001-10-17 2010-09-02 符号化復号化装置
JP2011046994A Expired - Lifetime JP4733239B1 (ja) 2001-10-17 2011-03-03 送信・受信システム
JP2011048145A Expired - Lifetime JP4733241B1 (ja) 2001-10-17 2011-03-04 受信装置および受信方法
JP2011048141A Expired - Lifetime JP4733240B1 (ja) 2001-10-17 2011-03-04 受信装置および受信方法
JP2011258213A Expired - Lifetime JP5401530B2 (ja) 2001-10-17 2011-11-25 符号化復号化装置
JP2013108377A Expired - Lifetime JP5355807B2 (ja) 2001-10-17 2013-05-22 符号化データ配信方法および配信システム

Family Applications After (17)

Application Number Title Priority Date Filing Date
JP2008039281A Expired - Lifetime JP4275719B2 (ja) 2001-10-17 2008-02-20 動画像復号化方法および動画像復号化装置
JP2008040319A Expired - Lifetime JP4234771B2 (ja) 2001-10-17 2008-02-21 送信装置
JP2009007869A Expired - Lifetime JP4615604B2 (ja) 2001-10-17 2009-01-16 動画像復号化方法および動画像復号化装置
JP2009160293A Expired - Lifetime JP4368942B2 (ja) 2001-10-17 2009-07-06 復号化システム
JP2009211097A Expired - Lifetime JP4405587B1 (ja) 2001-10-17 2009-09-11 復号化システム
JP2010133450A Expired - Lifetime JP4560135B1 (ja) 2001-10-17 2010-06-10 符号化復号化装置
JP2010133449A Expired - Lifetime JP4560134B1 (ja) 2001-10-17 2010-06-10 動画像復号化方法および動画像復号化装置
JP2010158191A Expired - Lifetime JP4615623B2 (ja) 2001-10-17 2010-07-12 動画像復号化方法および動画像復号化装置
JP2010158198A Expired - Lifetime JP4581035B1 (ja) 2001-10-17 2010-07-12 符号化復号化装置
JP2010158197A Expired - Lifetime JP4615624B2 (ja) 2001-10-17 2010-07-12 受信装置
JP2010158188A Expired - Lifetime JP4615622B2 (ja) 2001-10-17 2010-07-12 動画像復号化方法および動画像復号化装置
JP2010197152A Expired - Lifetime JP4907730B2 (ja) 2001-10-17 2010-09-02 符号化復号化装置
JP2011046994A Expired - Lifetime JP4733239B1 (ja) 2001-10-17 2011-03-03 送信・受信システム
JP2011048145A Expired - Lifetime JP4733241B1 (ja) 2001-10-17 2011-03-04 受信装置および受信方法
JP2011048141A Expired - Lifetime JP4733240B1 (ja) 2001-10-17 2011-03-04 受信装置および受信方法
JP2011258213A Expired - Lifetime JP5401530B2 (ja) 2001-10-17 2011-11-25 符号化復号化装置
JP2013108377A Expired - Lifetime JP5355807B2 (ja) 2001-10-17 2013-05-22 符号化データ配信方法および配信システム

Country Status (9)

Country Link
US (15) US7209520B2 (ja)
EP (2) EP1850600A3 (ja)
JP (18) JP4142929B2 (ja)
KR (3) KR100796107B1 (ja)
CN (6) CN100484248C (ja)
BR (4) BRPI0216072B1 (ja)
CA (1) CA2430919C (ja)
MX (1) MXPA03005034A (ja)
WO (1) WO2003034744A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007184909A (ja) * 2005-12-05 2007-07-19 Canon Inc 画像符号化装置、画像符号化装置の制御方法、プログラム並びに記憶媒体
JP2008022532A (ja) * 2006-06-16 2008-01-31 Casio Comput Co Ltd 動画符号化装置および動画符号化方法と、動画復号化装置および動画復号化方法と、動画記録装置
WO2009107849A1 (en) * 2008-02-26 2009-09-03 Canon Kabushiki Kaisha Moving image encoding apparatus and moving image encoding method
US8036281B2 (en) 2005-06-01 2011-10-11 Canon Kabushiki Kaisha Image coding apparatus and image coding method
US8155185B2 (en) 2005-12-05 2012-04-10 Canon Kabushiki Kaisha Image coding apparatus and method

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BRPI0216072B1 (pt) 2001-10-17 2018-09-25 Panasonic Corp método e aparelho de decodificação de figuras móveis
EP1422928A3 (en) * 2002-11-22 2009-03-11 Panasonic Corporation Motion compensated interpolation of digital video signals
US8175154B2 (en) * 2003-06-03 2012-05-08 General Instrument Corporation Method for restructuring a group of pictures to provide for random access into the group of pictures
CN1875637A (zh) * 2003-08-26 2006-12-06 汤姆森特许公司 最小化用于相互编码的参考画面数目的方法和装置
JP4574444B2 (ja) * 2005-05-27 2010-11-04 キヤノン株式会社 画像復号装置及び方法、画像符号化装置及び方法、コンピュータプログラム及び記憶媒体
US8279928B2 (en) * 2006-05-09 2012-10-02 Canon Kabushiki Kaisha Image encoding apparatus and encoding method, image decoding apparatus and decoding method
US8121195B2 (en) * 2006-11-30 2012-02-21 Lsi Corporation Memory reduced H264/MPEG-4 AVC codec
JP5344238B2 (ja) 2009-07-31 2013-11-20 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
JP2011199396A (ja) * 2010-03-17 2011-10-06 Ntt Docomo Inc 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法、及び動画像予測復号プログラム
CN107105292B (zh) 2010-12-13 2020-09-08 韩国电子通信研究院 基于帧间预测对视频信号进行解码的方法
CN102291584B (zh) * 2011-09-01 2013-04-17 西安电子科技大学 帧内图像亮度块预测装置及方法
WO2014006854A1 (en) * 2012-07-01 2014-01-09 Sharp Kabushiki Kaisha Device for signaling a long-term reference picture in a parameter set
TWI583195B (zh) * 2012-07-06 2017-05-11 新力股份有限公司 A solid-state imaging device and a solid-state imaging device, and an electronic device
US8833541B2 (en) 2012-10-01 2014-09-16 Illinois Tool Works Inc. Slide retract for conveyor
US9248983B2 (en) 2012-10-01 2016-02-02 Illinois Tool Works Inc. Automatically adjustable slide retract for conveyor
US9407923B2 (en) * 2013-05-20 2016-08-02 Gamefly Israel Ltd. Overconing lost IP packets in streaming video in IP networks
JP5999773B2 (ja) * 2013-09-03 2016-09-28 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
CN106416247A (zh) * 2015-12-25 2017-02-15 王晓光 视频软件的编码方法及系统
US10291936B2 (en) 2017-08-15 2019-05-14 Electronic Arts Inc. Overcoming lost or corrupted slices in video streaming
EP3474548A1 (en) * 2017-10-18 2019-04-24 Axis AB Method and encoder for encoding a video stream in a video coding format supporting auxiliary frames
US12005890B2 (en) 2022-04-01 2024-06-11 Omnivision Technologies, Inc. Column ASIL circuit for multiple bitlines in an image sensor
EP4475076B1 (en) * 2023-06-05 2025-12-31 Axis AB SYSTEM AND METHOD FOR BACKGROUND MODELING FOR A VIDEO STREAM

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6261485A (ja) 1985-09-12 1987-03-18 Fujitsu Ltd フレ−ム間予測復号化装置
EP0715469B1 (en) * 1989-10-14 2001-09-12 Sony Corporation Video signal coding/decoding method and apparatus
JPH04127689A (ja) * 1990-09-19 1992-04-28 Hitachi Ltd 動画像予測符号化方式
JPH04268892A (ja) * 1991-02-22 1992-09-24 Mitsubishi Electric Corp フレーム間適応予測符号化方式
JP2755851B2 (ja) 1991-05-31 1998-05-25 株式会社東芝 動画像符号化装置及び動画像符号化方法
US5317397A (en) 1991-05-31 1994-05-31 Kabushiki Kaisha Toshiba Predictive coding using spatial-temporal filtering and plural motion vectors
JP2699703B2 (ja) * 1991-07-31 1998-01-19 松下電器産業株式会社 動き補償予測方法とそれを用いた画像信号符号化方法
JPH0583700A (ja) * 1991-09-18 1993-04-02 Nec Corp Dpcm予測符号化回路
DE69334232D1 (de) 1992-01-29 2008-09-04 Mitsubishi Electric Corp Kodiergerät mit hoher Wirksamkeit und Vorrichtung zum Aufzeichnen/Wiedergeben von Videoinformation
US5488482A (en) 1992-01-29 1996-01-30 Mitsubishi Denki Kabushiki Kaisha High-efficiency encoder and video information recording/reproducing apparatus
JP3699132B2 (ja) 1992-01-29 2005-09-28 三菱電機株式会社 高能率符号化装置
US6870884B1 (en) 1992-01-29 2005-03-22 Mitsubishi Denki Kabushiki Kaisha High-efficiency encoder and video information recording/reproducing apparatus
JPH05268594A (ja) * 1992-03-18 1993-10-15 Sony Corp 動画像の動き検出装置
JPH06113286A (ja) 1992-09-30 1994-04-22 Matsushita Electric Ind Co Ltd 高能率符号化装置
JP3356413B2 (ja) 1992-12-14 2002-12-16 ソニー株式会社 画像復号化方法及び装置
JP3358835B2 (ja) 1992-12-14 2002-12-24 ソニー株式会社 画像符号化方法及び装置
JP2570964B2 (ja) * 1993-05-31 1997-01-16 日本電気株式会社 動画像の符号復号化装置
JPH0888854A (ja) 1994-09-20 1996-04-02 Toshiba Corp 動画像符号化方式
JP3484832B2 (ja) * 1995-08-02 2004-01-06 ソニー株式会社 記録装置、記録方法、再生装置及び再生方法
JP3711591B2 (ja) 1995-09-26 2005-11-02 ソニー株式会社 データ通信方法およびそれを使用したデータ通信装置
JPH1079738A (ja) 1996-09-03 1998-03-24 Fujitsu Ltd データ転送レート制御方法及びこれを用いたデータ転送レート制御装置
US6222886B1 (en) * 1996-06-24 2001-04-24 Kabushiki Kaisha Toshiba Compression based reduced memory video decoder
JPH1079949A (ja) * 1996-09-04 1998-03-24 Oki Electric Ind Co Ltd 画像符号化装置、画像復号化装置及び画像伝送システム
JPH10191356A (ja) * 1996-12-27 1998-07-21 Oki Electric Ind Co Ltd 画像符号化装置
JPH10200204A (ja) * 1997-01-06 1998-07-31 Fuji Xerox Co Ltd 面発光型半導体レーザ、その製造方法およびこれを用いた面発光型半導体レーザアレイ
US6370276B2 (en) 1997-04-09 2002-04-09 Matsushita Electric Industrial Co., Ltd. Image predictive decoding method, image predictive decoding apparatus, image predictive coding method, image predictive coding apparatus, and data storage media
JP3776735B2 (ja) 1997-04-09 2006-05-17 松下電器産業株式会社 画像予測復号化方法,画像予測復号化装置,画像予測符号化方法,画像予測符号化装置,及びデータ記憶媒体
JPH114448A (ja) 1997-06-13 1999-01-06 Sony Corp 画像信号送出装置及び画像信号送出方法
US5929915A (en) * 1997-12-02 1999-07-27 Daewoo Electronics Co., Ltd. Interlaced binary shape coding method and apparatus
JPH11341435A (ja) 1998-05-22 1999-12-10 Sony Corp 編集方法および編集装置
JP3879252B2 (ja) 1998-05-22 2007-02-07 ソニー株式会社 編集方法および編集装置
JPH11341496A (ja) 1998-05-28 1999-12-10 Matsushita Electric Ind Co Ltd 画像処理方法,画像処理装置,及びデータ記憶媒体
WO1999065239A2 (en) * 1998-06-11 1999-12-16 Koninklijke Philips Electronics N.V. Trick play signal generation for a digital video recorder
JP2000059790A (ja) * 1998-08-05 2000-02-25 Victor Co Of Japan Ltd 動画像符号列変換装置及びその方法
US6785338B1 (en) * 1999-01-19 2004-08-31 Sarnoff Corporation Constraining video production based on compression-related information
JP3614695B2 (ja) 1999-01-25 2005-01-26 松下電器産業株式会社 ビデオサーバ装置
JP2000224588A (ja) 1999-01-29 2000-08-11 Matsushita Electric Ind Co Ltd 画像再符号化方法および画像再符号化装置
US6625211B1 (en) * 1999-02-25 2003-09-23 Matsushita Electric Industrial Co., Ltd. Method and apparatus for transforming moving picture coding system
BRPI0216072B1 (pt) * 2001-10-17 2018-09-25 Panasonic Corp método e aparelho de decodificação de figuras móveis
JP4268892B2 (ja) 2004-03-03 2009-05-27 三菱電機株式会社 光ファイバカプラの製造方法および光ファイバカプラの製造装置
JP4127689B2 (ja) 2004-09-22 2008-07-30 株式会社東芝 無線通信装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8036281B2 (en) 2005-06-01 2011-10-11 Canon Kabushiki Kaisha Image coding apparatus and image coding method
JP2007184909A (ja) * 2005-12-05 2007-07-19 Canon Inc 画像符号化装置、画像符号化装置の制御方法、プログラム並びに記憶媒体
US8155185B2 (en) 2005-12-05 2012-04-10 Canon Kabushiki Kaisha Image coding apparatus and method
JP2008022532A (ja) * 2006-06-16 2008-01-31 Casio Comput Co Ltd 動画符号化装置および動画符号化方法と、動画復号化装置および動画復号化方法と、動画記録装置
US8699569B2 (en) 2006-06-16 2014-04-15 Casio Computer Co., Ltd. Motion picture encoding device and method, motion picture decoding device and method, motion picture recording device, program, and data structure
WO2009107849A1 (en) * 2008-02-26 2009-09-03 Canon Kabushiki Kaisha Moving image encoding apparatus and moving image encoding method
CN101960856B (zh) * 2008-02-26 2013-04-24 佳能株式会社 运动图像编码设备和运动图像编码方法
US8437395B2 (en) 2008-02-26 2013-05-07 Canon Kabushiki Kaisha Moving image encoding apparatus and moving image encoding method

Also Published As

Publication number Publication date
JP4907730B2 (ja) 2012-04-04
JP4560134B1 (ja) 2010-10-13
JP2011151835A (ja) 2011-08-04
CN101399987B (zh) 2010-12-29
JP2010259093A (ja) 2010-11-11
EP1401214A1 (en) 2004-03-24
US9924195B2 (en) 2018-03-20
US9191669B2 (en) 2015-11-17
JP4275719B2 (ja) 2009-06-10
EP1850600A2 (en) 2007-10-31
JP4560135B1 (ja) 2010-10-13
US8170103B2 (en) 2012-05-01
JP4733240B1 (ja) 2011-07-27
JP2010288315A (ja) 2010-12-24
JP4234771B2 (ja) 2009-03-04
JP2011151834A (ja) 2011-08-04
JP2011151831A (ja) 2011-08-04
US7693217B2 (en) 2010-04-06
JP4581035B1 (ja) 2010-11-17
JP4615623B2 (ja) 2011-01-19
EP1401214A4 (en) 2006-08-02
CN101494790B (zh) 2012-05-23
JP2009077454A (ja) 2009-04-09
JP2010273369A (ja) 2010-12-02
BRPI0216072B1 (pt) 2018-09-25
CN101399987A (zh) 2009-04-01
US9900616B2 (en) 2018-02-20
CN101399986B (zh) 2010-12-22
JP2010045802A (ja) 2010-02-25
CA2430919C (en) 2012-08-07
JP2010259094A (ja) 2010-11-11
US8064519B2 (en) 2011-11-22
US20100027657A1 (en) 2010-02-04
WO2003034744A1 (en) 2003-04-24
US20160037183A1 (en) 2016-02-04
MXPA03005034A (es) 2003-09-05
JP2008182730A (ja) 2008-08-07
BR0206157A (pt) 2004-01-06
JP4142929B2 (ja) 2008-09-03
US7209520B2 (en) 2007-04-24
JP2009268143A (ja) 2009-11-12
US8179966B2 (en) 2012-05-15
JP2012065352A (ja) 2012-03-29
CN101494791B (zh) 2010-12-29
JP4733241B1 (ja) 2011-07-27
JP5355807B2 (ja) 2013-11-27
US20140307792A1 (en) 2014-10-16
US20080075167A1 (en) 2008-03-27
US9197894B2 (en) 2015-11-24
BRPI0216048B1 (pt) 2018-09-25
CA2430919A1 (en) 2003-04-24
JP2010246144A (ja) 2010-10-28
CN101399986A (zh) 2009-04-01
US7580459B2 (en) 2009-08-25
US20180167633A1 (en) 2018-06-14
KR100796107B1 (ko) 2008-01-21
JP2010273368A (ja) 2010-12-02
KR20060018931A (ko) 2006-03-02
JP2013211889A (ja) 2013-10-10
JP4615624B2 (ja) 2011-01-19
US20160037182A1 (en) 2016-02-04
KR20050109630A (ko) 2005-11-21
CN1478356A (zh) 2004-02-25
KR20040020870A (ko) 2004-03-09
US10582216B2 (en) 2020-03-03
BRPI0206157B1 (pt) 2018-09-25
US7526026B2 (en) 2009-04-28
JP5401530B2 (ja) 2014-01-29
US20070116122A1 (en) 2007-05-24
JP2010246145A (ja) 2010-10-28
JP4368942B2 (ja) 2009-11-18
CN101494791A (zh) 2009-07-29
US20100074335A1 (en) 2010-03-25
US20140307791A1 (en) 2014-10-16
JP4733239B1 (ja) 2011-07-27
CN101399985A (zh) 2009-04-01
US20100027656A1 (en) 2010-02-04
CN100484248C (zh) 2009-04-29
US20090154554A1 (en) 2009-06-18
KR100766657B1 (ko) 2007-10-15
US8831100B2 (en) 2014-09-09
EP1850600A3 (en) 2008-05-14
US20190191179A1 (en) 2019-06-20
CN101399985B (zh) 2012-10-31
US10257537B2 (en) 2019-04-09
US8391361B2 (en) 2013-03-05
US20040028132A1 (en) 2004-02-12
US20070058721A1 (en) 2007-03-15
CN101494790A (zh) 2009-07-29
JP4615622B2 (ja) 2011-01-19
JP4615604B2 (ja) 2011-01-19
JP4405587B1 (ja) 2010-01-27
KR100799412B1 (ko) 2008-01-30
US20070058722A1 (en) 2007-03-15
JP2008172822A (ja) 2008-07-24

Similar Documents

Publication Publication Date Title
JP4560134B1 (ja) 動画像復号化方法および動画像復号化装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050909

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060919

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080229

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080304

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080520

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080613

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110620

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4142929

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120620

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120620

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130620

Year of fee payment: 5

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term