JPH10271507A - 画像復号化装置 - Google Patents

画像復号化装置

Info

Publication number
JPH10271507A
JPH10271507A JP6945497A JP6945497A JPH10271507A JP H10271507 A JPH10271507 A JP H10271507A JP 6945497 A JP6945497 A JP 6945497A JP 6945497 A JP6945497 A JP 6945497A JP H10271507 A JPH10271507 A JP H10271507A
Authority
JP
Japan
Prior art keywords
frame
decoding
data
reference frame
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP6945497A
Other languages
English (en)
Other versions
JP3373130B2 (ja
Inventor
Shigeru Fukunaga
茂 福永
Toshihisa Nakai
敏久 中井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP06945497A priority Critical patent/JP3373130B2/ja
Priority to DE1997638176 priority patent/DE69738176T2/de
Priority to EP19970309577 priority patent/EP0868086B1/en
Priority to US08/987,590 priority patent/US6111915A/en
Priority to KR10-1998-0004171A priority patent/KR100378337B1/ko
Priority to CN98105680A priority patent/CN1117486C/zh
Publication of JPH10271507A publication Critical patent/JPH10271507A/ja
Application granted granted Critical
Publication of JP3373130B2 publication Critical patent/JP3373130B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

(57)【要約】 【課題】 データ欠落があった場合でも、後に送信され
てくるＩフレームを待たずにＰフレームを復号可能で、
かつ画質劣化からの復帰を早める。 【解決手段】 画像復号化装置から画像符号化装置に対
し、先に受信した符号化データについての復号異常の有
無を送信することにする。これにより、画像符号化装置
は、画像復号化装置側で復号できたフレームを参照フレ
ームとする符号化を行なうことができる。また、画像復
号化装置において、今後参照画像に使用される可能性の
高いフレームを優先的に残しておくことにより、受信し
た符号化データの参照画像が、フレームメモリ内に既に
存在しないために復号化できない確率を低下させ、符号
化効率を向上させることができる。また、これにより、
画像復号化装置における参照フレームメモリサイズを必
要最小限まで制限することが可能となる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は画像復号化装置に関
する。例えば、画像伝送におけるデータ誤りや欠落等に
起因した画像品質の低下を改善する機能に関するもので
ある。
【０００２】
【従来の技術】近年、テレビ電話システム、テレビ会議
システム、ビデオオンデマンド（ＶＯＤ：Video On Dem
and ）システム等といった動画像伝送システムの実現に
向け、動画像符号化方法の国際標準化が進められてお
り、代表的な国際標準規格としてＩＴＵ−Ｔ勧告Ｈ．２
６１やＭＰＥＧ（Moving Picture Experts Group）など
が知られている。
【０００３】例えば、ＩＴＵ−Ｔ勧告Ｈ．２６１におい
ては、図２に示すように、時間順に並んだフレームを定
期的にフレーム内符号化（Ｉフレームａ，ｉ）し、その
間に並ぶＰフレーム（フレーム間符号化フレーム）（ｂ
〜ｈ，ｊ〜）については前フレームを参照画像としてフ
レーム間符号化することにより時間的な変化に係わる冗
長度の除去がなされている。以下、フレーム内符号化し
たフレームをＩフレームと呼び、フレーム間符号化した
フレームをＰフレームと呼ぶ。
【０００４】なお、かかる技術を説明した文献として、
「安田浩編著，マルチメディア符号化の国際標準，丸
善，ｐｐ８４−９７（１９９１）．」がある。
【０００５】
【発明が解決しようとする課題】ところで、Ｈ．２６１
は、前フレームを参照してフレーム間符号化を行なう符
号化方式であるため、全フレームが確実に順序良く伝送
される必要がある。従って、電話回線やＩＳＤＮ回線の
ように、相手方と回線を確立してからデータ伝送を開始
できる場合には、データが途中で欠落することなく順次
相手に届けることができるので伝送上の問題はない。
【０００６】しかし、イーサネット等のようにＬＡＮや
ＡＴＭでは回線を確立させず、小さなデータ単位（パケ
ットやセル）に分割して伝送することになるので、パケ
ットが途中で欠落したり、経路の違いから順序が入れ替
わったりする事態が生じ得る。
【０００７】一般的には、係る事態を回避するために、
送信側でパケットに通し番号を付加して伝送し、受信側
で順番を並べ変えたり、到着確認や届かなかったパケッ
トの再送要求を送信側に返送したりするプロトコル（Ｔ
ＣＰ：TransmissionControlProtocol等）を用いること
により、ネットワークの信頼性を向上させている。
【０００８】しかしながら、ネットワークが不安定でパ
ケットが頻繁に欠落するような場合には、上記プロトコ
ルを用いて再送処理を行なうと遅延が蓄積されるので、
動画像のリアルタイム伝送には不適切なこともある。特
に新しい画像データが表示可能であるのなら、古いデー
タをわざわざ再送して表示するよりも、コマ落しになっ
ても新しいデータを表示した方が良い場合もある。
【０００９】また、１回のパケット送信により同時に多
地点に向けてデータ伝送を実現する仕組みとしてブロー
ドキャストやマルチキャストがあるが、ある１地点への
伝送中にパケットの欠落が生じたからといって、上述の
プロトコルような再送処理を適用することにすると、他
の地点については、同じ内容のパケットが再送されるこ
とになるので、ネットワーク負荷が著しく上昇するとい
う問題があった。
【００１０】そこで、ブロードキャストやマルチキャス
トでは、再送処理を行なわないプロトコル（ＵＤＰ：Us
er Datagram Protocol等）を使用するのが普通になって
いる。しかしその分、パケット欠落が発生する確率は高
くなるという問題があった。
【００１１】また、無線ネットワークを利用する場合に
は、パケット分割して伝送する場合だけでなく、回線を
確立して伝送する場合でもデータの誤り率や欠落率が高
くなるという問題があった。特に受信側で誤りを検出し
ても、誤り訂正能力以上の誤りが重畳された場合は、他
の部分を正常に処理するためにある区間のデータを廃棄
する方法も採られるため、データ欠落は有線ネットワー
クと比較して大きいという問題がある。
【００１２】この他、送受信端末間の処理速度は必ずし
も一致しないという問題もある。例えば、受信端末の処
理速度の方が遅い場合、全画像フレームを復号処理して
表示すると、処理待ちのフレームデータが蓄積され、遅
延が大きくなる。そこで、このような場合には、受信側
が適応的にコマ落しをする必要があるが、従来のフレー
ム間符号化を採用している場合は、前フレームの復号デ
ータがないと現フレームは復号できないので、コマ落し
が自由に行なえないという問題があった。
【００１３】例えば、図３のように、フレームｅに途中
でデータ欠落が生じたり、処理が間に合わずに復号でき
ない事態が生じると、次のＩフレームｉが到着するまで
は、その間のＰフレーム（ｆ，ｇ，ｈ）は正常に復号で
きなかった。
【００１４】そこで、従来はこのようにデータ欠落やコ
マ落しが頻繁に発生するネットワークにおいては、全フ
レームを確実に伝送するため、全フレームをフレーム内
符号化だけで伝送する方式が有効とされるが、かかる場
合には、フレーム間符号化を行なわないため時間的な冗
長度の削減が期待できず、データ伝送効率が悪化する問
題があった。
【００１５】以上のことから、データ欠落等が頻繁に発
生するようなネットワークを介して動画像を伝送する場
合にも、符号化効率の低下が見られず、しかも、画質劣
化からの復帰が早い画像符号化方式が望まれている。
【００１６】
【問題を解決するための手段】かかる問題を解決するた
め、本発明においては、予測符号化されてなる符号化デ
ータとその参照画像のフレーム番号（またはフレーム番
号とブロック番号）を伝送路を介して受信する受信手段
と、その受信手段によって受信された符号化データをそ
の参照画像のフレーム番号（またはフレーム番号とブロ
ック番号）が示す参照画像を用いて復号する復号化手段
と、復号化手段における各符号化データの復号結果を表
す復号異常有無信号とともに、その符号化データに対応
するフレーム番号（またはフレーム番号とブロック番
号）を画像符号化装置へ出力する復号異常有無信号送信
手段とを有する画像復号化装置において、以下のように
したことを特徴とする。
【００１７】すなわち、過去に参照画像として使用され
た画像のうち、最新のフレーム（またはブロック）を、
優先してフレームメモリ内に消去せずに残す参照フレー
ム選択消去手段を備えたことを特徴とする。
【００１８】また、本発明においては、画像符号化装置
として、参照画像を基準に、入力画像を順次予測符号化
して出力する符号化手段と、当該符号化手段で符号化さ
れた符号化データとその参照画像のフレーム番号（また
はフレーム番号とブロック番号）を画像復号化装置へ送
信する送信手段と、画像復号化装置から通知される復号
異常有無信号、そのフレーム番号（またはフレーム番号
とブロック番号）に基づいて、参照画像の更新を制御す
る参照画像更新手段とを有することを特徴とする画像符
号化装置を使用するものとする。
【００１９】このように、画像復号化装置において、今
後参照画像に使用される可能性の高いフレーム（または
ブロック）を優先的に残しておくことにより、受信した
符号化データの参照画像がメモリ内に既に存在しないた
めに復号化できない確率が低下し、符号化効率が向上す
る。
【００２０】また、最適なフレーム（またはブロック）
だけをメモリに記憶するため、画像復号化装置における
参照フレームメモリサイズを必要最小限まで制限するこ
とが可能となる。
【００２１】
【発明の実施の形態】
（Ａ）第１の実施形態 以下、第１の実施形態に係る動画像復号化装置（受信
側）の構成、動作及び効果について、図面を参照しなが
ら説明する。
【００２２】ここで、本発明では、参照画像の更新処理
を、フレーム単位、またはフレームを複数の領域に分割
したブロック単位で実現する。フレーム単位で処理を行
なう場合には、復号異常有無信号をフレームごとに返送
し、参照画像をフレームごとに更新する。また、ブロッ
ク単位で処理を行なう場合には、復号異常有無信号をブ
ロックごとに返送し、参照画像をブロックごとに更新す
る。なお、以下の説明では、フレーム単位の場合のみを
説明している部分があるが、ブロック単位でも同様に構
成・動作する。
【００２３】（Ａ−１）第１の実施形態の特徴 この第１の実施形態に係る動画像復号化装置（受信側）
の特徴は、復号化側で過去に参照画像に使用された画像
のうち最新のフレーム（またはブロック）（以後、最新
参照フレームと呼ぶ）を優先してフレームメモリに残す
ようにした点である。
【００２４】（Ａ−２）第１の実施形態の構成 図１に、第１の実施形態に係る動画像復号化装置（受信
側）１００の機能構成例を示す。
【００２５】この図において、動画像復号化装置（受信
側）１００は、復号データ受信部１０１と、参照フレー
ム比較部１０２と、参照フレーム更新部１０３と、参照
フレームメモリ部１０４と、フレームメモリ部１０５
と、参照フレーム選択消去部１０６と、復号化部１０７
と、確認信号送信部１０８と、動画像出力部１０９と、
リフレッシュ信号送信部１１０とから構成されている。
【００２６】符号データ受信部１０１は、符号化された
動画像データを送信側の動画像符号化装置から受信する
手段であり、符号データとデータに多重されているintr
a/inter を表すフラグや参照フレーム番号などを復号化
部１０７へ渡し、必要に応じて多重されている送信元情
報なども復号化部１０７へ渡す。また、参照フレーム番
号を参照フレーム比較部１０２へ渡す。
【００２７】参照フレーム比較部１０２は、フレームご
と（またはブロックごと）に受信した参照フレーム番号
と、参照フレームメモリ部１０４に記憶されている自端
末の参照フレーム番号を比較し、参照フレーム番号が異
なる場合は、参照フレーム更新部１０３へ参照フレーム
更新要求を通知し、新しい参照フレーム番号を渡す。
【００２８】参照フレーム更新部１０３は、参照フレー
ム比較部１０２から更新要求を受けると、フレームメモ
リ部１０５から新しい参照フレーム番号のフレームデー
タ（またはブロックデータ）を読み込み、参照フレーム
メモリ部１０４へフレーム番号とともに書き込み更新す
る。また、参照フレーム番号を参照フレーム選択消去部
１０６へ渡す。
【００２９】参照フレームメモリ部１０４は、フレーム
間復号に使用する参照フレームデータを記憶するメモリ
回路などの媒体であり、参照フレーム更新部１０３と復
号化部１０７によって更新される。
【００３０】フレームメモリ部１０５は、復号したフレ
ームデータ（またはブロックデータ）を記憶するメモリ
回路などの媒体であり、復号化部１０７によって新しく
復号されたフレーム（またはブロック）データが書き込
まれ、参照フレーム選択消去部１０６によって適宜消去
される。また、どのフレーム（またはブロック）が最新
参照フレームであるかを管理する。
【００３１】参照フレーム選択消去部１０６は、最新参
照フレームを優先的にフレームメモリ部１０５に残す手
段である。すなわち、参照フレーム更新部１０３から受
けた参照フレーム番号をもとに最新参照フレームを管理
し、最新参照フレームよりも古いフレーム（またはブロ
ック）をフレームメモリ部１０５から消去する。最新参
照フレームは更新されるまで、消去しない。
【００３２】復号化部１０７は、入力された符号データ
を復号化する手段であり、復号データを動画像出力部１
０９へ送る。復号に際して、Ｉフレームの場合は復号デ
ータをフレーム番号とともに参照フレームメモリ部１０
４とフレームメモリ部１０５へ書き込み参照フレーム画
像を更新する。またＰフレームの場合は、参照フレーム
メモリ部１０４のデータを参照して復号し、復号データ
をフレーム番号とともにフレームメモリ部１０５へ書き
込む。また、ＣＲＣなどによる伝送誤りを検出した場合
や、参照フレームデータが参照フレームメモリ１０４に
存在せず画像データを復号できなかった場合など、復号
異常があった場合は、参照フレームメモリ部１０４やフ
レームメモリ部１０５への書き込みは行なわない。
【００３３】確認信号送信部１０８は、どのフレームを
復号できたかの確認信号を送信側の動画像符号化装置へ
送信する手段である。
【００３４】動画像出力部１０９は、復号化部１０７か
ら受けた復号データをモニタ用の表示装置などに出力す
る手段である。
【００３５】リフレッシュ信号送信部１１０は、ユーザ
からのリフレッシュ要求に従い、送信側の動画像符号化
装置へリフレッシュ信号を送信する手段である。
【００３６】（Ａ−３）第１の実施形態の動作 次に、第１の実施形態に係る動画像復号化装置（受信
側）の動作を説明する。
【００３７】図４に、復号異常なしの信号（ＡＣＫ）に
起因して参照フレームを更新する方法において、第１の
実施形態に係る参照フレーム選択消去手段１０６を利用
しない場合の動作例を示す。ここでは、フレームメモリ
部１０５が３フレームを記録できるメモリを有する場合
の例を示す。
【００３８】正常に復号できたフレーム（ａ，ｂ，ｃ，
ｄ）を、復号後にフレームメモリ部１０５に記録する。
また、フレームメモリ部１０５が全部記録されている状
態の時には、最も古いフレームを消去してから新しいフ
レームを記録する。例えば、フレームｄを記録する場合
は、フレームａを消去する。フレームａを消去する動作
を省略して、直接フレームａの上にフレームｄを上書き
しても良い。伝送誤りや復号異常があったフレームe
は、フレームメモリ部１０５に記録しない。
【００３９】参照フレーム選択消去手段１０６を使用し
ない場合は、復号異常なしの信号（ＡＣＫ）に誤りが連
続して発生した場合に問題が発生する。フレームｆ、ｇ
は正常復号できたので、フレームメモリ部１０５に記録
するが、動画像符号化装置へ返送した復号異常なしの信
号（ＡＣＫ）に誤りが発生したため、フレームｆ、ｇは
参照フレームとして利用されない。
【００４０】次のフレームｈも正常復号でき、フレーム
メモリ部１０５に記録するが、この時フレームｄを消去
してしまう。次のフレームｉでは、正常に受信したにも
関わらず、参照フレームｄを既にフレームメモリ部１０
５から消去しているため、復号できない。
【００４１】このように、復号異常有無信号の誤りが連
続すると、必要な参照フレームを消去してしまう可能性
があり、符号化効率が低下する。
【００４２】図５に、復号異常なしの信号（ＡＣＫ）に
起因して参照フレームを更新する方法において、第１の
実施形態に係る参照フレーム選択消去手段１０６を利用
した場合の動作例を示す。ここでは、フレームメモリ部
１０５が３フレームを記録できるメモリを有する場合の
例を示す。
【００４３】正常に復号できたフレーム（ａ，ｂ，ｃ，
ｄ）を、復号後にフレームメモリ部１０５に記録する。
この時、最新参照フレームにはフラグを立てたり、ポイ
ンタで示すなどして、特別に管理する。図５では、フレ
ーム記号に丸印を付加している。
【００４４】フレームメモリ部１０５が全部記録されて
いる状態の時に、新しいフレームを記録する場合は、最
新参照フレーム以外で最も古いフレームを消去してから
新しいフレームを記録する。例えば、フレームｄを記録
する場合は、フレームａを消去する。フレームａを消去
する動作を省略して、直接フレームａの上にフレームｄ
を上書きしても良い。
【００４５】伝送誤りや復号異常があったフレームｅ
は、フレームメモリ部に記録しない。また、復号異常の
あった場合は、最新参照フレームを一時的に無効にす
る。図５では、フレームｅの時点で、丸印を消去してい
る。これは、復号異常が発生すると、それまでの最新参
照フレームｂを残しておくべきかどうかが、判定できな
くなるためである。ただし、最新参照フレームをｂのま
まにしていても問題は発生しない。
【００４６】復号異常なしの信号（ＡＣＫ）に誤りが連
続して発生した場合でも問題は発生しない。フレーム
ｆ、ｇは正常復号できたので、フレームメモリ部１０５
に記録するが、動画像符号化装置へ返送した復号異常な
しの信号（ＡＣＫ）に誤りが発生したため、フレーム
ｆ、ｇは参照フレームとして利用されない。この間、参
照フレームはフレームｄのままなので、最新参照フレー
ムとしてフレームｄをフレームメモリ部１０５から消去
しない。従って、その後のフレームｈ、ｉも正常に復号
できる。
【００４７】図６に、復号異常なしの信号（ＡＣＫ）と
復号異常有りの信号（ＮＡＣＫ）とを両方用い、更新モ
ードを切替えながら参照フレームを更新する方法におい
て、第１の実施形態に係る参照フレーム選択消去手段１
０６を利用した場合の動作例を示す。ここでも、フレー
ムメモリ部１０５が３フレームを記録できメモリを有す
る場合の例を示す。
【００４８】フレームａ〜ｄとフレームｋ以降はＮＡＣ
Ｋに起因するモード、フレームｅ〜ｊはＡＣＫに起因す
るモードである。図６では、符号化側がＮＡＣＫ信号を
受信するか、どちらの信号も受信しない場合にＡＣＫモ
ードに切り替わり、ＡＣＫ信号を２つ連続で受信した場
合にＮＡＣＫモードに切り替わる例を示している。
【００４９】復号異常なしの信号（ＡＣＫ）に起因する
例と同様に、正常に復号できたフレームを、復号後にフ
レームメモリ部１０５に記録し、最新参照フレームを管
理する。また、伝送誤りがあったフレームｅ，ｈや、参
照フレームがなくて復号できなかったフレームｆは、フ
レームメモリ部に記録せず、最新参照フレームを一時的
に無効にする。
【００５０】復号異常なしの信号（ＡＣＫ）に誤りが連
続して発生した場合でも問題は発生しない。フレーム
ｉ、ｊは正常復号できたので、フレームメモリ部１０５
に記録するが、動画像符号化装置へ返送した復号異常な
しの信号（ＡＣＫ）に誤りが発生したため、フレーム
ｉ、ｊは参照フレームとして利用されない。この間、参
照フレームはフレームｇのままなので、最新参照フレー
ムとしてフレームｇをフレームメモリ部１０５から消去
しない。従って、その後のフレームｋ、ｌも正常に復号
でき、そのままＮＡＣＫモードへ移行することができ
る。
【００５１】（Ａ−４）第１の実施形態の効果 以上のように、第１の実施形態によれば、最新参照フレ
ーム（またはブロック）を優先してフレームメモリ部に
残すように制御するので、復号異常有無信号に連続して
誤りが発生した時でも、必要な参照フレームを消去して
しまう可能性が低くなり、符号化効率が向上する。
【００５２】また、最適なフレーム（またはブロック）
だけをメモリに記憶するため、画像復号化装置における
参照フレームメモリサイズを必要最小限まで制限するこ
とが可能となる。
【００５３】（Ａ−５）第１の実施形態の変形例 図１では、参照フレームメモリ部１０４とフレームメモ
リ部１０５を別々に分けて構成したが、このような構成
に限定するものではない。一つのメモリ上にフレームデ
ータを書き込み、参照フレームはメモリ位置を示すポイ
ンタ等で表すようにしても好ましい。この場合に、参照
フレーム更新時にフレームメモリ部１０５から参照フレ
ームメモリ部１０４へデータをコピーする必要がなく、
ポインタを移動させるだけで実現できるので、回路構成
を簡単にすることができる。
【００５４】（Ｂ）他の利用形態 （１）上述の各実施形態において説明した動画像復号化
装置は、ハードウェアによって実現してもソフトウェア
によって実現しても良い。
【００５５】（２）また、上述の各実施形態において
は、被伝送データを動画像データとして説明したが、被
伝送データは、音声データであっても、２値データであ
っても良い。
【００５６】
【発明の効果】以上のように、本発明によれば、画像復
号化装置から画像符号化装置に対して、復号異常有無信
号とフレーム番号（またはフレーム番号とブロック番
号）とを送信させることにし、一方、画像符号化装置側
では、当該復号異常有無信号及びフレーム番号（または
フレーム番号とブロック番号）に基づいて、参照画像の
更新を制御させるようにしたことにより、符号化データ
を送信する伝送路が、伝送誤りの少ない伝送品質の高い
伝送路である場合には高画質を維持でき、伝送誤りの多
い伝送品質の低い伝送路である場合には、後に送られて
くるＩフレームを待たずにＰフレームを復号できるよう
になる。
【００５７】また、画像復号化装置において、参照フレ
ームメモリを効率良く制御することにより、必要な参照
フレーム（またはブロック）の消去される確率を低下
し、符号化効率を向上させることができる。また、最適
なフレーム（またはブロック）だけをメモリに記憶する
ため、画像復号化装置における参照フレームメモリサイ
ズを必要最小限まで制限することが可能となる。
【図面の簡単な説明】
【図１】第１の実施形態の動画像復号化装置（受信側）
の機能構成例を示すブロック図である。
【図２】従来の符号化動作例を示す概念図である。
【図３】従来の伝送誤り発生時の符号化動作例を示す概
念図である。
【図４】第１の実施形態の参照フレーム選択消去手段を
利用しない場合の動作例を示す概念図である。
【図５】第１の実施形態の参照フレーム選択消去手段を
利用した場合の動作例を示す概念図（１）である。
【図６】第１の実施形態の参照フレーム選択消去手段を
利用した場合の動作例を示す概念図（２）である。
【符号の説明】
１００・・動画像復号化装置、１０１・・符号データ受
信部、１０２・・参照フレーム比較部、１０３・・参照
フレーム更新部、１０４・・参照フレームメモリ部、１
０５・・フレームメモリ部、１０６・・参照フレーム選
択消去部、１０７・・復号化部、１０８・・確認信号送
信部、１０９・・動画像出力部、１１０・・リフレッシ
ュ信号送信部。

Claims (2)

    【特許請求の範囲】
  1. 【請求項１】 予測符号化されてなる符号化データと当
    該予測符号化に用いる参照フレームの参照フレーム番号
    を伝送路を介して受信する受信手段と、当該受信手段に
    よって受信された符号化データをその参照フレーム番号
    が示すフレームデータを用いて復号する復号化手段と、
    当該復号化手段における各符号化データの復号結果を表
    す復号異常有無信号と共に、当該符号化データに対応す
    るフレーム番号を画像符号化装置へ出力する復号異常有
    無信号送信手段とを有する画像復号化装置において、 前記復号化手段で正常に復号された複数のフレームデー
    タを記録し、過去において参照フレームとして使用され
    たフレームのうち最も新しいフレームを最新参照フレー
    ムとして管理するフレームデータ記録手段と、 前記フレームデータ記録手段のフレームデータを消去す
    る必要が生じた時に、最新参照フレーム以外で最も古い
    フレームを選択して消去する参照フレーム選択消去手段
    とを備えたことを特徴とする画像復号化装置。
  2. 【請求項２】 フレームをブロックに分割し、当該ブロ
    ック毎に予測符号化されてなる符号化データと当該予測
    符号化に用いる参照フレームの参照フレーム番号および
    ブロック番号を伝送路を介して受信する受信手段と、当
    該受信手段によって受信された符号化データをその参照
    フレーム番号およびブロック番号が示すブロックデータ
    を用いて復号する復号化手段と、当該復号化手段におけ
    る各符号化データの復号結果を表す復号異常有無信号と
    共に、当該符号化データに対応するフレーム番号および
    ブロック番号を画像符号化装置へ出力する復号異常有無
    信号送信手段とを有する画像復号化装置において、 前記復号化手段で正常に復号された複数のフレームデー
    タをブロック毎に記録し、過去において参照フレームと
    して使用されたフレームのうち最も新しいフレームをブ
    ロック毎に最新参照フレームとして管理するフレームデ
    ータ記録手段と、 前記フレームデータ記録手段のフレームデータを消去す
    る必要が生じた時に、ブロック毎に最新参照フレーム以
    外で最も古いフレームの当該ブロックを選択して消去す
    る参照フレーム選択消去手段とを備えたことを特徴とす
    る画像復号化装置。
JP06945497A 1997-03-24 1997-03-24 画像復号化装置 Expired - Fee Related JP3373130B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP06945497A JP3373130B2 (ja) 1997-03-24 1997-03-24 画像復号化装置
DE1997638176 DE69738176T2 (de) 1997-03-24 1997-11-27 Videodekodierer
EP19970309577 EP0868086B1 (en) 1997-03-24 1997-11-27 Video decoder
US08/987,590 US6111915A (en) 1997-03-24 1997-12-09 Picture decoder
KR10-1998-0004171A KR100378337B1 (ko) 1997-03-24 1998-02-12 화상복호화장치
CN98105680A CN1117486C (zh) 1997-03-24 1998-03-23 图象解码器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP06945497A JP3373130B2 (ja) 1997-03-24 1997-03-24 画像復号化装置

Publications (2)

Publication Number Publication Date
JPH10271507A true JPH10271507A (ja) 1998-10-09
JP3373130B2 JP3373130B2 (ja) 2003-02-04

Family

ID=13403119

Family Applications (1)

Application Number Title Priority Date Filing Date
JP06945497A Expired - Fee Related JP3373130B2 (ja) 1997-03-24 1997-03-24 画像復号化装置

Country Status (6)

Country Link
US (1) US6111915A (ja)
EP (1) EP0868086B1 (ja)
JP (1) JP3373130B2 (ja)
KR (1) KR100378337B1 (ja)
CN (1) CN1117486C (ja)
DE (1) DE69738176T2 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003065733A1 (en) * 2002-02-01 2003-08-07 Matsushita Electric Industrial Co., Ltd. Moving image coding method and moving image decoding method
US6621868B1 (en) 1998-03-02 2003-09-16 Nippon Telegraph And Telephone Corporation Video communication system and video communication method
WO2004008774A1 (ja) * 2002-07-11 2004-01-22 Matsushita Electric Industrial Co., Ltd. 画像符号化方法及び画像復号化方法
JP2004274694A (ja) * 2002-07-11 2004-09-30 Matsushita Electric Ind Co Ltd 画像符号化方法及び画像復号化方法
WO2006112139A1 (ja) * 2005-04-13 2006-10-26 Sharp Kabushiki Kaisha 動画像再生装置
JP2009518956A (ja) * 2005-12-07 2009-05-07 マイクロソフト コーポレーション メディアエンコーダおよびデコーダの間のフィードバックおよびフレーム同期
AU2008200669B2 (en) * 2002-02-01 2010-05-13 Godo Kaisha Ip Bridge 1 Moving picture coding method and moving picture decoding method
WO2012114774A1 (ja) * 2011-02-25 2012-08-30 パナソニック株式会社 動画像符号化装置および動画像復号装置

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3606306B2 (ja) * 1998-10-08 2005-01-05 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
US6658618B1 (en) * 1999-09-02 2003-12-02 Polycom, Inc. Error recovery method for video compression coding using multiple reference buffers and a message channel
GB2362531A (en) * 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Indicating the temporal order of reference frames in a video sequence
EP1176833A3 (en) * 2000-07-25 2012-06-27 Panasonic Corporation Image decoding method, image decoding apparatus, and data storage medium
US6941343B2 (en) 2001-06-02 2005-09-06 Polycom, Inc. System and method for point to point integration of personal computers with videoconferencing systems
JP4355156B2 (ja) 2002-04-16 2009-10-28 パナソニック株式会社 画像復号化方法及び画像復号化装置
JP4414904B2 (ja) * 2004-04-16 2010-02-17 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、及び動画像復号プログラム
WO2005112449A1 (en) * 2004-04-30 2005-11-24 Worldgate Service, Inc. Adaptive video telephone system
US20060083298A1 (en) * 2004-10-14 2006-04-20 Nokia Corporation Reference picture management in video coding
JP2008177907A (ja) 2007-01-19 2008-07-31 Fujitsu Ltd 動画データ復号装置、情報機器、動画データ復号方法および動画データ復号プログラム
US8494049B2 (en) * 2007-04-09 2013-07-23 Cisco Technology, Inc. Long term reference frame management with error video feedback for compressed video communication
US7898443B2 (en) * 2007-12-05 2011-03-01 Qualcomm Incorporated Apparatus and methods using a linear memory model for encoder output buffers
US20090279614A1 (en) * 2008-05-10 2009-11-12 Samsung Electronics Co., Ltd. Apparatus and method for managing reference frame buffer in layered video coding
US8693793B2 (en) * 2012-01-19 2014-04-08 Sharp Laboratories Of America, Inc. Reducing reference picture set signal overhead on an electronic device
US8867852B2 (en) * 2012-01-19 2014-10-21 Sharp Kabushiki Kaisha Decoding a picture based on a reference picture set on an electronic device
CN110636333A (zh) * 2019-08-19 2019-12-31 西安万像电子科技有限公司 丢帧处理方法及装置
CN113573063B (zh) * 2021-06-16 2024-06-14 百果园技术(新加坡)有限公司 视频编解码方法及装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE22767T1 (de) * 1982-07-23 1986-10-15 British Telecomm Uebertragung von daten.
JPH0490648A (ja) * 1990-08-06 1992-03-24 Fujitsu Ltd 符号化送信方式
JPH04167862A (ja) * 1990-10-31 1992-06-15 Fujitsu Ltd ファクシミリ装置
KR0148130B1 (ko) * 1992-05-18 1998-09-15 강진구 블럭킹아티팩트를 억제시키는 부호화/복호화 방법 및 그 장치
US5497404A (en) * 1992-07-14 1996-03-05 General Instrument Corporation Transmission error recovery for digital communication systems using variable length data packets where data is stored in header locations of memory
US5268961A (en) * 1992-08-20 1993-12-07 General Electric Co. Error control apparatus for a digital video signal processing system
JPH07250196A (ja) * 1994-03-08 1995-09-26 Ricoh Co Ltd ファクシミリ装置の画像蓄積方法
US5623311A (en) * 1994-10-28 1997-04-22 Matsushita Electric Corporation Of America MPEG video decoder having a high bandwidth memory
US5774206A (en) * 1995-05-10 1998-06-30 Cagent Technologies, Inc. Process for controlling an MPEG decoder
US5568200A (en) * 1995-06-07 1996-10-22 Hitachi America, Ltd. Method and apparatus for improved video display of progressively refreshed coded video
JP3068002B2 (ja) * 1995-09-18 2000-07-24 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
US6038000A (en) * 1997-05-28 2000-03-14 Sarnoff Corporation Information stream syntax for indicating the presence of a splice point

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6621868B1 (en) 1998-03-02 2003-09-16 Nippon Telegraph And Telephone Corporation Video communication system and video communication method
US7664179B2 (en) 2002-02-01 2010-02-16 Panasonic Corporation Moving picture coding method and moving picture decoding method
US8737473B2 (en) 2002-02-01 2014-05-27 Panasonic Corporation Moving picture coding method and moving picture decoding method
US8396132B2 (en) 2002-02-01 2013-03-12 Panasonic Corporation Moving picture coding method and moving picture decoding method
US7936825B2 (en) 2002-02-01 2011-05-03 Panasonic Corporation Moving image coding method and moving image decoding method
WO2003065733A1 (en) * 2002-02-01 2003-08-07 Matsushita Electric Industrial Co., Ltd. Moving image coding method and moving image decoding method
AU2003208086B2 (en) * 2002-02-01 2007-11-15 Godo Kaisha Ip Bridge 1 Moving picture coding method and moving picture decoding method
AU2008200669B2 (en) * 2002-02-01 2010-05-13 Godo Kaisha Ip Bridge 1 Moving picture coding method and moving picture decoding method
US7715478B2 (en) 2002-02-01 2010-05-11 Panasonic Corporation Moving picture coding method and moving picture decoding method
KR100944552B1 (ko) * 2002-02-01 2010-02-25 파나소닉 주식회사 동화상 부호화 방법, 동화상 부호화 장치 및 데이터 기억매체
US7664178B2 (en) 2002-02-01 2010-02-16 Panasonic Corporation Moving picture coding method and moving picture decoding method
KR100926845B1 (ko) 2002-02-01 2009-11-13 파나소닉 주식회사 동화상 복호화 방법, 동화상 복호화 장치 및 데이터 기억 매체
JP2010283878A (ja) * 2002-07-11 2010-12-16 Panasonic Corp 画像復号化方法及び画像復号化装置
JP2012124949A (ja) * 2002-07-11 2012-06-28 Panasonic Corp 画像符号化方法、画像符号化装置、及び画像符号化信号
US9412177B2 (en) 2002-07-11 2016-08-09 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
JP2008172821A (ja) * 2002-07-11 2008-07-24 Matsushita Electric Ind Co Ltd 画像復号化方法および画像復号化装置
AU2003281129B2 (en) * 2002-07-11 2007-12-06 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
KR100959969B1 (ko) * 2002-07-11 2010-05-27 파나소닉 주식회사 화상 부호화 방법 및 화상 복호화 방법
US7206347B2 (en) 2002-07-11 2007-04-17 Matsushita Electric Industrial Co., Ltd. Image coding method and image decoding method
JP2010283880A (ja) * 2002-07-11 2010-12-16 Panasonic Corp 画像復号化方法及び画像符号化信号
US9390512B2 (en) 2002-07-11 2016-07-12 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
US7995658B2 (en) 2002-07-11 2011-08-09 Panasonic Corporation Picture encoding method and picture decoding method
US8073059B2 (en) 2002-07-11 2011-12-06 Panasonic Corporation Picture encoding method and picture decoding method
US8155206B2 (en) 2002-07-11 2012-04-10 Panasonic Corporation Picture encoding method and picture decoding method
US8189680B2 (en) 2002-07-11 2012-05-29 Panasonic Corporation Picture encoding method and picture decoding method
JP2009153175A (ja) * 2002-07-11 2009-07-09 Panasonic Corp 画像復号化方法及び画像復号化装置
US9094666B2 (en) 2002-07-11 2015-07-28 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
JP2004274694A (ja) * 2002-07-11 2004-09-30 Matsushita Electric Ind Co Ltd 画像符号化方法及び画像復号化方法
JP2014014143A (ja) * 2002-07-11 2014-01-23 Panasonic Corp 画像符号化復号化方法および画像符号化復号化装置
JP2014014142A (ja) * 2002-07-11 2014-01-23 Panasonic Corp 画像符号化復号化方法および画像符号化復号化装置
JP2014014144A (ja) * 2002-07-11 2014-01-23 Panasonic Corp 画像符号化復号化方法および画像符号化復号化装置
US8660192B2 (en) 2002-07-11 2014-02-25 Panasonic Corporation Picture encoding method and picture decoding method
WO2004008774A1 (ja) * 2002-07-11 2004-01-22 Matsushita Electric Industrial Co., Ltd. 画像符号化方法及び画像復号化方法
US9088782B2 (en) 2002-07-11 2015-07-21 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
US9088781B2 (en) 2002-07-11 2015-07-21 Panasonic Intellectual Proeprty Corporation Of America Picture encoding method and picture decoding method
US9088783B2 (en) 2002-07-11 2015-07-21 Panasonic Intellectual Property Corporation Of America Picture encoding method and picture decoding method
WO2006112139A1 (ja) * 2005-04-13 2006-10-26 Sharp Kabushiki Kaisha 動画像再生装置
JP2009518956A (ja) * 2005-12-07 2009-05-07 マイクロソフト コーポレーション メディアエンコーダおよびデコーダの間のフィードバックおよびフレーム同期
WO2012114774A1 (ja) * 2011-02-25 2012-08-30 パナソニック株式会社 動画像符号化装置および動画像復号装置

Also Published As

Publication number Publication date
DE69738176D1 (de) 2007-11-15
KR19980079714A (ko) 1998-11-25
CN1194503A (zh) 1998-09-30
EP0868086B1 (en) 2007-10-03
DE69738176T2 (de) 2008-07-24
US6111915A (en) 2000-08-29
CN1117486C (zh) 2003-08-06
JP3373130B2 (ja) 2003-02-04
EP0868086A1 (en) 1998-09-30
KR100378337B1 (ko) 2003-05-16

Similar Documents

Publication Publication Date Title
JPH10271507A (ja) 画像復号化装置
US6049570A (en) Picture coder
JP3068002B2 (ja) 画像符号化装置、画像復号化装置及び画像伝送システム
JPH1079949A (ja) 画像符号化装置、画像復号化装置及び画像伝送システム
CA2666861C (en) Reducing channel-change time
KR100945548B1 (ko) 비디오 오류 회복
EP1312222A1 (en) Video coding
US8160152B2 (en) Moving image decoding apparatus and moving image coding apparatus
KR100374245B1 (ko) 화상부호화장치,화상복호화장치및화상전송시스템
US20040249980A1 (en) System, computer program product, and method for transmitting compressed screen images from one computer to another or many computers.
JPH02162887A (ja) 画像伝送誤り訂正方式
JPH1198128A (ja) データ伝送装置
JPH10126772A (ja) 動画像データ転送方法
JP3323057B2 (ja) 符号化装置、復号化装置及び伝送システム
JP3591712B2 (ja) 動画送信装置及び動画受信装置
JP2005033556A (ja) データ送信装置、データ送信方法、データ受信装置、データ受信方法
EP0902593B1 (en) Video coder, decoder and transmission system
JP4427912B2 (ja) ビデオパケットの受信復号システムおよび送信システム
JPH1118086A (ja) 画像通信方法および装置
JP2001086153A (ja) データ通信装置、データ通信システム、データ通信方法及び記憶媒体
KR100670220B1 (ko) 부호화장치,복호화장치및전송시스템
JP2006279436A (ja) マルチメディア通信システムおよび再送用データ削除方法
WO2026005660A1 (en) Video decoding adaptation for jitter
HK1088161B (en) Video error resilience

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20021105

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081122

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081122

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091122

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091122

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101122

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101122

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111122

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees