JPH1155672A - 動画像符号化装置および動画像復号化装置および動画像符号化方法および動画像復号化方法 - Google Patents
動画像符号化装置および動画像復号化装置および動画像符号化方法および動画像復号化方法Info
- Publication number
- JPH1155672A JPH1155672A JP21027897A JP21027897A JPH1155672A JP H1155672 A JPH1155672 A JP H1155672A JP 21027897 A JP21027897 A JP 21027897A JP 21027897 A JP21027897 A JP 21027897A JP H1155672 A JPH1155672 A JP H1155672A
- Authority
- JP
- Japan
- Prior art keywords
- area
- image
- region
- shape
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
ることなく、符号化データの発生量を低減する。 【解決手段】 入力画像信号1は、領域分割部2に入力
される。外部メモリから取り出された1フレーム前の領
域形状を初期領域形状として、入力画像信号1は複数の
領域に分割される。領域分割部2は、各領域のアクティ
ビティ等に基づいて領域の再分割を行い、1領域とその
近傍領域との間の符号化コストを低減するように統合処
理を行う。領域分割部2が決定した領域形状情報3等は
符号化部7において符号化されるとともに、ビットスト
リーム11に変換される。符号化部7は局所復号画像8
を出力し、外部メモリ9に書き込む。局所復号画像8
は、領域分割処理及び符号化処理の参照画像10として
利用される。領域形状情報3も外部メモリ9に書き込ま
れる。領域形状情報3は領域分割処理において利用され
る。
Description
る技術に関する。特に、対象物の動きを予測して符号化
を行う予測符号化に関する。
Tの勧告H.263に基づく動画像符号化装置の構成を示すブ
ロック図である。同図において、1は入力画像、101
は差分器、102は予測信号、103は予測誤差信号、
104は符号化部、105は符号化データ、106は復
号部、107は復号された予測誤差信号、108は加算
器、109は局所復号画像信号、110はメモリ、11
1は予測部、112は動きベクトル、をそれぞれ表す。
01に入力される。差分器101は、この入力画像1と
後述する予測信号102との差分をとり、それを予測誤
差信号103として出力する。符号化部104は、入力
画像1または予測誤差信号103を符号化して符号化デ
ータ105を出力する。符号化部104における符号化
の方法としては、予測誤差信号103を直交変換の一種
であるDCT(DiscreteCosine Transformation : 離散コ
サイン変換)を用いて空間領域から周波数領域に変換
し、DCTによって得られた変換係数を線形量子化する手
法が採用されている。
タ105は2つに分岐され、一方は図示しない受信側復
号化装置に向けて送出され、他方は本装置内の復号部1
06に入力される。復号部106は、符号化部104と
逆の動作を行い、符号化データより復号予測誤差信号1
07を求めて出力する。加算器108は、復号予測誤差
信号107を予測信号102に加算することにより復号
画像信号109を求め、出力する。予測部111は、符
号化すべき入力画像1とメモリ110に蓄えられた1フ
レーム前の復号画像信号109とを用いて動き補償予測
を行い、予測信号123と動きベクトル112を出力す
る。このとき動き補償はマクロブロックと呼ばれる16
×16画素からなる固定サイズのブロック単位で行われ
る。さらに動きの激しい領域に位置するブロックに対し
ては、オプショナルな機能として、マクロブロックを4
分割した8×8画素のサブブロック単位で動き補償予測
を行う機能がある。このようにして求められた動きベク
トル112は図示しない受信側復号化装置に向かって送
出され、予測信号102は前記差分器101および加算
器108に送られる。
号化装置の構成図である。この装置は、L.C.Realらによ
る A Very Low Bit Rate Video Coder Based on Vecto
r Quantization (IEEE Trans. on Image Processing,
VOL.5, NO.2, Feb.1996)で提案された符号化方式に基づ
く。同図において、113は領域分割部、114は予測
部、115は領域決定部、116は符号化モード情報、
117は動きベクトル、118は符号化部、119は符
号化データ、をそれぞれ表す。
をまず領域分割部113において複数の領域に分割す
る。領域分割部113では、動き補償予測誤差に基づい
た領域形状の決定を行っており、あらかじめ用意した1
0種類のブロックサイズ4×4, 4×8, 8×4, 8×
8, 8×16, 16×8, 16×16, 16×32, 3
2×16, 32×32の中から、フレーム間信号の分散
の閾値判定により、動きの大きい領域には小さなブロッ
クを割り当て、背景などの動きの小さい領域には大きな
ブロックを割り当てている。具体的には、予測部114
で得られた予測誤差信号について、領域決定部115で
その分散値を計算し、これに基づいてブロックサイズを
決定していく。領域形状情報や各領域の符号化モードな
どの属性情報116、動きベクトル117もこの時点で
決定され、属性情報116のうちの符号化モード情報に
したがって予測誤差信号または原信号が符号化部118
で符号化され、符号化データ119を得る。以降の処理
は第一の従来技術と同じである。
は、符号化単位の領域の形が2種類に限定される。しか
も、それらはともに正方形である。したがって、さほど
動きがない背景のような領域であっても動きの激しい被
写体のエッジ部分などの領域であっても特に区別なく符
号化することになるので、画像のシーン構造にダイナミ
ックに適応した符号化を行うことができない。
ズの正方ブロックを準備し、重要度の低い領域は大きな
ブロックで粗く符号化し、重要度の高い領域は小さいブ
ロックで密に符号化することで画像のシーン構造に対応
した符号化を行うようになっているが、領域の形状が正
方ブロックに限定されており、任意の形状の画像領域に
対する適応性には改善の余地がある。
て、この領域単位で符号化を行う場合、領域分割に係わ
る演算量が増えるのみならず、領域形状に関する符号量
も増大する。
になされたものであり、その目的は、種々の画像構造に
的確に対応できる領域分割技術を用いた動画像符号化技
術を提供することにある。本発明のより具体的な目的
は、画像や各領域の内容に応じて、領域分割の方法や符
号化の方法を適切に選択することにより、より画像のシ
ーン構造に適応した符号化を行うと共に、領域分割に関
する演算量や領域形状や符号化モード等に係わる符号量
を削減することにある。本発明のさらに別の目的は、い
ろいろな形状に分割された領域の符号化データを正しく
復号する技術の提供にある。
画像を複数の領域に分割し、領域毎に分別された画像信
号を出力する領域分割部と、該領域分割部によって得ら
れた領域形状を表す情報を記憶するメモリと、前記領域
分割部から出力された領域の画像信号、動き情報、属性
情報や、入力画像の領域形状を表す情報などを符号化
し、符号化データを出力する符号化部と、を備え、前記
領域分割部は、過去に領域分割符号化された画像の領域
形状を前記メモリから読み出し、符号化すべき画像に射
影し、初期領域形状とする射影部と、該射影部によって
得られた領域形状を初期形状とした入力画像の領域のそ
れぞれについて、所定の判定方法に基づいてより小さい
領域に分割する分割処理部と、該分割処理部によって分
割された複数の領域のそれぞれについて、所定の判定方
法に基づいて隣接する領域と統合するか否かを判定しな
がら領域の統合を行う統合処理部と、を備えることを特
徴とするものである。
射影部によって得られた領域毎にアクティビティを計算
するアクティビティ算出部と、該アクティビティを予め
設定された基準値と比較する比較部と、該比較部におけ
る比較の結果、前記アクティビティが基準値を上回る領
域をさらに小さな領域へ分割する細分割部と、を含むこ
とを特徴とするものである。
射影部によって得られた各領域について、その領域形状
とは無関係に固定サイズのブロック単位でアクティビテ
ィを算出するアクティビティ算出部と、該アクティビテ
ィを予め設定された基準値と比較する比較部と、該比較
部における比較の結果、アクティビティが基準値を上回
るブロック位置の領域をさらに小さな領域へ分割する細
分割部と、を含むことを特徴とするものである。
の評価方法に基づいて領域分割を行った結果の評価値を
算出する評価値算出部と、符号化すべき画像を過去に領
域分割符号化された画像の領域形状に基づいて領域分割
を行ったときの評価値を判定し、過去に領域分割符号化
された画像の領域形状を利用するか否かを選択する判定
部と、を備えることを特徴とするものである。
べき画像を過去に領域分割符号化された画像の領域形状
に基づいて領域分割を行ったときの評価値が、予め設定
された基準値を超える場合に、過去に領域分割符号化さ
れた画像の領域形状を利用せずに、領域分割を行うこと
を特徴とするものである。
べき画像を過去に領域分割符号化された画像の領域形状
に基づいて領域分割を行ったときの評価値が、予め設定
された基準値を超える場合に、フレーム内で領域分割を
行うことを特徴とするものである。
後に符号化された画像の符号化データであって、過去に
領域分割符号化された画像の領域形状を利用して領域分
割を行ったか否かの分割情報を含む符号化データを入力
し、この符号化データを復号する動画像復号化装置にお
いて、前記分割情報をもとに領域形状情報を復号し、符
号化の際に分割された各領域の形状を復元する領域形状
復元部と、復元した各領域の形状をもとに領域が符号化
された順序を特定し、符号化データから各領域の画像を
復号する画像データ復号部と、を備えることを特徴とす
るものである。
の領域に分割し、領域毎に分別された画像信号を出力す
る領域分割部と、該領域分割部から出力された領域の画
像信号、動き情報、属性情報や、入力画像の領域分割状
態を表す情報などを符号化し、符号化データを出力する
符号化部と、を備え、前記領域分割部によって得られた
領域のサイズに基づいて、選択できる符号化モードの組
合せを切り替える符号化モード選択部と、を備えること
を特徴とするものである。
後に符号化された画像の符号化データを入力して復号す
る動画像復号化装置において、符号化データに含まれる
領域形状情報をもとに符号化の際に分割された各領域の
形状を復元する領域形状復元部と、復元した各領域のサ
イズをもとに選択できる符号化モードの組合せを特定
し、符号化データ中の符号化モードに対応する符号語か
ら該領域の符号化モードを特定し、該符号化モードに基
づいて各領域の画像を復号する画像データ復号部と、を
備えることを特徴とするものである。
の領域に分割し、領域毎に分別された画像信号を出力す
る領域分割ステップと、該領域分割部によって得られた
領域形状を表す情報を記憶するメモリステップと、前記
領域分割部から出力された領域の画像信号、動き情報、
属性情報や、入力画像の領域形状を表す情報などを符号
化し、符号化データを出力する符号化ステップと、を備
え、前記領域分割ステップは、過去に領域分割符号化さ
れた画像の領域形状を前記メモリから読み出し、符号化
すべき画像に射影し、初期領域形状とする射影ステップ
と、該射影部によって得られた領域形状を初期形状とし
た入力画像の領域のそれぞれについて、所定の判定方法
に基づいてより小さい領域に分割する分割処理ステップ
と、該分割処理部によって分割された複数の領域のそれ
ぞれについて、所定の判定方法に基づいて隣接する領域
と統合するか否かを判定しながら領域の統合を行う統合
処理ステップと、を備えることを特徴とするものであ
る。
は、前記射影ステップにおいて得られた領域毎にアクテ
ィビティを計算するアクティビティ算出ステップと、該
アクティビティを予め設定された基準値と比較する比較
ステップと、該比較ステップにおける比較の結果、前記
アクティビティが基準値を上回る領域をさらに小さな領
域へ分割する細分割ステップと、を含むことを特徴とす
るものである。
は、前記射影ステップにおいて得られた各領域につい
て、その領域形状とは無関係に固定サイズのブロック単
位でアクティビティを算出するアクティビティ算出ステ
ップと、該アクティビティを予め設定された基準値と比
較する比較ステップと、該比較ステップにおける比較の
結果、アクティビティが基準値を上回るブロック位置の
領域をさらに小さな領域へ分割する細分割ステップと、
を含むことを特徴とするものである。
は、所定の評価方法に基づいて領域分割を行った結果の
評価値を算出する評価値算出ステップと、符号化すべき
画像を過去に領域分割符号化された画像の領域形状に基
づいて領域分割を行ったときの評価値を判定し、過去に
領域分割符号化された画像の領域形状を利用するか否か
を選択する判定ステップと、を備えることを特徴とする
ものである。
号化すべき画像を過去に領域分割符号化された画像の領
域形状に基づいて領域分割を行ったときの評価値が、予
め設定された基準値を超える場合に、過去に領域分割符
号化された画像の領域形状を利用せずに、領域分割を行
うことを特徴とするものである。
号化すべき画像を過去に領域分割符号化された画像の領
域形状に基づいて領域分割を行ったときの評価値が、予
め設定された基準値を超える場合に、フレーム内で領域
分割を行うことを特徴とするものである。
後に符号化された画像の符号化データであって、過去に
領域分割符号化された画像の領域形状を利用して領域分
割を行ったか否かの分割情報を含む符号化データを入力
し、この符号化データを復号する動画像復号化方法にお
いて、前記分割情報をもとに領域形状情報を復号し、符
号化の際に分割された各領域の形状を復元する領域形状
復元ステップと、復元した各領域の形状をもとに領域が
符号化された順序を特定し、符号化データから各領域の
画像を復号する画像データ復号ステップと、を備えるこ
とを特徴とするものである。
の領域に分割し、領域毎に分別された画像信号を出力す
る領域分割ステップと、該領域分割ステップから出力さ
れた領域の画像信号、動き情報、属性情報や、入力画像
の領域分割状態を表す情報などを符号化し、符号化デー
タを出力する符号化ステップと、を備え、前記領域分割
ステップにおいて得られた領域のサイズに基づいて、選
択できる符号化モードの組合せを切り替える符号化モー
ド選択ステップと、を備えることを特徴とするものであ
る。
後に符号化された画像の符号化データを入力して復号す
る動画像復号化方法において、符号化データに含まれる
領域形状情報をもとに符号化の際に分割された各領域の
形状を復元する領域形状復元ステップと、復元した各領
域のサイズをもとに選択できる符号化モードの組合せを
特定し、符号化データ中の符号化モードに対応する符号
語から該領域の符号化モードを特定し、該符号化モード
に基づいて各領域の画像を復号する画像データ復号ステ
ップと、を備えることを特徴とするものである。
載の符号化装置及び方法による動画像符号化装置につい
て説明する。図1は本実施の形態における動画像符号化
装置の構成を示すブロック図である。同図において、1
は入力画像、2は領域分割部、3は領域形状情報、4は
領域画像信号、5は領域動き情報、6は領域属性情報、
7は符号化部、8は局所復号画像、9はメモリ、10は
差分画像、11は符号化ビットストリーム、をそれぞれ
表す。図2は本符号化装置の動作を示すフローチャート
である。
の動作について説明する。入力画像1は領域分割部2に
入力され(S1)、ここでまず、メモリ9に蓄えられた1フ
レーム前に領域分割符号化された画像(参照画像)の領
域形状情報3を読み出し、該領域形状を初期形状とし
て、初期分割(S2)と近傍領域統合(S3)の2系統の処理を
行う。領域分割部2の動作は後で詳しく述べる。領域分
割部2は、結果として入力画像を領域に分割した状態を
表す形状情報3、各領域の画像信号4、各領域の動き情
報5、各領域の符号化モードなどの属性情報6を符号化
部7へ受け渡す。また次に領域分割および符号化を行う
フレームの初期分割状態とするため、領域形状情報3を
メモリ9に蓄えておく。符号化部7では、これらの情報
を適当な符号化方式に基づいてビットパターンに変換
し、多重化して符号化ビットストリーム11として出力
する(S4、S5)。また、動き補償予測に基づく領域分割お
よび符号化を行うため、符号化部7では領域ごとに局所
復号画像8を生成し、これをメモリ9に蓄えておく。領
域分割部2および符号化部7はメモリ9に蓄えられた局
所復号画像を差分画像10として読み出し、動き補償予
測を行う。ただし、領域分割の過程で動き補償予測が行
われているので符号化部7では、動き補償予測を新たに
行わなくてもよい。
部2の動作について詳述する。図3は本実施の形態にお
ける領域分割部2の詳細な構成図である。同図におい
て、12は射影部、13は初期形状情報、14は分割処
理部、15は分割形状情報、16は統合処理部、をそれ
ぞれ表す。
同図において、17はアクティビティ算出部、18はア
クティビティ、19は分割判定部、をそれぞれ表す。図
5は射影部12および分割処理部14の動作を示すフロ
ーチャートである。
請求項2記載のアクティビティに基づく分割を行う。ア
クティビティとは、画像の特徴又は特性を判定するため
に、画像情報の所定の性質に関して数値化されたデータ
である。
領域分割符号化された画像をFt-1とすると、射影部12
において、Ft-1の領域形状情報3をメモリ9から読み出
し、Ft-1の領域形状をFtに射影し(S8)、射影された領域
形状を初期形状情報13として分割処理部14に渡す。
Ftに図6のようにFt-1の最終の領域形状(Sfinal nとす
る)が射影されたとする。このときのFtに含まれる領域
数をN0とし、各領域をS0 n(1≦n≦N0)と表記する。この
各S0 nについて、さらに分割を行うかどうかを判定する
(S9)。このため、アクティビティ算出部17で各領域の
アクティビティを算出する。ここでのアクティビティは
次式に示す符号量-歪みコストL(S0 n)を採用する。
で、λは定数である。
成図を示す。同図において、20は暫定符号化部、21
は復号部、22は符号化歪み算出部、23は符号量-歪
みコスト算出部、24は定数、をそれぞれ表す。
示すフローチャートである。
号化を行う(S13)。ここでの符号化の目的は、符号化歪
みD(S0 n)算出のための局所復号画像と、符号量R(S0 n)を
求めることにある。本実施の形態では、暫定符号化部2
0では、メモリ9中の差分画像10を用いて動き補償予
測を行って符号化を実施する。ここで符号化されるデー
タは、画像データ、つまり予測誤差信号または原信号、
予測画像を特定するための動き情報、符号化モードなど
の属性情報を含み、これらの符号量の総和がR(S0 n)であ
る。予測誤差信号は原信号と動きパラメータ探索の結果
得られる予測画像の差として得られる。
で得られた符号化データを用いて局所復号画像を生成す
る(S14)。次いで符号化歪み算出部22において、この
局所復号画像と原画像との間の歪みD(S0 n)を計算する(S
15)。符号量-歪みコスト算出部23は、暫定符号化部2
0で得られた符号量R(S0 n)、符号化歪み算出部22で得
られた符号化歪みD(S0 n)をもとに、定数24のもとで前
述の符号量-歪みコストL(S0 n)を計算する(S16)。算出さ
れたL(S0 n)をアクティビティ18として、分割判定部1
9に渡す。
ビティ18とあらかじめ設定した閾値THと比較して、S0
nをさらに分割するかどうかを判定する(S9)。この分割
判定部19は、本発明の比較部に相当する。アクティビ
ティ18がTHより大きい場合、そのS0 nを分割する。す
なわち、分割判定部19は、本発明の組分割部にも相当
する。分割の方法については、例えば図9のようにその
領域を構成している最小のブロックに均等分割する方法
などがある。それ以外の例として、領域のサイズに応じ
て分割するブロックのサイズを可変にすることもでき
る。
記する。この分割状態を分割形状情報として統合処理部
16に渡す。
ついて隣接する領域との統合を行う。
力画像1の領域分割状態を表す情報3、各領域の画像信
号4、動き情報5、属性情報6が符号化部7に出力され
る。
状情報が含まれる。領域の形状情報としては、例えば、
分割および統合の処理過程に関する情報を採用する。復
号側では、この情報をもとに符号化装置と同様の処理を
再現することで、領域形状を把握することができる。1
フレーム前に領域分割符号化された画像の領域形状を初
期形状とした場合、再分割が行われた領域に関しての
み、該領域の位置情報と分割の処理過程に関する情報を
符号化して伝送すればよく、再分割を行わない領域に関
しては、分割過程に関する情報を伝送する必要がない。
TV会議のようなシーンでは、領域形状情報を効果的に削
減できるだけでなく、領域分割処理時間を低減できる。
作により、1フレーム前の領域形状を利用せずに、画像
を無条件に均等に分割した状態を初期形状として領域分
割を行う場合に比べて、領域分割における計算量、およ
び領域形状の符号量を削減することができる。
号量-歪みコストを採用したが、それ以外の例として、
以下のものが考えられる。
測誤差電力である。動き補償予測はブロックマッチング
法により行う。このとき領域の形状は任意形状のため、
通常のブロックマッチング法を適用するために、図10
に示すように、領域に外接する矩形を定義し、この外接
矩形単位でブロックマッチングを行う。図11はブロッ
クマッチング法による動き補償予測の方法を示してい
る。ブロックマッチング法では、次の式を与えるベクト
ルvが被予測領域Sの動きベクトルとして求められる。
をfS(x, y, t)、時刻t-1における(x, y)上の画素値をfS
(x, y, t-1)、位置(x, y, t-1)をベクトルvだけ変位さ
せた位置の画素値をfS(x+vx, y+vy, t-1)とする。ま
た、Rは動きベクトル探索範囲を表す。
画像はfS(x+vx, y+vy, t-1)で与えられ、予測誤差電
力、すなわちアクティビティはDminとなる。この方法で
アクティビティを定義することにより、1フレーム前に
領域分割符号化された画像の領域形状で動き補償予測を
行った結果、予測誤差が大きい領域について再分割を行
い、領域形状を変更することができる。
は領域の画素分布の複雑さを表しており、エッジなど画
素値が急激に変化する画像を含む領域では分散値が大き
くなる。領域S内の画素値をfS(x, y, t)とし、領域S内
の画素値の平均値をμSとすると、領域内の分散値σSは
次式で与えられる。
分割符号化された画像の領域形状を用いた場合、エッジ
を含んでしまうような領域について、再分割を行い、領
域形状を変更することができる。
ッジ強度は例えば、G.Robinsonによる「Edge detection
by compass gradient masks」(Journal of Computer G
raphics and Image Processing, Vol.6, No.5, Oct.197
7)に記載されるソーベル演算子(Sobel Operator)で求め
たり、エッジ上に分布する画素数(エッジ分布面積)とし
て求めることができる。このアクティビティを採用すれ
ば、1フレーム前に領域分割符号化された画像の領域形
状を用いた場合エッジを含む領域について、エッジを検
出し、その結果に基づいて領域を再分割し、領域形状を
変更することができる。
値の線形和である。各アクティビティ値に適度の重み付
けを行うことにより、種々の画像への対応することがで
きる。
3、12に記載の符号化装置、方法に基づく動画像符号
化装置について説明する。本実施の形態では、実施の形
態1で述べた動画像符号化装置の分割処理部14の構成
だけが異なるので、この部分についてのみ説明する。本
実施の形態における分割処理部14の内部構成図を図1
2に示す。同図において、25はブロック抽出部であ
る。また、図13は図12に示す分割処理部14の動作
を示すフローチャートである。
された領域形状とは無関係に、まずブロック抽出部25
で、固定サイズのブロック(B0 m)を抽出し(S17)、このブ
ロック単位でアクティビティを算出する。次に分割判定
部19において、アクティビティ18とあらかじめ設定
した閾値THと比較して(S18)、アクティビティ18がTH
より大きい場合、そのブロック位置の領域についてのみ
分割する(S19)。分割の方法については、例えば図14
のように、そのブロックを均等分割する方法などがあ
る。
クティビティを算出するため、大きな領域の一部に変更
があった場合に、その部分のみを検出し、分割すること
ができる。
4、13に記載の符号化装置、方法に基づく動画像符号
化装置について説明する。本実施の形態では、実施の形
態1で述べた動画像符号化装置の領域分割部2の構成だ
けが異なるので、この部分についてのみ説明する。本実
施の形態における領域分割部2の内部構成図を図15に
示す。同図において、26は評価値算出部、27は初期
状態判定部、28は評価値、29は初期状態決定フラ
グ、をそれぞれ表す。
の動作を示すフローチャートである。
12でFt-1の領域形状を射影したFtに対して、該領域形
状に基づく分割を行ったときのFtの評価値(E0 tとする)
を算出する(S22)。評価値としては例えば、実施の形態
1で述べた各領域Sk(1≦k≦N0)の符号量-歪みコストL
(Sk)の総和Lを採用する。
域形状を初期状態とするか否かを判定する。実際の判定
は該評価値を閾値判定(S23)することにより、行う。該
評価値E0 tが予め設定された閾値TH0を超えた場合には、
Ft-1の領域形状を利用せず、フレーム全体を固定サイズ
のブロックに均等に分割した状態を初期状態とする(S2
4)など、1フレーム前の状態とは関係なく、分割を行
う。閾値判定の結果、Ft-1の領域形状を利用するか否か
の情報を初期状態決定フラグ29として、符号化部7に
渡す。
た場合に、フレーム内情報のみを用いて領域分割、およ
び符号化を行うこともできる。フレーム内情報のみを用
いた領域分割の方法としては例えば、領域内の分散値を
アクティビティとする領域分割がある。領域内の分散値
については実施の形態1で述べたとおりである。
ば、画像の局所的な構造の複雑さに応じて領域を分割す
ることができる。
のみを用いた領域分割と、フレーム内/フレーム間情報
を用いた領域分割を切り替えて、併用することもでき
る。
2)とする。E0 tが閾値TH1を超えた場合には上述したよう
に、フレーム内情報のみを用いて領域分割を行う。ま
た、TH2 < E0 t≦ TH1のときには動き補償予測を行って
求めた符号量-歪みコストや予測誤差電力等をもとに、
領域分割を行う。
が大きく、1フレーム前の領域分割の形状を用いること
に意味がない場合には、1フレーム前の領域形状を用い
ずに、領域分割を行うことができる。
を判定することにより、シーンチェンジなどがあった場
合にはフレーム内の情報のみを用いた領域分割に切り替
えるなど、より画像の内容に応じた符号化を行うことが
できる。
べた1フレーム前の領域形状を利用して領域分割を行う
動画像符号化装置によって生成される符号化ビットスト
リームを復号する動画像復号化装置を説明する。図17
に本実施の形態に係わる復号化装置の構成を示す。
析部、31は初期分割方法復号部、32は初期分割方法
フラグ、33は射影部、34は領域形状復号部、35は
属性情報復号部、36は画像データ復号部、37は動き
情報復号部、38は動きパラメータ、39は動き補償
部、40は予測画像、41は画像復元部、42は外部メ
モリ、43は再生画像、をそれぞれ表す。
フレームもしくは画像フレーム中の部分画像に関して、
1フレーム前に領域分割符号化された画像あるいは部分
画像の領域形状を用いて、領域分割を行うか、また1フ
レーム前の画像の領域形状を用いない場合に、フレーム
内情報のみを用いて符号化するかといった領域分割の方
法に関する情報をまず復号し、次にこの情報に基づい
て、領域分割状態を表す領域形状を表す符号化ビットス
トリームを復号する。つぎに所定の符号化方法により符
号化された各領域の画像データ、各領域の属性情報、各
領域の動き情報とからなる符号化ビットストリームを復
号し、領域画像を復元し、画像フレームもしくは画像フ
レーム中の部分画像領域を再生する。
号化の際、領域を分割および統合したときの処理過程の
明示による。分割の処理過程の記述は、領域を予め決め
られた順番で走査し、分割が行われたかどうかを記述す
ることにより行う。統合に関しても同様である。1フレ
ーム前の領域形状を利用して分割を行う場合には、分割
が行われた領域に関してのみ、その領域の位置情報と分
割の処理過程を記述すればよい。復号化装置では、符号
化装置同様、1フレーム前の領域形状を利用する場合に
は、1フレーム前の領域形状を符号化すべき画像に射影
し、分割、統合の処理過程に関する情報をもとに最終的
な領域分割状態を復元することができる。
の動作を示すフローチャートである。
トストリーム解析部30に入力され、ビット列から符号
化データへの変換が行われる(S25)。符号化データのう
ち、まず初期分割方法フラグが初期分割方法復号部31
において復号され(S26)、初期分割方法フラグより1フ
レーム前の領域形状を利用するか否かを判定し(S27)、
1フレーム前の領域形状を利用する場合には、射影部3
3において、1フレーム前の領域形状を射影する(S2
8)。また1フレーム前の領域形状を利用しない場合に
は、符号化装置同様、固定サイズのブロックに均等分割
を行う(S29)。次に領域形状情報が領域形状復号部34
において復号され、上述の方法で画像フレームもしくは
画像フレーム中の部分画像の領域分割状態が復元される
(S30)。領域が復元されたことにより、以降のビットス
トリーム中に符号化されている領域情報の符号化順序が
特定される。各領域をSnと呼ぶ。
ームから順次各領域のデータが復号される。まず領域Sn
の属性情報が属性情報復号部35で復号され、領域の符
号化モード情報などが復号される(S31)。ここでインタ
ーモード、すなわち予測誤差信号を符号化するモードで
あれば(S32)、動き情報復号部37において動きパラメ
ータが復号される(S33)。動きパラメータ38は動き補
償部39に送られ、動き補償部39はこれに基づいて外
部メモリ42内に蓄積される参照画像中の予測画像に相
当するメモリアドレスを計算し、外部メモリ42から予
測画像を取り出す(S34)。次いで画像データ復号部36
において領域Snの画像データが復号される(S35)。イン
ターモードの場合は、この復号された画像データと予測
画像40とを加算することによって最終的な領域Snの再
生画像43が復元される。イントラモードの場合には、
復号された画像データそのものが最終的な領域Snの再生
画像43となる。再生画像は以降の予測画像生成のため
の参照画像として用いるため、外部メモリ42に書き込
まれる。これらの判断および再生画像の復元は画像復元
部41で行われる(S36)。
フレーム中の部分画像に含まれる全領域について行われ
た時点で終了する。以降の他の画像フレームもしくは画
像フレーム中の部分画像についても同様の処理を施せば
よい。
わる動画像符号化装置の構成を示すブロック図である。
部、45は符号化モード組合せ表、46は領域サイズ、
47は選択された符号化モード組合せ、をそれぞれ表
す。
符号化装置の動作を示すフローチャートである。
を選択する際に、予め領域サイズに対して、選択できる
符号化モードの組合せを決めておく。符号化モードとし
ては、インターモード(フレーム間符号化モード)、イ
ントラモード(フレーム内符号化モード)、1フレーム
前の同じ位置の領域画像をそのままコピーするコピーモ
ード、量子化パラメータが1領域前と変わる場合と変わ
らない場合などがあげられる。例えば、大きなサイズの
領域で、イントラモード(フレーム内符号化モード)が
選択されることは少ないので、選択できる符号化モード
をインターモード(フレーム間符号化モード)とコピー
モードのみに限定する。
2によって得られた領域のサイズ46に応じて、予め設
定された符号化モードの組合せ表45の中から選択でき
る符号化モードの組合せ47を選択し(S40)、その中か
ら符号化モードを決定する(S41)。
イズに応じて選択できる符号化モードを効果的に限定で
きるため、符号化モードの符号量を削減することができ
る。
実施の形態5で述べた動画像符号化装置によって生成さ
れる符号化ビットストリームを復号して再生画像を得る
動画像復号化装置について説明する。
の構成を示す。同図において、48は領域サイズ算出
部、49は符号化モード選択部、50は選択できる符号
化モードの組合せ、51は符号化モード復号部、をそれ
ぞれ表す。
像フレーム中の部分画像に関して、まず符号化ビットス
トリーム中の領域分割状態を表す領域形状情報を復元
し、各領域の領域サイズより、各領域の符号化モードの
組合せを特定し、符号化モードを復号する。この符号化
モードに基づいて符号化された各領域の画像データ、各
領域の動き情報とからなる符号化ビットストリームを復
号し、領域画像を復元し、画像フレームもしくは画像フ
レーム中の部分画像を再生する。
の動作を示すフローチャートである。
トストリーム解析部30に入力され、ビット列から符号
化データへの変換が行われる(S25)。符号化データのう
ち、領域形状情報が領域形状復号部34において復号さ
れ、画像フレームもしくは画像フレーム中の部分画像内
の領域分割の状態が復元される(S26)。この領域分割状
態の復元により、以降のビットストリーム中に符号化さ
れている領域情報の符号化順序が特定される。本文で
は、各領域をSnと呼ぶ。次いで、符号化順序に従って、
ビットストリームから順次各領域のデータが復号され
る。まず領域サイズ算出部48において、各領域Snの形
状よりSnの領域サイズを算出する(S44)。領域サイズと
しては、図10に示すように、領域の外接矩形のサイズ
や、領域に含まれる画素数などを採用する。次に符号化
モード選択部49において、Snの領域サイズよりその領
域を符号化するために用いた符号化モードの組合せを選
択する(S45)。選択された組合せの中から、符号化モー
ド復号部51において、領域Snの符号化モード情報が復
号される(S46)。以下この符号化モードに基づいて、各
領域の画像データが復元される。復元方法については、
実施の形態4で述べた方法と同様である。
と符号化部を含み、領域分割部は分割処理部と統合処理
部を含む。この結果、領域の分割のみならず統合が行わ
れるため、画像の構造に柔軟な符号化が実現する。また
射影部において、1フレーム前に領域分割符号化された
画像の領域形状を符号化すべき画像に射影し、初期領域
形状とするため、形状の変更のあった領域についてのみ
分割処理部において再分割を行うことができ、領域分割
に係わる演算量、および領域形状のための符号量を削減
することができる。
領域のアクティビティを予め決められた閾値と比較する
ことによって、形状の変更のあった領域を検出し、その
領域についてのみ再分割を行い、それ以外の領域は分割
を行わないため、領域分割に係わる演算量、および領域
形状のための符号量を削減することができる。
に固定サイズのブロック単位でアクティビティを求め、
アクティビティが予め決められた閾値を超えるブロック
の位置の領域のみを分割する場合には、ある領域の中で
形状の変更のあった部分のみを検出し、分割することが
できるため、例えば背景のような大きな領域に別の物体
が現れた場合に新たな領域を検出することができる。
を含み、判定部が評価値算出部を含む場合には、1フレ
ーム前の領域形状を符号化すべき画像の領域として符号
化を行ったときの結果に基づき、符号化を良好にする方
向で現フレームの領域分割の手法を選択することができ
る。
く、1フレーム前の領域形状を用いることに意味がない
場合には、1フレーム前の領域形状を用いずに領域分割
することができる。
検出した場合には、フレーム内情報のみを用いた領域分
割および符号化に切り替えることもできる。
分割方法復号部と領域形状復元部および画像データ復号
部を備えるため、動画像符号化装置で画像の内容に応じ
た領域分割方法によって、いろいろな形状の領域が生成
されていても対応することができる。従って、本発明の
動画像符号化装置との組合せが容易になる。
割部、符号化モード選択部、符号化部を含み、領域分割
部によって得られた領域のサイズによって、選択できる
符号化モードの組合せを限定することにより、符号化モ
ードに必要な符号量を削減することができる。
領域形状復元部、符号化モード選択部、符号化部を備え
るため、動画像符号化装置で各領域のサイズによって選
択できる符号化モードの組合せが限定されていても対応
することができる。従って、本発明の動画像符号化装置
との組合せが容易になる。
ップと符号化ステップを含み、領域分割ステップは分割
処理ステップと統合処理ステップを含む。この結果、領
域の分割のみならず統合が行われるため、画像の構造に
柔軟な符号化が実現する。また射影ステップにおいて、
1フレーム前に領域分割符号化された画像の領域形状を
符号化すべき画像に射影し、初期領域形状とするため、
形状の変更のあった領域についてのみ分割処理ステップ
において再分割を行うことができ、領域分割に係わる演
算量、および領域形状のための符号量を削減することが
できる。
含む場合は、領域のアクティビティを予め決められた閾
値と比較することによって、形状の変更のあった領域を
検出し、その領域についてのみ再分割を行い、それ以外
の領域は分割を行わないため、領域分割に係わる演算
量、および領域形状のための符号量を削減することがで
きる。
無関係に固定サイズのブロック単位でアクティビティを
求め、アクティビティが予め決められた閾値を超えるブ
ロックの位置の領域のみを分割する場合には、ある領域
の中で形状の変更のあったステップ分のみを検出し、分
割することができるため、例えば背景のような大きな領
域に別の物体が現れた場合に新たな領域を検出すること
ができる。
テップを含み、判定ステップが評価値算出ステップを含
む場合には、1フレーム前の領域形状を符号化すべき画
像の領域として符号化を行ったときの結果に基づき、符
号化を良好にする方向で現フレームの領域分割の手法を
選択することができる。
く、1フレーム前の領域形状を用いることに意味がない
場合には、1フレーム前の領域形状を用いずに領域分割
することができる。
検出した場合には、フレーム内情報のみを用いた領域分
割および符号化に切り替えることもできる。
分割方法復号ステップと領域形状復元ステップおよび画
像データ復号ステップを備えるため、動画像符号化方法
で画像の内容に応じた領域分割方法によって、いろいろ
な形状の領域が生成されていても対応することができ
る。従って、本発明の動画像符号化方法との組合せが容
易になる。
割ステップ、符号化モード選択ステップ、符号化ステッ
プを含み、領域分割ステップによって得られた領域のサ
イズによって、選択できる符号化モードの組合せを限定
することにより、符号化モードに必要な符号量を削減す
ることができる。
領域形状復元ステップ、符号化モード選択ステップ、符
号化ステップを備えるため、動画像符号化方法で各領域
のサイズによって選択できる符号化モードの組合せが限
定されていても対応することができる。従って、本発明
の動画像符号化方法との組合せが容易になる。
法全般に共通な構成図である。
チャートである。
を示すフローチャートである。
示す図である。
ある。
ローチャートである。
果の例を示す図である。
示す図である。
図である。
ャートである。
等分割結果の例を示す図である。
図である。
ャートである。
部構成図である。
ャートである。
の構成図である。
ャートである。
の内部構成図である。
ャートである。
を示す図である。
を示す図である。
領域画像信号、5領域動き情報、6 領域属性情報、
7 符号化部、8 局所復号画像、9 メモリ、10
差分画像、11 符号化ビットストリーム、12 射影
部、13 初期形状情報、14 分割処理部、15 分
割形状情報、16 統合処理部、17アクティビティ算
出部、18 アクティビティ、19 分割判定部、20
暫定符号化部、21 復号部、22 符号化歪み算出
部、23 符号量-歪みコスト算出部、24 定数、2
5 ブロック抽出部、26 評価値算出部、27 初期
状態判定部、28 評価値、29 初期状態決定フラ
グ、30 ビットストリーム解析部、31 初期分割方
法復号部、32 初期分割方法フラグ、33 射影部、
34 領域形状復号部、35 属性情報復号部、36
画像データ復号部、37 動き情報復号部、38 動き
パラメータ、39 動き補償部、40 予測画像、41
画像復元部、42 外部メモリ、43 再生画像、4
4 符号化モード選択部、45 符号化モード組合せ
表、46 領域サイズ、47 選択された符号化モード
組合せ、48 領域サイズ算出部、49 符号化モード
選択部、50 選択できる符号化モードの組合せ、51
符号化モード復号部、101差分器、102 予測信
号、103 予測誤差信号、104 符号化部、105
符号化データ、106 復号部、107 復号された
予測誤差信号、108加算器、109 局所復号画像信
号、110 メモリ、111 予測部、112 動きベ
クトル、113 領域分割部、114 予測部、115
領域決定部、116 符号化モード情報、117 動
きベクトル、118 符号化部、119 符号化デー
タ。
Claims (18)
- 【請求項1】 入力デジタル画像を複数の領域に分割
し、領域毎に分別された画像信号を出力する領域分割部
と、 該領域分割部によって得られた領域形状を表す情報を記
憶するメモリと、 前記領域分割部から出力された領域の画像信号、動き情
報、属性情報や、入力画像の領域形状を表す情報などを
符号化し、符号化データを出力する符号化部と、 を備え、 前記領域分割部は、 過去に領域分割符号化された画像の領域形状を前記メモ
リから読み出し、符号化すべき画像に射影し、初期領域
形状とする射影部と、 該射影部によって得られた領域形状を初期形状とした入
力画像の領域のそれぞれについて、所定の判定方法に基
づいてより小さい領域に分割する分割処理部と、 該分割処理部によって分割された複数の領域のそれぞれ
について、所定の判定方法に基づいて隣接する領域と統
合するか否かを判定しながら領域の統合を行う統合処理
部と、 を備えることを特徴とする動画像符号化装置。 - 【請求項2】 請求項1記載の動画像符号化装置におい
て、 前記分割処理部は、 前記射影部によって得られた領域毎にアクティビティを
計算するアクティビティ算出部と、 該アクティビティを予め設定された基準値と比較する比
較部と、 該比較部における比較の結果、前記アクティビティが基
準値を上回る領域をさらに小さな領域へ分割する細分割
部と、 を含むことを特徴とする動画像符号化装置。 - 【請求項3】 請求項1記載の動画像符号化装置におい
て、 前記分割処理部は、 前記射影部によって得られた各領域について、その領域
形状とは無関係に固定サイズのブロック単位でアクティ
ビティを算出するアクティビティ算出部と、 該アクティビティを予め設定された基準値と比較する比
較部と、 該比較部における比較の結果、アクティビティが基準値
を上回るブロック位置の領域をさらに小さな領域へ分割
する細分割部と、 を含むことを特徴とする動画像符号化装置。 - 【請求項4】 請求項1乃至3のいずれかに記載の動画
像符号化装置において、 前記領域分割部は、 所定の評価方法に基づいて領域分割を行った結果の評価
値を算出する評価値算出部と、 符号化すべき画像を過去に領域分割符号化された画像の
領域形状に基づいて領域分割を行ったときの評価値を判
定し、過去に領域分割符号化された画像の領域形状を利
用するか否かを選択する判定部と、 を備えることを特徴とする動画像符号化装置。 - 【請求項5】 請求項4に記載の動画像符号化装置にお
いて、 前記判定部は、符号化すべき画像を過去に領域分割符号
化された画像の領域形状に基づいて領域分割を行ったと
きの評価値が、予め設定された基準値を超える場合に、
過去に領域分割符号化された画像の領域形状を利用せず
に、領域分割を行うことを特徴とする動画像符号化装
置。 - 【請求項6】 請求項4に記載の動画像符号化装置にお
いて、 前記判定部は、符号化すべき画像を過去に領域分割符号
化された画像の領域形状に基づいて領域分割を行ったと
きの評価値が、予め設定された基準値を超える場合に、
フレーム内で領域分割を行うことを特徴とする動画像符
号化装置。 - 【請求項7】 複数の領域に分割された後に符号化され
た画像の符号化データであって、過去に領域分割符号化
された画像の領域形状を利用して領域分割を行ったか否
かの分割情報を含む符号化データを入力し、この符号化
データを復号する動画像復号化装置において、 前記分割情報をもとに領域形状情報を復号し、符号化の
際に分割された各領域の形状を復元する領域形状復元部
と、 復元した各領域の形状をもとに領域が符号化された順序
を特定し、符号化データから各領域の画像を復号する画
像データ復号部と、 を備えることを特徴とする動画像復号化装置。 - 【請求項8】 入力デジタル画像を複数の領域に分割
し、領域毎に分別された画像信号を出力する領域分割部
と、 該領域分割部から出力された領域の画像信号、動き情
報、属性情報や、入力画像の領域分割状態を表す情報な
どを符号化し、符号化データを出力する符号化部と、を
備え、 前記領域分割部によって得られた領域のサイズに基づい
て、選択できる符号化モードの組合せを切り替える符号
化モード選択部と、 を備えることを特徴とする動画像符号化装置。 - 【請求項9】 複数の領域に分割された後に符号化され
た画像の符号化データを入力して復号する動画像復号化
装置において、 符号化データに含まれる領域形状情報をもとに符号化の
際に分割された各領域の形状を復元する領域形状復元部
と、 復元した各領域のサイズをもとに選択できる符号化モー
ドの組合せを特定し、符号化データ中の符号化モードに
対応する符号語から該領域の符号化モードを特定し、該
符号化モードに基づいて各領域の画像を復号する画像デ
ータ復号部と、 を備えることを特徴とする動画像復号化装置。 - 【請求項10】 入力デジタル画像を複数の領域に分割
し、領域毎に分別された画像信号を出力する領域分割ス
テップと、 該領域分割部によって得られた領域形状を表す情報を記
憶するメモリステップと、 前記領域分割部から出力された領域の画像信号、動き情
報、属性情報や、入力画像の領域形状を表す情報などを
符号化し、符号化データを出力する符号化ステップと、 を備え、 前記領域分割ステップは、 過去に領域分割符号化された画像の領域形状を前記メモ
リから読み出し、符号化すべき画像に射影し、初期領域
形状とする射影ステップと、 該射影部によって得られた領域形状を初期形状とした入
力画像の領域のそれぞれについて、所定の判定方法に基
づいてより小さい領域に分割する分割処理ステップと、 該分割処理部によって分割された複数の領域のそれぞれ
について、所定の判定方法に基づいて隣接する領域と統
合するか否かを判定しながら領域の統合を行う統合処理
ステップと、 を備えることを特徴とする動画像符号化方法。 - 【請求項11】 請求項10記載の動画像符号化方法に
おいて、 前記分割処理ステップは、 前記射影ステップにおいて得られた領域毎にアクティビ
ティを計算するアクティビティ算出ステップと、 該アクティビティを予め設定された基準値と比較する比
較ステップと、 該比較ステップにおける比較の結果、前記アクティビテ
ィが基準値を上回る領域をさらに小さな領域へ分割する
細分割ステップと、 を含むことを特徴とする動画像符号化方法。 - 【請求項12】 請求項10記載の動画像符号化方法に
おいて、 前記分割処理ステップは、 前記射影ステップにおいて得られた各領域について、そ
の領域形状とは無関係に固定サイズのブロック単位でア
クティビティを算出するアクティビティ算出ステップ
と、 該アクティビティを予め設定された基準値と比較する比
較ステップと、 該比較ステップにおける比較の結果、アクティビティが
基準値を上回るブロック位置の領域をさらに小さな領域
へ分割する細分割ステップと、 を含むことを特徴とする動画像符号化方法。 - 【請求項13】 請求項10乃至12のいずれかに記載
の動画像符号化方法において、 前記領域分割ステップは、 所定の評価方法に基づいて領域分割を行った結果の評価
値を算出する評価値算出ステップと、 符号化すべき画像を過去に領域分割符号化された画像の
領域形状に基づいて領域分割を行ったときの評価値を判
定し、過去に領域分割符号化された画像の領域形状を利
用するか否かを選択する判定ステップと、 を備えることを特徴とする動画像符号化方法。 - 【請求項14】 請求項13に記載の動画像符号化方法
において、 前記判定ステップは、符号化すべき画像を過去に領域分
割符号化された画像の領域形状に基づいて領域分割を行
ったときの評価値が、予め設定された基準値を超える場
合に、過去に領域分割符号化された画像の領域形状を利
用せずに、領域分割を行うことを特徴とする動画像符号
化方法。 - 【請求項15】 請求項13に記載の動画像符号化方法
において、 前記判定ステップは、符号化すべき画像を過去に領域分
割符号化された画像の領域形状に基づいて領域分割を行
ったときの評価値が、予め設定された基準値を超える場
合に、フレーム内で領域分割を行うことを特徴とする動
画像符号化方法。 - 【請求項16】 複数の領域に分割された後に符号化さ
れた画像の符号化データであって、過去に領域分割符号
化された画像の領域形状を利用して領域分割を行ったか
否かの分割情報を含む符号化データを入力し、この符号
化データを復号する動画像復号化方法において、 前記分割情報をもとに領域形状情報を復号し、符号化の
際に分割された各領域の形状を復元する領域形状復元ス
テップと、 復元した各領域の形状をもとに領域が符号化された順序
を特定し、符号化データから各領域の画像を復号する画
像データ復号ステップと、 を備えることを特徴とする動画像復号化方法。 - 【請求項17】 入力デジタル画像を複数の領域に分割
し、領域毎に分別された画像信号を出力する領域分割ス
テップと、 該領域分割ステップから出力された領域の画像信号、動
き情報、属性情報や、入力画像の領域分割状態を表す情
報などを符号化し、符号化データを出力する符号化ステ
ップと、を備え、 前記領域分割ステップにおいて得られた領域のサイズに
基づいて、選択できる符号化モードの組合せを切り替え
る符号化モード選択ステップと、 を備えることを特徴とする動画像符号化方法。 - 【請求項18】 複数の領域に分割された後に符号化さ
れた画像の符号化データを入力して復号する動画像復号
化方法において、 符号化データに含まれる領域形状情報をもとに符号化の
際に分割された各領域の形状を復元する領域形状復元ス
テップと、 復元した各領域のサイズをもとに選択できる符号化モー
ドの組合せを特定し、符号化データ中の符号化モードに
対応する符号語から該領域の符号化モードを特定し、該
符号化モードに基づいて各領域の画像を復号する画像デ
ータ復号ステップと、 を備えることを特徴とする動画像復号化方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21027897A JP3570863B2 (ja) | 1997-08-05 | 1997-08-05 | 動画像復号化装置および動画像復号化方法 |
| US09/014,917 US6301301B1 (en) | 1997-08-05 | 1998-01-28 | Apparatus and method for coding and decoding a moving image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21027897A JP3570863B2 (ja) | 1997-08-05 | 1997-08-05 | 動画像復号化装置および動画像復号化方法 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002357257A Division JP2003209844A (ja) | 2002-12-09 | 2002-12-09 | 動画像符号化装置および動画像符号化方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH1155672A true JPH1155672A (ja) | 1999-02-26 |
| JP3570863B2 JP3570863B2 (ja) | 2004-09-29 |
Family
ID=16586754
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP21027897A Expired - Lifetime JP3570863B2 (ja) | 1997-08-05 | 1997-08-05 | 動画像復号化装置および動画像復号化方法 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6301301B1 (ja) |
| JP (1) | JP3570863B2 (ja) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001022734A1 (fr) * | 1999-09-21 | 2001-03-29 | Sharp Kabushiki Kaisha | Dispositif de codage d'image |
| JP2003523652A (ja) * | 1999-11-08 | 2003-08-05 | クゥアルコム・インコーポレイテッド | 変化に基づいた適応性ブロックサイズdct画像圧縮 |
| JP2011524515A (ja) * | 2008-05-09 | 2011-09-01 | オムロン サイエンティフィック テクノロジーズ, インコーポレイテッド | 領域監視装置におけるゾーン選択のための方法と装置 |
| JP2013078161A (ja) * | 2007-01-18 | 2013-04-25 | Samsung Electronics Co Ltd | イントラ予測符号化、復号化方法及び装置 |
| JP2013081242A (ja) * | 2002-01-25 | 2013-05-02 | Microsoft Corp | 改良型のビデオコーディング方法および装置 |
| JP2013526199A (ja) * | 2010-04-26 | 2013-06-20 | パナソニック株式会社 | 予測誤差から導出されるブロック形状を用いた予測符号化 |
| US8873630B2 (en) | 2002-06-03 | 2014-10-28 | Microsoft Corporation | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
| JP2015515169A (ja) * | 2012-02-22 | 2015-05-21 | コーニンクレッカ フィリップス エヌ ヴェ | 画像センサと、複数のフレームを用いて視野の外縁に向かって失われる照度を分析して減少させる手段とを含むビジョンシステム |
| JP2015111895A (ja) * | 2009-10-30 | 2015-06-18 | サムスン エレクトロニクス カンパニー リミテッド | ピクチャ境界の符号化単位を符号化/復号化する方法及びその装置 |
| WO2017179960A1 (ko) * | 2016-04-15 | 2017-10-19 | 삼성전자 주식회사 | 인코딩 장치, 디코딩 장치 및 이의 제어 방법 |
Families Citing this family (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6633611B2 (en) * | 1997-04-24 | 2003-10-14 | Mitsubishi Denki Kabushiki Kaisha | Method and apparatus for region-based moving image encoding and decoding |
| JP2001268575A (ja) * | 2000-03-14 | 2001-09-28 | Pioneer Electronic Corp | 画像変化検出装置及び画像変化検出方法、画像符号化装置並びに画像変化検出用プログラムがコンピュータで読取可能に記録された情報記録媒体 |
| FI114679B (fi) * | 2002-04-29 | 2004-11-30 | Nokia Corp | Satunnaisaloituspisteet videokoodauksessa |
| JP3893344B2 (ja) * | 2002-10-03 | 2007-03-14 | 松下電器産業株式会社 | 画像符号化方法および画像符号化装置 |
| WO2004062586A2 (en) * | 2003-01-09 | 2004-07-29 | Zeneus Pharma Limited | Antineoplastic ether lipid compounds |
| BR0317982A (pt) * | 2003-01-10 | 2005-12-06 | Thomson Licensing Sa | Rápida tomada de decisão de modo para codificação interquadros |
| US20060048659A1 (en) * | 2003-01-16 | 2006-03-09 | Hunter Douglas Inc. | Covering for architectural surfaces and method of forming and applying same |
| WO2005004491A1 (en) * | 2003-06-25 | 2005-01-13 | Thomson Licensing S.A. | Fast mode-decision encoding for interframes |
| JP4588360B2 (ja) * | 2004-05-18 | 2010-12-01 | パナソニック株式会社 | 動画像符号化復号化処理方法、動画像符号化復号化処理装置及び動画像双方向通信システム |
| FR2872975A1 (fr) | 2004-07-06 | 2006-01-13 | Thomson Licensing Sa | Procede et dispositif pour choisir un mode de codage |
| JP4487761B2 (ja) * | 2004-12-21 | 2010-06-23 | カシオ計算機株式会社 | データ出力装置、および、プログラム |
| JP4882320B2 (ja) * | 2005-09-09 | 2012-02-22 | セイコーエプソン株式会社 | プロジェクションシステム、情報処理装置、変化画像データ生成方法、変化画像データ生成プログラム、このプログラムを記録した記録媒体 |
| JP4939890B2 (ja) * | 2006-10-02 | 2012-05-30 | 株式会社東芝 | 映像符号化装置、映像復号化装置及び映像復号化方法 |
| JP4636130B2 (ja) * | 2008-06-27 | 2011-02-23 | ソニー株式会社 | 画像処理装置、撮像装置、画像処理方法、およびプログラム |
| KR101530285B1 (ko) | 2010-08-17 | 2015-06-19 | 삼성전자주식회사 | 가변적 트리 구조의 변환 단위를 이용하는 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법 및 그 장치 |
| KR20130108948A (ko) * | 2012-03-26 | 2013-10-07 | 한국전자통신연구원 | 적응적 전처리 기법을 이용한 영상 인코딩 방법 |
| KR20170086977A (ko) * | 2016-01-19 | 2017-07-27 | 삼성전자주식회사 | 영상 데이터 처리 방법 및 장치 |
| US10456666B2 (en) * | 2017-04-17 | 2019-10-29 | Intel Corporation | Block based camera updates and asynchronous displays |
| JP2025075244A (ja) * | 2023-10-31 | 2025-05-15 | パナソニックオートモーティブシステムズ株式会社 | 運転支援装置、運転支援方法、および運転支援システム |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5150432A (en) * | 1990-03-26 | 1992-09-22 | Kabushiki Kaisha Toshiba | Apparatus for encoding/decoding video signals to improve quality of a specific region |
| DE69227352T2 (de) * | 1991-11-12 | 1999-04-15 | Nippon Hoso Kyokai, Tokio/Tokyo | Verfahren und System für die Ausführung einer hochwirksamen Bildsignalkodierung |
| JP3068304B2 (ja) * | 1992-01-21 | 2000-07-24 | 日本電気株式会社 | 動画像符号化方式および復号化方式 |
| US5949956A (en) * | 1994-09-22 | 1999-09-07 | Matsushita Electric Industrial Co., Ltd. | Variable bit rate video encoder, and video recorder, including code amount allocation |
| EP0719049B1 (en) * | 1994-12-20 | 2003-05-28 | Matsushita Electric Industries Co., Ltd. | Method and apparatus for image coding |
| US5883976A (en) * | 1994-12-28 | 1999-03-16 | Canon Kabushiki Kaisha | Selectively utilizing multiple encoding methods |
| JP3086396B2 (ja) * | 1995-03-10 | 2000-09-11 | シャープ株式会社 | 画像符号化装置及び画像復号装置 |
| JP3249729B2 (ja) * | 1995-10-24 | 2002-01-21 | シャープ株式会社 | 画像符号化装置及び画像復号装置 |
| US5963673A (en) * | 1995-12-20 | 1999-10-05 | Sanyo Electric Co., Ltd. | Method and apparatus for adaptively selecting a coding mode for video encoding |
| US5991453A (en) * | 1996-09-30 | 1999-11-23 | Kweon; Ji-Heon | Method of coding/decoding image information |
-
1997
- 1997-08-05 JP JP21027897A patent/JP3570863B2/ja not_active Expired - Lifetime
-
1998
- 1998-01-28 US US09/014,917 patent/US6301301B1/en not_active Expired - Lifetime
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7016420B1 (en) | 1999-09-21 | 2006-03-21 | Sharp Kabushiki Kaisha | Image encoding device |
| US7830966B2 (en) | 1999-09-21 | 2010-11-09 | Sharp Kabushiki Kaisha | Image encoding device |
| WO2001022734A1 (fr) * | 1999-09-21 | 2001-03-29 | Sharp Kabushiki Kaisha | Dispositif de codage d'image |
| JP2003523652A (ja) * | 1999-11-08 | 2003-08-05 | クゥアルコム・インコーポレイテッド | 変化に基づいた適応性ブロックサイズdct画像圧縮 |
| JP2012199963A (ja) * | 1999-11-08 | 2012-10-18 | Qualcomm Inc | 分散に基づいた適応性ブロックサイズdct画像圧縮 |
| US10284843B2 (en) | 2002-01-25 | 2019-05-07 | Microsoft Technology Licensing, Llc | Video coding |
| US9888237B2 (en) | 2002-01-25 | 2018-02-06 | Microsoft Technology Licensing, Llc | Video coding |
| JP2013081242A (ja) * | 2002-01-25 | 2013-05-02 | Microsoft Corp | 改良型のビデオコーディング方法および装置 |
| US8873630B2 (en) | 2002-06-03 | 2014-10-28 | Microsoft Corporation | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
| US9185427B2 (en) | 2002-06-03 | 2015-11-10 | Microsoft Technology Licensing, Llc | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
| US10116959B2 (en) | 2002-06-03 | 2018-10-30 | Microsoft Technology Licesning, LLC | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
| US9571854B2 (en) | 2002-06-03 | 2017-02-14 | Microsoft Technology Licensing, Llc | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
| JP2013078161A (ja) * | 2007-01-18 | 2013-04-25 | Samsung Electronics Co Ltd | イントラ予測符号化、復号化方法及び装置 |
| JP2011524515A (ja) * | 2008-05-09 | 2011-09-01 | オムロン サイエンティフィック テクノロジーズ, インコーポレイテッド | 領域監視装置におけるゾーン選択のための方法と装置 |
| US9264708B2 (en) | 2009-10-30 | 2016-02-16 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding and decoding coding unit of picture boundary |
| JP2015144486A (ja) * | 2009-10-30 | 2015-08-06 | サムスン エレクトロニクス カンパニー リミテッド | ピクチャ境界の符号化単位を符号化/復号化する方法及びその装置 |
| JP2015111894A (ja) * | 2009-10-30 | 2015-06-18 | サムスン エレクトロニクス カンパニー リミテッド | ピクチャ境界の符号化単位を符号化/復号化する方法及びその装置 |
| JP2015111895A (ja) * | 2009-10-30 | 2015-06-18 | サムスン エレクトロニクス カンパニー リミテッド | ピクチャ境界の符号化単位を符号化/復号化する方法及びその装置 |
| JP2013526199A (ja) * | 2010-04-26 | 2013-06-20 | パナソニック株式会社 | 予測誤差から導出されるブロック形状を用いた予測符号化 |
| JP2015515169A (ja) * | 2012-02-22 | 2015-05-21 | コーニンクレッカ フィリップス エヌ ヴェ | 画像センサと、複数のフレームを用いて視野の外縁に向かって失われる照度を分析して減少させる手段とを含むビジョンシステム |
| WO2017179960A1 (ko) * | 2016-04-15 | 2017-10-19 | 삼성전자 주식회사 | 인코딩 장치, 디코딩 장치 및 이의 제어 방법 |
| US10944995B2 (en) | 2016-04-15 | 2021-03-09 | Samsung Electronics Co., Ltd. | Encoding apparatus, decoding apparatus, and control methods therefor |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3570863B2 (ja) | 2004-09-29 |
| US6301301B1 (en) | 2001-10-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3570863B2 (ja) | 動画像復号化装置および動画像復号化方法 | |
| JP4514819B2 (ja) | 動画像復号装置 | |
| KR100716999B1 (ko) | 영상의 대칭성을 이용한 인트라 예측 방법, 이를 이용한영상의 복호화, 부호화 방법 및 장치 | |
| KR101918012B1 (ko) | 화상 예측 부호화 장치, 화상 예측 복호 장치, 화상 예측 부호화 방법, 화상 예측 복호 방법, 화상 예측 부호화 프로그램, 및 화상 예측 복호 프로그램 | |
| KR100643819B1 (ko) | 페이딩 보정을 위한 파라미터화 | |
| KR100578433B1 (ko) | 페이딩 추정/보정 | |
| KR101500781B1 (ko) | 이미지들을 처리하기 위한 방법 및 그 대응하는 전자 장치 | |
| US6771826B2 (en) | Digital image encoding and decoding method and digital image encoding and decoding device using the same | |
| JP2006500796A (ja) | ビデオシーケンス内の動きを符号化する方法 | |
| JPH07288474A (ja) | ベクトル量子化符号化装置と復号化装置 | |
| JPH10178645A (ja) | 動画像信号符号化方法及び装置、動画像信号伝送方法並びに信号記録媒体 | |
| JPH09121359A (ja) | 画像符号化方法および画像復号化方法 | |
| KR100327952B1 (ko) | 영역분할기반동영상압축부호화방법및장치 | |
| KR100257175B1 (ko) | 동화상 부호화 방법, 동화상 부호화 장치 및 동화상 복호 장치 | |
| JP3812808B2 (ja) | スキップ領域検出型動画像符号化装置および記録媒体 | |
| JP3775630B2 (ja) | 動画像の領域分割符号化装置 | |
| JPH11346368A (ja) | 画像処理方法,画像処理装置,及びデ―タ記憶媒体 | |
| JP2003209844A (ja) | 動画像符号化装置および動画像符号化方法 | |
| JP2916027B2 (ja) | 画像符号化装置 | |
| JP2001268581A (ja) | 画像予測復号化方法,画像予測復号化装置,画像予測符号化方法,画像予測符号化装置,及びデータ記憶媒体 | |
| JP2001078199A (ja) | 映像信号符号化装置 | |
| JP4012267B2 (ja) | オブジェクト単位の処理が可能な動映像の符号化/復号化方法及び符号化/復号化装置 | |
| JP2621337B2 (ja) | 背景予測を用いた動画像の予測符号化方式とその装置 | |
| KR200309401Y1 (ko) | 디지털 영상압축 시스템 | |
| JPH05344491A (ja) | フレーム間予測符号化方式 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040420 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040525 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040622 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040622 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070702 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080702 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090702 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100702 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100702 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110702 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110702 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120702 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120702 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130702 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |