JPH099261A - 信号圧縮装置 - Google Patents

信号圧縮装置

Info

Publication number
JPH099261A
JPH099261A JP15631395A JP15631395A JPH099261A JP H099261 A JPH099261 A JP H099261A JP 15631395 A JP15631395 A JP 15631395A JP 15631395 A JP15631395 A JP 15631395A JP H099261 A JPH099261 A JP H099261A
Authority
JP
Japan
Prior art keywords
data
code
variable length
input sample
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP15631395A
Other languages
English (en)
Other versions
JP3992303B2 (ja
Inventor
Takuya Kitamura
卓也 北村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP15631395A priority Critical patent/JP3992303B2/ja
Priority to EP19960304470 priority patent/EP0750427A3/en
Priority to US08/670,777 priority patent/US5774594A/en
Publication of JPH099261A publication Critical patent/JPH099261A/ja
Application granted granted Critical
Publication of JP3992303B2 publication Critical patent/JP3992303B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/149Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • Discrete Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

(57)【要約】 【目的】エントロピー符号化において平均的な符号長の
短縮を図れるようにする。 【構成】原サンプル面の画素情報をブロック化するブロ
ッキング手段20と、ブロッキングされた入力データを
変換するDCT回路30と、DCT変換されたデータを
量子化する量子化器40と、量子化データを可変長符号
化するVLC回路60と、量子化データより符号長を計
測する計測回路80とを有する。エントロピー符号化し
た可変長符号量が単位入力サンプル面のデータ量よりも
多いときは、可変長符号化データに代えて入力サンプル
データそのものを圧縮データとして用いるように、計測
回路80からの出力に基づいて可変長符号化データと入
力サンプルデータとの選択が行なわれる。これによって
平均的な符号量の短縮を図れる。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】この発明は、エントロピー符号化
を利用したビットリダクションによる信号圧縮装置およ
び信号伸長装置に関し、特に可変長符号化したときの符
号量が、入力サンプルデータの符号量よりも多くなるよ
うなときは、可変長符号データの代わりに入力サンプル
データそのものを圧縮データとして使用することによ
り、平均的な伝送符号量の削減を図れるようにしたもの
である。
【0002】
【従来の技術】現在、ディジタル信号のビットリダクシ
ョン技術では主としてエントロピー符号化と呼ばれる技
術が使われている。エントロピー符号化とは入力信号を
周波数変換等の変換を施した後、統計的に多く現れる信
号に対してより短い符号長を割り当てることによって符
号量を削減しようとするものである。
【0003】すなわち信号情報の性質、特に周波数特性
をもとに、統計的に多く出現するシンボルには短いコー
ドを割り当て、あまり出現しないシンボルには長いコー
ドを割り当てることにより、平均として符号量を減少さ
せるようにしている。
【0004】このようなデータ圧縮処理を実現するため
には一般に入力サンプル面(二次元の空間面)の画素情
報を単位ブロック化し、それらに対して離散余弦変換
(DCT)などの直交変換処理を施し、その後量子化し
たものを可変長符号化(エントロピー符号化)する処理
が行なわれる。
【0005】
【発明が解決しようとする課題】入力データを可変長符
号化するに当たっては、場合によってはDCT入力の空
間面のデータ量よりも符号量が増えることがある。例え
ば、DCT化したときの複数のブロックデータ(例えば
64個の空間面データ)のうち1つが非ゼロで、残り全
てがゼロであるようなインパルス信号の場合には、入力
サンプル面つまり周波数面データは全てのDCT係数が
非ゼロになってしまう。これは後述する式(1)より明
らかである。
【0006】このようなインパルス信号は自然画ではあ
まり見られないが、文字をスーパーインポーズする場合
やコンピュータグラフィックス等の画像処理系ではよく
見受けられる信号である。このような画像を圧縮すると
き、可変長符号化時のゼロラン値(後述する)を稼ぐた
めには量子化ステップを大きな値にする必要があり、こ
れによって符号量が多くなってしまう。量子化ステップ
が大きくなることから量子化誤差が目立つようになり、
結果として得られる画質が劣化してしまう。
【0007】そこで、この発明はこのような従来の課題
を解決したものであって、平均的な符号量の減少を図れ
るようにすると共に、画質劣化も改善できるようにした
ものである。
【0008】
【課題を解決するための手段】上述した課題を解決する
ため請求項1に記載したこの発明に係る信号圧縮装置で
は、原サンプル面の画素情報をブロック化して直交変換
したデータに対しエントロピー符号化を利用してデータ
圧縮を行なうようにした信号圧縮装置において、エント
ロピー符号化した可変長符号量が単位入力サンプル面の
データ量よりも多いときは、可変長符号化データに代え
て入力サンプルデータそのものを圧縮データとして用い
るようにしたことを特徴とする。
【0009】請求項7に記載したこの発明に係る信号伸
長装置では、入力ビットストリーム中に可変長符号化デ
ータと入力サンプルデータとが混在するとき、上記可変
長符号化データに対しては元の非圧縮データに変換する
処理が施され、入力サンプルデータに対してはそのまま
非圧縮データとして使用するようにしたことを特徴とす
る。
【0010】
【作用】請求項1はいわゆるエンコーダに関するもので
ある。エントロピー符号化した可変長符号量が単位入力
サンプル面のデータ量よりも多いときは、可変長符号化
データに代えて入力サンプルデータそのものを圧縮デー
タとして用いる。入力サンプルデータを用いることによ
り平均的な符号量が減少する。可変長符号化データと入
力サンプルデータとが混在するため、両者の識別を容易
にするための識別子(つまりノンコード符号)が付加さ
れてデータストリームとなされる。
【0011】請求項7はデコーダに関するものである。
入力ビットストリーム中に可変長符号化データと入力サ
ンプルデータとが混在するとき、可変長符号化データに
対しては元の非圧縮データに変換する処理が施される。
入力サンプルデータに対してはそのまま非圧縮データと
して使用する。両者の識別は上述した識別子に基づいて
行なわれる。
【0012】
【実施例】続いてこの発明に係る信号圧縮装置および信
号伸長装置の一例を図面を参照して詳細に説明する。
【0013】図1は信号圧縮装置10の一例を示す。以
下説明する例はMPEG(Moving Picture coding Expe
rts Group)などで用いられている離散余弦変換(DC
T変換)を用いたビットリダクションについて説明す
る。MPEGでは実際には動き補償技術を用いてフレー
ム間差分を求めることも行なっているが、ここでは説明
を簡単にするため所謂イントラピクチャの処理(フレー
ム内処理)について示す。
【0014】そのためのエンコード処理の代表例はブロ
ッキング処理、DCT変換処理、量子化処理および可変
長符号化処理(VLC処理)であって、これと対応する
ように図1に示す信号圧縮装置(エンコーダ)10には
ブロッキング回路20、DCT変換回路30、量子化回
路40、可変長符号化回路60などが設けられている。
図面を参照しながらそれぞれの処理について説明する。
【0015】DCT変換処理はある決められた大きさの
ブロック状の画素について行なわれる。JPEG(Join
t Photographic coding Experts Group)やMPEG内
部の処理単位は8×8画素の1ブロック単位である。そ
れに対し、対象とする入力画像は、例えば、MPEG2
のMP@MLでは1フレーム720×480画素から構
成されるため、図2のように入力画像(フレームデー
タ)をブロック(8×8画素)ごとに分割する処理が必
要となる。
【0016】ブロッキング処理を実現するブロッキング
回路20の一例を図3に示す。ブロッキング回路20は
2つのRAM21,22を有する。一方例えばRAM2
2が書き込み状態にあるときは、もう片方のRAM21
は読み出し状態に制御される。書き込み側は所謂ラスタ
スキャンのデータをメモリ上に格納するアドレスを受
け、読み出し側は図2のようなブロックを構成するよう
なアドレスを受ける。これらのアドレスは書き込みアド
レス発生回路23,読み出しアドレス発生回路24にて
発生される。これらの発生回路23,24は周知のよう
に適当なカウンタ回路とROMで実現できる。
【0017】RAM22が書き込み状態にあるときは、
RAM21が読み出し状態となるようにアドレス切り替
え用のスイッチSWa,SWbが制御され、また書き込
みパルス(イネーブルパルス)を与えるスイッチSWc
が制御される。RAM21,22からの出力もスイッチ
SWdで切り替えられる。これらの切り替えは同期して
行なわれるものであって、端子25に供給される切り替
えパルスによって制御される。
【0018】入力画像データを分割したブロックについ
てそれぞれDCT変換が行なわれる。DCT変換は二次
元のフーリエ変換と同様に、二次元的な画素情報(空間
面情報)から二次元的な周波数成分情報(周波数面情
報)への変換である。図4(A)に示すように各画素に
二次元配列変数f(*,*)を割り当てたとき、図4
(B)のデータ(DCT係数)F(*,*)に変換する
には式(1)に示す演算を行なえばよいことが知られて
いる。
【0019】
【数1】
【0020】この結果、DCT係数F(*,*)は左か
ら右方向に行くに従い水平周波数の高い成分が、上から
下方向に行くに従い垂直周波数の高い成分が現れること
になる。F(0,*)は垂直周波数がゼロ即ちDCであ
り、F(*,0)は水平周波数がゼロ即ちDCとなる。
F(0,0)は水平、垂直周波数の両方がDCとなり、
そのブロックの画素平均値となる。式(1)より分かる
ように無理数を乗じて加算するため、DCT係数は入力
画像データのビット数よりも出力ビット数が長くなる。
因みに、MPEGでは入力のダイナミックレンジ8ビッ
トに対し、出力のダイナミックレンジは12ビットにな
る。DCT変換回路の具体的なハード構成に付いては高
速アルゴリズム等がすでに発表されているので、その説
明は割愛する。
【0021】自然画のような入力画像では、画像データ
の周波数分布の特徴により、DCT変換の結果は成分に
偏りが出る。例えばDC等の低い周波数成分に振幅の大
きなデータが集まり、高い周波数成分はゼロに近い小さ
な値となる。DC係数以外つまりAC係数は一般にラプ
ラス分布を示し、振幅の小さいものの割合が大きくな
る。この性質(出力の偏り)を利用してビットリダクシ
ョンが行なわれるが、通常このビットリダクションの前
に量子化処理が行なわれる。
【0022】量子化とはDCT係数をある数で割って丸
める処理を言う。図5は量子化器40の具体例である。
量子化器40には除算器42が設けられ、端子40aか
らの入力データ(DCT係数:絶対値)が端子40bに
与えられた量子化ステップ値で割り算され、除算結果で
ある商と小数点以下の情報がそれぞれ丸め回路44に供
給される。
【0023】多くの場合丸めとして四捨五入が使われて
いる。除算処理や丸め処理は符号つき絶対値の方が扱い
易いため、この実現例では符号つき絶対値で扱ってい
る。したがって入力した符号データはそのまま出力さ
れ、また除算器42で割ったときに得られる小数点の絶
対値が0.5以上ならば加算器45において商の絶対値
が1だけ増やされ、0.5未満ならばそのままにして整
数値として出力される。スイッチ46はこの1若しくは
0の値を加算器45に与えるためのスイッチであり、小
数点情報に基づいて制御される。
【0024】量子化することにより自然画のような画で
は、図4(B)に示すDCT係数の高周波成分に相当す
る量子化レベル(量子化した結果)はゼロが頻出する。
その結果、エンコードした後の符号量は減少する。そし
て後述するように量子化のための割る数(量子化ステッ
プ)を増減して所望の符号量になるように制御される。
量子化ステップを大きくすると符号量は減少する反面、
エンコード後の出力画像の画質が劣化する。これは量子
化処理で量子化誤差を持ち、その誤差は量子化ステップ
に比例するからである。
【0025】量子化レベルは図1に示すように可変長符
号化される。MPEG等ではDC以外の量子化レベルに
ついてゼロランとエントロピー符号化を組み合わせた二
次元符号化で符号化(VLC)を行なっている。二次元
のDCT係数は図6に示すようにジグザグスキャンされ
て一次元に並べ変えられる。一次元データは次のように
なる。 F(0,1),F(1,0),F(2,0),F(1,
1),F(0,2),F(0,3),F(1,2),・
・・・・・・・F(5,7),F(6,7),F(7,
6),F(7,7) このジグザグスキャンによって図7のようにゼロが連続
して現れるが、連続するゼロの個数が符号化される。つ
まりゼロラン符号化が行なわれる。このゼロラン符号化
によって効率良く圧縮できる。
【0026】さらに、自然画のような画では非ゼロの成
分は振幅の小さいものほど出現する確率が高くなるよう
な出力の偏りが生ずるためデータの符号化に当たっては
エントロピー符号化が利用される。エントロピー符号化
では振幅の小さいものに対してより短い符号語を割り当
て、振幅の大きいものに対してはより長い符号語を割り
当てる。
【0027】そして、ゼロの続く数とその次の非ゼロ値
がエントロピー符号化される。二次元符号化のときに使
用されるVLCテーブルの一例を図8に示す。このVL
Cテーブルは自然画等の統計データを元に作られてい
る。EOBとは「この係数以降ジグザグスキャンの最後
まで非ゼロ値は出ない」ことを表す。量子化レベルが図
7のようなデータ値であるとき、ジグザグスキャンした
後のデータは次のような配列となる。 「0,0,0,1,−2,0,0,0,−1,0,1,
0,0,0,−1,0,0,0,0,0,0,0,0,
0,0,0,0,0,0,0,0,0,0,0,0,
0,0,0,0,0,0,0,0,0,0,0,0,
0,0,0,0,0,0,0,0,0,0,0,0,
0,0,0,0」 これを(ラン、非ゼロ値)のシンボルで表すと、 「(3,1),(0,−2),(3,−1),(1,
1),(3,−1),(EOB)」 となる。このシンボルをVLCテーブルを利用してバイ
ナリー表示すると、 「001110 01001 001111 0110
001111 10」 となる。これをMSBビットを先頭ビットとして8ビッ
トずつ切り出しヘキサデシマル表示すると、 「3927b1f0」 となる。これがビットストリームとなる。
【0028】以上のような可変長符号化処理を行なうた
めの可変長符号化回路(VLC回路)60の具体例を図
9に示す。
【0029】図9において、ゼロランカウンタ62は入
力データ(量子化レベル)がゼロである事象が連続した
回数をカウントするもので、入力データが非ゼロ値のと
きに同期クリアされる。したがってノア回路61より出
力された入力データでカウントアップし、オア回路62
より出力された入力データでクリアされる。その結果、
ゼロランカウンタ62の出力である「ゼロラン値」と入
力データそのものとで二次元事象が構成される。
【0030】この二次元事象は2つのROM64,65
に与えられ、符号長ROM64からは二次元事象の符号
長が出力され、符号語ROM65からは二次元事象の符
号語がビット詰めして出力される。符号長データはアド
レス発生回路66に入力される。
【0031】アドレス発生回路66からは符号長データ
の積算値がアドレスデータとして出力される。アドレス
発生回路66は、図示しないが適当な累算器と簡単なロ
ジックで構成されたものを使用することができる。
【0032】アドレスデータによってRAM68のアド
レスがコントロールされると共にバレルシフタ67のシ
フト量が制御される。バレルシフタ67によって直前の
符号語の最後に、現在の符号語の先頭が繋がるように符
号語ROM65からの出力符号語がシフトされる。
【0033】RAM68はread-modify-write用として
使用される。つまり、頭出しされた現在の符号語と、直
前の符号語が書かれたアドレスのRAMデータをフィー
ドバックしてビットごとにセレクトする。つまり、直前
の符号の占めるビット分はフィードバック系側に、それ
以外のビットは符号語ROM65側に切り替わる。こう
して、直前の符号に結合した形の現在のVLCデータが
RAM68に書き込まれる。
【0034】この処理がEOBまで繰り返えされてRA
M68にエンコードしたビットストリームが蓄えられ、
後にRAM68の内容を順次読み出すことによって出力
ビットストリームが得られる。
【0035】上述したようにこの発明では取り扱う入力
画像によっては、可変長符号化された符号量が入力サン
プルデータ量よりも多くなることが予想され、その場合
には平均的な符号量が増えてしまうことを考慮して、可
変長符号化された符号量と入力サンプルデータ量との多
少をブロック単位で比較し、可変長符号化された符号量
が入力サンプルデータ量を越えるときには入力サンプル
データそのもの(圧縮されていない生のデータつまりノ
ンコーディックデータであって固定長)を伝送データと
して使用するようにしたものである。
【0036】その結果、伝送データを構成するビットス
トリームにはコーディックデータ((DCT+量子化+
VLC)処理されたブロックデータ)と固定長のノンコ
ーディックデータとが混在することになり、両者を識別
するための識別子(ノンコード符号という)がビットス
トリーム中に多重される。
【0037】仮にこのノンコード符号の符号長をAビッ
トとし、ブロックのデータサンプル数を8×8=64、
入力サンプルデータは8ビットであるとする。そうした
場合、可変長符号化した後の符号長を常にモニタし、も
し、この符号長Xが、 X〉A+64×8 であるときは、ノンコード符号Aと共にノンコードデー
タ(入力サンプルデータ)(=64×8ビット)を伝送
するようにしたものである。ノンコード符号Aとしては
1ビット以上の適当なビット数を当てることができる。
【0038】以上の処理を実現するため、図1に示すよ
うに可変長符号化回路60の前段にはVLC符号長計測
回路80が設けられる。そして、可変長符号化回路60
には時間合わせのレジスタ50を通過した量子化レベル
と、さらにブロッキング回路20のブロックデータ(ノ
ンコーディックデータ)が時間合わせのレジスタ55を
介してそれぞれ供給される。レジスタ50は計測回路8
0で符号長を測定するまで入力データを遅延させるため
のもので、レジスタ55はレジスタ50の出力データと
タイミングを合わせるために使用される。
【0039】可変長符号化回路60ではノンコード処理
に応じてノンコーディックデータとコーディックデータ
との切り替えとノンコード符号Aの多重処理が行なわれ
る。そのため、ノン−コード処理に対応して可変長符号
化回路60には図9のように複数のスイッチ70,71
が設けられる。端子80aには計測回路80より出力さ
れたノンコード切り替え信号が供給される。端子72に
は固定長符号が与えられる。そして、可変長符号長が長
いときには符号語ROM65からのノンコード符号Aが
スイッチ70によって選択され、符号長ROM64側で
はスイッチ71を用いてノンコード用の固定符号長に切
り替えられる。レジスタ55より出力されたノンコーデ
ィックデータがスイッチ70によって選択される。
【0040】図10は上述した可変長符号長計測回路8
0の具体例である。この計測回路80にもゼロランカウ
ンタ82が設けられ、ノア回路81の出力でカウントア
ップされ、オア回路83の出力でリセットされること
で、ゼロラン値が求められる。このゼロラン値と非ゼロ
値が符号長ROM84に供給されて入力データの符号長
が算出される。符号長を示すデータはブロック長積算回
路85に積算され、その値が判定基準Xと比較器86で
比較され、その比較結果がノンコード切り替え信号とな
る。
【0041】コーディックデータとノンコーディックデ
ータとが混在したビットストリームよりデータをデコー
ドするための処理系が図11以降に示されている。図1
1はこの発明に適用できる信号伸長装置(デコーダ)1
00の具体例である。
【0042】デコード側ではノン−コード符号をビット
ストリーム上に認めた場合は一般のデコードの処理をせ
ずにそのままサンプルデータとして出力することによ
り、さきのビットストリームをデコードすることができ
る。
【0043】そのため、図11に示すように入力ビット
ストリームは可変長復号化回路(VLD回路)110で
解読され、通常のデータ(コーディックデータ)である
ときは逆量子化器120を経て、離散余弦逆変換回路
(IDCT回路)140に入って空間面のブロックデー
タに変換される。
【0044】これに対してノンコーディックデータであ
るときはFIFO構成のレジスタ145で上述した通常
処理の時間合わせのために所定時間遅延された後セレク
タ119に送られる。
【0045】VLD回路110でノンコード符号Aが検
出されたときはセレクタ119がノンコード側に切り替
えられてノンコードで伝送されたブロックデータがデブ
ロッキング回路150に送られる。ノンコード符号Aが
検出されないときはセレクタ119が通常処理系に切り
替えられて通常処理系の結果がデブロッキング回路15
0に導びかれる。
【0046】VLD回路110では量子化後のデータが
再現される。先の例でいえば、 「3927b1f0」 の入力に対してジグザグスキャンした後のデータ 「0,0,0,1,−2,0,0,0,−1,0,1,
0,0,0,−1,0,0,0,0,0,0,0,0,
0,0,0,0,0,0,0,0,0,0,0,0,
0,0,0,0,0,0,0,0,0,0,0,0,
0,0,0,0,0,0,0,0,0,0,0,0,
0,0,0,0」 が出力される。
【0047】図12はこのVLD回路110の一例を示
す。入力データはRAM111に蓄えられる。1符号語
ずつデコードしていくため、今までデコードした総符号
長より、現在デコードすべき符号語のアドレスをアドレ
ス発生回路115によって求め、そのアドレス値がRA
M111に与えられる。次に今までデコードした総符号
長より現在デコードすべき符号語の先頭位置がアドレス
発生回路115で分かるので、これを求めてバレルシフ
タ112に与え、現在デコードすべき符号語の頭出しが
行なわれる。頭出しされた符号語は2つのROM11
3,114に供給される。一方のROM113は符号語
から符号長を出力する逆符号長ROMであり、もう一方
のROM114は符号語から二次元事象であるゼロラン
値と非ゼロ値を出力する逆符号語ROMである。
【0048】逆符号長ROM113により現在の符号語
の符号長を求めて、アドレス発生回路115に与える。
アドレス発生回路115では次の符号語のRAM111
上のアドレスとバレルシフタ112へのシフト量が算出
される。逆符号語ROM114により求められたゼロラ
ン値はゼロランカウンタ116にロードされ、このカウ
ンタ116がデクリメントして0になるまでセレクタ1
18を”0”側に倒して、ゼロラン値の個数に相当する
ゼロを出力する。
【0049】ゼロランカウンタ116がゼロになるとセ
レクタ118が”1”側となって逆符号語ROM114
から出力される非ゼロ値がセレクトされて出力される。
ゼロランカウンタ116が動作している間はアドレス回
路115は動作しないようにゼロランカウンタ116の
出力で制御される。
【0050】一方、ノンコード符号検出回路117でノ
ンコード符号Aの存在が確認されると、それ以降のデー
タブロックは全て固定長のデータであると判断し、スイ
ッチ121が切り替えられてアドレス発生回路115に
は固定符号長(固定値)が送られる。これと同時に、ス
イッチ118がバレルシフタ112側に切り替えられて
バレルシフタ出力がそのまま出力される。つまりノンコ
ーディックデータが選択される。
【0051】ノンコード符号検出回路117はブロック
毎にクリアされるようにし、一度ノンコードであると判
断したら、当該ブロックが終了するまでノンコード処理
をが継続される。
【0052】逆量子化はエンコード側の量子化と逆の処
理である。VLD回路110からの出力に量子化ステッ
プを乗ずることによって逆量子化出力を得ることができ
る。図13は逆量子化回路120の具体例であって乗算
器122のみで構成される。端子124よりデコードさ
れた量子化データ(絶対値データ)が供給され、端子1
26よりの量子化ステップを乗算することによって逆量
子化データが求められる。
【0053】IDCT処理はDCT処理とは逆の処理で
あり、この逆処理により周波数面の情報であったブロッ
クデータから空間面のブロックデータが得られる。ID
CT処理は(2)式に示す演算で実現できる。
【0054】
【数2】
【0055】デブロッキング処理はブロックデータの形
からフレームデータに戻す処理であって、この処理によ
って再生画像データが得られる。
【0056】なお、上述した処理は現在使われているM
PEG等の符号化にすぐ使えるわけではない。というの
は上述したノン−コード符号がビットストリーム上に定
義されていないからである。これを勝手に定義するのは
互換性の点で認められない。したがって上述した処理に
よって得られるビットストリームは新フォーマットのビ
ットストリームである。
【0057】上述した処理の変形例を以下に説明する。
【0058】1.上述した説明ではDCTブロック毎に
圧縮するか圧縮しないかを判断したが、その判断単位と
してはマクロブロック単位、スライス単位、ピクチャ単
位などを利用できる。
【0059】2.上述した説明ではイントラ処理につい
て述べていたが、MPEG等でいうところのインター処
理(フレーム間処理)にも適用できる。
【0060】3.上述した説明では、画像信号のビット
リダクションについて述べたが、音声等、他の信号に関
するビットリダクションにも適用できる。
【0061】4.上述した説明では、直交変換処理とし
てDCTを用いた、いわゆる変換符号化によるビットリ
ダクションについて述べたが、エントロピー符号化を用
いたものならば全てに適用可能である。
【0062】5.上述した説明では、エンコード側(圧
縮装置側)ではブロッキング処理が含まれているが、必
要に応じてブロッキング処理やデブロッキング処理を省
くことも可能である。
【0063】
【発明の効果】以上説明したようにこの発明では、エン
トロピー符号化を利用したビットリダクションによる信
号圧縮・伸長処理において、符号量がある値を越える部
分については、入力データそのものを伝送するようにし
たため、平均的な符号長を削減でき、伝送効率を改善で
きる特徴を有する。したがってこの発明は画像などの圧
縮・伸長装置に適用して極めて好適である。
【図面の簡単な説明】
【図1】この発明に係る信号圧縮装置の一例を示す系統
図である。
【図2】ブロッキング処理を説明するための図である。
【図3】ブロッキング回路の一例を示す系統図である。
【図4】DCT処理とIDCT処理の説明図である。
【図5】量子化器の一例を示す系統図である。
【図6】ジグザグスキャン例を示す図である。
【図7】ジグザグスキャン時の具体的数値例を示す図で
ある。
【図8】二次元符号化のためのVLCテーブル例を示す
図である。
【図9】可変長符号化回路の一例を示す系統図である。
【図10】可変長符号長計測回路の一例を示す系統図で
ある。
【図11】この発明を適用した信号伸長装置の一例を示
す系統図である。
【図12】可変長符号化回路の一例を示す系統図であ
る。
【図13】逆量子化器の一例を示す系統図である。
【符号の説明】
10 信号圧縮装置 30 DCT回路 40 量子化器 60 可変長符号化回路 80 符号長計測回路 62 ゼロランカウンタ 64 符号長ROM 65 符号語ROM 100 信号伸長回路 110 可変長復号化回路 120 逆量子化器 140 IDCT回路

Claims (8)

    【特許請求の範囲】
  1. 【請求項1】 原サンプル面の画素情報をブロック化し
    て直交変換したデータに対しエントロピー符号化を利用
    してデータ圧縮を行なうようにした信号圧縮装置におい
    て、 エントロピー符号化した可変長符号量が単位入力サンプ
    ル面のデータ量よりも多いときは、可変長符号化データ
    に代えて入力サンプルデータそのものを圧縮データとし
    て用いるようにしたことを特徴とする信号圧縮装置。
  2. 【請求項2】 原サンプル面の画素情報を直交変換する
    直交変換手段と、 直交変換されたデータを量子化する量子化手段と、 量子化レベルを可変長符号化する可変長符号化手段と、 上記量子化レベルより符号長を計測する計測手段とを有
    し、 この計測手段からの出力に基づいて可変長符号化データ
    と入力サンプルデータとの選択が行なわれるようにした
    ことを特徴とする請求項1記載の信号圧縮装置。
  3. 【請求項3】 上記直交変換手段としては、離散余弦変
    換手段が使用されたことを特徴とする請求項1記載の信
    号圧縮装置。
  4. 【請求項4】 可変長符号化データと入力サンプルデー
    タとを識別するための識別子がノンコード符号として圧
    縮処理後のビットストリーム上に多重されたことを特徴
    とする請求項1記載の信号圧縮装置。
  5. 【請求項5】 上記可変長符号化データの符号量が、入
    力サンプルデータに上記識別子を加えたときの符号量よ
    りも大きいときに上記入力サンプルデータが選択される
    ようになされたことを特徴とする請求項1記載の信号圧
    縮装置。
  6. 【請求項6】 上記符号長は、DCTブロック単位、マ
    クロブロック単位、スライス単位、ピクチャー単位の符
    号長などであることを特徴とする請求項1記載の信号圧
    縮装置。
  7. 【請求項7】 入力ビットストリーム中に可変長符号化
    データと入力サンプルデータとが混在するとき、 上記可変長符号化データに対しては元の非圧縮データに
    変換する処理が施され、入力サンプルデータに対しては
    そのまま非圧縮データとして使用するようにしたことを
    特徴とする信号伸長装置。
  8. 【請求項8】 入力ビットストリームが供給され、可変
    長復号化処理が行なわれる可変長復号化手段と、 復号化されたデータを逆量子化する逆量子化手段と、 逆量子化されたデータをサンプル面データに変換する逆
    変換手段と、 可変長符号化データと入力サンプルデータとの識別子を
    検出する識別子検出手段とで構成された請求項7記載の
    信号伸長装置。
JP15631395A 1995-06-22 1995-06-22 信号圧縮装置と信号伸長装置および信号圧縮方法と信号伸長方法 Expired - Lifetime JP3992303B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP15631395A JP3992303B2 (ja) 1995-06-22 1995-06-22 信号圧縮装置と信号伸長装置および信号圧縮方法と信号伸長方法
EP19960304470 EP0750427A3 (en) 1995-06-22 1996-06-17 Signal compression and/or expansion devices
US08/670,777 US5774594A (en) 1995-06-22 1996-06-20 Signal compression device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP15631395A JP3992303B2 (ja) 1995-06-22 1995-06-22 信号圧縮装置と信号伸長装置および信号圧縮方法と信号伸長方法

Publications (2)

Publication Number Publication Date
JPH099261A true JPH099261A (ja) 1997-01-10
JP3992303B2 JP3992303B2 (ja) 2007-10-17

Family

ID=15625076

Family Applications (1)

Application Number Title Priority Date Filing Date
JP15631395A Expired - Lifetime JP3992303B2 (ja) 1995-06-22 1995-06-22 信号圧縮装置と信号伸長装置および信号圧縮方法と信号伸長方法

Country Status (3)

Country Link
US (1) US5774594A (ja)
EP (1) EP0750427A3 (ja)
JP (1) JP3992303B2 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007166039A (ja) * 2005-12-09 2007-06-28 Matsushita Electric Ind Co Ltd 画像符号化装置
US7796690B2 (en) 2002-10-10 2010-09-14 Sony Corporation Video-information encoding method and video-information decoding method
JP2011061877A (ja) * 2010-12-27 2011-03-24 Sony Corp 符号化装置及び符号化方法
JP2011061878A (ja) * 2010-12-27 2011-03-24 Sony Corp 符号化装置、符号化方法、復号装置、復号方法及び記録媒体
JP2011087326A (ja) * 2010-12-27 2011-04-28 Sony Corp 復号装置及び復号方法
JP2011101404A (ja) * 2010-12-27 2011-05-19 Sony Corp 復号装置及び復号方法
JP2012175206A (ja) * 2011-02-18 2012-09-10 Sony Corp 画像処理装置および方法
JP2012178891A (ja) * 2012-06-22 2012-09-13 Sony Corp 符号化装置及び符号化方法
JP2012178892A (ja) * 2012-06-22 2012-09-13 Sony Corp 符号化装置、符号化方法及び記録媒体
JP2012200011A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置、復号方法及び記録媒体
JP2012200010A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置及び復号方法
JP2012200009A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置及び復号方法
JP2012200008A (ja) * 2012-06-22 2012-10-18 Sony Corp 符号化装置及び符号化方法
JP2012200012A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置及び復号方法

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100346740B1 (ko) * 1996-09-21 2002-09-18 삼성전자 주식회사 이산코사인변환계수예측방법
FI103003B (fi) 1997-06-13 1999-03-31 Nokia Corp Suodatusmenetelmä, suodatin ja kannettava päätelaite
JP4368575B2 (ja) * 2002-04-19 2009-11-18 パナソニック株式会社 可変長復号化方法、可変長復号化装置およびプログラム
JP2004007251A (ja) * 2002-05-31 2004-01-08 Fuji Xerox Co Ltd 画像処理装置
US7212681B1 (en) * 2003-01-15 2007-05-01 Cisco Technology, Inc. Extension of two-dimensional variable length coding for image compression
US7194137B2 (en) * 2003-05-16 2007-03-20 Cisco Technology, Inc. Variable length coding method and apparatus for video compression
EP1538844A3 (en) 2003-11-26 2006-05-31 Samsung Electronics Co., Ltd. Color image residue transformation and encoding method
US7499595B2 (en) * 2004-08-18 2009-03-03 Cisco Technology, Inc. Joint amplitude and position coding for photographic image and video coding
US7471841B2 (en) 2004-06-15 2008-12-30 Cisco Technology, Inc. Adaptive breakpoint for hybrid variable length coding
US7499596B2 (en) 2004-08-18 2009-03-03 Cisco Technology, Inc. Amplitude coding for clustered transform coefficients
US7454076B2 (en) * 2004-06-15 2008-11-18 Cisco Technology, Inc. Hybrid variable length coding method for low bit rate video coding
US7471840B2 (en) * 2004-08-18 2008-12-30 Cisco Technology, Inc. Two-dimensional variable length coding of runs of zero and non-zero transform coefficients for image compression
US7492956B2 (en) * 2004-08-18 2009-02-17 Cisco Technology, Inc. Video coding using multi-dimensional amplitude coding and 2-D non-zero/zero cluster position coding
US7454073B2 (en) * 2004-06-15 2008-11-18 Cisco Technology, Inc. Video compression using multiple variable length coding processes for multiple classes of transform coefficient blocks
US7620258B2 (en) * 2004-08-18 2009-11-17 Cisco Technology, Inc. Extended amplitude coding for clustered transform coefficients
US7680349B2 (en) * 2004-08-18 2010-03-16 Cisco Technology, Inc. Variable length coding for clustered transform coefficients in video compression
KR100647294B1 (ko) 2004-11-09 2006-11-23 삼성전자주식회사 화상 데이터 부호화 및 복호화 방법 및 장치
KR20060042295A (ko) * 2004-11-09 2006-05-12 삼성전자주식회사 화상 데이터 부호화 및 복호화 방법 및 장치
US7242328B1 (en) * 2006-02-03 2007-07-10 Cisco Technology, Inc. Variable length coding for sparse coefficients
JP5850214B2 (ja) 2011-01-11 2016-02-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
US11019365B2 (en) 2015-07-30 2021-05-25 Zhejiang Dahua Technology Co., Ltd. Methods and systems for image compression

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5411614A (en) * 1977-06-27 1979-01-27 Nec Corp Code conversion unit for digital signal
US5121216A (en) * 1989-07-19 1992-06-09 Bell Communications Research Adaptive transform coding of still images
US5475501A (en) * 1991-09-30 1995-12-12 Sony Corporation Picture encoding and/or decoding method and apparatus
KR0150955B1 (ko) * 1992-05-27 1998-10-15 강진구 비트고정을 위한 영상압축방법과 신장방법 및 그 장치
US5982437A (en) * 1992-10-26 1999-11-09 Sony Corporation Coding method and system, and decoding method and system
US5400075A (en) * 1993-01-13 1995-03-21 Thomson Consumer Electronics, Inc. Adaptive variable length encoder/decoder
EP0687111B1 (de) * 1994-06-06 2003-08-06 sci worx GmbH Verfahren zur Codierung/Decodierung eines Datenstroms
US5553160A (en) * 1994-09-01 1996-09-03 Intel Corporation Method and apparatus for dynamically selecting an image compression process based on image size and color resolution
JPH08116447A (ja) * 1994-10-18 1996-05-07 Fuji Xerox Co Ltd 画像信号の符号化装置

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8160135B2 (en) 2002-10-10 2012-04-17 Sony Corporation Video-information encoding method and video-information decoding method
US8170100B2 (en) 2002-10-10 2012-05-01 Sony Corporation Video-information encoding method and video-information decoding method
US8467446B2 (en) 2002-10-10 2013-06-18 Sony Corporation Video-information encoding method and video-information decoding method
US9979966B2 (en) 2002-10-10 2018-05-22 Sony Corporation Video-information encoding method and video-information decoding method
US9204145B2 (en) 2002-10-10 2015-12-01 Sony Corporation Video-information encoding method and video-information decoding method
KR101031561B1 (ko) * 2002-10-10 2011-04-27 소니 주식회사 부호화 장치 및 부호화 방법
US7796690B2 (en) 2002-10-10 2010-09-14 Sony Corporation Video-information encoding method and video-information decoding method
US8494044B2 (en) 2002-10-10 2013-07-23 Sony Corporation Video-information encoding method and video-information decoding method
US8428139B2 (en) 2002-10-10 2013-04-23 Sony Corporation Video-information encoding method and video-information decoding method
US8467454B2 (en) 2002-10-10 2013-06-18 Sony Corporation Video-information encoding method and video-information decoding method
US8189658B2 (en) 2002-10-10 2012-05-29 Sony Corporation Video-information encoding method and video-information decoding method
US8494043B2 (en) 2002-10-10 2013-07-23 Sony Corporation Video-information encoding method and video-information decoding method
US8477837B2 (en) 2002-10-10 2013-07-02 Sony Corporation Video-information encoding method and video-information decoding method
US8472518B2 (en) 2002-10-10 2013-06-25 Sony Corporation Video-information encoding method and video-information decoding method
JP2007166039A (ja) * 2005-12-09 2007-06-28 Matsushita Electric Ind Co Ltd 画像符号化装置
US7848579B2 (en) 2005-12-09 2010-12-07 Panasonic Corporation Image coding device, method and computer program with data coding amount prediction
JP2011101404A (ja) * 2010-12-27 2011-05-19 Sony Corp 復号装置及び復号方法
JP2011087326A (ja) * 2010-12-27 2011-04-28 Sony Corp 復号装置及び復号方法
JP2011061878A (ja) * 2010-12-27 2011-03-24 Sony Corp 符号化装置、符号化方法、復号装置、復号方法及び記録媒体
JP2011061877A (ja) * 2010-12-27 2011-03-24 Sony Corp 符号化装置及び符号化方法
JP2012175206A (ja) * 2011-02-18 2012-09-10 Sony Corp 画像処理装置および方法
JP2012200008A (ja) * 2012-06-22 2012-10-18 Sony Corp 符号化装置及び符号化方法
JP2012200012A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置及び復号方法
JP2012200009A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置及び復号方法
JP2012200010A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置及び復号方法
JP2012200011A (ja) * 2012-06-22 2012-10-18 Sony Corp 復号装置、復号方法及び記録媒体
JP2012178892A (ja) * 2012-06-22 2012-09-13 Sony Corp 符号化装置、符号化方法及び記録媒体
JP2012178891A (ja) * 2012-06-22 2012-09-13 Sony Corp 符号化装置及び符号化方法

Also Published As

Publication number Publication date
JP3992303B2 (ja) 2007-10-17
EP0750427A3 (en) 2000-07-12
EP0750427A2 (en) 1996-12-27
US5774594A (en) 1998-06-30

Similar Documents

Publication Publication Date Title
JP3992303B2 (ja) 信号圧縮装置と信号伸長装置および信号圧縮方法と信号伸長方法
US20030128753A1 (en) Optimal scanning method for transform coefficients in coding/decoding of image and video
JPH0377477A (ja) 可変長符号化方法及びその装置
JPH0686262A (ja) 画像符号化装置
US5748244A (en) Adaptive runlength coding based on zero and non-zero subblocks
JPH10243399A (ja) 符号量制御装置及び該符号量制御装置を含む動画像符号化装置
EP0692913B1 (en) Digital coding/decoding apparatus using variable length codes
US6298087B1 (en) System and method for decoding a variable length code digital signal
JP2022539311A (ja) ピクチャのサブセクション用の独立したcabac
JP3153404B2 (ja) ディジタルビデオ・ビットストリームコーダ
JP2000506715A (ja) Mpeg―2ビデオデータ用二重速度可変長デコーダおよび復号化アーキテクチャ
KR101710619B1 (ko) 단계적인 영상 부호화, 복호화 방법 및 장치
JP3696490B2 (ja) デコーダのビデオメモリ条件を減少させる方法及びビデオデコーダ
JP3105906B2 (ja) 画像処理装置
JP3217507B2 (ja) 画像圧縮装置
US20060233447A1 (en) Image data decoding apparatus and method
JP2002112268A (ja) 圧縮画像データ復号装置
JPH09261635A (ja) データ圧縮回路およびデータ伸長回路および動き補償予測復号装置
US20060227865A1 (en) Unified architecture for inverse scanning for plurality of scanning scheme
JP3624450B2 (ja) 画像データ符号化方法及び画像データ符号化装置
JPH05227519A (ja) 画像デ―タの符号化装置および復号化装置
US7103102B2 (en) Bit stream code lookup table for an MPEG-4 code word
KR20060027831A (ko) 신호를 비트 스트림으로 인코딩하는 방법
KR0160616B1 (ko) 디지탈 영상 압축방법 및 그 장치
KR0152015B1 (ko) 가변장 부호화/복호화방법 및 그 장치

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040824

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041025

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20041124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050124

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20050127

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20050826

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070615

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070724

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100803

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100803

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110803

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110803

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120803

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120803

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130803

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term