JPH04176290A - 画像符号化装置 - Google Patents
画像符号化装置Info
- Publication number
- JPH04176290A JPH04176290A JP2304610A JP30461090A JPH04176290A JP H04176290 A JPH04176290 A JP H04176290A JP 2304610 A JP2304610 A JP 2304610A JP 30461090 A JP30461090 A JP 30461090A JP H04176290 A JPH04176290 A JP H04176290A
- Authority
- JP
- Japan
- Prior art keywords
- block
- image
- encoding
- classification
- moving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
[産業上の利用分野]
本発明は動画像符号化伝送装置あるいはCDROM等に
動画像を記録するための装置等に使用する画像符号化装
置に関する。
動画像を記録するための装置等に使用する画像符号化装
置に関する。
[従来の技術〕
一般に、画像情報を伝送する場合あるいは画像を記録し
ておく場合においては、画像の情報量が膨大なのに対し
て、伝送に用いる回線の回線速度やコストまた、記録メ
ディアの容量やコスト等の点から、画像の情報量を圧縮
符号化し情報量を少なくして伝送したつ記録したりしな
ければならない0 その場合の画像情報の高能率符号化装置として、画像を
複数個のザンプルからなる小ブロックに分割して、その
各小ブロックの画像信号に対して、あるいは各小ブロッ
クにおける各種予測誤差信号に対して離散的コサイン変
換等の直交変換を施し、その変換係数を量子化して符号
化する変換符号化装置が知られている。
ておく場合においては、画像の情報量が膨大なのに対し
て、伝送に用いる回線の回線速度やコストまた、記録メ
ディアの容量やコスト等の点から、画像の情報量を圧縮
符号化し情報量を少なくして伝送したつ記録したりしな
ければならない0 その場合の画像情報の高能率符号化装置として、画像を
複数個のザンプルからなる小ブロックに分割して、その
各小ブロックの画像信号に対して、あるいは各小ブロッ
クにおける各種予測誤差信号に対して離散的コサイン変
換等の直交変換を施し、その変換係数を量子化して符号
化する変換符号化装置が知られている。
第4図に、上述の変換符号化装置を用いた従来の伝送装
置の一実施例を示す。
置の一実施例を示す。
ブロック単位に分割されて入力部1へ順次送られてぐる
入力画像は、直交変換部2で直交変換された後、量子化
部3で量子化ステップ制御部4の指示に従って量子化さ
れる。量子化された結果はマルチプレクサ部5及び送信
バッファ6を介して外部へ伝送される。同時に、量子化
されたデータは逆量子化部7及び逆直交変換部8で逆変
換されて入力画像が再生され、動き探索・補償部9を介
して減算器10へ戻されて次の入力画像信号との差が取
られる。
入力画像は、直交変換部2で直交変換された後、量子化
部3で量子化ステップ制御部4の指示に従って量子化さ
れる。量子化された結果はマルチプレクサ部5及び送信
バッファ6を介して外部へ伝送される。同時に、量子化
されたデータは逆量子化部7及び逆直交変換部8で逆変
換されて入力画像が再生され、動き探索・補償部9を介
して減算器10へ戻されて次の入力画像信号との差が取
られる。
[発明が解決しようとする課題]
一般にテレビ電話、テレビ会議等で伝送される画像での
関心領域は人物像である場合が多く、またそれは常に動
きをともなっている。
関心領域は人物像である場合が多く、またそれは常に動
きをともなっている。
かつ、人間の視覚として動きのある部分に注視するとい
う特性を持つ。
う特性を持つ。
前述の従来例では、入力されたブロックのデータがどう
いうものを写したものかの属性にかかわらず単にそのブ
ロックが輝度ブロックか色差ブロックか、あるいは係数
の次数、および送信バッファ6の量などにより量子化ス
テップが制御されるにすぎず、伝送すべき画像情報にお
ける関心領域をより鮮明な画像として伝送することは不
可能であって、伝送すべき画像のポイントを失ってしオ
うという問題があった。
いうものを写したものかの属性にかかわらず単にそのブ
ロックが輝度ブロックか色差ブロックか、あるいは係数
の次数、および送信バッファ6の量などにより量子化ス
テップが制御されるにすぎず、伝送すべき画像情報にお
ける関心領域をより鮮明な画像として伝送することは不
可能であって、伝送すべき画像のポイントを失ってしオ
うという問題があった。
また、動きのある部分であるかどうかに係わらず符号化
され、受信側での視覚特性が考慮されないため、動きの
ある部分が特に劣化して観測づれるという問題もあった
。
され、受信側での視覚特性が考慮されないため、動きの
ある部分が特に劣化して観測づれるという問題もあった
。
そこで、本発明は簡単な構成で、動きのある部分の画質
が良好になるように、加えてテレビ電話、テレビ会議な
どで伝送すべき関心領域が受信側で再生されたときに他
の部分と比べてより鮮明になるように制御することによ
って、視覚特性に応じた、かつ用途に応じた適切な画像
の符号化をすることができる動画像符号化伝送装置等に
使用する画像符号化装置を提供することを目的としてい
る。
が良好になるように、加えてテレビ電話、テレビ会議な
どで伝送すべき関心領域が受信側で再生されたときに他
の部分と比べてより鮮明になるように制御することによ
って、視覚特性に応じた、かつ用途に応じた適切な画像
の符号化をすることができる動画像符号化伝送装置等に
使用する画像符号化装置を提供することを目的としてい
る。
〔課題を解決するための手段」
上述の目的を達成するために本発明は、入力画像をブロ
ックに分割してブロック毎に符号化する画像符号化装置
において、各ブロックの動き量を検出チる動き量検出手
段と、前記動き量に基づいて各ブロックを分類するブロ
ック分類手段と、前記分類に応じて各ブロック毎に符号
化ステップを決定する符号化ステップ制御手段と、前記
符号化ステップに応じて各ブロック毎に入力画像を符号
化する符号化手段とを有することを特徴とする画像符号
化装置である。
ックに分割してブロック毎に符号化する画像符号化装置
において、各ブロックの動き量を検出チる動き量検出手
段と、前記動き量に基づいて各ブロックを分類するブロ
ック分類手段と、前記分類に応じて各ブロック毎に符号
化ステップを決定する符号化ステップ制御手段と、前記
符号化ステップに応じて各ブロック毎に入力画像を符号
化する符号化手段とを有することを特徴とする画像符号
化装置である。
[作用]
動き量検出手段は各ブロック毎に動き量を検出し、この
動き量を基にして尚該ブロックをブロック分類手段によ
って分類する。こうして各ブロック毎に施された分類に
応じて符号化ステップ制御手段が符号化ステップを決定
し、この符号化ステップに従って符号化手段が入力画像
の各ブロックを符号化する。
動き量を基にして尚該ブロックをブロック分類手段によ
って分類する。こうして各ブロック毎に施された分類に
応じて符号化ステップ制御手段が符号化ステップを決定
し、この符号化ステップに従って符号化手段が入力画像
の各ブロックを符号化する。
[実施例]
以下に、本発明について図面にもとすき説明する。
第1図は本発明の画像符号化装置を動画像符号化伝送装
置に適用した場合の一実施例のブロック構成図である。
置に適用した場合の一実施例のブロック構成図である。
画像信号は、通常輝度信号Yと一対の色差信号Cb+C
rの3つのコンポーネント信号にわけられ、それぞれ小
ブロツク単位で順次入力部1に入力される。入力された
各ブロックのデータ、あるいは各種予測誤差信号は直交
変換部2で離散的コサイン変換等の直交変換が施され、
得られた変換係数は量子化部3で量子化される。この際
、量子化ステップ制御部】3では、入力されたブロック
が輝度信号Yか色差信号Cb+Crかによって、および
変換係数の次数、送信バッファ6の量などに応じて量子
化ステップを適応的に制御している。
rの3つのコンポーネント信号にわけられ、それぞれ小
ブロツク単位で順次入力部1に入力される。入力された
各ブロックのデータ、あるいは各種予測誤差信号は直交
変換部2で離散的コサイン変換等の直交変換が施され、
得られた変換係数は量子化部3で量子化される。この際
、量子化ステップ制御部】3では、入力されたブロック
が輝度信号Yか色差信号Cb+Crかによって、および
変換係数の次数、送信バッファ6の量などに応じて量子
化ステップを適応的に制御している。
量子化されたデータは、マルチプレクサ部5で送信に適
した符号化がなされ、送信バッファ6に蓄えられ、それ
より順次送信される。
した符号化がなされ、送信バッファ6に蓄えられ、それ
より順次送信される。
一方、量子化されたデータは逆量子化部7及び逆直交変
換部8により逆変換され、送信された画像が再生され、
動画像の符号化においては動き探索・補償部9で動き補
償等のフレーム間予測を行ないその後減算器1oで入力
画像信号と減算処理がなされたのち、スイッチ11を経
て直交変換部2に入力されるようになされている。スイ
ッチ11は、動き探索・補償部9で検出された動き量が
大きすぎる場合にはa側に切り替えられて、前フレーム
との差分は取らないで直交変換部2へ送られる0 本発明の特徴は、動き探索・補償部9よりの動きベクト
ルより動きの絶対量を算出し関心動領域を判定してブロ
ック毎に分類するブロック分類部12、及びブO−)り
分類部12よりの判別信号で量子化ステップを可変させ
る量子化ステップ制御部13を持つことである。
換部8により逆変換され、送信された画像が再生され、
動画像の符号化においては動き探索・補償部9で動き補
償等のフレーム間予測を行ないその後減算器1oで入力
画像信号と減算処理がなされたのち、スイッチ11を経
て直交変換部2に入力されるようになされている。スイ
ッチ11は、動き探索・補償部9で検出された動き量が
大きすぎる場合にはa側に切り替えられて、前フレーム
との差分は取らないで直交変換部2へ送られる0 本発明の特徴は、動き探索・補償部9よりの動きベクト
ルより動きの絶対量を算出し関心動領域を判定してブロ
ック毎に分類するブロック分類部12、及びブO−)り
分類部12よりの判別信号で量子化ステップを可変させ
る量子化ステップ制御部13を持つことである。
動き探索・補償部9では入力されたブロックのデータと
1フレーム前のデータとを比較して、入力プロ、クデー
タと差分の最小となるブロックを検索して動きベクトル
を求める。
1フレーム前のデータとを比較して、入力プロ、クデー
タと差分の最小となるブロックを検索して動きベクトル
を求める。
ここで、一般に人間が画像を観察している場合に、視点
は動きのある部分に集中でれる。このような特性は、と
くにTV電話、TV会議のような相手の表情が重要な場
合には顕著に現われる。
は動きのある部分に集中でれる。このような特性は、と
くにTV電話、TV会議のような相手の表情が重要な場
合には顕著に現われる。
また注視点は縦の動きよりも横の動きに対して敏感に反
応するという特性も持つ。
応するという特性も持つ。
そこでブロック分類部12では、動き探索・補償部9よ
りの動きベクトルから、その距離及び方向に応じて第2
図(a)に示すようなグループ分けを行なう。第2図に
おいて、横軸(+X+)は動きベクトルの横方向絶対量
を縦軸(+y+)は動き ・ベクトルの縦方向
絶対量を画素単位で目盛っである。第2図(a)K示す
グループ分けは、距離の長い方向及び横方向に対して重
み付けされている。
りの動きベクトルから、その距離及び方向に応じて第2
図(a)に示すようなグループ分けを行なう。第2図に
おいて、横軸(+X+)は動きベクトルの横方向絶対量
を縦軸(+y+)は動き ・ベクトルの縦方向
絶対量を画素単位で目盛っである。第2図(a)K示す
グループ分けは、距離の長い方向及び横方向に対して重
み付けされている。
このグループ分けは用途に応じて第2図(b)に示すよ
うな均等距離空間でのグループ分けなども可能なように
ソフトウェアでフンキシプルに対応できる構成となって
いる。
うな均等距離空間でのグループ分けなども可能なように
ソフトウェアでフンキシプルに対応できる構成となって
いる。
量子化ステップ制御部13では、第3図(a)に示すよ
うに、そのグループ判定結果をもとに動きの激しいブロ
ックに対しては量子化ステップを細かく、動きの少ない
ブロックに対しては量子化ステップを動きの激しいブロ
ックに対してよりも粗く制御する。第3図(a)には動
き量に比例した量子化ステノ・プの制御の一例を示しで
ある。なお、同図において縦軸の量子化ステップ幅のN
は初期量子化ステップ幅を表わしている。
うに、そのグループ判定結果をもとに動きの激しいブロ
ックに対しては量子化ステップを細かく、動きの少ない
ブロックに対しては量子化ステップを動きの激しいブロ
ックに対してよりも粗く制御する。第3図(a)には動
き量に比例した量子化ステノ・プの制御の一例を示しで
ある。なお、同図において縦軸の量子化ステップ幅のN
は初期量子化ステップ幅を表わしている。
この様に簡単な方法により、入力された各ブロックの動
き量に応じて量子化ステップを適応的に制御することに
より、人間が注視している部分についての画像の画質を
良好なものとすることができ、視覚特性に適応した像符
号化装置を提供することができる。
き量に応じて量子化ステップを適応的に制御することに
より、人間が注視している部分についての画像の画質を
良好なものとすることができ、視覚特性に適応した像符
号化装置を提供することができる。
量子化ステップ制御部13で行う量子化ステ。
プ決定の他の例を第3図(b)に示す。
例えば、TV電話、TV会議を考えた場合、伝送される
情報の重要な部分は顔等の表情である。
情報の重要な部分は顔等の表情である。
伝送される画像が一人ないし二人の人物像とすると、表
情を表わす顔の各部位の動きにおいては、その動き量は
10画素前後である。したがって、量子化ステップ制御
部13における制御を、第3図(b)に示すように10
画素前後の動きに対して量子化ステップを細かく制御す
ることにより画像の関心領域部分とくに顔部分の画像の
画質を良好なものとすることができ、画像の中心となる
ものに対して詳細な情報を得ることができる画像符号化
装置を提供することができる。
情を表わす顔の各部位の動きにおいては、その動き量は
10画素前後である。したがって、量子化ステップ制御
部13における制御を、第3図(b)に示すように10
画素前後の動きに対して量子化ステップを細かく制御す
ることにより画像の関心領域部分とくに顔部分の画像の
画質を良好なものとすることができ、画像の中心となる
ものに対して詳細な情報を得ることができる画像符号化
装置を提供することができる。
以上より明らかなように、本発明による画像符号化装置
では、動き量に応じて量子化ステップを制御することに
より、特に注視する部分について品質のよい画像とする
ことができ、人間の視覚特性に適応した良好な画像を得
ることができる。
では、動き量に応じて量子化ステップを制御することに
より、特に注視する部分について品質のよい画像とする
ことができ、人間の視覚特性に適応した良好な画像を得
ることができる。
また、本発明に係る画像符号化装置を動画像符号化伝送
装置に用いてTV電話、TV会議に適応することにより
顔の表情等を詳細に伝送でき伝送の目的に適応した効率
のよい符号化をすることができる。
装置に用いてTV電話、TV会議に適応することにより
顔の表情等を詳細に伝送でき伝送の目的に適応した効率
のよい符号化をすることができる。
第1図は本発明に係る画像符号装置の一実施例を示すブ
ロック図、第2図は動き量判定部による入力画像ブロッ
クの分類方法を説明する図、第3図は量子化ステップ制
御部における量子化ステップの決定方法を説明する図、
第4図は従来例の画像符号化装置のブロック図である。 、ンL g’j、’i・、入力部、2・・直交変換部、
3 ・量子化部、7 逆量子化部、8・・逆直交変換部
、9 ・動き探索拳補償部、10・・・減算器、11・
・・スイツチ、12・・ブロック分類部、13・・量子
化ステップ制御部。 代理人 弁理士 梅 1) 勝(他2名)第4図
ロック図、第2図は動き量判定部による入力画像ブロッ
クの分類方法を説明する図、第3図は量子化ステップ制
御部における量子化ステップの決定方法を説明する図、
第4図は従来例の画像符号化装置のブロック図である。 、ンL g’j、’i・、入力部、2・・直交変換部、
3 ・量子化部、7 逆量子化部、8・・逆直交変換部
、9 ・動き探索拳補償部、10・・・減算器、11・
・・スイツチ、12・・ブロック分類部、13・・量子
化ステップ制御部。 代理人 弁理士 梅 1) 勝(他2名)第4図
Claims (1)
- 【特許請求の範囲】 1、入力画像をブロックに分割してブロック毎に符号化
する画像符号化装置において、 各ブロックの動き量を検出する動き量検出手段と、 前記動き量に基づいて各ブロックを分類するブロック分
類手段と 前記分類に応じて各ブロック毎に符号化ステップを決定
する符号化ステップ制御手段と、前記符号化ステップに
応じて各ブロック毎に入力画像を符号化する符号化手段
と を有することを特徴とする画像符号化装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP30461090A JP2587534B2 (ja) | 1990-11-09 | 1990-11-09 | 画像符号化装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP30461090A JP2587534B2 (ja) | 1990-11-09 | 1990-11-09 | 画像符号化装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH04176290A true JPH04176290A (ja) | 1992-06-23 |
| JP2587534B2 JP2587534B2 (ja) | 1997-03-05 |
Family
ID=17935081
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP30461090A Expired - Lifetime JP2587534B2 (ja) | 1990-11-09 | 1990-11-09 | 画像符号化装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2587534B2 (ja) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08102946A (ja) * | 1994-09-30 | 1996-04-16 | Sony Corp | 画像符号化装置 |
| US5929898A (en) * | 1997-01-09 | 1999-07-27 | Nec Corporation | Multi-point control unit for use in multi-point videoconference system capable of suppressing deterioration of picture quality on split screen |
| US6011589A (en) * | 1996-09-03 | 2000-01-04 | Mitsubishi Denki Kabushiki Kaisha | Picture coding device where the quantization step is adjusted in response to a motion vector |
| JP2001507908A (ja) * | 1997-11-07 | 2001-06-12 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 画像シーケンスの符号化 |
| EP1006731A3 (en) * | 1993-03-29 | 2003-01-22 | Canon Kabushiki Kaisha | Code amount control method and encoding apparatus for carrying it out |
| WO2009142043A1 (ja) * | 2008-05-19 | 2009-11-26 | 株式会社メガチップス | トランスコーダ |
| WO2019021853A1 (ja) * | 2017-07-28 | 2019-01-31 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置および方法 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6146685A (ja) * | 1984-08-13 | 1986-03-06 | Nec Corp | 動画像信号の予測符号化装置 |
| JPH01141483A (ja) * | 1987-11-27 | 1989-06-02 | Matsushita Electric Ind Co Ltd | 画像信号の圧縮装置 |
-
1990
- 1990-11-09 JP JP30461090A patent/JP2587534B2/ja not_active Expired - Lifetime
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6146685A (ja) * | 1984-08-13 | 1986-03-06 | Nec Corp | 動画像信号の予測符号化装置 |
| JPH01141483A (ja) * | 1987-11-27 | 1989-06-02 | Matsushita Electric Ind Co Ltd | 画像信号の圧縮装置 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1006731A3 (en) * | 1993-03-29 | 2003-01-22 | Canon Kabushiki Kaisha | Code amount control method and encoding apparatus for carrying it out |
| JPH08102946A (ja) * | 1994-09-30 | 1996-04-16 | Sony Corp | 画像符号化装置 |
| US6011589A (en) * | 1996-09-03 | 2000-01-04 | Mitsubishi Denki Kabushiki Kaisha | Picture coding device where the quantization step is adjusted in response to a motion vector |
| US5929898A (en) * | 1997-01-09 | 1999-07-27 | Nec Corporation | Multi-point control unit for use in multi-point videoconference system capable of suppressing deterioration of picture quality on split screen |
| JP2001507908A (ja) * | 1997-11-07 | 2001-06-12 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 画像シーケンスの符号化 |
| WO2009142043A1 (ja) * | 2008-05-19 | 2009-11-26 | 株式会社メガチップス | トランスコーダ |
| WO2019021853A1 (ja) * | 2017-07-28 | 2019-01-31 | ソニーセミコンダクタソリューションズ株式会社 | 画像処理装置および方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2587534B2 (ja) | 1997-03-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3133517B2 (ja) | 画像領域検出装置、該画像検出装置を用いた画像符号化装置 | |
| JP3197420B2 (ja) | 画像符号化装置 | |
| JPH04196976A (ja) | 画像符号化装置 | |
| KR100415494B1 (ko) | 화상인코딩방법및장치,기록장치,비디오신호인코딩장치,처리장치및방법,비디오데이터처리장치및방법 | |
| JPH1155672A (ja) | 動画像符号化装置および動画像復号化装置および動画像符号化方法および動画像復号化方法 | |
| JP2892783B2 (ja) | 動画像信号の符号化装置 | |
| JPH04176290A (ja) | 画像符号化装置 | |
| JPH01228384A (ja) | 領域分割を用いた動画像符号化方式 | |
| US6320987B1 (en) | Pre-DCT residue filter | |
| JPS63309082A (ja) | 画像符号化伝送装置 | |
| Yan | Noise reduction for MPEG type of codec | |
| JP2914607B2 (ja) | 画像信号復号化装置 | |
| JPH06169452A (ja) | 画面に重み付けを持たせた画像圧縮方式 | |
| JPH09214965A (ja) | 動画像符号化方法および装置 | |
| JP2512165B2 (ja) | 動画像信号の符号化装置 | |
| JPH06197333A (ja) | 画面に重み付けを持たせた画像圧縮方式 | |
| JP2578986B2 (ja) | カラー画像符号化伝送装置 | |
| JP2916027B2 (ja) | 画像符号化装置 | |
| JP3223043B2 (ja) | 動画像符号化装置 | |
| JPH06233292A (ja) | 画像信号伝送装置 | |
| JPS63199589A (ja) | フレ−ム間符号化方式 | |
| JPH05236462A (ja) | 画像データ処理装置 | |
| JP3652889B2 (ja) | 映像符号化方法、映像符号化装置、記録媒体、及び映像通信システム | |
| JP2008199521A (ja) | 画像処理装置およびその方法 | |
| JPH02174388A (ja) | 画像符号化装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071205 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081205 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091205 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091205 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101205 Year of fee payment: 14 |
|
| EXPY | Cancellation because of completion of term |