JPH06202697A - 励振信号の利得量子化方法 - Google Patents
励振信号の利得量子化方法Info
- Publication number
- JPH06202697A JPH06202697A JP5001110A JP111093A JPH06202697A JP H06202697 A JPH06202697 A JP H06202697A JP 5001110 A JP5001110 A JP 5001110A JP 111093 A JP111093 A JP 111093A JP H06202697 A JPH06202697 A JP H06202697A
- Authority
- JP
- Japan
- Prior art keywords
- gain
- quantization
- vector
- stage
- excitation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
符号化による波形歪を小さくすることができる効率のよ
い励振源の利得の量子化方法を提供する。 【構成】 入力音声を一定のサンプリング周期毎に線形
予測分析12し、予測係数より成る線形予測合成部15
通過後の合成信号X’と入力音声Xとの間の歪を最小と
する複数の励振信号の形状および利得を決定する線形予
測符号化方法に使用される励振信号の利得量子化方法に
おいて、2段階の利得量子化を実施し、第1段階の利得
量子化においては利得を入力音声の特徴に合わせて適応
的に量子化し、第2段階の利得量子化においては第1段
階における利得量子化の結果を補う様に利得を一括して
ベクトル量子化する励振信号の利得量子化方法。
Description
化方法に関し、特に音声の信号系列を少ない情報量のも
とで符号励振型線形予測符号化(Code Excited Linear
Prediction:CELP)による波形歪を小さくすることがで
きる効率のよい励振信号の利得の量子化方法に関する。
ビスその他の情報を伝送し或は蓄積する技術分野におい
ては、電波その他の情報伝送媒体或は記憶媒体の効率的
利用を図るために種々の高能率音声符号化方法が採用さ
れている。サンプリング周波数を8kHz としてサンプリ
ングされた音声を8kbit/s程度で符号化する方法として
はCELP符号化方法が有力な方法である。この方法は、要
約するに、複数の励振信号ベクトルの形状および利得を
選択する線形予測合成器を具備し、合成後の信号と入力
音声信号との間の聴感上の歪が最小となるように励振源
を制御して、その符号を伝送するものである。
いて説明する。音声を高能率に符号化する方法として、
原音声をフレームと呼ばれる5〜50ms程度の一定間隔
の区間に分割し、その1フレームの音声を周波数スペク
トルの包絡線形状についての信号と、その包絡線形状に
対応する線形フィルタを駆動する励振信号とに分離して
それぞれを符号化する方法が提案されている。この場
合、励振信号を符号化する方法として、励振信号を音声
の基本周波数(或はピッチ周期)に対応すると考えられ
る周期成分と、それ以外の成分(換言すれば非周期成
分)とに分離して符号化する方法が知られている。この
励振信号の符号化方法の一種として符号励振型線形予測
符号化方法(CELP)がある。この符号化方法は、図1に
示される如く入力端子11に入力される入力音声Xにつ
いて線形予測分析部12においてその周波数スペクトル
の包絡線形状を表すパラメータが計算される。この分析
には通常、線形予測分析法が使用される。この線形予測
パラメータは線形予測パラメータ符号化部13において
符号化され、この符号化出力Aは線形予測パラメータ復
号化部14において復号化され、この復号化された線形
予測パラメータa’は線形予測合成部15のフィルタ係
数として設定される。線形予測合成部15に後で説明さ
れる励振信号(ベクトル)Eを与えることにより再生合
成音声X’が得られる。
説明する。符号帳16は一定の励振ベクトルを多数保持
して切り替え使用する様にするか、或は常に直前のフレ
ームの確定された励振ベクトルが保持される様に構成す
る。この励振ベクトルから或る周期(ピッチ周期)に相
当する長さLのセグメントが切り出され、その切り出さ
れたたベクトルセグメントをフレームの長さTになるま
で繰り返し接続して音声の周期成分と対応する符号ベク
トルが出力される。符号帳16に周期符号(切り出し長
と同じ記号Lで表す)として与える切り出し長Lを変え
ることにより異なる周期成分と対応する符号ベクトルを
出力することができる。以下、符号帳から出力される符
号ベクトルを適応符号ベクトルと称す。
1個或はそれ以上設けられるが、以下の説明は2個の乱
数符号帳171 、172 が設けられる場合について説明
である。各乱数符号帳171 、172 は通常白色ガウス
性ランダム雑音を基調とし、1フレーム分の長さLの各
種の内臓ベクトルが入力音声とは独立にあらかじめ記憶
されており、与えられた乱数符号C(C1 ,C2 )によ
りそれぞれ指定されたベクトルが読みだされ、それぞれ
音声の非周期成分と対応する符号ベクトルとして出力さ
れる。以下、乱数符号帳17から出力される符号ベクト
ルを乱数符号ベクトルと称す。
る各符号ベクトルは利得量子化部20において利得調整
される。即ち各符号ベクトルはそれぞれ利得調整部21
0 ,211 ,212 において符号帳23から出力される
利得g0 ,g1 ,g2 により利得調整され、これらの結
果は加算部22において加算される。符号帳23は与え
られた利得符号Gに従って利得g0 ,g1 ,g2 を切り
替え、或は作成する。加算部22の加算出力Eは励振ベ
クトル候補として線形予測合成部15に供給され、合成
部15から合成再生音声X’が出力される。入力端子1
1から入力される入力音声Xに対するこの合成音声X’
の歪dが歪計算部18において計算される。聴感補正部
19は歪dを最小化する基準に基づいて、先ず、符号帳
16における切り出し長さLを検索し、符号帳16の最
適符号ベクトルを決定する。次いで符号帳17から乱数
符号ベクトルを決定し、更に利得量子化部20の最適利
得g0 ,g1 ,g2 を決定する。以上の手順により歪d
が最小になる様な符号の組み合わせが検索され、その時
の励振ベクトル候補として現フレームの励振ベクトルE
が確定される。歪dが最小となったときの符号帳16の
切り出し長を示す周期符号Lと、符号帳171 ,172
の各符号ベクトルを示す乱数符号C1 ,C2と、利得g
0 ,g1 ,g2 を示す利得符号Gと、線形予測パラメー
タ符号Aとが符号化出力として出力され、伝送または蓄
積される。
ルの形状および利得の量子化の内の利得の量子化につい
ては、励振信号ベクトル毎に対応する利得をスカラ量子
化する方法と、複数の励振信号ベクトルに対応する利得
を一括して量子化するベクトル量子化方法とがある。こ
こで、これら量子化方法の特性についてであるが、スカ
ラ量子化方法は必要とされるメモリ量は僅かであるが波
形歪を小さくするには難点のあるものである一方、ベク
トル量子化方法は波形歪を小さくするには好適であるが
大なるメモリ量の符号帳を必要とするものである。
図2に示される如く利得を切り替え選択するために使用
する複数の符号帳23を具備し、入力音声を特徴分析部
30により分析した結果である入力音声の性質を使用し
て適応的にこれら符号帳23を切り替え使用する手法も
ある。この様にすることにより波形歪を削減することは
できるが、符号帳23のメモリ量は一般に大きく、これ
を複数具備することにおり全メモリ量は更に増大すると
いう問題があった。
号化による波形歪を小さくすることができる効率のよい
励振源の利得の量子化方法を提供するものである。
リング周期毎に線形予測分析12し、予測係数より成る
線形予測合成部15通過後の合成信号X’と入力音声X
との間の歪を最小とする複数の励振信号の形状および利
得を決定する線形予測符号化方法に使用される励振信号
の利得量子化方法において、2段階の利得量子化を実施
し、第1段階の利得量子化においては利得を入力音声の
特徴に合わせて適応的に量子化し、第2段階の利得量子
化においては第1段階における利得量子化の結果を補う
様に利得を一括してベクトル量子化する励振信号の利得
量子化方法を構成した。
約すれば、複数の励振信号に対する利得を2段階に分け
て量子化するものであり、第1段階においては利得を入
力音声の特徴に合わせて適応的に量子化し、第2段階に
おいては第1段階における利得量子化の結果を補う様に
利得を一括してベクトル量子化するものである。
具体的に説明する。先ず第1段階において符号帳16を
選択して得られる第1の励振ベクトルの利得についての
みスカラ量子化を実施し、第2段階において第1段階に
おける利得量子化の結果を補う様に、第1の励振ベクト
ルの利得と符号帳17を選択して得られる第2の励振信
号ベクトルの利得とを一括してベクトル量子化を実施す
る。
ムの確定された励振ベクトルを保持する様に構成した適
応符号帳であり、第1の励振ベクトルはこの適応符号帳
16からの出力であり、第2の励振信号ベクトルは乱数
符号帳である符号帳17からの出力である。量子化テー
ブル31は利得gの切り替えのためのものであり、情報
量の極く少ないもので事足りる。特徴分析部30により
分析された音声の性質に合わせて適応的に切り替え使用
される。
る。 第1。 最初に、第1の励振ベクトルの形状を決定す
る。この処理は適応符号帳16を使用する。通常の場合
はピッチ周期を求めることとほぼ等価である。 第2。ここで、第1段階の利得量子化を第1段階の利得
量子化部201 において実施する。この処理は第1の励
振ベクトルのみを合成したときの合成信号x'と直前の
フレームからの応答分を差し引いた入力音声yについ
て、y−x' の歪を最小とする利得gを決定する。とこ
ろで、当該フレームの入力音声のレベルが例えば0であ
っても、直前のフレームの入力音声の影響は当該フレー
ムにも及ぶところから当該フレームのレベルは直前のフ
レームからの応答分である僅かのレベルを有するもので
ある。従って、真の当該フレームの入力音声yを求める
ために見かけ上の入力音声から直前のフレームからの応
答分を差し引いく。利得gの量子化テーブル31は情報
量の極く少ないもので事足り、特徴分析部30により分
析された音声の性質に合わせて適応的に切り替え使用す
ることにより歪を小さくすることができる。切り替えの
パラメータとしては有声無声の情報、パワ、ピッチ周期
が考えられる。この第1段階の量子化はスカラ量子化で
あるので、数多くの量子化テーブルを使用しても量子化
テーブルのメモリ量自体極く僅かでもあるところから全
メモリ量の増加は問題とするに値しない。
する。通常は乱数符号帳17から選択する。このときy
−gx' に対する歪を最小化する様に選択する。 第4。最後に、第2段階の利得のベクトル量子化を第2
段階の利得のベクトル量子化部202 において実施す
る。第2段階においては第1段階における利得量子化の
結果を補う様に第1の励振ベクトルの利得と符号帳17
を選択して得られる第2の励振信号ベクトルの利得とを
一括してベクトル量子化を実施する。合成後の波形歪が
最小となる様な利得ベクトルを利得の符号帳16および
17から選択する。
説明する。この場合、利得のベクトル量子化部202 に
おいて利得のベクトル量子化を実施するに先だって、時
間領域について各励振ベクトル毎にレベルの三角窓40
を乗算し、励振ベクトル信号を計4個の信号に分離す
る。この様に励振ベクトルにレベルの三角窓40を乗算
してフレームの前半および後半を強調する前操作を施す
ことにより、励振ベクトルを直接ベクトル量子化する第
1の実施例の場合と比較して歪をより小さくすることが
できる。
説明する。第2の実施例と同様に、各励振ベクトルに時
間領域の三角窓40を乗算してこれらを計4個の信号の
系統に分離している。第1段階における利得の量子化は
音声信号の特徴に合わせて量子化レベルを制御する。或
は、複数の量子化テーブルを具備してこれらを切り替え
て使用する。これに対して、第2段階における利得の量
子化は第1段階にける利得の量子化の結果を補う様に利
得を一括してベクトル量子化する。この場合、音声の特
徴とは無関係に全ての場合に共通に符号帳の中から歪を
最小にする利得ベクトルを選択してその符号を伝送す
る。
声のパワー、線形予測の予測利得、励振ベクトルのパワ
ーを使用して利得の量子化の前に信号の正規化を行なう
ことができ、スカラ量子化のステップ幅やベクトル量子
化の符号ベクトルの変動幅を小さくすることが可能であ
る。そして、通常第1段階にける利得の量子化は比較的
少ないビット数の量子化でよい。適応的に平均値のみを
変化させる量子化(0ビット量子化)を採用することが
できる。
階における適応的量子化により、フレーム毎に変化する
音声の特徴に合わせた量子化がなされ、第2段階の量子
化において全ての励振信号を考慮したベクトル量子化を
実施することにより波形歪を小さくすることができる。
法は第1段階における量子化により利得の大きな変動を
吸収するので、第2段階における量子化の符号帳の符号
ベクトルの変動範囲を通常のベクトル量子化の場合の変
動範囲と比較して小さくすることができる。従って、符
号誤りがある場合も、第1段階における符号ビットだけ
を保護すれば符号誤りの影響を軽減することができる。
ベクトル量子化方法と比較して演算量およびメモリ量を
殆ど増加させることなくして歪を小さくすることができ
る。また、図2に示される様な適応的にベクトル量子化
の符号帳を切り替える利得のベクトル量子化方法と比較
して、歪を殆ど増加させることなくして符号帳のメモリ
量を大幅に削減することができる。
成を示す図。
来例を示す図。
実施例を示す図。
実施例を示す図。
実施例を示す図。
Claims (1)
- 【請求項1】 入力音声を一定のサンプリング周期毎に
線形予測分析し、予測係数より成る線形予測合成部通過
後の合成信号と入力音声との間の歪を最小とする複数の
励振信号の形状および利得を決定する線形予測符号化方
法に使用される励振信号の利得量子化方法において、2
段階の利得量子化を実施し、第1段階の利得量子化にお
いては利得を入力音声の特徴に合わせて適応的に量子化
し、第2段階の利得量子化においては第1段階における
利得量子化の結果を補う様に利得を一括してベクトル量
子化することを特徴とする励振信号の利得量子化方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP05001110A JP3099852B2 (ja) | 1993-01-07 | 1993-01-07 | 励振信号の利得量子化方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP05001110A JP3099852B2 (ja) | 1993-01-07 | 1993-01-07 | 励振信号の利得量子化方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH06202697A true JPH06202697A (ja) | 1994-07-22 |
| JP3099852B2 JP3099852B2 (ja) | 2000-10-16 |
Family
ID=11492334
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP05001110A Expired - Lifetime JP3099852B2 (ja) | 1993-01-07 | 1993-01-07 | 励振信号の利得量子化方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3099852B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08272395A (ja) * | 1995-03-31 | 1996-10-18 | Nec Corp | 音声符号化装置 |
| WO1998020483A1 (en) * | 1996-11-07 | 1998-05-14 | Matsushita Electric Industrial Co., Ltd. | Sound source vector generator, voice encoder, and voice decoder |
| JP2016533528A (ja) * | 2013-10-18 | 2016-10-27 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | スピーチ関連のスペクトル整形情報を使用したオーディオ信号符号化と復号化の概念 |
| US10304470B2 (en) | 2013-10-18 | 2019-05-28 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Concept for encoding an audio signal and decoding an audio signal using deterministic and noise like information |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH02144598A (ja) * | 1988-11-25 | 1990-06-04 | Nippon Telegr & Teleph Corp <Ntt> | 音声符号化法 |
| JPH041800A (ja) * | 1990-04-19 | 1992-01-07 | Nec Corp | 音声帯域信号符号化方法 |
| JPH04270400A (ja) * | 1991-02-26 | 1992-09-25 | Nec Corp | 音声符号化方式 |
-
1993
- 1993-01-07 JP JP05001110A patent/JP3099852B2/ja not_active Expired - Lifetime
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH02144598A (ja) * | 1988-11-25 | 1990-06-04 | Nippon Telegr & Teleph Corp <Ntt> | 音声符号化法 |
| JPH041800A (ja) * | 1990-04-19 | 1992-01-07 | Nec Corp | 音声帯域信号符号化方法 |
| JPH04270400A (ja) * | 1991-02-26 | 1992-09-25 | Nec Corp | 音声符号化方式 |
Cited By (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08272395A (ja) * | 1995-03-31 | 1996-10-18 | Nec Corp | 音声符号化装置 |
| WO1998020483A1 (en) * | 1996-11-07 | 1998-05-14 | Matsushita Electric Industrial Co., Ltd. | Sound source vector generator, voice encoder, and voice decoder |
| US6330534B1 (en) | 1996-11-07 | 2001-12-11 | Matsushita Electric Industrial Co., Ltd. | Excitation vector generator, speech coder and speech decoder |
| US6330535B1 (en) | 1996-11-07 | 2001-12-11 | Matsushita Electric Industrial Co., Ltd. | Method for providing excitation vector |
| US6345247B1 (en) | 1996-11-07 | 2002-02-05 | Matsushita Electric Industrial Co., Ltd. | Excitation vector generator, speech coder and speech decoder |
| US6421639B1 (en) | 1996-11-07 | 2002-07-16 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for providing an excitation vector |
| US6453288B1 (en) | 1996-11-07 | 2002-09-17 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for producing component of excitation vector |
| US6757650B2 (en) | 1996-11-07 | 2004-06-29 | Matsushita Electric Industrial Co., Ltd. | Excitation vector generator, speech coder and speech decoder |
| US6772115B2 (en) | 1996-11-07 | 2004-08-03 | Matsushita Electric Industrial Co., Ltd. | LSP quantizer |
| US6799160B2 (en) | 1996-11-07 | 2004-09-28 | Matsushita Electric Industrial Co., Ltd. | Noise canceller |
| US6910008B1 (en) | 1996-11-07 | 2005-06-21 | Matsushita Electric Industries Co., Ltd. | Excitation vector generator, speech coder and speech decoder |
| US6947889B2 (en) | 1996-11-07 | 2005-09-20 | Matsushita Electric Industrial Co., Ltd. | Excitation vector generator and a method for generating an excitation vector including a convolution system |
| US7289952B2 (en) | 1996-11-07 | 2007-10-30 | Matsushita Electric Industrial Co., Ltd. | Excitation vector generator, speech coder and speech decoder |
| US7398205B2 (en) | 1996-11-07 | 2008-07-08 | Matsushita Electric Industrial Co., Ltd. | Code excited linear prediction speech decoder and method thereof |
| US7587316B2 (en) | 1996-11-07 | 2009-09-08 | Panasonic Corporation | Noise canceller |
| US7809557B2 (en) | 1996-11-07 | 2010-10-05 | Panasonic Corporation | Vector quantization apparatus and method for updating decoded vector storage |
| US8036887B2 (en) | 1996-11-07 | 2011-10-11 | Panasonic Corporation | CELP speech decoder modifying an input vector with a fixed waveform to transform a waveform of the input vector |
| US8086450B2 (en) | 1996-11-07 | 2011-12-27 | Panasonic Corporation | Excitation vector generator, speech coder and speech decoder |
| US8370137B2 (en) | 1996-11-07 | 2013-02-05 | Panasonic Corporation | Noise estimating apparatus and method |
| JP2016533528A (ja) * | 2013-10-18 | 2016-10-27 | フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン | スピーチ関連のスペクトル整形情報を使用したオーディオ信号符号化と復号化の概念 |
| US10304470B2 (en) | 2013-10-18 | 2019-05-28 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Concept for encoding an audio signal and decoding an audio signal using deterministic and noise like information |
| US10373625B2 (en) | 2013-10-18 | 2019-08-06 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Concept for encoding an audio signal and decoding an audio signal using speech related spectral shaping information |
| US10607619B2 (en) | 2013-10-18 | 2020-03-31 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Concept for encoding an audio signal and decoding an audio signal using deterministic and noise like information |
| US10909997B2 (en) | 2013-10-18 | 2021-02-02 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Concept for encoding an audio signal and decoding an audio signal using speech related spectral shaping information |
| US11798570B2 (en) | 2013-10-18 | 2023-10-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Concept for encoding an audio signal and decoding an audio signal using deterministic and noise like information |
| US11881228B2 (en) | 2013-10-18 | 2024-01-23 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E. V. | Concept for encoding an audio signal and decoding an audio signal using speech related spectral shaping information |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3099852B2 (ja) | 2000-10-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6952671B1 (en) | Vector quantization with a non-structured codebook for audio compression | |
| EP0607989B1 (en) | Voice coder system | |
| JP2964344B2 (ja) | 符号化/復号化装置 | |
| US7392179B2 (en) | LPC vector quantization apparatus | |
| JP3346765B2 (ja) | 音声復号化方法及び音声復号化装置 | |
| US5953698A (en) | Speech signal transmission with enhanced background noise sound quality | |
| JP3114197B2 (ja) | 音声パラメータ符号化方法 | |
| US7065338B2 (en) | Method, device and program for coding and decoding acoustic parameter, and method, device and program for coding and decoding sound | |
| US6134520A (en) | Split vector quantization using unequal subvectors | |
| US5659659A (en) | Speech compressor using trellis encoding and linear prediction | |
| US6988067B2 (en) | LSF quantizer for wideband speech coder | |
| JPH08272395A (ja) | 音声符号化装置 | |
| JP2800618B2 (ja) | 音声パラメータ符号化方式 | |
| JPH056199A (ja) | 音声パラメータ符号化方式 | |
| JPH0944195A (ja) | 音声符号化装置 | |
| JPH06202697A (ja) | 励振信号の利得量子化方法 | |
| JP2538450B2 (ja) | 音声の励振信号符号化・復号化方法 | |
| JP2613503B2 (ja) | 音声の励振信号符号化・復号化方法 | |
| US5943644A (en) | Speech compression coding with discrete cosine transformation of stochastic elements | |
| JP3916934B2 (ja) | 音響パラメータ符号化、復号化方法、装置及びプログラム、音響信号符号化、復号化方法、装置及びプログラム、音響信号送信装置、音響信号受信装置 | |
| KR100341398B1 (ko) | 씨이엘피형 보코더의 코드북 검색 방법 | |
| JPH11219196A (ja) | 音声合成方法 | |
| JP3808270B2 (ja) | 音声符号化装置、音声復号化装置及び符号語配列方法 | |
| JP2002073097A (ja) | Celp型音声符号化装置とcelp型音声復号化装置及び音声符号化方法と音声復号化方法 | |
| JP2700974B2 (ja) | 音声符号化法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070818 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080818 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080818 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090818 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090818 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100818 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100818 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110818 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120818 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130818 Year of fee payment: 13 |
|
| EXPY | Cancellation because of completion of term | ||
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130818 Year of fee payment: 13 |