JP2000253321A - 固体撮像装置 - Google Patents

固体撮像装置

Info

Publication number
JP2000253321A
JP2000253321A JP11050741A JP5074199A JP2000253321A JP 2000253321 A JP2000253321 A JP 2000253321A JP 11050741 A JP11050741 A JP 11050741A JP 5074199 A JP5074199 A JP 5074199A JP 2000253321 A JP2000253321 A JP 2000253321A
Authority
JP
Japan
Prior art keywords
exposure
information
exposure information
circuit
solid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11050741A
Other languages
English (en)
Other versions
JP4201424B2 (ja
JP2000253321A5 (ja
Inventor
Toshiaki Nakakuki
俊朗 中莖
Tomomichi Nakai
智通 中井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP05074199A priority Critical patent/JP4201424B2/ja
Priority to US09/512,754 priority patent/US6822689B1/en
Publication of JP2000253321A publication Critical patent/JP2000253321A/ja
Publication of JP2000253321A5 publication Critical patent/JP2000253321A5/ja
Application granted granted Critical
Publication of JP4201424B2 publication Critical patent/JP4201424B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

(57)【要約】 【課題】 露光制御動作を短時間で収束させる。 【解決手段】 CCD1の露光時間Lを1水平走査期間
単位で伸縮制御する第1の露光情報D1と、直接決定す
る第2の露光情報D2とを生成する。電源の立ち上げ時
点では、第2の露光情報D2を選択し、所定の期間を経
過した後に第1の露光情報D1を選択してタイミング制
御回路3に供給する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、露光制御機能を有
する固体撮像装置に関する。
【0002】
【従来の技術】図3は、CCDイメージセンサを用いた
撮像装置の構成を示すブロック図であり、図4は、その
動作を説明するタイミング図である。
【0003】CCDイメージセンサ1は、複数の受光画
素、複数の垂直転送レジスタ及び通常1つの水平シフト
レジスタを有している。複数の受光画素は、受光面に一
定の間隔で行列配置され、それぞれ受光した被写体画像
に対応して情報電荷を発生して蓄積する。複数の垂直シ
フトレジスタは、受光画素の各列に対応して配置され、
各受光画素に蓄積された情報電荷を取り込んで、順次垂
直方向へ転送する。そして、水平シフトレジスタは、垂
直シフトレジスタの出力側に配置され、複数の垂直シフ
トレジスタから転送出力される情報電荷を受け取り、1
行単位で転送出力する。これにより、各受光画素に蓄積
された情報電荷量に応じて電圧値を変化させる画像信号
Yが出力される。
【0004】駆動回路2は、後述するタイミング制御回
路3からの各種同期信号VD、HDに応答し、CCD1
の各シフトレジスタに対して各種の転送クロックを供給
する。例えば、垂直同期信号VDに応答してフレーム転
送クロックφFを生成し、このクロックφFを垂直シフト
レジスタに供給することにより、垂直走査期間毎に、複
数の受光画素に蓄積される情報電荷を垂直シフトレジス
タに取り込む。また、水平同期信号HDに応答して蓄積
転送クロックφS及び水平転送クロックφHを生成し、垂
直シフトレジスタ及び水平シフトレジスタに供給するこ
とにより、垂直シフトレジスタに取り込まれた情報電荷
を1行単位で水平シフトレジスタを介して転送出力す
る。また、駆動回路2は、タイミング制御回路3からの
シャッタタイミング信号STに応答して排出クロックφ
Dを生成し、CCD1の不要電荷排出用のドレイン領域
に供給する。これにより、CCD1の受光画素に蓄積さ
れた情報電荷を全てドレイン領域へ排出することができ
る。この排出クロックφDの終わりのタイミングからフ
レーム転送クロックφFの始まりのタイミングまでの時
間Lが、CCD1における情報電荷の蓄積期間、いわゆ
る露光時間となる。
【0005】タイミング制御回路3は、一定周期の基準
クロックCKを分周することにより、CCD1の垂直走
査のタイミングを決定する垂直同期信号VDと水平走査
のタイミングを決定する水平同期信号HDとを生成す
る。例えば、NTSC方式に準拠する場合、14.32
MHzの基準クロックCKを910分周することで水平
同期信号HDを生成し、その水平同期信号HDをさらに
252.5分周することで垂直同期信号を生成するよう
に構成される。
【0006】積分回路4は、垂直同期信号VDに応答し
てリセットされ、CCD1から出力される画像信号Yを
垂直走査期間単位で積分することにより、画像信号Yの
平均レベルに比例した積分情報Iを生成する。露光判定
回路5は、積分回路4から入力される積分情報Iを、適
正露光範囲に対応して設定される上限値及び下限値と各
垂直走査期間において比較し、比較結果に応じて露光抑
制信号CLまたは露光促進信号OPを立ち上げる。即
ち、積分情報Iが上限値を超えたときには露光抑制信号
CLを立ち上げ、逆に、積分情報Iが下限値に達しない
ときには露光促進信号OPを立ち上げるように構成され
る。アップダウンカウンタ6は、シャッタタイミング信
号STの立ち上がりのタイミングを水平走査線番号で記
憶するものであり、露光抑制信号CLの立ち上がりでア
ップカウントされ、露光促進信号OPの立ち上がりでダ
ウンカウントされる。即ち、垂直走査期間Vの間には、
複数の水平走査期間が設定されており、アップダウンカ
ウンタ6のカウント値によって指定される数の水平走査
期間が経過した時点でシャッタタイミング信号STを立
ち上げるように設定される。ラッチ7は、垂直同期信号
VDに従い、各垂直走査期間毎にアップダウンカウンタ
6のカウント値をラッチし、タイミング制御回路3に対
して露光情報Dとして供給する。
【0007】以上の固体撮像装置においては、画像信号
Yの1画面毎の積分値Iの大小に応じてアップダウンカ
ウンタ6がアップカウントまたはダウンカウントされる
ため、各垂直走査期間に1水平走査期間を1ステップと
して露光時間Lが伸縮制御される。
【0008】
【発明が解決しようとする課題】電源投入時や、被写体
の輝度が急激に変化したときには、固体撮像素子の露光
状態が、適性な状態となるまでにある程度の時間を要す
ることがある。即ち、CCD1の露光時間は、各垂直走
査期間毎に一定の割合で伸縮されるため、露光制御開始
時点での長さと適正な長さとの差が大きいときには、す
ぐに適正な値とはならない。従って、露光制御動作が収
束するまでに要する時間が長くなる。垂直走査期間毎の
露光時間の変化の割合を大きくすれば、露光制御動作を
短時間で収束させることは可能になるが、被写体輝度の
変化に対して敏感になり、必要以上に露光時間の伸縮が
行われるようになるため、露光制御が不安定になる。
【0009】そこで本発明は、露光制御動作を安定に保
ちながら、露光制御動作を短時間で収束させるようにす
ることを目的とする。
【0010】
【課題を解決するための手段】本発明は、上述の課題を
解決するために成されたもので、その特徴とするところ
は、複数の受光画素が行列配置され、受光した被写体画
像に応じた情報電荷を蓄積する固体撮像素子と、上記固
体撮像素子の各受光画素に蓄積される情報電荷を一旦排
出した後、所定の期間を経過して再度蓄積される情報電
荷を転送出力して情報電荷に従う画像信号を得る駆動回
路と、上記画像信号のレベルを一定の周期で判定し、そ
の判定結果に応答して増減する第1の露光情報を生成す
る第1の露光情報生成回路と、上記画像信号のレベルに
基づいて第2の露光情報を算出する第2の露光情報生成
回路と、上記第1の露光情報または上記第2の露光情報
の何れか一方を選択して取り出す選択回路と、上記選択
回路で取り出された露光情報に基づいて、上記駆動回路
の情報電荷の排出タイミング及び読み出しタイミングを
設定するタイミング制御回路と、を備え、上記選択回路
は、所定の期間に上記第2の露光情報を選択した後に、
上記第1の露光情報を選択することにある。
【0011】本発明によれば、第2の露光情報が選択さ
れたとき、固体撮像素子の露光期間が直接適正な長さに
設定されるため、それまでの露光期間の長さに関係な
く、瞬時に露光制御が収束する。その後に第1の露光情
報を選択することで、適性な露光状態から、固体撮像素
子の露光時間を垂直走査期間毎に一定の割合で伸縮する
ように制御が行われる。
【0012】
【発明の実施の形態】図1は、本発明の固体撮像装置の
構成を示すブロック図であり、図2は、その動作を説明
するタイミング図である。
【0013】この図において、CCD1、駆動回路2及
びタイミング制御回路3の構成は、図3と同一であり、
タイミング制御回路3の出力に応答して動作する駆動回
路2によってCCD1がパルス駆動され、画像信号Yが
出力される。
【0014】本発明の特徴とするところは、一定のステ
ップでCCD1の露光時間Lを伸縮制御する第1の露光
情報D1と、最適な露光状態となる露光時間Lを直接指
定する第2の露光情報とを切り換えてタイミング制御回
路3に与えるようにしたところにある。そして、撮像装
置が動作を開始した時点では、第2の露光情報D2を選
択し、所定の期間を経過した後に第1の露光情報D1を
選択してタイミング制御回路3に与えるように構成され
る。
【0015】積分回路11は、垂直同期信号CCD1か
ら出力される画像信号Yを垂直走査期間単位で積分し、
画像信号Yの平均レベルに比例した積分情報Iを生成す
る。この積分回路11は、図3に示す積分回路4と同一
のものである。
【0016】露光判定回路12は、積分回路11から入
力される積分情報Iを、適正露光範囲に対応して設定さ
れる上限値及び下限値と比較し、その比較結果に応じて
露光抑制信号CL、露光促進信号OPを立ち上げる。即
ち、露光判定回路12は、積分情報Iが上限値を超えた
ときには露光抑制信号CLを立ち上げ、逆に、積分情報
Iが下限値に達しないときには露光促進信号OPを立ち
上げる。アップダウンカウンタ13は、露光抑制信号C
Lの立ち上がりでアップカウントし、露光促進信号OP
の立ち上がりでダウンカウントすることで、シャッタタ
イミング信号STの立ち上がりのタイミングを水平走査
線番号で指定する第1の露光情報D1を出力する。この
アップダウンカウンタ13においては、カウンタ17が
リセットされた後、タイミング算出回路14で生成され
る第2の露光情報D2が取り込まれて初期設定が行われ
る。ここで、第1の露光情報D1は、垂直走査期間毎に
更新されるものであり、各垂直走査期間に一定の割合で
増減して、CCD1の露光時間Lを1垂直走査期間に変
化率を一定にして伸縮する。以上の判定回路12及びア
ップダウンカウンタ13によって第1の露光情報生成回
路が構成される。
【0017】タイミング算出回路14は、現時点のCC
D1の露光時間Lに対応する露光情報Dを保持し、この
露光情報Dに対する積分値Iの比と最適露光状態に対応
して設定される最適値R0とに基づいて、最適露光時間
を指定する第2の露光情報D2を算出する。即ち、最適
露光時間を指定する第2の露光情報D2は、D2=R0
・D/Iとして算出される。この第2の露光情報D2
は、積分値Iと、そのときの露光時間Lを示す露光情報
Dとが特定された時点で算出され、タイミング制御回路
3におけるシャッタタイミングSTの立ち下がりのタイ
ミングを直接決定する。このタイミング算出回路14
が、第2の露光情報生成回路となる。
【0018】選択回路15は、アップダウンカウンタ1
3及びタイミング算出回路14に接続され、切換制御信
号SCに応答して、第1の露光情報D1または第2の露
光情報D2の何れかを選択して出力する。カウンタ17
は、撮像装置の起動時あるいは任意のタイミングで自動
あるいは手動で入力されるトリガに応答してリセットさ
れ、垂直同期信号VDをカウントする。そして、そのカ
ウント値が、予め設定された所定の値に達した時点で状
態を反転させる切換制御信号SCを出力する。例えば、
カウンタ17を4ビットで構成し、最上位ビットのカウ
ント出力を切換制御信号SCとするように構成される。
これにより、カウンタ17がリセットされてから8垂直
走査期間V0〜V7の間は、切換制御信号SCが「L」
のまま維持されて第2の露光情報D2が選択され、それ
以降の垂直走査期間V8〜では、切換制御信号SCが
「H」に立ち上げられて第1の露光情報D1が選択され
る。ラッチ16は、選択回路15で選択して取り出され
る露光情報D1/D2を垂直同期信号VDに従うタイミ
ングで取り込み、露光情報Dとしてタイミング制御回路
3及びタイミング算出回路14に供給する。
【0019】以上の撮像装置においては、電源を立ち上
げた瞬間等において、カウンタ17がリセットされる
と、タイミング算出回路14によって得られる第2の露
光情報D2がタイミング制御回路3に供給されると共
に、アップダウンカウンタ13に供給される。これによ
り、CCD1の露光時間が最適な長さに瞬時に収束され
ると共に、その長さに対応するように、アップダウンカ
ウンタ13のカウント値が設定される。そして、所定の
期間、露光制御を繰り返して各部の動作を安定させた
後、切換制御信号SCの立ち上がりに応答して第2の露
光情報D2が第1の露光情報D1に切り換えられる。
【0020】カウンタ17のリセットのタイミングにつ
いては、パワーオンリセットとする他に、撮像装置を操
作する者が開閉可能なスイッチに応答して供給されるト
リガによって決定するように構成することができる。
【0021】
【発明の効果】本発明によれば、電源投入時や被写体輝
度が大きく変化したときでも、瞬時に露光制御を収束さ
せることができ、一旦収束させた後には、安定した露光
制御が行われる。
【図面の簡単な説明】
【図1】本発明の固体撮像装置の構成を示すブロック図
である。
【図2】本発明の固体撮像装置の動作を説明するタイミ
ング図である。
【図3】従来の固体撮像装置の構成を示すブロック図で
ある。
【図4】従来の固体撮像装置の動作を説明するタイミン
グ図である。
【符号の説明】
1 CCDイメージセンサ 2 駆動回路 3 タイミング制御回路 4、11 積分回路 5、12 露光判定回路 6、13 アップダウンカウンタ 7、16 ラッチ 14 タイミング算出回路 15 選択回路 17 カウンタ

Claims (3)

    【特許請求の範囲】
  1. 【請求項1】 複数の受光画素が行列配置され、受光し
    た被写体画像に応じた情報電荷を蓄積する固体撮像素子
    と、上記固体撮像素子の各受光画素に蓄積される情報電
    荷を一旦排出した後、所定の期間を経過して再度蓄積さ
    れる情報電荷を転送出力して情報電荷に従う画像信号を
    得る駆動回路と、上記画像信号のレベルを一定の周期で
    判定し、その判定結果に応答して増減する第1の露光情
    報を生成する第1の露光情報生成回路と、上記画像信号
    のレベルに基づいて第2の露光情報を算出する第2の露
    光情報生成回路と、上記第1の露光情報または上記第2
    の露光情報の何れか一方を選択して取り出す選択回路
    と、上記選択回路で取り出された露光情報に基づいて、
    上記駆動回路の情報電荷の排出タイミング及び読み出し
    タイミングを設定するタイミング制御回路と、を備え、
    上記選択回路は、所定の期間に上記第2の露光情報を選
    択した後に、上記第1の露光情報を選択することを特徴
    とする固体撮像装置。
  2. 【請求項2】 上記選択回路は、電源の立ち上げに応答
    して、所定の期間に上記第2の露光情報を選択すること
    を特徴とする請求項1に記載の固体撮像装置。
  3. 【請求項3】 上記選択回路は、任意のタイミングで与
    えられるトリガに応答して、所定の期間に上記第2の露
    光情報を選択することを特徴とする請求項1に記載の固
    体撮像装置。
JP05074199A 1999-02-26 1999-02-26 固体撮像装置 Expired - Lifetime JP4201424B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP05074199A JP4201424B2 (ja) 1999-02-26 1999-02-26 固体撮像装置
US09/512,754 US6822689B1 (en) 1999-02-26 2000-02-25 Solid-state imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP05074199A JP4201424B2 (ja) 1999-02-26 1999-02-26 固体撮像装置

Publications (3)

Publication Number Publication Date
JP2000253321A true JP2000253321A (ja) 2000-09-14
JP2000253321A5 JP2000253321A5 (ja) 2004-10-28
JP4201424B2 JP4201424B2 (ja) 2008-12-24

Family

ID=12867276

Family Applications (1)

Application Number Title Priority Date Filing Date
JP05074199A Expired - Lifetime JP4201424B2 (ja) 1999-02-26 1999-02-26 固体撮像装置

Country Status (2)

Country Link
US (1) US6822689B1 (ja)
JP (1) JP4201424B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7436446B2 (en) 2003-08-29 2008-10-14 Casio Computer Co., Ltd. Imaging device equipped with automatic exposure control function

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002268133A (ja) * 2001-03-09 2002-09-18 Olympus Optical Co Ltd 銀塩撮影及び電子撮影兼用カメラ
JP2003046866A (ja) * 2001-07-30 2003-02-14 Sony Corp 撮像素子の駆動制御方法及び撮像装置
JP2004165912A (ja) * 2002-11-12 2004-06-10 Canon Inc エリア撮像素子の駆動方法及び装置
US7589782B2 (en) * 2003-02-06 2009-09-15 Ricoh Company, Ltd. Imaging apparatus and imaging method for reducing release time lag
KR101445645B1 (ko) * 2007-08-03 2014-10-01 삼성전자주식회사 아이템 매칭기능을 구비한 방송수신장치 및사용자입력장치, 그리고 아이템 매칭방법

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01221986A (ja) * 1988-03-01 1989-09-05 Canon Inc 露光制御装置
JP2528368B2 (ja) 1989-11-13 1996-08-28 富士写真フイルム株式会社 カメラ
JP2899031B2 (ja) * 1989-12-28 1999-06-02 キヤノン株式会社 自動露出制御装置
US5194960A (en) * 1990-03-05 1993-03-16 Konica Corporation Optical image signal control device
DE69118616T2 (de) * 1990-08-08 1996-09-19 Canon Kk Elektronische Stehbild-Videokamera
JPH03101384A (ja) 1990-08-09 1991-04-26 Sanyo Electric Co Ltd Ccd固体撮像素子の露出制御回路
EP0719039A3 (en) * 1992-08-10 1998-03-11 Sony Corporation Electronic shutter time control with noise suppression for a video camera
JP3666900B2 (ja) * 1994-04-25 2005-06-29 キヤノン株式会社 撮像装置および撮像方法
US5751354A (en) * 1994-04-28 1998-05-12 Canon Kabushiki Kaisha Image sensing apparatus and method with exposure performed based on focus evaluation values
JPH09284784A (ja) 1996-04-12 1997-10-31 Sony Corp カラー撮像装置
US5606392A (en) * 1996-06-28 1997-02-25 Eastman Kodak Company Camera using calibrated aperture settings for exposure control
US5734426A (en) 1996-11-15 1998-03-31 Omnivision Technologies, Inc. Method of automatic exposure control in a MOS imaging array
JP3107760B2 (ja) 1996-12-25 2000-11-13 松下電器産業株式会社 露光量制御装置
US6486915B2 (en) * 1999-04-20 2002-11-26 Intel Corporation Determining a final exposure setting automatically for a solid state camera without a separate light metering circuit

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7436446B2 (en) 2003-08-29 2008-10-14 Casio Computer Co., Ltd. Imaging device equipped with automatic exposure control function

Also Published As

Publication number Publication date
JP4201424B2 (ja) 2008-12-24
US6822689B1 (en) 2004-11-23

Similar Documents

Publication Publication Date Title
JP4049603B2 (ja) 撮像装置
KR970003032B1 (ko) 고체 촬상 장치
US6870566B1 (en) Image sensing system for sensing an image and converting the image into image signals with a controlled operating rate
EP0748111B1 (en) Solid image pickup unit and video camera employing same
US6856352B1 (en) Image pick-up apparatus
KR100347493B1 (ko) 촬상 장치
JP7175697B2 (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP2002209146A (ja) 固体撮像素子の駆動方法
KR100479403B1 (ko) 촬상 장치
JP4169415B2 (ja) 固体撮像装置
JP4201424B2 (ja) 固体撮像装置
US20040252224A1 (en) Imaging apparatus and imaging method
JP3913388B2 (ja) 固体撮像装置
JP5105843B2 (ja) 撮像装置及び判定方法
JP4675204B2 (ja) 撮像素子の駆動方法および撮像装置
KR100625722B1 (ko) 화상 신호 처리 회로 및 이것을 이용한 촬상 장치
JP2000236485A (ja) 固体撮像装置
JP2003110944A (ja) 撮像装置
US6498623B1 (en) System and method for generating variable-length timing signals in an electronic imaging device
US12108149B2 (en) Image capturing apparatus having function of photographing still image during moving image photographing, and method of controlling same
JP2589124B2 (ja) 固体撮像装置
JP2004088323A (ja) 撮像装置
JP2645901B2 (ja) スミア除去回路
US20090153719A1 (en) Digital photographing apparatus and method of operating image pickup device
JP2000224491A (ja) 固体撮像装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041005

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20051227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070724

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070731

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070927

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080909

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081007

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111017

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111017

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121017

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121017

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131017

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term