JPH11257937A - 欠陥検査方法 - Google Patents

欠陥検査方法

Info

Publication number
JPH11257937A
JPH11257937A JP5864998A JP5864998A JPH11257937A JP H11257937 A JPH11257937 A JP H11257937A JP 5864998 A JP5864998 A JP 5864998A JP 5864998 A JP5864998 A JP 5864998A JP H11257937 A JPH11257937 A JP H11257937A
Authority
JP
Japan
Prior art keywords
defect
image
input image
display area
inspection method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP5864998A
Other languages
English (en)
Other versions
JP3695120B2 (ja
Inventor
Masaaki Noda
正明 野田
Masashi Atsumi
誠志 渥美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP05864998A priority Critical patent/JP3695120B2/ja
Publication of JPH11257937A publication Critical patent/JPH11257937A/ja
Application granted granted Critical
Publication of JP3695120B2 publication Critical patent/JP3695120B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

(57)【要約】 【課題】 シェーディング補正による欠陥検出方法にお
いて、表示領域の最外周部分で擬欠陥信号を発生しない
ようにして、表示領域全域にわたって正確な欠陥検出を
可能とする方法を提供する。 【解決手段】 表示素子の微小欠陥を検出する欠陥検査
方法において、 表示素子の検査領域を撮像して入力画
像を生成する入力画像生成工程と、この入力画像の平滑
化フィルタ処理を行うことにより得られる平滑化入力画
像の濃淡膨張処理を行って背景画像を生成する背景画像
生成工程と、前記入力画像と前記背景画像とを比較する
比較工程と、をこの順序で有するようにした。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、コンピュータのモ
ニター、TV受像機、液晶プロジェクタなどに用いられ
ている液晶パネル、プラズマディスプレイなどの表示素
子の欠陥を検査するための欠陥検査方法に関する。
【0002】
【従来の技術】表示素子の微小欠陥を検出しようとした
場合、照明の輝度ムラの問題、液晶の視野角の問題、光
学系での撮像光量の不均一の問題などのため、表示素子
上の位置によって欠陥の検出感度が変わり、微小欠陥を
正確に検出することが困難になってしまう場合がある。
特開平4−336384号公報には、このような問題を
解決する方法が開示されている。この方法はいわゆるシ
ェーディング補正による欠陥検出方法として知られる方
法であって、入力画像の平滑化フィルタ処理を行うこと
により背景画像を生成し、この背景画像と入力画像との
差分をとる方法である。
【0003】
【発明が解決しようとする課題】検査領域は、液晶パネ
ル等の表示素子の表示領域内であるが、ワークのセッテ
ィング時の多少のズレなども許容できるようにTVカメ
ラで撮像する領域は、この表示領域よりも若干広く設定
されている。なお、解像度を上げるために複数のTVカ
メラを用いた特開平8−254499号公報のような構
成も考えられるが、この場合も表示領域が、全てTVカ
メラで撮像されるようにカメラが配置される。従って、
このようにして入力された入力画像の平滑化フィルタ処
理を行って背景画像を作成した場合、表示領域と表示領
域外の領域との輝度の相違(通常、表示領域よりも表示
領域外の方が輝度が低い場合が多い。)により表示領域
の最外周部分に輝度のダレが生じ、このままシェーディ
ング補正をかけると表示領域の最外周部分を常に欠陥と
して検出してしまうことになる。かといって、表示領域
の最外周部分で検出された偽欠陥信号を無視することと
すれば、本当に表示領域の最外周部分に欠陥が存在した
場合、欠陥を見逃すこととなる。
【0004】そこで、本発明はこのような課題を解決す
るもので、その目的とするところは、シェーディング補
正による欠陥検出方法において、表示領域の最外周部分
で擬欠陥信号を発生しないようにして、表示領域全域に
わたって正確な欠陥検出を可能とする方法を提供すると
ころにある。
【0005】
【課題を解決するための手段】請求項1の欠陥検査方法
は、表示素子の表示素子の微小欠陥を検出する欠陥検査
方法であって、表示素子の検査領域を撮像して入力画像
を生成する入力画像生成工程と、この入力画像の平滑化
フィルタ処理を行うことにより得られる平滑化入力画像
の濃淡膨張処理を行って背景画像を生成する背景画像生
成工程と、前記入力画像と前記背景画像とを比較する比
較工程と、をこの順序で有することを特徴とする。
【0006】ここで、上記の濃淡膨張処理とは、次のよ
うな処理である。まず、入力画像の平滑化フィルタ処理
を行うことにより得られた平滑化入力画像の中から、あ
る注目する画素Pを定める。そして、その画素Pを含む
ようにあらかじめ定められた領域(例えば、画素P、画
素P上の画素、画素Pの下の画素、画素Pの左の画素及
び画素Pの右の画素の5つの画素を含む領域)の中で信
号強度の一番高い画素の信号を、画素Pの信号として、
もとの画素Pの信号と置き換える。この操作を平滑化入
力画像の全画素について実施する。
【0007】このため、表示素子の表示領域の信号が表
示領域外の信号より強度が高い場合には、表示領域最外
周部分においてダレが発生するのであるが、この濃淡膨
張処理を行うことにより、このダレ部分は表示領域外に
押し出されることとなる。
【0008】その結果、表示領域の最外周部分で擬欠陥
信号が発生しないので、表示領域全域にわたって正確な
欠陥検出が可能となる。
【0009】請求項2の欠陥検査方法は、表示素子の微
小欠陥を検出する欠陥検査方法であって、表示素子の検
査領域を撮像して入力画像を生成する入力画像生成工程
と、この入力画像の平滑化フィルタ処理を行うことによ
り得られる平滑化入力画像の濃淡縮小処理を行って背景
画像を生成する背景画像生成工程と、前記入力画像と前
記背景画像とを比較する比較工程と、をこの順序で有す
ることを特徴とする。
【0010】ここで、上記の濃淡縮小処理とは、次のよ
うな処理である。まず、入力画像の平滑化フィルタ処理
を行うことにより得られた平滑化入力画像の中から、あ
る注目する画素Pを定める。そして、その画素Pを含む
ようにあらかじめ定められた領域(例えば、画素P、画
素P上の画素、画素Pの下の画素、画素Pの左の画素及
び画素Pの右の画素の5つの画素を含む領域)の中で信
号強度の一番低い画素の信号を、画素Pの信号として、
もとの画素Pの信号と置き換える。この操作を平滑化入
力画像の全画素について実施する。
【0011】このため、表示素子の表示領域の信号が表
示領域外の信号より強度が低い場合には、表示領域最外
周部分においてダレが発生するのであるが、この濃淡縮
小処理を行うことにより、このダレ部分は表示領域外に
押し出されることとなる。
【0012】その結果、表示領域の最外周部分で擬欠陥
信号が発生しないので、表示領域全域にわたって正確な
欠陥検出が可能となる。
【0013】請求項3の欠陥検査方法は、請求項1又は
2に記載の欠陥検査方法において、画像間減算処理を行
うことにより前記比較工程を実施することを特徴とす
る。
【0014】このため、画像データの型が整数型でよい
ため、データ量も比較的少なくて済み、演算処理も高速
にでき、その結果、欠陥検査を高速に行うことができる
という効果がある。
【0015】請求項4の欠陥検査方法は、請求項1又は
2に記載の欠陥検査方法において、画像間除算処理を行
うことにより前記比較工程を実施することを特徴とす
る。
【0016】このため、画像データの型を浮動小数点型
にする必要が生じるが、表示領域内で輝度むらが大きい
場合であっても、正常画素と欠陥画素のSN比をある程
度一定に保つことができ、正確な欠陥検出ができるとい
う効果がある。
【0017】
【発明の実施の形態】以下、本発明を実施例に基づいて
詳細に説明する。
【0018】(実施例1)図1は、実施例1の欠陥検査
方法を示すフロー図である。図2は、撮像された入力画
像を示す図であり、図3は、実施例1の欠陥検査装置の
構成図である。被検査対象は液晶プロジェクタ11で投
影された画像である。液晶プロジェクタ11により検査
パターン2をスクリーン10上に投影し、投影された検
査パターン2を2次元のTVカメラ12により撮像す
る。撮像された画像は、画像処理装置13に送られ、こ
こで投影された検査パターン2の内部に欠陥があるかど
うかを検査し、良否の判断をする。検出する欠陥は、こ
こでは、点欠陥と呼ばれるアクティブマトリクス型表示
素子の1画素単位の欠陥のみを対象にするものとし、色
むら等の比較的面積の大きい欠陥に対しては、取り扱わ
ないものとする。投影される検査パターン2は、表示エ
リア全面を白表示、黒表示、階調表示と次々と切り換
え、それをそれぞれ撮像し検査されることになる。
【0019】ステップS1の画像入力工程において、ス
クリーン10上に表示されたある検査パターン2をTV
カメラ12で取込み、この画像データを画像Aとして画
像処理装置13内のメモリに記憶しておく。近年、表示
素子の解像度は、VGAからSVGA、XGAさらにそ
れ以上と高密度化してきており、それに対応してそのよ
うな表示素子を検査するためのTVカメラの解像度も必
然的に高解像度のものが求められてきており、従来、水
平512画素×垂直480画素程度の画像処理が一般的
であったが、1000画素×1000画素以上のTVカ
メラも使われだしている。また被検査画像を分割して入
力し解像度を稼ぐという方法も広く行われている。いず
れにしろ入力される画像Aは、図2に示すように、表示
素子が全て取り込まれるように表示領域2よりも大きい
範囲の画像となる。この入力画像のうち、データ抽出ラ
イン3上の輝度変化について調べてみると、図4(a)
のような輝度データになっている。ここで図2では省略
してあるが、ちょうどデータ抽出ライン3上に輝点欠陥
と黒点欠陥があるものとする。この欠陥に対応するグラ
フ上の変化が、図4(a)の輝点欠陥30と黒点欠陥3
1である。表示領域2に対応する部分はこのグラフの2
0の矢印で示した範囲である。表示領域部分2は、表示
領域外の部分よりも輝度が高いものとする。表示領域内
のデータ変化をマクロ的に見ると大きな山なりの形状で
中央部が比較的明るく、周辺部が暗い輝度ムラ状況にな
っている。この原因は、照明光源の照度むらや液晶パネ
ルやレンズ光学系の特性などが考えられるが、この状況
を改善することは、技術的、コスト的な問題で比較的困
難である。従ってこのように入力された画像状態から、
輝点欠陥30、黒点欠陥31の部分を検出したいのであ
るが、輝度ムラの最大値と最小値の差が欠陥30、31
の輝度変化よりも大きいため、単純に2値化して欠陥の
みを検出することができない。すなわち、輝点欠陥30
の輝度のピークよりも輝度ムラの最大値の方が大きかっ
たり、黒点欠陥31の極小値よりも輝度ムラの最小値の
方が小さい場合には、欠陥と同時に、輝度ムラによる擬
似欠陥も検出してしまうことになる。そこで後で述べる
シェーディング補正の処理を行なうことで、このような
輝度ムラの中から輝点欠陥30や黒点欠陥31のような
微小欠陥のみを検出することを考える。
【0020】ステップS2では、画像Aのコピーを作成
し平滑化フィルタ処理を行なう。画像Aのコピーを作る
のは、後で画像間演算をする時に画像Aを使用するため
である。この平滑化フィルタ処理とは、点欠陥のような
微小な面積の輝度変化を画像データから取除く処理で、
通常は3×3や5×5のマトリクスの畳み込み演算を対
象画像全域にわたって行なうことで実現される。この平
滑化フィルタ処理の結果、作成された画像を画像Bとす
る。この処理の様子を平滑化フィルタ処理後のグラフ図
4(b)で説明する。図4(a)と比較して、細かい周
期の輝度変化が除去され、輝点欠陥30や黒点欠陥31
に対応する輝度変化もグラフ上で除去されているのがわ
かる。さらに、図4(b)の両側にある表示領域と表示
領域外との境目の部分の輝度変化は、平滑化フィルタ処
理前のグラフ(図4(a))に比べ、ダレた状態になっ
ており、輝度変化が緩やかになっている。図4(c)の
グラフは、入力画像Aと平滑化フィルタ処理後の画像B
の差分をとった結果を示すグラフである。図4(a)及
び(b)と図4(c)とでは、欠陥をわかりやすくする
ため縦軸の尺度を変えてある。従来、輝度ムラの影響を
除去するためには、このような差分画像を求めて、2値
化し欠陥を検出するが、ここで表示領域20の位置を示
す目的で入れてある両側の点線の前後付近のデータ変化
に着目すると、擬似欠陥21の部分が生じてしまってい
るのがわかる。この状態のまま、欠陥を検出する目的で
2値化すると輝点欠陥32と同時に擬似欠陥21も検出
されてしまうことになる。また、擬似欠陥21を検出し
ないようにするためには、擬似欠陥21を含まないよう
に表示領域20よりも内側に検査範囲を設定しなくては
ならず、そうすると表示領域ぎりぎりの部分に存在する
欠陥を見落としてしまうことになる。
【0021】それを回避するために、本実施例の欠陥検
査方法では、差分画像を求める前にステップS3の濃淡
膨張処理を行なう。濃淡膨張処理については、特開平4
−336384号公報の9欄及び図3、後で述べる濃淡
縮小処理については、特開平4−336384号公報の
10欄及び図4に記載されている。平滑化フィルタ処理
した画像Bに対して、濃淡膨張処理を行なうと図5
(c)に示すように波形を矢印22の方向に両側に引き
伸ばす効果が得られる。この画像を画像Cと呼ぶ。これ
により、表示領域境界近傍の肩のダレた部分は、表示領
域20の外側に追い出されることになり、ステップS4
の画像演算処理で画像Aと画像Cの差分画像(これを画
像Dとする。)をとる。
【0022】なお、表示領域の輝度が、周囲に比べ明る
い場合には、ステップS3では、濃淡膨張処理を行なう
が、逆に周囲の輝度の方が明るい場合には、濃淡縮小処
理を行なうようにする。
【0023】こうすることで図5(d)の差分処理後の
波形で確認できるように、擬似欠陥23は、表示領域2
0の点線の外側にしか現れず、表示領域全域にわたって
正確な欠陥検出を行なうことが可能になる。ステップS
4の画像間演算では、前述のように二つの画像の差分を
とるように説明したが、画像データとしては、1画素当
り8ないし16ビットの整数型のデータ型を用いるのが
一般的であるので差分演算は、そのデータ型のままで処
理でき更に処理が単純であるため高速化しやすい。しか
し同種同程度の欠陥でも輝度ムラの明るい所にある場合
と暗い方にある場合とで欠陥のコントラストに大きな違
いが出る場合があるが、このような場合にはステップS
4で除算処理を用いる方が、良い結果が得られる。その
一方で画像データを浮動小数点型にする必要が生じるた
めにデータ量が増えると同時に、処理時間も長くなる傾
向がある。
【0024】ステップS5では、あらかじめ決められた
しきい値にもとづき、2値化画像にし、欠陥のみを抽出
する。ここで欠陥のサイズや個数、位置情報などを測定
し、ステップS6で、この情報にもとづき、被検査対象
の良否判断を行なうことになる。
【0025】2値化するときのしきい値は、あらかじめ
限度見本などで検出したい欠陥のしきい値レベルを調べ
ておくか、良品の場合のデータの標準偏差などを基準に
設定すればよい。また、図5(d)の輝点欠陥34と黒
点欠陥35の違いのように欠陥データのでる方向が逆で
あった場合には、欠陥を抽出するためのしきい値を複数
用意しておくことも必要である。
【0026】以上の説明は、液晶プロジェクタでスクリ
ーン上に投影させた検査パターンから欠陥検査を行なう
場合の例であるが、背後に平面状のバックライトを置い
た状態で液晶パネル自身を、対向するTVカメラでとら
え欠陥を検査する場合においても同様な原理に基づいて
検査することが可能である。
【図面の簡単な説明】
【図1】 実施例1の欠陥検査方法の一例を示すフロー
図。
【図2】 撮像された入力画面を示す図。
【図3】 実施例1の欠陥検査方法を用いた検査装置の
構成図。
【図4】 従来のシェーディング補正の手順を説明する
グラフ。
【図5】 実施例1のシェーディング補正の手順を説明
するグラフ。
【符号の説明】
1…入力領域 2…表示領域

Claims (4)

    【特許請求の範囲】
  1. 【請求項1】 表示素子の微小欠陥を検出する欠陥検査
    方法であって、 表示素子の検査領域を撮像して入力画像を生成する入力
    画像生成工程と、 この入力画像の平滑化フィルタ処理を行うことにより得
    られる平滑化入力画像の濃淡膨張処理を行って背景画像
    を生成する背景画像生成工程と、 前記入力画像と前記背景画像とを比較する比較工程と、
    をこの順序で有することを特徴とする欠陥検査方法。
  2. 【請求項2】 表示素子の微小欠陥を検出する欠陥検査
    方法であって、 表示素子の検査領域を撮像して入力画像を生成する入力
    画像生成工程と、 この入力画像の平滑化フィルタ処理を行うことにより得
    られる平滑化入力画像の濃淡縮小処理を行って背景画像
    を生成する背景画像生成工程と、 前記入力画像と前記背景画像とを比較する比較工程と、
    をこの順序で有することを特徴とする欠陥検査方法。
  3. 【請求項3】 請求項1又は2に記載の欠陥検査方法に
    おいて、 画像間減算処理を行うことにより前記比較工程を実施す
    ることを特徴とする欠陥検査方法。
  4. 【請求項4】 請求項1又は2に記載の欠陥検査方法に
    おいて、 画像間除算処理を行うことにより前記比較工程を実施す
    ることを特徴とする欠陥検査方法。
JP05864998A 1998-03-10 1998-03-10 欠陥検査方法 Expired - Fee Related JP3695120B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP05864998A JP3695120B2 (ja) 1998-03-10 1998-03-10 欠陥検査方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP05864998A JP3695120B2 (ja) 1998-03-10 1998-03-10 欠陥検査方法

Publications (2)

Publication Number Publication Date
JPH11257937A true JPH11257937A (ja) 1999-09-24
JP3695120B2 JP3695120B2 (ja) 2005-09-14

Family

ID=13090441

Family Applications (1)

Application Number Title Priority Date Filing Date
JP05864998A Expired - Fee Related JP3695120B2 (ja) 1998-03-10 1998-03-10 欠陥検査方法

Country Status (1)

Country Link
JP (1) JP3695120B2 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155579A (ja) * 2004-11-02 2006-06-15 Matsushita Electric Ind Co Ltd 画像処理方法および画像処理装置
US7561751B2 (en) 2004-11-02 2009-07-14 Panasonic Corporation Image processing method
JP2010091514A (ja) * 2008-10-10 2010-04-22 Nippon Steel Corp 表面欠陥検査システム、方法及びプログラム
JP2012043379A (ja) * 2010-08-23 2012-03-01 Nikon Corp 信号処理装置、欠陥検出装置、信号処理方法、欠陥検出方法およびプログラム
JP2013072725A (ja) * 2011-09-27 2013-04-22 Fujitsu Ltd 画質検査方法、画質検査装置及び画質検査プログラム
JP2018205122A (ja) * 2017-06-05 2018-12-27 株式会社Screenホールディングス 検査装置および検査方法
JP2019039782A (ja) * 2017-08-24 2019-03-14 花王株式会社 粉粒体担持シートの検査装置及び検査方法
WO2019058772A1 (ja) * 2017-09-19 2019-03-28 株式会社Screenホールディングス 基板検査装置、基板処理装置、基板検査方法および基板処理方法
CN112215816A (zh) * 2020-10-13 2021-01-12 四川极速智能科技有限公司 一种生产线中显示器故障的实时检测方法、存储介质和装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155579A (ja) * 2004-11-02 2006-06-15 Matsushita Electric Ind Co Ltd 画像処理方法および画像処理装置
US7561751B2 (en) 2004-11-02 2009-07-14 Panasonic Corporation Image processing method
JP2010091514A (ja) * 2008-10-10 2010-04-22 Nippon Steel Corp 表面欠陥検査システム、方法及びプログラム
JP2012043379A (ja) * 2010-08-23 2012-03-01 Nikon Corp 信号処理装置、欠陥検出装置、信号処理方法、欠陥検出方法およびプログラム
JP2013072725A (ja) * 2011-09-27 2013-04-22 Fujitsu Ltd 画質検査方法、画質検査装置及び画質検査プログラム
JP2018205122A (ja) * 2017-06-05 2018-12-27 株式会社Screenホールディングス 検査装置および検査方法
US11074684B2 (en) 2017-06-05 2021-07-27 SCREEN Holdings Co., Ltd. Inspection apparatus and inspection method
JP2019039782A (ja) * 2017-08-24 2019-03-14 花王株式会社 粉粒体担持シートの検査装置及び検査方法
WO2019058772A1 (ja) * 2017-09-19 2019-03-28 株式会社Screenホールディングス 基板検査装置、基板処理装置、基板検査方法および基板処理方法
JP2019053015A (ja) * 2017-09-19 2019-04-04 株式会社Screenホールディングス 基板検査装置、基板処理装置、基板検査方法および基板処理方法
CN112215816A (zh) * 2020-10-13 2021-01-12 四川极速智能科技有限公司 一种生产线中显示器故障的实时检测方法、存储介质和装置
CN112215816B (zh) * 2020-10-13 2024-01-30 四川极速智能科技有限公司 一种生产线中显示器故障的实时检测方法、存储介质和装置

Also Published As

Publication number Publication date
JP3695120B2 (ja) 2005-09-14

Similar Documents

Publication Publication Date Title
JP3333686B2 (ja) 表示画面検査方法
CN104246468A (zh) 显示装置的检查方法和显示装置的检查装置
JP2009229197A (ja) 線状欠陥検出方法および線状欠陥検出装置
JP2007285754A (ja) 欠陥検出方法および欠陥検出装置
JP3695120B2 (ja) 欠陥検査方法
JP3907874B2 (ja) 欠陥検査方法
JPH0713598B2 (ja) 周期性パタ−ンの欠陥検査方法
JP2004239733A (ja) 画面の欠陥検出方法及び装置
JPH09101236A (ja) 表示欠陥検査装置および表示欠陥検査方法
JP2009281759A (ja) カラーフィルタ欠陥検査方法、及び検査装置、これを用いたカラーフィルタ製造方法
KR20200081541A (ko) 촬상 장치 및 이의 구동 방법
JP2008171142A (ja) シミ欠陥検出方法及び装置
JP4520880B2 (ja) しみ検査方法及びしみ検査装置
JP2005140655A (ja) シミ欠陥の検出方法及びその検出装置
JP3343445B2 (ja) Lcdパネル画質検査装置
JP2004219176A (ja) 画素ムラ欠陥の検出方法及び装置
JP5239275B2 (ja) 欠陥検出方法および欠陥検出装置
JPH01307645A (ja) 試料の検査方法
JPH0979946A (ja) 表示装置の検査装置
JP2008014842A (ja) シミ欠陥検出方法及び装置
JP3270336B2 (ja) 液晶ディスプレイの画質検査装置及びその検査方法
JP3433333B2 (ja) 欠陥検査方法
JP2006145228A (ja) ムラ欠陥検出方法及び装置
JP3451183B2 (ja) 表示パネルの欠陥検査装置
JP2001083474A (ja) 液晶表示パネルの検査方法

Legal Events

Date Code Title Description
A977 Report on retrieval

Effective date: 20040506

Free format text: JAPANESE INTERMEDIATE CODE: A971007

A131 Notification of reasons for refusal

Effective date: 20040706

Free format text: JAPANESE INTERMEDIATE CODE: A131

A521 Written amendment

Effective date: 20040819

Free format text: JAPANESE INTERMEDIATE CODE: A523

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050607

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050620

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 3

Free format text: PAYMENT UNTIL: 20080708

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 4

Free format text: PAYMENT UNTIL: 20090708

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 5

Free format text: PAYMENT UNTIL: 20100708

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110708

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110708

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120708

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees