JPH04233402A - テレビカメラによる対象物の位置認識方式 - Google Patents

テレビカメラによる対象物の位置認識方式

Info

Publication number
JPH04233402A
JPH04233402A JP2417126A JP41712690A JPH04233402A JP H04233402 A JPH04233402 A JP H04233402A JP 2417126 A JP2417126 A JP 2417126A JP 41712690 A JP41712690 A JP 41712690A JP H04233402 A JPH04233402 A JP H04233402A
Authority
JP
Japan
Prior art keywords
data
template
pixel
image memory
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2417126A
Other languages
English (en)
Inventor
Hiroshi Ikeda
池田 比呂志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2417126A priority Critical patent/JPH04233402A/ja
Publication of JPH04233402A publication Critical patent/JPH04233402A/ja
Withdrawn legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Input (AREA)
  • Image Processing (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、テレビカメラによる対
象物の位置認識方式に関し、特にICパッケージや位置
合わせ用パターンなどの対象物の撮影画像についての多
階調デ−タと二値デ−タとを別々のメモリに格納し、先
ず二値デ−タに基づいて対象物の大まかな位置を認識し
てこの位置情報に基づいた検出エリアを多階調デ−タを
格納しているメモリ中に設定し、続いてこの検出エリア
中の多階調デ−タに基づいて対象物の正確な位置を認識
することにより、プロセッサでの要処理時間を短くする
とともに位置認識の精度を確保するようにした対象物の
位置認識方式に関する。
【0002】
【従来の技術】従来、テレビカメラによる対象物の位置
認識方式としては、図7に示す様に、位置合わせ用パタ
ーンなどの対象物71をテレビカメラ72で撮影して得
られる画像の多階調デ−タを濃淡画像メモリ73に格納
し、この濃淡画像メモリ73において対象物71を完全
に取り込むことができるM×N(M,Nは正の整数)の
画素に相当するサイズのウィンドウ74を設定してこの
ウィンドウ74と同じ大きさを持つテンプレート75の
各画素と、当該ウィンドウ74内の原画像の対応する各
画素間の多階調デ−タ同士についての相関値を、プロセ
ッサ76での演算処理により、当該テンプレート75を
1画素ごとにシフトさせていったときの各シフト位置に
おいて求め、この相関値が最大となるときの前記テンプ
レート75の位置を前記対象物の位置であると決定する
手法が一般的である。
【0003】なお、ここで用いるテンプレート75は、
検出したい対象物71の設計値を基にバラツキも加味し
て求めた、対象物部分と背景部分との各画素の多階調デ
−タで作成した型板である。
【0004】
【発明が解決しようとする課題】以上のように、従来の
方式では、濃淡画素メモリ73中の対象物71が存在し
ない画素領域についても、テンプレート75がシフトす
るごとに当該テンプレート75の各画素と、濃淡画像メ
モリ73中の対応する各画素との間の多階調デ−タ同士
についての相関値をプロセッサ76で求めている。その
ため、位置確認についての精度は十分なものとなるがプ
ロセッサ76での演算に時間がかかるといった問題点が
あった。
【0005】そこで、本発明では、濃淡画像メモリの外
に二値画像メモリを用意してそれぞれのメモリに対象物
の画像についての多階調デ−タと二値デ−タのそれぞれ
を格納し、先ず二値画像メモリ中の二値デ−タに基づい
て対象物の大まかな位置を認識してこの位置情報に基づ
いた検出エリアを多階調デ−タを格納している濃淡画像
メモリ中に設定し、続いてこの検出エリア中の各画素の
多階調デ−タに基づいて対象物の正確な位置を決定する
ことにより、プロセッサでの要処理時間を短くするとと
もに位置認識の精度を確保することを目的とする。
【0006】
【課題を解決するための手段】本発明は、対象物を撮影
して得られる画像の多階調デ−タと二値デ−タとを別々
のメモリに格納しておき、プロセッサは先ず二値デ−タ
を用いて対象物の大まかな位置を認識し、続いてこの認
識した範囲についての各画素の多階調デ−タについて、
予め作成してあるテンプレートの各画素の多階調デ−タ
との相関値を求めることにより対象物の位置を決定する
ものである。
【0007】図1は本発明の原理説明図である。図にお
いて、1は、対象物であり、例えば位置合わせ用の十字
状をしたパタ−ンである。2は、テレビカメラであり、
対象物1を撮影してその濃淡画像を求めている。3は、
濃淡画像メモリであり、対象物1の濃淡画像をA/D変
換して求めた多階調デ−タを格納している。4は、二値
画像メモリであり、多階調デ−タを所定の閾値で二値化
して求めた二値データ、例えば対象物部分の画素を「1
」,背景部分の画素を「0」としたデータを格納してい
る。なお、この二値化は、テレビカメラ2の出力信号に
対して行なってもよいし、いったんメモリ3に格納した
多階調デ−タに対して行なってもよい。また、本発明に
おける二値画像メモリとは、最終的に二値データを格納
するメモリのことである。5は、ブロック領域であり、
それぞれのブロック領域は複数の画素からなっている。 6は、位置座標の一つであり、ブロック領域5のそれぞ
れについて、例えば左上の画素から矢印方向に走査した
ときに最初に「1」となる画素の、二値画像メモリ4に
おけるx座標およびy座標で表される。7は、検出エリ
アであり、対象物部分の画素を含むブロック領域5のそ
れぞれにおける位置座標6に基づいて濃淡画像メモリ3
に設定された、対象物全体より大きめの領域である。8
は、テンプレートであり、対象物1の設計値を基に当該
対象物部分と背景部分との各画素の多階調デ−タで作成
したものである。9は、プロセッサであり、テンプレー
ト8の各画素と濃淡画像メモリ3の各画素との間の多階
調デ−タ同士についての相関値や位置座標6などを求め
る演算処理を行なっている。
【0008】ここで、対象物1をテレビカメラ2で撮影
した画像に基づいてその位置を認識する手順は次のよう
になっている。
【0009】すなわち、■対象物1をテレビカメラ2で
撮影してその画像デ−タを求める。■この画像デ−タか
ら多階調デ−タと二値デ−タとを求め、多階調デ−タを
濃淡画像メモリ3に、また二値デ−タを二値画像メモリ
4に格納する。■二値画像メモリ4を複数の画素からな
るブロック領域5に分割する。■ブロック領域ごとに、
例えば左上の画素から矢印方向に走査したときに最初に
「1」となる画素の二値画像メモリ4でのx座標および
y座標を求める。■この位置座標に基づいて、対象物全
体より大きめの検出エリア7を濃淡画像メモリ3上に設
定する。■この検出エリア7において対象物1のテンプ
レート8を1画素ずつシフトさせていき、各シフト位置
でのテンプレート8の各画素と、濃淡画像メモリ3中の
対応する各画素との間の多階調デ−タ同士の相関値を求
める。■この相関値が最大となるときのテンプレート8
の位置を対象物1の位置であると決める。といった手順
により、対象物1の位置を認識している。
【0010】
【作用】本発明では、先ず二値画像メモリ4において対
象物1の大まかな位置を求め、この位置情報に基づいて
検出エリア7を濃淡画像メモリ3に設定している。そし
て、この検出エリア7に対して従来の手法、すなわちテ
ンプレート8を1画素ずつシフトさせていき、各シフト
位置でのテンプレート8の各画素と、検出エリア7中の
対応する画素との間の統計的マッチング状態をプロセッ
サ9で求める手法を適用している。
【0011】このように、プロセッサ9は、二値画像メ
モリ4を走査して対象物1の全体を含む検出エリア7を
設定し、この検出エリア7の画素についてのみその多階
調デ−タに基づいた演算処理を実行しているので、プロ
セッサ9での処理時間は短縮される。
【0012】
【実施例】図2,図3,図4,図5,図6及び図7を用
いて本発明の実施例を説明する。
【0013】図2は、プリント板上に搭載する部品の位
置を認識する装置の概要を示す説明図である。図2にお
いて、21はプリント板,22はプリント板上の部品搭
載位置を示すマーク,23 はプリント板を載置したX
ーYテーブル,24はプリント板上に搭載する部品, 
25は部品に設けた位置認識用の例えば十字形のパター
ン、26はテレビカメラ, 27は画像処理部, 28
は駆動制御部である。
【0014】また、画像処理部27は、テレビカメラ2
6の出力である画像信号を多階調デ−タに変換するA/
D変換部31, この多階調デ−タをいったん格納して
最終的には二値デ−タに変換して格納する二値画像メモ
リ32, この二値画像メモリ32の多階調デ−タをコ
ピーして格納する濃淡画像メモリ33, 各種デ−タを
保持したROM34, プログラムを保持したROM3
5, 高速演算処理が可能なプロセッサ36, 演算途
中のデ−タを保持するためのRAM37およびCPU3
8等で構成されている。
【0015】また、駆動制御部28は、パターン25の
位置に対応した制御信号に基づいた制御を行うコントロ
ーラ41, このコントローラ41によって制御される
部品クランパ42, 同じくコントローラ41によって
制御されるパルスモータ43, 及びこのパルスモータ
43によって駆動されるXーYテーブル駆動部44等で
構成されている。
【0016】ここで、プリント板21と部品24との位
置合わせは次のように行われる。 (1) 先ず、デ−タ圧縮のために多階調デ−タを二値
化する。 すなわち、テレビカメラ26の出力信号をA/D変換し
て求めた、例えば256段階の多階調デ−タが格納され
ている二値画像メモリ32中の各濃度に対応した画像数
をカウントして図3に示すような濃度ヒストグラムを作
成する。そして、設計値上、このパターン25全体の画
素数は予め分かっているから、当該濃度ヒストグラムの
明るい方から順に画素数を累積していってこの既知の画
素数に最も近くなる濃度を求め、この濃度を閾値として
多階調デ−タの二値化を行ない、この二値デ−タを二値
画像メモリ32に格納する。なお、この濃度ヒストグラ
ムはパターン25の部分を「明」、背景部分を「暗」と
して作成している。
【0017】(2) 次に、二値画像メモリ32の二値
デ−タに基づいてパターン25の大まかな位置を認識す
る。すなわち、二値画像メモリ32を、パターン25の
大きさ(x,y方向の最大長)に基づいて予め決めてあ
るブロック領域51のサイズで図4に示すように等分割
する。そして、ブロック領域同士の走査の順序をx方向
にして順次、各ブロック領域について所定の方向、例え
ば左上及び右下から1ライン,1画素ごとに矢印方向に
走査して「1」の画素が見つかった場合はその時点でそ
のブロック領域内の走査を中止して当該画素の二値画像
メモリ32におけるx,y座標を求める。そして、それ
までに走査した各ブロック領域について得られたx,y
座標の中の最大値,最小値であるxmax ,xmin
 ,ymax ,ymin を各ブロック領域内の走査
が終わるごとに求める。ここで、走査に要する時間を短
縮するために各ブロック領域において、例えば1ライン
おきや1画素おきの走査を行ってもよい。
【0018】なお、走査を終了するのは次の場合である
。 ・すべてのブロック領域の走査が終わった場合。 ・(ymax −ymin )の値が対象物であるパタ
ーン25のy方向の長さに略等しく、かつymin の
画素があるブロック領域を含めて3つ下のブロック領域
の走査が終わった場合。これは、パターン25のy方向
の長さが3個のy方向に連続したブロック領域の中に収
まる程度のものだからである。また、後者の場合、(x
max −xmin )の値が対象物であるパターン2
5のx方向の長さに略等しく、かつxmin の画素が
あるブロック領域を含めて3つ右のブロック領域の走査
が終わった場合は同様の理由で走査対象となるブロック
領域のx方向の範囲を短くする。そして、ブロック領域
同士の走査の順序をy方向にした場合の走査終了等につ
いては、以上の説明でxとyとを入れ換えたものになる
【0019】(3) 次に、先に求めたxmax ,x
min,ymax ,ymin の値に基づいて図5に
示すような大きめの検出エリア52を、情報量の多い濃
淡画像メモリ33に設定する。
【0020】(4) 次に、この検出エリア52の各画
素の多階調デ−タに基づいてパターン25の正確な位置
を決定する。すなわち、図6に示すような、パターン2
5を完全に取り込むことができるM×N(M,Nは正の
整数)の画素に相当するサイズのウィンドウと、このウ
ィンドウと同じ大きさでパターン25およびその背景部
分の各画素の多階調デ−タからなるテンプレート53と
を予め決めておき、このテンプレート53を検出エリア
52の例えば左上の画素から図示のようにx方向に1画
素ずつシフトさせていき、各シフト位置でのテンプレー
ト53と、濃淡画像メモリ33の原画像との相関値をプ
ロセッサ36での演算処理により求める。
【0021】そして、この相関値は、テンプレート53
の平均濃度からのバラツキを表す指標である自己分散を
Sxxとし、原画像の自己分散をSyyとし、またテン
プレート53と原画像との間の共分散をSxyとして、
【数2】 で求められる。ここで、−1≦r≦1であり、“1”に
近づくほど、テンプレート53と原画像との重なり度が
大きいことを示している。
【0022】また、Sxxは、テンプレート53の各画
素の多階調デ−タをxmnとして、
【数3】 で求められる。同様に、Syyは、ウィンドウ内の原画
像の各画素の多階調デ−タをymnとして、
【数4】 で求められる。また、Sxyは、
【数5】 で求められる。そして、テンプレート53と、濃淡画像
メモリ33の対応する原画像との相関値rは、
【数6】 で求められる。
【0023】さらに、本発明では、テンプレート53が
固定されれば■′式の
【数7】 の部分が定数になること、また相関値rは1より小さい
少数点であるため、プロセッサ36での演算処理におい
て丸め誤差が生じることなどを考慮して、
【数8】 但し、 C1 :1000 M  :テンプレート53のx方向のサイズN  :テ
ンプレート53のy方向のサイズxmn:テンプレート
53の各画素の多階調デ−タymn:濃淡画像メモリ中
の対応する各画素の多階調デ−タ の値を算出してこれを相関値としている。なお、C1 
,C2 およびC3 の値は予め求めてデ−タ用のRO
M34に格納しておく。
【0024】したがって、0≦r2 ≦1000となり
、このr2 が最大となるテンプレート53のシフト位
置をパターン25の位置と決定する。なお、この■′式
では、元々のrの値が負である場合を認識できないので
、パターン25の位置を決定する前に■′式の分子の、
【数9】 が負の値でないことを確認する必要がある。
【0025】
【発明の効果】本発明によれば、濃淡画像メモリと二値
画像メモリを用意してそれぞれのメモリに対象物の画像
についての多階調デ−タと二値デ−タのそれぞれを格納
し、先ず二値画像メモリ中の二値デ−タに基づいて対象
物の大まかな位置を認識して、続いてこの位置情報に基
づいた検出エリアを、多階調デ−タを格納している濃淡
画像メモリ中に設定し、続いてこの検出エリアにおいて
対象物のテンプレートを1画素ずつシフトさせていき、
各シフト位置での当該テンプレートと、対応する原画像
との相関値をプロセッサで求めてこの相関値が最大のと
きのテンプレートの位置を対象物の位置を決定する構成
にしているので、対象物のない画素領域での多階調デ−
タに対する演算を省略でき、プロセッサでの処理時間を
短くするとともに位置決定の精度を確保することができ
る。
【0026】さらに、前記相関値の演算過程においても
、例えば自己分散Sxxを求める際、前記■′式をいっ
たん■′式に変形したように平均値だけを別に算出する
必要がない状態にしてから演算処理を実行し、また0≦
r2 ≦1000となるように相関値rを変形する構成
にしているので、プロセッサでの処理負担を軽くすると
ともに演算処理過程での丸め誤差等の発生を抑えること
ができる。
【図面の簡単な説明】
【図1】本発明の原理説明図である。
【図2】本発明の、プリント板上に搭載する部品の位置
を認識する装置の概要を示す説明図である。
【図3】多階調デ−タのそれぞれの濃度と、この濃度を
持つ画素数とを表す濃度ヒストグラムである。
【図4】二値画像メモリを複数の画素からなるブロック
領域で等分割した状態を示す説明図である。
【図5】対象物の位置座標のxmax ,xmin ,
ymax ,ymin に基づいて設定した検出エリア
を示す説明図である。
【図6】検出エリアにおけるウィンドウとテンプレート
との状態を示す説明図である。
【図7】従来の、対象物の位置認識方式の概要を示す説
明図である。
【符号の説明】
図1において、 1・・・対象物 2・・・テレビカメラ 3・・・濃淡画像メモリ 4・・・二値画像メモリ 5・・・ブロック領域 6・・・位置座標 7・・・検出エリア 8・・・テンプレート 9・・・プロセッサ

Claims (4)

    【特許請求の範囲】
  1. 【請求項1】  対象物をテレビカメラで撮影して求め
    た画像デ−タをメモリに格納し、このメモリ中の画像デ
    −タについてプロセッサで演算処理することにより、当
    該対象物の位置を認識する方式において、前記メモリと
    して濃淡画像メモリと二値画像メモリとを備え、当該濃
    淡画像メモリには前記画像の多階調デ−タを格納し、ま
    た当該二値画像メモリには前記画像の二値デ−タを格納
    し、前記二値画像メモリを複数の画素からなるブロック
    領域に分割し、この中の所定範囲のブロック領域のそれ
    ぞれを走査することによって前記対象物の二値デ−タが
    存在する画素の中の特定のものの位置座標を当該ブロッ
    ク領域ごとに求め、この位置座標に基づいて、前記対象
    物全体より大きめの検出エリアを前記濃淡画像メモリ上
    に設定し、この検出エリアにおいて、予め対象物の各画
    素の多階調デ−タを見込んで作成したテンプレートを画
    素単位でシフトさせ、各シフト位置での当該テンプレー
    トの各画素と、前記濃淡画像メモリ中の対応する各画素
    との間の多階調デ−タ同士についての相関値を求め、こ
    の相関値が最大となるときの前記テンプレートの位置を
    前記対象物の位置であると決定し、先ず、前記二値デ−
    タに基づいて対象物の大まかな位置を認識し、続いて前
    記多階調デ−タに基づいて対象物の正確な位置を決定す
    るようにしたことを特徴とするテレビカメラによる対象
    物の位置認識方式。
  2. 【請求項2】  二値デ−タを求める際の閾値は、多階
    調デ−タのそれぞれの濃度と、この濃度を持つ画素数と
    を示す濃度ヒストグラムを作成してこの濃度ヒストグラ
    ムの明暗いずれかの濃度の方から当該画素数を累積し、
    この累積値が予め分かっている対象物の画素数に最も近
    いときの濃度であることを特徴とする請求項1記載のテ
    レビカメラによる対象物の位置認識方式。
  3. 【請求項3】  位置座標は、所定範囲のブロック領域
    のそれぞれについて所定の方向に走査するとき、前記対
    象物の画像デ−タが最初に認識される画素の、二値画像
    メモリにおけるx座標およびy座標であることを特徴と
    する請求項1記載のテレビカメラによる対象物の位置認
    識方式。
  4. 【請求項4】  相関値は、 【数1】 但し、 r  :相関値 c1 :定数 M  :テンプレートのx方向のサイズN  :テンプ
    レートのy方向のサイズxmn:テンプレートの各画素
    の多階調デ−タymn:濃淡画像メモリ中の対応する各
    画素の多階調デ−タ により求めることを特徴とする請求項1記載のテレビカ
    メラによる対象物の位置認識方式。
JP2417126A 1990-12-28 1990-12-28 テレビカメラによる対象物の位置認識方式 Withdrawn JPH04233402A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2417126A JPH04233402A (ja) 1990-12-28 1990-12-28 テレビカメラによる対象物の位置認識方式

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2417126A JPH04233402A (ja) 1990-12-28 1990-12-28 テレビカメラによる対象物の位置認識方式

Publications (1)

Publication Number Publication Date
JPH04233402A true JPH04233402A (ja) 1992-08-21

Family

ID=18525259

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2417126A Withdrawn JPH04233402A (ja) 1990-12-28 1990-12-28 テレビカメラによる対象物の位置認識方式

Country Status (1)

Country Link
JP (1) JPH04233402A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284509A (ja) * 2004-03-29 2005-10-13 Matsushita Electric Ind Co Ltd 画像処理装置
JP2010054246A (ja) * 2008-08-26 2010-03-11 Panasonic Electric Works Co Ltd 接合部検出方法およびそれを用いた接合部外観検査方法
JP2014112228A (ja) * 2005-02-28 2014-06-19 Inphase Technologies Inc ホログラフィックデータ格納システムにおけるデータ画素の処理

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284509A (ja) * 2004-03-29 2005-10-13 Matsushita Electric Ind Co Ltd 画像処理装置
JP2014112228A (ja) * 2005-02-28 2014-06-19 Inphase Technologies Inc ホログラフィックデータ格納システムにおけるデータ画素の処理
JP2010054246A (ja) * 2008-08-26 2010-03-11 Panasonic Electric Works Co Ltd 接合部検出方法およびそれを用いた接合部外観検査方法

Similar Documents

Publication Publication Date Title
US5157740A (en) Method for background suppression in an image data processing system
US7313289B2 (en) Image processing method and apparatus and computer-readable storage medium using improved distortion correction
KR890005006B1 (ko) 화상처리 시스템 및 방법
CN113362238B (zh) 测试图像处理方法、装置、电子设备及存储介质
US20010012390A1 (en) Pattern inspection equipment, pattern inspection method, and storage medium storing pattern inspection program
CN111767752B (zh) 一种二维码识别方法及装置
CN118037610B (zh) 一种针对复杂环境的水尺图像畸变校正方法和系统
EP0568697A1 (en) Method of correcting shading and device therefor
US5621825A (en) Image processor, image processing method and apparatus applying same
US7489832B2 (en) Imaging apparatus, image processing method for imaging apparatus and recording medium
US6650362B1 (en) Movement detecting apparatus with feature point extractor based on luminance gradient in current frame
JPH04233402A (ja) テレビカメラによる対象物の位置認識方式
JP3582988B2 (ja) 非接触型画像読取装置
JP3253752B2 (ja) パターン評価方法
CN115361480B (zh) 一种用于高拍仪的图片修正方法、装置及介质
JPS63153682A (ja) 濃淡画像の処理方法
CN120219768B (zh) 一种用于流水线产品的参数自动化确定方法及系统
JPH08172300A (ja) 部品位置認識装置
JP3041056B2 (ja) 半導体ペレットの検出方法
JP4465911B2 (ja) 画像処理装置およびその方法
JP4365619B2 (ja) エッジ検出装置及び部品認識装置並びにエッジ検出方法及び部品認識方法
JP3175946B2 (ja) 物体位置計測方法およびその装置
CN120791160A (zh) 激光雕刻方法和相关设备
JPH08212346A (ja) テンプレートマッチング方法
JPH05314261A (ja) 画像認識方法

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 19980312