KR20200046149A - 영역 기반의 비젼 검사장치 - Google Patents

영역 기반의 비젼 검사장치 Download PDF

Info

Publication number
KR20200046149A
KR20200046149A KR1020180122914A KR20180122914A KR20200046149A KR 20200046149 A KR20200046149 A KR 20200046149A KR 1020180122914 A KR1020180122914 A KR 1020180122914A KR 20180122914 A KR20180122914 A KR 20180122914A KR 20200046149 A KR20200046149 A KR 20200046149A
Authority
KR
South Korea
Prior art keywords
finished product
image
stage
assembled finished
assembled
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
KR1020180122914A
Other languages
English (en)
Inventor
김정홍
임혁준
Original Assignee
경북대학교 산학협력단
임혁준
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경북대학교 산학협력단, 임혁준 filed Critical 경북대학교 산학협력단
Priority to KR1020180122914A priority Critical patent/KR20200046149A/ko
Publication of KR20200046149A publication Critical patent/KR20200046149A/ko
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8803Visual inspection
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Health & Medical Sciences (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Pathology (AREA)
  • Analytical Chemistry (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 조립된 완성품에 대한 외관에 나타나는 부품 누락을 검사하기 위한 영역 기반의 비젼 검사장치이다. 본 발명의 구성은 다양한 조립된 완성품이 안착지그에 고정될 수 있도록 도와주는 고정판(10) 고정판이 회전시 움직이지 않도록 고정시켜주는 안착지그(20); 상기 조립된 완성품의 회전을 위한 회전 스테이지(30); 조립된 완성품의 상부면 영상을 획득하기 위한 Z스테이지(40); 조립된 완성품의 좌우면과 앞뒤 면 영상을 획득하기 위한 XZ 스테이지(50, 51); 영상 획득에 필요한 빛을 조사하는 조명 장치(60, 61, 62); Z, XY 스테이지를 제어하는 스테이지 컨트롤러(80); 조립된 완성품의 영상을 취득하여 특정 영역 기반의 부품 누락여부를 판독하는 영상 처리부(90); 상기 영상 처리부로 부터 판독된 상기 조립된 완성품의 부품 누락 여부 판독 결과를 디스플레이 하는 비젼 검사 모니터가(100) 제공된다.

Description

영역 기반의 비젼 검사장치 {Area-based vision testing device}
본 발명은 영역 기반의 비젼 검사장치에 관한 것으로, 보다 상세하게는 다양한 형태의 조립된 완성품의 부품을 검사를 자동으로 하기 위해 영상 장치를 통해 입력되는 영상에 검사할 영역을 표시하고, 이를 학습 시켜 자동으로 부품 누락 여부를 판단하는 장치에 관한 것이다.
본 발명은 다양한 형태의 조립된 완성품의 부품을 검사하는 장치에 관한 것이므로, 보다 상세하게는 조립된 완성품의 외관에 나타난 스크루를 비롯한 다양한 부품의 누락을 검출하기 위한 특정 영역 기반의 비젼 검장치이다.
외관에 나타난 부품 중에 특히 스크루와 라벨은 미부착은 기능 검사에서 검출 될 수 없는 사항이다. 지금까지 이러한 검사들은 대부분 사람의 육안으로 판별되는데, 이러한 방식의 판별은 잔상효과로 인해 항상 올바른 판단을 내리기가 어려운 실정이다.
따라서 종래에는 조립 완성품 검사 공정에서 스크루에 마커를 사용하여 마킹을 하면서 외관에 나타난 부품들의 누락 여부를 판별하고 있다. 이 같은 방법은 검출의 정확도나 작업 능률 등의 측면에서 비효율적이라는 문제점이 있다. 인간 육안의 잔상 효과로 인해 누락된 부품에도 확인 마킹을 할 수 있기 때문에 검사 공정에서 부품의 누락이 발생할 수 있다. 조립된 완성품 출하 시 샘플 검사에서 발견되는 부품 누락으로 인해 납품 지연과 신뢰도 추락으로 인한 경제적 손실은 심각한 문제를 야기시킬 수 있다. 이러한 문제를 해결하기 위해 최근 개발된 머신 러닝 기술을 적용하였다. 조립 완성품의 영상에서 검사할 부품 영역을 표시하고, 표시된 영역에 대한 이미지를 학습하고, 학습한 결과를 부품 누락 판단에 사용하였다.
본 발명은, 다양한 형태의 조립 완성품에서 외관에 있는 특정 부품에 대한 누락을 컴퓨터가 영상을 입력받아, 이를 자동으로 분석하여 검출하는 특정 영역 기반의 부품 누락을 검출하는 장치를 제공하는 것을 목적으로 한다.
상기와 같은 목적을 달성하기 위한 본 발명은, 조립된 완성품에 대한 외관에 나타나는 부품들에 대한 특정 영역을 표시하고 이 영역에 대한 부품 누락 여부를 판단하는 비젼 검사장치이다. 본 발명의 구성은 다양한 조립된 완성품이 안착지그에 고정될 수 있도록 도와주는 고정판(10) 고정판이 회전시 움직이지 않도록 고정시켜주는 안착지그(20) 상기 조립된 완성품의 회전을 위한 회전 스테이지(30) 조립된 완성품의 상부면 영상을 획득하기 위한 Z스테이지(40) 조립된 완성품의 좌우면과 앞뒤 면 영상을 획득하기 위한 XZ 스테이지(50,51) 영상 획득에 필요한 빛을 조사하는 조명 장치(60,61,62) Z, XY 스테이지를 제어하는 스테이지 컨트롤러(80) 조립된 완성품의 영상을 취득하여 특정 영역 기반의 부품 누락여부를 판독하는 영상 처리부(90) 상기 영상 처리부로 부터 판독된 상기 조립된 완성품의 부품 누락 여부 판독 결과를 디스플레이 하는 비젼 검사 모니터가(100) 제공된다.
이때, 상기 조립된 완성품이 안착되는 안착지그 위에는 다양한 조립된 완성품이 안착지그에 고정될 수 있도록 도와주는 다양한 고정판이 있어 쉽게 조립 완성품을 고정 할 수 있다.
또한 상기의 회전 스테이지를 통해 자동으로 조립된 완성품을 회전시킬 수 있고, Z, XY 스테이지의 위치를 제어하는 스테이지 컨트롤러를 통해 쉽게 조립된 완성품의 5면(윗면, 죄면, 우면, 앞면, 뒷면) 영상을 캡쳐 할 수 있다. 획득된 5면(윗면, 죄면, 우면, 앞면, 뒷면)의 영상에 대하여 검사할 영역을 표시하고, 표시된 영역에 대한 학습 데이터를 생성한다. 생성된 학습 데이터에 대하여 학습을 수행한다. 상기 학습된 결과를 가지고, 검사 대상인 조립된 완성품에 대하여 외관 부품 누락 검사를 실행 한다. 또한, 실행 결과가 모니터를 통해 조립 완성품 이미지 위에 누락 결과를 표시한다.
본 발명의 실시 예에 따른 영역 기반의 비젼 검사장치는, 조립 공정의 결과인 조립된 완성품에 비젼 검사를 적용하여, 외관의 나타난 부품의 누락 여부를 신속히 파악할 수 있다.
또한 본 발명의 실시 예에 따른 영역 기반의 비젼 검사장치는, 다양한 조립된 완성품에 대한 불량을 검출하기 위해 각 조립 완성품에 대한 특정 영역에 대한 영상을 학습한다. 상기 학습된 결과를 가지고, 검사 대상인 조립 완성품에 대하여 외관 부품 누락 검사를 실행 하며, 실행 결과가 모니터를 통해 조립 완성품 이미지 위에 누락 결과를 표시함으로, 외관에 나타난 부품의 누락을 쉽게 판단 할 수 있다.
또한, 본 발명의 실시 예에 따른 영역 기반의 비젼 검사장치는, 다양한 형태의 조립완성 품에 대해서 입력되는 영상만 학습 시켜주면 소프트웨어 수정 없이, 조립 완성품이 안착지그에 고정될 수 있도록 도와주는 고정판만 변경하면 수행이 가능하다.
도 1 본 발명의 일실시 예에 따른 영역 기반의 비젼 검사장치에 대한 구성도를 나타낸다.
도 2는 본 발명의 일실시 예에 따른 영역 기반의 비젼 검사장치 중, 다양한 형태의 고정판을 보여주는 도면이다.
도 2를 참고하면, 고정판에는 2개의 구멍이 있으며, 이는 안착지그 위에 고정되어 회전판이 회전하더라고, 고정판이 흔들리지 않도록 한다. 또한 고정판의 상판 모양은 조립된 완성품이 쉽게 고정될 수 있는 형태로 제작된다.
도 3은 본 발명의 일실시 예에 따른 영역 기반의 비젼 검사장치의 작동 순서를 보여주는 작동 순서도이다.
도 3을 참고하면, 우선 검사하고자 하는 조립된 완성품을 안착지그 위의 고정판에 고정 시킨다. 상기 고정판에 조립 완성품이 고정되면 작업자는 조립 완성품의 모델명을 입력한 후 학습 단계와 테스트 단계를 선택한다.
작업자가 학습 단계를 선택하면 조립 완성품의 5면에 대한 Z 스테이지, XZ 스테이지 위치 설정을 수행한다.
작업자가 Z 스테이지, XZ 스테이지 위치 설정 작업이 완료되면, 조립 완성품의 영상을 캡쳐한다. 캡쳐한 영상에 대하여 부품의 누락 여부를 검사할 부품에 대한 영역을 설정한 후, 설정된 영역에 대한 학습 데이터를 생성한다.
완성 조립품에 대한 5면에 대하여 부품의 영역에 대한 학습데이터가 생성되면, 학습을 수행한다.
한편, 도면 3에서 작업자가 단계 선택에서 테스트를 선택하게 되면 검사할 완성 조립품에 대한 5면의 영상을 캡쳐한다.
상기 캡쳐된 영상에 대하여 부품의 누락 테스트가 시행된다. 테스트가 완료되면 결과물로 검사한 조립완성품의 이미지와 검사결과를 그림으로 나타낸다.
도 4는 본 발명의 일실시 예에 따른 영역 기반의 비젼 검사장치의 검사결과를 나타낸다.
상기 도면에서 초록색으로 사각 영역은 부품이 부착됨을 나타내고, 붉은색 사각 영역은 부품이 누락됨을 나타낸다.
이하, 본 발명의 실시 예들은 첨부된 도면을 참조하여 설명하도록 한다. 다만, 이하의 실시 예들은 본 발명의 이해를 돕기 위해 제공되는 것이며, 본 발명의 범위가 이하의 실시 예들에 한정 되는 것은 아니다. 또한 이하의 실시 예들은 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해 제공되는 것으로, 불필요하게 본 발명의 기술 적인 요지를 흐릴 수 있다고 판단되는 공지의 구성에 대해서는 상세한 기술을 생략하기로 하며, 설명의 편의를 위해 도면에 도시된 각 구성들은 다소 과장되어 도시될 수 있다.
도 1은 본 발명의 일실시 예에 따른 영역 기반의 비젼 검사장치를 보여주는 정면도이다. 도1을 참고하면, 본 발명의 일실시 예에 따른 영역 기반의 비젼 검사장치(1)는 고정판(10), 안착지그(20), 회전 스테이지(30), Z 스테이지(40), XZ 스테이지(50, 51), 조명 장치(60,61,62), 스테이지 컨트롤러(80), 영상 처리부(90), 비젼 검사 모니터가(100)를 포함 할 수 있다.
안착지그(20)는 바닥 면에 소정의 높이로 설치된 플레이트(plate) 형태로 형성 될 수 있다. 안착지그(20)는 고정판과 회전스테이지 사이에 있으며, 회전판이 회전할 때 고정판은 고정판의 위치가 변경 되지 않도록 고정시킨다.고정판(10)은 다양한 형태의 조립 완성품이 안착지그(20) 위에 고정 될 수 있도록 한다.
회전 스테이지(30)는 조립된 완성품의 앞면과 뒷면의 영상을 획득하기 위해 고정판을 회전시킨다.
Z 스테이지(40)는 조립된 완성품의 윗면의 영상을 획득하기 위해 Z 방향으로 이동 가능하다.
XZ 스테이지(50, 51)는 조립된 완성품의 앞뒷면과 좌우면의 영상을 획득하기 위해 Z방향과 X 방향으로 이동 가능하다.
스테이지 컨트롤러(80)는 조립된 완성품의 영상획득을 위해 회전 스테이지(30), Z 스테이지(40), XZ 스테이지(50, 51)를 제어한다.
카메라(70, 71, 72)와 스테이지 컨트롤러(80)는 각 조립 완성품의 특정 영역 이미지 학습과 판별을 위한 영상을 캡쳐한다. 스테이지 컨트롤러(80)는 각 조립 완성품에 따라 선명한 영상을 획득하기 위해 미리 설정된 위치로 카메라를 움직이게 한다.
조명장치(60, 61, 62)는 각 조립 완성품에 따라 선명한 영상을 획득하기 위해 조명을 제공한다.
영상 처리부(90)는 학습을 위해 캡쳐된 영역의 이미지를 가지고 학습을 처리하며, 부품 누락을 판별하기 위해 캡쳐 된 이미지를 가지고 부품 누락 여부를 판단한다. 학습을 위해서는 Z 스테이지(40), XZ 스테이지(50,51)를 통해 캡쳐된 이미지 위에 학습을 위한 영역을 표시하여 학습 이미지를 획득한다. 획득된 학습 이미지를 이용하여 다양한 형태의 학습 이미지를 만든 후, 이를 이용하여 학습을 수행한다. 조립된 완성품에 대한 이미지를 캡쳐 후, 누락 검출은 학습 시 표시된 영역에 대하여 불량 여부를 판단한다.

Claims (1)

  1. 조립 공정의 결과인 조립된 완성품에 비젼 검사를 적용하여, 외관의 나타난 부품의 누락 여부를 신속히 파악할 수 있는 장치에 있어, 완성품이 안착지그에 고정될 수 있도록 도와주는 고정판(10), 고정판이 안착되는 안착지그(20), 조립된 완성품을 회전시키는 회전판 스테이지(30), 조립된 완성품의 상부면 영상을 획득하기 위한 Z스테이지(40), 조립된 완성품의 좌우면과 앞뒤 면 영상을 획득하기 위한 XZ 스테이지(50, 51), Z, X, Y, 회전판 스테이지를 제어하는 스테이지 컨트롤러(80), 조립된 완성품의 영상을 취득하여 특정 영역 기반의 부품 누락여부를 판독하는 영상 처리부(90), 조립된 완성품의 부품 누락 여부 판독 결과를 디스플레이 하는 비젼 검사 모니터(100)로 구성된 장치.
KR1020180122914A 2018-10-16 2018-10-16 영역 기반의 비젼 검사장치 Withdrawn KR20200046149A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180122914A KR20200046149A (ko) 2018-10-16 2018-10-16 영역 기반의 비젼 검사장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180122914A KR20200046149A (ko) 2018-10-16 2018-10-16 영역 기반의 비젼 검사장치

Publications (1)

Publication Number Publication Date
KR20200046149A true KR20200046149A (ko) 2020-05-07

Family

ID=70733130

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180122914A Withdrawn KR20200046149A (ko) 2018-10-16 2018-10-16 영역 기반의 비젼 검사장치

Country Status (1)

Country Link
KR (1) KR20200046149A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102563230B1 (ko) * 2022-12-09 2023-08-03 (주)일주지앤에스 Ai비전 결함탐지 시스템
KR102599785B1 (ko) * 2023-02-27 2023-11-08 (주)일주지앤에스 Ai비전 결함탐지 시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102563230B1 (ko) * 2022-12-09 2023-08-03 (주)일주지앤에스 Ai비전 결함탐지 시스템
KR102599785B1 (ko) * 2023-02-27 2023-11-08 (주)일주지앤에스 Ai비전 결함탐지 시스템 및 방법

Similar Documents

Publication Publication Date Title
KR101665644B1 (ko) 차량용 와이어링 하네스 커넥터 단자 검사 시스템 및 방법
CN102749043B (zh) 弹簧形状数码照相检测方法及其检测系统
CN105783784B (zh) 检查装置及检查装置的控制方法
KR101256369B1 (ko) 다수의 카메라를 이용한 평판 디스플레이 패널 검사 장치 및 방법
JPS62173731A (ja) 被検査物の表面検査装置
TW201840991A (zh) 電路板點膠檢測裝置及檢測方法
KR101802843B1 (ko) 자동 비전 검사 시스템
TWI484164B (zh) Optical re - inspection system and its detection method
CN112730419B (zh) 外观瑕疵检测装置
CN112730421B (zh) 外观瑕疵检测装置
CN104122264B (zh) 外观瑕疵检测系统及方法
CN111610190A (zh) 家用电器外观检查装置
JP7368141B2 (ja) ウエーハ外観検査装置および方法
CN102331240A (zh) 检查装置以及检查方法
CN106200036B (zh) 点灯检测设备
KR20190108805A (ko) 대상물의 결함 발생 유무를 검사하는 비전검사기 및 그 검사방법
TW201522949A (zh) 影像資訊檢測方法
KR102764199B1 (ko) 웨이퍼 외관 검사 장치 및 방법
US20230138331A1 (en) Motion in images used in a visual inspection process
KR100478448B1 (ko) 액정 패널의 에지면 검사 방법
JP2009085900A (ja) 部品の検査システム及び検査方法
JP2019060708A (ja) 板状体の検査装置
JP2003177371A (ja) 液晶表示装置の検査装置及びその検査方法
JP2002071576A (ja) 外観検査装置および外観検査方法
KR100799168B1 (ko) 액정 디스플레이 모듈 성능 측정장치.

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

P22-X000 Classification modified

St.27 status event code: A-2-2-P10-P22-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

PC1203 Withdrawal of no request for examination

St.27 status event code: N-1-6-B10-B12-nap-PC1203

WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid
R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

R18 Changes to party contact information recorded

Free format text: ST27 STATUS EVENT CODE: A-3-3-R10-R18-OTH-X000 (AS PROVIDED BY THE NATIONAL OFFICE)

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000