JPH04364449A - 果実の欠陥検出装置 - Google Patents

果実の欠陥検出装置

Info

Publication number
JPH04364449A
JPH04364449A JP3165276A JP16527691A JPH04364449A JP H04364449 A JPH04364449 A JP H04364449A JP 3165276 A JP3165276 A JP 3165276A JP 16527691 A JP16527691 A JP 16527691A JP H04364449 A JPH04364449 A JP H04364449A
Authority
JP
Japan
Prior art keywords
image
defect
processed
fruit
neural network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP3165276A
Other languages
English (en)
Inventor
Hiroshi Nakada
浩 中田
Kazuo Kodaira
小平 一穂
Matsuzo Takamura
高村 松三
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Heavy Industries Ltd
Original Assignee
Sumitomo Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Heavy Industries Ltd filed Critical Sumitomo Heavy Industries Ltd
Priority to JP3165276A priority Critical patent/JPH04364449A/ja
Priority to GB9212449A priority patent/GB2256708A/en
Publication of JPH04364449A publication Critical patent/JPH04364449A/ja
Withdrawn legal-status Critical Current

Links

Landscapes

  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、リンゴ等の果実のよう
に、複雑な色合いを示す被処理対象物の色合いを判定す
る果実の欠陥検出装置に関する。
【0002】
【従来の技術】従来、果実の欠陥検出装置は、被処理対
象物を撮像する撮像手段と、この撮像手段により撮像さ
れた画像を画素毎に分割し、各画素毎の赤成分、緑成分
、青成分の色合要素の絶対値やそれらの比率をとって各
画素毎に色合を評価し、この評価から全体の色合の総合
評価を行う色合判定処理手段とを有している。(特開昭
63ー200279号参照)
【0003】また、他の果実の欠陥検出装置としては、
被処理対象物の傷がない部分と傷が付いている部分の温
度差を赤外線カメラで検出する方式がある。
【0004】
【発明が解決しようとする課題】しかしながら、色合の
総合評価を行う果実の欠陥検出装置においては、果皮の
表面のある平均的な色を評価するものであり、特定色の
抽出は行えないという問題がある。
【0005】また、被処理対象物の傷を赤外線カメラで
検出する装置にあっては、装置が高価になってしまうと
いう問題がある。
【0006】それ故に本発明の課題は、リンゴ等の被処
理対象物において、傷、日焼けおよび錆等の周囲と異な
る色をもつ被処理対象物の欠陥部分を検出する果実の欠
陥検出装置を提供することにある。
【0007】
【課題を解決するための手段】本発明によれば、色合い
の異なる被処理対象物を撮像した画像信号を出力する撮
像手段と、該撮像手段により撮像された画像情報を所定
数の画像から成る領域に分割し、該領域毎にあらかじめ
定められた評価値を算出し該算出値に基づいて前記被処
理対象物における欠陥の有無を判定する処理手段とを含
み、該処理手段は上記画像情報をラッチし記憶させる画
像メモリと、該画像メモリからの情報に基づいて前記評
価値を算出する画像処理手段と、該画像処理手段からの
評価値情報から前記領域がどの欠陥に属するかを判定す
るニューラルネットワークと、前記ニューラルネットワ
ークの判定結果に基づいて前記被処理対象物毎に前記各
欠陥の分布マップを作成し、該分布マップを用いて欠陥
の最終判定手段とを有し、前記ニューラルネットワーク
ははじめての被処理対象物を判定するときに、複数種の
学習用の被処理対象物を用いて前記欠陥部分の特徴を学
習データとして収集するものであることを特徴とする果
実の欠陥検出装置が得られる。
【0008】
【作用】果実の欠陥学習時の操作においては、搬送手段
の上に欠陥部分をもつ果実を乗せ、撮像手段の撮像範囲
内に到着する。検出器が搬送手段を検出すると、処理装
置は撮像手段からの撮像を赤画像、緑画像もしくは青画
像の各々別個に画像メモリに入力しラッチする。撮像し
た画像から人手によって欠陥部分の画像を切り出す。切
り出した画像を画素で構成されているサブリージョン毎
に分割し、各々のサブリージョン毎に評価値を計算し、
欠陥の学習データとする。各欠陥について複数個の学習
データが集まるまで操作を繰り返し行う。次に、ニュー
ラルネット回路に学習データを用いて、各欠陥の特徴を
学習させる。この操作を終了したら、次に、果実の判定
時の操作を行う。まず、搬送手段の上に果実を乗せる。 搬送手段が移動して、撮像手段の撮像範囲内に到着する
。この際、検出器は搬送手段を検出するように配置され
ている。検出器が搬送手段を検出すると、処理装置は撮
像手段からの撮像を赤画像、緑画像もしくは青画像の各
々別個に画像メモリに入力し、ラッチする。撮像した画
像を画素で構成されているサブリージョン毎に分割し、
各々のサブリージョン毎に評価値を計算し、その後ニュ
ーラルネット回路にて、各サブリージョンの属性を判定
する。ニューラルネット回路の判定結果に基づき、各欠
陥のマップを作成する。欠陥マップから欠陥マップの大
きさや個数を求め、最終判定を行う。
【0009】
【実施例】図1は本発明の果実の欠陥検出装置の一実施
例を示す構成図である。図2は果実の欠陥検出装置に用
いられている処理装置の具体例を示している。なお、こ
の実施例では被処理対象物としてリンゴ等の果実を用い
て説明をする。
【0010】各図を参照して、果実の欠陥検出装置は、
果実を搬送する搬送手段と、この搬送手段により搬送さ
れてくる果実6を撮像する撮像手段とを有している。搬
送手段は果実6を乗せて選果するための選果ラインの上
を移動できるパレット1とを有している。撮像手段はパ
レット1の上の果実6を撮像するカメラ2を有している
。カメラ2はカラーCCD等、撮像した画像を各画素毎
に赤成分、緑成分もしくは青成分に分割し、赤画像、緑
画像もしくは青画像として後述する処理装置へ伝送する
ものである。また、果実の欠陥検出装置は、パレット1
がカメラ2の範囲内に入ったことを検出する検出器3と
、カメラ2から送られてくる画像情報を基に果実6の表
面にある欠陥部分を検出するための処理装置4とを有し
ている。
【0011】さらに、果実の欠陥検出装置は、カメラ撮
像の照明条件を一定にするために、果実を照らす照明装
置5と、処理データを入出力するための端末機7とを有
している。
【0012】処理装置4はカメラ2から送られてくる赤
画像、緑画像もしくは青画像等の画像情報をデェジタル
情報に変換するための複数のA/D変換器41と、画像
情報をラッチし記憶させるための画像メモリ42と、検
出器3からの出力信号により撮像タイミングを出力する
ゲート回路43とを有している。さらに、処理装置4は
画像メモリ42の情報が転送されるニューラルネットワ
ーク44と、このニューラルネットワーク44の結果に
基づいて最終判定を行う画像処理装置45とを有してい
る。画像処理装置45は、例えばマイクロコンピュータ
が用いられている。ニューラルネットワーク44は画像
処理装置45の情報によって果実6の欠陥の有無を判定
するものである。また、ニューラルネットワーク44は
ニューラルネットのアルゴリズムを実行できるものであ
ればマイクロコンピュータを用いても良い。
【0013】次に、果実の欠陥検出装置を用いてはじめ
ての品種の果実6の欠陥を判定する操作を以下に説明す
る。はじめての果実6の欠陥を判定するときには、以下
の「果実の欠陥学習時の操作」に記述した操作を行い、
ニューラルネットに各欠陥部分の特徴を学習させる。
【0014】「果実の欠陥学習時の操作」(1)選果ラ
インのパレット1の上に欠陥部分をもつ果実6を乗せる
。 (2)果実を乗せたパレット1が移動して、カメラ2の
撮像範囲内に到着する。この際、検出器3はパレット1
を検出するように配置されている。 (3)検出器3がパレット1を検出すると、処理装置4
はカメラ2からの撮像を赤画像、緑画像もしくは青画像
の各々別個に画像メモリ42に入力し、ラッチして記録
する。 (4)撮像した画像から人手によって欠陥部分の画像を
図3に示すように、小さい切り出し領域に切り出す。 (5)切り出した画像をk×1(ただし、1≦k≦N/
2,1≦k≦M/2:NおよびMはそれぞれ画像メモリ
の縦および横の画像数)画素で構成されているサブリー
ジョン(小さな領域)に分割し、各々のサブリージョン
毎に評価値を計算し、欠陥の学習データとする。評価値
例としては、RGBそれぞれの平均値や他の色空間での
統計量があげられる。 (6)各欠陥について5〜10個ほどの学習データが集
まるまで(1)〜(5)の操作を繰り返し行う。 (7)学習データを用いて、ニューラルネット回路に各
欠陥の特徴を学習させる。
【0015】上述の「果実の欠陥学習時の操作」が終了
したら、以下の「果実の判定時の操作」を行う。 「果実の判定時の操作」 (1)選果ラインのパレット1の上に果実を乗せる。 (2)果実ラインの上を果実6を乗せたパレット1が移
動して、カメラ2の撮像範囲内に到着する。この際、検
出器3はパレット1を検出するように配置されている。 (3)検出器3がパレット1を検出すると、処理装置4
はカメラ2からの撮像を赤画像、緑画像もしくは青画像
の各々別個に画像メモリに入力し、ラッチする。 (4)撮像した画像を、図4に示すように、k×1(た
だし、1≦k≦N/2,1≦k≦M/2  :Nおよび
Mはそれぞれ画像メモリ42の縦および横の画像数)画
素で構成されているサブリージョンに分割し、各々のサ
ブリージョン毎に評価値を計算し、その後ニューラルネ
ットワーク44にて、各サブリージョンの属性(たとえ
ば、正常な色、傷の色、錆の色等)を判定する。評価値
例としては、RGBそれぞれの平均値や他の色空間での
統計量があげられる。 (5)ニューラルネットワーク44の判定結果に基づき
、図5に示すように、各欠陥のマップ50,51,52
を作成する。 (6)これらの欠陥マップ50,51,52から各欠陥
マップ50,51,52の大きさや個数を求め、画像処
理装置45によって最終判定を行う。
【0016】なお、上述の実施例においては、果実の色
合判別について説明をしたが、色の違いで区別できるよ
うな欠陥をもつ工業用製品の欠陥検出にも応用できるこ
とはいうまでもない。
【0017】
【発明の効果】以上、実施例により説明したように、本
発明の果実の欠陥検出装置によれば、始めての品種の被
処理対象物を判定するときには、いくつかの学習用のサ
ンプル品を用いてニューラルネットに各欠陥の評価値を
学習させるようにしたため、種々の被処理対象物に簡単
に適用できる。
【図面の簡単な説明】
【図1】本発明の果実の欠陥検出装置の一実施例を示す
全体構成図である。
【図2】第1図の果実の欠陥検出装置に用いられている
処理装置の構成図である。
【図3】第1図の果実の欠陥検出装置において2×2画
素で構成されるサブリージョンに分割した例を示す説明
図である。
【図4】第1図の果実の欠陥検出装置において撮像画像
を分割した状態を示す説明図である。
【図5】第1図の果実の欠陥検出装置においる撮像画像
の判定結果例を示す説明図である。
【符号の説明】
1    パレット 2    カメラ 3    検出器 4    処理装置 7    端末機 41    A/D変換器 42    画像メモリ 44    ニュ−ラルネットワーク 45    画像処理装置 50    分布マップ

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】  色合いの異なる被処理対象物を撮像し
    た画像信号を出力する撮像手段と、該撮像手段により撮
    像された画像情報を所定数の画像から成る領域に分割し
    、該領域毎にあらかじめ定められた評価値を算出し該算
    出値に基づいて前記被処理対象物における欠陥の有無を
    判定する処理手段とを含み、該処理手段は上記画像情報
    をラッチし記憶させる画像メモリと、該画像メモリから
    の情報に基づいて前記評価値を算出する画像処理手段と
    、該画像処理手段からの評価値情報から前記領域がどの
    欠陥に属するかを判定するニューラルネットワークと、
    前記ニューラルネットワークの判定結果に基づいて前記
    被処理対象物毎に前記各欠陥の分布マップを作成し、該
    分布マップを用いて欠陥の最終判定手段とを有し、前記
    ニューラルネットワークははじめての被処理対象物を判
    定するときに、複数種の学習用の被処理対象物を用いて
    前記欠陥部分の特徴を学習データとして収集するもので
    あることを特徴とする果実の欠陥検出装置。
JP3165276A 1991-06-11 1991-06-11 果実の欠陥検出装置 Withdrawn JPH04364449A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP3165276A JPH04364449A (ja) 1991-06-11 1991-06-11 果実の欠陥検出装置
GB9212449A GB2256708A (en) 1991-06-11 1992-06-11 Object sorter using neural network

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3165276A JPH04364449A (ja) 1991-06-11 1991-06-11 果実の欠陥検出装置

Publications (1)

Publication Number Publication Date
JPH04364449A true JPH04364449A (ja) 1992-12-16

Family

ID=15809257

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3165276A Withdrawn JPH04364449A (ja) 1991-06-11 1991-06-11 果実の欠陥検出装置

Country Status (1)

Country Link
JP (1) JPH04364449A (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0880475A (ja) * 1994-05-14 1996-03-26 Maschimpex Gmbh 製薬工業、製菓工業等における小形製品を形態及び色に応じて分別する自動分別装置
JPH09509247A (ja) * 1993-05-28 1997-09-16 アクシオム・ビルトフェラルバイツンクスシステメ・ゲーエムベーハー 自動検査装置
US6819790B2 (en) * 2002-04-12 2004-11-16 The University Of Chicago Massive training artificial neural network (MTANN) for detecting abnormalities in medical images
CN101153851B (zh) 2007-06-15 2011-06-08 中国农业大学 一种基于机器视觉的苹果检测分级方法
ITUA20164758A1 (it) * 2016-06-29 2017-12-29 Ser Mac S R L Apparato di rilevamento di prodotti ortofrutticoli.
CN111435118A (zh) * 2019-01-14 2020-07-21 日商登肯股份有限公司 检查装置和检查方法
CN114226262A (zh) * 2020-09-09 2022-03-25 宜谷京科技实业有限公司 瑕疵检测方法、瑕疵分类方法及其系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09509247A (ja) * 1993-05-28 1997-09-16 アクシオム・ビルトフェラルバイツンクスシステメ・ゲーエムベーハー 自動検査装置
JPH0880475A (ja) * 1994-05-14 1996-03-26 Maschimpex Gmbh 製薬工業、製菓工業等における小形製品を形態及び色に応じて分別する自動分別装置
US6819790B2 (en) * 2002-04-12 2004-11-16 The University Of Chicago Massive training artificial neural network (MTANN) for detecting abnormalities in medical images
CN101153851B (zh) 2007-06-15 2011-06-08 中国农业大学 一种基于机器视觉的苹果检测分级方法
ITUA20164758A1 (it) * 2016-06-29 2017-12-29 Ser Mac S R L Apparato di rilevamento di prodotti ortofrutticoli.
WO2018002841A1 (en) * 2016-06-29 2018-01-04 Ser.Mac S.R.L. An apparatus for detecting damaged fruit and vegetable products
CN111435118A (zh) * 2019-01-14 2020-07-21 日商登肯股份有限公司 检查装置和检查方法
JP2020112456A (ja) * 2019-01-14 2020-07-27 株式会社デンケン 検査装置及び検査方法
CN114226262A (zh) * 2020-09-09 2022-03-25 宜谷京科技实业有限公司 瑕疵检测方法、瑕疵分类方法及其系统

Similar Documents

Publication Publication Date Title
CN110296997B (zh) 基于机器视觉的陶瓷瓦的缺陷检测方法及装置
JP4241361B2 (ja) キャップ天面の検査方法
JPH0783851A (ja) 不良品検出処理方法
JPH04364449A (ja) 果実の欠陥検出装置
JP3614980B2 (ja) 農産物の外観検査方法及び装置
JP2012108026A (ja) 異物混入製品の検出方法
JPH0520426A (ja) ニユーラルネツトワークを用いた果実の色合判定装置
JP2710527B2 (ja) 周期性パターンの検査装置
JPH04106460A (ja) 欠陥検出方法
JP3311880B2 (ja) 青果物の傷害自動検出装置
JP3589756B2 (ja) 欠点検査における検査設定値入力表示方法とその装置
JPH05332754A (ja) 検査装置の検査方法
JP2728789B2 (ja) カラー固体撮像素子の検査装置
JPH04147002A (ja) 青果物の表面検定装置
JP4653340B2 (ja) 3板式ccdカメラを用いた缶外観検査装置
JP3985891B2 (ja) 画像欠陥検出装置および画像欠陥検出方法
JPH0310107A (ja) 濃淡パターンマッチングによる検査方法
JP2886251B2 (ja) 製品検査装置
JP4656399B2 (ja) 農産物の外観検査装置
JP2696166B2 (ja) 青果物の検定装置
JPH052634A (ja) 視覚認識装置
JP2756738B2 (ja) 半導体装置の外観検査装置
JPH052632A (ja) 果物表面模様判定装置
JPS63200279A (ja) 色合判定装置
JPH04364448A (ja) 欠陥検出装置

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 19980903