KR20170001467A - 약포 검사 장치 및 약포 검사 방법 - Google Patents

약포 검사 장치 및 약포 검사 방법 Download PDF

Info

Publication number
KR20170001467A
KR20170001467A KR1020150091488A KR20150091488A KR20170001467A KR 20170001467 A KR20170001467 A KR 20170001467A KR 1020150091488 A KR1020150091488 A KR 1020150091488A KR 20150091488 A KR20150091488 A KR 20150091488A KR 20170001467 A KR20170001467 A KR 20170001467A
Authority
KR
South Korea
Prior art keywords
illumination
medicine
unit
color
medicament
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020150091488A
Other languages
English (en)
Other versions
KR102322987B1 (ko
Inventor
김준호
Original Assignee
(주)제이브이엠
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)제이브이엠 filed Critical (주)제이브이엠
Priority to KR1020150091488A priority Critical patent/KR102322987B1/ko
Priority to US15/189,784 priority patent/US9978136B2/en
Priority to CA2933888A priority patent/CA2933888A1/en
Priority to ES16176217T priority patent/ES2886893T3/es
Priority to EP16176217.4A priority patent/EP3109623B1/en
Priority to CN201610476220.0A priority patent/CN106290383B/zh
Publication of KR20170001467A publication Critical patent/KR20170001467A/ko
Application granted granted Critical
Publication of KR102322987B1 publication Critical patent/KR102322987B1/ko
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/89—Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
    • G01N21/892—Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles characterised by the flaw, defect or object feature examined
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/0008—Industrial image inspection checking presence/absence
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61J—CONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J3/00—Devices or methods specially adapted for bringing pharmaceutical products into particular physical or administering forms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61J—CONTAINERS SPECIALLY ADAPTED FOR MEDICAL OR PHARMACEUTICAL PURPOSES; DEVICES OR METHODS SPECIALLY ADAPTED FOR BRINGING PHARMACEUTICAL PRODUCTS INTO PARTICULAR PHYSICAL OR ADMINISTERING FORMS; DEVICES FOR ADMINISTERING FOOD OR MEDICINES ORALLY; BABY COMFORTERS; DEVICES FOR RECEIVING SPITTLE
    • A61J7/00—Devices for administering medicines orally, e.g. spoons; Pill counting devices; Arrangements for time indication or reminder for taking medicine
    • A61J7/0076—Medicament distribution means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65B—MACHINES, APPARATUS OR DEVICES FOR, OR METHODS OF, PACKAGING ARTICLES OR MATERIALS; UNPACKING
    • B65B57/00—Automatic control, checking, warning, or safety devices
    • B65B57/10—Automatic control, checking, warning, or safety devices responsive to absence, presence, abnormal feed, or misplacement of articles or materials to be packaged
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01—Arrangements or apparatus for facilitating the optical investigation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/9508—Capsules; Tablets
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N2021/8411—Application to online plant, process monitoring
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N2021/845—Objects on a conveyor
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection

Landscapes

  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Biochemistry (AREA)
  • Pathology (AREA)
  • Immunology (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Animal Behavior & Ethology (AREA)
  • Theoretical Computer Science (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Textile Engineering (AREA)
  • Medical Preparation Storing Or Oral Administration Devices (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Mechanical Engineering (AREA)
  • Medicinal Chemistry (AREA)
  • Pharmacology & Pharmacy (AREA)

Abstract

약포 검사 장치가 개시된다. 본 약포 검사 장치는, 약제가 포장된 약포를 이송하는 이송부, 약포를 촬영하기 위한 촬영부, 약포 측으로 조명을 제공하는 조명부, 및, 약포에 대해 서로 다른 컬러의 조명을 순차적으로 제공하도록 조명부를 제어하고, 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영하도록 촬영부를 제어하는 제어부를 포함한다.

Description

약포 검사 장치 및 약포 검사 방법{MEDICINE PACKETS INSPECTION APPARATUS AND METHOD FOR INSPECTING MEDICINE PACKETS}
본 발명은 약포 검사 장치 및 약포 검사 방법에 관한 것으로, 보다 상세하게는, 서로 다른 컬러의 조명을 순차적으로 제공하고, 서로 다른 컬러의 조명에 대응하여 약포를 복수 회 촬영함으로써 약포 검사의 정확도를 높이는 약포 검사 장치 및 약포 검사 방법에 관한 것이다.
일반적으로 병원이나 약국에서는 의사의 처방에 따라 환자에게 약을 투약한다.
만성질환을 앓고 있는 환자의 경우 동일한 약제 SET를 주기적으로, 장기간에 걸쳐 복용하는 경우가 일반적이다. 예를 들면, 고혈압이나 당뇨병 환자의 경우 동일한 약제 SET를 매일, 짧게는 한 달에서 길게는 석 달 이상 복용해야 한다. 이러한 경우, 많은 양의 약을 한꺼번에 처방받게 된다.
처방된 약제들은 주머니모양으로 일측이 개구된 약포에 한번에 복용해야 할 약제 단위로 수용된다. 그리고 나서, 개구된 일측을 밀봉하면 약제가 포장된 약포가 완성된다.
이때, 약포는 다수의 약포가 연결된 약포 다발을 이룬다. 상세하게 설명하면, 약포에는 일회 복용 분의 약제가 자동으로 포장되고, 약제가 포장된 약포가 연속적으로 형성되어 약포 다발을 이루게 된다.
한편, 환자가 복용할 약의 정확성을 확보하기 위하여, 약포 다발에 대하여 처방된 약제의 일부가 빠져있는지, 처방되지 않은 약제가 포함되어 있는지, 처방된 약제의 개수보다 더 많은 약제가 포함되어 있는지 등에 대하여 검사하는 작업이 수행된다.
약포를 검사하는 방법 중에는, 약포를 촬영하고 촬영된 영상으로부터 약제를 검출하고, 검출된 약제를 약제 조제 정보와 비교하여 약포의 결함을 판단하는 방법이 있다. 특히, 이러한 방법은 많은 양의 약이 한꺼번에 처방된 경우 약포를 검사하는 시간을 절약할 수 있기 때문에 널리 이용된다.
그러나 약제는 다양한 색상을 띠고 있다. 따라서, 촬영된 영상의 배경색과 유사한 색의 약제가 있는 경우에는, 촬영된 영상으로부터 약제가 명확하게 판별되지 않아 포장 약제의 결함을 판단하는 데 실패하는 경우가 있었다.
또한, 약포에 텍스트가 인쇄되어 있고 텍스트와 약제가 겹쳐져 있는 경우에는, 텍스트의 존재로 인하여 약제가 명확하게 판별되지 않아 포장 약제의 결함을 판단하는 데 실패하는 경우가 있었다.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 본 발명의 목적은 서로 다른 컬러의 조명을 순차적으로 제공하고, 서로 다른 컬러의 조명에 대응하여 약포를 복수 회 촬영함으로써 약포 검사의 정확도를 높이는 약포 검사 장치 및 약포 검사 방법을 제공하는 데 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 약포 검사 장치는, 약제가 포장된 약포를 이송하는 이송부, 상기 약포를 촬영하기 위한 촬영부, 상기 약포 측으로 조명을 제공하는 조명부, 및, 상기 약포에 대해 서로 다른 컬러의 조명을 순차적으로 제공하도록 상기 조명부를 제어하고, 상기 서로 다른 컬러의 조명에 대응하여 상기 약포를 복수회 촬영하도록 상기 촬영부를 제어하는 제어부를 포함한다.
이 경우, 상기 제어부는, 상기 서로 다른 컬러의 조명 하에서 촬영된 복수의 영상을 이용하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 상기 조명부는, 제1 컬러의 광을 발광하는 제1 발광소자 및 제2 컬러의 광을 발광하는 제2 발광소자를 포함할 수 있다.
여기서, 상기 제1 컬러와 상기 제2 컬러는 상호 대비되는 색일 수 있다.
한편, 상기 제어부는, 상기 약포의 표면에 인쇄된 텍스트의 컬러와 동일한 컬러의 제1 조명, 상기 제1 조명과 상이한 적어도 하나의 제2 조명을 순차적으로 발산하도록 상기 조명부를 제어할 수
한편, 상기 제1 조명은 상기 약포 내의 약제와 동일한 색 또는 보색일 수 있다.
한편, 상기 제어부는, 상기 복수의 영상 각각으로부터 약제를 검출하고, 상기 검출된 약제를 조합하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 상기 제어부는, 상기 복수의 영상을 조합하고, 상기 조합된 영상으로부터 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 상기 제어부는, 상기 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되지 않은 경우, 상기 복수의 서로 다른 컬러의 조명과 상이한 컬러의 조명을 제공하도록 상기 조명부를 제어하고, 상기 상이한 컬러의 조명에 대응하여 상기 약포를 추가적으로 촬영하도록 상기 촬영부를 제어할 수 있다.
한편, 상기 조명부는, 상기 촬영부와 대향되게 배치될 수 있다.
또는 상기 조명부는, 상기 촬영부의 측면에 배치되어, 상기 약포의 전면에 조명을 제공하는 제1 발광부, 상기 약포가 배치되는 측면에 배치되는 제2 발광부, 및, 상기 촬영부와 대향되게 배치되어, 상기 약포의 후면에 조명을 제공하는 제3 발광부를 포함할 수도 있다.
한편, 본 발명의 일 실시 예에 따른 약포 검사 방법은, 약제가 포장된 약포를 이송하는 단계, 상기 약포 측으로 서로 다른 컬러의 조명을 순차적으로 제공하는 단계, 및, 상기 서로 다른 컬러의 조명에 대응하여 상기 약포를 복수회 촬영하는 단계를 포함한다.
이 경우, 본 실시 예에 따른 약포 검사 방법은, 상기 서로 다른 컬러의 조명 하에서 촬영된 복수의 영상을 이용하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 단계를 더 포함할 수 있다.
한편, 상기 서로 다른 컬러의 조명을 순차적으로 제공하는 단계는, 상기 약포의 표면에 인쇄된 텍스트의 컬러와 동일한 컬러의 제1 조명, 상기 제1 조명과 상이한 적어도 하나의 제2 조명을 순차적으로 발산할 수 있다.
한편, 상기 판단하는 단계는, 상기 복수의 영상 각각으로부터 약제를 검출하고, 상기 검출된 약제를 조합하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 상기 판단하는 단계는, 상기 복수의 영상을 조합하고, 상기 조합된 영상으로부터 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 본 발명의 일 실시 예에 따른 약포 검사 방법은, 상기 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되지 않은 경우, 상기 복수의 서로 다른 컬러의 조명과 상이한 컬러의 조명을 제공하는 단계, 및, 상기 상이한 컬러의 조명에 대응하여 상기 약포를 추가적으로 촬영하는 단계를 더 포함할 수 있다.
이상과 같이 본 실시 예에 따른 약포 검사 장치는 서로 다른 컬러의 조명을 순차적으로 제공하여 약포를 촬영하는바, 약포 내의 약제를 정확하게 인식할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 약포 검사 장치의 구성을 나타낸 블럭도,
도 2는 본 발명의 일 실시 예에 따른 검사부의 이송부와 촬영부를 도시한 도면,
도 3a는 본 발명의 일 실시 예에 따른 약포 검사 장치의 이송부, 촬영부 및 조명부를 도시한 도면,
도 3b는 본 발명의 일 실시 예에 따른 약포 검사 장치의 이송부, 촬영부 및 조명부를 정면에서 도시한 도면,
도 4는 다른 실시 예에 따른 이송부, 촬영부 및 조명부의 배치 형태를 도시한 도면,
도 5a 및 도 5b는 본 발명의 일 실시 예에 따른 복수의 영상을 이용하여 약포를 검사하는 과정을 도시한 도면,
도 6은 본 발명의 일 실시 예에 따른 텍스트의 컬러와 동일한 컬러의 조명을 제공하여 약포를 촬영하는 것을 도시한 도면,
도 7은 본 발명의 일 실시 예에 따른 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영한 영상을 나타내는 도면,
도 8 내지 도 10은 본 발명의 또 다른 실시 예에 따른 약포 검사 장치의 구성을 나타낸 블럭도, 그리고,
도 11은 본 발명의 일 실시 예에 따른 약포 검사 방법을 설명하기 위한 흐름도이다.
이하 첨부된 도면들을 참조하여 본 발명의 일 실시 예를 보다 상세하게 설명한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 나타내는 블록도이다.
도 1에 따르면, 약포 검사 장치(100)는 이송부(110), 촬영부(120), 조명부(130) 및 제어부(140)를 포함한다.
이송부(110)는 약제가 포장된 약포를 이송한다. 구체적으로, 이송부(110)는 약제가 포장된 약포를 검사하기 위하여, 약포가 연속적으로 형성된 약포의 다발을 촬영부(120)로 이송할 수 있다.
또한, 이송부(110)는 약포가 하나씩 순차적으로 촬영부(120)에 위치하도록 할 수 있다. 구체적으로, 약포 다발에 있는 하나의 약포를 촬영부(120)에 위치시켜 검사를 수행하고, 검사가 수행되는 동안에는 약포의 이송을 정지할 수 있다. 그리고 검사가 끝나면 다음 약포가 촬영부(120)에 위치하도록 약포를 이송할 수 있다.
촬영부(120)는 약포를 촬영한다. 구체적으로, 촬영부(120)는 이송부(110)에 의해서 촬영부(120)로 이송되어 온 약포를 촬영하여 약포 내에 포장된 약제의 수량 및 종류를 검출하기 위한 영상을 획득할 수 있다.
한편, 촬영부(120)는 제어부(140)의 제어에 의해 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영한다. 구체적으로, 촬영부(120)는 조명부(130)가 약포에 대해 복수의 서로 다른 컬러의 조명을 순차적으로 제공하면, 서로 다른 컬러의 조명에 대응하여 약포를 복수 회 촬영할 수 있다.
예를 들어 촬영부(120)는 조명부(130)가 제1 조명을 제공할 때 제1 촬영을 수행하고, 조명부(130)가 제1 조명과는 다른 컬러의 제2 조명을 제공할 때 제2 촬영을 수행하고, 조명부(130)가 제 1, 2 조명과는 다른 컬러의 제3 조명을 제공할 때 제3 촬영을 수행하는 방식으로, 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영할 수 있다.
조명부(130)는 약포 측으로 조명을 제공한다. 구체적으로, 조명부(130)는 백라이트나 기설정된 형태의 발광 소자로 구현될 수 있다. 예를 들어, 조명부(130)가 백라이트로 구현되는 경우, 백라이트는 촬영부(120)의 배치 방향과 대향된 위치에 배치될 수 있다. 예를 들어, 도 2 및 3과 같이 약포를 기준으로 촬영부(120)가 약포의 전면에 배치되면, 조명부(130)는 약포의 후면에 배치될 수 있다. 이 경우, 조명부(130)는 약포의 후단에서 촬영부(120)가 배치된 방향으로 빛을 발광할 수 있다. 이와 같은 배치 형태에 대해서는 도 2 내지 도 3b를 참조하여 후술한다.
한편, 조명부(120)는 상술한 백라이트 소자뿐만 아니라, 일반적인 발광 소자로 구현될 수 있으며, 백라이트 소자와 상술한 발광 소자가 결합되어 구현될 수 있다. 이와 같은 예에 대해서는 도 4를 참조하여 후술한다.
조명부(130)는 제어부(140)의 제어에 의해 약포에 대해 서로 다른 컬러의 조명을 순차적으로 제공한다. 예를 들어 조명부(130)는 제1 조명을 제공한 후 제1 조명과는 다른 컬러의 제2 조명을 제공하고, 제2 조명을 제공한 후 제 1, 2 조명과는 다른 컬러의 제3 조명을 제공하는 방식으로, 약포에 대해 복수의 서로 다른 컬러의 조명을 순차적으로 제공할 수 있다. 이때, 서로 다른 컬러는 상호 대비되는 색인 것이 바람직하며, 여러 색 중 적어도 하나는 약제의 색과 동일하거나, 약제 색과 보색일 수 있다.
한편, 조명부(130)는 복수의 발광소자로 구현될 수 있다. 조명부(130)가 발광소자로 구현되는 경우, 조명부(130)는 제1 컬러의 광을 발광하는 제1 발광소자 및 제2 컬러의 광을 발광하는 제2 발광소자로 구현될 수 있다. 예를 들어, 조명부(130)는 빨간색을 발광하는 발광소자와 파란색을 발광하는 발광소자를 포함할 수 있다. 여기서 발광소자라는 특정의 색의 빛을 발광하는 소자로, 백열등, 형광등, CCFL, LED, OLED, AMOLED 등의 다양한 방식의 소자일 수 있다.
한편, 본 실시 예에서는 조명부(130)가 두 종류의 발광소자를 포함하는 것으로 설명하였으나 이에 한정되지 않는다. 예를 들어, 조명부(130)는 제1 컬러를 발광하는 제1 발광소자, 제2 컬러를 발광하는 제2 발광소자, 제3 컬러를 발광하는 제3 발광소자, 제4 컬러를 발광하는 제4 발광소자, 제5 컬러를 발광하는 제5 발광소자를 포함할 수 있다.
한편, 조명부(130)가 발광소자로 구현되는 경우, 각 색상에 대응되는 하나의 발광소자만을 이용할 수 있으며, 복수개의 발광소자를 이용할 수도 있다. 예를 들어, 제1 컬러를 발광하는 복수개의 발광소자와 제2 컬러를 발광하는 복수개의 발광소자를 이용하여 조명부(130)를 구현할 수 있다. 한편, 이상에서는 하나의 색을 발광하는 발광소자를 이용하는 것으로 도시하고 설명하였지만, 하나의 발광소자가 복수의 색 방출이 가능하면, 하나의 발광소자를 이용하여 조명을 구성할 수도 있다.
제어부(140)는 약포에 대해 서로 다른 컬러의 조명을 순차적으로 제공하도록 조명부(130)를 제어한다. 예를 들어 제어부(140)는 조명부(130)가 제1 조명을 제공한 후 제1 조명과는 다른 컬러의 제2 조명을 제공하고, 제2 조명을 제공한 후 제 1, 2 조명과는 다른 컬러의 제3 조명을 제공하는 방식으로, 조명부(130)가 약포에 대해 복수의 서로 다른 컬러의 조명을 순차적으로 제공하도록 제어할 수 있다.
또한, 제어부(140)는 복수의 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영하도록 촬영부(120)를 제어한다. 구체적으로, 제어부(140)는 조명부(130)가 약포에 대해 복수의 서로 다른 컬러의 조명을 순차적으로 제공하면, 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영하도록 촬영부(120)를 제어할 수 있다.
한편, 제어부(140)는 복수의 서로 다른 컬러의 조명 하에서 촬영된 복수의 영상을 이용하여, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
구체적으로, 제어부(140)는 약포를 촬영하여 생성한 영상을 촬영부(120)로부터 수신하고, 수신한 영상으로부터 약제의 종류와 개수를 검출하고, 검출된 약제의 종류와 개수를 약제 조제 정보와 비교하여 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 제어부(140)는 약포의 표면에 인쇄된 텍스트의 컬러와 동일한 컬러의 제1 조명, 제1 조명과 상이한 적어도 하나의 제2 조명을 순차적으로 발산하도록 조명부(130)를 제어할 수 있다.
예를 들어, 제어부(140)는 약포의 표면에 인쇄된 텍스트의 컬러가 검은 색인 경우, 검은 색의 조명을 발산하도록 조명부(130)를 제어하고, 검은 색의 조명을 발산한 후에는 검은 색과 상이한 적어도 하나의 색을 발산하도록 조명부(130)를 제어할 수 있다.
이 경우, 사용자가 약포의 표면에 인쇄되는 텍스트의 컬러를 약포 검사 장치(100)의 입력부(미도시)를 이용하여 기 입력해 놓으면, 제어부(140)는 기 입력된 컬러의 조명을 발산하도록 조명부(130)를 제어할 수 있다.
또한, 약포 검사 장치(100)는 센서부(미도시)를 구비할 수 있다. 센서부(미도시)는 약포의 표면에 인쇄된 텍스트의 컬러를 검출하고, 제어부(140)는 검출된 텍스트의 컬러와 동일한 컬러의 조명을 발산하도록 조명부(130)를 제어할 수 있다.
한편, 제어부(140)는 복수의 영상 각각으로부터 약제를 검출하고, 검출된 약제를 조합하여, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
구체적으로, 제어부(140)는 촬영된 복수의 영상 각각으로부터 약포 내에 포장된 약제를 검출할 수 있다. 그리고 제1 영상에서 특정 약제가 검출되지 않고, 제2 영상에서 특정 약제가 검출된 경우에는 제1 영상에서의 검출 결과와 제2 영상에서의 검출 결과를 조합하여 특정 약제가 약포 내에 존재하는 것으로 판단할 수 있다.
예를 들어, 제1 영상에서는 제1 약제, 제2 약제 및 제4 약제가 검출되었고, 제1 영상과는 다른 컬러의 조명을 이용하여 촬영한 제 2 영상에서 제1 약제, 제2 약제, 제3 약제 및 제5 약제가 검출된 경우, 제어부(140)는 약포 내에 제1 약제, 제2 약제, 제3 약제, 제4 약제 및 제5 약제가 존재하는 것으로 판단할 수 있다.
이 경우, 약제 조제 정보에 제1 약제, 제2 약제, 제3 약제, 제4 약제, 제5 약제가 존재하면, 제어부(140)는 약품 조제 정보에 부합하는 약제가 약포 내에 포장된 것으로 판정할 수 있다.
한편, 제어부(140)는 복수의 영상을 조합하고, 조합된 영상으로부터 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
예를 들어, 제어부(140)는 제1 약제, 제2 약제 및 제4 약제가 식별되는 제1 영상과 제1 약제, 제2 약제, 제3 약제 및 제5 약제가 식별되는 제2 영상을 조합하여 제3 영상을 생성할 수 있다. 그리고 제어부(140)는 제3 영상으로부터 약제를 제1 약제, 제2 약제, 제3 약제, 제4 약제 및 제5 약제를 검출할 수 있다.
따라서 제어부(140)는 약포 내에 제1 약제, 제2 약제, 제3 약제, 제4 약제 및 제5 약제가 존재하는 것으로 판단할 수 있다.
이 경우, 약품 조제 정보에 제1 약제, 제2 약제, 제3 약제, 제4 약제 및 제5 약제가 존재하면, 제어부(140)는 약제 조제 정보에 부합하는 약제가 약포 내에 포장된 것으로 판정할 수 있다.
한편, 제어부(140)는 약품 조제 정보에 부합하는 약제가 약포 내에 포장되지 않은 경우, 복수의 서로 다른 컬러의 조명과 상이한 컬러의 조명을 제공하도록 조명부(130)를 제어할 수 있다. 예를 들어, 제1색의 제1 조명, 제2색의 제2 조명, 제3색의 제3 조명을 이용하여 약포를 촬영하고 촬영된 복수의 영상을 이용하여 약제 조제 정보와 비교하였으나 약제 조제 정보와 일치하지 않는 것으로 판단되는 경우, 제어부(140)는 제 4색의 제4 조명, 제 5색의 제5 조명을 제공하도록 조명부(130)를 제어할 수 있다.
이 경우, 제어부(140)는 상이한 컬러의 조명에 대응하여 상기 약포를 추가적으로 촬영하도록 촬영부(120)를 제어할 수 있다. 예를 들어, 제 4색의 제4 조명, 제 5색의 제5 조명이 조명부(130)에 의해 제공되는 것에 대응하여, 제4 촬영, 제5 촬영을 수행하도록 촬영부(120)를 제어할 수 있다.
이에 따라, 일반적인 검사 과정에서는 조명이 제공되는 횟수 및 촬영 횟수를 제한함으로써 약포 검사에 소요되는 시간을 절약하고, 검사 결과가 약제 조제 정보에 불일치 하는 경우에는 추가적인 검사를 수행함으로써 검사의 정확성을 향상시킬 수 있다.
한편, 제어부(140)는 프로세서라는 용어와 병행될 수 있다.
또한, 제어부(140)는 약포 검사 장치(100)의 전반적인 동작을 제어할 수 있다.
도 2는 본 발명의 일 실시 예에 따른 검사부(250)의 이송부와 촬영부를 도시한 도면이다.
도 2에 따르면, 이송부(110)는 인입롤러(111) 및 인출롤러(112)를 포함할 수 있다.
약포가 연속적으로 연결된 약포 다발(P)은 인입롤러(111)의 회전에 의해 촬영부(120)로 인입되고, 인출롤러(112)의 회전에 의해 촬영부(120)로부터 인출된다.
구체적으로, 인입롤러(111)는 약포의 상부와 접하는 상부 인입롤러(111a) 및 약포의 하부와 접하는 하부 인입롤러(111b)를 포함하고, 상부 인입롤러(111a)와 하부 인입롤러(111b)를 회전시킴으로써 약포 다발(P)을 촬영부(120)에 인입할 수 있다.
인출롤러(112)는 약포의 상부와 접하는 상부 인출롤러(112a) 및 약포의 하부와 접하는 하부 인출롤러(112b)를 포함하고, 상부 인출롤러(112a)와 하부 인출롤러(112b)를 회전시킴으로써 약포 다발(P)을 촬영부(120)로부터 인출할 수 있다.
약포가 촬영부(120)로 인입된 경우에는, 약포의 촬영을 위하여 인입롤러(111) 및 인출롤러(112)의 동작이 정지되고, 촬영부(120)가 약포의 촬영을 끝내면, 인입롤러(111) 및 인출롤러(112)는 동작을 시작하여, 촬영된 약포의 다음에 위치한 약포가 촬영부(120)에 위치하도록 할 수 있다.
한편, 인입롤러(111) 및 인출롤러(112) 사이에는 촬영부(120)가 배치된다. 촬영부(120)는 약포 다발(P)의 하부에 배치되어 약포를 촬영할 수 있다.
촬영부(120)의 폭 및 길이는 약포의 폭 및 길이에 대응되기 때문에, 촬영부(120)는 약포를 하나씩 촬영할 수 있다. 다만, 이에 한정되는 것은 아니며, 촬영부(120)는 두 개 이상의 약포를 동시에 촬영할 수 있는 크기로 구현될 수 있다.
도 3a는 본 발명의 일 실시 예에 따른 검사부(250`)의 이송부(110), 촬영부(120) 및 조명부(130)를 도시한 도면이다.
도 3a를 참조하면, 조명부(130)는 촬영부(120)에 대향되도록 배치될 수 있다. 예를 들어, 도 3a에서 도시한 것과 같이, 촬영부(120)는 약포의 다발(P)의 하부에 위치하고, 조명부(130)는 약포의 다발(P)을 기준으로 촬영부(120)에 대향되도록 배치될 수 있다. 즉, 조명부(130)는 약포의 다발(P)의 상단에서 촬영부(120)와 대응되는 위치에 위치할 수 있다.
한편, 본 실시 예에서는 약포의 다발(P)이 지면과 평행하게 놓이고, 촬영부(120)는 약포의 하단, 조명부(130)는 약포의 상단에 배치되는 것으로 설명하였으나, 이에 한정되지 않는다. 예를 들어 약포의 다발(P) 지면과 수직으로 놓일 수 있고, 촬영부(120)는 약포의 좌측, 조명부(130)는 약포의 우측에 놓일 수도 있다.
한편, 본 실시 예에서는 촬영부(120)는 약포의 하단, 조명부(130)는 약포의 상단에 배치되는 것으로 설명하였으나, 이에 한정되지 않는다. 예를 들어, 촬영부(120)는 약포의 상단, 조명부(130)는 약포의 하단에 오도록 배치될 수 있다.
한편, 조명부(130)는 촬영부(120)의 폭 및 길이와 대응되는 폭 및 길이를 가질 수 있다. 그리고 조명부(130)는 약포 및 촬영부 방향으로 조명을 제공할 수 있다. 따라서, 조명부(130)는 촬영부(120)에 의해 촬영되는 부분 전체에 조명을 고르게 제공할 수 있다.
도 3b는 본 발명의 일 실시 예에 따른 검사부(250”)의 이송부, 촬영부 및 조명부를 정면에서 도시한 도면이다.
도 3b에 따르면, 조명부(130)는 촬영부(120)에 의해 촬영되는 약포를 기준으로 촬영부(120)에 대향되도록 배치될 수 있다.
도 4를 참조하면, 다른 실시 예의 조명부의 형태를 도시한 도면이다. 구체적으로, 도 4a는 링 형태의 보조 조명부가 추가된 경우를 도시한 도면이고, 도 4b는 도 4a의 실시 예를 상부에서 바라본 도면이고, 도 4c는 조명부와 반대되는 방향에 배치되는 보조 조명부가 추가된 경우를 도시한 도면, 도 4d는 도 4a및 도 4c의 두 보조 조명부가 함께 배치된 경우를 도시한 도면이다. 도 4a 및 도 4b를 참조하면, 조명부(130)는 약포가 놓여진 하단에서 약포 방향으로 빛을 조사한다. 이때, 약포에 빛이 골고루 조사될 수 있도록 조명부(130)와 약포(10) 사이에는 제1 편광부재(131)가 배치될 수 있다. 한편, 도시된 예에서는 조명부(130)가 약포의 하부에 배치되는 것으로 도시하였으나, 구현시에는 약포의 상부에 배치될 수도 있다.
제1 보조 조명부(136)는 링 형태의 조명 소자이며, 약포의 주변에 배치되어 약포 방향으로 빛을 조사할 수 있다. 한편, 구현시에는 보조 조명부(136)와 약포 사이에도 편광 부재가 배치될 수 있다.
한편, 구현시에 제1 보조 조명부(136)는 조명부(130)와 연동되어 동일한 색을 발광할 수 있으며, 조명부(130)와 다른 색을 발광할 수도 있다. 예를 들어, 조명부(136)가 녹색을 발광할 수 있고, 제1보조 조명부(136)가 빨강색을 발광할 수 있는 경우, 제어부(140)는 녹색이 필요한 경우에 조명부(130)만이 빛을 조사하도록 하고, 빨강색이 필요한 경우에는 제1보조 조명부(136)만이 빛을 조사하도록 할 수 있다. 또한, 제어부(140)는 노란색이 필요한 경우에는 조명부(130)가 녹색을 조사하고 제1보조 조명부(136)가 빨강색을 조사하도록 하여, 약포(10)에는 녹색과 빨강색의 혼합에 따른 노란색이 조사되도록 할 수 있다.
도 4c를 참조하면, 조명부(130)는 약포가 놓여진 하단에서 약포 방향으로 빛을 조사한다. 이때, 약포에 빛이 골고루 조사될 수 있도록 조명부(130)와 약포(10) 사이에는 제1 편광부재(131)가 배치될 수 있다. 한편, 도시된 예에서는 조명부(130)가 약포의 하부에 배치되는 것으로 도시하였으나, 구현시에는 약포의 상부에 배치될 수도 있다.
제2 보조 조명부(137)는 약포가 놓여진 상단에서 약포 방향으로 빛을 조사한다. 이때, 제2 보조 조명부(137)는 약포에 빛이 골고루 조사될 수 있도록 돔 형태의 형상을 가질 수 있다. 또한, 빛의 확산이 일정하도록 제2 보조 조명부(137)와 약포(10) 사이에는 제2 편광부재(138)가 배치될 수도 있다.
한편, 구현시에 제2보조 조명부(136)는 조명부(130)와 연동되어 동일한 색을 발광할 수 있으며, 조명부(130)와 다른 색을 발광할 수도 있다.
도 4d를 참조하면, 조명부(130)는 약포가 놓여진 하단에서 약포 방향으로 빛을 조사한다.
제1 보조 조명부(136)는 링 형태의 조명 소자이며, 약포의 주변에 배치되어 약포 방향으로 빛을 조사할 수 있다.
제2 보조 조명부(137)는 약포가 놓여진 상단에서 약포 방향으로 빛을 조사한다.
한편, 이와 같이 약포(10)에 대해서 조명부(130), 제1 보조 조명부(136) 및 제2 보조 조명부(137)가 빛을 조사할 수 있는 경우, 세 개의 조명은 서로 연동되어 동일한 색을 발광하거나, 서로 다른 색을 개별적으로 발광할 수 있다. 또한, 빛의 혼합을 이용하여 서로 다른 색(예를 들어, 녹색, 빨강, 파랑)을 동시에 발광하여 또 다른 색(힌색)을 약포에 조사할 수도 있다.
한편, 이상에서는 2개의 보조 조명부를 추가 이용하는 것만을 도시하고 설명하였지만, 구현시에는 3개 이상의 추가적인 보조 조명부가 이용될 수도 있다.
도 5a 및 도 5b는 본 발명의 일 실시 예에 따른 복수의 영상을 이용하여 약포를 검사하는 과정을 도시한 도면이다.
도 5a에서는 복수의 영상 각각으로부터 약제를 검출하고, 검출된 약제를 조합하여, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단하는 방법을 도시한다.
도 5a에 따르면, 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 포장되어 있는 약포를, 서로 다른 컬러의 조명 하에서 3회 촬영한 복수의 영상(310, 320, 330)이 존재한다.
이 경우, 제어부(140)는 촬영된 복수의 영상(310, 320, 330) 각각으로부터 약포 내에 포장된 약제를 검출할 수 있다.
제어부(140)에 의하여 검출된 약제는 실선, 검출되지 않은 약제는 점선으로 표시하였다.
제1 영상(310)에서는 제2 약제(312), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 검출되었으나, 제1 약제(311) 및 제3 약제(313)는 검출되지 않았다.
제2 영상(320)에서는 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제6 약제(316) 및 제7 약제(317)가 검출되었으나, 제5 약제(315)는 검출되지 않았다.
제3 영상(330)에서는 제1 약제(311), 제2 약제(312), 제3 약제(313), 제6 약제(316) 및 제7 약제(317)가 검출되었으나, 제4 약제(314) 및 제5 약제(315)는 검출되지 않았다.
이 경우, 제어부(140)는 세 개의 영상으로부터 약제를 검출한 결과를 조합하여 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
즉, 제1 약제(311)는 제2 영상(320)과 제3 영상(330)에서 검출되기 때문에, 제어부(140)는 제1 약제(311)가 약포 내에 존재하는 것으로 판단할 수 있다.
제2 약제(312)는 제1 영상(301), 제2 영상(320)과 제3 영상(330)에서 검출되기 때문에, 제어부(140)는 제2 약제(312)가 약포 내에 존재하는 것으로 판단할 수 있다.
제5 약제(315)는 제1 영상(301)에서 검출되기 때문에, 제어부(140)는 제5 약제(315)가 약포 내에 존재하는 것으로 판단될 수 있다.
이러한 과정을 제3 약제(313), 제4 약제(314), 제6 약제(316), 제7 약제(317)에도 반복함으로써, 제어부(140)는 약포 내에 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 존재하는 것으로 판정할 수 있다.
이 경우, 약제 조제 정보에 제1 약제, 제2 약제, 제3 약제, 제4 약제, 제5 약제, 제6 약제 및 제7약제가 존재하면, 제어부(140)는 약품 조제 정보에 부합하는 약제가 약포 내에 포장된 것으로 판정할 수 있다.
이와 같은 방식으로, 복수의 영상 중 임의의 하나의 영상으로부터 특정 약제가 검출된 경우에는, 검출된 특정 약제는 약포 내에 존재하는 것으로 판단될 수 있다.
도 5b에서는 복수의 영상을 조합하고 조합된 영상으로부터 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단하는 방법을 도시한다.
도 5b에 따르면, 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 포장되어 있는 약포를, 서로 다른 컬러의 조명 하에서 3회 촬영한 복수의 영상(310, 320, 330)이 존재한다.
복수의 영상 각각에서 검출 가능할 정도로 명확하게 표시된 약제는 실선, 명확하게 표시되지 않은 약제는 점선으로 표시하였다.
제1 영상(310)에서는 제2 약제(312), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 검출 가능할 정도로 명확하게 표시되나, 제1 약제(311) 및 제3 약제(313)는 검출 가능할 정도로 명확하게 표시되지 않았다.
제2 영상(320)에서는 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제6 약제(316) 및 제7 약제(317)가 검출 가능할 정도로 명확하게 표시되었으나, 제5 약제(315)는 검출 가능할 정도로 명확하게 표시되지 않았다.
제3 영상(330)에서는 제1 약제(311), 제2 약제(312), 제3 약제(313), 제6 약제(316) 및 제7 약제(317)가 검출 가능할 정도로 명확하게 표시되었으나, 제4 약제(314) 및 제5 약제(315)는 검출 가능할 정도로 명확하게 표시되지 않았다.
이 경우, 제어부(140)는 촬영된 복수의 영상(310, 320, 330)을 조합한 새로운 영상(340)을 생성할 수 있다.
복수의 영상(310, 320, 330)을 조합한 새로운 영상(340)에서는 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 검출 가능할 정도로 명확하게 표시된다.
한편, 제어부(140)는 복수의 영상(310, 320, 330)을 조합한 새로운 영상(340) 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
즉, 영상(340)에서는 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 검출되기 때문에, 제어부(140)는 약포 내에 제1 약제(311), 제2 약제(312), 제3 약제(313), 제4 약제(314), 제5 약제(315), 제6 약제(316) 및 제7 약제(317)가 존재하는 것으로 판정할 수 있다.
이 경우, 약제 조제 정보에 제1 약제, 제2 약제, 제3 약제, 제4 약제, 제5 약제, 제6 약제 및 제7약제가 존재하면, 제어부(140)는 약품 조제 정보에 부합하는 약제가 약포 내에 포장된 것으로 판정할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 텍스트의 컬러와 동일한 컬러의 조명을 제공하여 약포를 촬영하는 것을 도시한 도면이다.
도 6에 따르면, 약포(350)는 복수개의 약제를 포함하고 있다. 또한, 약포의 표면에는 ABC라는 텍스트(351)가 인쇄되어 있다.
약포(350) 내의 약제가 약포에 인쇄된 텍스트(351)와 겹쳐 있는 상태에서 촬영되는 경우에는 약제의 윤곽선이 제대로 검출되지 않아, 결과적으로는 약제 인식에 실패하는 경우가 발생할 수 있다.
따라서, 약포(350)에 인쇄된 텍스트(351)와의 동일 또는 유사한 색상을 배경색으로 이용하여 촬영을 수행하는 경우, 텍스트(351)가 제거된 영상(360)을 획득할 수 있다.
한편, 제어부(140)는 약포의 표면에 인쇄된 텍스트의 컬러와 동일한 컬러의 제1 조명, 제1 조명과 상이한 적어도 하나의 제2 조명을 순차적으로 발산하도록 조명부(130)를 제어할 수 있다.
예를 들어, 제어부(140)는 텍스트의 색이 검정이면, 검정 컬러의 제1 조명을 발산하도록 조명부(130)를 제어할 수 있다.
그리고 조명부(130)가 제1 조명을 발산한 후, 제어부(140)는 검정 컬러 이외의 컬러의 조명을 발산하도록 조명부(130)를 제어할 수 있다. 예를 들어 조명부(130)는 검정 조명을 발산한 후, 빨간색 조명을 발산할 수 있다.
그리고 제2 조명은 하나 이상의 색상을 가질 수 있다. 예를 들어, 조명부(130)는 텍스트와 동일한 색상의 검정 조명을 발산한 후, 빨간색 조명을 발산하고, 빨간색 조명을 발산한 후 파란색 조명을 발산할 수 있다.
도 7은 본 발명의 일 실시 예에 따른 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영한 영상을 나타내는 도면이다.
하얀색 배경 하에서 촬영하는 경우, 하얀색 약제는 검출이 잘 되지 않을 가능성이 있다.
그리고 연두색 배경 하에서 촬영하는 경우, 연두색과 유사한 색상의 약제는 검출이 잘 되지 않을 가능성이 있다.
또한, 약포에 텍스트가 인쇄되어 있는바, 텍스트의 존재로 인하여 약제가 검출이 잘 되지 않을 가능성이 있다.
따라서, 하얀색의 조명, 연두색의 조명, 텍스트의 색깔(검은색)과 동일한 색인 검은색 조명을 이용하여 복수회의 촬영을 수행함으로써, 하얀색 조명 하에서 촬영된 영상(910)에서는, 하얀색 이외의 색상의 약제를 명확하게 검출하고, 연두색 조명 하에서 촬영된 영상(920)에서는 연두색과 유사한 색상 이외의 색상의 약제를 명확하게 검출하고, 검은색 조명 하에서 촬영된 영상(930)에서는 텍스트가 제거된 영상을 획득하여 텍스트의 존재 여부에 관계없이 약제를 명확하게 검출할 수 있다.
도 8은 본 발명의 또 다른 실시 예에 따른 약포 검사 장치의 구성을 나타낸 블록도이다.
도 8에 따르면, 약포 검사 장치(100`)는 센서부(150)를 더 포함할 수 있다.
이송부(110), 촬영부(120), 조명부(130) 및 제어부(140)는 도 1 에서 설명한 것과 동일한 기능을 수행할 수 있다.
센서부(150)는 약포의 표면에 인쇄된 텍스트의 컬러를 검출하여 제어부(140)에 전달할 수 있다.
이 경우, 제어부(140)는 검출된 텍스트의 컬러와 동일한 컬러의 조명을 발산하도록 조명부(130)를 제어할 수 있다.
도 9는 본 발명의 또 다른 실시 예에 따른 약포 검사 장치의 구성을 나타낸 블록도이다.
도 9에 따르면, 본 약포 검사 장치(100”)는 이송부(110), 촬영부(120), 조명부(130) 및 제어부(140) 및 저장부(160)를 포함할 수 있다.
이송부(110), 촬영부(120), 조명부(130) 및 제어부(140)는 도 1 에서 설명한 것과 동일한 기능을 수행할 수 있다.
한편, 제어부(140)는 기 수신한, 약포 내에 포함될 수 있는 약제에 대한 영상을 분석하여 약제별 패턴 정보를 도출할 수 있다.
이 경우, 약제의 패턴 정보는 약품의 크기, 수량, 외형, 컬러, 심볼마크, 무게, 두께를 포함할 수 있다.
한편, 제어부(140)는 도출된 약제별 패턴 정보를 저장부(160)에 저장할 수 있다.
그리고 촬영부(120)에 의해 영상이 촬영되면, 제어부(140)는 촬영된 영상의 패턴을 분석하고, 분석된 영상 패턴을 저장부(160)에 저장된 약제의 패턴 정보와 비교함으로써, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지 여부를 판단할 수 있다.
한편, 약포에는 약제 조제 정보가 담긴 바코드가 인쇄될 수 있고, 약포 검사 장치(100”’)의 바코드 인식부(미도시)는 바코드를 스캔함으로써, 약제 조제 정보를 검출할 수 있다. 이 경우, 제어부(140)는 검출된 약제 조제 정보를 저장부(160)에 저장할 수 있다. 또한, 제어부(140)는 촬영된 복수의 영상을 이용하여 검출된 약제를 저장부(160)에 저장된 약제 조제 정보와 비교함으로써, 약제 조제 정보에 부합하는 약제가 약포 내에 포장되었는지를 판단할 수 있다.
또한, 약제 조제 정보가 사용자에 의해 입력되는 경우에도, 약제 조제 정보는 저장부(160)에 저장될 수 있다.
도 10은 본 발명의 또 다른 실시 예에 따른 약포 검사 장치의 구성을 나타낸 블록도이다.
도 10에 따르면, 본 약포 검사 장치(100”’)는 이송부(110), 촬영부(120), 조명부(130) 및 제어부(140) 및 사용자 인터페이스부(170)를 포함할 수 있다.
이송부(110), 촬영부(120), 조명부(130) 및 제어부(140)는 도 1 에서 설명한 것과 동일한 기능을 수행할 수 있다.
한편, 제어부(140)는 복수의 영상을 이용하여 검출된 약제가 약제 조제 정보와 일치하지 않는 경우, 사용자 인터페이스부(170)를 통하여 불일치 사실을 사용자에게 제공할 수 있다.
또한, 사용자 인터페이스부(170)는 사용자로부터 약제 조제 정보를 입력받거나, 약포에 인쇄된 텍스트의 컬러에 대한 정보를 입력받을 수 있다.
또한, 사용자 인터페이스부(170)는 약포 검사 장치(100”’)의 동작 상태에 대한 정보를 사용자에게 제공하고, 약포 검사 장치(100”’)의 동작을 제어하기 위한 사용자 명령을 입력받을 수 있다.
도 11은 본 발명의 일 실시 예에 따른 약포 검사 방법을 설명하기 위한 흐름도이다.
도 11을 참고하면, 먼저, 약제가 포장된 약포를 이송한다(S1310). 구체적으로, 약제가 포장된 약포를 검사하기 위하여, 약포가 연속적으로 형성된 약포의 다발을 이송할 수 있다.
그리고 약포 측으로 서로 다른 컬러의 조명을 순차적으로 제공한다(S1320). 예를 들어 제1 조명을 제공한 후 제1 조명과는 다른 컬러의 제2 조명을 제공하고, 제2 조명을 제공한 후 제 1, 2 조명과는 다른 컬러의 제3 조명을 제공하는 방식으로, 약포에 대해 복수의 서로 다른 컬러의 조명을 순차적으로 제공할 수 있다.
그리고 복수의 서로 다른 컬러의 조명에 대응하여 약포를 복수회 촬영한다(S1330). 구체적으로, 약포에 대해 복수의 서로 다른 컬러의 조명이 순차적으로 제공되면, 서로 다른 컬러의 조명에 대응하여 약포를 복수 회 촬영할 수 있다.
한편, 본 발명의 실시 예를 구성하는 모든 구성 요소들이 하나로 결합하거나 결합하여 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다.
그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다. 이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 비일시적 저장매체(non-transitory computer readable media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시 예를 구현할 수 있다.
여기서 비일시적 판독 가능 기록매체란, 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라, 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로, 상술한 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리 카드, ROM 등과 같은 비일시적 판독가능 기록매체에 저장되어 제공될 수 있다.
이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.
100 : 약포 검사 장치 110 : 이송부
120 : 촬영부 130 : 조명부
140 : 제어부

Claims (19)

  1. 약포 검사 장치에 있어서,
    약제가 포장된 약포를 이송하는 이송부;
    상기 약포를 촬영하기 위한 촬영부;
    상기 약포 측으로 조명을 제공하는 조명부; 및
    상기 약포에 대해 서로 다른 컬러의 조명을 순차적으로 제공하도록 상기 조명부를 제어하고, 상기 서로 다른 컬러의 조명에 대응하여 상기 약포를 복수회 촬영하도록 상기 촬영부를 제어하는 제어부;를 포함하는 약포 검사 장치.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 서로 다른 컬러의 조명 하에서 촬영된 복수의 영상을 이용하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 것을 특징으로 하는 약포 검사 장치.
  3. 제1항에 있어서,
    상기 조명부는,
    제1 컬러의 광을 발광하는 제1 발광 소자 및 제2 컬러의 광을 발광하는 제2 발광 소자를 포함하는 것을 특징으로 하는 약포 검사 장치.
  4. 제3항에 있어서,
    상기 제1 컬러와 상기 제2 컬러는 상호 대비되는 색인 것을 특징으로 하는 약포 검사 장치.
  5. 제1항에 있어서,
    상기 제어부는,
    상기 약포의 표면에 인쇄된 텍스트의 컬러와 동일한 컬러의 제1 조명, 상기 제1 조명과 상이한 적어도 하나의 제2 조명을 순차적으로 발산하도록 상기 조명부를 제어하는 것을 특징으로 하는 약포 검사 장치.
  6. 제3항에 있어서,
    상기 제1 조명은 상기 약포 내의 약제와 동일한 색 또는 보색인 것을 특징으로 하는 약포 검사 장치.
  7. 제2항에 있어서
    상기 제어부는,
    상기 복수의 영상 각각으로부터 약제를 검출하고, 상기 검출된 약제를 조합하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 것을 특징으로 하는 약포 검사 장치.
  8. 제2항에 있어서,
    상기 제어부는,
    상기 복수의 영상을 조합하고, 상기 조합된 영상으로부터 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 것을 특징으로 하는 약포 검사 장치.
  9. 제2항에 있어서
    상기 제어부는,
    상기 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되지 않은 경우, 상기 복수의 서로 다른 컬러의 조명과 상이한 컬러의 조명을 제공하도록 상기 조명부를 제어하고,
    상기 상이한 컬러의 조명에 대응하여 상기 약포를 추가적으로 촬영하도록 상기 촬영부를 제어하는 것을 특징으로 하는 약포 검사 장치.
  10. 제1항에 있어서,
    상기 조명부는,
    상기 촬영부와 대향되게 배치되어 상기 약포의 후면에 조명을 제공하는 것을 특징으로 하는 약포 검사 장치.
  11. 제1항에 있어서,
    상기 약포 측으로 조명을 제공하는 보조 조명부;를 더 포함하는 것을 특징으로 하는 약포 검사 장치.
  12. 제11항에 있어서,
    상기 보조 조명부는 링 형상을 가지며, 상기 약포의 측면에 배치되는 것을 특징으로 하는 약포 검사 장치.
  13. 제11항에 있어서,
    상기 조명부 및 상기 보조 조명부 중 적어도 하나와 상기 약포 사이에 배치되는 편광 필터;를 더 포함하는 것을 특징으로 하는 약포 검사 장치.
  14. 약포 검사 방법에 있어서,
    약제가 포장된 약포를 이송하는 단계;
    상기 약포 측으로 서로 다른 컬러의 조명을 순차적으로 제공하는 단계; 및
    상기 서로 다른 컬러의 조명에 대응하여 상기 약포를 복수회 촬영하는 단계;를 포함하는 약포 검사 방법.
  15. 제14항에 있어서,
    상기 서로 다른 컬러의 조명 하에서 촬영된 복수의 영상을 이용하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 단계;를 더 포함하는 것을 특징으로 하는 약포 검사 방법.
  16. 제14항에 있어서,
    상기 서로 다른 컬러의 조명을 순차적으로 제공하는 단계는,
    상기 약포의 표면에 인쇄된 텍스트의 컬러와 동일한 컬러의 제1 조명, 상기 제1 조명과 상이한 적어도 하나의 제2 조명을 순차적으로 발산하는 것을 특징으로 하는 약포 검사 방법.
  17. 제15항에 있어서
    상기 판단하는 단계는,
    상기 복수의 영상 각각으로부터 약제를 검출하고, 상기 검출된 약제를 조합하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 것을 특징으로 하는 약포 검사 방법.
  18. 제15항에 있어서,
    상기 판단하는 단계는,
    상기 복수의 영상을 조합하고, 상기 조합된 영상으로부터 약제를 검출하여, 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되었는지 여부를 판단하는 것을 특징으로 하는 약포 검사 방법.
  19. 제15항에 있어서
    상기 약제 조제 정보에 부합하는 약제가 상기 약포 내에 포장되지 않은 경우, 상기 복수의 서로 다른 컬러의 조명과 상이한 컬러의 조명을 제공하는 단계; 및
    상기 상이한 컬러의 조명에 대응하여 상기 약포를 추가적으로 촬영하는 단계;를 더 포함하는 것을 특징으로 하는 약포 검사 방법.
KR1020150091488A 2015-06-26 2015-06-26 약포 검사 장치 및 약포 검사 방법 Expired - Fee Related KR102322987B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020150091488A KR102322987B1 (ko) 2015-06-26 2015-06-26 약포 검사 장치 및 약포 검사 방법
US15/189,784 US9978136B2 (en) 2015-06-26 2016-06-22 Medicine packet inspection apparatus and method
CA2933888A CA2933888A1 (en) 2015-06-26 2016-06-23 Medicine packet inspection apparatus and method
ES16176217T ES2886893T3 (es) 2015-06-26 2016-06-24 Aparato y procedimiento de inspección de paquetes de medicamentos
EP16176217.4A EP3109623B1 (en) 2015-06-26 2016-06-24 Medicine packet inspection apparatus and method
CN201610476220.0A CN106290383B (zh) 2015-06-26 2016-06-24 药包检查装置以及药包检查方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150091488A KR102322987B1 (ko) 2015-06-26 2015-06-26 약포 검사 장치 및 약포 검사 방법

Publications (2)

Publication Number Publication Date
KR20170001467A true KR20170001467A (ko) 2017-01-04
KR102322987B1 KR102322987B1 (ko) 2021-11-09

Family

ID=56263559

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150091488A Expired - Fee Related KR102322987B1 (ko) 2015-06-26 2015-06-26 약포 검사 장치 및 약포 검사 방법

Country Status (6)

Country Link
US (1) US9978136B2 (ko)
EP (1) EP3109623B1 (ko)
KR (1) KR102322987B1 (ko)
CN (1) CN106290383B (ko)
CA (1) CA2933888A1 (ko)
ES (1) ES2886893T3 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10669055B2 (en) 2016-05-26 2020-06-02 Jvm Co., Ltd. Control apparatus
KR20200062533A (ko) * 2018-11-27 2020-06-04 신종걸 알약 포장 설비 자동화 기계의 검사 장치
KR102283985B1 (ko) * 2020-03-25 2021-07-29 신용관 다색컬러를 갖는 약품의 검사방법
WO2022265320A1 (ko) * 2021-06-14 2022-12-22 (주)제이브이엠 약포 검사 시스템

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL307227B2 (en) 2016-07-29 2026-01-01 Regeneron Pharma Assembly line with built-in electronic visual inspection
WO2019193924A1 (ja) * 2018-04-03 2019-10-10 富士フイルム富山化学株式会社 薬剤判定装置及び薬剤判定方法
WO2019193912A1 (ja) * 2018-04-03 2019-10-10 富士フイルム富山化学株式会社 薬剤判定装置及び薬剤判定方法
CN110827933A (zh) * 2018-08-14 2020-02-21 陈玉沛 借由移动装置实现的药片服用辅助方法
EP3922232B1 (en) * 2019-02-08 2022-11-23 FUJIFILM Toyama Chemical Co., Ltd. Medicine identification system, medicine identification device, medicine identification method, and program
CN112357265A (zh) * 2020-11-30 2021-02-12 红云红河烟草(集团)有限责任公司 一种胶管检测装置及胶液液位控制方法
US12036185B2 (en) * 2021-07-19 2024-07-16 Optum, Inc. System and method to count pills
JP7746074B2 (ja) * 2021-08-31 2025-09-30 日立チャネルソリューションズ株式会社 薬剤監査装置及び薬剤監査方法
CN113610851B (zh) * 2021-10-09 2021-12-31 武汉平桥兄弟包装材料有限公司 一种基于机器视觉的包装装潢质检方法和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012078265A (ja) * 2010-10-05 2012-04-19 Panasonic Corp 錠剤検査装置および錠剤検査方法
KR20120124234A (ko) * 2011-05-03 2012-11-13 (주)제이브이엠 조제 약품 재검사 장치 및 그 재검사 방법
US20140347446A1 (en) * 2013-05-22 2014-11-27 Delta Design, Inc. Method and apparatus for ic 3d lead inspection having color shadowing
JP2015068765A (ja) * 2013-09-30 2015-04-13 富士フイルム株式会社 薬剤認識装置及び方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4331772C2 (de) * 1993-09-18 1997-09-04 Laetus Am Sandberg Geraetebau Vorrichtung zur Farberkennung von in Blisterfolien liegenden Objekten
NL1025161C1 (nl) * 2003-08-19 2005-07-04 Global Factories B V Werkwijze en inrichting voor het spreiden van/naast op elkaar liggende voorwerpen.
KR100650285B1 (ko) * 2005-05-25 2006-11-27 (주)제이브이엠 약포 검사시스템
NL1032492C2 (nl) * 2006-09-14 2008-03-17 Dijkstra Vereenigde Bedrijven Inspectie inrichting.
US8284305B2 (en) * 2008-11-26 2012-10-09 Parata Systems, Llc System and method for acquiring images
EP2206653A1 (de) * 2008-12-09 2010-07-14 Uhlmann Pac-Systeme GmbH & Co. KG Vorrichtung zum Überprüfen der Befüllung von Näpfen einer Verpackungseinheit
US9091725B2 (en) * 2009-07-03 2015-07-28 Koh Young Technology Inc. Board inspection apparatus and method
JP5886209B2 (ja) * 2010-12-17 2016-03-16 パナソニックヘルスケアホールディングス株式会社 錠剤鑑査装置
JP5414917B2 (ja) * 2011-07-13 2014-02-12 パナソニック株式会社 錠剤検査装置及び錠剤検査方法
PT2951563T (pt) * 2013-02-04 2020-02-28 Ziuz Holding B V Método e aparelho para inspecionar embalagens que contêm medicação
JP6369456B2 (ja) * 2013-02-20 2018-08-08 株式会社湯山製作所 薬剤鑑査装置、及び薬剤分包システム
JP6607185B2 (ja) * 2014-03-31 2019-11-20 株式会社湯山製作所 薬剤撮影装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012078265A (ja) * 2010-10-05 2012-04-19 Panasonic Corp 錠剤検査装置および錠剤検査方法
KR20120124234A (ko) * 2011-05-03 2012-11-13 (주)제이브이엠 조제 약품 재검사 장치 및 그 재검사 방법
US20140347446A1 (en) * 2013-05-22 2014-11-27 Delta Design, Inc. Method and apparatus for ic 3d lead inspection having color shadowing
JP2015068765A (ja) * 2013-09-30 2015-04-13 富士フイルム株式会社 薬剤認識装置及び方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10669055B2 (en) 2016-05-26 2020-06-02 Jvm Co., Ltd. Control apparatus
KR20200062533A (ko) * 2018-11-27 2020-06-04 신종걸 알약 포장 설비 자동화 기계의 검사 장치
KR102283985B1 (ko) * 2020-03-25 2021-07-29 신용관 다색컬러를 갖는 약품의 검사방법
WO2022265320A1 (ko) * 2021-06-14 2022-12-22 (주)제이브이엠 약포 검사 시스템

Also Published As

Publication number Publication date
CA2933888A1 (en) 2016-12-26
EP3109623A2 (en) 2016-12-28
CN106290383A (zh) 2017-01-04
EP3109623A3 (en) 2017-01-04
EP3109623B1 (en) 2021-08-04
ES2886893T3 (es) 2021-12-21
US20160379361A1 (en) 2016-12-29
KR102322987B1 (ko) 2021-11-09
CN106290383B (zh) 2019-11-01
US9978136B2 (en) 2018-05-22

Similar Documents

Publication Publication Date Title
KR20170001467A (ko) 약포 검사 장치 및 약포 검사 방법
JP7445177B2 (ja) 画像処理装置、プログラム
JP5888611B2 (ja) 薬剤鑑査装置、及び薬剤分包装置
JP6009888B2 (ja) 薬剤検査装置及び方法
US10565545B2 (en) Drug inspection support apparatus and method
JP6100136B2 (ja) 薬剤認識装置及び方法
CN105188637B (zh) 药剂检查系统、卷绕装置、送料装置、及保持器
EP3447478B1 (en) Drug monitoring device, method, and program
JPWO2019187601A1 (ja) 薬剤判定装置、及び境界凹部の検出方法
JP2014221134A (ja) 一包化薬剤鑑査装置
KR20170011877A (ko) 약제 검사 장치 및 그 약제 검사 방법
JP7375049B2 (ja) 画像処理装置及び方法

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

P22-X000 Classification modified

St.27 status event code: A-2-2-P10-P22-nap-X000

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20241103

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

H13 Ip right lapsed

Free format text: ST27 STATUS EVENT CODE: N-4-6-H10-H13-OTH-PC1903 (AS PROVIDED BY THE NATIONAL OFFICE); TERMINATION CATEGORY : DEFAULT_OF_REGISTRATION_FEE

Effective date: 20241103

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20241103