KR20200087351A - 가스감지모델 생성방법, 가스감지모델을 이용한 가스감지 시스템, 및 가스감지방법 - Google Patents
가스감지모델 생성방법, 가스감지모델을 이용한 가스감지 시스템, 및 가스감지방법 Download PDFInfo
- Publication number
- KR20200087351A KR20200087351A KR1020180174206A KR20180174206A KR20200087351A KR 20200087351 A KR20200087351 A KR 20200087351A KR 1020180174206 A KR1020180174206 A KR 1020180174206A KR 20180174206 A KR20180174206 A KR 20180174206A KR 20200087351 A KR20200087351 A KR 20200087351A
- Authority
- KR
- South Korea
- Prior art keywords
- gas
- image
- gas detection
- learning
- detection model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/94—Investigating contamination, e.g. dust
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/0464—Convolutional networks [CNN, ConvNet]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N2021/1765—Method using an image detector and processing of image signal
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8883—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges involving the calculation of gauges, generating models
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Computational Linguistics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- General Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Mathematical Physics (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Pathology (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
도 2는 본 발명의 일 실시예에 따른 가스감지모델을 이용한 가스감지 시스템의 구성을 보여주는 도면이다.
도 3은 Faster R-CNN 알고리즘의 구성을 보여주는 도면이다.
도 4는 본 발명의 일 실시예에 따른 가스 감지 모델 학습부의 구성을 보여주는 도면이다.
도 5는 제1 타입 학습이미지 의 일 예를 보여주는 도면이다.
도 6a 및 6b는 제2 타입 학습이미지 의 일 예를 보여주는 도면이다.
도 7은 본 발명의 일 실시예에 따른 가스감지모델을 이용한 가스 감지 방법을 보여주는 플로우차트이다.
도 8은 본 발명의 일실시예에 따른 가스 감지 시스템이 가스 감지 모델을 생성하는 방법을 보여주는 플로우 차트이다.
210: 촬영부 225: 가스감지부
230: 위치결정부 240: 위치 매핑부
250: 위치정보 데이터베이스 270: 모니터링부
280: 가스 감지모델 학습부
Claims (16)
- 타겟 영역을 촬영하여 타겟 이미지를 생성하는 촬영부;
가스감지모델에 상기 타겟 이미지를 입력하여 상기 가스감지모델로부터 상기 타겟 이미지 내에서 가스발생 추정영역의 좌표 및 가스발생 확률값을 획득하고, 상기 가스발생 확률값과 문턱값의 비교결과에 따라 가스 발생 여부를 판단하는 가스감지부; 및
상기 가스발생 추정영역의 좌표를 이용하여 상기 타겟영역 내에서 상기 가스발생 추정영역의 실제위치를 결정하는 위치결정부를 포함하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 시스템. - 제1항에 있어서,
상기 타겟 영역을 미리 촬영하여 획득한 기준 이미지를 이용하여 상기 타겟 영역을 복수개의 서브영역으로 분할하고, 각 서브영역 별로 식별자를 매핑하는 위치 매핑부를 더 포함하고,
상기 가스감지부는 상기 가스가 감지되면, 상기 타겟 이미지 내에서 상기 가스발생 추정영역에 대응되는 서브영역을 검출하고, 검출된 서브영역의 식별자를 기초로 상기 가스발생 추정영역의 실제위치를 결정하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 시스템. - 제2항에 있어서,
상기 타겟영역은 복수개의 도어가 설치되어 있고,
상기 위치 매핑부는,
상기 기준 이미지 내에서 상기 타겟영역을 각 도어 별로 분할하여 상기 도어 별로 서브영역을 생성하고, 각 도어의 실제번호를 상기 서브영역의 식별자로 매핑하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 시스템. - 제1항에 있어서,
상기 타겟영역을 촬영하여 획득한 기준 이미지 내에 포함된 도어의 수직 에지 성분을 허프변환(Hough Transform)하여 각 도어 간 경계 후보직선을 추출하고, 상기 기준 이미지 내에서 상기 타겟영역을 상기 경계 후보직선을 기준으로 분할한 서브영역 별로 식별자를 매핑하는 위치 매핑부를 더 포함하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 시스템, - 제1항에 있어서,
서로 다른 타입의 복수개의 학습이미지를 이용하여 상기 가스감지모델을 단계적으로 학습시키는 가스감지모델 학습부를 더 포함하는 것을 특징으로 하는 가스감지모델을 이용한 가스 감지 시스템. - 제1항에 있어서,
상기 가스감지모델은 FASTER R-CNN(Region Convolutional Neural Network) 알고리즘을 미리 정해진 복수개의 학습 이미지로 학습함에 의해 생성되는 것을 특징으로 하는 가스감지모델을 이용한 가스 감지 시스템. - 복수개의 제1 타입 가스영상 이미지를 이용하여 딥러닝 기반의 영상인식 객체 알고리즘을 학습시키는 단계; 및
복수개의 제1 타입 가스 영상 이미지 내지 제3 타입 가스 영상 이미지 중 적어도 하나를 이용하여 상기 딥러닝 기반의 영상 인식 객체 알고리즘을 순차적으로 학습시켜 가스감지모델을 생성하는 단계를 포함하고
상기 제1 타입 가스 영상 이미지는 미리 정해진 바운딩 박스 내에서 가스 이미지 크기의 비율이 기준치 이상인 것을 특징으로 하는 가스감지모델 생성방법 - 제7항에 있어서,
상기 딥러닝 기반의 영상인식 객체 알고리즘은 FASTER R-CNN 알고리즘인 것을 특징으로 하는 가스감지모델 생성방법. - 제7항에 있어서,
상기 제2 타입 가스영상 이미지는 상기 바운딩 박스 내에서 가스 이미지 크기의 비율이 상기 기준치 미만인 가스영상 이미지이고, 상기 제3 타입 가스영상 이미지는 배경이 포함되어 있는 가스 영상 이미지들 중 상기 바운딩 박스 내에서 가스 이미지 크기의 비율이 상기 기준치 이상인 가스 영상 이미지인 것을 특징으로 하는 가스감지모델 생성방법. - 제7항에 있어서,
상기 가스감지모델을 생성하는 단계는,
상기 학습된 딥러닝 기반의 영상인식 객체 알고리즘을 상기 제2 타입 가스영상 이미지로 학습시키는 단계;
상기 제2 타입 가스영상 이미지로 학습된 딥러닝 기반의 영상인식 객체 알고리즘을 상기 제1 및 제3 타입 가스영상 이미지로 학습시키는 단계; 및
상기 제1 및 제3 타입 가스영상 이미지로 학습된 딥러닝 기반의 영상인식 객체 알고리즘을 상기 제1 내지 제3 타입 가스영상 이미지로 학습시키는 단계를 포함하는 것을 특징으로 하는 가스감지모델 생성방법. - 제7항에 있어서,
n-1차(n은 2 이상의 자연수)차 학습의 학습률은 n 차 학습의 학습률보다 큰 값으로 설정되는 것을 특징으로 하는 가스감지모델 생성방법. - 타겟영역을 촬영하여 타겟 이미지를 획득하는 단계;
상기 타겟 이미지를 가스감지 모델에 입력하여 상기 타겟 이미지 내에서 가스발생 추정영역의 좌표 및 가스발생 확률값을 산출하는 단계;
상기 가스발생 확률값과 문턱값을 비교하여 상기 타겟영역에서 가스 발생 여부를 판단하는 단계; 및
상기 타겟영역에서 가스가 발생된 것으로 판단되면 상기 타겟영역 내에서 상기 가스발생 추정영역의 실제위치를 결정하는 단계를 포함하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 방법. - 제12항에 있어서,
상기 타겟영역을 미리 촬영하여 획득한 기준 이미지 상에서 상기 타겟영역을 복수개의 서브영역으로 분할하고, 각 서브영역 별로 식별자를 매핑하는 단계를 더 포함하고,
상기 실제 위치를 결정하는 단계는, 상기 가스발생 추정영역에 대응되는 서브영역을 검출하고, 검출된 서브영역의 식별자를 기초로 상기 가스발생 추정영역의 실제위치를 결정하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 방법. - 제13항에 있어서,
상기 타겟영역은 복수개의 도어가 설치되어 있고,
상기 실제 위치를 결정하는 단계는,
상기 기준 이미지 내에서 상기 타겟영역을 각 도어 별로 분할하여 서브영역을 생성하고, 각 도어의 실제번호를 상기 서브영역의 식별자로 매핑하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 방법. - 제12항에 있어서,
서로 다른 타입의 복수개의 학습 이미지를 이용하여 상기 가스 감지 모델을 단계적으로 학습시키는 단계를 더 포함하는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 방법. - 제15항에 있어서,
상기 학습 이미지의 타입은 상기 학습 이미지에 포함된 가스의 형태 및 상기 학습 이미지에 포함된 배경유무에 따라 분류되는 것을 특징으로 하는 가스감지모델을 이용한 가스감지 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180174206A KR102174444B1 (ko) | 2018-12-31 | 2018-12-31 | 가스감지모델 생성방법, 가스감지모델을 이용한 가스감지 시스템, 및 가스감지방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180174206A KR102174444B1 (ko) | 2018-12-31 | 2018-12-31 | 가스감지모델 생성방법, 가스감지모델을 이용한 가스감지 시스템, 및 가스감지방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20200087351A true KR20200087351A (ko) | 2020-07-21 |
| KR102174444B1 KR102174444B1 (ko) | 2020-11-04 |
Family
ID=71832586
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180174206A Active KR102174444B1 (ko) | 2018-12-31 | 2018-12-31 | 가스감지모델 생성방법, 가스감지모델을 이용한 가스감지 시스템, 및 가스감지방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102174444B1 (ko) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20230094429A (ko) * | 2021-12-21 | 2023-06-28 | 에스프레스토 주식회사 | 불법카메라 탐지 방법 및 장치 |
| CN119887775A (zh) * | 2025-03-28 | 2025-04-25 | 四联智能技术股份有限公司 | 基于图像处理的蒸汽锅炉气体泄漏检测方法 |
| JP2026512245A (ja) * | 2024-01-18 | 2026-04-15 | ポスコ カンパニー リミテッド | コークスオーブンドアのシール装置及び方法 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102860186B1 (ko) | 2025-02-18 | 2025-09-16 | 탈렌트엘엔지(주) | 누출 경로 제어를 통한 극저온 이중배관의 무선 온도센서 기반 누출 감지 시스템 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110048417A (ko) * | 2009-11-02 | 2011-05-11 | 계명대학교 산학협력단 | 퍼지 규칙을 이용한 화재 불꽃 감지 방법 |
| KR20150009166A (ko) * | 2013-07-16 | 2015-01-26 | 주식회사 포스코 | 코크스 오븐의 가스 누출 통제 시스템 및 그 방법 |
| KR101610432B1 (ko) * | 2009-06-03 | 2016-04-07 | 플리어 시스템즈, 인크. | 적외선 카메라 시스템 및 듀얼 센서 응용 방법 |
| KR20180105787A (ko) * | 2017-03-16 | 2018-10-01 | 한국기술교육대학교 산학협력단 | 퍼지로직과 딥러닝 통합 기반의 화재 감지 장치 및 방법 |
-
2018
- 2018-12-31 KR KR1020180174206A patent/KR102174444B1/ko active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101610432B1 (ko) * | 2009-06-03 | 2016-04-07 | 플리어 시스템즈, 인크. | 적외선 카메라 시스템 및 듀얼 센서 응용 방법 |
| KR20110048417A (ko) * | 2009-11-02 | 2011-05-11 | 계명대학교 산학협력단 | 퍼지 규칙을 이용한 화재 불꽃 감지 방법 |
| KR20150009166A (ko) * | 2013-07-16 | 2015-01-26 | 주식회사 포스코 | 코크스 오븐의 가스 누출 통제 시스템 및 그 방법 |
| KR20180105787A (ko) * | 2017-03-16 | 2018-10-01 | 한국기술교육대학교 산학협력단 | 퍼지로직과 딥러닝 통합 기반의 화재 감지 장치 및 방법 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20230094429A (ko) * | 2021-12-21 | 2023-06-28 | 에스프레스토 주식회사 | 불법카메라 탐지 방법 및 장치 |
| JP2026512245A (ja) * | 2024-01-18 | 2026-04-15 | ポスコ カンパニー リミテッド | コークスオーブンドアのシール装置及び方法 |
| CN119887775A (zh) * | 2025-03-28 | 2025-04-25 | 四联智能技术股份有限公司 | 基于图像处理的蒸汽锅炉气体泄漏检测方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102174444B1 (ko) | 2020-11-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12541688B2 (en) | Systems and methods for evaluating perception system quality | |
| CN110494861B (zh) | 基于图像的异常检测方法和系统 | |
| IL275535B1 (en) | Analysis of a captured image to determine a test result | |
| WO2021047232A1 (zh) | 交互行为识别方法、装置、计算机设备和存储介质 | |
| CN109670383B (zh) | 视频遮蔽区域选取方法、装置、电子设备及系统 | |
| KR20200087351A (ko) | 가스감지모델 생성방법, 가스감지모델을 이용한 가스감지 시스템, 및 가스감지방법 | |
| KR20200087297A (ko) | 인공신경망 기반의 영상 분할을 이용한 불량 검출 방법 및 불량 검출 장치 | |
| CN112364715A (zh) | 核电作业异常监控方法、装置、计算机设备和存储介质 | |
| CN109727275B (zh) | 目标检测方法、装置、系统和计算机可读存储介质 | |
| CN110321852B (zh) | 一种动作类型识别方法、装置、存储介质及计算机设备 | |
| CN111191532A (zh) | 基于施工区域的人脸识别方法、装置、计算机设备 | |
| EP1881454A1 (en) | Image processing for change detection | |
| Cheong et al. | A novel face detection algorithm using thermal imaging | |
| JP7151875B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| CN112528854A (zh) | 振动对象监测方法、装置、计算机设备和存储介质 | |
| CN113792595A (zh) | 目标行为检测方法、装置、计算机设备和存储介质 | |
| CN113963292A (zh) | 基于标识检测仓库门的方法、装置、计算机设备和介质 | |
| KR102754010B1 (ko) | 딥러닝 기반의 개인정보 추적을 위한 비식별 방법 및 이를 수행하는 시스템 | |
| JP4292371B2 (ja) | 移動体監視装置 | |
| KR20220107494A (ko) | 근적외선 카메라를 사용한 딥 러닝 기반 드론 감지 시스템 | |
| US9547913B2 (en) | Information processing device, information processing apparatus, information processing method, and program | |
| CN111402185B (zh) | 一种图像检测方法及装置 | |
| CN114119531A (zh) | 应用于校园智慧平台的火灾检测方法、装置及计算机设备 | |
| CN119479011A (zh) | 人员状态检测方法、装置、设备、存储介质和计算机程序 | |
| Zhuang et al. | Improved YOLOv11 for Classroom Behavior Detection and Student Counting |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
St.27 status event code: A-0-1-A10-A12-nap-PA0109 |
|
| PA0201 | Request for examination |
St.27 status event code: A-1-2-D10-D11-exm-PA0201 |
|
| D13-X000 | Search requested |
St.27 status event code: A-1-2-D10-D13-srh-X000 |
|
| D14-X000 | Search report completed |
St.27 status event code: A-1-2-D10-D14-srh-X000 |
|
| PE0902 | Notice of grounds for rejection |
St.27 status event code: A-1-2-D10-D21-exm-PE0902 |
|
| E13-X000 | Pre-grant limitation requested |
St.27 status event code: A-2-3-E10-E13-lim-X000 |
|
| P11-X000 | Amendment of application requested |
St.27 status event code: A-2-2-P10-P11-nap-X000 |
|
| P13-X000 | Application amended |
St.27 status event code: A-2-2-P10-P13-nap-X000 |
|
| P22-X000 | Classification modified |
St.27 status event code: A-2-2-P10-P22-nap-X000 |
|
| PG1501 | Laying open of application |
St.27 status event code: A-1-1-Q10-Q12-nap-PG1501 |
|
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
St.27 status event code: A-1-2-D10-D22-exm-PE0701 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
St.27 status event code: A-2-4-F10-F11-exm-PR0701 |
|
| PR1002 | Payment of registration fee |
St.27 status event code: A-2-2-U10-U11-oth-PR1002 Fee payment year number: 1 |
|
| PG1601 | Publication of registration |
St.27 status event code: A-4-4-Q10-Q13-nap-PG1601 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-5-5-R10-R18-oth-X000 |
|
| PR1001 | Payment of annual fee |
St.27 status event code: A-4-4-U10-U11-oth-PR1001 Fee payment year number: 4 |
|
| PR1001 | Payment of annual fee |
St.27 status event code: A-4-4-U10-U11-oth-PR1001 Fee payment year number: 5 |
|
| P22-X000 | Classification modified |
St.27 status event code: A-4-4-P10-P22-nap-X000 |
|
| PR1001 | Payment of annual fee |
St.27 status event code: A-4-4-U10-U11-oth-PR1001 Fee payment year number: 6 |
|
| U11 | Full renewal or maintenance fee paid |
Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE) Year of fee payment: 6 |