KR20210077322A - 인공지능 기반의 시설물 외관 분석 방법 - Google Patents

인공지능 기반의 시설물 외관 분석 방법 Download PDF

Info

Publication number
KR20210077322A
KR20210077322A KR1020190168832A KR20190168832A KR20210077322A KR 20210077322 A KR20210077322 A KR 20210077322A KR 1020190168832 A KR1020190168832 A KR 1020190168832A KR 20190168832 A KR20190168832 A KR 20190168832A KR 20210077322 A KR20210077322 A KR 20210077322A
Authority
KR
South Korea
Prior art keywords
damage
facility
reference line
artificial intelligence
appearance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020190168832A
Other languages
English (en)
Other versions
KR102321249B1 (ko
Inventor
남우석
김규선
정현준
박경한
김영민
신철식
김동기
Original Assignee
국토안전관리원
주식회사 핀텔
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 국토안전관리원, 주식회사 핀텔 filed Critical 국토안전관리원
Priority to KR1020190168832A priority Critical patent/KR102321249B1/ko
Publication of KR20210077322A publication Critical patent/KR20210077322A/ko
Application granted granted Critical
Publication of KR102321249B1 publication Critical patent/KR102321249B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M5/00—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings
    • G01M5/0033—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings by determining damage, crack or wear
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/16—Measuring arrangements characterised by the use of optical techniques for measuring the deformation in a solid, e.g. optical strain gauge
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Image Analysis (AREA)

Abstract

본 발명의 일 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법은, 시설물 영상을 수신하는 단계; 상기 시설물 영상의 분석범위를 설정하는 단계; 상기 분석범위 내에 포함된 기준선을 설정하는 단계; 상기 기준선의 길이값을 수신하는 단계; 및 상기 시설물 영상에 포함된 손상의 위치 및 크기를 도출하는 단계를 포함하고, 상기 손상의 크기는, 상기 기준선의 픽셀(pixel)값과 상기 기준선의 길이값의 비율에 따라 결정할 수 있다.

Description

인공지능 기반의 시설물 외관 분석 방법{AI-BASED ANALYSIS METHOD OF FACILITY APPEARANCE}
본 발명은 인공지능 기반의 시설물 외관 분석 방법에 관한 것이다.
시설물은 건설된 이후에 시간이 지남에 따라 노후화가 진행되므로, 시설물의 노화 상태를 파악하기 위해 안전하고 신뢰도 있는 검사 방법이 필요하다.
시설물은 시설물 안전관리에 관한 특별법에 정한 주기나 수준에 의해 점검 및 진단을 받는다. 이러한 과정에서 가장 중요한 기본조사인 외관조사는 육안에 의존하여 수행된다.
육안에 의한 조사는 점검자 주관에 의존하기 때문에 누락이나 오류로 인해 자칫 대형사고로 이어질 수 있으며 정밀하고 객관적인 점검결과가 필요한 실정이다.
4차 산업혁명 기술인 인공지능(AI) 기술이 전 분야에 활발히 적용 중인 바, 시설물 안전점검 분야에서도 연구개발이 활발히 진행되고 있다.
AI 기술의 활용도를 높이고 신뢰성을 확보하기 위해서는 양질의 학습데이터 취득이 중요하다.
본 발명의 발명자는 인공지능 기반의 시설물 외관 분석 방법에 대해 오랫동안 연구하고 시행착오를 거친 끝에 본 발명을 완성하기에 이르렀다.
본 발명의 목적은 시설물의 손상을 자동으로 검출하는 인공지능 기반의 시설물 외관 분석 방법을 제공하는 것이다.
본 발명의 명시되지 않은 또 다른 목적들은 하기의 상세한 설명 및 그 효과로부터 용이하게 추론할 수 있는 범위 내에서 추가적으로 고려될 것이다.
본 발명의 일 측면에 따르면, 시설물 영상을 수신하는 단계; 상기 시설물 영상의 분석범위를 설정하는 단계; 상기 분석범위 내에 포함된 기준선을 설정하는 단계; 상기 기준선의 길이값을 수신하는 단계; 및 상기 시설물 영상에 포함된 손상의 위치 및 크기를 도출하는 단계를 포함하고, 상기 손상의 크기는, 상기 기준선의 픽셀(pixel)값과 상기 기준선의 길이값의 비율에 따라 결정하는, 인공지능 기반의 시설물 외관 분석 방법이 제공된다.
상기 시설물 영상을 수신하는 단계와, 상기 시설물 영상의 분석범위를 설정하는 단계 사이에, 상기 시설물 영상이 복수인 경우, 상기 복수의 시설물 영상을 연결하는 스티칭 단계를 더 포함할 수 있다.
상기 스티칭 단계는, 상기 복수의 시설물 영상의 순서를 수신하는 단계; 및 상기 복수의 시설물 영상을 기설정된 순서에 따라 연결하는 단계를 포함할 수 있다.
상기 분석범위를 설정하는 단계는, 출발점을 수신하는 단계; 상기 출발점 외의 복수의 경유점을 수신하는 단계; 상기 출발점으로의 회귀입력을 수신하는 단계; 및 상기 출발점 및 상기 경유점을 꼭지점으로 하는 도형의 내부를 상기 분석범위로 결정하는 단계를 포함할 수 있다.
상기 분석범위 내에 포함된 기준선을 설정하는 단계는, 상기 분석범위 내에서 드래그(drag)되는 경로; 또는 상기 분석범위 내에서 순차적으로 입력되는 복수의 포인트(point)를 순서대로 경유하는 경로;를 기준선으로 결정할 수 있다.
상기 손상의 크기를 도출하는 단계는, 상기 시설물 영상에 포함된 손상의 픽셀값을 추출하는 단계; 및 상기 기준선의 픽셀값과 상기 기준선의 길이값 비율에 기반하여, 상기 손상의 픽셀값의 폭과 길이를 산출하는 단계를 포함할 수 있다.
상기 손상의 위치를 상기 시설물 영상 상에 표시할 수 있다.
상기 시설물 영상에 포함된 손상의 유형을 결정하는 단계를 더 포함할 수 있다.
상기 손상의 유형은, 콘크리트 손상, 강재 손상으로 구분되고, 상기 콘크리트 손상은, 균열, 박리, 철근노출 및 백태 중 적어도 하나로 세분화되고, 상기 강재 손상은, 부식 및 도장손상 중 적어도 하나로 세분화될 수 있다.
본 발명의 실시예에 따르면, 분석 결과의 정확도와 신뢰성이 향상될 수 있다.
본 발명의 실시예에 따르면, 인간의 안전 사고를 방지할 수 있다.
한편, 여기에서 명시적으로 언급되지 않은 효과라 하더라도, 본 발명의 기술적 특징에 의해 기대되는 이하의 명세서에서 기재된 효과 및 그 잠정적인 효과는 본 발명의 명세서에 기재된 것과 같이 취급됨을 첨언한다.
도 1은 본 발명의 일 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법의 순서도이다.
도 2는 본 발명에서 분석범위를 설정하는 것을 나타내는 도면이다.
도 3은 본 발명에서 기준선과 길이값을 입력하는 것을 나타내는 도면이다.
도 4는 본 발명에서 본 발명에서 시설물 외관 분석 결과 화면을 나타내는 도면이다.
도 5는 본 발명의 다른 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법의 순서도이다.
도 6은 본 발명의 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법의 예시이다.
첨부된 도면은 본 발명의 기술사상에 대한 이해를 위하여 참조로서 예시된 것임을 밝히며, 그것에 의해 본 발명의 권리범위가 제한되지는 아니한다.
본 발명을 설명함에 있어서 관련된 공지기능에 대하여 이 분야의 기술자에게 자명한 사항으로서 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명에 따른 인공지능 기반의 시설물 외관 분석 방법을 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 본 발명의 일 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법의 순서도이다. 이러한 인공지능 기반의 시설물 외관 분석 방법은, 본 발명에 따른 인공지능 시스템(이하, 시스템이라 함)에 의해 구현될 수 있다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법은, 시설물 영상 수신 단계(S100), 분석범위 설정 단계(S200), 기준선 설정 단계(S300), 기준선의 길이값 수신 단계(S400), 분석 단계(S500)를 포함할 수 있다.
시설물 영상 수신 단계(S100)는 분석 대상이 되는 시설물 영상을 수신하는 단계이다. 사용자는 분석 대상이 되는 영상을 입력할 수 있다. 분석 대상이 되는 영상은 시설물과 손상으로 추정되는 부분이 함께 촬영된 것일 수 있다.
한편, 시설물 영상은 정지영상과 동영상 중 적어도 하나를 포함할 수 있다. 또한 시설물 영상은 드론에 의해 촬영된 것일 수 있다. 드론에 의해 촬영된 시설물 영상은 드론에 내장된 메모리에 저장되거나, 본 발명의 시스템으로 전송될 수 있다.
시설물 영상이 드론으로 촬영되면, 인간이 시설물을 직접 관찰하지 않아도 시설물 외관 분석이 이루어질 수 있기 때문에, 인간의 안전 사고 위험이 줄어들 수 있다.
분석범위 설정 단계(S200)는 시설물 영상의 분석범위를 수신하는 단계로서, 시설물 영상 중 손상으로 추정되는 부분을 포함하는 소정의 분석범위를 수신하는 단계이다. 사용자는 소정의 분석범위를 입력할 수 있다.
분석범위 설정 단계(S200)는 출발점 수신하는 단계(S210), 경유점 수신 단계(S220), 회귀입력 수신 단계(S230) 및 분석범위 결정 단계(S240)를 포함할 수 있다.
출발점 수신하는 단계(S210)는 사용자가 처음 입력하는 지점을 출발점으로서 수신하는 단계이다. 사용자는 분석범위로 설정하고자 하는 부분의 외곽을 따라 도형을 그려서 분석범위를 지정할 수 있는데, 상기 외곽 상의 일 지점을 출발점으로 지정할 수 있다. 사용자는 상기 외곽 상의 일 지점을 클릭(click)입력하여 출발점으로 지정할 수 있다.
경유점 수신 단계(S220)는 사용자가 입력하는 상기 출발점 외의 복수의 경유점을 수신하는 단계이다. 사용자는 상기 외곽 상의 적어도 두 개의 지점들(출발점 제외)을 경유점으로 지정할 수 있다. 사용자는 복수의 경유점을 클릭입력할 수 있다.
회귀입력 수신 단계(S230)는 복수의 경유점 수신 후에 입력되는 출발점 입력을 수신하는 단계이다. 사용자는 출발점 및 복수의 경유점 입력 후에 출발점을 다시 입력함으로써 '회귀입력' 이벤트를 생성할 수 있다. 사용자는 상기 외곽 상의 일 지점을 출발점으로 지정하고, 상기 외곽 상의 복수의 경유점을 지정하고, 다시 출발점으로 회귀할 수 있다. 사용자는 출발점 지정, 경유점 지정, 출발점으로 회귀를 클릭입력할 수 있다.
분석범위 결정 단계(S240)는 상기 출발점 및 상기 경유점을 꼭지점으로 하는 도형의 내부를 상기 분석범위로 결정하는 단계이다. 즉, 사용자가 출발점 지정, 경유점 지정, 출발점으로 회귀를 입력하게 되면, 출발점과 경유점을 꼭지점으로 하는 도형이 완성되며, 그 도형의 내부가 분석범위로 결정될 수 있다. 회귀입력까지 이루어지지 않으면 분석범위는 결정될 수 없다.
기준선 설정 단계(S300)는 시설물 영상에서 손상의 크기를 계산하기 위한 기준 설정에 필요한 단계이다.
기준선 설정 단계(S300)에서, 분석범위 내에서 드래그(drag)되는 경로를 기준선으로 결정할 수 있다. 즉, 기준선 설정 단계(S300)는 분석범위 내에서 드래그입력을 수신하는 단계; 및 기준선을 결정하는 단계를 포함할 수 있다.
분석범위 내에서 드래그입력을 수신하는 단계에서, 사용자가 분석범위 내에서 클릭입력 상태로 커서를 이동시켜 드래그하는 경우, '드래그입력' 이벤트가 생성될 수 있다. 기준선을 결정하는 단계에서, 드래그된 경로를 기준선으로 결정할 수 있다.
여기서, 기준선은 설계도 상에서 길이를 알 수 있는 특정 부분이 될 수 있다. 예를들어, 기준선은 교각의 높이일 수 있다. 이 경우, 기준선 드래그는 교각의 수직거리를 따라 이루어질 수 있다. 또는, 기준선은 시설물 영상 내에 포함되는 적어도 하나의 균열일 수 있다. 이 경우, 기준선 드래그는 상기 균열을 따라 이루어질 수 있다.
또는, 기준선 설정 단계(S300)에서, 분석범위 내에서 순차적으로 입력되는 복수의 포인트(point)를 순서대로 경유하는 경로를 기준선으로 결정할 수 있다. 즉, 기준선 설정 단계(S300)는 분석범위 내에서 복수의 포인트입력을 순차적으로 수신하는 단계; 및 기준선을 결정하는 단계를 포함할 수 있다.
분석범위 내에서 복수의 포인트입력을 순차적으로 수신하는 단계에서, 사용자가 분석범위 내에서 복수의 포인트를 클릭하여 입력하는 경우, '포인트입력' 이벤트가 생성될 수 있다. 이러한 포인트입력 이벤트는 각각의 포인트에 대해 생성될 수 있다. 복수의 포인트입력은 순차적으로 이루어지며, 포인트입력 이벤트도 포인트 입력 순서대로 생성될 수 있다. 기준선을 결정하는 단계에서, 순차적으로 입력된 복수의 포인트를 입력 순서대로 경유하는 경로를 기준선으로 결정할 수 있다.
여기서, 기준선은 설계도 상에서 길이를 알 수 있는 특정 부분이 될 수 있다. 예를들어, 기준선은 교각의 높이일 수 있다. 이 경우, 기준선 드래그는 교각의 수직거리를 따라 이루어질 수 있다. 또는, 기준선은 시설물 영상 내에 포함되는 적어도 하나의 균열일 수 있다. 이 경우, 복수의 포인트는 상기 균열을 따라 입력될 수 있다. 복수의 포인트는 상기 균열의 일단에서 타단까지로 이동하면서 순차 입력될 수 있다. 기준선은 일단과 타단을 포함하는 모든 포인트들을 입력 순서대로 경유하는 선으로 결정될 수 있다.
기준선의 길이값 수신 단계(S400)는 기준을 설정하기 위한 또 다른 단계이다. 기준선의 길이값 수신 단계(S400)는 사용자에 의해 기준선의 길이에 대한 정보를 수신하는 단계이다.
기준선의 길이값은 설계도 상에서의 특정 부분의 실제 길이일 수 있다. 예를 들어, 기준선이 교각의 높이인 경우, 교각의 높이 수치가 기준선의 길이값이 될 수 있다. 또는 기준선의 길이값은 시설물 영상 내에 포함되는 적어도 하나의 균열의 실측값일 수 있다. 예를 들어, 기준선이 어느 한 균열인 경우, 기준선의 길이값은 균열의 실제 길이일 수 있다. 사용자는 기준선의 길이값을 직접 입력할 수 있다.
분석 단계(S500)는 상기 시설물 영상에 포함된 손상의 위치 및 크기를 결정하는 단계를 포함할 수 있다. 또한 분석 단계(S500)는 시설물 영상에 포함된 손상의 유형을 결정하는 단계를 더 포함할 수 있다.
분석 단계(S500)는 비율 산출 단계(S510), 손상의 위치 및 크기를 도출하는 단계(S520)를 포함할 수 있고, 손상의 크기는, 상기 기준선의 픽셀(pixel)값과 상기 기준선의 길이값의 비율에 따라 결정할 수 있다. 또한, 분석 단계(S500)는 손상의 유형 도출 단계(S530)를 더 포함할 수 있다.
비율 산출 단계(S510)는 시설물 영상의 기준을 설정하는 단계로서, 기준선의 픽셀(pixel)값과 상기 기준선의 길이값의 비율을 계산할 수 있다. 기준선의 픽셀값은 시설물 영상 내에서 기준선이 차지하는 픽셀의 개수이다.
손상의 위치 및 크기를 도출하는 단계(S520)는 손상의 위치를 자동으로 인식하여 손상의 위치를 결정하고, 상기 비율에 따라 손상의 크기를 결정하는 단계이다.
인공지능에 의하면 시설물 손상에 대해 학습하여 손상의 위치를 자동으로 인식할 수 있다. 과거 안전점검 시 촬영된 영상, 웹사이트로부터 추출한 영상 등으로부터 영상데이터를 획득하고, 영상을 손상의 유형에 따라 분류하여 빅데이터를 구축할 수 있다. 인공지능은 상기 빅데이터를 학습함으로써 손상의 유무, 손상의 위치를 분석할 수 있다.
상기 손상의 위치는 상기 시설물 영상 상에 표시될 수 있다.
손상의 크기를 도출하는 단계는 손상의 폭과 길이를 도출하는 단계이며, 산출한 비율 산출 단계(S510)에서 산출한 비율을 고려하여 손상의 실제 크기를 결정할 수 있다.
손상의 크기를 도출하는 단계는, 상기 시설물 영상에 포함된 손상의 픽셀값을 추출하는 단계; 및 상기 기준선의 픽셀값과 상기 기준선의 길이값 비율에 기반하여, 상기 손상의 픽셀값의 폭과 길이를 산출하는 단계를 포함할 수 있다.
상기 시설물 영상에 포함된 손상의 픽셀값을 추출하는 단계는 시설물 영상에서 자동으로 인식된 손상 각각의 픽셀값을 추출하는 단계이다. 픽셀값은 손상의 폭과 길이에 대해 각각으로 추출될 수 있다.
상기 기준선의 픽셀값과 상기 기준선의 길이값 비율에 기반하여, 상기 손상의 픽셀값의 폭과 길이를 산출하는 단계는, 비율 산출 단계(S151)에서 산출한 비율에 따라 손상 각각의 폭과 길이를 계산하는 단계이다.
손상의 유형 결정 단계(S530)는 인공지능에 의해 손상의 유형을 결정하는 단계이다.
손상의 유형은 콘크리트 손상과 강재 손상으로 구분될 수 있다. 콘크리트 손상은, 균열, 망상균열, 박리/박락, 철근노출, 백태를 포함할 수 있다. 강재 손상은 부식, 도장손상을 포함할 수 있다.
균열은 콘크리트 외벽에 형성된 갈라짐이며, 선형으로 형성될 수 있다. 방향에 따라 축방향(종방향), 축과 직각방향(수평방향), 경사방향(대각선방향)으로 구분될 수 있다.
망상균열은 거북등균열이라고도 하며 불규칙한 방향성을 가지는 균열이다.
박리/박락은 콘크리트 표면 일부가 떨어져 나간 것이다. 박리/박락은 동결 융해 등과 같은 원인에 의해 발생될 수 있다. 콘크리트 박리(scaling)는 콘크리트 표면의 모르타르가 점진적으로 손실되는 현상이며, 박락(spalling)은 콘크리트가 균열을따라서 일부 조각이 떨어져 나가는 현상이다. 박락은 층분리 현상을 포함하는 개념으로 이해할 수 있다.
철근노출은 콘크리트 내부의 철근이 노출된 것이다.
백태(efflorescence)는 노후화된 콘크리트 표면에 발생되는 백색의 결정으로，콘크리트중의 황산 칼슘, 황산 마그네슘, 수산화칼슘 등이 물에 녹아 침출되어 대기 중의 탄산가스와 화합되어 생성될 수 있다. 백태가 발생되는 원인은 콘크리트 타설 직후 시멘트 중의 가용 성분이 표면에서 석출되기도 하며, 콘크리트 구조체에 우수 및 지하수 등이 침입하여 콘크리트 중의 가용 성분이 콘크리트 표면으로 이동되어 발생될 수 있다. 백태는 콘크리트 구조물에 모세관 공극 또는 균열이 발생된 결함부로 물이 침투하고 있는 부위에서 발생될 수 있다. 따라서 백태가 발생한 부위에 대한 상세 점검을 실시하시고 균열 등의 결함 유무를 판단하여 구조물에 대한 근본적인 보수를 우선적으로 시행할 수 있어야 한다.
강재 부식은 강재가 산화되어 부식된 것이며, 도장손상은 강재의 도막이 손상된 유형이다.
인공지능의 학습을 위한 빅데이터는 손상이 있는 것으로 판단된 손상범주; 손상은 아니나 손상과 유사한 것으로 판단된 유사범주; 및 손상확인이 불가하다고 판단된 확인불가범주로 분류되어 구축될 수 있다.
손상범주는 시설물에 육안으로 구분 가능한 손상이 발생한 영상을 포함한다. 손상범주는 손상의 크기 정보가 포함된 제1 하위범주; 및 그 외로 분류되는 제2 하위범주를 포함할 수 있다.
제1 하위범주는 시설물에 육안으로 구분 가능한 손상이 확인되고, 또한, 그 손상의 크기 정보를 포함하는 영상을 포함한다. 제1 하위범주는 손상의 크기에 대한 척도를 제공하는 척도수단을 포함하는 영상을 포함한다.
예를 들어, 손상과 눈금자가 함께 촬영된 영상을 포함할 수 있다. 눈금자는 균열자를 포함할 수 있다. 눈금자의 눈금은 손상과 인접하여 위치할 수 있고, 영상으로부터 손상의 크기를 직관적으로 알 수 있다.
제2 하위범주는 시설물에 육안으로 구분 가능한 손상이 확인되나, 손상의 크기 정보를 직관적으로 알 수 없는 영상을 포함할 수 있다.
제1 하위범주와 제2 하위범주 각각 손상의 유형 별로 다시 세분화될 수 있다.
유사범주는 시설물에 손상이 발생하지 않았으나, 손상과 혼동 가능한 부분이 촬영된 영상을 포함할 수 있다. 혼동이 가능한 부분은 콘크리트의 음각 장식, 시공 이음부, 거미줄, 식물, 그림(낙서), 글자 중 적어도 하나일 수 있다.
유사범주의 카테고리를 두는 것은 인공지능의 학습의 정확도를 향상시키기 위함이다.
확인불가범주는 시설물에 육안으로 구분 가능한 손상의 유무가 확인되지 않는 영상을 포함할 수 있다. 예를 들어, 손상과 백묵이 겹쳐진 경우, 손상이 육안으로 구분 불가능하므로 손상확인이 불가능한 것으로 볼 수 있다. 이러한 확인불가범주의 영상은 인공지능의 학습데이터로 부적절한 것으로 볼 수 있으므로, 인공지능의 딥러닝에는 활용되지 않을 수 있다.
한편, 분석단계(S500)에서 손상의 크기는 손상면적으로 표현될 수 있는데, 손상면적은 손상의 폭과 길이에 따라 산출될 수 있다. 또한, 분석 단계(S500)에서 분석범위의 면적과 손상면적의 비율에 따라 결함율(손상면적의 크기/분석범위의 크기)이 산출될 수 있다. 또한, 분석 단계(S500)에서 결함율, 손상의 유형 등 정보를 고려하여 시설물 외관의 등급이 도출될 수 있다.
인공지능은 구축된 빅데이터를 학습하여 손상을 구별해내고 손상의 위치를 판별하는 기능을 내장할 수 있다. 인공지능에 의하면 시설물 영상에서 손상의 위치를 자동으로 인식하고, 손상의 유형을 자동으로 구분할 수 있다. 또한, 손상의 정도를 평가할 수 있고, 손상의 정도에 따라 시설물 외관의 등급으로 표현될 수 있다.
인공지능에 의하면, 인간에 의한 육안 검사에 비해 분석 결과의 신뢰도와 정확도가 높아진다. 또한, 인간이 직접 시설물로 가서 육안으로 살펴보지 않고도 인공지능이 분석할 수 있으므로, 시설물 가까이 인간이 가야하는 불편과 위험성이 감소된다.
도 2는 본 발명에서 분석범위를 설정하는 것을 나타내는 도면이다. 도 3은 본 발명에서 기준선과 길이값을 입력하는 것을 나타내는 도면이다. 도 4는 본 발명에서 본 발명에서 시설물 외관 분석 결과 화면을 나타내는 도면이다.
도 2를 참조하면, ①영역 그리기를 선택하면 분석범위를 입력할 수 있다. 분석범위의 입력은 ② 내지 ⑥의 과정을 통해 이루어질 수 있다. ②출발점을 지정할 수 있는데, 이 경우 출발점 지정은 원하는 지점에서의 마우스의 좌클릭입력으로 이루어질 수 있다. ③, ④, ⑤경유점을 지정할 수 있는데, 원하는 지점에서의 마우스의 좌클릭입력으로 이루어질 수 있다. ⑥출발점으로 회귀할 수 있는데, 출발점에서 우클릭입력으로 회귀입력 이벤트가 생성될 수 있다. 다만, 우클릭으로 제한되는 것은 아니며, 좌클릭으로 회귀할 수도 있다.
여기서, 출발점, 경유점을 꼭지점으로 하는 도형이 완성되고, 도형의 내부(A)가 분석범위로 설정된다.
도 3을 참조하면, ①기준거리 그리기를 선택하면 기준선을 입력할 수 있다. ②마우스를 클릭한 후 드래그하면, 드래그의 경로(B)가 기준선이 된다. ③기준선의 길이값은 기준거리입력란에 입력될 수 있다. 기준선과 기준선의 길이값은 저장될 수 있다(⑤).
한편, 도 3의 화면에서 분석할 내용을 지정할 수 있다(④). 다만, 분석 내용 지정의 과정은 생략될 수 있다.
도 4는 손상의 위치을 나타내는 화면을 도시한다. ①손상과 관련된 결과 리포트가 제공될 수 있으며, 결과 리포트는 분석범위 내에서 인식되는 손상의 위치(C)를 노란 박스로 나타내고 있다. 결과 리포트에는 시설물 정보(시설물명, 부위명) 등의 기초 정보도 표시될 수 있다.
또한, ②각 손상 별로 손상의 크기와 손상의 유형도 제공될 수 있다. 손상의 크기는 폭과 길이, 나아가 손상면적으로 표현될 수 있고, 손상면적은 폭과 길이에 따라 산출될 수 있다. 손상의 유형(결합 종류)은 빅데이터의 분류 체계에 대응하여 표현될 수 있다.
또한, 결과 리포트에는 분석범위의 면적과, 손상면적을 고려하여 결함율이 표시될 수 있다. 이러한 결함율에 따라 시설물 외관의 등급이 결정될 수 있다.
도 5는 본 발명의 다른 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법의 순서도이다.
도 5를 참조하면, 도 1과 비교하여 본 발명의 다른 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법은 스티칭단계(S600)를 더 포함한다.
스티칭단계(S600)는 상기 시설물 영상이 복수인 경우, 상기 복수의 시설물 영상을 연결하는 단계로, 상기 시설물 영상을 수신하는 단계와, 상기 시설물 영상의 분석범위를 설정하는 단계 사이에 진행될 수 있다.
상기 스티칭 단계(S600)는, 상기 복수의 시설물 영상의 순서를 수신하는 단계(S610); 및 상기 복수의 시설물 영상을 기설정된 순서에 따라 연결하는 단계(S620)를 포함할 수 있다.
상기 복수의 시설물 영상의 순서를 수신하는 단계(S610)는 사용자가 복수의 시설물 영상에 대해 각각의 순서를 설정입력함에 따라 이루어질 수 있다. 복수의 시설물 영상의 순서는, 복수의 시설물 영상을 배열하는 순서를 의미한다.
상기 복수의 시설물 영상을 기설정된 순서에 따라 연결하는 단계(S620)는 기설정된 순서에 따라 복수의 시설물 영상을 연속적으로 연결하는 단계이다.
스티칭단계(S600)가 완료되면 분석범위 설정 단계(S200)가 진행되며, 그 이후부터는 상술한 설명과 동일하다.
도 6은 본 발명의 실시예에 따른 인공지능 기반의 시설물 외관 분석 방법의 예시이다.
도 6을 참조하면, 인공지능 시스템에 의한 시설물 외관 분석에 있어, 사용자의 입력 행위(10)와 인공지능 시스템의 분석 행위(20)가 도시되어 있다.
사용자는 시설물명을 입력하고, 시설물 부위를 입력할 수 있다. 시설물명은 '한강대교'와 같이 시설물의 명칭일 수 있다. 시설물 부위는 선택 가능한 옵션에서 하나를 지정할 수 있고, 시설물 부위는 '교각'과 같은 부위의 명칭일 수 있다.
시설물 영상 입력은 촬영 후 외부 메모리에 저장되거나, 타 서버로부터 전송받은 시설물 영상을 입력하는 행위이다. 예를 들어, 촬영은 드론에 의해 이루어질 수 있고, 드론에 의해 촬영된 시설물 영상은 드론의 내장 메모리에 저장되거나, 무선통신을 통해 본 발명의 시스템으로 전송될 수 있다. 드론에 의해 시설물 영상을 획득하는 경우 인간이 직접 시설물 가까이로 가지 않아도 되기 때문에 안전사고 위험성이 줄어들 수 있다.
시설물 영상이 복수인 경우 스티칭은 이루어질 수 있고, 시설물 영상이 하나인 경우에는 스티칭을 스킵(skip)할 수 있다. 스티칭을 진행하는 경우, 복수의 시설물 영상에 대해 순서를 설정하고, 스티칭을 할 수 있다. 이러한 스티칭 단계는 사용자의 명령 입력(순서 지정, 스티칭 입력)에 의해 진행될 수 있다.
분석범위의 설정은 출발점과 경유점을 수신함으로써 이루어질 수 있고, 상술한 바와 같다. 기준선 설정은 기준선 드래그입력을 수신함으로써 이루어지고, 상술한 바와 같다. 또한, 사용자 입력에 따라 기준선의 길이값을 수신할 수 있다.
한편, 기준선 설정은 기준선 드래그입력이 아닌 복수의 포인트입력을 수신함으로써 이루어질 수 있고, 기준선은 입력 순서대로 각 포인트를 경유하는 경로로 결정될 수 있다.
시스템은 기준선의 픽셀값과 기준선의 길이값 간의 비율을 산출할 수 있다. 또한, 산출된 비율을 이용하여 시설물 외관을 분석할 수 있다. 시설물 외관 분석은 손상 위치 분석, 손상 크기 분석, 손상 유형 분석을 포함할 수 있고, 손상 크기 분석은 상기 산출된 비율에 따라 이루어질 수 있다.
시스템은 결과 리포트를 출력하여 분석 결과를 표시할 수 있다. 결과 리포트는 시설물 영상에 손상의 위치가 직접 표시되는 화면을 포함할 수 있다. 결과 리포트는 시설물의 기본 정보를 포함할 수 있다. 결과 리포트는 손상의 크기, 손상의 유형을 포함할 수 있다. 결과 리포트는 시설물의 결함율과 시설물 외관의 등급을 포함할 수 있다.
사용자의 명령에 따라 시스템은 손상의 상세보기를 표시할 수 있다. 손상의 상세보기는 선택된 손상의 세부 정보를 포함할 수 있다.
본 발명의 보호범위가 이상에서 명시적으로 설명한 실시예의 기재와 표현에 제한되는 것은 아니다. 또한, 본 발명이 속하는 기술분야에서 자명한 변경이나 치환으로 말미암아 본 발명의 보호범위가 제한될 수도 없음을 다시 한 번 첨언한다.

Claims (9)

  1. 시설물 영상을 수신하는 단계;
    상기 시설물 영상의 분석범위를 설정하는 단계;
    상기 분석범위 내에 포함된 기준선을 설정하는 단계;
    상기 기준선의 길이값을 수신하는 단계; 및
    상기 시설물 영상에 포함된 손상의 위치 및 크기를 도출하는 단계를 포함하고,
    상기 손상의 크기는, 상기 기준선의 픽셀(pixel)값과 상기 기준선의 길이값의 비율에 따라 결정하는,
    인공지능 기반의 시설물 외관 분석 방법.
  2. 제1항에 있어서,
    상기 시설물 영상을 수신하는 단계와, 상기 시설물 영상의 분석범위를 설정하는 단계 사이에,
    상기 시설물 영상이 복수인 경우, 상기 복수의 시설물 영상을 연결하는 스티칭 단계를 더 포함하는,
    인공지능 기반의 시설물 외관 분석 방법.
  3. 제2항에 있어서,
    상기 스티칭 단계는,
    상기 복수의 시설물 영상의 순서를 수신하는 단계; 및
    상기 복수의 시설물 영상을 기설정된 순서에 따라 연결하는 단계를 포함하는,
    인공지능 기반의 시설물 외관 분석 방법.
  4. 제1항에 있어서,
    상기 분석범위를 설정하는 단계는,
    출발점을 수신하는 단계;
    상기 출발점 외의 복수의 경유점을 수신하는 단계;
    상기 출발점으로의 회귀입력을 수신하는 단계; 및
    상기 출발점 및 상기 경유점을 꼭지점으로 하는 도형의 내부를 상기 분석범위로 결정하는 단계를 포함하는,
    인공지능 기반의 시설물 외관 분석 방법.
  5. 제1항에 있어서,
    상기 분석범위 내에 포함된 기준선을 설정하는 단계는,
    상기 분석범위 내에서 드래그(drag)되는 경로; 또는 상기 분석범위 내에서 순차적으로 입력되는 복수의 포인트(point)를 순서대로 경유하는 경로;를 기준선으로 결정하는,
    인공지능 기반의 시설물 외관 분석 방법.
  6. 제1항에 있어서,
    상기 손상의 크기를 도출하는 단계는,
    상기 시설물 영상에 포함된 손상의 픽셀값을 추출하는 단계; 및
    상기 기준선의 픽셀값과 상기 기준선의 길이값 비율에 기반하여, 상기 손상의 픽셀값의 폭과 길이를 산출하는 단계를 포함하는,
    인공지능 기반의 시설물 외관 분석 방법.
  7. 제1항에 있어서,
    상기 손상의 위치를 상기 시설물 영상 상에 표시하는,
    인공지능 기반의 시설물 외관 분석 방법.
  8. 제1항에 있어서,
    상기 시설물 영상에 포함된 손상의 유형을 결정하는 단계를 더 포함하는,
    인공지능 기반의 시설물 외관 분석 방법.
  9. 제8항에 있어서,
    상기 손상의 유형은, 콘크리트 손상, 강재 손상으로 구분되고,
    상기 콘크리트 손상은, 균열, 박리, 철근노출 및 백태 중 적어도 하나로 세분화되고,
    상기 강재 손상은, 부식 및 도장손상 중 적어도 하나로 세분화되는,
    인공지능 기반의 시설물 외관 분석 방법.
KR1020190168832A 2019-12-17 2019-12-17 인공지능 기반의 시설물 외관 분석 방법 Active KR102321249B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190168832A KR102321249B1 (ko) 2019-12-17 2019-12-17 인공지능 기반의 시설물 외관 분석 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190168832A KR102321249B1 (ko) 2019-12-17 2019-12-17 인공지능 기반의 시설물 외관 분석 방법

Publications (2)

Publication Number Publication Date
KR20210077322A true KR20210077322A (ko) 2021-06-25
KR102321249B1 KR102321249B1 (ko) 2021-11-03

Family

ID=76629087

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190168832A Active KR102321249B1 (ko) 2019-12-17 2019-12-17 인공지능 기반의 시설물 외관 분석 방법

Country Status (1)

Country Link
KR (1) KR102321249B1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102410354B1 (ko) * 2022-01-26 2022-06-22 충북대학교 산학협력단 전원주택 관리 장치 및 방법
KR102539835B1 (ko) * 2023-01-10 2023-06-02 (재) 한국건설품질연구원 3d 카메라를 이용한 디지털 트윈 생성 및 손상 분석 시스템
KR20230116665A (ko) * 2022-01-27 2023-08-04 한양대학교 에리카산학협력단 설명가능한 인공지능 기반 건축물 외관 상태 평가 방법 및 장치
KR20230133606A (ko) * 2022-03-11 2023-09-19 주식회사 워터인포랩스 인공지능 기반 구조물 손상 판단 학습 데이터 확충 서비스 시스템 및 서비스 제공 방법
KR20240050012A (ko) 2022-10-11 2024-04-18 주식회사 에프디 교각 구동장치를 이용한 ai 균열 검출방법
KR102755874B1 (ko) * 2023-11-06 2025-01-21 한국철도기술연구원 이미지 세그멘테이션 기반 화물의 파손 레벨 분석 장치 및 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102666424B1 (ko) 2023-03-23 2024-05-17 주식회사 미래종합환경 드론을 이용한 건물 외벽 진단 시스템
KR102881073B1 (ko) * 2024-11-29 2025-11-05 주식회사 패턴앤 작업현장 영상 수집 및 위험요소 분석 기능을 구비한 관제서버

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007232684A (ja) * 2006-03-03 2007-09-13 Ntt Comware Corp 計測装置および計測方法並びに計測プログラム
JP2019144191A (ja) * 2018-02-23 2019-08-29 株式会社市川工務店 橋梁などの構造物を検査するための画像処理システム、画像処理方法及びプログラム
KR102037893B1 (ko) * 2019-07-05 2019-11-26 세종대학교산학협력단 디지털 외관조사망도 구축 시스템 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007232684A (ja) * 2006-03-03 2007-09-13 Ntt Comware Corp 計測装置および計測方法並びに計測プログラム
JP2019144191A (ja) * 2018-02-23 2019-08-29 株式会社市川工務店 橋梁などの構造物を検査するための画像処理システム、画像処理方法及びプログラム
KR102037893B1 (ko) * 2019-07-05 2019-11-26 세종대학교산학협력단 디지털 외관조사망도 구축 시스템 및 방법

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102410354B1 (ko) * 2022-01-26 2022-06-22 충북대학교 산학협력단 전원주택 관리 장치 및 방법
KR20230116665A (ko) * 2022-01-27 2023-08-04 한양대학교 에리카산학협력단 설명가능한 인공지능 기반 건축물 외관 상태 평가 방법 및 장치
KR20230133606A (ko) * 2022-03-11 2023-09-19 주식회사 워터인포랩스 인공지능 기반 구조물 손상 판단 학습 데이터 확충 서비스 시스템 및 서비스 제공 방법
KR20240050012A (ko) 2022-10-11 2024-04-18 주식회사 에프디 교각 구동장치를 이용한 ai 균열 검출방법
WO2024080436A1 (ko) * 2022-10-11 2024-04-18 주식회사 에프디 교각 구동장치를 이용한 ai 균열 검출방법
KR102539835B1 (ko) * 2023-01-10 2023-06-02 (재) 한국건설품질연구원 3d 카메라를 이용한 디지털 트윈 생성 및 손상 분석 시스템
KR102755874B1 (ko) * 2023-11-06 2025-01-21 한국철도기술연구원 이미지 세그멘테이션 기반 화물의 파손 레벨 분석 장치 및 방법

Also Published As

Publication number Publication date
KR102321249B1 (ko) 2021-11-03

Similar Documents

Publication Publication Date Title
KR102321249B1 (ko) 인공지능 기반의 시설물 외관 분석 방법
Wei et al. Instance-level recognition and quantification for concrete surface bughole based on deep learning
Kim et al. Automated dimensional quality assessment for formwork and rebar of reinforced concrete components using 3D point cloud data
Duque et al. Bridge deterioration quantification protocol using UAV
Paal et al. Automated damage index estimation of reinforced concrete columns for post-earthquake evaluations
Adhikari et al. Image-based retrieval of concrete crack properties for bridge inspection
US12209972B2 (en) Inspection support device, inspection support method, and inspection support program
Lepot et al. A technology for sewer pipe inspection (Part 2): Experimental assessment of a new laser profiler for sewer defect detection and quantification
EP4148663A1 (en) Damage evaluating device, method, and program
Alexakis et al. A novel application of deep learning approach over IRT images for the automated detection of rising damp on historical masonries
JP2021060888A (ja) 設備工事の検査方法、および設備工事の検査システム
Pratibha et al. Deep learning-based YOLO network model for detecting surface cracks during structural health monitoring
Wang et al. Automatic quality inspection of rebar spacing using vision-based deep learning with RGBD camera
Meda et al. Enhanced structural damage detection, segmentation, and quantification using computer vision and deep learning
Schetakis et al. Towards geometric digital twins, including damage detection, from photos of residential buildings facades
Omer et al. Performance evaluation of bridges using virtual reality
Mandinec et al. Predicting façade deterioration using machine learning approach with drone imagery and microclimate data
Zhou et al. Defects inspection system for building facades using drones and deep learning method
Koch et al. Machine vision techniques for condition assessment of civil infrastructure
Karluklu et al. Enhanced image processing and storage for defect evaluation in BIM of inspected steel bridges
Silva et al. CNN-based model for automated anomaly recognition in facade execution to support Quality Management
Ribeiro et al. Crack detection in buildings using the YOLO v8 network
KR102280399B1 (ko) 시설물 외관조사를 위한 빅데이터 구축방법
Inoue et al. Robotic inspection tests of tunnel lining concrete with crack light-section device on variable guide frame
Andon et al. A study on image processing using artificial neural networks in civil engineering

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

R17-X000 Change to representative recorded

St.27 status event code: A-3-3-R10-R17-oth-X000

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 5