KR20200087369A - Vr을 이용한 교육 실기검정 시스템 및 그 방법 - Google Patents

Vr을 이용한 교육 실기검정 시스템 및 그 방법 Download PDF

Info

Publication number
KR20200087369A
KR20200087369A KR1020190003262A KR20190003262A KR20200087369A KR 20200087369 A KR20200087369 A KR 20200087369A KR 1020190003262 A KR1020190003262 A KR 1020190003262A KR 20190003262 A KR20190003262 A KR 20190003262A KR 20200087369 A KR20200087369 A KR 20200087369A
Authority
KR
South Korea
Prior art keywords
content data
test content
practical
actual
test
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020190003262A
Other languages
English (en)
Other versions
KR102254769B1 (ko
Inventor
원우연
서동수
Original Assignee
원우연
서동수
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 원우연, 서동수 filed Critical 원우연
Priority to KR1020190003262A priority Critical patent/KR102254769B1/ko
Publication of KR20200087369A publication Critical patent/KR20200087369A/ko
Application granted granted Critical
Publication of KR102254769B1 publication Critical patent/KR102254769B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G06Q50/205—Education administration or guidance
    • G06Q50/2057—Career enhancement or continuing education service
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—Three-dimensional [3D] image rendering

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Educational Technology (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Graphics (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 VR을 이용한 교육 실기검정 시스템에 관한 것으로서, 보다 상세하게는 실기검정 컨텐츠 데이터에 관련된 3D 배경을 로드받는 배경 모듈; 사용자의 이벤트 신호를 생성하는 VR 입력 장치; 실기검정을 위한 시나리오에 따른 시간의 흐름별 검정 단계를 입력받고, 상기 VR 입력 장치의 이벤트 신호에 대응하는 동작 정보를 생성하고, 상기 동작 정보를 상기 시간의 흐름별 검정 단계를 포함하는 실기검정 컨텐츠에 따라 상기 동작 정보에 각각 대응하는 복수개의 실기검정 컨텐츠 데이터로 적용하여 상기 3D 배경 하에서 상기 실기검정 컨텐츠 데이터를 시간 순서대로 표시하며, 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수를 계산하는 VR 뷰어 장치;를 포함하는 VR을 이용한 교육 실기검정 시스템에 관한 것이다.

Description

VR을 이용한 교육 실기검정 시스템 및 그 방법{Education and Qualification System and the Method Using VR}
본 발명은 VR을 이용한 교육 실기검정 시스템에 관한 것으로서, 보다 상세하게는 실기검정 컨텐츠 데이터에 관련된 3D 배경을 로드받는 배경 모듈; 사용자의 이벤트 신호를 생성하는 VR 입력 장치; 실기검정을 위한 시나리오에 따른 시간의 흐름별 검정 단계를 입력받고, 상기 VR 입력 장치의 이벤트 신호에 대응하는 동작 정보를 생성하고, 상기 동작 정보를 상기 시간의 흐름별 검정 단계를 포함하는 실기검정 컨텐츠에 따라 상기 동작 정보에 각각 대응하는 복수개의 실기검정 컨텐츠 데이터로 적용하여 상기 3D 배경 하에서 상기 실기검정 컨텐츠 데이터를 시간 순서대로 표시하며, 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수를 계산하는 VR 뷰어 장치;를 포함하는 VR을 이용한 교육 실기검정 시스템에 관한 것이다.
최근 IT 기술의 발전과 함께 오프라인(off-line) 교육과 더불어 온라인(on-line) 교육을 시행하는 이러닝(e-learning) 서비스가 부각되고 있다. 여기서, 오프라인 교육이란 학교, 학원 등에서 교재를 통해 실시되는 교육을 의미하고, 온라인 교육이란 인터넷 및 인트라넷 등의 네트워크 접속 기술과 다양한 멀티미디어 콘텐츠를 이용하여 실시되는 교육을 의미한다.
종래기술에 따르면 2차원 상에 텍스트, 이미지, 영상 및 음향 등의 조합을 이용하여 다양한 객체로 구성되는 교육용 콘텐츠를 직접 제작하고, 이에 3차원 효과를 결합하였다.
예로서 체험학습 시스템은 3D를 이용하여 가상으로 구현되는 지하철 역사, 박물관 등의 공간에서 사용자의 영상을 투영한 후, 사용자의 실제 동작에 따라 3D 콘텐츠 화면에 투영된 사용자의 영상 객체가 미리 설정된 약속된 동작을 수행하면서 3D콘텐츠 화면과 연동하면서 박물관 견학이나 원어민과의 영어 학습 등을 수행할 수 있도록 하는 시스템을 말한다.
그러나 3D 체험환경을 이용하는 콘텐츠를 제공할 수 있을 뿐 실제 다양한 동작이 필요한 실습이나 시험에 활용하지 못해 종래의 2차원적인 기능 시험과 시험 실습을 2차원 평면 모니터 상에서 실시할 수 밖에 없었다.
이러한 2차원 평면 모니터 상에서 실습은 현실감이 떨어지고 실제 기능 시험에서 어느 정도 점수를 얻을 수 있는지 확인하기 어려워 적극적인 참여를 요구하기 어렵다.
또한 모니터 상에 마우스를 통하여 움직이는 설정은 실습 참여자의 훈련에 대한 몰입감을 떨어뜨려 지속적인 학습 효과를 유지하기 어렵다.
특히 도 1에 도시된 바와 같이 2차원 평면적인 시뮬레이션 소프트웨어나 VR 모듈이나 3D Depth Camera 등을 이용하여 배선 작업 및 교육으로 활용해 왔으나 4차 산업에 대응하고 정밀한 실기 검정을 위해 다른 수단이 필요하게 되었다.
한편 종래 기술로 한국등록특허 제1036228호는 각종 데이터들을 저장하기 위한 평가 데이터 저장부; 및 시스템 동작의 전반을 제어하는 하드웨어 및 소프트웨어가 구현된 평가 시스템 제어부가 포함된 도로 경관디자인 VR 평가시스템으로서, 상기 평가 시스템 제어부는, 도로 주변의 주요 경관자원이 설정된 노선들이 입력된 VR 기법을 이용하여 온라인 상으로 시연하고, 상기 시연된 노선들에 대한 경관 평가를 위한 경관적 지표와 감성적 지표 중 적어도 하나를 포함하는 다수의 평가지표가 입력된 평가지표별 평가점수를 판단하는 수단에 의하여 노선들에 대한 경관 평가가 표시되도록 하며, 상기 노선들에 대한 경관 평가를 판단하는 수단에 의하여 노선들 중 최적의 노선이 선정되도록 하고, 상기 선정된 최적 노선의 선형계획이 가상현실 기법 수단을 통하여 온라인 상으로 시연되도록 하며, 상기 시연된 선형계획의 경관을 평가하기 위한 경관적 지표와 감성적 지표 중 적어도 하나를 포함하는 평가지표들이 입력된 평가지표별 평가점수를 종합하는 수단에 의하여 선형계획에 대한 경관이 평가되도록 하고, 상기 선형계획에 대한 경관평가를 판단하는 수단에 의하여 선형계획이 선정되도록 하는 것이다.
그러나 이러한 VR 평가 기술은 가상 현실 기법으로 평가 점수를 종합하는 수단으로서 사용자의 이벤트가 입력될 여지가 없는 수동적인 관람 성격의 VR 제품이다.
종래 발명인 한국공개특허 제2006-0086668호는 제품의 설계안에 따라 제작된 제품 데이터를 기초로 제품 컨텐츠를 생성하고, 소정의 입력 장치로부터 발생된 이벤트 동작을 상기 제품 컨텐츠에 적용하여 동작시키는 컨텐츠 관리 장치; 및 상기 컨텐츠 관리 장치로부터 전송된 제품 컨텐츠를 3차원 영상으로 디스플레이 하고, 상기 입력 장치로부터 발생된 이벤트를 분석하여 컨텐츠 관리 장치로 전송하는 VR 뷰어 장치를 포함하는 발명이다.
그러나 디자인 형태나 UI 설계를 변경할 경우 제품 컨텐츠에 해당 변경 사항을 즉시 반영할 수 있을 뿐 단순히 3차원 영상으로 표현되는 제품의 평가를 수행하는 적극적인 사용자의 액션을 수용하지 못하는 문제점이 발생한다.
한국공개특허 제2017-0057736호 한국공개특허 제2017-0057736호 한국공개특허 제2006-0086668호
본 발명은 상기와 같은 문제점을 해결하기 위해 이루어진 것으로서, VR 뷰어 장치에 실제 제품의 크기 및 형태와 동일한 제품 컨텐츠를 디스플레이하고, 이벤트 발생에 따라 실기검정 컨텐츠를 동작시킴으로써, 사용자에게 실제로 실기검정을 미리 예습시키는 효과를 제공하거나 실제 실기에 응용할 수 있으며, 이에 따라 실기검정 전에 보다 정확하게 학습하고 이를 평가할 수 있는 VR을 이용한 교육 실기검정 시스템을 제공하는 데 목적이 있다.
또한 본 발명은 실기검정 컨텐츠 데이터에 실제와 같은 가상의 다양한 느낌 및 시각적 효과를 주기 위한 것으로, 조명 효과를 통하여 배선의 배치와 제어부의 형태의 현실감을 높일 수 있는 VR을 이용한 교육 실기검정 시스템을 제공하는 데 목적이 있다.
상기 과제를 해결하기 위하여 본 발명은 실기검정 컨텐츠 데이터에 관련된 3D 배경을 로드받는 배경 모듈; 사용자의 이벤트 신호를 생성하는 VR 입력 장치; 실기검정을 위한 시나리오에 따른 시간의 흐름별 검정 단계를 입력받고, 상기 VR 입력 장치의 이벤트 신호에 대응하는 동작 정보를 생성하고, 상기 동작 정보를 상기 시간의 흐름별 검정 단계를 포함하는 실기검정 컨텐츠에 따라 상기 동작 정보에 각각 대응하는 복수개의 실기검정 컨텐츠 데이터로 적용하여 상기 3D 배경 하에서 상기 실기검정 컨텐츠 데이터를 시간 순서대로 표시하며, 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수를 계산하는 VR 뷰어 장치;를 포함한다.
상기 VR 뷰어 장치에 전송되어 디스플레이된 실기검정 컨텐츠는 3차원 영상이며, 실제 실습 부품 크기 및 배선의 형태와 동일하게 제작되어 디스플레이된다.
상기 VR 입력 장치는 핸디조이스틱 또는 모션 컨트롤러를 포함한다.
상기 VR 입력 장치를 통해 결합 이벤트를 발생시키면, 디스플레이된 실기검정 컨텐츠의 배선이 서로 결합되어 결합 이벤트를 발생시키면 실기검정 컨텐츠의 배관의 전선과 케이블 연결 관계가 변경되고, 사용자가 배선을 바라보는 각도를 변경하는 입력 이벤트를 발생시키면 실기검정 컨텐츠의 3D 배경 데이터의 각도가 변경되어 사용자는 실기검정 컨텐츠의 전체 디자인을 확인 할 수 있다.
복수개의 실기검정 컨텐츠 데이터를 기준이 되는 항목별 채점 기준 컨텐츠 데이터와 비교하여 채점이 된다.
또한 항목별 채점 기준 컨텐츠 데이터는 배경 모듈을 통해 실기 검정 실제 배선 결합 이미지로 업로드된다.
상기 VR 뷰어 장치는 3D 표시를 담당하는 VR 뷰어 모듈과 채점을 담당하는 VR 채점 모듈로 나뉜다.
본 발명은 실기검정을 위한 시나리오에 따른 3D 배경과 시간의 흐름별 실기검정 컨텐츠를 설계하는 단계; 상기 배경 모듈과 VR 뷰어 장치를 통해 3D 배경과 실기검정 컨텐츠를 로드하여 실기 검정을 준비하는 단계; VR 입력 장치를 통해 사용자가 3D 배경과 실기검정 컨텐츠에 반응하는 이벤트 신호를 생성하는 단계; 상기 VR 뷰어 장치를 통해 상기 이벤트 신호에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계; 상기 복수개의 실기검정 컨텐츠 데이터를 시간 순서대로 표시하는 단계; 상기 VR 뷰어 장치를 통해 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수로 계산하는 단계;로 이루어진다.
상기 VR 뷰어 장치를 통해 상기 동작 정보에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계는, 상기 설계된 3D 배경과 상기 복수개의 실기검정 컨텐츠 데이터에 따라 3차원 렌더링 과정을 수행하는 단계; 상기 렌더링이 적용된 상기 복수개의 실기검정 컨텐츠 데이터에 평가 정보를 추가하여 실기 검정 평가 컨텐츠를 생성하는 단계;로 이루어진다.
상기 VR 뷰어 장치를 통해 상기 동작 정보에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계는, 상기 3D 배경과 실기검정 컨텐츠에 따른 상기 제1 실기검정 컨텐츠 데이터에 생성하는 단계; 및 상기 제1 실기검정 컨텐츠 데이터를 기반으로 상기 이벤트 정보가 적용된 제2 실기검정 컨텐츠 데이터를 생성하는 단계;로 이루어진다.
본 발명은 상기 방법을 실행시키기 위한 프로그램이 기록된, 컴퓨터에서 판독 가능한 기록매체이다.
상기와 같이 이루어지는 본 발명은 실기검정 컨텐츠 데이터에 실제와 같은 가상의 다양한 느낌 및 시각적 효과를 주기 위한 것으로, 예를 들어 재질 효과, 조명 효과, 및 주변 환경 효과 등을 포함하고 실기검정 컨텐츠 데이터에 재질 효과를 적용하여 실물에 가까운 느낌을 창출할 수 있으며, 조명 효과를 통하여 배선의 배치와 제어부의 형태의 현실감을 높일 수 있다.
또한 본 발명은 상대적으로 적은 비용으로 많은 체험 환경을 구축할 수 있으며 콘텐츠는 한 번 만들면 무한정 사용할 수 있으므로 많은 학생들에게 고품질 실습 또는 실기검정을 제공할 수 있는 장점이 있다.
또한 본 발명은 실제와 동일하게 구현하면서 기존에 많은 부분을 차지하던 재료비가 필요없고 다양한 과제로 즉시 전환하여 평가가 가능하다.
또한 본 발명은 각각의 응시자가 마운티드 디스플레이 장치(또는 VR 기어)를 착용하고 한쌍의 핸디조이스틱를 양손에 쥔 채 실기검정에 임하기 때문에 부정 행위를 방지할 수 있다.
또한 본 발명은 원자로/고압 송전/고압 변압기/철탑 등의 위험한 환경에서 VR로 실습 수업이 가능하여 안전 사고 유의 및 사전 예방이 가능하다.
도 1은 종래 발명에 따른 2차원 평면 모니터 상에서 회로 실습하는 경우를 보여주는 도면이다.
도 2는 본 발명의 일실시예에 따른 VR을 이용한 교육 실기검정 시스템의 세부적인 구성을 보여주는 도면이다.
도 3은 본 발명의 일실시예에 따른 VR을 이용한 교육 실기검정 시스템을 사용하여 전기 공사 기능사 실기검정의 한예로 회로도와 완성된 모습을 보여주는 도면이다.
도 4는 본 발명의 다른 실시예에 따른 VR을 이용한 교육 실기검정 시스템를 사용하여 전기 공사 기능사 실기검정의 완성된 모습을 보여주는 도면이다.
도 5는 본 발명의 다른 실시예에 따른 VR을 이용한 교육 실기검정 시스템를 사용하여 전기 공사 기능사 실기검정의 작동 테스트 모습을 보여주는 도면이다.
도 6은 본 발명의 일실시예에 따른 전기 기능사 채점 기준을 보여주는 도면이다.
도 7은 본 발명의 일 실시예에 따른 VR을 이용한 교육 실기검정 방법을 보여주는 플로챠트이다.
도 8은 본 발명의 일 실시예에 따른 복수개의 실기검정 컨텐츠 데이터가 시간 순서대로 배열된 것을 설명하는 도면이다.
도 9는 본 발명의 일 실시예에 따른 결합 이벤트를 보여주는 도면이다.
본 발명을 충분히 이해하기 위해서 본 발명의 바람직한 실시예를 첨부 도면을 참조하여 설명한다. 본 발명의 실시예는 여러 가지 형태로 변형될 수 있으며, 본 발명의 범위가 아래에서 상세히 설명하는 실시예로 한정되는 것으로 해석되어서는 안 된다. 본 실시예는 당업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위하여 제공되는 것이다. 따라서 도면에서의 요소의 형상 등은 보다 명확한 설명을 강조하기 위해서 과장되어 표현될 수 있다. 각 도면에서 동일한 부재는 동일한 참조부호로 도시한 경우가 있음을 유의하여야 한다. 또한, 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 공지 기능 및 구성에 대한 상세한 기술은 생략된다.
도 2에 도시된 바와 같이 배경 모듈(32), VR 입력 장치(10), VR 뷰어 장치(22), 3D 실기검정 디스플레이 장치, 헤드 마운티드 디스플레이 장치(Head Mounted Display, HMD) 등을 포함한다.
이하 사용되는 실기검정이라는 용어에는 기능사 시험 뿐만 아니라 수능시험, 기존 학교 시험(중간/기말), 운전면허 시험, 원자로/고압 송전/고압 변압기/철탑 등의 위험한 환경에서의 실습 등이 포함된다.
배경 모듈(32)은 실기검정 컨텐츠 데이터에 관련된 3D 배경을 로드받는 장치로서, 실기검정 컨텐츠 데이터는 주로 전기 공사 기능사나 전기 공사 자격 시험 컨텐츠로서 실기검정 교실과 도 3과 같은 (a), (b) 실기검정 회로도, (c) 실기 검정 실제 배선 결합 이미지 등이 3D 영상으로 입력된다.
본 발명은 실기검정 컨텐츠 데이터에 실제와 같은 가상의 다양한 느낌 및 시각적 효과를 주기 위한 것으로, 예를 들어 재질 효과, 조명 효과, 및 주변 환경 효과 등을 포함한다.
또한 실기검정 실제 배선 결합 이미지에서 배선과 배선으로 연결되는 각각의 구성들은 후술하는 실기검정 컨텐츠로 입력되어 이벤트 신호에 따라 채점되어 실기검정의 합격 유무를 바로 확인할 수 있도록 한다.
VR 입력 장치(10)는 모션 컨트롤러나 핸디조이스틱을 통해 사용자의 이벤트 신호를 생성하는 장치로서, 예를 들어 헤드 전기 공사 기능사 실기검정 중에 마운티드 디스플레이 장치(또는 VR 기어)를 착용하고 한쌍의 핸디조이스틱를 양손에 쥔 채 오른손 핸디조이스틱은 배선의 역할을 왼손 핸디조이스틱은 제어기 배치 역할을 담당할 수 있도록 구분한다.
상기 VR 입력 장치(10)는 자이로(gyro) 센서, 가속도 센서 등과 같은 다양한 센서를 포함하여 구성될 수 있으며, 상기 시점 방향을 3차원 방향으로 센싱하여 측정할 수 있는 센싱부를 더 포함할 수 있다.
따라서 상기 VR 입력 장치(10)를 통해 결합 이벤트(예 : 배선의 결합, 도 9)를 발생시키면, 디스플레이된 실기검정 컨텐츠의 배선이 서로 결합되어 결합 이벤트를 발생시키면 실기검정 컨텐츠의 배관의 전선과 케이블 연결 관계가 변경되고, 사용자가 배선을 바라보는 각도를 변경하는 입력 이벤트(예 : 제어부를 보는 각도 변경)를 발생시키면 실기검정 컨텐츠의 3D 배경 데이터의 각도가 변경되어 사용자는 실기검정 컨텐츠의 전체 디자인을 확인 할 수 있다.
상기 VR 뷰어 장치(22)는 기본적인 3D VR 소프트웨어 구조를 유지하면서 원하는 작업(예를 들어, 이벤트를 처리)을 수행할 수 있다.
또한 상기 VR 뷰어 장치(22)는 저장부에 저장된 프로그램 및 데이터를 이용하여 상기 VR 입력 장치(10)의 전반적인 제어 기능을 실행한다. 제어부는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 저장부에 액세스하여, 저장부에 저장된 O/S(Operating System)를 이용하여 부팅을 수행할 수 있으며, 저장부에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
VR 뷰어 장치(22)는 3D 표시를 담당하는 VR 뷰어 모듈(22-1)과 채점을 담당하는 VR 채점 모듈(22-2)로 나뉜다.
VR 뷰어 장치(22)에 전송되어 디스플레이된 실기검정 컨텐츠는 3차원 영상이며, 실제 실습 제품 크기 및 형태와 동일하게 제작되어 디스플레이 된다.
또한 상기 VR 뷰어 모듈(22-1)은 실기검정을 위한 시나리오에 따른 시간의 흐름별 검정 단계를 입력받고, 상기 VR 입력 장치의 이벤트 신호에 대응하는 동작 정보를 생성한다.
예를 들어 도 5에 도시된 바와 같이 (a)의 회로를 기반으로 (b)의 구성을 나열하고, (c)와 같이 각 구성을 유기적으로 연결하여 (d)와 같은 동작 검사 기능을 갖고, 도 6에 도시된 바와 같이 배관 작업에서 전선관 굽힘과 기구 고정 및 배치와 같은 동작은 하나의 이벤트 신호로서 생성된다.
이러한 이벤트 신호는 채점 기준이 되는 복수개의 실기검정 컨텐츠 데이터(도 8 참조)를 생성하게 되고 복수개의 실기검정 컨텐츠 데이터를 기준이 되는 항목별 채점 기준 컨텐츠 데이터와 비교하여 채점이 된다. 여기에서 항목별 채점 기준 컨텐츠 데이터는 배경 모듈(32)을 통해 실기 검정 실제 배선 결합 이미지 등으로 업로드된다.
또한 상기 이벤트 신호는 VR 입력 장치(10) 이 외의 소정의 입력 장치를 통해 조작할 구성의 동작 명령 신호, 즉 소정 제품의 동작(구동)을 요청하는 명령 신호를 포함할 수 있다. 이러한 조작할 구성의 동작 명령 신호 등은 후술할 운전면허 시험, 원자로/고압 송전/고압 변압기/철탑 등의 위험한 환경에서의 실습 등에 적용될 수 있다.
VR 뷰어 모듈(22-1)은 상기 동작 정보를 상기 시간의 흐름별 검정 단계를 포함하는 실기검정 컨텐츠에 따라 상기 동작 정보에 각각 대응하는 복수개의 실기검정 컨텐츠 데이터로 적용하여 상기 3D 배경 하에서 상기 실기검정 컨텐츠 데이터를 시간 순서대로 표시한다.
왜냐하면 예를 들어 시간 순서대로 표시되지 않은 배선에 관한 실기검정 컨텐츠 데이터들은 정확한 배선이 일정 여유 상태로 색깔별로 배치가 되었는지 판단할 수 없기 때문이다.
VR 채점 모듈(22-2)은 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수를 계산한다.
즉 정확한 배선이 일정 여유 상태로 색깔별로 배치가 되었는지 판단하여 항목별 채점 기준 컨텐츠 데이터와 비교하여 채점이 된다.
또한 VR 뷰어 장치(22)에서는 실기검정 컨텐츠로 구성된 가상 실기검정 세계를 미리 확인할 수 있는 기능이 제공된다.
이는 추가로 설치되는 3D 실기검정 디스플레이 장치 화면에서 확인 가능하며, 미리 보기를 위한 카메라 모드(camera mode)를 지원한다.
본 발명은 프리(free) 카메라 모드를 지원하며, 프리 카메라 모드는 카메라의 위치, 각도를 사용자가 자유롭게 조정 가능한 모드이며, 실기검정 교실의 카메라 위치와 각도 정보를 활용하여 가상 세계(virtual world)를 화면에 보여주는 모드로 사용자가 각도를 마음대로 조절할 수는 있는 모드이다.
이 모드는 실기검정 컨텐츠 저작에서 각각 중요한 의미를 지니는데, 프리 카메라 모드에서는 카메라를 이리저리 움직이며 전체적인 가상 실기검정 세계에서 객체들과 액션존을 배치하는 등 전체 가상 세계의 틀을 잡기 유리하다.
또한 만들어진 실기검정 컨텐츠가 실제 적용되는 화면에서 어떻게 보일지 예측이 가능하고, 사용자(예 : 수험자)에게 꼭 보여져야 하는 실기검정 요소들이 원하는 위치에서 보이도록 할 수가 있다.
예를 들어 도 3에서 헤드 마운티드 디스플레이 장치를 착용한 사용자가 고개를 돌리거나 특정 구성을 세부적으로 관찰할 경우 실기검정 요소들 중 중요한 판단의 모티브가 되는 화면이 누락되는 경우를 방지할 수 있다.
세부적으로 본 발명은 3D 영상을 관찰하는 사용자의 시선에 기초하여, 상기 3D 영상의 일부 영역에서 재생되는 영상을 관심 영상으로 결정한다.
상기 관심 영상으로 결정하는 단계는 상기 사용자의 시선이 상기 3D 영상의 특정 영역에 고정된 경우, 상기 사용자의 시선이 고정된 상기 3D 영상의 영역을 결정하고, 3D 영상에 포함된 객체의 움직임에 따라 상기 사용자의 시선이 이동하는 경우, 상기 사용자의 시선의 이동 경로를 획득한다.
상기 사용자의 시선의 이동 경로에 대응하는 상기 3D 영상의 영역들을 결정한다. 따라서 VR 입력 장치(10)의 조작을 통해 실제 환경에서는 볼 수 없는 부분을 확대되거나 세부적 구성이 보이는 영역을 관심 영상으로 저장하여 보다 용이하게 실기검증을 실현할 수 있다.
본 발명에 따른 VR 뷰어 장치(22)는 일종의 시뮬레이터로서 물리적, 전기적 현상에 대한 모의실험 장치로서, 실제 상황에서 일어나는 움직임을 해석하기 위하여 동일 또는 유사하게 동작하도록 설계된 기계나 전기전자장치를 이용하여 해석하는 장치를 말한다.
본 발명에 따른 실기검정 시뮬레이터가 주로 사용되는 분야는 수능시험, 기존 학교 시험(중간/기말), 운전면허 시험, 원자로/고압 송전/고압 변압기/철탑 등의 위험한 환경에서의 실습 등을 포함하는 데 예를 들어 항공기, 선박, 자동차 등의 조종 훈련, 원자로 운전 훈련, 재난대비 훈련, 공항 관제훈련, 무기제어 훈련 등과 같은 기술적, 경제적으로 곤란한 조건을 반복적으로 재현하는 경우 복잡한 작동상황 등을 컴퓨터를 통하여 실제 장면과 동일하게 재현하게 된다.
특히, 차량 운전 시뮬레이터는 VR 뷰어 장치(22)를 통해 운전자의 운전조작 장치 조작, 도로 등 주변 상황 등을 입력받아 시뮬레이션을 수행하여 차량 움직임, 음향 등을 출력한다.
이때, 차량의 움직임에 상응하는 동적 상황 모션을 플랫폼에 전달하여 운전자가 차량을 실제 운전하는 느낌을 갖도록 한다.
이러한 차량 시뮬레이터는 고속도로, 시내 및 지방도로 주행 등의 도로주행 상황, 경사로 주행, 충돌이나 전복과 같은 교통사고 재현 등의 위험상황 등에 응용되어 차량의 운전연습, 운전자 지원 시스템 개발, 교통안전연구 등에 활용될 수 있다.
따라서 본 발명은 도로를 포함하는 지형을 갖는 가상공간, 및 상기 가상공간 내에서 이동하거나 작업을 수행하는 가상 차량을 생성하여 디스플레이하고, 상기 제어신호를 응답하여 상기 가상 차량의 이동 또는 작업을 제어하는 VR 뷰어 장치(22)를 제공한다.
이하 도 7을 참고하여 본 발명의 실시를 위한 VR을 이용한 교육 실기검정 방법에 대하여 자세히 설명한다.
먼저 실기검정을 위한 시나리오에 따른 3D 배경과 시간의 흐름별 실기검정 컨텐츠를 설계하여 배경 모듈에 입력한다(S101).
여기에서 실기검정 컨텐츠의 설계는 소정 동작 및 정보 구조(Information Architecture)를 추가하여 실기검정 컨텐츠 데이터를 생성한다. 즉, 소정 동작 및 정보 구조는 배관 또는 제어기를 배치하는 동작 명령, 전선과 케이블을 결합시키는 동작 명령, 제어기의 동작시 디스플레이 액정에 동작 정보 및 점수 정보를 제공하는 동작 명령 등으로 구성된다.
그리고 상기 배경 모듈과 VR 뷰어 장치를 통해 3D 배경과 실기검정 컨텐츠를 로드하여 실기 검정을 준비한다(S102).
또한 VR 입력 장치를 통해 사용자가 3D 배경과 실기검정 컨텐츠에 반응하는 이벤트 신호를 생성한다(S103).
계속하여 상기 VR 뷰어 장치를 통해 상기 이벤트 신호에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성한다(S104).
그리고 상기 복수개의 실기검정 컨텐츠 데이터를 시간 순서대로 표시한다.
마지막으로 상기 VR 뷰어 장치를 통해 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수로 계산한다(S105).
상기 VR 뷰어 장치를 통해 상기 동작 정보에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계는, 상기 설계된 3D 배경과 상기 복수개의 실기검정 컨텐츠 데이터에 따라 3차원 렌더링 과정을 수행하는 단계; 및 상기 렌더링이 적용된 상기 복수개의 실기검정 컨텐츠 데이터에 평가 정보를 추가하여 실기 검정 평가 컨텐츠를 생성하는 단계;로 이루어진다.
또한 상기 VR 뷰어 장치를 통해 상기 동작 정보에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계는, 상기 3D 배경과 실기검정 컨텐츠에 따른 상기 제1 실기검정 컨텐츠 데이터에 생성하는 단계; 및 상기 제1 실기검정 컨텐츠 데이터를 기반으로 상기 이벤트 정보가 적용된 제2 실기검정 컨텐츠 데이터를 생성하는 단계;로 이루어진다.
상기 제1 실기검정 컨텐츠 데이터와 제2 실기검정 컨텐츠 데이터의 변동 사항은 VR 채점 모듈(22-2)을 통한 점수 산정의 중요한 기준이 된다. 즉 실기검정을 위한 시나리오에 따른 시간의 흐름별 실기검정 컨텐츠 데이터 변경에 따라 기준 컨텐츠 데이터와 비교하여 그 유사도를 측정하여 점수를 산정한다.
본 발명의 일실시예로서 수능 시험 및 기존 학교 시험에 적용할 경우, 상기 S101 단계에서 시나리오에 따른 3D 배경과 시간의 흐름별 실기검정 컨텐츠를 설계하여 배경 모듈에 입력하는 것은 영어 수능 시험의 시험 목적과 이에 따른 시나리오를 설계하여 특정 배경에서 어떤 시험 문제가 발생되고, S103, S105 단계와 같이 이에 따른 수험생의 목소리나 행동의 반응을 입력받아 점수화할 수 있다.
또 다른 실시예로서 운전 면허 시험인 경우 VR 뷰어 장치(22)를 통해 운전자의 운전조작 장치 조작, 도로 등 주변 상황 등을 입력받아 시뮬레이션을 수행하고 생성된 이벤트에 따른 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수로 계산하여 운전 면허 합격 여부를 알 수 있다.
또 다른 실시예로서 본 발명은 굴삭기 실기 시험 등에도 적용될 수 있으며, 도로를 포함하는 지형을 갖는 가상공간, 및 상기 가상공간 내에서 이동하거나 작업을 수행하는 가상 굴삭기를 생성하여 디스플레이하고, VR 뷰어 장치(22)를 통해 상기 가상 굴삭기의 이동 또는 작업에 대한 이벤트에 따른 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수로 계산하여 굴삭기 면허 합격 여부를 알 수 있다.
즉 S 자 코스에서 정지 위치를 지키고, 작업시 기관의 회전 상태를 살피며, 굴착시 버켓의 흙량을 계산하여 점수화한다.
만일 포크를 든 채로 작업장을 나가거나, 안전벨트 미착용, 주행 중 포크가 땅에 닿는 경우 일정 점수로 감점시킨다.
본 발명의 또 다른 실시예로서 원자로/고압 송전/고압 변압기/철탑 등의 위험한 환경인 경우 이벤트 신호에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하면서 원자로/고압 송전 철탑 등에서 해서는 안되는 행동을 하는 경우 경고 알람과 함께 올바른 행동 요령을 3D 배경에 표시되도록 한다.
본 발명의 일 실시예로 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
10 : VR 입력 장치
22 : VR 뷰어 장치
22-1 : VR 뷰어 모듈
22-2 : VR 채점 모듈
32 : 배경 모듈

Claims (10)

  1. 실기검정 컨텐츠 데이터에 관련된 3D 배경을 로드받는 배경 모듈;
    사용자의 이벤트 신호를 생성하는 VR 입력 장치;
    실기검정을 위한 시나리오에 따른 시간의 흐름별 검정 단계를 입력받고, 상기 VR 입력 장치의 이벤트 신호에 대응하는 동작 정보를 생성하고,
    상기 동작 정보를 상기 시간의 흐름별 검정 단계를 포함하는 실기검정 컨텐츠에 따라 상기 동작 정보에 각각 대응하는 복수개의 실기검정 컨텐츠 데이터로 적용하여 상기 3D 배경 하에서 상기 실기검정 컨텐츠 데이터를 시간 순서대로 표시하며,
    상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수를 계산하는 VR 뷰어 장치;를 포함하는 VR을 이용한 교육 실기검정 시스템.
  2. 제1항에 있어서,
    상기 VR 뷰어 장치에 전송되어 디스플레이된 실기검정 컨텐츠는 3차원 영상이며, 실제 실습 부품 크기 및 배선의 형태와 동일하게 제작되어 디스플레이되는 것을 특징으로 하는 VR을 이용한 교육 실기검정 시스템.
  3. 제1항에 있어서,
    상기 VR 입력 장치는 핸디조이스틱 또는 모션 컨트롤러를 포함하는 것을 특징으로 하는 VR을 이용한 교육 실기검정 시스템.
  4. 제1항에 있어서,
    상기 VR 입력 장치를 통해 결합 이벤트를 발생시키면, 디스플레이된 실기검정 컨텐츠의 배선이 서로 결합되어 결합 이벤트를 발생시키면 실기검정 컨텐츠의 배관의 전선과 케이블 연결 관계가 변경되고, 사용자가 배선을 바라보는 각도를 변경하는 입력 이벤트를 발생시키면 실기검정 컨텐츠의 3D 배경 데이터의 각도가 변경되어 사용자는 실기검정 컨텐츠의 전체 디자인을 확인 할 수 있는 것을 특징으로 하는 VR을 이용한 교육 실기검정 시스템.
  5. 제1항에 있어서,
    상기 복수개의 실기검정 컨텐츠 데이터를 기준이 되는 항목별 채점 기준 컨텐츠 데이터와 비교하여 채점이 되는 것을 특징으로 하는 VR을 이용한 교육 실기검정 시스템.
  6. 제1항에 있어서,
    상기 VR 뷰어 장치(22)는 3D 표시를 담당하는 VR 뷰어 모듈(22-1)과 채점을 담당하는 VR 채점 모듈(22-2)로 나뉘는 것을 특징으로 하는 VR을 이용한 교육 실기검정 시스템.
  7. 실기검정을 위한 시나리오에 따른 3D 배경과 시간의 흐름별 실기검정 컨텐츠를 설계하는 단계;
    상기 배경 모듈과 VR 뷰어 장치를 통해 3D 배경과 실기검정 컨텐츠를 로드하여 실기 검정을 준비하는 단계;
    VR 입력 장치를 통해 사용자가 3D 배경과 실기검정 컨텐츠에 반응하는 이벤트 신호를 생성하는 단계;
    상기 VR 뷰어 장치를 통해 상기 이벤트 신호에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계;
    상기 복수개의 실기검정 컨텐츠 데이터를 시간 순서대로 표시하는 단계;
    상기 VR 뷰어 장치를 통해 상기 복수개의 실기검정 컨텐츠 데이터를 분석하여 미리 저장해둔 점수로 계산하는 단계;로 이루어진 VR을 이용한 교육 실기검정 방법.
  8. 제1항에 있어서,
    상기 VR 뷰어 장치를 통해 상기 동작 정보에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계는,
    상기 설계된 3D 배경과 상기 복수개의 실기검정 컨텐츠 데이터에 따라 3차원 렌더링 과정을 수행하는 단계;
    상기 렌더링이 적용된 상기 복수개의 실기검정 컨텐츠 데이터에 평가 정보를 추가하여 실기 검정 평가 컨텐츠를 생성하는 단계;로 이루어진 것을 특징으로 하는 VR을 이용한 교육 실기검정 방법.
  9. 제1항에 있어서,
    상기 VR 뷰어 장치를 통해 상기 동작 정보에 대응되는 복수개의 실기검정 컨텐츠 데이터를 생성하는 단계는,
    상기 3D 배경과 실기검정 컨텐츠에 따른 상기 제1 실기검정 컨텐츠 데이터에 생성하는 단계; 및
    상기 제1 실기검정 컨텐츠 데이터를 기반으로 상기 이벤트 정보가 적용된 제2 실기검정 컨텐츠 데이터를 생성하는 단계;로 이루어진 것을 특징으로 하는 VR을 이용한 교육 실기검정 방법.
  10. 청구항 제7항 내지 청구항 제9항 중 어느 한 항에 따른 방법을 실행시키기 위한 프로그램이 기록된, 컴퓨터에서 판독 가능한 기록매체.
KR1020190003262A 2019-01-10 2019-01-10 Vr을 이용한 교육 실기검정 시스템 및 그 방법 Active KR102254769B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190003262A KR102254769B1 (ko) 2019-01-10 2019-01-10 Vr을 이용한 교육 실기검정 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190003262A KR102254769B1 (ko) 2019-01-10 2019-01-10 Vr을 이용한 교육 실기검정 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20200087369A true KR20200087369A (ko) 2020-07-21
KR102254769B1 KR102254769B1 (ko) 2021-05-24

Family

ID=71832892

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190003262A Active KR102254769B1 (ko) 2019-01-10 2019-01-10 Vr을 이용한 교육 실기검정 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR102254769B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102861214B1 (ko) 2022-09-15 2025-09-18 주식회사 스탠스 교육 컨텐츠를 제공하는 장치, 방법 및 컴퓨터 프로그램

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060086668A (ko) 2005-01-27 2006-08-01 삼성전자주식회사 Ｖｒ 환경에서 제품 평가를 수행하는 시스템 및 그 방법
KR20140005324A (ko) * 2011-04-07 2014-01-14 링컨 글로벌, 인크. 가상 용접물의 가상 시험 및 검사
KR101636360B1 (ko) * 2015-10-26 2016-07-06 국방과학연구소 가상 현실을 이용한 가상 정비 훈련 시스템
KR20170057736A (ko) 2015-11-17 2017-05-25 주식회사 글로브포인트 교육용 vr 콘텐츠 제작 시스템 및 그 제어방법
KR20170129395A (ko) * 2016-05-17 2017-11-27 (주)토탈소프트뱅크 천장크레인 시뮬레이터의 훈련 평가 장치
KR20180060806A (ko) * 2016-11-29 2018-06-07 (주)토탈소프트뱅크 농용트랙터 시뮬레이터를 이용한 훈련 평가 장치와 그 방법
KR20180069510A (ko) * 2016-12-15 2018-06-25 고등기술연구원연구조합 가상현실 기반 조업자의 안전훈련 시스템

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060086668A (ko) 2005-01-27 2006-08-01 삼성전자주식회사 Ｖｒ 환경에서 제품 평가를 수행하는 시스템 및 그 방법
KR20140005324A (ko) * 2011-04-07 2014-01-14 링컨 글로벌, 인크. 가상 용접물의 가상 시험 및 검사
KR101636360B1 (ko) * 2015-10-26 2016-07-06 국방과학연구소 가상 현실을 이용한 가상 정비 훈련 시스템
KR20170057736A (ko) 2015-11-17 2017-05-25 주식회사 글로브포인트 교육용 vr 콘텐츠 제작 시스템 및 그 제어방법
KR20170129395A (ko) * 2016-05-17 2017-11-27 (주)토탈소프트뱅크 천장크레인 시뮬레이터의 훈련 평가 장치
KR20180060806A (ko) * 2016-11-29 2018-06-07 (주)토탈소프트뱅크 농용트랙터 시뮬레이터를 이용한 훈련 평가 장치와 그 방법
KR20180069510A (ko) * 2016-12-15 2018-06-25 고등기술연구원연구조합 가상현실 기반 조업자의 안전훈련 시스템

Also Published As

Publication number Publication date
KR102254769B1 (ko) 2021-05-24

Similar Documents

Publication Publication Date Title
US11501657B2 (en) Systems and methods for virtual reality based driver training
Martínez-Gutiérrez et al. Convergence of virtual reality and digital twin technologies to enhance digital operators’ training in industry 4.0
Zou et al. On-road virtual reality autonomous vehicle (VRAV) simulator: An empirical study on user experience
Allerton Principles of flight simulation
US10529248B2 (en) Aircraft pilot training system, method and apparatus for theory, practice and evaluation
KR102089374B1 (ko) 국가직무능력표준(ncs) 기반 건설기계 실습교육 시스템 및 방법
CN104765280A (zh) 无人机三维立体显控综合训练系统
KR20110068544A (ko) 가상현실 기반 훈련 시뮬레이터를 위한 가변형 플랫폼 장치 및 그 방법
KR101241120B1 (ko) 증강 현실을 이용한 배선 교육 시스템 및 그 교육 방법
CN105068857A (zh) 一种基于高逼真度驾驶模拟器的驾驶行为数据获取方法
Read et al. Task performance and situation awareness with a virtual reality head-mounted display
Silva et al. Mixed reality application to support infrastructure maintenance
Zhang et al. An efficient framework of developing video-based driving simulation for traffic sign evaluation
Somerville et al. Applications of extended reality in pilot flight simulator training: a systematic review with meta-analysis
Kruachottikul et al. Car drive simulation in metaverse with VR glasses for testing driver’s license
Sportillo et al. Light virtual reality systems for the training of conditionally automated vehicle drivers
KR102254769B1 (ko) Vr을 이용한 교육 실기검정 시스템 및 그 방법
Kanivets et al. VR simulator for studying the structure of tractors.
Sun et al. The design and implementation of computer hardware assembling virtual laboratory in the VR environment
Doerner et al. VR/AR case studies
Wei et al. Improving authentic learning by AR-Based simulator
Kandhai et al. Immersive driving simulation for driver education and analysis
Čulík et al. Creating a virtual environment for practical driving tests
CN118212828A (zh) 轨道驾驶训练方法、轨道驾驶训练系统、电子设备及存储介质
Zambrano et al. Immersive Learning of Traffic Laws for Responsible Driving

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E90F Notification of reason for final refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

Fee payment year number: 1

St.27 status event code: A-2-2-U10-U11-oth-PR1002

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

PC1903 Unpaid annual fee

Not in force date: 20240515

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

St.27 status event code: A-4-4-U10-U13-oth-PC1903

K11-X000 Ip right revival requested

St.27 status event code: A-6-4-K10-K11-oth-X000

PC1903 Unpaid annual fee

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20240515

St.27 status event code: N-4-6-H10-H13-oth-PC1903

PR0401 Registration of restoration

St.27 status event code: A-6-4-K10-K13-oth-PR0401

PR1001 Payment of annual fee

Fee payment year number: 4

St.27 status event code: A-4-4-U10-U11-oth-PR1001

R401 Registration of restoration
PR1001 Payment of annual fee

Fee payment year number: 5

St.27 status event code: A-4-4-U10-U11-oth-PR1001