KR20090077441A

KR20090077441A - How to correct keyboard template distortion on the projection keyboard

Info

Publication number: KR20090077441A
Application number: KR1020080003408A
Authority: KR
Inventors: 안재영
Original assignee: (주)디앤티
Priority date: 2008-01-11
Filing date: 2008-01-11
Publication date: 2009-07-15

Abstract

본 발명은 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법에 관한 것으로서, 특히 키보드 템플릿을 투사하는 프로젝션 모듈과, 상기 키보드 템플릿이 투사된 표면 바로 위를 수평으로 검색하는 IR 모듈과, 상기 키보드 템플릿을 촬영하여 이미지화시키는 센서 모듈과, 이들을 통해 입력되는 이미지를 통해 입력 이벤트를 발생하는 컨트롤러를 포함하는 프로젝션 키보드의 제어 방법에 있어서, 투사되는 상기 키보드 템플릿을 촬영하여 이미지화시킨 후 촬영 이미지 프레임을 생성하는 스캔 단계와; 상기 촬영 이미지 프레임과 기저장된 기준 이미지 프레임을 상호 비교하여 상기 촬영 이미지 프레임의 매개 변수인 세로측 기울기와 가로측 화면 비율을 검출하는 매개 변수 검출 단계와; 상기 매개 변수를 이용하여 상기 기준 이미지 프레임의 세로측 기울기와 가로측 화면 비율을 보정하는 보정 단계; 및 상기에서 보정된 보정 이미지 프레임을 키보드 템플릿으로 투사하는 투사 단계로 이루어지는 것을 특징으로 한다.The present invention relates to a method for correcting keyboard template distortion of a projection keyboard, and more particularly, to a projection module for projecting a keyboard template, an IR module for horizontally searching directly above the surface on which the keyboard template is projected, and photographing the keyboard template. A control method of a projection keyboard comprising a sensor module for generating a sensor and a controller for generating an input event through an image input through the sensor module, the method comprising: a scanning step of photographing and projecting the projected keyboard template to generate a photographed image frame; A parameter detecting step of comparing the photographed image frame with a pre-stored reference image frame to detect a vertical inclination and a horizontal aspect ratio which are parameters of the photographed image frame; A correcting step of correcting a vertical inclination and a horizontal aspect ratio of the reference image frame using the parameters; And a projection step of projecting the corrected image frame corrected as the keyboard template.

상기와 같은 본 발명에 따르면 CMOS 카메라로 투사된 키보드 템플릿을 촬영한 촬영 이미지 프레임과 기준 이미지 프레임을 상호 비교하여 세로측 기울기와 가로측 화면 비율을 검출하고, 이를 통해 기준 이미지 프레임을 보정함으로써 실제 투사되는 키보드 템플릿의 왜곡을 보상하여 투사된 키보드 템플릿이 기준 키보드 템플릿과 동일한 화면 비율 및 기울기를 갖도록 할 수 있다.According to the present invention as described above by comparing the photographed image frame and the reference image frame photographed by the keyboard template projected by the CMOS camera to detect the vertical tilt and horizontal aspect ratio, through which the actual image is projected by correcting the reference image frame Distortion of the keyboard template can be compensated for so that the projected keyboard template has the same aspect ratio and tilt as the reference keyboard template.

Description

KEYBOARD TEMPLATE COMPENSATING METHOD OF PROJECTION KEYBOARD}

본 발명은 프로젝션 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법에 관한 것으로서, 상세하게는 CMOS 카메라로 투사된 키보드 템플릿을 촬영한 촬영 이미지 프레임과 기준 이미지 프레임을 상호 비교하여 세로측 기울기와 가로측 화면 비율을 검출하고, 이를 통해 기준 이미지 프레임을 보정하도록 하는 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법에 관한 것이다.The present invention relates to a method for correcting a keyboard template distortion of a projection projection keyboard. Specifically, a vertical image slope and a horizontal aspect ratio are detected by comparing a photographing image frame and a reference image frame photographing a keyboard template projected by a CMOS camera. In addition, the present invention relates to a keyboard template distortion correction method of correcting a reference image frame.

현재 일반적으로 사용되고 있는 퍼스널 컴퓨터용의 키보드는 가정이나 사무실의 고정된 위치에서 사용할 수밖에 없는 한계성을 갖고 있다. 휴대형으로 개발되어 판매되고 있는 대표적인 휴대 전자 기기들인 PDA, 핸드폰, PMP 등의 입력 장치는 제품의 크기에 의한 제한성 때문에 사용자들의 불편한 입력 방법을 강요하고 있는 실정이다.Keyboards for personal computers, which are generally used today, have a limitation that they can only be used in a fixed position in a home or an office. Representative portable electronic devices, such as PDAs, mobile phones, and PMPs, which are developed and sold in a portable type, are forcing users to enter an inconvenient input method due to limitations due to the size of the product.

이러한 문제를 해결하기 위하여 프로젝션 키보드(또는 가상 키보드)가 개발되었고, 프로젝션 키보드는 전자 기기들이 소형화, 휴대용으로 발전하면서 필요로 하게 된, 크기와 장소를 제한 받지 않고 사용할 수 있도록 고안된, 전자기기와 사 용자 간에 의사 전달할 수 있는 효율적인 인터페이스 장치(Interface machine)이다.In order to solve this problem, a projection keyboard (or virtual keyboard) has been developed, which is designed to be used without limiting the size and location of electronic devices, which have been developed as miniaturized and portable. It is an efficient interface machine that can communicate between users.

이러한 프로젝션 키보드는 가시광선으로 키보드 템플릿(또는 자판본)을 형성하고, 상기 키보드 템플릿의 특정영역에 사용자의 손이 위치할 때 사용자의 손이 놓여진 위치를 결정한 후, 이것에 기초하여 사용자가 입력하고자 하는 문자를 결정하여 최종적으로 결정된 문자를 디스플레이시키게 된다.Such a projection keyboard forms a keyboard template (or keyboard) with visible light, determines the position of the user's hand when the user's hand is located in a specific area of the keyboard template, and then inputs the user's input based on this. To determine the character to be displayed and finally display the determined character.

도 1을 참조하면, 상기 프로젝션 키보드(10)는 프로젝션 모듈(11)과, IR 모듈(13)과, 센서 모듈(15) 및 컨트롤러(17)로 구성된다.Referring to FIG. 1, the projection keyboard 10 includes a projection module 11, an IR module 13, a sensor module 15, and a controller 17.

먼저, 프로젝션 모듈(11)은 굴곡이 없는 표면에 미리 디자인된 키보드 템플릿(20)을 투사한다. 이때, 프로젝션 모듈(11)은 광 효율이 높은 저 출력 적색 레이저 광원을 사용하여 용도별로 설계된 키보드 템플릿(20)을 투사한다.First, the projection module 11 projects the predesigned keyboard template 20 on a surface that is not curved. In this case, the projection module 11 projects the keyboard template 20 designed for each use by using a low output red laser light source having high light efficiency.

그리고, IR 모듈(13)은 IR(Infra-Red) 광으로 된 경계면이 키보드 템플릿(20)이 투사된 표면 바로 위를 수평으로 스캔하고, 반사되는 IR 광을 IF 필터를 통해 필터링하여 센싱한다. IR 광은 인간의 눈에는 보이지 않지만, 표면 위 2~3mm 위를 짧은 간격으로 스캔한다.In addition, the IR module 13 horizontally scans the interface of the IR (Infra-Red) light just above the surface on which the keyboard template 20 is projected, and senses the reflected IR light by filtering through an IF filter. IR light is invisible to the human eye, but scans at short intervals 2-3 mm above the surface.

또한, 센서 모듈(15)은 키보드 템플릿(20)을 촬영하여 이미지화시키는 CMOS 카메라가 탑재된다.In addition, the sensor module 15 is equipped with a CMOS camera for photographing and imaging the keyboard template 20.

또, 컨트롤러(17)는 센서 모듈(15)로부터 입력되는 센싱 신호 및 이미지를 분석하여 키 입력을 인식하고, 이를 디스플레이 장치에 전달한다.In addition, the controller 17 analyzes a sensing signal and an image input from the sensor module 15, recognizes a key input, and transfers the same to the display device.

그러나, 이러한 종래의 프로젝션 키보드는 투사 각도에 따라 실제 투사되는 키보드 템플릿의 세로측의 기울기와 가로측의 비율이 달라지게 되는 데, 이로 인하여 투사된 키보드 템플릿은 기준 키보드 템플릿과 해상도는 동일하지만 투사 각도가 아래를 향하는 경우 사다리꼴 모양으로 변형되는 문제점이 있다.However, in the conventional projection keyboard, the ratio of the inclination of the vertical side and the horizontal side of the actual projected keyboard template varies according to the projection angle, so that the projected keyboard template has the same resolution as the reference keyboard template but the projection angle is different. When facing down there is a problem that deforms into a trapezoidal shape.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, CMOS 카메라로 투사된 키보드 템플릿을 촬영한 촬영 이미지 프레임과 기준 이미지 프레임을 상호 비교하여 세로측 기울기와 가로측 화면 비율을 검출하고, 이를 통해 기준 이미지 프레임을 보정함으로써 실제 투사되는 키보드 템플릿의 왜곡을 보상하여 투사된 키보드 템플릿이 기준 키보드 템플릿과 동일한 화면 비율 및 기울기를 갖도록 하는 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법을 제공하는데 그 목적이 있다.The present invention is to solve the above problems, by comparing the photographed image frame and the reference image frame photographing the keyboard template projected by the CMOS camera to detect the vertical side and horizontal aspect ratio, and through this the reference image frame It is an object of the present invention to provide a method for correcting a keyboard template distortion of a projection keyboard in which a projected keyboard template has the same aspect ratio and tilt as the reference keyboard template by compensating for the distortion of the actually projected keyboard template.

상기와 같은 목적을 달성하기 위한 본 발명의 특징은,Features of the present invention for achieving the above object,

키보드 템플릿을 투사하는 프로젝션 모듈과, 상기 키보드 템플릿이 투사된 표면 바로 위를 수평으로 검색하는 IR 모듈과, 상기 키보드 템플릿을 촬영하여 이미지화시키는 센서 모듈과, 이들을 통해 입력되는 이미지를 통해 입력 이벤트를 발생하는 컨트롤러를 포함하는 프로젝션 키보드의 제어 방법에 있어서, 투사되는 상기 키보드 템플릿을 촬영하여 이미지화시킨 후 촬영 이미지 프레임을 생성하는 스캔 단계와; 상기 촬영 이미지 프레임과 기저장된 기준 이미지 프레임을 상호 비교하여 상기 촬영 이미지 프레임의 매개 변수인 세로측 기울기와 가로측 화면 비율을 검출하는 매개 변수 검출 단계와; 상기 매개 변수를 이용하여 상기 기준 이미지 프레임의 세로측 기울기와 가로측 화면 비율을 보정하는 보정 단계; 및 상기에서 보정된 보정 이미지 프레임을 키보드 템플릿으로 투사하는 투사 단계로 이루어지는 것을 특징으로 한다.A projection module for projecting a keyboard template, an IR module for horizontally retrieving directly above the surface on which the keyboard template is projected, a sensor module for photographing and imaging the keyboard template, and generating input events through the images inputted through them A control method of a projection keyboard, comprising: a scanning step of photographing and projecting the projected keyboard template and generating a photographed image frame; A parameter detecting step of comparing the photographed image frame with a pre-stored reference image frame to detect a vertical inclination and a horizontal aspect ratio which are parameters of the photographed image frame; A correcting step of correcting a vertical inclination and a horizontal aspect ratio of the reference image frame using the parameters; And a projection step of projecting the corrected image frame corrected as the keyboard template.

여기에서, 상기 기준 이미지 프레임은 수평면에서 촬영된 키보드 템플릿 이미지이다.Here, the reference image frame is a keyboard template image photographed on a horizontal plane.

여기에서 또한, 본 발명은 전원 오프후 전원 온시 상기 보정 이미지 프레임을 상기 기준 이미지 프레임으로 리셋시켜 초기화시키는 초기화 단계를 더 포함한다.Here, the present invention further includes an initialization step of resetting and initializing the corrected image frame to the reference image frame upon power-on after power-off.

여기에서 또, 본 발명은 상기 스캔 단계와, 매개 변수 검출 단계와, 보정 단계와, 투사 단계를 순차적으로 반복 수행하여 최적의 키보드 템플릿을 제공한다.In addition, the present invention provides an optimal keyboard template by sequentially repeating the scanning step, parameter detection step, correction step, and projection step.

상기와 같이 구성되는 본 발명인 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법에 따르면, 프로젝션 키보드가 경사면에 설치되어 투사된 키보드 템플릿이 변형된 경우 키보드 템플릿의 기울기와 화면 비율을 촬영한 후 이를 조정함으로써 각도에 상관없이 정확한 키보드 템플릿을 제공할 수 있는 이점이 있다.According to the keyboard template distortion correction method of the present invention, the projection keyboard is configured as described above, when the projection keyboard is installed on the inclined surface and the projected keyboard template is deformed, the tilt and aspect ratio of the keyboard template are taken and then adjusted to correlate with the angle. This has the advantage of providing accurate keyboard templates without

이하, 본 발명에 따른 키보드 템플릿 왜곡 보정이 가능한 프로젝션 키보드의 구성을 첨부된 도면을 참조하여 상세하게 설명하면 다음과 같다.Hereinafter, the configuration of a projection keyboard capable of correcting a keyboard template distortion according to the present invention will be described in detail with reference to the accompanying drawings.

하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구 체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In the following description of the present invention, if it is determined that specific descriptions of related known functions or configurations may unnecessarily obscure the subject matter of the present invention, the detailed description thereof will be omitted. Terms to be described later are terms defined in consideration of functions in the present invention, and may be changed according to intentions or customs of users or operators. Therefore, the definition should be made based on the contents throughout the specification.

도 3은 본 발명에 따른 프로젝션 키보드의 키보드 템플릿 좌표 보정 방법을 구현하기 위한 프로젝션 키보드의 구성을 개략적으로 나타낸 블록도이다.3 is a block diagram schematically illustrating a configuration of a projection keyboard for implementing a keyboard template coordinate correction method of a projection keyboard according to the present invention.

도 3을 참조하면, 본 발명에 따른 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법을 구현하기 위한 프로젝션 키보드(100)는, 프로젝션 모듈(11)과, IR 모듈(13)과, 센서 모듈(15)과, 메모리(110) 및 컨트롤러(120)로 구성된다.Referring to FIG. 3, a projection keyboard 100 for implementing a keyboard template distortion correction method of a projection keyboard according to the present invention includes a projection module 11, an IR module 13, a sensor module 15, It is composed of a memory 110 and a controller 120.

먼저, 프로젝션 모듈(11)과, IR 모듈(13) 및 센서 모듈(15)은 종래와 동일 동작을 수행하므로 동일 부호를 부여하고, 그 중복 설명은 생략한다. 그 외에 온/오프 스위치와, 스피커와, 무선 통신 모듈 및 배터리 등의 구성은 공지의 구성으로 도시 및 그 설명을 생략한다.First, since the projection module 11, the IR module 13, and the sensor module 15 perform the same operations as in the prior art, the same reference numerals are assigned, and the description thereof will be omitted. In addition, the structure of an on / off switch, a speaker, a wireless communication module, a battery, etc. is well-known and abbreviate | omits illustration and description.

그리고, 메모리(110)는 시스템 구동에 필요한 각종 정보와 데이터와, 기준 이미지 프레임과, 보정 이미지 프레임과, 기울기 및 화면 비율에 따른 매개 변수가 저장된다.In addition, the memory 110 stores various information and data necessary for driving the system, a reference image frame, a corrected image frame, and parameters according to a tilt and an aspect ratio.

또한, 컨트롤러(120)는 시스템을 전반적으로 제어하고, 특히 센서 모듈(15)에서 촬영된 키보드 템플릿(20)에 대한 촬영 이미지 프레임을 이용하여 키보드 템플릿의 매개 변수인 세로측 화면 비율과 가로측 기울기를 검출하고, 매개 변수를 통해 기준 이미지 프레임을 보정하여 프로젝션 모듈(11)에서 보정 키보드 템플릿이 바닥면에 투사되도록 한다. 한편, 컨트롤러(120)는 전원 오프후 전원 온시 전원 오프후 전원 온시 보정 이미지 프레임을 기준 이미지 프레임으로 리셋시켜 초기화시킨다.In addition, the controller 120 controls the system as a whole, and in particular, by using the captured image frame for the keyboard template 20 captured by the sensor module 15, the vertical aspect ratio and the horizontal side slope, which are parameters of the keyboard template, are used. And correct the reference image frame through the parameters so that the projection keyboard template is projected onto the floor. On the other hand, the controller 120 resets the corrected image frame upon power-on after power-off and after power-off to a reference image frame.

이하, 본 발명에 따른 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법을 첨부된 도면을 참조하여 상세하게 설명하면 다음과 같다.Hereinafter, the keyboard template distortion correction method of the projection keyboard according to the present invention will be described in detail with reference to the accompanying drawings.

도 3은 본 발명에 따른 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법의 동작 흐름도이고, 도 4a 내지 도 4c는 프로젝션 키보드의 기울기에 따라 키보드 템플릿의 가변을 설명하기 위한 도면이며, 도 5a 내지 도 5c는 기준 이미지 프레임과 촬영 이미지 프레임 및 보정 이미지 프레임을 설명하기 위한 도면이다.3 is an operation flowchart of a keyboard template distortion correction method of a projection keyboard according to the present invention, Figures 4a to 4c is a view for explaining the variation of the keyboard template according to the inclination of the projection keyboard, Figures 5a to 5c is a reference FIG. 4 illustrates an image frame, a photographed image frame, and a corrected image frame.

먼저, 도 4a와 같이 프로젝션 키보드가 수평면에 정확하게 직립되는 경우 키보드 템플릿과, 도 4b 및 도 4c와 같이 프로젝션 키보드가 기울어진 경우 키보드 템플릿의 기울기 및 화면 비율이 변형되게 된다.First, when the projection keyboard is vertically upright on the horizontal plane as shown in FIG. 4A, the tilt and aspect ratio of the keyboard template is deformed when the keyboard template is tilted as shown in FIGS. 4B and 4C.

그리하여, 종래에는 프로젝션 키보드가 기울어져 키보드 템플릿의 왜곡이 발생하고, 이로 인해 키입력이 어렵고, 키입력을 하여도 이를 제대로 인식하지 못한다.Thus, in the related art, the projection keyboard is tilted, which causes distortion of the keyboard template, which makes it difficult to input the key and does not recognize the key even when the key is input.

이를 해결하기 위하여 본 발명에서는 기울기에 따라 변형되는 키보드 템플릿을 보정하여 수평면과 동일한 키보드 템플릿을 투사한다.In order to solve this problem, the present invention corrects the keyboard template deformed according to the tilt to project the same keyboard template as the horizontal plane.

이를 보다 구체적으로 설명하면, 먼저, 컨트롤러(120)는 전원이 온되면 센서 모듈(15)의 CMOS 카메라를 통해 프로젝션 모듈(11)에서 투사되는 키보드 템플 릿(20)을 촬영하여 이미지화시킨 후 도 5b에 도시된 바와 같이 촬영 이미지 프레임(F)을 생성하여 이를 메모리(110)에 저장시킨다(S110). 이때, 컨트롤러(120)는 촬영 이미지 프레임(F)의 오류를 없애도록 IR 모듈(13)의 입력을 통해 물체가 미존재하는 경우에만 촬영 이미지 프레임(F)을 생성하는 것이 바람직하다.More specifically, first, the controller 120 photographs and images the keyboard template 20 projected from the projection module 11 through the CMOS camera of the sensor module 15 when the power is turned on, and then FIG. 5B. As shown in FIG. 1, the photographed image frame F is generated and stored in the memory 110 (S110). In this case, the controller 120 may generate the photographed image frame F only when an object does not exist through the input of the IR module 13 so as to eliminate an error of the photographed image frame F. FIG.

그런 다음, 컨트롤러(120)는 메모리(110)에 저장시킨 촬영 이미지 프레임(F)과 도 5a에 도시된 바와 같이 기저장된 기준 이미지 프레임(F')을 상호 비교하여 촬영 이미지 프레임(F)의 매개 변수인 세로측 기울기와 가로측 화면 비율을 검출한다(S120). 이때, 기준 이미지 프레임(F')은 수평면에서 촬영된 키보드 템플릿 이미지로 정의한다.Then, the controller 120 compares the captured image frame F stored in the memory 110 with the pre-stored reference image frame F ′ as shown in FIG. 5A. The vertical slope and the horizontal aspect ratio, which are variables, are detected (S120). In this case, the reference image frame F 'is defined as a keyboard template image photographed on a horizontal plane.

그리고, 컨트롤러(120)는 검출된 매개 변수를 이용하여 기준 이미지 프레임(F')의 세로측 기울기와 가로측 화면 비율을 보정하여 보정 이미지 프레임(F")을 생성하고, 이를 메모리(110)에 저장한다(S130).The controller 120 generates a corrected image frame F ″ by correcting the vertical inclination and the horizontal aspect ratio of the reference image frame F ′ using the detected parameters, and stores the corrected image frame F ″ in the memory 110. (S130).

이후, 컨트롤러(120)는 생성된 보정 이미지 프레임(F")을 프로젝션 모듈(11)을 제어하여 바닥면에 투사한다(S140).Thereafter, the controller 120 projects the generated corrected image frame F ″ on the bottom surface by controlling the projection module 11 (S140).

그리고, 컨트롤러(120)는 다시 투사된 보정 이미지 프레임(F")을 촬영하여 상기와 같은 방식으로 기준 이미지 프레임(F')과 비교하여 매개 변수를 검출하고, 보정 이미지 프레임(F")을 재보정하는 과정을 반복 수행한다.Then, the controller 120 captures the projected corrected image frame F ″, compares it with the reference image frame F ′ in the same manner as above, and detects the parameter, and reports the corrected image frame F ″ again. Repeat this process.

한편, 컨트롤러(120)는 전원 오프후 전원 온시 메모리(110)에 저장된 보정 이미지 프레임(F")을 기준 이미지 프레임(F')으로 리셋시켜 초기화시킨다.On the other hand, the controller 120 resets the corrected image frame F ″ stored in the memory 110 to the reference image frame F ′ when the power is turned on and then initializes the power.

따라서, 실제로 투사되는 키보드 템플릿을 촬영한 후 기울기와 화면 비율을 확인하여 이를 기준 키보드 템플릿과 동일하게 보정함으로써 장소에 구애받지 않고 사용이 가능하다.Therefore, after photographing the actually projected keyboard template, it is possible to use it regardless of the place by checking the tilt and the aspect ratio and correcting the same as the reference keyboard template.

본 발명은 다양하게 변형될 수 있고 여러 가지 형태를 취할 수 있으며 상기 발명의 상세한 설명에서는 그에 따른 특별한 실시 예에 대해서만 기술하였다. 하지만 본 발명은 상세한 설명에서 언급되는 특별한 형태로 한정되는 것이 아닌 것으로 이해되어야 하며, 오히려 첨부된 청구범위에 의해 정의되는 본 발명의 정신과 범위 내에 있는 모든 변형물과 균등물 및 대체물을 포함하는 것으로 이해되어야 한다.As those skilled in the art would realize, the described embodiments may be modified in various ways, all without departing from the spirit or scope of the present invention. It is to be understood, however, that the present invention is not limited to the specific forms referred to in the description, but rather includes all modifications, equivalents, and substitutions within the spirit and scope of the invention as defined by the appended claims. Should be.

본 발명에 따르면 휴대 단말기의 입력 장치로 사용이 가능하다.According to the present invention can be used as an input device of a portable terminal.

또한, 휴대 단말기에서 동영상 또는 정지 영상을 아래 방향으로 투사하는 경우에도 적용이 가능하다.Also, the present invention may be applied to a case in which the mobile terminal projects a moving image or a still image downward.

도 1은 일반적인 프로젝션 키보드의 구성을 설명하기 위한 개념도,1 is a conceptual diagram illustrating a configuration of a general projection keyboard;

도 2는 본 발명에 따른 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법을 구현하기 위한 프로젝션 키보드의 구성을 개략적으로 나타낸 블록도,2 is a block diagram schematically showing the configuration of a projection keyboard for implementing a keyboard template distortion correction method of a projection keyboard according to the present invention;

도 3은 본 발명에 따른 프로젝션 키보드의 키보드 템플릿 왜곡 보정 방법의 동작 흐름도,3 is an operation flowchart of a keyboard template distortion correction method of a projection keyboard according to the present invention;

도 4a 내지 도 4c는 프로젝션 키보드의 기울기에 따라 키보드 템플릿의 가변을 설명하기 위한 도면,4a to 4c are views for explaining the variation of the keyboard template according to the inclination of the projection keyboard;

도 5a 내지 도 5c는 기준 이미지 프레임과 촬영 이미지 프레임 및 보정 이미지 프레임을 설명하기 위한 도면.5A to 5C are diagrams for explaining a reference image frame, a captured image frame, and a corrected image frame.

<도면의 주요 부분에 관한 부호의 설명><Explanation of symbols on main parts of the drawings>

11 : 프로젝션 모듈 13 : IR 모듈11 projection module 13 IR module

15 : 센서 모듈 20 : 키보드 템플릿15: sensor module 20: keyboard template

110 : 메모리 120 : 컨트롤러110: memory 120: controller

F : 촬영 이미지 프레임 F' : 기준 이미지 프레임F: Shooting image frame F ': Reference image frame

F" : 보정 이미지 프레임F ": Corrected image frame

Claims

A projection module for projecting a keyboard template, an IR module for horizontally retrieving directly above the surface on which the keyboard template is projected, a sensor module for photographing and imaging the keyboard template, and generating input events through the images inputted through them In the control method of a projection keyboard comprising a controller to

A scanning step of photographing and projecting the projected keyboard template to generate a photographed image frame;

A parameter detecting step of comparing the photographed image frame with a pre-stored reference image frame to detect a vertical inclination and a horizontal aspect ratio which are parameters of the photographed image frame;

A correcting step of correcting a vertical inclination and a horizontal aspect ratio of the reference image frame using the parameters; And

And a projection step of projecting the corrected image frame corrected as the keyboard template.

The method of claim 1,

The reference image frame,

The keyboard template distortion correction method of the projection keyboard, characterized in that the keyboard template image photographed on a horizontal plane.

The method of claim 1,

Keyboard template distortion correction method of the projection keyboard,

And an initialization step of resetting and initializing the corrected image frame to the reference image frame upon power-on after power-off.

The method of claim 1,

Keyboard template distortion correction method of the projection keyboard,

And repeating the scanning step, the parameter detection step, the correction step, and the projection step sequentially to provide an optimal keyboard template.