WO2018012879A1 - 차량 운전 보조장치 - Google Patents

차량 운전 보조장치 Download PDF

Info

Publication number
WO2018012879A1
WO2018012879A1 PCT/KR2017/007467 KR2017007467W WO2018012879A1 WO 2018012879 A1 WO2018012879 A1 WO 2018012879A1 KR 2017007467 W KR2017007467 W KR 2017007467W WO 2018012879 A1 WO2018012879 A1 WO 2018012879A1
Authority
WO
WIPO (PCT)
Prior art keywords
value
central axis
vehicle
error
sensor module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2017/007467
Other languages
English (en)
French (fr)
Inventor
차경환
임종훈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MOBILE APPLIANCE Inc
Original Assignee
MOBILE APPLIANCE Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MOBILE APPLIANCE Inc filed Critical MOBILE APPLIANCE Inc
Priority to CN201780043456.8A priority Critical patent/CN109476303A/zh
Priority to JP2019524008A priority patent/JP6823307B2/ja
Priority to US16/317,282 priority patent/US10708552B2/en
Priority to EP17827949.3A priority patent/EP3486131B1/en
Publication of WO2018012879A1 publication Critical patent/WO2018012879A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06—Road conditions
    • B60W40/076—Slope angle of the road
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01P—MEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00—Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G01P15/18—Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration in two or more dimensions
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00—Input parameters relating to infrastructure
    • B60W2552/15—Road slope, i.e. the inclination of a road segment in the longitudinal direction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00—Purposes or special features of road vehicle drive control systems
    • B60Y2300/08—Predicting or avoiding probable or impending collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00—Special features of vehicle units
    • B60Y2400/30—Sensors
    • B60Y2400/304—Acceleration sensors
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30244—Camera pose
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T90/00—Enabling technologies or technologies with a potential or indirect contribution to GHG emissions mitigation
    • Y02T90/10—Technologies relating to charging of electric vehicles
    • Y02T90/14—Plug-in electric vehicles

Definitions

  • the present invention relates to a vehicle driving assistance apparatus, and more particularly, to a vehicle driving assistance apparatus for determining an effective area following an object in order to perform a vehicle driving assistance function.
  • the vehicle is a device for moving in the direction desired by the user on board.
  • An example is a car.
  • Cars are classified according to the prime movers used, such as an internal combustion engine car, an external combustion engine car, a gas turbine car, or an electric vehicle.
  • An electric vehicle refers to a vehicle that uses electric energy to run an electric motor.
  • HEV hybrid electric vehicles
  • PHEV plug-in hybrid electric vehicles
  • FCEV hydrogen fuel cell vehicles
  • Intelligent cars are state-of-the-art cars that combine information technology (IT) technology, also known as smart cars. Intelligent cars provide optimal traffic efficiency through the introduction of advanced systems of the vehicle itself and in conjunction with intelligent transportation systems (ITS).
  • IT information technology
  • ITS intelligent transportation systems
  • sensors mounted in such intelligent vehicles are actively being conducted.
  • cameras, infrared sensors, radars, GPS, lidar, gyroscopes, etc. are used in intelligent cars, among which cameras occupy an important position as a sensor that replaces the human eye.
  • ADAS function Advanced Driver Assistance System
  • An object of the present invention is to provide a vehicle driving assistance apparatus that is easy to determine an effective area following an object in order to perform a vehicle driving assistance function when the vehicle is mounted.
  • the vehicle driving assistance apparatus includes a sensor module, a camera module for capturing an image, and a first central axis value measured by the sensor module and the first when the front of the vehicle is positioned in a first direction after attachment of the vehicle. Calculates an inclination value of the ground on which the vehicle is located, based on a second central axis value measured by the sensor module when the front of the vehicle is positioned in a second direction opposite to the first direction; And a control module for determining an effective area for following an object in the image based on a central axis fixation error value of the sensor module calculated as at least one of the inclination values.
  • the sensor module may include a sensor unit outputting the acceleration signal and a signal processor configured to signal-process the acceleration signal to calculate at least one of the first and second central axis values.
  • the sensor unit may include a three-axis acceleration sensor that outputs the acceleration signal.
  • the signal processor may output the first and second center axis values after converting the acceleration signal into a digital signal.
  • the control module may include an inclination value calculating unit configured to calculate the inclination value based on the first and second central axis values, and the central axis fixing error value based on at least one of the first and second central axis values and the inclination value.
  • the control unit may include an area determiner configured to calculate and determine the effective area based on the central axis fixed error value, and a following controller configured to follow the object in the valid area when the vehicle driving assistance function is performed.
  • the area determination unit may determine that the error is to determine the effective area and output a determination error signal to the follower control unit.
  • the control module may further include an error alarm unit configured to output an error alarm, and the tracking controller may control the error alarm unit to output the error alarm when the determination error signal is input.
  • the area determiner may determine the valid area by shifting a reference valid area set to a shift value corresponding to the central axis fixed error value.
  • the central axis fixing error value may include a process error value that is shifted when the sensor module is soldered to a printed circuit board and a mounting error value that is shifted when mounted on the vehicle.
  • the vehicle driving assistance apparatus checks at least one of the camera module and the sensor module when the vehicle is mounted, and determines the effective area extracted from the image photographed by the camera module to follow the object, thereby assisting the vehicle driving assistance. There is an advantage to ensure reliability when performing the function.
  • the vehicle driving assistance apparatus has an advantage of easy maintenance by determining itself to be corrected without visiting the vehicle service center and the apparatus service center in determining the effective area.
  • FIG. 1 is a control block diagram showing a control configuration of a vehicle driving assistance apparatus according to the present invention.
  • FIG. 2 to 4 are diagrams for explaining the operation of the vehicle driving assistance apparatus shown in FIG.
  • FIG. 1 is a control block diagram showing a control configuration of a vehicle driving assistance apparatus according to the present invention.
  • the vehicle driving assistance apparatus 100 may include an input module 110, a camera module 120, a sensor module 130, and a control module 140.
  • the input module 110 may input a command for setting or correcting an effective area for following an object when a driver or a user performs a vehicle driving assistance function immediately after mounting the vehicle.
  • the vehicle driving assistance apparatus 100 sets or corrects the effective area by a command of the input module 110, but may automatically set or correct the effective area when power is input after vehicle mounting. It does not limit to this.
  • the camera module 120 may include at least one camera sensor, for example, a CCD image sensor, and may be installed at the front of the vehicle to capture an image of a driving direction of the vehicle, but the present invention is not limited thereto.
  • the camera module 120 photographs the driving direction image of the vehicle, but may photograph an image in a different direction according to a command of a driver or a user, but is not limited thereto.
  • the sensor module 130 may be mounted on a printed circuit board (not shown) adjacent to each other in the camera module 120 and at least one of horizontal and vertical directions, and measure a central axis value of the camera module 120. Can be.
  • the sensor module 130 may include a sensor unit 132 and a signal processor 134.
  • the sensor unit 132 may output a three-axis acceleration signal corresponding to the three-axis direction from the vehicle located on the ground, and may include at least one of a three-axis acceleration sensor, a magnetic field sensor and a gravity sensor.
  • the central axis value is a value indicating the ground direction, that is, the Y axis direction, in the three axis direction, and may be calculated as the central axis acceleration signal among the three axis acceleration signals, but is not limited thereto.
  • the signal processor 134 may calculate the central axis value by converting the central axis acceleration signal into a digital signal.
  • the control module 140 may include an inclination value calculator 142, an area determiner 144, an error alarm 146, and a follower controller 148.
  • control module 140 receives a command for setting or correcting an effective area from the input module 110, and the vehicle is driven by the driver or the user in a first direction and a second direction opposite to the first direction.
  • control algorithm corresponding to the command will be described.
  • the inclination value calculating unit 142 is a sensor module when the front of the vehicle is located in the first direction and the first central axis value measured from the sensor module 120 when the front of the vehicle is located in the first direction.
  • An inclination value of the ground may be calculated based on the second central axis value measured at 120.
  • the inclination value calculator 142 may calculate the inclination value by using Equation 1 below.
  • the inclination value calculator 142 may output the inclination value to the area determiner 144.
  • the area determination unit 144 may determine that the error is about the determination of the effective area and output a determination error signal to the following control unit 148, which will be described later. do.
  • the area determiner 144 may calculate a central axis fixing error value using the first and second central axis values and the inclination value.
  • the central axis fixed error value may include a process error value that is shifted when the sensor module 120 is soldered to the printed circuit board and a mounting error value that is shifted when mounted on the vehicle, but is not limited thereto.
  • the area determiner 144 may calculate the central axis fixing error value by using Equation 2 below.
  • the area determiner 144 may determine the valid area by shifting a predetermined reference valid area with a set shift value corresponding to the central axis fixed error value.
  • the error alarm unit 146 may output an error alarm under the control of the follower controller 148.
  • the error alarm unit 146 may output the error alarm to at least one of a buzzer and a light, without being limited thereto.
  • the tracking controller 148 may control the error alarm unit 146 to output the error alarm when the determination error signal is input.
  • the tracking control unit 148 sets or corrects the effective area, and then the execution command for performing the vehicle driving assistance function through the input module 110 is input, and the validity is obtained from the image captured by the camera module 110. You can follow the object by extracting the area.
  • the vehicle driving assistance apparatus allows the driver or user to directly set or correct the effective area, thereby reducing costs and reducing the time required by not using a service center.
  • FIG. 2 to 4 are diagrams for explaining the operation of the vehicle driving assistance apparatus shown in FIG.
  • FIGS. 2 to 4 are diagrams illustrating an operation of calculating a process error value, a mounting error value, and a central axis error value in a vehicle driving assistance apparatus.
  • FIG. 2 illustrates a process of at least one of the sensor module 130 and the camera module 120 in a state in which the camera module 120, the sensor module 130, and the control module 140 are coupled to the vehicle driving assistance device. It is a figure which calculates an error value.
  • the camera module 120 may be disposed in parallel with the ground, and the sensor module 130 may output the process error value measured in the ground direction to the control module 140.
  • control module 140 may be a horizontal plane, and if the process error value is perpendicular to the ground, it may be determined that the sensor module 130 is normally mounted on the printed circuit board.
  • the control module 140 may determine that a distortion occurs when mounted on a printed circuit board. Can be saved.
  • 3 is a view for checking the mounting error value immediately after the vehicle driving assistance apparatus is mounted on a vehicle located on a flat surface.
  • the sensor module 130 may output the central axis fixed error value measured by the control module 140 immediately after being mounted in the vehicle.
  • the central axis fixed error value may include a process error value and a mounting error value calculated in FIG. 2.
  • control module 140 may calculate and store the mounting error value by subtracting the process error value from the central axis fixed error value.
  • the central axis fixed error value may be an overall error value for the sensor module 130 of the vehicle driving assistance device, but is not limited thereto.
  • FIGS. 4 shows the first and second measured by the sensor module 130 after the driver or the user places the vehicle in a first direction and a second direction opposite to the first direction to attach the vehicle driving assistance device to the vehicle.
  • An inclination value of the ground may be calculated through the central axis value, and an effective area for following an object in the image photographed by the camera module 120 may be determined based on the central axis fixed error values calculated in FIGS. 2 and 3. .
  • the sensor module 130 may measure the first central axis value.
  • control module 140 may calculate the inclination value by subtracting the first central axis value set from the central axis fixing error value.
  • the sensor module 130 may measure the second central axis value.
  • control module 140 may calculate the ground inclination value by subtracting the central axis fixed error value set from the second central axis value, and the ground inclination value calculated in FIG. 4 (a) and in FIG. 4 (b).
  • the sign of one ground slope may be different from each other and is not limited thereto.
  • control module 140 may calculate the final ground slope value with the ground slope values calculated in FIGS. 4 (a) and 4 (b), respectively, and compared with the set reference slope value, Determine the error of the decision.
  • the vehicle driving assistance apparatus has an advantage of ensuring the reliability of the device by allowing the driver or the user to easily change the preset effective area when the vehicle is initially mounted on the vehicle.

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Traffic Control Systems (AREA)
  • Studio Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

본 발명은, 센서모듈, 영상을 촬영하는 카메라 모듈 및 차량 부착 후, 상기 차량의 전면이 제1 방향으로 위치시 상기 센서모듈에서 측정한 제1 중심축 값 및 상기 제1 방향과 반대되는 제2 방향으로 상기 차량의 전면이 위치시 상기 센서모듈에서 측정한 제2 중심축 값을 기반으로 상기 차량이 위치한 지면의 경사값을 산출하고, 상기 제1, 2 중심축 값 및 상기 경사값 중 적어도 하나로 산출한 상기 센서모듈의 중심축 고정 오차값을 기반으로 상기 영상에서 오브젝트를 추종하기 위한 유효 영역을 결정하는 제어모듈을 포함하는 차량 운전 보조장치를 제공한다.

Description

차량 운전 보조장치
본 발명은 차량 운전 보조장치에 관한 것으로서, 더욱 상세하게는 차량 장착 시, 차량 운전 보조 기능을 수행하기 위해 오브젝트를 추종하는 유효 영역을 결정하기 용이한 차량 운전 보조장치에 관한 것이다.
차량은 탑승하는 사용자가 원하는 방향으로 이동시키는 장치이다. 대표적으로 자동차를 예를 들 수 있다.
자동차는 사용되는 원동기에 따른 분류에 의하면 내연기관(internal combustion engine) 자동차, 외연기관(external combustion engine) 자동차, 가스터빈(gas turbine) 자동차 또는 전기자동차(electric vehicle) 등이 있다.
전기자동차는 전기를 에너지 삼아 전기 모터를 돌리는 자동차를 뜻하며, 순수 전기자동차, 하이브리드 전기차(HEV), 플러그인 하이브리드 전기차(PHEV), 수소연료전지차(FCEV) 등이 있다.
최근 운전자, 보행자 등의 안전이나 편의를 위해 지능형 자동차(Smart Vehicle)의 개발이 활발히 되고 있다.
지능형 자동차는 정보기술(IT) 기술을 융합한 최첨단 자동차로 스마트 자동차라고도 한다. 지능형 자동차는 자동차 자체의 첨단 시스템 도입은 물론 지능형 교통 시스템(ITS)과의 연동을 통한 최적의 교통 효율을 제공한다.
또한, 이러한 지능형 자동차에 탑재되는 센서에 대한 연구가 활발히 진행되고 있다. 자세히, 카메라, 적외선센서, 레이더, GPS, 라이더(Lidar), 자이로스코프 등이 지능형 자동차에 이용되고 있으며, 그 중 카메라는 사람의 눈을 대신하는 역할을 하는 센서로 중요한 위치를 차지하고 있다.
따라서, 각종 센서와 전자 장비들의 개발로 인하여, 사용자 운전을 보조하고 주행 안전성 및 편의 등을 향상시키는 ADAS 기능(Advanced Driver Assistance System, 차량 운전 보조 기능)을 구비한 차량이 주목 받고 있다.
최근 들어, 차량 장착 시 차량 운전 보조장치가 설치 오류 또는 생산 오류로 인한 틀어짐을 확인하여 초기 설정되어 오브젝트를 추종하기 위하여 영상에서 추출하는 유효 영역을 보정하기 위한 연구가 진행 중에 있다.
본 발명의 목적은, 차량 장착 시, 차량 운전 보조 기능을 수행하기 위해 오브젝트를 추종하는 유효 영역을 결정하기 용이한 차량 운전 보조장치를 제공함에 있다.
본 발명에 따른 차량 운전 보조장치는, 센서모듈, 영상을 촬영하는 카메라 모듈 및 차량 부착 후, 상기 차량의 전면이 제1 방향으로 위치시 상기 센서모듈에서 측정한 제1 중심축 값 및 상기 제1 방향과 반대되는 제2 방향으로 상기 차량의 전면이 위치시 상기 센서모듈에서 측정한 제2 중심축 값을 기반으로 상기 차량이 위치한 지면의 경사값을 산출하고, 상기 제1, 2 중심축 값 및 상기 경사값 중 적어도 하나로 산출한 상기 센서모듈의 중심축 고정 오차값을 기반으로 상기 영상에서 오브젝트를 추종하기 위한 유효 영역을 결정하는 제어모듈을 포함할 수 있다.
상기 센서모듈은, 상기 가속도 신호를 출력하는 센서부 및 상기 가속도 신호를 신호처리하여 상기 제1, 2 중심축 값 중 적어도 하나를 산출하는 신호처리부를 포함할 수 있다.
상기 센서부는, 상기 가속도 신호를 출력하는 3축 가속도센서를 포함할 수 있다.
상기 신호처리부는, 상기 가속도 신호를 디지털 신호로 변환한 후 상기 제1, 2 중심축 값을 출력할 수 있다.
상기 제어모듈은, 상기 제1, 2 중심축 값으로 상기 경사값을 산출하는 경사값 산출부, 상기 제1, 2 중심축 값 중 적어도 하나와 상기 경사값을 기반으로 상기 중심축 고정 오차값을 산출하고, 상기 중심축 고정 오차값으로 상기 유효 영역을 결정하는 영역 결정부 및 차량 운전 보조기능 수행 시, 상기 유효 영역에서 상기 오브젝트를 추종하는 추종 제어부를 포함할 수 있다.
상기 영역 결정부는, 상기 경사값이 설정된 기준 경사값 보다 크면 상기 유효 영역의 결정에 대한 오류로 판단하여 결정 오류 신호를 상기 추종 제어부로 출력할 수 있다.
상기 제어모듈은, 오류 알람을 출력하는 오류알람부를 더 포함하고, 상기 추종 제어부는, 상기 결정 오류 신호 입력시, 상기 오류 알람이 출력되게 상기 오류 알람부를 제어할 수 있다.
상기 영역 결정부는, 상기 중심축 고정 오차값에 대응하는 이동값으로 설정된 기준 유효 영역을 이동(shift)시켜 상기 유효 영역을 결정할 수 있다.
상기 중심축 고정 오차값은, 상기 센서모듈이 인쇄회로기판에 솔더링시 틀어지는 공정상 오차값 및 상기 차량에 장착시 틀어지는 장착 오차값을 포함할 수 있다.
본 발명에 따른 차량 운전 보조장치는, 차량 장착 시 카메라모듈 및 센서모듈 중 적어도 하나의 틀어짐을 확인하여, 오브젝트를 추종하기 위해 카메라모듈에서 촬영한 영상에서 추출하는 유효 영역을 결정함으로써, 차량 운전 보조 기능 수행 시 신뢰성을 확보할 수 있는 이점이 있다.
또한, 본 발명에 따른 차량 운전 보조장치는, 유효 영역을 결정함에 있어 차량 서비스센터 및 장치 서비스센터에 방문하지 않고 자체적으로 보정하도록 함으로써, 유지 보수가 용이한 이점이 있다.
도 1은 본 발명에 따른 차량 운전 보조장치의 제어구성을 나타낸 제어블록도이다.
도 2 내지 도 4는 도 1에 나타낸 차량 운전 보조장치의 동작을 설명하기 위한 도이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 도면들을 참조하여 실시예에 따른 차량 운전 보조장치에 대해 상세히 설명한다.
도 1은 본 발명에 따른 차량 운전 보조장치의 제어구성을 나타낸 제어블록도이다.
도 1을 참조하면, 차량 운전 보조장치(100)는 입력 모듈(110), 카메라 모듈(120), 센서 모듈(130) 및 제어 모듈(140)을 포함할 수 있다.
입력 모듈(110)는 차량에 장착 직 후 운전자 또는 사용자가 차량 운전 보조기능을 수행 시 오브젝트(object)를 추종하기 위한 유효 영역을 설정 또는 보정하는 명령을 입력할 수 있다.
실시 예에서, 차량 운전 보조장치(100)는 입력 모듈(110)의 명령에 의해 상기 유효 영역을 설정 또는 보정하도록 하였으나, 차량 장착 후 전원이 입력되면 자동적으로 상기 유효 영역을 설정 또는 보정할 수 있으며, 이에 한정을 두지 않는다.
카메라 모듈(120)은 적어도 하나의 카메라 센서, 예를 들면 CCD 이미지 센서를 포함할 수 있으며, 차량의 전면에 설치되어 차량의 주행방향 영상을 촬영할 수 있으며, 이에 한정을 두지 않는다.
여기서, 카메라 모듈(120)는 차량의 주행방향 영상을 촬영하지만, 운전자 또는 사용자의 명령에 따라 다른 방향의 영상을 촬영할 수 있으며, 이에 한정을 두지 않는다.
센서 모듈(130)는 카메라 모듈(120)과 수평 및 수직 방향 중 적어도 하나의 방향으로 서로 인접하게 인쇄회로기판(미도시)에 실장될 수 있으며, 카메라 모듈(120)의 중심축 값을 측정할 수 있다.
여기서, 센서 모듈(130)는 센서부(132) 및 신호처리부(134)를 포함할 수 있다.
센서부(132)는 지면에 위치한 차량에서 3축 방향에 대응하는 3축 가속도 신호를 출력할 수 있으며, 3축 가속도 센서, 자기장 센서 및 중력 센서 중 적어도 하나를 포함할 수 있다.
실시 예에서, 상기 중심축 값은 3축 방향 중 지면 방향, 즉 Y축 방향을 나타내는 값이며, 3축 가속도 신호 중 중심축 가속도 신호로 산출할 수 있으며, 이에 한정을 두지 않는다.
신호처리부(134)는 상기 중심축 가속도 신호를 디지털 신호로 변환하여 상기 중심축 값을 산출할 수 있다.
제어 모듈(140)은 경사값 산출부(142), 영역 결정부(144), 오류 알람부(146) 및 추종 제어부(148)를 포함할 수 있다.
실시 예에서, 제어 모듈(140)은 입력 모듈(110)로부터 유효 영역을 설정 또는 보정하는 명령이 입력되고, 운전자 또는 사용자에 의해 차량이 제1 방향, 및 상기 제1 방향과 반대되는 제2 방향으로 위치하면, 상기 명령에 대응하는 제어 알고리즘을 수행하는 것으로 설명한다.
여기서, 경사값 산출부(142)는 상기 차량의 전면이 상기 제1 방향으로 위치시 센서모듈(120)로부터 측정된 제1 중심축 값 및 상기 제2 방향으로 상기 차량의 전면이 위치시 센서모듈(120)에서 측정된 제2 중심축 값을 기반으로 상기 지면의 경사값을 산출할 수 있다.
경사값 산출부(142)는 하기의 [수학식 1]을 이용하여 경사값을 산출할 수 있다.
Figure PCTKR2017007467-appb-M000001
이후, 경사값 산출부(142)는 경사값을 영역 결정부(144)로 출력할 수 있다.
영역 결정부(144)는 상기 경사값이 설정된 기준 경사값 보다 크면 상기 유효 영역의 결정에 대한 오류로 판단하여 결정 오류 신호를 추종 제어부(148)로 출력할 수 있으며, 이에 대한 설명은 후술하기로 한다.
또한, 영역 결정부(144)는 상기 경사값이 상기 기준 경사값보다 작으면 상기 제1, 2 중심축 값 및 상기 경사값으로 중심축 고정 오차값을 산출할 수 있다.
이때, 상기 중심축 고정 오차값은 센서 모듈(120)이 상기 인쇄회로기판에 솔더링시 틀어지는 공정상 오차값 및 상기 차량에 장착시 틀어지는 장착 오차값을 포함할 수 있으며, 이에 한정을 두지 않는다.
영역 결정부(144)는 하기의 [수학식 2]를 이용하여 상기 중심축 고정 오차값을 산출할 수 있다.
Figure PCTKR2017007467-appb-M000002
또는
Figure PCTKR2017007467-appb-I000001
또한, 영역 결정부(144)는 상기 중심축 고정 오차값에 대응하는 설정된 이동값으로 기 설정된 기준 유효 영역을 이동(shift)시켜 상기 유효 영역을 결정할 수 있다.
오류 알람부(146)는 추종 제어부(148)의 제어에 따라 오류 알람을 출력할 수 있다.
이때, 오류 알람부(146)는 상기 오류 알람을 부저 및 광 중 적어도 하나로 출력할 수 있으며, 이에 한정을 두지 않는다.
추종 제어부(148)는 상기 결정 오류 신호가 입력되면 오류 알람부(146)에서 상기 오류 알람이 출력되게 제어할 수 있다.
또한, 추종 제어부(148)는 상기 유효 영역을 설정 또는 보정한 후 입력 모듈(110)을 통하여 차량 운전 보조기능을 수행하는 상기 수행 명령이 입력되고, 카메라 모듈(110)에서 촬영한 영상에서 상기 유효 영역을 추출하여 오브젝트를 추종할 수 있다.
상술한 바와 같이, 본 발명에 따른 차량 운전 보조장치는 운전자 또는 사용자가 직접 유효 영역을 설정 또는 보정할 수 있도록 함으로써, 비용 절감 및 서비스센터를 이용하지 않음으로써 소요시간이 축소되는 이점이 있다.
도 2 내지 도 4는 도 1에 나타낸 차량 운전 보조장치의 동작을 설명하기 위한 도이다.
먼저, 도 2 내지 도 4는 차량 운전 보조장치에서 공정상 오차값, 장착 오차값 및 중심축 오차값을 산출하는 동작에 대한 도면이다.
우선, 도 2는 차량 운전 보조장치에 카메라 모듈(120), 센서 모듈(130) 및 제어모듈(140)이 결합된 상태에서, 센서 모듈(130) 및 카메라 모듈(120) 중 적어도 하나의 공정상 오차값을 산출하는 도면이다.
여기서, 카메라 모듈(120)은 지면과 평행하게 배치되는 것을 전제로, 센서 모듈(130)은 지면 방향으로 측정한 공정상 오차값을 제어 모듈(140)로 출력할 수 있다.
이때, 제어 모듈(140)은 지면이 수평면인 점을 들어, 상기 공정상 오차값이 지면과 수직인 값을 가지는 경우, 센서 모듈(130)이 인쇄회로기판에 정상적으로 실장된 것으로 판단할 수 있다.
하지만, 제어 모듈(140)은 센서 모듈(130)에서 출력된 상기 공정상 오차값이 설정된 수직인 값을 갖지 않으면 인쇄회로기판에 실장될 때 틀어짐이 발생한 것으로 판단할 수 있으며, 상기 공정상 오차값을 저장할 수 있다.
이후, 도 3은 평평한 지면에 위치한 차량에 차량 운전 보조장치를 장착한 직후 장착 오차값을 확인하기 위한 도면이다.
즉, 도 3을 참조하면, 센서 모듈(130)은 차량에 장착된 직 후, 제어 모듈(140)로 측정한 중심축 고정 오차값을 출력할 수 있다.
여기서, 상기 중심축 고정 오차값은 도 2에서 산출한 공정상 오차값 및 장착 오차값을 포함할 수 있다.
따라서, 제어 모듈(140)은 상기 중심축 고정 오차값에서 상기 공정상 오차값을 빼어 상기 장착 오차값을 산출하여 저장할 수 있다.
여기서, 상기 중심축 고정 오차값은 차량 운전 보조장치의 센서 모듈(130)에 대한 전체적인 오차값일 수 있으며, 이에 한정을 두지 않는다.
도 4는 운전자 또는 사용자가 차량 운전 보조장치를 차량에 부착하기 위해 차량을 제1 방향 및 상기 제1 방향과 반대되는 제2 방향으로 차량을 위치한 후 센서 모듈(130)에서 측정된 제1, 2 중심축 값을 통하여 지면의 경사값을 산출하고, 도 2 및 도 3에서 산출한 중심축 고정 오차값을 기반으로 카메라 모듈(120)에서 촬영하는 영상에서 오브젝트를 추종하기 위한 유효 영역을 결정할 수 있다.
우선, 도 4(a)는 차량의 전면이 제1 방향으로 지면에 배치되는 경우, 센서 모듈(130)에서 제1 중심축 값을 측정할 수 있다.
이때, 제어 모듈(140)은 중심축 고정 오차값에서 설정된 제1 중심축 값을 빼어 지면 경사값을 산출할 수 있다.
도 4(b)와 같이, 차량의 전면이 제2 방향으로 지면에 배치되는 경우, 센서 모듈(130)에서 제2 중심축 값을 측정할 수 있다.
이때, 제어 모듈(140)은 제2 중심축 값에서 설정된 중심축 고정 오차값을 빼어 지면 경사값을 산출할 수 있으며, 도 4(a)에서 산출한 지면 경사값과 도 4(b)에서 산출한 지면 경사값을 서로 부호가 다를수 있으며 이에 한정을 두지 않는다.
여기서, 제어 모듈(140)은 도 4(a) 및 도 4(b)에서 각각 산출한 지면 경사값으로, 최종적인 지면 경사값을 산출할 수 있으며, 설정된 기준 경사값과 비교하여, 유효 영역의 결정에 대한 오류를 판단할 수 있다.
이와 같이, 본 발명에 따른 차량 운전 보조장치는 차량에 초기 장착시 기 설정된 유효 영역을 운전자 또는 사용자가 쉽게 가변 설정할 수 있도록 함으로써, 장치의 신뢰성을 확보할 수 있는 이점이 있다.
상술한 실시 예에 설명된 특징, 구조, 효과 등은 본 발명의 적어도 하나의 실시 예에 포함되며, 반드시 하나의 실시 예에만 한정되는 것은 아니다. 나아가, 각 실시 예에서 예시된 특징, 구조, 효과 등은 실시 예들이 속하는 분야의 통상의 지식을 가지는 자에 의하여 다른 실시 예들에 대해서도 조합 또는 변형되어 실시 가능하다. 따라서 이러한 조합과 변형에 관계된 내용들은 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.
또한, 이상에서 실시 예들을 중심으로 설명하였으나 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 실시 예의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러 가지의 변형과 응용이 가능함을 알 수 있을 것이다. 예를 들어, 실시 예들에 구체적으로 나타난 각 구성 요소는 변형하여 실시할 수 있는 것이다. 그리고 이러한 변형과 응용에 관계된 차이점들은 첨부한 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (11)

  1. 센서모듈;
    영상을 촬영하는 카메라 모듈; 및
    차량 부착 후, 상기 차량의 전면이 제1 방향으로 위치시 상기 센서모듈에서 측정한 제1 중심축 값 및 상기 제1 방향과 반대되는 제2 방향으로 상기 차량의 전면이 위치시 상기 센서모듈에서 측정한 제2 중심축 값을 기반으로 상기 차량이 위치한 지면의 경사값을 산출하고, 상기 제1, 2 중심축 값 중 어느 하나와 상기 경사값을 이용하여 산출한 상기 센서모듈의 중심축 고정 오차값을 기반으로 상기 영상에서 오브젝트를 추종하기 위한 유효 영역을 결정하는 제어모듈을 포함하는 차량 운전 보조장치.
  2. 제 1 항에 있어서,
    상기 센서모듈은,
    가속도 신호를 출력하는 센서부; 및
    상기 가속도 신호를 신호처리하여 상기 제1, 2 중심축 값 중 적어도 하나를 산출하는 신호처리부를 포함하는 차량 운전 보조장치.
  3. 제 2 항에 있어서,
    상기 센서부는,
    상기 가속도 신호를 출력하는 3축 가속도센서를 포함하는 차량 운전 보조장치.
  4. 제 2 항에 있어서,
    상기 신호처리부는,
    상기 가속도 신호를 디지털 신호로 변환한 후 상기 제1, 2 중심축 값을 출력하는 차량 운전 보조장치.
  5. 제 1 항에 있어서,
    상기 제어모듈은,
    상기 제1, 2 중심축 값으로 상기 경사값을 산출하는 경사값 산출부;
    상기 제1, 2 중심축 값 중 적어도 하나와 상기 경사값을 기반으로 상기 중심축 고정 오차값을 산출하고, 상기 중심축 고정 오차값으로 상기 유효 영역을 결정하는 영역 결정부; 및
    차량 운전 보조기능 수행 시, 상기 유효 영역에서 상기 오브젝트를 추종하는 추종 제어부를 포함하는 차량 운전 보조장치.
  6. 제 5 항에 있어서,
    상기 영역 결정부는,
    상기 경사값이 설정된 기준 경사값 보다 크면 상기 유효 영역의 결정에 대한 오류로 판단하여 결정 오류 신호를 상기 추종 제어부로 출력하는 차량 운전 보조장치.
  7. 제 6 항에 있어서,
    상기 제어모듈은,
    오류 알람을 출력하는 오류알람부를 더 포함하고,
    상기 추종 제어부는,
    상기 결정 오류 신호 입력시, 상기 오류 알람이 출력되게 상기 오류 알람부를 제어하는 차량 운전 보조장치.
  8. 제 5 항에 있어서,
    상기 경사값 산출부는,
    상기 경사값을 하기의 수학식으로 산출하는 차량 운전 보조장치;
    Figure PCTKR2017007467-appb-I000002
    .
  9. 제 5 항에 있어서,
    상기 영역 결정부는,
    상기 중심축 고정 오차값을 하기의 수학식으로 산출하는 차량 운전 보조장치;
    Figure PCTKR2017007467-appb-I000003
    또는
    Figure PCTKR2017007467-appb-I000004
    .
  10. 제 5 항에 있어서,
    상기 영역 결정부는,
    상기 중심축 고정 오차값에 대응하는 이동값으로 설정된 기준 유효 영역을 이동(shift)시켜 상기 유효 영역을 결정하는 차량 운전 보조장치.
  11. 제 1 항에 있어서,
    상기 중심축 고정 오차값은,
    상기 센서모듈이 인쇄회로기판에 솔더링시 틀어지는 공정상 오차값 및 상기 차량에 장착시 틀어지는 장착 오차값을 포함하는 차량 운전 보조장치.
PCT/KR2017/007467 2016-07-13 2017-07-12 차량 운전 보조장치 Ceased WO2018012879A1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201780043456.8A CN109476303A (zh) 2016-07-13 2017-07-12 车辆驾驶辅助装置
JP2019524008A JP6823307B2 (ja) 2016-07-13 2017-07-12 車両運転補助装置
US16/317,282 US10708552B2 (en) 2016-07-13 2017-07-12 Vehicle driving assistant device
EP17827949.3A EP3486131B1 (en) 2016-07-13 2017-07-12 Vehicle driving assistance device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0088894 2016-07-13
KR1020160088894A KR101793223B1 (ko) 2016-07-13 2016-07-13 차량 운전 보조장치

Publications (1)

Publication Number Publication Date
WO2018012879A1 true WO2018012879A1 (ko) 2018-01-18

Family

ID=60383671

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2017/007467 Ceased WO2018012879A1 (ko) 2016-07-13 2017-07-12 차량 운전 보조장치

Country Status (6)

Country Link
US (1) US10708552B2 (ko)
EP (1) EP3486131B1 (ko)
JP (1) JP6823307B2 (ko)
KR (1) KR101793223B1 (ko)
CN (1) CN109476303A (ko)
WO (1) WO2018012879A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6988200B2 (ja) * 2017-06-29 2022-01-05 株式会社デンソー 車両制御装置
CN109740462B (zh) * 2018-12-21 2020-10-27 北京智行者科技有限公司 目标的识别跟随方法
CN114001752A (zh) * 2021-10-27 2022-02-01 一汽解放汽车有限公司 车辆坡度传感器校准方法、装置、传感器校准设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008087778A1 (ja) * 2007-01-18 2008-07-24 Mitsubishi Electric Corporation カーナビゲーション装置
JP2008258778A (ja) * 2007-04-02 2008-10-23 Toyota Motor Corp 撮像システム
JP2013020308A (ja) * 2011-07-07 2013-01-31 Clarion Co Ltd 車両周囲画像撮像システム
JP2014082622A (ja) * 2012-10-16 2014-05-08 Denso Corp 車載カメラの取り付け誤差検出装置
KR101406230B1 (ko) * 2012-12-20 2014-06-12 현대오트론 주식회사 차량 기울어짐에 따라 보정된 avm 영상을 생성하는 시스템 및 방법

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7164117B2 (en) * 1992-05-05 2007-01-16 Automotive Technologies International, Inc. Vehicular restraint system control system and method using multiple optical imagers
US5670935A (en) * 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
US7313467B2 (en) * 2000-09-08 2007-12-25 Automotive Technologies International Inc. System and method for in-vehicle communications
JP2001266137A (ja) * 2000-03-16 2001-09-28 Calsonic Kansei Corp 画像信号処理回路
US20020124260A1 (en) * 2001-03-02 2002-09-05 Creative Design Group, Inc. Video production system for vehicles
JP4239725B2 (ja) * 2003-07-30 2009-03-18 トヨタ自動車株式会社 車両および車両の制御方法
US20060241718A1 (en) * 2003-11-26 2006-10-26 Wicab, Inc. Systems and methods for altering brain and body functions and for treating conditions and diseases of the same
JP4437071B2 (ja) * 2004-12-24 2010-03-24 パナソニック株式会社 運転支援装置
WO2008024639A2 (en) * 2006-08-11 2008-02-28 Donnelly Corporation Automatic headlamp control system
US9129460B2 (en) * 2007-06-25 2015-09-08 Inthinc Technology Solutions, Inc. System and method for monitoring and improving driver behavior
JP5180641B2 (ja) * 2008-03-25 2013-04-10 富士重工業株式会社 車両用運転支援装置
JP2010160379A (ja) * 2009-01-09 2010-07-22 Panasonic Corp カメラキャリブレーション方法、およびカメラキャリブレーション装置
US8831869B2 (en) * 2009-03-31 2014-09-09 GM Global Technology Operations LLC Using V2X-based in-network message generation, aggregation, distribution and processing protocols to enable road hazard condition warning applications
JP5872764B2 (ja) * 2010-12-06 2016-03-01 富士通テン株式会社 画像表示システム
DE102011106178A1 (de) * 2011-07-01 2013-01-03 Daimler Ag Lageverstellbare Fahrzeugkomponente und Verfahren zum Ausrichten derselben
US8744666B2 (en) * 2011-07-06 2014-06-03 Peloton Technology, Inc. Systems and methods for semi-autonomous vehicular convoys
JP5626475B2 (ja) * 2011-08-10 2014-11-19 トヨタ自動車株式会社 運転支援装置
US9286678B2 (en) * 2011-12-28 2016-03-15 Pelco, Inc. Camera calibration using feature identification
WO2013114626A1 (ja) * 2012-02-03 2013-08-08 トヨタ自動車株式会社 減速因子推定装置
JP6593929B2 (ja) * 2013-03-13 2019-10-23 フォックス スポーツ プロダクションズ，エルエルシー 車載カメラ用に画像を調整するシステムおよび方法
US9751534B2 (en) * 2013-03-15 2017-09-05 Honda Motor Co., Ltd. System and method for responding to driver state
CN105121249B (zh) * 2013-04-18 2016-08-17 三菱电机株式会社 移动体状态通知装置
DE102013222291A1 (de) * 2013-11-04 2015-05-07 Conti Temic Microelectronic Gmbh Verfahren und Vorrichtung zur Schätzung der Einbauwinkel eines in einem Fahrzeug montierten bildgebenden Sensors
EP2902262B1 (en) * 2014-01-30 2016-12-28 Application Solutions (Electronics and Vision) Ltd. A camera arrangement, a system including a camera arrangement and a vehicle including a camera arrangement
KR101551215B1 (ko) * 2014-05-28 2015-09-18 엘지전자 주식회사 차량 운전 보조 장치 및 이를 구비한 차량
JP6354425B2 (ja) * 2014-07-30 2018-07-11 株式会社デンソー 車載カメラの取り付け姿勢検出方法およびその装置
US9997819B2 (en) * 2015-06-09 2018-06-12 At&T Intellectual Property I, L.P. Transmission medium and method for facilitating propagation of electromagnetic waves via a core
JP6298772B2 (ja) * 2015-01-14 2018-03-20 日立オートモティブシステムズ株式会社 車載用制御装置、自車位置姿勢特定装置、車載用表示装置
KR20160133162A (ko) * 2015-05-12 2016-11-22 현대자동차주식회사 차량의 클러치 제어방법
CN106127787B (zh) * 2016-07-01 2019-04-02 北京美讯美通信息科技有限公司 一种基于逆投影变换的相机标定方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008087778A1 (ja) * 2007-01-18 2008-07-24 Mitsubishi Electric Corporation カーナビゲーション装置
JP2008258778A (ja) * 2007-04-02 2008-10-23 Toyota Motor Corp 撮像システム
JP2013020308A (ja) * 2011-07-07 2013-01-31 Clarion Co Ltd 車両周囲画像撮像システム
JP2014082622A (ja) * 2012-10-16 2014-05-08 Denso Corp 車載カメラの取り付け誤差検出装置
KR101406230B1 (ko) * 2012-12-20 2014-06-12 현대오트론 주식회사 차량 기울어짐에 따라 보정된 avm 영상을 생성하는 시스템 및 방법

Also Published As

Publication number Publication date
JP2019523622A (ja) 2019-08-22
US20190246076A1 (en) 2019-08-08
EP3486131A1 (en) 2019-05-22
KR101793223B1 (ko) 2017-11-03
US10708552B2 (en) 2020-07-07
EP3486131A4 (en) 2020-01-08
CN109476303A (zh) 2019-03-15
EP3486131B1 (en) 2021-01-20
JP6823307B2 (ja) 2021-02-03

Similar Documents

Publication Publication Date Title
CN110217178B (zh) 一种基于硬件同步的无人驾驶感知系统及其工作方法
WO2021187793A1 (ko) 카메라와 레이더 센서 융합 기반 3차원 객체 검출을 위한 전자 장치 및 그의 동작 방법
WO2019225817A1 (ko) 차량의 위치 추정 장치, 차량의 위치 추정 방법, 및 이러한 방법을 수행하도록 프로그램된 컴퓨터 프로그램을 저장하는 컴퓨터 판독 가능 기록매체
CN209593645U (zh) 一种图像传感器芯片测试开发装置及系统
WO2018012879A1 (ko) 차량 운전 보조장치
WO2017116134A1 (ko) 레이더 및 영상 융합 차량 단속시스템
WO2020218717A1 (ko) 어라운드 뷰 장치
WO2017195965A1 (ko) 차량 속도에 따른 영상 처리 장치 및 방법
WO2018124337A1 (ko) 적응적 관심영역 및 탐색창을 이용한 객체 검출 방법 및 장치
WO2022220560A1 (ko) 열화상 및 일반 카메라를 이용한 fod 및 lod 검출 방법 및 장치
WO2021118047A1 (ko) 딥러닝을 이용한 사고 영상의 사고과실 평가 방법 및 장치
WO2021221334A1 (ko) Gps정보 및 라이다 신호를 기초로 형성되는 컬러 맵 생성 장치 및 그 제어방법
WO2020222333A1 (ko) 차량용 전자 장치 및 차량용 전자 장치의 동작 방법
WO2021002517A1 (ko) 공유형 차량 관리 장치 및 공유형 차량의 관리 방법
WO2014077442A1 (ko) 차량간 통신을 통한 차로 위치 결정 장치
WO2021172833A1 (ko) 물체 인식 장치, 물체 인식 방법 및 이를 수행하기 위한 컴퓨터 판독 가능한 기록 매체
CN208271389U (zh) 车牌识别装置
WO2020218716A1 (ko) 자동 주차 장치 및 자동 주차 방법
WO2014084594A1 (ko) 신호 위반 감시를 위한 장치 및 방법
WO2015102280A1 (ko) 스테레오 카메라 장치 및 그의 렉티피케이션 방법
WO2022086167A1 (ko) 주행 중 무선충전을 위한 위치정보 제공 방법, 장치 및 무선충전 제어 방법
WO2014035050A1 (ko) 영상 밝기 조절 방법 및 그 장치와, 스테레오 카메라
WO2021033812A1 (ko) 이종 스테레오 카메라 시스템 및 카메라 보정 방법
WO2012105727A1 (en) Device, system and method for calibration of camera and laser sensor
WO2019009474A1 (ko) 카메라 일체형 레이저 검지 장치 및 그의 동작 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17827949

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019524008

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017827949

Country of ref document: EP

Effective date: 20190213