WO2020251069A1 - 먼지 측정 장치 - Google Patents

먼지 측정 장치 Download PDF

Info

Publication number
WO2020251069A1
WO2020251069A1 PCT/KR2019/006993 KR2019006993W WO2020251069A1 WO 2020251069 A1 WO2020251069 A1 WO 2020251069A1 KR 2019006993 W KR2019006993 W KR 2019006993W WO 2020251069 A1 WO2020251069 A1 WO 2020251069A1
Authority
WO
WIPO (PCT)
Prior art keywords
dust
camera
image
infrared
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2019/006993
Other languages
English (en)
French (fr)
Inventor
이재덕
김명원
박종명
이성현
강현오
주우덕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Priority to US17/601,491 priority Critical patent/US12155811B2/en
Priority to KR1020217031192A priority patent/KR102597823B1/ko
Priority to PCT/KR2019/006993 priority patent/WO2020251069A1/ko
Publication of WO2020251069A1 publication Critical patent/WO2020251069A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/02—Investigating particle size or size distribution
    • G01N15/0205—Investigating particle size or size distribution by optical means
    • G01N15/0227—Investigating particle size or size distribution by optical means using imaging; using holography
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—Two-dimensional [2D] image generation
    • G06T11/10—Texturing; Colouring; Generation of textures or colours
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/06—Investigating concentration of particle suspensions
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/94—Investigating contamination, e.g. dust
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—Two-dimensional [2D] image generation
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two two-dimensional [2D] image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/257—Colour aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/06—Investigating concentration of particle suspensions
    • G01N15/075—Investigating concentration of particle suspensions by optical means
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N2015/0042—Investigating dispersion of solids
    • G01N2015/0046—Investigating dispersion of solids in gas, e.g. smoke
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00—Investigating materials by wave or particle radiation
    • G01N2223/50—Detectors
    • G01N2223/509—Detectors infrared
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G06T2207/10012—Stereo images
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals

Definitions

  • the present invention relates to a dust measuring device. Specifically, it can be applied to a technical field that implements dust distribution image information using a non-identical stereo vision camera.
  • particulate matter is mostly composed of particles generated by artificial industrial activities, and according to the size of the particles, a substance less than 10um is defined as PM10, and less than 2.5um is PM2. It is marked as 5.
  • Automatic measurement methods that can automatically record measurement results include Beta gauge and Light Scattering Method.
  • a manual measurement method that requires manual confirmation of the measurement result includes the Gravimetric method.
  • Beta ray measurement method also called beta attenuation monitor, is a method of measuring the concentration before and after collection by applying beta rays to a collection tape that is wound over time like a tape. Specifically, it is a method of checking the dust concentration by measuring the Guam chain ratio of the amount of light by adding a beta ray to the collection tape.
  • the beta-ray measurement method has the advantage of being easy and convenient because it is augmented by automatic measurement, but it has a disadvantage that real-time measurement is difficult because it takes about 1 hour to obtain a measurement result.
  • the light scattering method is a method of measuring by irradiating light onto particulate matter floating in the atmosphere and measuring the amount of scattered light. Specifically, when light is irradiated to a particulate matter having the same physical property, the amount of scattered light becomes proportional to the mass concentration. Using this principle, the amount of scattered light is measured, and the concentration of the particulate matter is obtained from the value.
  • the light scattering method is said to be capable of real-time measurement, portable, and simultaneous particle size measurement with a single device. On the other hand, it has the disadvantage that an error may occur in the process of measuring the number concentration of particles and converting it to a mass concentration.
  • Gravimetric method is a method of measuring the concentration of dust by measuring the weight of the filter paper before and after collection.
  • the gravimetric method has advantages in that it requires a relatively low cost, but it is difficult to measure in real time, and there is a disadvantage in that an error occurs due to the influence of the experimental environment such as humidity, temperature, static electricity, etc. during the process of measuring the weight of the filter before and after collection.
  • the common point of the conventional dust measuring device lies in measuring the dust at a specific point. That is, there is a disadvantage in that it is difficult to check the overall dust concentration distribution with the conventional dust measuring device.
  • the beta ray measurement method and the gravimetric method excluding the light scattering method have a disadvantage that it is difficult to measure dust in real time. Therefore, there is a disadvantage in that it is difficult to provide a dust distribution image to a user in real time using the conventional dust measuring device.
  • An object of the present invention is to obtain a dust distribution image by using a non-identical stereo vision camera that acquires a true color image and an infrared image.
  • a stereo vision camera including a first camera for obtaining a true color image and a second camera for obtaining an infrared image, a first pixel array of the first camera
  • a dust measurement apparatus including a control unit for generating a fine dust distribution image using a ratio of the amount of light obtained from the light amount obtained from and the amount of light obtained from the second pixel array of the second camera, and a display device for outputting the fine dust distribution image.
  • control unit provides a dust measuring device, characterized in that generating the fine dust distribution image to vary at least one of brightness and saturation in response to the light amount ratio.
  • the controller obtains distance information of a subject through stereo vision calculation between the true color image and the infrared image, and determines at least one of brightness and saturation in response to the distance information. It provides a dust measuring apparatus, characterized in that generating the fine dust distribution image to be different.
  • the second camera provides a dust measuring device, characterized in that for acquiring the infrared image by detecting at least one of reflective infrared and thermal infrared.
  • the reflective infrared ray is dust measurement, characterized in that it includes at least one of near infrared (NIR) and short-wave infrared (SWIR) irradiated from a light source.
  • NIR near infrared
  • SWIR short-wave infrared
  • the thermal infrared rays are infrared rays radiated to the subject, and include at least one of a medium wave infrared (MWIR) and a far infrared ray (FIR).
  • MWIR medium wave infrared
  • FIR far infrared ray
  • the dust measurement apparatus further includes a memory for storing the light quantity ratio corresponding to the fine dust concentration.
  • the display device provides a dust measuring apparatus, characterized in that the display device superimposes and outputs the fine dust distribution image on at least one of the true color image and the infrared image.
  • the controller controls the display device to output the fine dust distribution image to the true color image, and when the light amount ratio falls within a preset range, the infrared image is It provides a dust measuring apparatus, characterized in that controlling the display device to output by overlapping the dust distribution image.
  • the controller controls the display device to output by superimposing the fine dust distribution image on the true color image, and when the light quantity ratio falls within a preset range, the corresponding position It provides a dust measuring apparatus, characterized in that controlling the display device to extract subject information from the infrared image and output the subject information by superimposing the subject information on the true color image.
  • the subject information provides a dust measuring apparatus comprising at least one of contour information constituting the subject, the subject identification information, and the subject position information.
  • the first camera has the same resolution as the second camera, and acquires the light quantity ratio between corresponding pixels of the first pixel array and the second pixel array.
  • the first camera has a resolution different from that of the second camera
  • the controller is at least one of one pixel of the first pixel array and one pixel of the second pixel array. It provides a dust measuring apparatus, characterized in that by dividing the amount of light incident on the light through the resolution difference to obtain the light amount ratio.
  • the present invention can measure the dust distribution and concentration in a wide area in real time.
  • the distribution and concentration of dust in a wide area can be implemented as an image and provided to a user.
  • the present invention can supplement the visibility through an infrared image when visibility is not secured by dust in a true color image.
  • FIG. 1 is a block diagram illustrating a dust measuring apparatus related to the present invention.
  • FIG. 2 is a view for explaining a non-identical stereo vision camera included in the dust measurement device related to the present invention.
  • 3 to 5 are diagrams for explaining a method of obtaining a dust distribution image using a non-identical stereo vision camera of the present invention.
  • FIG. 6 is a view for explaining a method of obtaining a dust distribution image when the resolutions of both cameras are different in the non-identical stereo vision camera of the present invention.
  • FIG. 7 illustrates an embodiment of a true color image and an infrared image acquired through a non-identical stereo vision camera of the present invention.
  • FIG. 10 shows an embodiment of supplementing visibility in a true color image according to an embodiment of the present invention.
  • 11 to 15 are flowcharts illustrating a method of obtaining a dust distribution image according to an embodiment of the present invention.
  • FIG. 1 is a block diagram for explaining a dust measuring device 100 related to the present invention.
  • the dust measuring device 100 includes a wireless communication unit 110, an input unit 120, a sensing unit 130, an output unit 140, an interface unit 150, a memory 160, a control unit 170, and a power supply unit ( 180) and the like.
  • FIG. 1 The components shown in FIG. 1 are not essential in implementing the dust measurement device 100, so the dust measurement apparatus 100 described herein includes more or less components than the components listed above. Can have.
  • the wireless communication unit 110 may be configured between the dust measuring device 100 and the wireless communication system, between the dust measuring device 100 and another external terminal, or the dust measuring device 100 and an external server. It may include one or more modules that enable wireless communication between. In addition, the wireless communication unit 110 may include one or more modules that connect the dust measurement device 100 to one or more networks.
  • the wireless communication unit 110 may include at least one of a wireless Internet module 111, a short-range communication module 112, and a location information module 113.
  • the short range communication module 112 is for short range communication, and includes BluetoothTM, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, and NFC.
  • Near field communication may be supported by using at least one of (Near Field Communication), Wi-Fi (Wireless-Fidelity), Wi-Fi Direct, and Wireless USB (Wireless Universal Serial Bus) technologies.
  • This, short-range communication module 112 between the dust measuring device 100 and the wireless communication system, the dust measuring device 100 and the other dust measuring device 100, or dust through a wireless area network (Wireless Area Networks) It is possible to support wireless communication between the measuring device 100 and a network in which another dust measuring device 100 or an external server is located.
  • the local area wireless communication network may be a wireless personal area network (Wireless Personal Area Networks).
  • the other external terminal is a mobile terminal or wearable device (for example, a smartwatch, a smart device capable of exchanging (or interlocking) data with the dust measuring apparatus 100 according to the present invention. It may be glass (smart glass, head mounted display (HMD)).
  • the short-range communication module 112 may detect (or recognize) a mobile terminal or a wearable device capable of communicating with the dust measurement apparatus 100 around the dust measurement apparatus 100. Further, when the sensed mobile terminal or wearable device is a device certified to communicate with the dust measuring apparatus 100 according to the present invention, the control unit 170 may store at least part of the data processed by the dust measuring apparatus 100, It may be transmitted to a mobile terminal or a wearable device through the short-range communication module 112.
  • a user of a mobile terminal or a wearable device may use data processed by the dust measuring apparatus 100 through the mobile terminal or a wearable device.
  • the dust measurement apparatus 100 may perform a specific operation by receiving processed data through a mobile terminal or a wearable device.
  • data on the skin condition measured by the dust measurement apparatus 100 is transmitted to a mobile terminal or a wearable device, and it is converted into a database to determine the trend of skin condition change and feed back based on this to drive the dust measurement apparatus. Can be controlled.
  • the dust measuring device 100 includes BluetoothTM, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC), Short-range communication technologies such as Wireless USB (Wireless Universal Serial Bus) can be applied.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee Ultra Wideband
  • NFC Near Field Communication
  • Short-range communication technologies such as Wireless USB (Wireless Universal Serial Bus) can be applied.
  • the NFC module provided in the dust measurement device 100 supports non-contact short-range wireless communication between terminals at a distance of about 10 cm.
  • the NFC module can operate in any one of a card mode, a reader mode, and a P2P mode.
  • the dust measuring device 100 may further include a security module for storing card information.
  • the security module may be a physical medium such as UICC (Universal Integrated Circuit Card) (e.g., SIM (Subscriber Identification Module) or USIM (Universal SIM)), Secure micro SD, and sticker, or a logical medium embedded in the dust measuring device. (For example, it may be an embeded SE (Secure element)). Data exchange based on Single Wire Protocol (SWP) may be performed between the NFC module and the security module.
  • UICC Universal Integrated Circuit Card
  • SIM Subscriber Identification Module
  • USIM Universal SIM
  • SD Secure micro SD
  • sticker or a logical medium embedded in the dust measuring device.
  • SWP Single Wire Protocol
  • the dust measuring device 100 may transmit card information stored like a traditional IC card to the outside.
  • the dust measuring device may read data from an external tag.
  • the data received by the dust measuring device from the tag may be coded in the NFC Data Exchange Format determined by the NFC forum.
  • the NFC forum defines four record types. Specifically, the NFC Forum defines four RTDs (Record Type Definition), such as Smart Poster, Text, Uniform Resource Identifier (URI), and General Control.
  • the dust measurement device 100 may perform P2P communication with other devices.
  • LLCP Logical Link Control Protocol
  • a connection may be created between the dust measuring apparatus 100 and another external terminal.
  • the generated connection may be divided into a connectionless mode in which one packet is exchanged and terminated, and a connection-oriented mode in which packets are continuously exchanged.
  • Data, Bluetooth, and setup parameters for Wi-Fi connection may be exchanged through P2P communication.
  • the P2P mode can be effectively utilized for exchanging small sized data.
  • the location information module 113 is a module for acquiring the location (or current location) of the dust measuring device 100, and representative examples thereof include a GPS (Global Positioning System) module or a WiFi (Wireless Fidelity) module.
  • a GPS Global Positioning System
  • WiFi Wireless Fidelity
  • the dust measuring apparatus 100 utilizes a GPS module, the position of the dust measuring apparatus 100 may be obtained using a signal transmitted from a GPS satellite.
  • the dust measuring device 100 uses a Wi-Fi module, based on information of a wireless access point (AP) that transmits or receives a Wi-Fi module and a wireless signal, the dust measuring device 100 You can get the location of.
  • AP wireless access point
  • the location information module 115 may perform any function among other modules of the wireless communication unit 110 in order to obtain data on the location of the dust measuring apparatus 100 in addition or substitution.
  • the location information module 115 is a module used to obtain the location (or current location) of the dust measurement device 100, and is not limited to a module that directly calculates or obtains the location of the dust measurement apparatus 100 .
  • the input unit 120 includes a camera 121 or an image input unit for inputting an image signal, and a user input unit 122 for receiving information from a user (eg, a touch key, a mechanical key, etc.) It may include.
  • the image data collected by the input unit 120 may be analyzed and processed as a user's control command.
  • the camera 121 processes an image frame such as a still image or a video obtained by an image sensor in a video call mode or a photographing mode.
  • the processed image frame may be displayed on the display unit 141 or stored in the memory 160.
  • the camera 121 includes at least one of a camera sensor (eg, CCD, CMOS, etc.), a photo sensor (or image sensor), and a laser sensor.
  • a camera sensor eg, CCD, CMOS, etc.
  • a photo sensor or image sensor
  • a laser sensor e.g., a laser sensor
  • the camera 121 and the laser sensor may be combined with each other to detect a touch of a sensing target for a 3D stereoscopic image.
  • the photosensor may be stacked on the display device, and the photosensor is configured to scan a motion of a sensing object close to the touch screen. More specifically, the photo sensor scans the contents placed on the photo sensor by mounting a photo diode and a transistor (TR) in a row/column and using an electrical signal that changes according to the amount of light applied to the photo diode. That is, the photosensor calculates the coordinates of the sensing target according to the amount of light change, and through this, the location information of the sensing target may be obtained.
  • TR transistor
  • the camera 121 provided in the dust measurement device 100 may perform a function of photographing a condition of the attached skin surface.
  • the photographed skin surface condition may be output so that the user can check it.
  • the user input unit 122 is for receiving information from a user, and when information is input through the user input unit 122, the control unit 170 can control the operation of the dust measurement device 100 to correspond to the input information.
  • the user input unit 122 is a mechanical (mechanical) input means (or, a mechanical key, for example, a button located on the front, rear or side of the dust measuring device 100, a dome switch, a jog wheel , Jog switch, etc.) and a touch type input means.
  • the touch-type input means comprises a virtual key, a soft key, or a visual key displayed on a touch screen through software processing, or a portion other than the touch screen It may be made of a touch key (touch key) disposed on.
  • the virtual key or visual key can be displayed on the touch screen while having various forms, for example, graphic, text, icon, video, or these It can be made of a combination of.
  • the sensing unit 130 may include one or more sensors for sensing at least one of information in the dust measurement apparatus 100, information on the surrounding environment surrounding the dust measurement apparatus 100, and user information.
  • the sensing unit 130 includes a proximity sensor 131, an illumination sensor 132, a touch sensor, an acceleration sensor, a magnetic sensor, and gravity.
  • G-sensor gyroscope sensor, motion sensor 133, RGB sensor, infrared sensor, finger scan sensor, ultrasonic sensor sensor), optical sensor (eg, camera 121), microphone, battery gauge, environmental sensor (eg, barometer, hygrometer, thermometer, radiation detection sensor, heat detection) It may include at least one of a sensor, a gas detection sensor, etc.), and a chemical sensor (eg, an electronic nose, a healthcare sensor, a biometric sensor, etc.). Meanwhile, the dust measuring apparatus 100 disclosed in the present specification may combine and utilize information sensed by at least two or more of these sensors.
  • the sensing unit 130 senses at least one of information in the dust measurement apparatus 100, information on the surrounding environment surrounding the dust measurement apparatus 100, and user information, and generates a sensing signal corresponding thereto.
  • the controller 170 may control the driving or operation of the dust measurement apparatus 100 or perform data processing, functions, or operations related to an application program installed in the dust measurement apparatus 100 based on the sensing signal.
  • the proximity sensor 131 refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object existing in the vicinity by using the force of an electromagnetic field or infrared rays without mechanical contact.
  • the proximity sensor 131 may be disposed in an inner area of the dust measuring apparatus 100 that is wrapped by the touch screen described above or near the touch screen.
  • the proximity sensor 131 examples include a transmission type photoelectric sensor, a direct reflection type photoelectric sensor, a mirror reflection type photoelectric sensor, a high frequency oscillation type proximity sensor, a capacitive type proximity sensor, a magnetic type proximity sensor, an infrared proximity sensor, and the like.
  • the proximity sensor 131 may be configured to detect the proximity of the object by a change in the electric field according to the proximity of the conductive object. In this case, the touch screen (or touch sensor) itself may be classified as a proximity sensor.
  • proximity touch the action of allowing an object to be recognized as being positioned on the touch screen by being approached without contacting an object on the touch screen
  • contact touch the touch
  • a position at which an object is touched in proximity on the touch screen means a position at which the object is vertically corresponding to the touch screen when the object is touched in proximity.
  • the proximity sensor 131 may detect a proximity touch and a proximity touch pattern (for example, a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, a proximity touch movement state, etc.). have.
  • control unit 170 processes data (or information) corresponding to the proximity touch operation and the proximity touch pattern sensed through the proximity sensor 131 as above, and further, provides visual information corresponding to the processed data. It can be output on the touch screen. Further, the control unit 170 may control the dust measurement device 100 so that different operations or data (or information) are processed according to whether a touch to the same point on the touch screen is a proximity touch or a touch touch. have.
  • the touch sensor applies a touch (or touch input) to the touch screen (or the display unit 141) using at least one of various touch methods such as a resistive film method, a capacitive method, an infrared method, an ultrasonic method, and a magnetic field method. To detect.
  • various touch methods such as a resistive film method, a capacitive method, an infrared method, an ultrasonic method, and a magnetic field method.
  • the touch sensor may be configured to convert a pressure applied to a specific portion of the touch screen or a change in capacitance generated at a specific portion of the touch screen into an electrical input signal.
  • the touch sensor may be configured to detect a location, an area, a pressure upon touch, a capacitance upon touch, and the like at which a touch object applying a touch on the touch screen is touched on the touch sensor.
  • the touch object is an object that applies a touch to the touch sensor, and may be, for example, a finger, a touch pen, a stylus pen, or a pointer.
  • the controller 170 may perform different controls or the same control according to the type of the touch object by touching the touch screen (or a touch key provided in addition to the touch screen). Whether to perform different controls or to perform the same control according to the type of the touch object may be determined according to the current operating state of the dust measuring apparatus 100 or an application program being executed.
  • the touch sensor and the proximity sensor described above are independently or in combination, and a short (or tap) touch, a long touch, a multi touch, and a drag touch on the touch screen. ), flick touch, pinch-in touch, pinch-out touch, swipe touch, hovering touch, etc. You can sense the touch.
  • the ultrasonic sensor may recognize location information of a sensing target by using ultrasonic waves.
  • the control unit 170 may calculate the location of the wave generator through information sensed from the optical sensor and the plurality of ultrasonic sensors.
  • the location of the wave generator may be calculated by using a property that the light is much faster than the ultrasonic wave, that is, the time that the light reaches the optical sensor is much faster than the time that the ultrasonic wave reaches the ultrasonic sensor. More specifically, the position of the wave generator may be calculated using a time difference between a time when the ultrasonic wave arrives using light as a reference signal.
  • the touch controller processes the signal(s) and then transmits the corresponding data to the controller 170.
  • the control unit 170 can know which area of the display unit 141 has been touched.
  • the touch controller may be a separate component from the controller 170, and may be the controller 170 itself.
  • the output unit 140 is for generating an output related to visual, auditory or tactile sense, and includes at least one of a display unit 141, an audio output unit 142, a haptic module 143, and a light output unit 144 can do.
  • the display unit 141 may form a mutual layer structure with the touch sensor or be integrally formed, thereby implementing a touch screen.
  • Such a touch screen may function as a user input unit 122 that provides an input interface between the dust measurement apparatus 100 and a user, and may provide an output interface between the dust measurement apparatus 100 and a user.
  • the display unit 141 displays (outputs) information processed by the dust measuring apparatus 100.
  • the display unit 141 may display execution screen information of an application program driven by the dust measurement device 100, or UI (User Interface) and GUI (Graphic User Interface) information according to such execution screen information. have.
  • the interface unit 150 serves as a passage for various types of external devices connected to the dust measuring device 100.
  • the interface unit 150 connects a wired/wireless headset port, an external charger port, a wired/wireless data port, a memory card port, and a device equipped with an identification module. It may include at least one of the ports.
  • the dust measurement apparatus 100 may perform appropriate control related to the connected external device in response to the connection of the external device to the interface unit 150.
  • the memory 160 stores data supporting various functions of the dust measuring device 100.
  • the memory 160 may store a plurality of application programs (applications) driven by the dust measurement apparatus 100, data for the operation of the dust measurement apparatus 100, and commands. At least some of these application programs may be downloaded from an external server through wireless communication. In addition, at least some of these application programs may exist on the dust measurement apparatus 100 from the time of shipment for basic functions of the dust measurement apparatus 100. Meanwhile, the application program is stored in the memory 160, installed on the dust measuring device 100, and driven by the control unit 170 to perform the operation (or function) of the dust measuring device 100. have.
  • control unit 170 In addition to the operation related to the application program, the control unit 170 generally controls the overall operation of the dust measurement device 100.
  • the controller 170 may provide or process appropriate information or functions to a user by processing signals, data, information, etc. input or output through the above-described components or by driving an application program stored in the memory 160.
  • control unit 170 may control at least some of the components discussed with reference to FIG. 2. Furthermore, in order to drive the application program, the control unit 170 may operate by combining at least two or more of the components included in the dust measuring apparatus 100 with each other.
  • the power supply unit 180 receives external power and internal power under the control of the control unit 170 and supplies power to each of the components included in the dust measurement apparatus 100.
  • the power supply unit 180 includes a battery, and the battery may be a built-in battery or a replaceable battery.
  • At least some of the respective components may operate in cooperation with each other to implement an operation, control, or control method of the dust measurement apparatus 100. Further, the operation, control, or control method of the dust measurement apparatus may be implemented on the dust measurement apparatus by driving at least one application program stored in the memory 160.
  • FIG. 2 is a view for explaining a non-identical stereo vision camera included in the dust measuring apparatus related to the present invention.
  • the stereo vision camera 210 of the present invention may acquire distance information d2 of the subject 300 by using binocular parallax through two cameras 211 and 212 provided at a distance. Specifically, in the present invention, when the subject 300 is positioned in the area 400 where the angle of view overlaps the two cameras 211 and 212, distance information d2 with the subject 300 may be obtained. To this end, the stereo vision camera 210 of the present invention may have two cameras 211 and 212 spaced apart by a predetermined distance d1.
  • Two cameras included in the stereo vision camera 210 of the present invention may be cameras that are not the same.
  • the stereo vision camera of the present invention may include a first camera 211 for obtaining a true color image and a second camera 212 for obtaining an infrared image.
  • the first camera 211 for obtaining a true color image of the present invention may acquire a true color image by receiving visible light reflected from a subject.
  • the second camera 212 for acquiring an infrared image of the present invention may acquire an infrared image by receiving infrared light.
  • the second camera 212 of the present invention may be an infrared camera that acquires an infrared image by detecting at least one of a reflective infrared ray and a thermal infrared ray.
  • the reflective infrared ray may include at least one of near infrared (NIR) and short-wave infrared (SWIR) irradiated from a light source.
  • the light source may be included in the second camera 212.
  • Thermal infrared rays are infrared rays radiated from a subject, and may include at least one of medium wave infrared (MWIR) and far infrared rays (FIR).
  • MWIR medium wave infrared
  • FIR far infrared rays
  • dust distribution and concentration are measured through a difference in which visible light and infrared rays are scattered by dust in the atmosphere, and it may be preferable to use thermal infrared rays having a greater difference in wavelength from visible light than reflective infrared rays.
  • the method of obtaining the distance (d2) to the subject 300 through stereo calculation is the correspondence of the subject 300 in the true color image acquired by the first camera 211 and the infrared image acquired by the second camera 212.
  • a pixel may be extracted, and the distance d2 information may be obtained through a disparity between corresponding pixels.
  • the corresponding pixel may be at least one of pixels constituting the outline of the subject 300 or may be a center pixel of the subject 300.
  • distance information of the subject 300 may be obtained by providing two cameras, the first camera 211 and the second camera 212 separated from each other, and the first camera 211 and the second camera ( Dust distribution and concentration can be measured by using the fact that 212) is a non-identical camera with different wavelengths.
  • Dust distribution and concentration can be measured by using the fact that 212) is a non-identical camera with different wavelengths.
  • a method of measuring dust distributed between the subject 300 and the stereo vision camera 210 through the first camera 211 and the second camera 212 will be described.
  • 3 to 5 are diagrams for explaining a method of obtaining a dust distribution image using a non-identical stereo vision camera of the present invention.
  • Existing dust measuring devices can only measure the concentration of dust at a specific point, and a number of dust measuring devices are required to measure the dust distribution.
  • the conventional dust measuring apparatus has a limitation in obtaining a continuous dust distribution.
  • An object of the present invention is to provide a dust measuring apparatus that implements a continuous image of dust 500 distributed in a wide area located between a stereo vision camera 210 and a subject 300 as shown in FIG. 3.
  • a dust distribution image is obtained by using the ratio of the amount of light acquired from the first pixel array 4111 of the first camera 211 and the amount of light acquired from the second pixel array 4121 of the second camera 212. I want to acquire.
  • FIG. 4 shows the amount of light incident on each pixel in the pixel arrays 2111 and 2121 with different brightness.
  • FIG. 4A illustrates a first pixel array 2111 included in an image sensor included in the first camera 211.
  • FIG. 4B illustrates a second pixel array 2121 included in an image sensor included in the second camera 212.
  • FIG. 4A shows the amount of light incident on each pixel 2112 constituting the first pixel array 2111 with different brightness.
  • FIG. 4A when the pixel 2112 is displayed in a dark color, it means that the amount of light incident on the pixel is large, and when it is displayed in a light color, it means that the amount of light incident on the pixel is small.
  • the pixel 2122 is displayed in a dark color in FIG. 4B, it means that the amount of light incident on the pixel is large, and when the pixel is displayed in a light color, the amount of light incident on the pixel is small.
  • the reason why the amount of light incident on each pixel in each of the pixel arrays 2111 and 2121 is different is that the amount of incident light is scattered by dust in the atmosphere.
  • the difference in the amount of light between pixels in the first pixel array 2111 may be different from the difference in the amount of light between pixels in the second pixel array 2121.
  • the wavelengths received by the first pixel array 2111 and the second pixel array 2121 are different in degrees of scattering by dust in the air.
  • the first pixel array 2111 receives a wavelength in the visible band region, and the wavelength in the visible band region is scattered by dust in the atmosphere than the wavelength in the ultraviolet band region received by the second pixel array 2121. Big.
  • FIG. 5 shows the ratio of visible light and ultraviolet light scattering according to the concentration of dust. Specifically, FIG. 5 shows changes in the amount of light 2113 and 2123 incident on each pixel 2112 and 2122 of each pixel array 2111 and 2121 in response to the dust density. Visible light and ultraviolet light are scattered by dust in the air at different degrees. Accordingly, the ratio of the amount of light between the corresponding pixels 2112 and 2122 of the first pixel array 2111 and the second pixel array 2121 may be different depending on the concentration of dust in the air. For example, when the dust concentration in the air is C1, the ratio of the amount of light between the corresponding pixels 2112 and 2122 of the first pixel array 2111 and the second pixel array 2121 may be d11:d21.
  • the dust concentration in the air is C2
  • the ratio of the amount of light between the corresponding pixels 2112 and 2122 of the first pixel array 2111 and the second pixel array 2121 is d12:d22
  • the concentration of dust in the mass is C1. It may be different from the case.
  • the dust concentration at a location corresponding to a corresponding pixel may be measured through a light amount ratio between the corresponding pixels 2112 and 2122 of the first pixel array 2111 and the second pixel array 2121.
  • the present invention may include a memory for storing a dust concentration corresponding to the light amount ratio. That is, the present invention can measure the light quantity ratio and detect the dust concentration at a location corresponding to the pixel through the dust concentration stored in the memory.
  • the dust concentration is measured through the light quantity ratio, and the first camera 211 and the second camera 212 need to have the same resolution. That is, according to the present invention, in the first pixel array 2111 and the second pixel array 2121, the pixels 2112 and 2122 correspond one-to-one, and the light amount ratio is based on the amount of light incident on the corresponding pixels 2112 and 2122. Can be obtained.
  • the dust concentration is measured using the non-identical stereo camera 210, and the resolutions of the first camera 211 and the second camera 212 may be different.
  • a method of obtaining the light quantity ratio when the resolutions of the first camera 211 and the second camera 212 are different will be described.
  • FIG. 6 is a view for explaining a method of obtaining a dust distribution image when the resolutions of both cameras are different in the non-identical stereo vision camera of the present invention.
  • a dust distribution image is obtained using the non-identical stereo vision camera 210, and the resolutions of the two cameras 211 and 212 may be different.
  • the present invention divides the amount of light incident on at least one of one pixel 2112 of the first pixel array 2111 and one pixel 2122 of the second pixel array 2121 through a difference in resolution, Rain can be recovered.
  • the resolution of the first pixel array 2111 is higher than that of the second pixel array 2121, so that a plurality of pixels 2112 of the first pixel array 2111 are in one pixel 2122 of the second pixel array. Can correspond.
  • the plurality of pixels 2122 of the second pixel array 2121 may correspond to one pixel 2112 of the first pixel array. have.
  • the plurality of pixels 2112 of the first pixel array 2111 may correspond to the plurality of pixels 2122 of the second pixel array 2121, but the number of corresponding pixels may be different. Specifically, FIG.
  • FIG. 6 shows that the resolution of the first pixel array 2111 is higher than that of the second pixel array 2121, and the four pixels 2112a to 2112d of the first pixel array 2111 are the second pixel array 2121.
  • An embodiment corresponding to one pixel 2122 of is shown. In this case, the amount of light incident on one pixel 2122 of the second pixel array 2121 is divided into four, and the amount of light incident on one of the pixels 2112a to 2112d of the first pixel array 2111 is divided into four.
  • the light amount ratio can be calculated by comparing the amount of light to be used.
  • the present invention can calculate the distribution of dust by calculating the light quantity ratio for each pixel of the first pixel array 2111 or each pixel of the second pixel array 2121. That is, when the light amount ratio calculated for each pixel falls within a preset range, it can be measured that dust exists at a location corresponding to the pixel.
  • the present invention may generate a dust distribution image through the light quantity ratio calculated for each pixel, and output the generated dust distribution image through the display device.
  • the present invention acquires a true color image through the first camera 211, obtains an infrared image through the second camera 212, and outputs one of the acquired true color image and the line image through the display device, , The generated dust distribution image can be superimposed and output.
  • the dust distribution image may be generated by different colors in the area where the dust is distributed.
  • the dust distribution image may be generated by displaying a boundary around an area where dust is distributed.
  • at least one of the brightness and saturation of the color may be changed according to the light amount ratio. For example, when the light amount ratio corresponds to a case where the concentration of dust is high, the brightness of a location corresponding to the pixel may be displayed in a dark or saturation level. Alternatively, when the light quantity ratio corresponds to a case where the concentration of dust is low, the brightness corresponding to the corresponding pixel may be dimmed or the saturation may be displayed low.
  • the user can visually check not only the dust distribution area but also the dust concentration in the corresponding area.
  • the amount of light incident on each pixel of the first pixel array 2111 and the second pixel array 2121 may vary depending on the distance to the subject. This is because, when the distance between the subject and each pixel is far, the amount of light scattered is large even if the concentration of dust in the air is not high.
  • the degree to which light is scattered according to the distance is as follows. ⁇ s is the scattering coefficient according to the medium and dust size, d is the distance between the sensor and the object to be measured, A is a constant, and I(d)/I0 is the light attenuation ratio. That is, as the distance d between the sensor and the measurement object decreases, the light amount attenuation ratio I(d)/I0 is larger.
  • the present invention may obtain distance information from a subject through a stereo vision calculation between the first camera 211 and the second camera 212. That is, the present invention may primarily obtain a dust distribution image through the light quantity ratio of a specific pixel corresponding to the specific pixel, and correct the dust distribution image obtained primarily through distance information from a subject corresponding to the specific pixel. . For example, even if the incident light is scattered a lot due to the distance from the subject, it is possible to correct at least one of brightness and saturation by reflecting distance information without displaying the brightness in a dust distribution image or close to a specific color through this. have. Alternatively, a light amount ratio may be calculated by reflecting distance information from a subject corresponding to a specific pixel, and a dust distribution image may be obtained through this.
  • FIG. 7 illustrates an embodiment of a true color image and an infrared image acquired through a non-identical stereo vision camera of the present invention.
  • a true color image may be obtained through the first camera 211 and an infrared image may be obtained through the second camera 212. At least one of a true color image acquired through the first camera 211 and an infrared image acquired through the second camera 212 may be output through the display device.
  • FIG. 7(a) shows a true color image acquired through the first camera 211
  • FIG. 7(b) shows an infrared image acquired through the second camera 212 of the same subject.
  • the true color image of the present invention is obtained by receiving visible light, and visibility may be significantly reduced by dust in the atmosphere.
  • the infrared image cannot obtain the color of the subject, but is obtained by receiving infrared light having a wavelength larger than that of visible light, thereby preventing the visibility from being deteriorated by dust in the atmosphere.
  • FIG. 7(a) it can be seen that the subject 300 shown in FIG. 7(b) is not well identified by the dust 500.
  • the present invention allows a user to more easily visually check the dust distribution by superimposing and displaying a fine dust distribution image on a true color image or an infrared image.
  • a dust distribution image is superimposed on at least one of a true color image and an infrared image.
  • a dust distribution image may be superimposed on at least one of a true color image and an infrared image to be displayed.
  • the dust distribution image may include density information, and the density may be displayed differently using at least one of brightness and saturation.
  • FIG. 8(a) shows an embodiment in which a dust distribution image is displayed on a true color image, but the dust concentration is visually implemented through brightness.
  • 8(b) shows an embodiment in which a dust distribution image is displayed on a true color image, and the dust concentration is visually implemented through saturation.
  • the brightness and saturation of the dust distribution image do not change continuously and can be displayed in stages according to a specific light amount ratio.
  • the dust distribution image may be displayed by being superimposed on a true color image or an infrared image through a boundary value.
  • FIG. 9(a) shows an embodiment in which the dust distribution area is bordered on a true color image
  • FIG. 9(b) shows an embodiment in which the dust distribution area is bordered on an infrared image.
  • the boundary may be continuously displayed based on a specific light amount ratio, or may be a boundary of a minimum area including pixels above or below a specific light amount ratio.
  • the dust concentration is not known, but there is an effect that the dust distribution image is simply displayed without disturbing the true color image or the infrared image.
  • FIG. 10 shows an embodiment of supplementing visibility in a true color image according to an embodiment of the present invention.
  • the present invention can secure visibility through an infrared image.
  • the present invention when the light amount ratio between corresponding pixels of the first pixel array 2111 and the second pixel array 2121 falls within a preset category, it may be determined that it is difficult to secure visibility through a true color image due to the large amount of dust in the air. have.
  • the present invention can supplement the area information in which the light amount ratio belongs to a preset category through the infrared camera.
  • the present invention controls a display device to superimpose and output a fine dust distribution image from a true color image, extracts subject information at a corresponding location from an infrared image when the light quantity ratio is out of a preset range, and extracts a subject from the infrared image
  • the display device can be controlled to display information by superimposing it on a true color image.
  • the subject information extracted from the infrared image may include at least one of contour information constituting the subject, subject identification information, and location information of the subject.
  • FIG. 10 shows an embodiment in which a fine dust distribution image 510 is displayed on a true color image, and outline information of a specific subject 310 is displayed in a region in which the light amount ratio falls within a preset range among the true color images.
  • the contour information of the specific subject 310 may be obtained through an infrared image. Through this, the user can check the distribution and concentration of dust, and the existence of a specific subject 310 existing behind the dust.
  • the present invention superimposes and outputs the dust distribution image 510 in a true color image, and does not output a true color image, but outputs an infrared image to the infrared image when the light quantity ratio is out of a preset range.
  • the display device may be controlled to output the dust distribution image 510 by overlapping.
  • 11 to 15 are flowcharts illustrating a method of obtaining a dust distribution image according to an embodiment of the present invention.
  • the present invention is a dust measurement device including a stereo vision camera including a first camera for obtaining a true color image and a second camera for obtaining an infrared image, as shown in FIG. 11, the first camera of the first camera Calculating the light amount ratio between the pixel array and the corresponding pixel of the second pixel array of the second camera (S210), obtaining a dust distribution image through the calculated light amount ratio (S211), and displaying the obtained dust distribution image It may include the step of outputting through the device (S212).
  • the step of calculating the light amount ratio between corresponding pixels of the first pixel array and the second pixel array when the first camera and the second camera have the same resolution, the pixels are calculated in a one-to-one correspondence, and when the resolutions are different,
  • the light amount ratio may be calculated by dividing an amount of light incident on at least one of one pixel of the first pixel array and one pixel of the second pixel array through a difference in resolution.
  • the step of obtaining the dust distribution image (S211) through the calculated light quantity ratio may be a step of obtaining a dust distribution image including dust concentration information.
  • the dust concentration information may be displayed by varying at least one of brightness and saturation according to the light amount ratio. For example, in the case of a light quantity ratio corresponding to a high dust concentration, at least one of brightness and saturation is increased, and in the case of a light quantity ratio corresponding to a low dust concentration, at least one of brightness and saturation is decreased to obtain a dust distribution image. can do.
  • a step of calculating a light amount ratio between corresponding pixels (S220), generating a dust distribution image with at least one of brightness and saturation corresponding to the calculated light amount ratio (S221), and generation It may include the step of outputting the dust distribution image to the display (S222).
  • the light amount ratio may be a light amount ratio in which distance information from the subject is reflected. Specifically, light incident on the camera may be exponentially scattered and attenuated in the air as the distance from the subject increases. Therefore, even if the dust concentration is low, when the distance to the subject is far, the light amount ratio can be calculated to correspond to the high dust concentration. Accordingly, the present invention can obtain a dust distribution image by calculating distance information of a subject through a stereo camera and reflecting it in the light amount ratio.
  • the present invention provides a step of calculating a light amount ratio between corresponding pixels (S230), generating a dust distribution image with at least one of brightness and saturation corresponding to the calculated light amount ratio (S231), and Acquiring distance information of the subject through stereo calculation between two images acquired from a vision camera (S232), correcting a dust distribution image generated based on the obtained distance information (S233), and a corrected dust distribution image It may include a step (S234) of outputting to the display.
  • the step of acquiring the distance information of the subject (S232) is performed before the step of calculating the light amount ratio (S230) to calculate the light amount ratio reflecting the distance information and obtain a dust distribution image in response thereto.
  • the dust distribution image is superimposed on at least one of a true color image obtained through a first camera or an infrared image obtained through a second camera. Can be displayed.
  • the output method may be differently controlled.
  • the present invention provides a step of obtaining a dust distribution image while outputting a true color image (S250) (S251), determining whether the dust distribution concentration is greater than a preset range (S252), and a dust distribution concentration. Is less than the preset range (S251, No), includes the step of superimposing and displaying the dust distribution image on the true color image (S253), and if the dust distribution density is more than the preset range (S251, Yes), the corresponding location
  • step S254 extracting subject information through an infrared image and extracting subject information extracted together with a dust distribution image into a true color image (S255) may be included. In some cases, only extracted subject information may be superimposed on a true color image without outputting a dust distribution image.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Quality & Reliability (AREA)
  • Dispersion Chemistry (AREA)
  • Electromagnetism (AREA)
  • Optics & Photonics (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Studio Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

본 발명은 비동일 스테레오 비전 카메라를 통해 먼지 분포 영상을 구현하는 먼지 측정 장치에 관한 것으로, 트루컬러 이미지를 획득하는 제1 카메라 및 적외선 이미지를 획득하는 제2 카메라를 포함하는 스테레오 비전 카메라, 상기 제1 카메라의 제1 픽셀 어레이에서 획득한 광량과 상기 제2 카메라의 제2 픽셀 어레이에서 획득한 광량의 광량비를 이용하여 미세먼지 분포 영상을 생성하는 제어부; 및 상기 미세먼지 분포 영상을 출력하는 디스플레이 디바이스를 포함하는 먼지 측정 장치를 제공한다.

Description

먼지 측정 장치
본 발명은 먼지 측정 장치에 관한 것이다. 구체적으로, 비동일 스테레오 비전 카메라를 이용하여 먼지 분포 영상 정보를 구현하는 기술 분야에 적용이 가능하다.
현대사회에 있어서 지속적인 산업화는 세계적으로 미세먼지를 비롯한 대기질을 악화시키고, 도시에서의 대기오염에 대한 관심과 우려가 증가하고 있다. 특히, 입자상 오염물질(particulate matter, PM)인 미세먼지는 인위적인 산업활동에 의해 발생되는 입자가 대부분을 차지하며, 입자의 크기에 따라 10um 이하의 물질을 PM10으로 정의하고, 2.5um 이하를 PM2.5로 표기하고 있다.
미세 먼지를 측정하는 방법으로는 자동 측정법과 수동 측정법 이 있다. 측정 결과를 자동으로 기록할 수 있는 자동 측정법에는 베타선 측정법(Beta gauge) 및 광산란법(Light Scattering Method)이 있다. 측정 결과를 수동으로 확인해야 하는 수동 측정법에는 중량법(Gravimetric method) 등이 있다.
베타선 측정법은 베타선 흡수법(Beta attenuation monitor)이라고도 하며 테이프처럼 시간에 따라 감기는 포집 테이프에 베타선을 쪼여 포집 전후의 농도를 측정하는 방법이다. 구체적으로, 포집 테이프에 베타선을 추과시켜 광량의 괌쇄비를 측정하여 먼지 농도를 확인하는 방법이다. 베타선 측정법은 자동 측정이 가증하여 쉽고 편하다는 장점이 있지만 측정 결과를 획득하기 위해서는 1 시간 내외의 시간이 필요하여 실시간 측정이 어려운 단점이 있다.
광산란법은 대기중에 부유하고 있는 입자상물질에 빛을 조사하고 산란된 광의 양을 측정하여 측정하는 방법이다. 구체적으로, 물리적 성질이 동일한 입자상물질에 빛을 조사하면 산란광의 양은 질량농도에 비례하게 되는데, 이러한 원리를 이용하여 산란 광의 양을 측정하고 그 값으로부터 입자상 물질의 농도를 구하게 된다. 광산란법은 실시간 측정이 가능하고, 휴대가 용이하며, 한 개의 장치로 입자 크기 별 측정이 동시에 가능하다는데 있다. 반면, 입자의 개수농도를 측정하며 이를 질량 농도로 전환하는 과정에서 오차가 발생할 수 있다는 단점을 가지고 있다.
중량법은 포집 전후 여과지 무게를 측정하여 먼지의 농도를 측정하는 방법이다. 중량법은 상대적으로 낮은 비용이 소요되는 점에서 장점이 있으나, 실시간 측정이 어렵고, 포집 전후 여과기 무게를 측정하는 과정 중 습도, 온도, 정전기 등 실험 환경의 영향에 의해 오차가 발생하는 단점이 있다.
상기 종래의 먼지 측정 장치의 공통점은 특정 지점의 먼지를 측정하는데 있다. 즉, 상기 종래의 먼지 측정 장치로는 전체 먼지 농도 분포를 확인하기 어려운 단점이 있다. 또한, 광산란법을 제외한 베타선 측정법 및 중량법은 먼지를 실시간으로 측정하기 어려운 단점이 있다. 따라서, 상기 종래의 먼지 측정장치를 이용하여 사용자에게 실시간으로 먼지 분포 영상을 제공하기 어려운 단점이 있다.
본 발명은 트루컬러 이미지와 적외선 이미지를 획득하는 비동일 스테레오 비전 카메라를 이용하여, 먼지 분포 영상을 획득하는데 목적이 있다.
상기 목적을 달성하기 위해, 본 발명의 일 실시예에 따라, 트루컬러 이미지를 획득하는 제1 카메라 및 적외선 이미지를 획득하는 제2 카메라를 포함하는 스테레오 비전 카메라, 상기 제1 카메라의 제1 픽셀 어레이에서 획득한 광량과 상기 제2 카메라의 제2 픽셀 어레이에서 획득한 광량의 광량비를 이용하여 미세먼지 분포 영상을 생성하는 제어부 및 상기 미세먼지 분포 영상을 출력하는 디스플레이 디바이스를 포함하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제어부는 상기 광량비에 대응하여 명도 및 채도 중 적어도 하나를 달리하도록 상기 미세먼지 분포 영상을 생성하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제어부는 상기 트루컬러 이미지와 상기 적외선 이미지 간 스테레오 비전 연산을 통해 피세체의 거리 정보를 획득하고, 상기 거리 정보에 대응하여 명도 및 채도 중 적어도 하나를 달리하도록 상기 미세먼지 분포 영상을 생성하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제2 카메라는 반사형 적외선 및 열형 적외선 중 적어도 하나를 감지하여 상기 적외선 이미지를 획득하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 반사형 적외선은 광원으로부터 조사된 근적외선(Near Infrared, NIR) 및 단적외선(Short-Wave Infrared, SWIR) 중 적어도 하나를 포함하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 열형 적외선은 피사체에 복사되는 적외선으로, 중적외선(Medium Wave Infrared, MWIR) 및 원적외선(Far Infrared, FIR) 중 적어도 하나를 포함하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 먼지 측정 장치는 상기 광량비를 미세 먼지 농도에 대응하여 저장하는 메모리를 더 포함하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 디스플레이 디바이스는 상기 트루컬러 이미지 및 상기 적외선 이미지 중 적어도 하나에 상기 미세먼지 분포 영상을 중첩하여 출력하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제어부는 상기 트루 컬러 이미지에 상기 미세먼지 분포 영상을 출력하도록 상기 디스플레이 디바이스를 제어하고, 상기 광량비가 기 설정 범위에 속하는 경우, 상기 적외선 이미지에 상기 미세먼지 분포 영상을 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제어부는 상기 트루 컬러 이미지에 상기 미세먼지 분포 영상을 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하고, 상기 광량비가 기 설정 범위에 속하는 경우, 대응되는 위치의 피사체 정보를 상기 적외선 이미지에서 추출하고, 상기 피사체 정보를 상기 트루 컬러 이미지에 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 피사체 정보는 상기 피사체를 구성하는 윤곽 정보, 상기 피사체 판별 정보 및 상기 피사체 위치 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제1 카메라는 상기 제2 카메라와 동일 해상도를 가지고, 상기 제1 픽셀 어레이 및 상기 제2 픽셀 어레이의 대응 픽셀간 상기 광량비를 획득하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
또한, 본 발명의 일 실시예에 따라, 상기 제1 카메라는 상기 제2 카메라와 해상도가 상이하고, 상기 제어부는 상기 제1 픽셀 어레이의 하나의 픽셀 및 제2 픽셀 어레이의 하나의 픽셀 중 적어도 하나에 입사된 광량을 상기 해상도 차이를 통해 분할하여 상기 광량비를 획득하는 것을 특징으로 하는 먼지 측정 장치를 제공한다.
본 발명에 따른 먼지 측정 장치의 효과에 대해 설명하면 다음과 같다.
본 발명은 실시간으로 광역 지역의 먼지 분포 및 농도를 측정할 수 있다.
또한, 본 발명은 광역 지역의 먼지 분포 및 농도를 영상으로 구현하여 사용자에게 제공할 수 있다.
또한, 본 발명은 트루컬러 이미지에서 먼지에 의해 가시성이 확보되지 않는 경우 적외선 이미지를 통해 가시성을 보완할 수 있다.
본 발명의 적용 가능성의 추가적인 범위는 이하의 상세한 설명으로부터 명백해질 것이다. 그러나 본 발명의 사상 및 범위 내에서 다양한 변경 및 수정은 해당 기술 분야의 통상의 기술자에게 명확하게 이해될 수 있으므로, 상세한 설명 및 본 발명의 바람직한 실시 예와 같은 특정 실시 예는 단지 예시로 주어진 것으로 이해되어야 한다.
도 1은 본 발명과 관련된 먼지 측정 장치를 설명하기 위한 블록도이다.
도 2는 본 발명과 관련된 먼지 측정 장치가 포함하는 비동일 스테레오 비전 카메라를 설명하기 위한 도면이다.
도 3 내지 도 5는 본 발명의 비동일 스테레오 비전 카메라를 이용하여 먼지 분포 영상을 획득하는 방법을 설명하기 위한 도면이다.
도 6은 본 발명의 비동일 스테레오 비전 카메라에서 양 측 카메라의 해상도가 상이한 경우 먼지 분포 영상을 획득하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 비동일 스테레오 비전 카메라를 통해 획득된 트루컬러 이미지와 적외선 이미지의 일실시예를 도시하고 있다.
도 8 및 9는 본 발명의 일 실시예에 따라 비동일 스테레오 비전 카메라를 통해 획득된 먼지 분포 영상을 도시하고 있다.
도10은 본 발명의 일 실시예에 따라 트루 컬러 이미지에서 가시성을 보완하는 일 실시예를 도시하고 있다.
도 11내지 도 15은 본 발명의 일 실시예에 따라, 먼지 분포 영상을 획득하기 방법을 설명하기 위한 흐름도이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
본 발명의 하기의 실시예들은 본 발명을 구체화하기 위한 것일 뿐 본 발명의 권리 범위를 제한하거나 한정하는 것이 아님은 물론이다. 본 발명의 상세한 설명 및 실시예들로부터 본 발명이 속하는 기술 분야의 전문가가 용이하게 유추할 수 있는 것은 본 발명의 권리 범위에 속하는 것으로 해석된다.
상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.
도 1은 본 발명과 관련된 먼지 측정 장치(100)를 설명하기 위한 블록도이다.
상기 먼지 측정 장치(100)는 무선 통신부(110), 입력부(120), 센싱부(130), 출력부(140), 인터페이스부(150), 메모리(160), 제어부(170) 및 전원 공급부(180) 등을 포함할 수 있다.
도 1에 도시된 구성요소들은 먼지 측정 장치(100)를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 먼지 측정 장치(100)는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
보다 구체적으로, 상기 구성요소들 중 무선 통신부(110)는, 먼지 측정 장치(100)와 무선 통신 시스템 사이, 먼지 측정 장치(100)와 다른 외부 단말기 사이, 또는 먼지 측정 장치(100)와 외부 서버 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 또한, 상기 무선 통신부(110)는, 먼지 측정 장치(100)를 하나 이상의 네트워크에 연결하는 하나 이상의 모듈을 포함할 수 있다.
이러한 무선 통신부(110)는 무선 인터넷 모듈(111), 근거리 통신 모듈(112), 위치정보 모듈(113) 중 적어도 하나를 포함할 수 있다.
근거리 통신 모듈(112)은 근거리 통신(Short range communication)을 위한 것으로서, 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다. 이러한, 근거리 통신 모듈(112)은, 근거리 무선 통신망(Wireless Area Networks)을 통해 먼지 측정 장치(100)와 무선 통신 시스템 사이, 먼지 측정 장치(100)와 다른 먼지 측정 장치(100) 사이, 또는 먼지 측정 장치(100)와 다른 먼지 측정 장치(100, 또는 외부서버)가 위치한 네트워크 사이의 무선 통신을 지원할 수 있다. 상기 근거리 무선 통신망은 근거리 무선 개인 통신망(Wireless Personal Area Networks)일 수 있다.
여기에서, 다른 외부 단말기는 본 발명에 따른 먼지 측정 장치(100)와 데이터를 상호 교환하는 것이 가능한(또는 연동 가능한) 이동 단말기 또는 웨어러블 디바이스(wearable device, 예를 들어, 스마트워치(smartwatch), 스마트 글래스(smart glass), HMD(head mounted display))가 될 수 있다. 근거리 통신 모듈(112)은, 먼지 측정 장치(100) 주변에, 상기 먼지 측정 장치(100)와 통신 가능한 이동 단말기 또는 웨어러블 디바이스를 감지(또는 인식)할 수 있다. 나아가, 제어부(170)는 상기 감지된 이동 단말기 또는 웨어러블 디바이스가 본 발명에 따른 먼지 측정 장치(100)와 통신하도록 인증된 디바이스인 경우, 먼지 측정 장치(100)에서 처리되는 데이터의 적어도 일부를, 상기 근거리 통신 모듈(112)을 통해 이동 단말기 또는 웨어러블 디바이스로 전송할 수 있다. 따라서, 이동 단말기 또는 웨어러블 디바이스의 사용자는, 먼지 측정 장치(100)에서 처리되는 데이터를, 이동 단말기 또는 웨어러블 디바이스를 통해 이용할 수 있다. 또는 먼지 측정 장치(100)는 이동 단말기 또는 웨어러블 디바이스를 통해 처리된 데이터를 전달받아 특정 동작을 수행할 수 있다.
예를 들어, 먼지 측정 장치(100)가 측정한 피부 상태에 관한 데이터를 이동 단말기 또는 웨어러블 디바이스에 전송하고, 이를 데이터 베이스화 하여 피부 상태 변화의 경향을 파악하고 이를 토대로 다시 피드백 하여 먼지 측정 장치의 구동을 제어할 수 있다.
특히 본 발명에 따른 먼지 측정 장치(100)에는 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wireless USB(Wireless Universal Serial Bus) 등의 근거리 통신 기술이 적용될 수 있다.
이 중, 먼지 측정 장치(100)에 구비된 NFC 모듈은 10cm 안팎의 거리에서 단말 간 비접촉식 근거리 무선 통신을 지원한다. NFC 모듈은 카드 모드, 리더 모드 및 P2P 모드 중 어느 하나로 동작할 수 있다. NFC 모듈이 카드 모드로 운용되기 위해서, 먼지 측정 장치(100)는 카드 정보를 저장하는 보안 모듈을 더 포함할 수도 있다. 여기서, 보안 모듈이란 UICC(Universal Integrated Circuit Card)(예컨대, SIM(Subscriber Identification Module) 또는 USIM(Universal SIM)), Secure micro SD 및 스티커 등 물리적 매체일 수도 있고, 먼지 측정 장치에 임베디드되어 있는 논리적 매체(예컨대, embeded SE(Secure element))일 수도 있다. NFC 모듈과 보안 모듈 사이에는 SWP(Single Wire Protocol)에 기반한 데이터 교환이 이루어질 수 있다.
NFC 모듈이 카드 모드로 운용되는 경우, 먼지 측정 장치(100)는 전통적인 IC 카드처럼 저장하고 있는 카드 정보를 외부로 전달할 수 있다.
NFC 모듈이 리더 모드로 운용되는 경우, 먼지 측정 장치는 외부의 태그(Tag)로부터 데이터를 독출할 수 있다. 이때, 먼지 측정 장치가 태그로부터 수신하는 데이터는 NFC 포럼에서 정하는 데이터 교환 포맷(NFC Data Exchange Format)으로 코딩될 수 있다. 아울러, NFC 포럼에서는 4개의 레코드 타입을 규정한다. 구체적으로, NFC 포럼에서는 스마트 포스터(Smart Poster), 텍스트(Text), URI(Uniform Resource Identifier) 및 일반 제어(General Control) 등 4개의 RTD(Record Type Definition)를 규정한다.
NFC 모듈이 P2P(Peer-to-Peer) 모드로 운용되는 경우, 먼지 측정 장치(100)는 다른 기기와 P2P 통신을 수행할 수 있다. 이때, P2P 통신에는 LLCP(Logical Link Control Protocol) 가 적용될 수 있다. P2P 통신을 위해 먼지 측정 장치(100)와 다른 외부 단말기 사이에는 커넥션(connection)이 생성될 수 있다. 이때, 생성되는 커넥션은 1개의 패킷을 교환하고 종료되는 비접속형 모드(connectionless mode)와 연속적으로 패킷을 교환하는 접속형 지향 모드(connection-oriented mode)로 구분될 수 있다. P2P 통신을 통해 데이터 및 블루투스, Wi-Fi 연결을 위한 셋업 파라미터 등이 교환될 수 있다. 다만, NFC 통신의 가용 거리는 짧으므로, P2P 모드는 크기가 작은 데이터를 교환하는 것에 효과적으로 활용될 수 있을 것이다.
위치정보 모듈(113)은 먼지 측정 장치(100)의 위치(또는 현재 위치)를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Positioning System) 모듈 또는 WiFi(Wireless Fidelity) 모듈이 있다. 예를 들어, 먼지 측정 장치(100)는 GPS모듈을 활용하면, GPS 위성에서 보내는 신호를 이용하여 먼지 측정 장치(100)의 위치를 획득할 수 있다. 다른 예로서, 먼지 측정 장치(100)는 Wi-Fi모듈을 활용하면, Wi-Fi모듈과 무선신호를 송신 또는 수신하는 무선 AP(Wireless Access Point)의 정보에 기반하여, 먼지 측정 장치(100)의 위치를 획득할 수 있다. 필요에 따라서, 위치정보모듈(115)은 치환 또는 부가적으로 먼지 측정 장치(100)의 위치에 관한 데이터를 얻기 위해 무선 통신부(110)의 다른 모듈 중 어느 기능을 수행할 수 있다. 위치정보모듈(115)은 먼지 측정 장치(100)의 위치(또는 현재 위치)를 획득하기 위해 이용되는 모듈로, 먼지 측정 장치(100)의 위치를 직접적으로 계산하거나 획득하는 모듈로 한정되지는 않는다.
입력부(120)는, 영상 신호 입력을 위한 카메라(121) 또는 영상 입력부, 사용자로부터 정보를 입력받기 위한 사용자 입력부(122, 예를 들어, 터치키(touch key), 푸시키(mechanical key) 등)를 포함할 수 있다. 입력부(120)에서 수집한 이미지 데이터는 분석되어 사용자의 제어명령으로 처리될 수 있다.
카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(141)에 표시되거나 메모리(160)에 저장될 수 있다.
카메라(121)는 카메라 센서(예를 들어, CCD, CMOS 등), 포토 센서(또는 이미지 센서) 및 레이저 센서 중 적어도 하나를 포함한다.
카메라(121)와 레이저 센서는 서로 조합되어, 3차원 입체영상에 대한 감지대상의 터치를 감지할 수 있다. 포토 센서는 디스플레이 소자에 적층될 수 있는데, 이러한 포토 센서는 터치 스크린에 근접한 감지대상의 움직임을 스캐닝하도록 이루어진다. 보다 구체적으로, 포토 센서는 행/열에 Photo Diode와 TR(Transistor)를 실장하여 Photo Diode에 인가되는 빛의 양에 따라 변화되는 전기적 신호를 이용하여 포토 센서 위에 올려지는 내용물을 스캔한다. 즉, 포토 센서는 빛의 변화량에 따른 감지대상의 좌표 계산을 수행하며, 이를 통하여 감지대상의 위치정보가 획득될 수 있다.
먼지 측정 장치(100)에 구비된 카메라(121)는 특히 부착된 피부 표면 상태를 촬영하는 기능을 수행할 수 있다. 디스플레이부(141)가 구비된 경우 촬영된 피부 표면 상태를 출력하여 사용자로 하여금 확인 가능하게 할 수 있다.
사용자 입력부(122)는 사용자로부터 정보를 입력받기 위한 것으로서, 사용자 입력부(122)를 통해 정보가 입력되면, 제어부(170)는 입력된 정보에 대응되도록 먼지 측정 장치(100)의 동작을 제어할 수 있다. 이러한, 사용자 입력부(122)는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 먼지 측정 장치(100)의 전·후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다. 한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다.
센싱부(130)는 먼지 측정 장치(100) 내 정보, 먼지 측정 장치(100)를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(130)는 근접센서(131, proximity sensor), 조도 센서(132, illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(133, motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(121)), 마이크로폰(microphone), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 먼지 측정 장치(100)는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
센싱부(130)는 먼지 측정 장치(100) 내 정보, 먼지 측정 장치(100)를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하고, 이에 대응하는 센싱 신호를 발생시킨다. 제어부(170)는 이러한 센싱 신호에 기초하여, 먼지 측정 장치(100)의 구동 또는 동작을 제어하거나, 먼지 측정 장치(100)에 설치된 응용 프로그램과 관련된 데이터 처리, 기능 또는 동작을 수행 할 수 있다.
근접 센서(131)는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선 등을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 이러한 근접 센서(131)는 위에서 살펴본 터치 스크린에 의해 감싸지는 먼지 측정 장치(100)의 내부 영역 또는 상기 터치 스크린의 근처에 근접 센서(131)가 배치될 수 있다.
근접 센서(131)의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전 용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 터치 스크린이 정전식인 경우에, 근접 센서(131)는 전도성을 갖는 물체의 근접에 따른 전계의 변화로 상기 물체의 근접을 검출하도록 구성될 수 있다. 이 경우 터치 스크린(또는 터치 센서) 자체가 근접 센서로 분류될 수 있다.
한편, 설명의 편의를 위해, 터치 스크린 상에 물체가 접촉되지 않으면서 근접되어 상기 물체가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 명명하고, 상기 터치 스크린 상에 물체가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 명명한다. 상기 터치 스크린 상에서 물체가 근접 터치 되는 위치라 함은, 상기 물체가 근접 터치될 때 상기 물체가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다. 상기 근접 센서(131)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지할 수 있다. 한편, 제어부(170)는 위와 같이, 근접 센서(131)를 통해 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 데이터(또는 정보)를 처리하며, 나아가, 처리된 데이터에 대응하는 시각적인 정보를 터치 스크린상에 출력시킬 수 있다. 나아가, 제어부(170)는, 터치 스크린 상의 동일한 지점에 대한 터치가, 근접 터치인지 또는 접촉 터치인지에 따라, 서로 다른 동작 또는 데이터(또는 정보)가 처리되도록 먼지 측정 장치(100)를 제어할 수 있다.
터치 센서는 저항막 방식, 정전용량 방식, 적외선 방식, 초음파 방식, 자기장 방식 등 여러 가지 터치방식 중 적어도 하나를 이용하여 터치 스크린(또는 디스플레이부(141))에 가해지는 터치(또는 터치입력)을 감지한다.
일 예로서, 터치 센서는, 터치 스크린의 특정 부위에 가해진 압력 또는 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는, 터치 스크린 상에 터치를 가하는 터치 대상체가 터치 센서 상에 터치 되는 위치, 면적, 터치 시의 압력, 터치 시의 정전 용량 등을 검출할 수 있도록 구성될 수 있다. 여기에서, 터치 대상체는 상기 터치 센서에 터치를 인가하는 물체로서, 예를 들어, 손가락, 터치펜 또는 스타일러스 펜(Stylus pen), 포인터 등이 될 수 있다.
제어부(170)는, 터치 스크린(또는 터치 스크린 이외에 구비된 터치키)을 터치하는, 터치 대상체의 종류에 따라 서로 다른 제어를 수행하거나, 동일한 제어를 수행할 수 있다. 터치 대상체의 종류에 따라 서로 다른 제어를 수행할지 또는 동일한 제어를 수행할 지는, 현재 먼지 측정 장치(100)의 동작상태 또는 실행 중인 응용 프로그램에 따라 결정될 수 있다.
한편, 위에서 살펴본 터치 센서 및 근접 센서는 독립적으로 또는 조합되어, 터치 스크린에 대한 숏(또는 탭) 터치(short touch), 롱 터치(long touch), 멀티 터치(multi touch), 드래그 터치(drag touch), 플리크 터치(flick touch), 핀치-인 터치(pinch-in touch), 핀치-아웃 터치(pinch-out 터치), 스와이프(swype) 터치, 호버링(hovering) 터치 등과 같은, 다양한 방식의 터치를 센싱할 수 있다.
초음파 센서는 초음파를 이용하여, 감지대상의 위치정보를 인식할 수 있다. 한편 제어부(170)는 광 센서와 복수의 초음파 센서로부터 감지되는 정보를 통해, 파동 발생원의 위치를 산출하는 것이 가능하다. 파동 발생원의 위치는, 광이 초음파보다 매우 빠른 성질, 즉, 광이 광 센서에 도달하는 시간이 초음파가 초음파 센서에 도달하는 시간보다 매우 빠름을 이용하여, 산출될 수 있다. 보다 구체적으로 광을 기준 신호로 초음파가 도달하는 시간과의 시간차를 이용하여 파동 발생원의 위치가 산출될 수 있다.
이와 같이, 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(170)로 전송한다. 이로써, 제어부(170)는 디스플레이부(141)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다. 여기에서, 터치 제어기는, 제어부(170)와 별도의 구성요소일 수 있고, 제어부(170) 자체일 수 있다.
출력부(140)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(141), 음향 출력부(142), 햅틱 모듈(143), 광 출력부(144) 중 적어도 하나를 포함할 수 있다. 디스플레이부(141)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 먼지 측정 장치(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(122)로써 기능함과 동시에, 먼지 측정 장치(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
디스플레이부(141)는 먼지 측정 장치(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 디스플레이부(141)는 먼지 측정 장치(100)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다.
인터페이스부(150)는 먼지 측정 장치(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행한다. 이러한 인터페이스부(150)는, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트(port) 중 적어도 하나를 포함할 수 있다. 먼지 측정 장치(100)에서는, 상기 인터페이스부(150)에 외부 기기가 연결되는 것에 대응하여, 연결된 외부 기기와 관련된 적절할 제어를 수행할 수 있다.
메모리(160)는 먼지 측정 장치(100)의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(160)는 먼지 측정 장치(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 먼지 측정 장치(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는, 먼지 측정 장치(100)의 기본적인 기능을 위하여 출고 당시부터 먼지 측정 장치(100)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(160)에 저장되고, 먼지 측정 장치(100) 상에 설치되어, 제어부(170)에 의하여 상기 먼지 측정 장치(100)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
제어부(170)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 먼지 측정 장치(100)의 전반적인 동작을 제어한다. 제어부(170)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(160)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다.
제어부(170)는 메모리(160)에 저장된 응용 프로그램을 구동하기 위하여, 도 2과 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(170)는 상기 응용 프로그램의 구동을 위하여, 먼지 측정 장치(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
전원공급부(180)는 제어부(170)의 제어 하에서, 외부의 전원, 내부의 전원을 인가 받아 먼지 측정 장치(100)에 포함된 각 구성요소들에 전원을 공급한다. 이러한 전원공급부(180)는 배터리를 포함하며, 상기 배터리는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
상기 각 구성요소들 중 적어도 일부는 먼지 측정 장치(100)의 동작, 제어, 또는 제어방법을 구현하기 위하여 서로 협력하여 동작할 수 있다. 또한, 상기 먼지 측정 장치의 동작, 제어, 또는 제어방법은 상기 메모리(160)에 저장된 적어도 하나의 응용 프로그램의 구동에 의하여 먼지 측정 장치 상에서 구현될 수 있다.
도 2는 본 발명과 관련된 먼지 측정 장치에 포함된 비동일 스테레오 비전 카메라를 설명하기 위한 도면이다.
본 발명의 스테레오 비전 카메라(210)은 이격되어 구비된 두 대의 카메라(211, 212)통해 양안시차를 이용하여 피사체(300)의 거리정보(d2)를 획득할 수 있다. 구체적으로, 본 발명은 두 대의 카메라(211, 212)에서 화각이 겹치는 영역(400)에 피사체(300)가 위치하는 경우, 피사체(300)와의 거리정보(d2)를 획득할 수 있다. 이를 위해, 본 발명의 스테레오 비전 카메라(210)는 두 대의 카메라(211, 212)를 소정 거리(d1) 이격되어 구비할 수 있다.
본 발명의 스테레오 비전 카메라(210)에 포함된 두 카메라는 동일하지 않은 카메라 일 수 있다. 구체적으로, 본 발명의 스테레오 비전 카메라는 트루 컬러 이미지를 획득하는 제1 카메라(211) 및 적외선 이미지를 획득하는 제2 카메라(212)를 포함할 수 있다.
본 발명의 트루컬러 이미지를 획득하는 제1 카메라(211)는 피사체에 반사된 가시광을 수광하여 트루컬러 이미지를 획득할 수 있다.
본 발명의 적외선 이미지를 획득하는 제2 카메라(212)는 적외선광을 수광하여 적외선 이미지를 획득할 수 있다. 본 발명의 제2 카메라(212)는 반사형 적외선 및 열형 적외선 준 적어도 하나를 감지하여 적외선 이미지를 획득하는 적외선 카메라일 수 있다. 반사형 적외선은 광원으로부터 조사된 근적외선(Near Infrared, NIR) 및 단적외선(Short-Wave Infrared, SWIR) 중 적어도 하나를 포함할 수 있다. 상기 광원은 제2 카메라(212)에 포함될 수 있다. 열형 적외선은 피사체에서 복사되는 적외선으로 중적외선(Medium Wave Infrared, MWIR) 및 원적외선(Far Infrared, FIR) 중 적어도 하나를 포함할 수 있다. 다만, 본 발명은 가시광과 적외선이 대기 중 먼지로 인해 산란되는 차이를 통해 먼지 분포 및 농도를 측정하는 것으로, 반사형 적외선 보다 가시광과 파장 차이가 큰 열형 적외선을 이용함이 바람직할 수 있다.
스테레오 연산을 통해 피사체(300)까지의 거리(d2)를 획득하는 방법은 제1 카메라(211)에서 획득한 트루컬러 이미지와 제2 카메라(212)에서 획득한 적외선 이미지에서 피사체(300)의 대응 픽셀을 추출하고, 대응 픽셀간 시차(disparity)를 통해 상기 거리(d2) 정보를 획득할 수 있다. 여기서, 대응 픽셀은 피사체(300)의 윤곽을 구성하는 픽셀 중 적어도 하나거나, 피사체(300)의 중심 픽셀일 수 있다.
본 발명은 두 대의 카메라인 제1 카메라(211)와 제2 카메라(212)가 이격되어 구비됨을 통해 피사체(300)의 거리 정보를 획득할 수 있으며, 제1 카메라(211)와 제2 카메라(212)가 수광하는 파장이 상이한 비동일 카메라인 점을 이용하여 먼지 분포 및 농도를 측정할 수 있다. 이하에서 제1 카메라(211)와 제2 카메라(212)를 통해 피사체(300)과 스테레오 비전 카메라(210) 사이에 분포된 먼지를 측정하는 방법을 살펴본다.
도 3 내지 도 5는 본 발명의 비동일 스테레오 비전 카메라를 이용하여 먼지 분포 영상을 획득하는 방법을 설명하기 위한 도면이다.
기존의 먼지 측정 장치는 특정 지점의 먼지 농도만을 측정할 수 있으며, 먼지 분포를 측정하기 위해서는 다수의 먼지 측정 장치가 필요했다. 또한, 기존의 먼지 측정 장치는 연속적인 먼지 분포를 획득하는데 한계가 있었다.
본 발명은 도 3에 도시된 바와 같이 스테레오 비전 카메라(210)와 피사체(300) 사이에 위치하는 광역 영역에 분포한 먼지(500)를 연속적인 영상으로 구현하는 먼지 측정 장치를 제공하고자 한다.
본 발명은 제1 카메라(211)의 제1 픽셀 어레이(4111)에서 획득한 광량과 제2 카메라(212)의 제2 픽셀 어레이(4121)에서 획득한 광량의 광량비를 이용하여 먼지 분포 영상을 획득하고자 한다.
도 4는 픽셀 어레이(2111, 2121)에서 각 픽셀에 입사되는 광량을 명도를 달리하여 표시하고 있다. 구체적으로, 도 4(a)는 제1 카메라(211)에 포함된 이미지 센서에 포함된 제1 픽셀 어레이(2111)를 도시하고 있다. 도 4(b)는 제2 카메라(212)에 포함된 이미지 센서에 포함된 제2 픽셀 어레이(2121)를 도시하고 있다. 구체적으로, 도 4(a)는 제1 픽셀 어레이(2111)를 구성하는 각 픽셀(2112)에 입사되는 광량을 명도를 달리하여 표시하고 있다. 예를 들어, 도 4(a)에서 픽셀(2112)이 진하게 표시되는 경우 해당 픽셀에 입사되는 광량이 많은 것을 의미하고, 연하게 표시되는 경우, 해당 픽셀에 입사되는 광량이 적은 것을 의미한다. 마찬가지로, 도 4(b)에서 픽셀(2122)이 진하게 표시되는 경우, 해당 픽셀에 입사되는 광량이 많은 것을 의미하고, 연하게 표시되는 경우, 해당 픽셀에 입사되는 광량은 적은 것을 의미한다.
각각의 픽셀 어레이(2111, 2121)에서 각 픽셀에 입사되는 광량이 상이한 이유는 입사되는 광량이 대기 중의 먼지에 의해 산란되기 때문이다. 이때, 제1 픽셀 어레이(2111)에서 각 픽셀간 광량 차이는 제2 픽셀 어레이(2121)에서 각 픽셀간 광량 차이와 상이할 수 있다. 이는 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)가 수광하는 파장이 대기 중 먼지에 의해 산란되는 정도가 상이하기 때문이다. 구체적으로, 제1 픽셀 어레이(2111)는 가시광대 영역의 파장을 수광하는데 가시광대 영역의 파장은 대기 중 먼지에 의해 산란되는 정도가 제2 픽셀 어레이(2121)가 수광하는 자외선대 영역의 파장보다 크다.
도 5는 가시광과 자외선이 먼지의 농도에 따라 산란되는 비율을 도시하고 있다. 구체적으로, 도 5는 먼지 농도(density)에 대응하여 각 픽셀 어레이(2111, 2121)의 각 픽셀(2112, 2122)에 입사되는 광량(2113, 2123) 변화를 도시하고 있다. 가시광과 자외선은 대기 중의 먼지에 의해서 산란되는 정도가 상이하다. 따라서 대기중의 먼지 농도에 따라 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)의 대응 픽셀(2112,2122)간 광량의 비가 상이할 수 있다. 예를 들어 대기 중의 먼지 농도가 C1인 경우, 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)의 대응 픽셀(2112, 2122)간 광량의 비는 d11:d21 일 수 있다. 반면 대기 중의 먼지 농도가 C2인 경우, 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)의 대응 픽셀(2112, 2122)간 광량의 비는 d12:d22 로 대이 중의 먼지의 농도가 C1인 경우와 상이할 수 있다.
본 발명은 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)의 대응 픽셀(2112, 2122)간 광량 비를 통해 해당 픽셀에 대응되는 위치의 먼지 농도를 측정할 수 있다. 이를 위해, 본 발명은 상기 광량비에 대응하여 먼지 농도를 저장하는 메모리를 포함할 수 있다. 즉, 본 발명은 광량비를 측정하고 메모리에 저장된 먼지 농도를 통해 해당 픽셀에 대응되는 위치의 먼지 농도를 감지할 수 있다.
본 발명은 광량비를 통해 먼지 농도를 측정하는 것으로 제1 카메라(211)과 제2 카메라(212)는 해상도가 동일할 필요가 있다. 즉, 본 발명은 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)는 각 픽셀(2112, 2122)이 일대일 대응되고, 대응되는 픽셀(2112, 2122)에 입사되는 광량을 통해 상기 광량비를 획득할 수 있다.
다만, 본 발명은 비동일 스테레오 카메라(210)를 이용하여 먼지 농도를 측정하는 것으로 제1 카메라(211)와 제2 카메라(212)의 해상도가 상이할 수 있다. 이하에서, 제1 카메라(211)와 제2 카메라(212)의 해상도가 상이한 경우 상기 광량비를 획득하는 방법을 살펴본다.
도 6은 본 발명의 비동일 스테레오 비전 카메라에서 양 측 카메라의 해상도가 상이한 경우 먼지 분포 영상을 획득하는 방법을 설명하기 위한 도면이다.
본 발명은 비동일 스테레오 비전 카메라(210)를 이용하여 먼지 분포 영상을 획득하는 것으로, 양 측 카메라(211, 212)의 해상도가 상이할 수 있다. 이 경우, 제1 픽셀 어레이(2111)의 각 픽셀(2112)과 제2 픽셀 어레이(2121)의 각 픽셀(2122)는 일대일 대응되지 않아 상기 광량비를 획득하기 어려울 수 있다. 이 경우, 본 발명은 제1 픽셀 어레이(2111)의 하나의 픽셀(2112) 및 제2 픽셀 어레이(2121)의 하나의 픽셀(2122) 중 적어도 하나에 입사된 광량을 해상도 차이를 통해 분할하여 광량비를 회득할 수 있다.
예를 들어, 제1 픽셀 어레이(2111)의 해상도가 제2 픽셀 어레이(2121) 보다 높아 제1 픽셀 어레이(2111)의 복수의 픽셀(2112)이 제2 픽셀 어레이의 하나의 픽셀(2122)에 대응될 수 있다. 또는 제2 픽셀 어레이(2121)의 해상도가 제1 픽셀 어레이(2111)보다 높아 제2 픽셀 어레이(2121)의 복수의 픽셀(2122)이 제1 픽셀 어레이의 하나의 픽셀(2112)에 대응될 수 있다. 경우에 따서는 제1 픽셀 어레이(2111)의 복수의 픽셀(2112)이 제2 픽셀 어레이(2121)의 복수의 픽셀(2122)에 대응되되, 대응되는 픽셀의 개수가 상이할 수 있다. 구체적으로, 도 6은 제1 픽셀 어레이(2111)의 해상도가 제2 픽셀 어레이(2121) 보다 높고, 제1 픽셀 어레이(2111)의 네 개의 픽셀(2112a 내지 2112d)이 제2 픽셀 어레이(2121)의 하나의 픽셀(2122)에 대응되는 실시예를 도시하고 있다. 이 경우, 제2 픽셀 어레이(2121)의 하나의 픽셀(2122)에 입사되는 광량을 4분할 하고, 분할된 광량과 제1 픽셀 어레이(2111)의 하나의 픽셀(2112a 내지 2112d 중 하나)에 입사되는 광량을 비교하여 상기 광량비를 산출할 수 있다.
상기에서 설명한 바와 같이, 본 발명은 제1 픽셀 어레이(2111)의 각 픽셀 또는 제2 픽셀 어레이(2121)의 각 픽셀 마다 광량비를 산출하여 먼지의 분포를 산출할 수 있다. 즉, 각 픽셀 마다 산출된 광량비가 기 설정 범위에 속하는 경우 경우 해당 픽셀에 대응되는 위치에 먼지가 존재하는 것으로 측정할 수 있다. 각 픽셀마다 산출된 광량비를 통해 본 발명은 먼지 분포 영상을 생성하고, 생성된 먼지 분포 영상을 디스플레이 디바이스를 통해 출력할 수 있다. 본 발명은 제1 카메라(211)를 통해 트루 컬러 이미지를 획득하고, 제2 카메라(212)를 통해 적외선 이미지를 획득하고, 획득한 트루 컬러 이미지 및 적어선 이미지 중 하나를 디스플레이 디바이스를 통해 출력하고, 생성된 먼지 분포 영상을 중첩시켜 출력할 수 있다.
본 발명의 먼지가 분포하는 영역에 색감을 달리하여 상기 먼지 분포 영상을 생성할 수 있다. 또는 먼지가 분포하는 영역을 둘러 경계를 표시함으로써 상기 먼지 분포 영상을 생성할 수 있다. 먼지가 분포하는 영역에 색감을 달리하여 상기 먼지 분포 영상을 생성하는 경우, 광량비에 대응하여 색감의 명도 및 채도 중 적어도 하나를 달리할 수 있다. 예를 들어, 광량비가 먼지의 농도가 높은 경우에 대응되는 경우, 해당 픽셀에 대응되는 위치의 명도를 진하게 표시하거나 채도를 높게 표시할 수 있다. 또는, 광량비가 먼지의 농도가 낮은 경우에 대응되는 경우, 해당 픽셀에 대응되는 명도를 흐리게 표시하거나, 채도가 낮게 표시할 수 있다. 사용자는 디스플레이에 표시되는 먼지 분포 영상을 통해 먼지가 분포하는 영역뿐만 아니라 해당 영역의 먼지 농도를 시각적으로 확인할 수 있다.
제1 픽셀 어레이(2111) 및 제2 픽셀 어레이(2121)의 각 픽셀에 입사되는 광량은 피사체와의 거리에 따라 달라 질 수 있다. 이는 피사체와 각 픽셀과의 거리가 먼 경우, 대기 중 먼지의 농도가 높지 않더라고 산란되는 광량이 많기 때문이다. 구체적으로, 거리에 따라 광이 산란되는 정도는 다음 수식과 같다. μs는 medium 및 먼지 크기에 따른 산란 계수, d는 센서와 측정 대상체 간 거리, A는 상수, I(d)/I0는 광량 감쇄 비율이다. 즉, 센서와 측정 대상체 간 거리(d)가 실수록 광량 감쇄 비율(I(d)/I0)은 크다.
Figure PCTKR2019006993-appb-img-000001
.......(식 1)
따라서, 먼지 농도를 반영하여 먼지 분포 영상을 생성하는 경우 피사체와의 거리를 반영할 필요가 있다. 이를 위해, 본 발명은 제1 카메라(211)와 제2 카메라(212)간 스테레오 비전 연산을 통해 피사체와의 거리 정보를 획득할 수 있다. 즉, 본 발명은 대응되는 특정 픽셀의 광량비를 통해 1차 적으로 먼지 분포 영상을 획득하고, 특정 픽셀에 대응되는 피사체와의 거리 정보를 통해 1차적으로 획득한 먼지 분포 영상을 보정할 수 있다. 예를 들어, 피사체와의 거리가 멀어 입사광이 많이 산란되더라도 이를 통해 먼지 분포 영상에서 명도를 진하게 표시하거나 특정 색감에 근접하게 표시하지 않고, 거리 정보를 반영하여 명도 및 채도 중 적어도 하나를 보정할 수 있다. 또는 특정 픽셀에 대응되는 피사체와의 거리 정보를 반영하여 광량비를 산출하고 이를 통해 먼지 분포 영상을 획득할 수 있다.
이하에서는 생성된 먼지 분포 영상을 디스플레이 디바이스에 출력하는 실시예를 살펴본다.
도 7은 본 발명의 비동일 스테레오 비전 카메라를 통해 획득된 트루컬러 이미지와 적외선 이미지의 일실시예를 도시하고 있다.
본 발명은 제1 카메라(211)를 통해 트루컬러 이미지를 획득하고, 제2 카메라(212)를 통해 적외선 이미지를 획득할 수 있다. 제1 카메라(211)를 통해 획득된 트루컬러 이미지 및 제2 카메라(212)를 통해 획득된 적외선 이미지 중 적어도 하나는 디스플레이 디바이스를 통해 출력될 수 있다. 구체적으로, 도 7(a)는 제1 카메라(211)를 통해 획득한 트루컬러 이미지를 도시하고 있으며, 도 7(b)는 동일 피사체를 제2 카메라(212)를 통해 획득한 적외선 이미지를 도시하고 있다.
본 발명의 트루 컬러 이미지는 가시광을 수광하여 획득하는 것으로 대기 중 먼지에 의해 가시성이 현저하게 떨어질 수 있다. 반면, 적외선 이미지는 피사체의 색감을 얻을 수는 없지만, 가시광 보다 파장이 큰 적외선 광을 수광하여 획득하는 것으로 대기 중 먼지에 의해 가시성이 떨어지는 것을 방지할 수 있다. 도 7(a)를 살펴보면 도 7(b)에 도시된 피사체(300)가 먼지(500)에 의해 잘 확인 되지 않는 것을 확인 할 수 있다.
본 발명은 트루 컬러 이미지 또는 적외선 이미지에 미세 먼지 분포 영상을 중첩하여 표시함으로써 사용자로 하여금 보다 용이하게 먼지 분포를 시각적으로 확인할 수 있도록 한다. 이하에서, 트루컬러 이미지 및 적외선 이미지 중 적어도 하나에 먼지 분포 영상을 중첩하여 표시하는 실시예를 살펴본다.
도 8 및 9는 본 발명의 일 실시예에 따라 비동일 스테레오 비전 카메라를 통해 획득된 먼지 분포 영상을 도시하고 있다
본 발명은 트루 컬러 이미지 및 적외선 이미지 중 적어도 하나에 먼지 분포 영상을 중첩하여 표시할 수 있다.
먼지 분포 영상은 농도 정보를 포함할 수 있으며, 농도는 명도 및 채도 중 적어도 하나를 이용하여 달리 표시될 수 있다. 구체적으로, 도 8(a)는 트루 컬러 이미지에 먼지 분포 영상을 표시하되, 먼지 농도는 명도를 통해 시각적으로 구현한 실시예를 도시하고 있다. 도 8(b)는 트루 컬러 이미지에 먼지 분포 영상을 표시하되, 먼지 농도는 채도를 통해 시각적으로 구현한 실시예를 도시하고 있다. 먼지 분포 영상의 명도 및 채도는 연속적으로 변하지 않고 특정 광량비에 따라 단계적으로 표시할 수 있다.
먼지 분포 영상은 도 9와 같이 경계 값을 통해 트루 컬러 이미지 또는 적외선 이미지에 중첩되어 표시될 수 있다. 구체적으로, 도 9(a)는 트루컬러 이미지에 먼지 분포 영역을 경계 표시한 실시예를 도시하고 있으며, 도 9(b)는 적외선 이미지에 먼지 분포 영역을 경계 표시한 실시예를 도시하고 있다. 상기 경계는 특정 광량비를 기준으로 연속적으로 표시되거나, 특정 광량비 이상 또는 이하의 픽셀을 포함하는 최소 영역의 경계일 수 있다. 도 9와 같이 먼지 분포 영상을 표시하는 경우 먼지 농도를 알 수 없다는 단점이 있지만, 먼지 분포 영상을 트루 컬러 이미지 또는 적외선 이미지를 방해하지 않으면서 간이 하게 표시되는 효과가 있다.
도10은 본 발명의 일 실시예에 따라 트루 컬러 이미지에서 가시성을 보완하는 일 실시예를 도시하고 있다.
대기 중에 먼지가 많은 경우 도 7에서 살펴본 바와 같이 가시성이 충분히 확보되지 않을 수 있다. 이 경우, 본 발명은 적외선 이미지를 통해 가시성을 확보할 수 있다.
본 발명은 제1 픽셀 어레이(2111)와 제2 픽셀 어레이(2121)의 대응 픽셀 간 광량비가 기 설정 범주에 속하는 경우, 대기 중에 먼지 가 많아 트루 컬러 이미지를 통해 가시성을 확보하기 어려운 것으로 판단할 수 있다. 이 경우, 본 발명은 광량비가 기 설정 범주에 속하는 영역 정보를 적외선 카메라를 통해 보완할 수 있다.
본 발명은 트루 컬러 이미지에서 미세먼지 분포 영상을 중첩하여 출력하도록 디스플레이 디바이스를 제어하고, 광량비가 기 설정 범위를 벗어나는 경우, 대응되는 위치의 피사체 정보를 적외선 이미지에서 추출하며, 적외선 이미지에서 추출된 피사체 정보를 트루 컬러 이미지에 중첩하여 출려하도록 디스플레이 디바이스를 제어할 수 있다. 여기서, 적외선 이미지에서 추출되는 피사체 정보는 피사체를 구성하는 윤곽 정보, 피사체 판별 정보 피사체의 위치 정보 중 적어도 하나를 포함할 수 있다.
구체적으로, 도 10은 트루 컬러 이미지에 미세먼지 분포 영상(510)을 표시하고, 트루 컬러 이미지 중 광량비가 기 설정 범위에 속하는 영역에서 특정 피사체(310)의 윤곽 정보를 표시하는 실시예를 도시하고 있다. 여기서 특정 피사체(310)의 윤곽 정보는 적외선 이미지를 통해 획득할 수 있다. 이를 통해 사용자는 먼지 분포 및 농도 그리고 먼지 이면에 존재하는 특정 피사체(310)의 존재를 확인할 수 있다.
경우에 따라서, 본 발명은 트루 컬러 이미지에서 상기 먼지 분포 영상(510)을 중첩하여 출력하고, 광량비가 기 설정 범위를 벗어나는 경우, 트루 컬러 이미지를 출력하지 않고, 적외선 이미지를 출력하여 적외선 이미지에 상기 먼지 분포 영상(510)을 중첩하여 출력하도록 디스플레이 디바이스를 제어할 수 있다.
도 11내지 도 15은 본 발명의 일 실시예에 따라, 먼지 분포 영상을 획득하기 방법을 설명하기 위한 흐름도이다.
본 발명은 트루 컬러 이미지를 획득하는 제1 카메라 및 적외선 이미지를 획득하는 제2 카메라를 포함하는 스테레오 비전 카메라를 포함하는 먼지 측정 장치로, 도 11에 도시된 바와 같이, 상기 제1 카메라의 제1 픽셀 어레이와 상기 제2 카메라의 제2 픽셀 어레이의 대응 픽셀간 광량비를 산출하는 단계(S210), 산출된 광량비를 통해 먼지 분포 영상을 획득하는 단계(S211) 및 획득된 먼지 분포 영상을 디스플레이 디바이스를 통해 출력하는 단계(S212)를 포함할 수 있다.
여기서, 제1 픽셀 어레이와 제2 픽셀 어레이의 대응 픽셀간 광량비를 산출하는 단계(S210)는 제1 카메라와 제2 카메라가 동일 해상도인 경우 픽셀을 일대일 대응하여 산출하고, 해상도가 상이한 경우, 제1 픽셀 어레이의 하나의 픿레 및 제2 픽셀 어레이의 하나의 픽셀 중 적어도 하나에 입사된 광량을 해상도 차이를 통해 분할하여 상기 광량비를 산출할 수 있다.
여기서, 산출된 광량비를 통해 먼지 분포 영상을 획득하는 단계(S211)는 먼지 농도 정보를 포함하는 먼지 분포 영상을 획득하는 단계일 수 있다. 먼지 농도 정보는 광량비에 대응하여 명도 및 채도 중 적어도 하나를 달리하여 표시될 수 있다. 예를 들어, 높은 먼지 농도에 대응되는 광량비의 경우, 명도 및 채도 중 적어도 하나를 높게 하고, 낮은 먼지 농도에 대응되는 광량비의 경우, 명도 및 채도 중 적어도 하나를 낮게 하여 먼지 분포 영상을 획득할 수 있다.
구체적으로, 본 발명은 도 12와 같이, 대응되는 픽셀 간 광량비를 산출하는 단계(S220), 산출된 광량비에 대응되는 명도 및 채도 중 적어도 하나로 먼지 분포 영상을 생성하는 단계(S221) 및 생성된 먼지 분포 영상을 디스플레이에 출력하는 단계(S222)를 포함할 수 있다.
이때, 광량비는 피사체와의 거리 정보가 반영된 광량비일 수 있다. 구체적으로, 카메라에 입사되는 광은 피사체와 거리가 멀수록 공기 중에서 지수적으로 산란되어 감쇄될 수 있다. 따라서, 먼지 농도가 낮더라도 피사체와의 거리가 먼 경우 광량비가 높은 먼지 농도에 대응되도록 산출될 수 있다. 따라서, 본 발명은 스테레오 카메라를 통해 피사체의 거리 정보를 산출하고 이를 광량비에 반영하여 먼지 분포 영상을 획득할 수 있다.
구체적으로, 본 발명은 도 13과 같이, 대응되는 픽셀 간 광량비를 산출하는 단계(S230), 산출된 광량비에 대응되는 명도 및 채도 중 적어도 하나로 먼지 분포 영상을 생성하는 단계(S231), 스테레오 비전 카메라에서 획득한 두 이미지간 스테레오 연산을 통해 피사체의 거리 정보를 획득하는 단계(S232), 획득된 거리 정보에 기초하여 생성된 먼지 분포 영상을 보정하는 단계(S233), 및 보정된 먼지 분포 영상을 디스플레이에 출력하는 단계(S234)를 포함할 수 있다. 이때, 피사체의 거리 정보를 획득하는 단계(S232)는 광량비를 산출 하는 단계(S230)이전에 수행되어 거리 정보가 반영된 광량비를 산출하고 이에 대응하여 먼지 분포 영상을 획득할 수 있음은 물론이다
도 11에서 획득된 먼지 분포 영상을 디스플레이 디바이스를 통해 출력하는 단계(S212)는 제1 카메라를 통해 획득한 트루컬러 이미지 또는 제2 카메라를 통해 획득한 적외선 이미지 중 적어도 하나에 먼지 분포 영상을 중첩하여 표시할 수 있다. 이때, 본 발명은 생성된 먼지 분포 영상의 먼지 농도(또는 광량비)가 기 설정 범위에 속하는 경우, 출력 방법을 달리 제어할 수 있다.
구체적으로, 본 발명은 도 14와 같이, 먼지 분포 영상을 획득하는 단계(S240), 먼지 분포 농도가 기 설정 범위 이상인지 판단하는 단계(S241), 먼지 분포 농도가 기 설정 범위 미만인 경우(S241, No), 트루 컬러 이미지를 출력하고(S242), 트루 컬러 이미지에 먼지 분포 영상을 중첩하여 표시하는 단계(S243)을 포함하고, 먼지 분포 농도가 기 설정 범위 이상인 경우(S241, Yes), 적외선 이미지를 출력하고(S244), 적외선 이미지에 먼지 분포 영상을 중첩하여 표시하는 단계(S243)을 포함할 수 있다.
또는, 본 발명은 도 15와 같이, 트루 컬러 이미지를 출력(S250)하는 도중에 먼지 분포 영상을 획득하는 단계(S251), 먼지 분포 농도가 기 설정 범위 이상인지 판단하는 단계(S252), 먼지 분포 농도가 기 설정 범위 미만인 경우(S251, No), 트루 컬러 이미지에 먼지 분포 영상을 중첩하여 표시하는 단계(S253)을 포함하고, 먼지 분포 농도가 기 설정 범위 이상인 경우(S251, Yes), 대응되는 위치에서 적외선 이미지를 통해 피사체 정보를 추출하는 단계(S254) 및 트루 컬러 이미지에 먼지 분포 영상과 함께 추출된 피사체 정보를 추출력하는 단계(S255)를 포함할 수 있다. 경우에 따라서는 먼지 분포 영상 출력 없이 추출된 피사체 정보만을 트루 컬러 이미지에 중첩하여 표시할 수 있다.
상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (13)

  1. 트루컬러 이미지를 획득하는 제1 카메라 및 적외선 이미지를 획득하는 제2 카메라를 포함하는 스테레오 비전 카메라;
    상기 제1 카메라의 제1 픽셀 어레이에서 획득한 광량과 상기 제2 카메라의 제2 픽셀 어레이에서 획득한 광량의 광량비를 이용하여 미세먼지 분포 영상을 생성하는 제어부; 및
    상기 미세먼지 분포 영상을 출력하는 디스플레이 디바이스;를 포함하는 먼지 측정 장치.
  2. 제1 항에 있어서,
    상기 제어부는
    상기 광량비에 대응하여 명도 및 채도 중 적어도 하나를 달리하도록 상기 미세먼지 분포 영상을 생성하는 것을 특징으로 하는 먼지 측정 장치.
  3. 제1항에 있어서,
    상기 제어부는
    상기 트루컬러 이미지와 상기 적외선 이미지 간 스테레오 비전 연산을 통해 피사체의 거리 정보를 획득하고,
    상기 거리 정보에 대응하여 명도 및 채도 중 적어도 하나를 달리하도록 상기 미세먼지 분포 영상을 생성하는 것을 특징으로 하는 먼지 측정 장치.
  4. 제1항에 있어서,
    상기 제2 카메라는
    반사형 적외선 및 열형 적외선 중 적어도 하나를 감지하여 상기 적외선 이미지를 획득하는 것을 특징으로 하는 먼지 측정 장치.
  5. 제4 항에 있어서,
    상기 반사형 적외선은
    광원으로부터 조사된 근적외선(Near Infrared, NIR) 및 단적외선(Short-Wave Infrared, SWIR) 중 적어도 하나를 포함하는 것을 특징으로 하는 먼지 측정 장치.
  6. 제 1항에 있어서,
    상기 열형 적외선은
    피사체에서 복사되는 적외선으로, 중적외선(Medium Wave Infrared, MWIR) 및 원적외선(Far Infrared, FIR) 중 적어도 하나를 포함하는 것을 특징으로 하는 먼지 측정 장치.
  7. 제1항에 있어서,
    상기 먼지 측정 장치는
    상기 광량비를 미세 먼지 농도에 대응하여 저장하는 메모리를 더 포함하는 것을 특징으로 하는 먼지 측정 장치.
  8. 제1항에 있어서,
    상기 디스플레이 디바이스는
    상기 트루컬러 이미지 및 상기 적외선 이미지 중 적어도 하나에 상기 미세먼지 분포 영상을 중첩하여 출력하는 것을 특징으로 하는 먼지 측정 장치.
  9. 제1항에 있어서,
    상기 제어부는
    상기 트루 컬러 이미지에 상기 미세먼지 분포 영상을 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하고,
    상기 광량비가 기 설정 범위에 속하는 경우, 상기 적외선 이미지에 상기 미세먼지 분포 영상을 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하는 것을 특징으로 하는 먼지 측정 장치.
  10. 제1항에 있어서,
    상기 제어부는
    상기 트루 컬러 이미지에 상기 미세먼지 분포 영상을 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하고,
    상기 광량비가 기 설정 범위에 속하는 경우, 대응되는 위치의 피사체 정보를 상기 적외선 이미지에서 추출하고,
    상기 피사체 정보를 상기 트루 컬러 이미지에 중첩하여 출력하도록 상기 디스플레이 디바이스를 제어하는 것을 특징으로 하는 먼지 측정 장치.
  11. 제10항에 있어서,
    상기 피사체 정보는
    상기 피사체를 구성하는 윤곽 정보, 상기 피사체 판별 정보 및 상기 피사체 위치 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 먼지 측정 장치.
  12. 제1항에 있어서,
    상기 제1 카메라는
    상기 제2 카메라와 동일 해상도를 가지고, 상기 제1 픽셀 어레이 및 상기 제2 픽셀 어레이의 대응 픽셀간 상기 광량비를 획득하는 것을 특징으로 하는 먼지 측정 장치.
  13. 제1 항에 있어서,
    상기 제1 카메라는
    상기 제2 카메라와 해상도가 상이하고,
    상기 제어부는
    상기 제1 픽셀 어레이의 하나의 픽셀 및 제2 픽셀 어레이의 하나의 픽셀 중 적어도 하나에 입사된 광량을 상기 해상도 차이를 통해 분할하여 상기 광량비를 획득하는 것을 특징으로 하는 먼지 측정 장치.
PCT/KR2019/006993 2019-06-11 2019-06-11 먼지 측정 장치 Ceased WO2020251069A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US17/601,491 US12155811B2 (en) 2019-06-11 2019-06-11 Dust measurement device
KR1020217031192A KR102597823B1 (ko) 2019-06-11 2019-06-11 먼지 측정 장치
PCT/KR2019/006993 WO2020251069A1 (ko) 2019-06-11 2019-06-11 먼지 측정 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/006993 WO2020251069A1 (ko) 2019-06-11 2019-06-11 먼지 측정 장치

Publications (1)

Publication Number Publication Date
WO2020251069A1 true WO2020251069A1 (ko) 2020-12-17

Family

ID=73781230

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/006993 Ceased WO2020251069A1 (ko) 2019-06-11 2019-06-11 먼지 측정 장치

Country Status (3)

Country Link
US (1) US12155811B2 (ko)
KR (1) KR102597823B1 (ko)
WO (1) WO2020251069A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210117278A (ko) * 2018-12-24 2021-09-28 모바일 피직스 엘티디. 표준 사용자 장비를 사용하는 공기중 미립자 밀도 결정
JP2024543800A (ja) * 2021-12-03 2024-11-26 テレフオンアクチーボラゲット エルエム エリクソン（パブル） 視界の限られた環境における人間の視覚の補強

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10221237A (ja) * 1997-02-03 1998-08-21 Tokyo Electron Ind Co Ltd 粒子分布状態測定装置
KR20120068747A (ko) * 2008-07-28 2012-06-27 헬라 카게아아 휙크 운트 콤파니 스테레오 카메라 시스템
KR20150080101A (ko) * 2013-12-30 2015-07-09 연세대학교 산학협력단 스테레오 카메라
KR20150115926A (ko) * 2013-02-04 2015-10-14 데엔파우 게엘 에스에 검사용 카메라 유닛, 내부 검사 방법, 및 센서 유닛
KR20170140786A (ko) * 2016-06-13 2017-12-21 엘지전자 주식회사 야간 영상표시 장치

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2916062C (en) * 2014-04-18 2020-08-11 Cnh Industrial America Llc Stereo vision for sensing vehicles operating environment
KR101558419B1 (ko) 2015-06-11 2015-10-07 (주)프로브디지털 복수의 카메라를 이용한 영상처리장치 및 제어방법
KR101747603B1 (ko) * 2016-05-11 2017-06-16 재단법인 다차원 스마트 아이티 융합시스템 연구단 컬러 나이트 비전 시스템 및 그 동작 방법
JP7254461B2 (ja) * 2018-08-01 2023-04-10 キヤノン株式会社 撮像装置、制御方法、記録媒体、および、情報処理装置
EP3855215B1 (en) * 2018-09-18 2025-05-28 Panasonic Intellectual Property Management Co., Ltd. Depth acquisition device, depth-acquiring method and program
KR102771158B1 (ko) 2019-10-18 2025-02-26 삼성전자주식회사 미세먼지를 측정하기 위한 전자 시스템 및 이미지 시스템, 및 미세먼지의 측정 방법
JP7361649B2 (ja) 2020-03-30 2023-10-16 株式会社フジタ 粉塵測定装置および粉塵測定方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10221237A (ja) * 1997-02-03 1998-08-21 Tokyo Electron Ind Co Ltd 粒子分布状態測定装置
KR20120068747A (ko) * 2008-07-28 2012-06-27 헬라 카게아아 휙크 운트 콤파니 스테레오 카메라 시스템
KR20150115926A (ko) * 2013-02-04 2015-10-14 데엔파우 게엘 에스에 검사용 카메라 유닛, 내부 검사 방법, 및 센서 유닛
KR20150080101A (ko) * 2013-12-30 2015-07-09 연세대학교 산학협력단 스테레오 카메라
KR20170140786A (ko) * 2016-06-13 2017-12-21 엘지전자 주식회사 야간 영상표시 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210117278A (ko) * 2018-12-24 2021-09-28 모바일 피직스 엘티디. 표준 사용자 장비를 사용하는 공기중 미립자 밀도 결정
KR102788141B1 (ko) 2018-12-24 2025-03-27 모바일 피직스 엘티디. 표준 사용자 장비를 사용하는 공기중 미립자 밀도 결정
JP2024543800A (ja) * 2021-12-03 2024-11-26 テレフオンアクチーボラゲット エルエム エリクソン（パブル） 視界の限られた環境における人間の視覚の補強

Also Published As

Publication number Publication date
US12155811B2 (en) 2024-11-26
KR102597823B1 (ko) 2023-11-03
US20220166964A1 (en) 2022-05-26
KR20210127758A (ko) 2021-10-22

Similar Documents

Publication Publication Date Title
KR101499081B1 (ko) 열화상 카메라 모듈 및 스마트폰
WO2020171513A1 (en) Method and apparatus for displaying surrounding information using augmented reality
WO2014106977A1 (en) Head mounted display and method for controlling the same
WO2018012945A1 (en) Method and device for obtaining image, and recording medium thereof
WO2018066778A1 (ko) 피부 케어 기기
WO2016080605A1 (ko) 전자 기기 및 그 제어방법
WO2020171558A1 (en) Method of providing augmented reality contents and electronic device therefor
WO2017209409A1 (ko) 구형 컨텐츠 편집 방법 및 이를 지원하는 전자 장치
WO2015088101A1 (en) Display device and method of controlling the same
WO2020116844A1 (en) Electronic device and method for acquiring depth information by using at least one of cameras or depth sensor
WO2018044015A1 (ko) 공항용 로봇, 그의 서비스 제공 방법을 수행하는 프로그램이 기록된 기록 매체, 및 그와 연결되는 이동 단말기
WO2020116754A1 (en) Electronic device and method for acquiring depth information of object using the same
WO2019164092A1 (ko) 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법
WO2021080307A1 (en) Method for controlling camera and electronic device therefor
WO2021230568A1 (ko) 증강 현실 서비스를 제공하기 위한 전자 장치 및 그의 동작 방법
WO2014144142A2 (en) Thermographic camera accessory for personal electronics
WO2022080869A1 (ko) 이미지를 이용한 3차원 지도의 업데이트 방법 및 이를 지원하는 전자 장치
WO2015099500A1 (ko) 차량 사고 녹화 장치 및 그것의 방법
WO2021162241A1 (ko) 이미지 센서 제어 방법 및 장치
WO2021006497A1 (ko) 센서를 포함하는 전자 장치 및 그의 동작 방법
WO2019039698A1 (ko) 외부 광에 기반하여 이미지를 처리하는 방법 및 이를 지원하는 전자 장치
WO2021145473A1 (ko) 이동 단말기 및 그의 제어 방법
KR102597823B1 (ko) 먼지 측정 장치
WO2020204291A1 (ko) 전자 장치 및 그의 발열 제어 방법
WO2020050432A1 (ko) 이동 단말기

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19932596

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20217031192

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19932596

Country of ref document: EP

Kind code of ref document: A1