WO2017014330A1 - 웨어러블 장치 및 이를 이용한 정보 입력 방법 - Google Patents

웨어러블 장치 및 이를 이용한 정보 입력 방법 Download PDF

Info

Publication number
WO2017014330A1
WO2017014330A1 PCT/KR2015/007468 KR2015007468W WO2017014330A1 WO 2017014330 A1 WO2017014330 A1 WO 2017014330A1 KR 2015007468 W KR2015007468 W KR 2015007468W WO 2017014330 A1 WO2017014330 A1 WO 2017014330A1
Authority
WO
WIPO (PCT)
Prior art keywords
movement
wearable device
sensors
epidermis
wrist
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2015/007468
Other languages
English (en)
French (fr)
Inventor
김건년
박광범
김원효
곽연화
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Korea Electronics Technology Institute
Original Assignee
Korea Electronics Technology Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Korea Electronics Technology Institute filed Critical Korea Electronics Technology Institute
Priority to PCT/KR2015/007468 priority Critical patent/WO2017014330A1/ko
Priority to CN201580081762.1A priority patent/CN107850935B/zh
Priority to PCT/KR2015/012969 priority patent/WO2016099049A1/ko
Priority to US15/537,679 priority patent/US10488924B2/en
Publication of WO2017014330A1 publication Critical patent/WO2017014330A1/ko
Priority to US15/873,786 priority patent/US10884504B2/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/681—Wristwatch-type devices
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0384—Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a three-dimensional [3D] space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors

Definitions

  • the present invention relates to a wearable device and an information input method using the same, and more particularly, to an information input device for recognizing a gesture of a user wearing the device and inputting information based on the recognized gesture, and an information input method using the same. It is about.
  • Korean Patent No. 10-0634494 discloses a wearable information input device, an information processing device, and an information input method.
  • the input device may measure the distance between the fingers that change according to the bending of the finger, and select an information input item according to the detected distance.
  • Korean Patent No. 10-1130150 discloses an input device, an information processing device, and a method for controlling the input device.
  • Such an input device detects pressurization and the like using a detection data value changed by pressurization or contact with the surface of the sensor unit, determines a position, and generates a control signal accordingly.
  • An embodiment of the present invention is to provide a device for sensing the physical change of the epidermis of the body region to recognize the movement of the body part and to input information based on this.
  • One embodiment of the present invention is to provide an information input device that can recognize the movement of the finger and wrist by sensing the physical change of the wrist epidermis due to the change of the muscle of the wrist.
  • An embodiment of the present invention is to provide an information input method that can control an external device based on the movement of the recognized body part.
  • the wearable device determines a movement of the body part based on a sensor array including a plurality of sensors each sensing a physical change to the epidermis of the body region and sensing signals received from the plurality of sensors.
  • Body movement determining unit determines a movement of the body part based on a sensor array including a plurality of sensors each sensing a physical change to the epidermis of the body region and sensing signals received from the plurality of sensors.
  • the density of the plurality of sensors may be proportional to the muscle density below the epidermis of the corresponding body region.
  • the body movement pattern storage unit may further include a body movement pattern storage unit which associates and stores movements of the body parts with predefined sensing signal patterns of the plurality of sensors.
  • the body motion determiner compares the information on the received sensing signals with the sensing signal patterns stored in the body motion pattern body movement pattern storage unit to detect a similarity and based on the similarity of the body part You can decide to move.
  • the body movement transmitter may further include a body movement transmitter configured to transmit the information about the movement of the determined body part to an external device through a communication network.
  • the sensor array may sense strain of the epidermis of the corresponding body region.
  • the sensor array may be located on the wrist to detect the physical change of the wrist epidermis due to the change of muscle, including the jangmugwa and wicking muscle.
  • the muscle density below the epidermis of the corresponding body region may be disposed near the epidermis below a certain reference and may further include an inertial sensor for measuring the angular velocity and acceleration according to the movement of the body part.
  • the body motion determiner may determine the movement of the body part based on sensing signals received from the plurality of sensors and angular velocity and acceleration measured from the inertial sensor.
  • the information input method may further include detecting physical changes to the skin of the corresponding body region in a sensor array including a plurality of sensors, and based on sensing signals received from the plurality of sensors at the body movement determiner. And determining the movement of the body part.
  • the method may further include transmitting, by the body movement transmitter, information on the movement of the determined body part.
  • transmitting the information on the movement of the determined body part may include identifying an Internet of Things device linked through a communication network and moving the determined body part to the linked IoT device. And transmitting information about the control device.
  • the wearable device may recognize a movement of a body part by detecting a physical change to the epidermis of the body region of the user.
  • the wearable device may detect physical changes in the wrist epidermis due to changes in the wrist muscles, recognize movements of the fingers and the wrist, and input information based on the movements of the fingers.
  • the wearable device may control the external device based on the movement of the recognized body part.
  • FIG. 1 is a diagram illustrating a wearable device according to an embodiment of the present invention.
  • FIG. 2 is a block diagram illustrating a configuration of the wearable device of FIG. 1.
  • FIG. 3 is a diagram illustrating the sensor array in FIG. 2.
  • FIG. 4 is an example of a sensor included in the sensor array of FIG. 3.
  • 5 is a diagram illustrating muscles of a finger and a wrist.
  • FIG. 6 is a diagram illustrating a process of detecting physical changes to the epidermis using the wearable device of FIG. 1.
  • FIG. 7 is a diagram illustrating a wearable device according to another embodiment of the present invention.
  • FIG. 8 is a flowchart illustrating an information input method using a wearable device according to an embodiment of the present invention.
  • first and second are intended to distinguish one component from another component, and the scope of rights should not be limited by these terms.
  • first component may be named a second component, and similarly, the second component may also be named a first component.
  • an identification code (e.g., a, b, c, etc.) is used for convenience of description, and the identification code does not describe the order of the steps, and each step clearly indicates a specific order in context. Unless stated otherwise, they may occur out of the order noted. That is, each step may occur in the same order as specified, may be performed substantially simultaneously, or may be performed in the reverse order.
  • the present invention can be embodied as computer readable code on a computer readable recording medium
  • the computer readable recording medium includes all kinds of recording devices in which data can be read by a computer system.
  • Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and are also implemented in the form of a carrier wave (for example, transmission over the Internet). It also includes.
  • the computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion.
  • FIG. 1 is a diagram illustrating a wearable device according to an embodiment of the present invention.
  • a user may input information by wearing the wearable device 120 in the body region 110.
  • the wearable device 120 of FIG. 1 may be worn on a user's wrist in the form of a band or a bracelet using a flexible sensor array, and may receive information through the movement of a hand.
  • the user may wear the wearable device 120 on the wrist and input desired information by moving a hand wearing the wearable device 120.
  • the wearable device 120 may detect a physical change of the epidermis of the corresponding body region according to the movement of the body part of the user, determine the movement of the body part based on the movement, and receive information intended by the user.
  • FIG. 1 illustrates an example in which a user wears a wearable device on a wrist
  • the present invention may be applied to a wearable device that is worn or attached to other body parts besides the wrist.
  • the shape of the wearable device may be modified to facilitate wearing or attaching to a corresponding body part.
  • FIG. 2 is a block diagram illustrating a configuration of the wearable device of FIG. 1.
  • the wearable device 120 includes a sensor array 210, a body motion determiner 220, a body motion pattern storage unit 230, a body motion transmitter 240, and a controller 250. .
  • the sensor array 210 senses physical changes to the epidermis of the body region in contact with the plurality of sensors.
  • the sensor array 210 may convert the physical change of the epidermis into an electrical signal and output the electrical signal, and may be located in a direction facing the body region so as to easily detect the physical change of the epidermis.
  • the sensor array 210 may be composed of a plurality of sensors in which the density is not uniformly arranged to sense strain of the epidermis.
  • the density of the plurality of sensors may be proportional to the muscle density below the epidermis of the corresponding body region. For example, a plurality of sensors may be concentrated under the epidermis of the body region where the muscles are densely packed, and the plurality of sensors may not be located under the epidermis of the body region where the muscles are not concentrated.
  • the sensor array 210 may be configured as a flexible tactile sensor array to sense strain of the epidermis.
  • the body movement pattern storage unit 230 associates movements of the body part with predefined sensing signal patterns of the plurality of sensors of the sensor array 210. Information about the sensing signal pattern and the movement of the body part corresponding thereto may be defined by the developer and stored in the body movement pattern storage 230 in advance. As more information is defined, the wearable device 120 may recognize various movements and receive various information based on the movement.
  • the body movement determiner 220 determines the movement of the body part based on the sensing signals received from the plurality of sensors of the sensor array 210. In one embodiment, the body motion determiner 220 compares the sensing signals detected by the sensor array 210 with the sensing signal patterns stored in the body motion pattern storage 230 to search for a matching pattern. In one embodiment, the body movement determiner 220 may detect the similarity by comparing the sensing signals received from the plurality of sensors with the sensing signal patterns. Here, the degree of similarity may correspond to how similar the received sensing signals are to a predefined sensing signal pattern, that is, whether the received sensing signals match a specific sensing signal pattern within a preset error range.
  • the body movement determiner 220 searches for a pattern matching the received sensing signals within a preset error range. As a result of the comparison, if there is a matched pattern, the body motion determiner 220 recognizes the movement of the body part corresponding to the matched pattern as the user's motion. If there is no match, the body motion determiner 220 detects the sensor. The sensing signals detected by the array 210 are discarded and wait again.
  • the body motion transmitter 240 transmits information on the movement of the body part determined by the body motion determiner 220 to an external device through a communication network.
  • the body motion transmitter 240 may transmit information to the external device linked with the wearable device 120 through a communication network.
  • the wearable device 120 may control the external device or input information to the external device.
  • the wearable device 120 may include a power supply.
  • the power supply unit may supply power required for the operation of the wearable device 120.
  • the power supply unit may correspond to a battery, and replaceable or rechargeable may be used.
  • the power supply unit may be charged through a wired charging means or a wireless charging means.
  • the controller 250 controls the operation and the flow of data of the sensor array 210, the body motion determiner 220, the body motion pattern storage 230, and the body motion transmitter 240.
  • FIG. 3 is a diagram illustrating the sensor array in FIG. 2.
  • the sensor array 210 includes a plurality of sensors 310, and the plurality of sensors 310 may include a first sensor 311, a second sensor 312, and a first sensor 311.
  • the third sensor 313, the fourth sensor 314, the fifth sensor 315, and the sixth sensor 316 may be configured to sense physical changes to the epidermis of the contacted body region.
  • the plurality of sensors 310 when the sensor array 210 is worn on the wrist as shown in FIG. 3 (b) and the center line 320 portion of the sensor array 210 is located at the bottom of the wrist, the plurality of sensors 310 May be arranged such that the distance between the plurality of sensors 310 corresponds to a, b, c, and d based on the density of muscles in the wrist. More specifically, since the muscles in the wrist are concentrated at the bottom of the wrist and the muscles are not dense at the top of the wrist compared to the bottom of the wrist, the plurality of sensors may be separated by a distance corresponding to a ⁇ b ⁇ c ⁇ d. 310 may be arranged.
  • each of the plurality of sensors 310 may be arranged and applied in a form capable of efficiently detecting physical changes to the epidermis of the body region according to the type of the contact target site or the position of the muscle present in the contact target site. Can be.
  • Each of the plurality of sensors 310 of the sensor array 210 of FIG. 3A may sense strain of the epidermis with respect to the epidermis of the corresponding body region in contact.
  • the sensor array 210 may detect minute epidermal deformation of the wrist region according to the change of the wrist muscle.
  • a person moves a hand (eg, a finger and / or a wrist) by moving the dorsum and dorsum muscles penetrating the wrist. That is, the hand movements vary according to the movements of the jangmuji flexor and the wicked flexor, and the epidermis of the wrist where the muscle is located changes according to the movement of the jangmuji flexor and the wicked flexor.
  • Figure 5 (a) is a view showing the muscles of the fingers and wrist, (b) is a jangmuji flexor muscle, (c) is a view showing the wick muscle.
  • the sensor array 210 When the sensor array 210 is located on the wrist, the sensor array 210 detects the deformation degree of the epidermis according to the movement of the long limb muscle and the wick muscle, converts it into an electrical signal, and the body motion determiner 220 The sensing signal received from the sensor array 210 is compared with the sensing signal pattern stored in the body movement pattern storage 230. When there is a matched pattern, the body movement determiner 220 may recognize a movement corresponding to the matched pattern as the hand movement of the user.
  • the body movement pattern storage unit 230 may store predefined sensing signal patterns based on a sensing signal sensed by each of the plurality of sensors 310. More specifically, the first sensor 311, the second sensor 312, the third sensor 313, the fourth sensor 314, the fifth sensor 315, and the sixth sensor 316 are in contact with each other.
  • the sensing signal pattern may be defined based on whether the physical change of the epidermis of the body region and the physical change are detected.
  • ⁇ (first sensor, yes), (second sensor, yes), (third sensor, no), (fourth sensor, no), (fifth sensor, no), (sixth sensor, yes) ⁇ may be stored in association with the fist-handling movement, and the sensing signal received from the plurality of sensors 310 of the sensor array 210 is ⁇ Corresponds to (first sensor, yes), (second sensor, yes), (third sensor, no), (fourth sensor, no), (fifth sensor, no), (sixth sensor, yes) ⁇ In this case, it may be recognized that the user who is using the wearable device 120 makes a fist movement.
  • FIG. 4 is an example of a sensor included in the sensor array of FIG. 3.
  • Each of the plurality of sensors 310 included in the sensor array 210 may be configured as (a) or (b) of FIG. 4.
  • each of the plurality of sensors 310 may include a plurality of tactile sensor arrays to detect physical deformation of the contacted epidermis.
  • the tactile sensor is a sensor that senses the physical characteristics of the contact area and converts it into an electrical signal, and may be a silicon-based CMOS tactile sensor, a polymer polymer-based tactile sensor, or a pressure sensitive material-based tactile sensor.
  • each of the plurality of sensors 310 is a flexible PCB (FPCB) substrate in which a plurality of tactile sensors are mounted in an array, and a polymer protective layer stacked on and under the FPCB on which the tactile sensors are mounted. Can be configured.
  • FPCB flexible PCB
  • each of the plurality of sensors 310 may be configured as a flexible tactile sensor module, wherein the flexible tactile sensor module has a terminal connected to an electrode line of the tactile sensor in the form of a flat cable It can be manufactured with a tactile sensor.
  • a flexible tactile sensor module having a signal processing connection unit may be implemented in the same form as a flexible flat cable (FFC).
  • the flexible tactile sensor module includes a strain gauge 420, insulating films 411 and 412, a first electrode line 460, a second electrode line 430, a first opening 451, and a second opening ( 452 and support 450. More specifically, the flexible tactile sensor module is connected to one end of the strain gauge 420, the insulating layers 411 and 412 surrounding the strain gauge 420, and the strain gauge 420 to be formed in and on the insulating layers 411 and 412.
  • the first electrode line 460 which is connected to the other end of the strain gauge 420, and connected to the other ends of the first electrode line 460 and the strain gauge 420, which are formed in and on the surfaces of the insulating layers 411 and 412.
  • the second opening 452 may be formed, and the support part 450 may be formed under the insulating layers 411 and 412.
  • the insulating films 411 and 412 are separated into a first insulating layer 411 and a second insulating layer 412, and a strain between the first insulating layer 411 and the second insulating layer 412. It is connected to one end of the gauge 420 is arranged between the first insulating layer 411 and the second insulating layer 412, the second electrode line 430 is a strain gauge 420 inside the second insulating layer 412 ) May be connected to the other end and arranged along the surface of the first insulating side 411.
  • a plating layer plated on the first and second electrode lines 460 and 430 may be further formed in the second opening 452.
  • the insulating films 411 and 412 may be made of a flexible polymer.
  • the sensor array 210 including a plurality of sensors 310 composed of FIGS. 4A or 4B may be formed by contacting the epidermis of the contact region through the plurality of sensors 310 arranged in the array.
  • the strain may be sensed, and more specifically, the strain of the contact skin may be sensed through each of the plurality of sensors 310 including a plurality of tactile sensors arranged in an array.
  • the sensor array 210 may detect minute epidermal deformation of the wrist region according to the change of the wrist muscle.
  • FIG. 6 is a diagram illustrating a process of detecting physical changes to the epidermis using the wearable device of FIG. 1.
  • the deformation of the wrist epidermis before and after the movement of the finger and the wrist is detected using the wearable device 120, and it can be output as a signal.
  • a movement of grasping by using a finger a movement of twisting a wrist, a movement of extending a finger, and a movement of moving the wrist up and down are illustrated as an example.
  • the movement of the hand (at least one of the finger and the wrist) may be recognized based on the detected deformation degree.
  • the sensing signals received from the plurality of sensors 310 of the sensor array 210 mounted on the wrist may be different from each other according to the type of movement of at least one of the finger and the wrist.
  • the body motion determiner 220 may determine the user's hand movement by comparing the sensing signal received from the sensor array 210 with the sensing signal pattern stored in the body movement pattern storage 230.
  • FIG. 7 is a diagram illustrating a wearable device according to another embodiment of the present invention.
  • the wearable device 120 includes an inertial sensor 710, a sensor array 210, a body motion determiner 220, a body motion pattern storage unit 230, a body motion transmitter 240, and a controller. 720.
  • an inertial sensor 710 the wearable device 120 includes an inertial sensor 710, a sensor array 210, a body motion determiner 220, a body motion pattern storage unit 230, a body motion transmitter 240, and a controller. 720.
  • a description will be given focusing on a part different from the configuration of FIG. 2.
  • the inertial sensor 710 measures the acceleration and the angular velocity according to the movement of the body part and outputs the electrical signal.
  • the inertial sensor 710 may be included in the wearable device 120, or may be included in another external device worn or possessed by the user.
  • the muscle density below the epidermis of the corresponding body region may be disposed near the epidermis, which is below a certain standard.
  • the sensor array 210 detects a physical change of the epidermis of the contacted body part and converts the physical change into an electrical signal and outputs the electrical change.
  • the body movement pattern storage unit 230 stores information about a predefined physical change and inertia pattern and movement of a body corresponding to the pattern.
  • the body motion determiner 220 stores the electrical signals (acceleration and angular velocity information) output from the inertial sensor 710 and the physical change signals of the epidermis output from the sensor array 210 in the physical motion pattern storage unit 230.
  • the matching pattern is searched for compared to the change and inertia patterns.
  • the body motion determiner 220 searches for a pattern that is matched within a preset error range, and if there is a match, the body motion determiner 220 detects a body motion corresponding to the matched pattern. Recognize it as a movement.
  • the body movement determining unit 220 may be configured to physically change the epidermis of the corresponding body region received from the sensor array 210.
  • the grab motion may be recognized based on the sensing signals, and the pulling motion and the pulling direction may be recognized based on the electrical signal output from the inertial sensor 710.
  • the wearable device 120 transmits the recognized result information to the external device through the body movement transmitter 240 to control the external device or input information. For example, when the wearable device 120 recognizes a grab and pull movement with a robot arm (external device), the robot arm pulls a real object by transmitting the recognized information to the robot arm. Can be controlled. Alternatively, when the wearable device 120 recognizes a movement that is linked and pulled with a computer (external device), the wearable device 120 may transmit a recognized information to the computer to move a screen or input a command to remove specific information.
  • the controller 720 controls the operation and data flow of the inertial sensor 710, the sensor array 210, the body motion determiner 220, the body motion pattern storage 230, and the body motion transmitter 240. .
  • FIG. 8 is a flowchart illustrating an information input method using a wearable device according to an embodiment of the present invention.
  • the sensor array 210 detects a physical change to the epidermis of the corresponding body region in contact (step S810).
  • the sensor array 210 may be configured of a plurality of sensors 310 or a tactile sensor array to detect strain of the contacted body region epidermis.
  • the sensor array 210 may detect a physical change of the wrist epidermis due to a change in the wrist muscle.
  • the sensor array 210 converts the physical change sensed by the plurality of sensors 310 into a sensing signal and transmits it to the body movement determiner 220 (step S820).
  • the body motion determiner 220 compares the sensing signal received from the sensor array 210 with the sensing signal pattern previously defined in the body motion pattern storage 230 (S830). If there is a matched pattern, the body motion determiner 220 recognizes a body part motion corresponding to the matched pattern as the user's motion (step S840).
  • the information input method according to the present invention may further include the step of measuring the angular velocity and acceleration according to the movement of the body region through the inertial sensor 710.
  • the body movement determiner 220 may recognize the movement of the user based on the physical change information of the epidermis measured by the sensor array 210 and the angular velocity and acceleration measured by the inertial sensor.
  • the body motion transmitter 240 transmits information on the movement of the body part recognized by the body motion determiner 220 to an external device through a wired or wireless communication network (step S850).
  • the body motion transmitter 240 may transmit information about a motion to an external device through a short range wireless communication network such as Bluetooth, Ultra Wide Band (UWB), or the like.
  • a short range wireless communication network such as Bluetooth, Ultra Wide Band (UWB), or the like.
  • the body movement transmitter 240 identifies the IoT device linked with the wearable information input device through a wireless communication network. In addition, information about the movement may be transmitted to the linked IoT device.
  • IoT Internet of Things
  • the present invention relates to a wearable device for recognizing a gesture of a user wearing a device and inputting information based on the recognized gesture, and an information input method using the same, which has industrial applicability.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

웨어러블 장치는 해당 신체 영역의 표피에 대한 물리적 변화를 각각 감지하는 복수의 센서들을 포함하는 센서 어레이 및 상기 복수의 센서들로부터 수신된 센싱 신호들을 기초로 신체 부위의 움직임을 결정하는 신체 움직임 결정부를 포함한다.

Description

웨어러블 장치 및 이를 이용한 정보 입력 방법
본 발명은 웨어러블 장치 및 이를 이용한 정보 입력 방법에 관한 것으로, 보다 상세하게는, 장치를 착용한 사용자의 제스처를 인식하고 인식된 제스처를 기반으로 정보를 입력하는 정보 입력 장치 및 이를 이용한 정보 입력 방법에 관한 것이다.
유비쿼터스 컴퓨팅 환경으로 컴퓨터 환경이 변화되면서 다양한 정보 입력장치가 개발되어 왔다. 이러한 정보 입력 장치의 기술 변화는 키보드 휴대형에서 신체의 일부를 이용한 입력 장치로 진화되고 있다.
한국등록특허 제10-0634494호는 착용 가능한 정보 입력 장치, 정보 처리 장치 및 정보 입력 방법을 개시한다. 이러한 입력 장치는 손가락 구부림에 따라 변화하는 손가락 사이의 거리를 측정하여, 감지된 거리에 따라 정보 입력 항목을 선택할 수 있다.
한국등록특허 제10-1130150호는 입력 장치, 정보 처리 장치 및 입력장치 제어방법을 개시한다. 이러한 입력 장치는 센서부 표면에 대한 가압 또는 접촉에 의해 변화되는 검출 데이터값을 이용해 가압 등을 검출하고 위치를 판정하여 그에 따른 제어 신호를 생성한다.
본 발명의 일 실시예는 신체 영역 표피의 물리적 변화를 감지하여 신체 부위의 움직임을 인식하고 이를 기초로 정보를 입력하는 장치를 제공하고자 한다.
본 발명의 일 실시예는 손목의 근육 변화에 의한 손목 표피의 물리적 변화를 감지하여 손가락 및 손목의 움직임을 인식할 수 있는 정보 입력 장치를 제공하고자 한다.
본 발명의 일 실시예는 인식된 신체 부위의 움직임을 기초로 외부 디바이스를 제어할 수 있는 정보 입력 방법을 제공하고자 한다.
실시예들 중에서, 웨어러블 장치는 해당 신체 영역의 표피에 대한 물리적 변화를 각각 감지하는 복수의 센서들을 포함하는 센서 어레이 및 상기 복수의 센서들로부터 수신된 센싱 신호들을 기초로 신체 부위의 움직임을 결정하는 신체 움직임 결정부를 포함한다.
일 실시예에서, 상기 복수의 센서들의 밀집도는 상기 해당 신체 영역의 표피 아래에 있는 근육 밀집도에 비례할 수 있다.
일 실시예에서, 상기 복수의 센서들의 기 정의된 센싱 신호 패턴들과 상기 신체 부위의 움직임들을 연관시켜 저장하는 신체 움직임 패턴 저장부를 더 포함할 수 있다.
일 실시예에서, 상기 신체 움직임 결정부는 상기 수신된 센싱 신호들에 대한 정보와 상기 신체 움직임 패턴 신체 움직임 패턴 저장부에 저장된 센싱 신호 패턴들을 비교하여 유사도를 검출하고 상기 유사도를 기초로 상기 신체 부위의 움직임을 결정할 수 있다.
일 실시예에서, 상기 결정된 신체 부위의 움직임에 대한 정보를 통신망을 통해 외부 디바이스로 전송하는 신체 움직임 전송부를 더 포함할 수 있다.
일 실시예에서, 상기 센서 어레이는 상기 해당 신체 영역의 표피의 변형도(Strain)를 감지할 수 있다.
일 실시예에서, 상기 센서 어레이는 손목에 위치하여 장무지굴근 및 심지굴근을 포함하는 근육의 변화에 의한 손목 표피의 물리적 변화를 감지할 수 있다.
일 실시예에서, 상기 해당 신체 영역의 표피 아래에 있는 근육 밀집도가 특정 기준 이하인 표피 인근에 배치되고 상기 신체 부위의 움직임에 따른 각속도 및 가속도를 측정하는 관성 센서를 더 포함할 수 있다.
일 실시예에서, 상기 신체 움직임 결정부는 상기 복수의 센서들로부터 수신된 센싱 신호들과 상기 관성 센서로부터 측정된 각속도 및 가속도를 기초로 상기 신체 부위의 움직임을 결정할 수 있다.
실시예들 중에서, 정보 입력 방법은 복수의 센서들을 포함하는 센서 어레이에서 해당 신체 영역의 표피에 대한 물리적 변화를 각각 감지하는 단계 및 신체 움직임 결정부에서 상기 복수의 센서들로부터 수신된 센싱 신호들을 기초로 신체 부위의 움직임을 결정하는 단계를 포함한다.
일 실시예에서, 신체 움직임 전송부에서 상기 결정된 신체 부위의 움직임에 대한 정보를 전송하는 단계를 더 포함할 수 있다.
일 실시예에서, 상기 결정된 신체 부위의 움직임에 대한 정보를 전송하는 단계는 통신망을 통해 링크된 사물인터넷(Internet of Things) 디바이스를 확인하는 단계 및 상기 링크된 사물인터넷 디바이스에 상기 결정된 신체 부위의 움직임에 대한 정보를 전송하여 해당 디바이스를 제어하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 따른 웨어러블 장치는 사용자의 신체 영역의 표피에 대한 물리적 변화를 감지하여 신체 부위의 움직임을 인식할 수 있다.
본 발명의 일 실시예에 따른 웨어러블 장치는 손목 근육의 변화에 의한 손목 표피의 물리적 변화를 감지하여 손가락 및 손목의 움직임을 인식하고, 이를 기초로 정보를 입력할 수 있다.
본 발명의 일 실시예에 따른 웨어러블 장치는 인식된 신체 부위의 움직임을 기초로 외부 디바이스를 제어할 수 있다.
도 1은 본 발명의 일 실시예에 따른 웨어러블 장치를 예시한 도면이다.
도 2는 도 1에 있는 웨어러블 장치의 구성을 설명하는 블록도이다.
도 3은 도 2에 있는 센서 어레이를 예시한 도면이다.
도 4는 도 3에 있는 센서 어레이가 포함하고 있는 센서에 대한 예시이다.
도 5는 손가락과 손목의 근육을 예시한 도면이다.
도 6은 도 1에 있는 웨어러블 장치를 이용하여 표피에 대한 물리적 변화를 감지하는 과정을 예시한 도면이다.
도 7은 본 발명의 다른 일 실시예에 따른 웨어러블 장치를 예시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 웨어러블 장치를 이용한 정보 입력 방법을 설명하는 순서도이다.
본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.
한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.
"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.
본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한, 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.
도 1은 본 발명의 일 실시예에 따른 웨어러블 장치를 예시한 도면이다.
도 1을 참조하면, 사용자는 신체 영역(110)에 웨어러블 장치(120)를 착용하여 정보를 입력할 수 있다. 예를 들어, 도 1의 웨어러블 장치(120)는 플렉서블(flexible) 센서 어레이를 이용하여 밴드 또는 팔찌의 형태로 사용자의 손목에 착용될 수 있고, 손의 움직임을 통해 정보를 입력 받을 수 있다.
즉, 사용자는 손목에 웨어러블 장치(120)를 착용하고, 웨어러블 장치(120)를 착용한 손을 움직임으로써 원하는 정보를 입력할 수 있다. 웨어러블 장치(120)는 사용자의 신체 부위 움직임에 따른 해당 신체 영역의 표피에 대한 물리적 변화를 감지하고, 이를 기초로 신체 부위의 움직임을 결정하여 사용자가 의도한 정보를 입력 받을 수 있다.
도 1에서는 사용자가 손목에 웨어러블 장치를 착용한 예를 도시하였으나, 본 발명은 손목 외 다른 신체 부위에 착용 또는 부착되는 웨어러블 장치로도 응용될 수 있다. 이러한 경우, 해당 신체 부위에 착용 또는 부착이 용이하도록 웨어러블 장치의 형태가 변형될 수 있다.
도 2는 도 1에 있는 웨어러블 장치의 구성을 설명하는 블록도이다.
도 2를 참조하면, 웨어러블 장치(120)는 센서 어레이(210), 신체 움직임 결정부(220), 신체 움직임 패턴 저장부(230), 신체 움직임 전송부(240) 및 제어부(250)를 포함한다.
센서 어레이(210)는 복수의 센서들과 접촉된 신체 영역의 표피(epidermis)에 대한 물리적 변화를 감지한다. 센서 어레이(210)는 표피의 물리적 변화를 전기 신호로 변환하여 출력하고, 표피의 물리적 변화를 용이하게 감지할 수 있도록 신체 영역과 대면하는 방향에 위치할 수 있다. 일 실시예에서, 센서 어레이(210)는 밀집도가 균일하지 않게 배열되어 있는 복수의 센서들로 구성되어 표피의 변형도(Strain)를 감지할 수 있다. 일 실시예에서, 복수의 센서들의 밀집도는 해당 신체 영역의 표피 아래에 있는 근육 밀집도에 비례할 수 있다. 예를 들어, 근육이 많이 밀집되어 있는 신체 영역의 표피 아래에는 복수의 센서들이 밀집되어 있고, 근육이 밀집되어 있지 않은 신체 영역의 표피 아래에는 복수의 센서들이 밀집되어 위치하고 있지 않을 수 있다.
일 실시예에서, 센서 어레이(210)는 플렉서블 촉각 센서 어레이(array)로 구성되어 표피의 변형도(Strain)를 감지할 수 있다.
신체 움직임 패턴 저장부(230)는 센서 어레이(210)의 복수의 센서들의 기 정의된 센싱 신호 패턴들과 신체 부위의 움직임들을 연관시켜 저장한다. 센싱 신호 패턴과 그에 대응되는 신체 부위의 움직임에 대한 정보는 개발자에 의해 정의되어 미리 신체 움직임 패턴 저장부(230)에 저장될 수 있다. 해당 정보가 많이 정의되어 있을수록 웨어러블 장치(120)는 다양한 움직임을 인식하고 이를 기초로 다양한 정보를 입력 받을 수 있다.
신체 움직임 결정부(220)는 센서 어레이(210)의 복수의 센서들로부터 수신된 센싱 신호들을 기초로 신체 부위의 움직임을 결정한다. 일 실시예에서, 신체 움직임 결정부(220)는 센서 어레이(210)에서 감지된 센싱 신호들과 신체 움직임 패턴 저장부(230)에 저장된 센싱 신호 패턴을 비교하여, 매칭되는 패턴을 검색한다. 일 실시예에서, 신체 움직임 결정부(220)는 복수의 센서들로부터 수신된 센싱 신호들과 센싱 신호 패턴들을 비교하여, 유사도를 검출할 수 있다. 여기에서, 유사도는 수신된 센싱 신호들과 기 정의된 센싱 신호 패턴이 어느정도 유사한지, 즉, 수신된 센싱 신호들이 기 설정된 오차 범위 내로 특정 센싱 신호 패턴과 매칭되는지 여부에 해당할 수 있다.
일 실시예에서, 신체 움직임 결정부(220)는 수신된 센싱 신호들과 기 설정된 오차 범위 내로 매칭되는 패턴을 검색한다. 비교결과 매칭되는 패턴이 있는 경우 신체 움직임 결정부(220)는 매칭된 패턴에 대응되는 신체 부위의 움직임을 사용자의 움직임으로 인식하고, 매칭되는 패턴이 없는 경우에는 신체 움직임 결정부(220)는 센서 어레이(210)에서 감지된 센싱 신호들을 버리고 다시 대기한다.
신체 움직임 전송부(240)는 신체 움직임 결정부(220)에서 결정된 신체 부위의 움직임에 대한 정보를 통신망을 통해 외부 디바이스로 전송한다. 예를 들어, 신체 움직임 전송부(240)는 웨어러블 장치(120)와 통신망을 통해 링크된 외부 디바이스에 정보를 전송할 수 있다. 이를 통해 웨어러블 장치(120)는 외부 디바이스를 제어하거나 외부 디바이스에 정보를 입력할 수 있다.
일 실시예에서, 웨어러블 장치(120)는 전원부를 포함할 수 있다. 전원부는 웨어러블 장치(120)의 동작에 필요한 전원을 공급할 수 있다. 예를 들어, 전원부는 배터리에 해당할 수 있으며, 교체형 또는 충전형이 사용될 수 있다. 충전형의 경우 전원부는 유선 충전 수단 또는 무선 충전 수단을 통해 충전될 수 있다.
제어부(250)는 센서 어레이(210), 신체 움직임 결정부(220), 신체 움직임 패턴 저장부(230) 및 신체 움직임 전송부(240)의 동작 및 데이터의 흐름을 제어한다.
도 3은 도 2에 있는 센서 어레이를 예시한 도면이다.
도 3의 (a)를 참조하면, 센서 어레이(210)는 복수의 센서들(310)을 포함하고, 복수의 센서들(310)은 제1 센서(311), 제2 센서(312), 제3 센서(313), 제4 센서(314), 제5 센서(315) 및 제6 센서(316)로 구성되어 접촉된 신체 영역의 표피에 대한 물리적 변화를 감지할 수 있다.
일 실시예에서, 센서 어레이(210)가 도 3의 (b)와 같이 손목에 착용되고 센서 어레이(210)의 중앙선(320) 부분이 손목 하단에 위치하는 경우에는, 복수의 센서들(310)은 손목에 있는 근육의 밀집도를 기초로 복수의 센서들(310)간의 거리가 a, b, c 및 d에 해당하도록 배열될 수 있다. 보다 구체적으로, 손목에 있는 근육들은 손목 하단에 밀집되어 있고, 손목 상단에는 손목 하단에 비하여 상태적으로 근육들이 밀집되어 있지 않기 때문에 a<b<c<d에 해당하는 거리로 복수의 센서들(310)이 배열될 수 있다. 즉, 손목 하단의 복수의 센서들(310)의 밀집도는 손목 상단의 복수의 센서들(310)의 밀집도 보다 높다. 이에 더하여, 복수의 센서들(310) 각각은 접촉 대상 부위의 종류 또는 접촉 대상 부위에 존재하는 근육의 위치에 따라 신체 영역의 표피에 대한 물리적 변화를 효율적으로 감지할 수 있는 형태로 배열되어 응용될 수 있다.
도 3의 (a)의 센서 어레이(210)의 복수의 센서들(310) 각각은 접촉된 해당 신체 영역의 표피에 대한 표피의 변형도(Strain)를 감지할 수 있다. 예를 들어, 도 1의 웨어러블 장치(120)의 경우, 센서 어레이(210)는 손목 근육의 변화에 따른 손목 부위의 미세한 표피 변형도를 감지할 수 있다.
예를 들어, 도 5의 손가락과 손목 근육을 참조하여 설명하면, 사람은 손목을 관통하는 장무지굴근과 심지굴근을 움직여서 손(예를 들어, 손가락 및/또는 손목)을 움직인다. 즉, 장무지굴근과 심지굴근의 움직임에 따라 손 움직임이 달라지며, 장무지굴근과 심지굴근의 움직임에 따라 해당 근육이 위치한 손목의 표피가 변화한다. 도 5의 (a)는 손가락과 손목 근육을 나타낸 도면이며, (b)는 장무지굴근, (c)는 심지굴근을 나타낸 도면이다.
센서 어레이(210)가 손목에 위치하는 경우, 센서 어레이(210)는 장무지굴근과 심지굴근의 움직임에 따른 표피의 변형도를 감지하여 이를 전기적 신호로 변환하고, 신체 움직임 결정부(220)는 센서 어레이(210)에서 수신된 센싱 신호를 신체 움직임 패턴 저장부(230)에 저장된 센싱 신호 패턴과 비교한다. 매칭된 패턴이 있는 경우, 신체 움직임 결정부(220)는 매칭된 패턴에 대응되는 움직임을 사용자의 손 움직임으로 인식할 수 있다.
일 실시예에서, 신체 움직임 패턴 저장부(230)는 복수의 센서들(310) 각각이 감지하는 센싱 신호를 기초로 기 정의된 센싱 신호 패턴들을 저장할 수 있다. 보다 구체적으로, 제1 센서(311), 제2 센서(312), 제3 센서(313), 제4 센서(314), 제5 센서(315) 및 제6 센서(316)가 각각 접촉하고 있는 해당 신체 영역의 표피에 대한 물리적 변화를 감지하였는지 여부 및 물리적 변화를 감지하였다면 표피의 변형도가 어느 정도인지를 기초로 센싱 신호 패턴을 정의할 수 있다. 예를 들어, [표 1]을 참조하면, {(제1 센서, yes), (제2 센서, yes), (제3 센서, no), (제4 센서, no), (제5 센서, no), (제6 센서, yes)}에 해당하는 센싱 신호 패턴은 주먹을 쥐는 움직임과 연관시켜 저장될 수 있고, 센서 어레이(210)의 복수의 센서들(310)로부터 수신된 센싱 신호가 {(제1 센서, yes), (제2 센서, yes), (제3 센서, no), (제4 센서, no), (제5 센서, no), (제6 센서, yes)}에 해당하는 경우에는 웨어러블 장치(120)를 사용하고 있는 사용자가 주먹을 쥐는 움직임을 하였다고 인식할 수 있다.
제1 센서 제2 센서 제3 센서 제4 센서 제5 센서 제6 센서 움직임
물리적 변화 감지 여부 yes yes no no no yes 주먹 쥐기
yes no yes yes no yes 손목 상하 움직임
no no yes yes no no 손목 비틀기
도 4는 도 3에 있는 센서 어레이가 포함하고 있는 센서에 대한 예시이다.
센서 어레이(210)에 포함되어 있는 복수의 센서들(310) 각각은 도 4의 (a) 또는 (b)로 구성될 수 있다.
도 4의 (a)를 참조하면, 복수의 센서들(310) 각각은 다수의 촉각 센서 어레이(array)로 구성되어 접촉된 표피의 물리적 변형을 감지할 수 있다. 촉각 센서는 접촉 부위의 물리적 특성을 감지하여 전기적 신호로 바꾸는 센서로서 실리콘 기반 CMOS 촉각 센서, 고분자 폴리머 기반 촉각 센서, 압력감응재료 기반 촉각 센서 등이 사용될 수 있다. 일 실시예에서, 복수의 센서들(310) 각각은 다수의 촉각센서가 어레이로 실장된 플렉서블 PCB(FPCB) 기판, 촉각센서가 실장된 FPCB의 상부와 하부에 적층되는 폴리머(plymer) 보호층으로 구성될 수 있다.
일 실시예에서, 복수의 센서들(310) 각각은 촉각 센서를 m×n 행렬 어레이로 배열하였으나, 촉각 센서 어레이는 접촉 대상 부위의 종류에 따라 물리적 변형을 효율적으로 감지할 수 있는 형태로 배열되어 응용될 수 있다.
도 4의 (b)를 참조하면, 복수의 센서들(310) 각각은 플렉서블 촉각 센서 모듈로 구성될 수 있고, 여기에서, 플렉서블 촉각 센서 모듈은 촉각 센서의 전극 라인과 연결된 단자가 평면 케이블 형태로 촉각 센서와 함께 제조될 수 있다. 또한, 연성 평면 케이블(Flexible Flat Cable, FFC)과 같은 형태로 신호처리 접속부가 구비된 플렉서블 촉각 센서 모듈을 구현할 수 있다.
일 실시예에서, 플렉서블 촉각 센서 모듈은 스트레인 게이지(420), 절연막(411 및 412), 제1 전극 라인(460), 제2 전극라인(430), 제1 개구(451), 제2 개구(452) 및 지지부(450)를 포함한다. 보다 구체적으로, 플렉서블 촉각 센서 모듈은 스트레인 게이지(420), 스트레인 게이지(420)를 감싸고 있는 절연막(411 및 412), 스트레인 게이지(420) 일단에 연결되어 절연막(411 및 412) 내부 및 표면에 형성되어 있는 제1 전극 라인(460), 스트레인 게이지(420) 타단에 연결되어 절연막(411 및 412) 내부 및 표면에 형성되어 있는 제1 전극 라인(460), 스트레인 게이지(420) 타단에 연결되어 절연막(411 및 412) 내부 및 표면에 형성되어 있는 제2 전극 라인(430), 스트레인 게이지(420)의 일부를 부상시킬 수 있는 제1 개구(451) 및 제2 전극 라인(430)을 노출시키는 제2 개구(452)가 형성되어 있고 절연막(411 및 412) 하부에 형성된 지지부(450)로 구성될 수 있다.
일 실시예에서, 절연막(411 및 412)은 제1 절연층(411) 및 제2 절연층(412)으로 분리되어 있고, 제1 절연층(411) 및 제2 절연층(412) 사이에 스트레인 게이지(420)의 일단에 연결되어 제1 절연층(411) 및 제2 절연층(412) 사이로 배열되어 있고, 제2 전극 라인(430)은 제2 절연층(412) 내부에서 스트레인 게이지(420) 타단에 연결되어 제1 절연측(411) 표면을 따라 배열되어 있는 구조로 이루어질 수 있다.
일 실시예에서, 제2 개구(452)의 내부에는 제1 및 제2 전극 라인(460 및 430)에 도금된 도금층이 더 형성될 수 있다.
일 실시예에서, 절연막(411 및 412)은 유연한(Flexible) 폴리머로 구성될 수 있다.
일 실시예에서, 도 4의 (a) 또는 (b)로 구성된 복수의 센서들(310)을 포함하는 센서 어레이(210)는 어레이로 배열된 복수의 센서들(310)을 통하여 접촉 부위 표피의 변형도(Strain)를 감지할 수 있고, 보다 구체적으로 어레이로 베열된 다수의 촉각센서를 포함하고 있는 복수의 센서들(310) 각각을 통하여 접촉 부위 표피의 변형도(Strain)를 감지할 수 있다. 예를 들어, 도 1의 웨어러블 장치(120)의 경우, 센서 어레이(210)는 손목 근육의 변화에 따른 손목 부위의 미세한 표피 변형도를 감지할 수 있다.
도 6은 도 1에 있는 웨어러블 장치를 이용하여 표피에 대한 물리적 변화를 감지하는 과정을 예시한 도면이다.
도 6을 참조하면, 웨어러블 장치(120)를 이용하여 손가락 및 손목의 움직임 전후의 손목 표피의 변형도를 감지하고, 이를 신호로 출력할 수 있음을 확인할 수 있다. 도 6에서는 손가락을 이용하여 잡는 움직임, 손목을 비트는 움직임, 손가락을 펴는 움직임 및 손목을 상하로 움직이는 움직임을 일 예로 도시하였으나, 웨어러블 장치(120)는 다양한 움직임에 대한 손목 표피의 변형도를 감지할 수 있으며, 감지된 변형도를 기초로 손(손가락 및 손목 중 적어도 하나)의 움직임을 인식할 수 있다.
예를 들어, 도 6을 참조하면, 손가락 및 손목 중 적어도 하나의 움직임의 종류에 따라서 손목에 장착된 센서 어레이(210)의 복수의 센서들(310)로부터 수신된 센싱 신호들의 전/후가 서로 상이하여 신체 움직임 결정부(220)는 센서 어레이(210)에서 수신된 센싱 신호를 신체 움직임 패턴 저장부(230)에 저장된 센싱 신호 패턴과 비교하여 사용자의 손 움직임을 결정할 수 있다.
도 7은 본 발명의 다른 일 실시예에 따른 웨어러블 장치를 예시한 도면이다.
도 7을 참조하면, 웨어러블 장치(120)는 관성 센서(710), 센서 어레이(210), 신체 움직임 결정부(220), 신체 움직임 패턴 저장부(230), 신체 움직임 전송부(240) 및 제어부(720)를 포함한다. 이하에서는 도 2의 구성과 차이가 있는 부분을 중심으로 설명하기로 한다.
관성 센서(710)는 신체 부위의 움직임에 따른 가속도 및 각속도를 측정하여 전기적 신호로 출력한다. 일 실시예에서, 관성 센서(710)는 웨어러블 장치(120)에 포함되어 있을 수도 있고, 사용자가 착용 또는 소지한 외부의 다른 디바이스에 구비되어 있을 수도 있다.
일 실시예에서, 관성 센서(710)가 웨어러블 장치(120)에 포함되어 있는 경우에는 해당 신체 영역의 표피 아래에 있는 근육 밀집도가 특정 기준 이하인 표피 인근에 배치될 수 있다.
센서 어레이(210)는 접촉된 신체 부위의 표피(epidermis)의 물리적 변화를 감지하여 물리적 변화를 전기 신호로 변환하여 출력한다.
신체 움직임 패턴 저장부(230)는 미리 정의된 물리적 변화 및 관성 패턴과 해당 패턴에 대응되는 신체의 움직임에 대한 정보를 저장한다.
신체 움직임 결정부(220)는 관성 센서(710)에서 출력된 전기적 신호(가속도 및 각속도 정보)와 센서 어레이(210)에서 출력된 표피의 물리적 변화 신호를 신체 움직임 패턴 저장부(230)에 저장된 물리적 변화 및 관성 패턴과 비교하여, 매칭되는 패턴을 검색한다. 일 실시예에서, 신체 움직임 결정부(220)는 기 설정된 오차 범위 내로 매칭되는 패턴을 검색하여, 매칭되는 패턴이 있는 경우 신체 움직임 결정부(220)는 매칭된 패턴에 대응되는 신체 움직임을 사용자의 움직임으로 인식한다.
예를 들어, 사용자가 웨어러블 장치(120)를 착용하고 객체를 잡아(grab) 당기는 움직임을 하는 경우, 신체 움직임 결정부(220)는 센서 어레이(210)로부터 수신된 해당 신체 영역 표피의 물리적 변화에 대한 센싱 신호들을 기초로 잡는(grab) 움직임을 인식하고, 관성 센서(710)에서 출력된 전기적 신호를 기초로 당기는 움직임 및 당기는 방향을 인식할 수 있다.
웨어러블 장치(120)는 인식된 결과 정보를 신체 움직임 전송부(240)를 통해 외부 디바이스로 전송하여, 외부 디바이스를 제어하거나 정보를 입력한다. 예를 들어, 웨어러블 장치(120)가 로봇 팔(외부 디바이스)과 링크되고 잡아 당기는(grab and pull) 움직임을 인식한 경우, 인식된 정보를 로봇 팔에 전송하여 로봇 팔이 실제 물체를 잡아 당기는 움직임을 하도록 제어할 수 있다. 또는, 웨어러블 장치(120)가 컴퓨터(외부 디바이스)와 링크되고 잡아 당기는 움직임을 인식한 경우, 인식된 정보를 컴퓨터에 전송하여 화면을 이동하거나, 특정 정보를 제거하는 명령을 입력할 수 있다.
제어부(720)는 관성 센서(710), 센서 어레이(210), 신체 움직임 결정부(220), 신체 움직임 패턴 저장부(230) 및 신체 움직임 전송부(240)의 동작 및 데이터의 흐름을 제어한다.
도 8은 본 발명의 일 실시예에 따른 웨어러블 장치를 이용한 정보 입력 방법을 설명하는 순서도이다.
도 8을 참조하면, 센서 어레이(210)는 접촉된 해당 신체 영역의 표피에 대한 물리적 변화를 감지한다(단계 S810). 예를 들어, 센서 어레이(210)는 복수의 센서들(310) 또는 촉각센서 어레이로 구성되어, 접촉된 신체 영역 표피의 변형도(Strain)를 감지할 수 있다. 손목에 착용하는 웨어러블 장치의 경우, 센서 어레이(210)는 손목 근육의 변화에 의한 손목 표피의 물리적 변화를 감지할 수 있다.
센서 어레이(210)는 복수의 센서들(310)이 감지한 물리적 변화를 센싱 신호로 변환하여 신체 움직임 결정부(220)로 송신한다(단계 S820).
신체 움직임 결정부(220)는 센서 어레이(210)로부터 수신한 센싱 신호를 신체 움직임 패턴 저장부(230)에 기 정의된 센싱 신호 패턴과 비교하여 매칭한다(단계 S830). 매칭되는 패턴이 있는 경우, 신체 움직임 결정부(220)는 매칭된 패턴에 대응되는 신체 부위 움직임을 사용자의 움직임으로 인식한다(단계 S840).
일 실시예에서, 본 발명에 따른 정보 입력 방법은 관성 센서(710)를 통해 신체 영역의 움직임에 따른 각속도 및 가속도를 측정하는 단계를 더 포함할 수 있다. 이러한 경우, 신체 움직임 결정부(220)는 센서 어레이(210)를 통해 측정된 표피의 물리적 변화 정보와 관성 센서를 통해 측정된 각속도 및 가속도를 기초로 사용자의 움직임을 인식할 수 있다.
신체 움직임 전송부(240)는 신체 움직임 결정부(220)에서 인식된 신체 부위의 움직임에 대한 정보를 유선 또는 무선 통신망을 통해 외부 디바이스로 전송한다(단계 S850). 예를 들어, 신체 움직임 전송부(240)는 블루투스(Bluetooth), UWB(Ultra Wide Band) 등과 같은 근거리 무선 통신망을 통해 외부 디바이스로 움직임에 대한 정보를 전송할 수 있다.
일 실시예에서, 사용자가 웨어러블 장치를 통해 사물 인터넷(IoT, Internet of Things) 디바이스를 제어하는 경우, 신체 움직임 전송부(240)는 무선 통신망을 통해 웨어러블 정보 입력장치와 링크된 IoT 디바이스를 확인하고, 링크된 IoT 디바이스로 움직임에 대한 정보를 전송할 수 있다.
상기에서는 본 출원의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 출원을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
본 발명은 장치를 착용한 사용자의 제스처를 인식하고 인식된 제스처를 기반으로 정보를 입력하는 웨어러블 장치 및 이를 이용한 정보 입력 방법에 관한 것으로, 산업상 이용가능성이 있다.

Claims (13)

  1. 해당 신체 영역의 표피에 대한 물리적 변화를 각각 감지하는 복수의 센서들을 포함하는 센서 어레이; 및
    상기 복수의 센서들로부터 수신된 센싱 신호들을 기초로 신체 부위의 움직임을 결정하는 신체 움직임 결정부를 포함하는 웨어러블 장치.
  2. 제1항에 있어서, 상기 복수의 센서들의 밀집도는
    상기 해당 신체 영역의 표피 아래에 있는 근육 밀집도에 비례하는 것을 특징으로 하는 웨어러블 장치.
  3. 제1항에 있어서, 상기 복수의 센서들의 밀집도는
    상기 해당 신체 영역이 손목에 해당하는 경우에는 상기 손목의 하단부분에 대한 밀집도가 상기 손목의 상단부분에 대한 밀집도보다 큰 것을 특징으로 하는 웨어러블 장치.
  4. 제1항에 있어서,
    상기 복수의 센서들의 기 정의된 센싱 신호 패턴들과 상기 신체 부위의 움직임들을 연관시켜 저장하는 신체 움직임 패턴 저장부를 더 포함하는 것을 특징으로 하는 웨어러블 장치.
  5. 제4항에 있어서, 상기 신체 움직임 결정부는
    상기 수신된 센싱 신호들에 대한 정보와 상기 신체 움직임 패턴 신체 움직임 패턴 저장부에 저장된 센싱 신호 패턴들을 비교하여 유사도를 검출하고 상기 유사도를 기초로 상기 신체 부위의 움직임을 결정하는 것을 특징으로 하는 웨어러블 장치.
  6. 제1항에 있어서,
    상기 결정된 신체 부위의 움직임에 대한 정보를 통신망을 통해 외부 디바이스로 전송하는 신체 움직임 전송부를 더 포함하는 것을 특징으로 하는 웨어러블 장치.
  7. 제1항에 있어서, 상기 센서 어레이는
    상기 해당 신체 영역의 표피의 변형도(Strain)를 감지하는 것을 특징으로 하는 웨어러블 장치.
  8. 제1항에 있어서, 상기 센서 어레이는
    손목에 위치하여 장무지굴근 및 심지굴근을 포함하는 근육의 변화에 의한 손목 표피의 물리적 변화를 감지하는 것을 특징으로 하는 웨어러블 장치.
  9. 제1항에 있어서,
    상기 해당 신체 영역의 표피 아래에 있는 근육 밀집도가 특정 기준 이하인 표피 인근에 배치되고 상기 신체 부위의 움직임에 따른 각속도 및 가속도를 측정하는 관성 센서를 더 포함하는 것을 특징으로 하는 웨어러블 장치.
  10. 제9항에 있어서, 상기 신체 움직임 결정부는
    상기 복수의 센서들로부터 수신된 센싱 신호들과 상기 관성 센서로부터 측정된 각속도 및 가속도를 기초로 상기 신체 부위의 움직임을 결정하는 것을 특징으로 하는 웨어러블 장치.
  11. 복수의 센서들을 포함하는 센서 어레이에서 해당 신체 영역의 표피에 대한 물리적 변화를 각각 감지하는 단계; 및
    신체 움직임 결정부에서 상기 복수의 센서들로부터 수신된 센싱 신호들을 기초로 신체 부위의 움직임을 결정하는 단계를 포함하는 정보 입력 방법.
  12. 제11항에 있어서,
    신체 움직임 전송부에서 상기 결정된 신체 부위의 움직임에 대한 정보를 전송하는 단계를 더 포함하는 것을 특징으로 하는 정보 입력 방법.
  13. 제 12항에 있어서, 상기 결정된 신체 부위의 움직임에 대한 정보를 전송하는 단계는
    통신망을 통해 링크된 사물인터넷(Internet of Things) 디바이스를 확인하는 단계; 및
    상기 링크된 사물인터넷 디바이스에 상기 결정된 신체 부위의 움직임에 대한 정보를 전송하여 해당 디바이스를 제어하는 단계를 포함하는 것을 특징으로 하는 정보 입력 방법.
PCT/KR2015/007468 2014-12-17 2015-07-17 웨어러블 장치 및 이를 이용한 정보 입력 방법 Ceased WO2017014330A1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
PCT/KR2015/007468 WO2017014330A1 (ko) 2015-07-17 2015-07-17 웨어러블 장치 및 이를 이용한 정보 입력 방법
CN201580081762.1A CN107850935B (zh) 2015-07-17 2015-07-17 可穿戴设备及利用该设备输入数据的方法
PCT/KR2015/012969 WO2016099049A1 (ko) 2014-12-17 2015-12-01 웨어러블 장치 및 이를 이용한 정보 입력 방법
US15/537,679 US10488924B2 (en) 2014-12-17 2015-12-01 Wearable device, and method of inputting information using the same
US15/873,786 US10884504B2 (en) 2015-07-17 2018-01-17 Wearable wrist device and method of detecting a physical change in the epidermis and wirelessly inputting sensor information using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2015/007468 WO2017014330A1 (ko) 2015-07-17 2015-07-17 웨어러블 장치 및 이를 이용한 정보 입력 방법

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/537,679 Continuation-In-Part US10488924B2 (en) 2014-12-17 2015-12-01 Wearable device, and method of inputting information using the same
US15/873,786 Continuation US10884504B2 (en) 2015-07-17 2018-01-17 Wearable wrist device and method of detecting a physical change in the epidermis and wirelessly inputting sensor information using the same

Publications (1)

Publication Number Publication Date
WO2017014330A1 true WO2017014330A1 (ko) 2017-01-26

Family

ID=57835046

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/007468 Ceased WO2017014330A1 (ko) 2014-12-17 2015-07-17 웨어러블 장치 및 이를 이용한 정보 입력 방법

Country Status (3)

Country Link
US (1) US10884504B2 (ko)
CN (1) CN107850935B (ko)
WO (1) WO2017014330A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019229698A1 (en) * 2018-05-31 2019-12-05 Purple Tambourine Limited Interacting with a virtual environment using a pointing controller
SG11202112942XA (en) * 2019-05-28 2021-12-30 Humain Solutions Ug Haftungsbeschraenkt Wearable human-machine interface and method which can be carried out using same
CN112932468A (zh) * 2021-01-26 2021-06-11 京东方科技集团股份有限公司 一种肌肉运动能力的监测系统以及监测方法
US12111974B1 (en) * 2021-03-16 2024-10-08 Zeit Technologies Corporation Wearable gesture detector
FI129708B (en) 2021-05-18 2022-07-15 Port 6 Oy Estimation of force directed with a finger based on the surface topography of the wrist
CN118067180A (zh) * 2022-11-23 2024-05-24 罗伯特·博世有限公司 安全骑行检测方法及可佩戴装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100074461A (ko) * 2008-12-24 2010-07-02 삼성전자주식회사 동작 감지를 이용하여 제어하는 3차원 마우스 장치 및 방법
KR20110022520A (ko) * 2009-08-27 2011-03-07 한국전자통신연구원 손가락 움직임 검출 장치 및 그 방법
KR20140013845A (ko) * 2012-07-27 2014-02-05 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR101413539B1 (ko) * 2010-11-22 2014-07-02 한국전자통신연구원 자세인식을 이용하는 제어신호 입력장치 및 제어신호 입력방법
KR20150112741A (ko) * 2014-03-27 2015-10-07 전자부품연구원 웨어러블 장치 및 이를 이용한 정보 입력 방법

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5818359A (en) * 1995-07-10 1998-10-06 Beach; Kirk Process and apparatus for computerizing translation of motion of subcutaneous body parts
US6244873B1 (en) * 1998-10-16 2001-06-12 At&T Corp. Wireless myoelectric control apparatus and methods
AT3169U1 (de) * 1999-04-21 1999-11-25 Wagner Herrmann Golf-trainings-vorrichtung sowie golf-trainings-system
US6640202B1 (en) * 2000-05-25 2003-10-28 International Business Machines Corporation Elastic sensor mesh system for 3-dimensional measurement, mapping and kinematics applications
KR100634494B1 (ko) 2002-08-19 2006-10-16 삼성전기주식회사 착용가능한 정보 입력 장치, 정보 처리 장치 및 정보 입력방법
US7396337B2 (en) * 2002-11-21 2008-07-08 Massachusetts Institute Of Technology Powered orthotic device
US7728819B2 (en) 2003-11-17 2010-06-01 Sony Corporation Input device, information processing device, remote control device, and input device control method
US7633076B2 (en) * 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
JP2008305198A (ja) * 2007-06-07 2008-12-18 Fujitsu Component Ltd 入力システム及び入力装置
JP4988016B2 (ja) * 2009-08-27 2012-08-01 韓國電子通信研究院 指の動き検出装置およびその方法
WO2011055326A1 (en) * 2009-11-04 2011-05-12 Igal Firsov Universal input/output human user interface
EP2698686B1 (en) * 2012-07-27 2018-10-10 LG Electronics Inc. Wrist-wearable terminal and control method thereof
US20160299570A1 (en) * 2013-10-24 2016-10-13 Apple Inc. Wristband device input using wrist movement
CN103676604B (zh) * 2013-12-24 2017-02-15 华勤通讯技术有限公司 手表及其运行方法
CN103853333A (zh) * 2014-03-21 2014-06-11 上海威璞电子科技有限公司 一种手势控制玩具的方案
KR102343657B1 (ko) * 2014-08-28 2021-12-24 삼성전자주식회사 손목 근육들의 움직임들에 상응하는 사용자 입력을 처리할 수 있는 애플리케이션 프로세서와 이를 포함하는 장치들
CN104484047B (zh) * 2014-12-29 2018-10-26 北京智谷睿拓技术服务有限公司 基于可穿戴设备的交互方法及交互装置、可穿戴设备
KR101788664B1 (ko) * 2015-08-07 2017-10-20 전자부품연구원 사용자 움직임 모니터링 방법 및 이를 수행하는 시스템
US10488937B2 (en) * 2015-08-27 2019-11-26 Verily Life Sciences, LLC Doppler ultrasound probe for noninvasive tracking of tendon motion
KR102564523B1 (ko) * 2015-12-15 2023-08-08 삼성전자주식회사 플렉서블 전자장치 및 동작 방법
US10137362B2 (en) * 2016-05-04 2018-11-27 Thomas F Buchanan, IV Exo-tendon motion capture glove device with haptic grip response

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100074461A (ko) * 2008-12-24 2010-07-02 삼성전자주식회사 동작 감지를 이용하여 제어하는 3차원 마우스 장치 및 방법
KR20110022520A (ko) * 2009-08-27 2011-03-07 한국전자통신연구원 손가락 움직임 검출 장치 및 그 방법
KR101413539B1 (ko) * 2010-11-22 2014-07-02 한국전자통신연구원 자세인식을 이용하는 제어신호 입력장치 및 제어신호 입력방법
KR20140013845A (ko) * 2012-07-27 2014-02-05 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR20150112741A (ko) * 2014-03-27 2015-10-07 전자부품연구원 웨어러블 장치 및 이를 이용한 정보 입력 방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HWANG, MYUN JOONG: "Sensor-based Recognition of Human's Hand Motion for Control of a Robotic Hand", JOURNAL OF THE KOREA ACADEMIA-INDUSTRIALCOOPERATION SOCIETY, vol. 15, no. 9, 2014, pages 5440 - 5445, XP055348514 *

Also Published As

Publication number Publication date
US10884504B2 (en) 2021-01-05
US20180143697A1 (en) 2018-05-24
CN107850935B (zh) 2021-08-24
CN107850935A (zh) 2018-03-27

Similar Documents

Publication Publication Date Title
KR101618301B1 (ko) 웨어러블 장치 및 이를 이용한 정보 입력 방법
WO2017014330A1 (ko) 웨어러블 장치 및 이를 이용한 정보 입력 방법
US9483123B2 (en) Systems, articles, and methods for gesture identification in wearable electromyography devices
WO2016117758A1 (ko) 손 재활 운동 시스템 및 방법
WO2009123396A2 (en) Training apparatus and method based on motion content
WO2017039062A1 (ko) 휴대용 전자장치
WO2016080669A1 (ko) 생체 음원 인식 기능을 갖는 스마트 와치
WO2016175501A1 (ko) 걸음 인지 시스템 및 그 방법, 그리고 이 방법을 처리하는 프로그램이 기록된 저장 매체
KR20190092782A (ko) 손가락의 움직임 및 공간상에서의 손의 움직임을 인식할 수 있는 글러브형 모션인식 장치 및 방법
WO2020241914A1 (ko) 로봇 툴 체인징 시스템의 마스터 및 슬레이브
WO2021025335A1 (ko) 안테나를 포함하는 디지털 펜의 구조
Fujiwara et al. Development of a glove-based optical fiber sensor for applications in human-robot interaction
WO2022124551A1 (ko) 복수의 전극을 포함하는 웨어러블 전자 장치
WO2016129773A1 (ko) 피드백을 제공하기 위한 방법, 디바이스, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2020122272A1 (ko) 웨어러블 디바이스 및 이의 제스처 인식 방법
WO2016099049A1 (ko) 웨어러블 장치 및 이를 이용한 정보 입력 방법
CN212084102U (zh) 穿戴式智能手套
WO2019107620A1 (ko) 제스처 인식 장치 및 그 방법
WO2016024783A1 (ko) 사용자 조작을 인식하기 위한 방법, 장치 및 비일시성의 컴퓨터 판독 가능한 기록 매체
WO2022177127A1 (ko) 마이크 모듈을 포함하는 전자 장치
WO2020105878A1 (ko) 직물센서를 이용한 압력 측정 장치 및 이를 이용한 사물인터넷 기반 장치 제어 시스템
WO2024190979A1 (ko) 웨어러블 컨트롤러
WO2017069332A1 (ko) 펜 마우스 장치
WO2022086071A1 (ko) 전자 펜 장치의 동작을 제어하기 위한 전자 장치, 전자 장치에서의 동작 방법 및 비 일시적 저장 매체
WO2024090826A1 (ko) 사용자의 제스처를 이용해 인증을 수행하는 전자 장치 및 그 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15898978

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15898978

Country of ref document: EP

Kind code of ref document: A1