WO2021025457A1 - 스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법 - Google Patents

스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법 Download PDF

Info

Publication number
WO2021025457A1
WO2021025457A1 PCT/KR2020/010324 KR2020010324W WO2021025457A1 WO 2021025457 A1 WO2021025457 A1 WO 2021025457A1 KR 2020010324 W KR2020010324 W KR 2020010324W WO 2021025457 A1 WO2021025457 A1 WO 2021025457A1
Authority
WO
WIPO (PCT)
Prior art keywords
stylus pen
electronic device
button
processing method
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2020/010324
Other languages
English (en)
French (fr)
Inventor
강병훈
박상휘
박창병
이주훈
최현석
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to US16/978,123 priority Critical patent/US11874978B2/en
Priority to EP20849884.0A priority patent/EP3992761A4/en
Publication of WO2021025457A1 publication Critical patent/WO2021025457A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1656Details related to functional adaptations of the enclosure, e.g. to provide protection against EMI, shock, water, or to host detachable peripherals like a mouse or removable expansions units like PCMCIA cards, or to provide access to internal components for maintenance or to removable storage supports like CDs or DVDs, or to mechanically mount accessories
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1698Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a sending/receiving arrangement to establish a cordless communication link, e.g. radio or infrared link, integrated cellular phone
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a three-dimensional [3D] space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of two-dimensional [2D] relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0383Signal control means within the pointing device
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1632Pen holder integrated in the computer
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0384Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G06F3/0442Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means using active external devices, e.g. active pens, for transmitting changes in electrical potential to be received by the digitiser
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/046Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by electromagnetic means

Definitions

  • the present disclosure generally relates to an electronic device that recognizes a stylus pen and a method of operating the same.
  • the electronic device may receive various inputs from users through specified input devices (eg, pen input devices or stylus pens) connected through wireless communication with the electronic device.
  • the electronic device may check a location on the electronic device designated by the stylus pen.
  • the electronic device may perform a function corresponding thereto.
  • the electronic device may detect a magnetic field generated from a stylus pen using an electromagnetic induction (EMR) method.
  • EMR electromagnetic induction
  • the electronic device may check the position of the stylus pen based on the induced electromotive force generated by the magnetic field for each channel.
  • the stylus pen may be connected to an electronic device through short-range communication (eg, Bluetooth TM Low Energy (BLE)).
  • the stylus pen may transmit, for example, information on a pressed state of a button disposed on the housing of the stylus pen to the electronic device through short-range communication.
  • the electronic device may perform a designated operation based on the received information.
  • the electronic device may perform a designated operation.
  • a command is transmitted according to an on/off state of a button provided in the stylus pen
  • only operations of a small number of electronic devices may be matched to the on/off state of the button and executed. Accordingly, it may be difficult to effectively control an application supporting various operations based on a stylus pen.
  • one or more features selected from any one embodiment described in the present disclosure may be combined with one or more features selected from any other embodiment described in the present disclosure, and alternatives to these features.
  • two or more physically separate components may alternatively be integrated into a single component if the integration is possible, and a single component thus formed The integration is possible if the same function is performed by.
  • a single component of any embodiment described in the present disclosure may alternatively be implemented as two or more separate components that achieve the same function, as appropriate.
  • An electronic device includes a panel configured to check a position of a stylus pen, a communication module configured to transmit and receive a communication signal with the stylus pen, and at least one processor, wherein the at least one The processor of, based on the detection of the stylus pen by the panel: performs a first operation based on the position of the stylus pen identified by the panel, and the stylus pen is not detected by the panel.
  • the stylus pen Based on: from the stylus pen, at least one of information on the position of the stylus pen or information indicating whether a button of the stylus pen is pressed from at least one communication signal received through the communication module, and the stylus It may be set to perform the second operation based on at least one of information on the position of the pen or information indicating whether a button of the stylus pen is pressed.
  • a stylus pen includes at least one of a resonance circuit including a button, a coil, and at least one capacitor, a movement of the stylus pen, a posture of the stylus pen, or a direction of the stylus pen.
  • At least one sensor a communication module, and at least one control circuit configured to sense the at least one control circuit, wherein the at least one control circuit is based on the fact that the transmission signal from the panel of the electronic device is not confirmed: the button is pressed Check whether the button is pressed, and check information on the position of the stylus pen based on data sensed by the at least one sensor, and information on the position of the stylus pen or the button
  • the communication module is set to control the communication module to transmit at least one communication signal including at least one of information indicating whether or not the electronic device is pressed, and when the transmission signal from the panel of the electronic device is confirmed, the at least one communication signal Can be set not to be transmitted.
  • an electronic device includes a panel (eg, a digitizer or a touch panel) and a communication module capable of confirming the position of a stylus pen.
  • a panel eg, a digitizer or a touch panel
  • a communication module capable of confirming the position of a stylus pen.
  • the electronic device and its operation method when the stylus pen is within the recognition range of the panel, the position of the stylus pen is checked according to the panel processing result.
  • the electronic device and its operation method may check the position of the stylus pen according to a communication signal received from the communication module. As the position of the pen outside the recognition range can be identified, it may be possible to perform a gesture response function and operate a mouse function for moving a cursor with an additional stylus pen.
  • FIG. 1 illustrates an electronic device in a network environment, according to an embodiment.
  • FIG. 2 illustrates an electronic device including a stylus pen, according to an exemplary embodiment.
  • 3A shows a stylus pen, according to one embodiment.
  • 3B shows a stylus pen, according to one embodiment.
  • FIG. 4 illustrates an electronic device and a stylus pen according to an embodiment.
  • FIG 5 illustrates an electronic device according to an embodiment.
  • 6A is a diagram illustrating operations of a stylus pen and an electronic device when an electronic device is inserted into the stylus pen according to an exemplary embodiment.
  • 6B is a diagram illustrating a detailed operation of a stylus pen when an electronic device is inserted, according to an exemplary embodiment.
  • 6C is a diagram illustrating an operation of inserting an electronic device and a stylus pen according to an exemplary embodiment.
  • FIG. 7 illustrates operations of the stylus pen and the electronic device when the electronic device is removed from the stylus pen according to an exemplary embodiment.
  • FIG. 8 is a diagram illustrating operations during insertion/removal between an electronic device and a stylus pen according to an exemplary embodiment.
  • FIG. 9 is a flowchart illustrating a method of operating an electronic device according to an exemplary embodiment.
  • FIG. 10 is a diagram illustrating a positional relationship between a stylus pen and an electronic device according to an exemplary embodiment.
  • FIG. 11 illustrates a method of operating an electronic device according to an exemplary embodiment.
  • FIG. 12 illustrates a method of operating an electronic device and a stylus pen according to an exemplary embodiment.
  • FIG. 13 illustrates a method of operating a stylus pen and an electronic device according to an exemplary embodiment.
  • 14A and 14B are diagrams illustrating an operation of an electronic device in an air mouse mode according to various embodiments.
  • 15A and 15B illustrate an air mouse termination process according to various embodiments.
  • FIG. 16 illustrates a method of operating a stylus pen and an electronic device in a gesture mode according to an embodiment.
  • FIG. 17 shows a gesture mode according to an embodiment.
  • FIG. 18 illustrates an operation of an electronic device in a BLE mode according to an embodiment.
  • FIG. 19 illustrates a method of operating a stylus pen according to an embodiment.
  • FIG. 1 is a block diagram of an electronic device 101 in a network environment 100 according to various embodiments.
  • the electronic device 101 communicates with the electronic device 102 through a first network 198 (for example, a short-range wireless communication network), or a second network 199 It is possible to communicate with the electronic device 104 or the server 108 through (eg, a long-distance wireless communication network).
  • the electronic device 101 may communicate with the electronic device 104 through the server 108.
  • the electronic device 101 includes a processor 120, a memory 130, an input device 150, an audio output device 155, a display device 160, an audio module 170, and a sensor module ( 176, interface 177, haptic module 179, camera module 180, power management module 188, battery 189, communication module 190, subscriber identification module 196, or antenna module 197 ) Can be included.
  • a sensor module 176, interface 177, haptic module 179, camera module 180, power management module 188, battery 189, communication module 190, subscriber identification module 196, or antenna module 197
  • at least one of these components may be omitted or one or more other components may be added to the electronic device 101.
  • some of these components may be implemented as one integrated circuit.
  • the sensor module 176 eg, a fingerprint sensor, an iris sensor, or an illuminance sensor
  • the display device 160 eg, a display.
  • the processor 120 for example, executes software (eg, a program 140) to implement at least one other component (eg, a hardware or software component) of the electronic device 101 connected to the processor 120. It can be controlled and can perform various data processing or operations. According to an embodiment, as at least part of data processing or operation, the processor 120 may store commands or data received from other components (eg, the sensor module 176 or the communication module 190) to the volatile memory 132. The command or data stored in the volatile memory 132 may be processed, and result data may be stored in the nonvolatile memory 134.
  • software eg, a program 140
  • the processor 120 may store commands or data received from other components (eg, the sensor module 176 or the communication module 190) to the volatile memory 132.
  • the command or data stored in the volatile memory 132 may be processed, and result data may be stored in the nonvolatile memory 134.
  • the processor 120 includes a main processor 121 (eg, a central processing unit or an application processor), and a secondary processor 123 (eg, a graphic processing unit, an image signal processor) that can be operated independently or together , A sensor hub processor, or a communication processor). Additionally or alternatively, the coprocessor 123 may be set to use less power than the main processor 121 or to be specialized for a designated function. The secondary processor 123 may be implemented separately from the main processor 121 or as a part thereof.
  • the coprocessor 123 is, for example, on behalf of the main processor 121 while the main processor 121 is in an inactive (eg, sleep) state, or the main processor 121 is active (eg, an application is executed). ) While in the state, together with the main processor 121, at least one of the components of the electronic device 101 (for example, the display device 160, the sensor module 176, or the communication module 190) It is possible to control at least some of the functions or states related to. According to an embodiment, the coprocessor 123 (eg, an image signal processor or a communication processor) may be implemented as part of another functionally related component (eg, the camera module 180 or the communication module 190). have.
  • an image signal processor or a communication processor may be implemented as part of another functionally related component (eg, the camera module 180 or the communication module 190). have.
  • the memory 130 may store various data used by at least one component of the electronic device 101 (eg, the processor 120 or the sensor module 176).
  • the data may include, for example, software (eg, the program 140) and input data or output data for commands related thereto.
  • the memory 130 may include a volatile memory 132 or a nonvolatile memory 134.
  • the program 140 may be stored as software in the memory 130, and may include, for example, an operating system 142, middleware 144, or an application 146.
  • the input device 150 may receive a command or data to be used for a component of the electronic device 101 (eg, the processor 120) from an outside (eg, a user) of the electronic device 101.
  • the input device 150 may include, for example, a microphone, a mouse, a keyboard, or a digital pen (eg, a stylus pen).
  • the sound output device 155 may output an sound signal to the outside of the electronic device 101.
  • the sound output device 155 may include, for example, a speaker or a receiver.
  • the speaker can be used for general purposes such as multimedia playback or recording playback, and the receiver can be used to receive incoming calls. According to one embodiment, the receiver may be implemented separately from the speaker or as part of it.
  • the display device 160 may visually provide information to the outside of the electronic device 101 (eg, a user).
  • the display device 160 may include, for example, a display, a hologram device, or a projector and a control circuit for controlling the device.
  • the display device 160 may include a touch circuitry set to sense a touch, or a sensor circuit (eg, a pressure sensor) set to measure the strength of a force generated by the touch. have.
  • the audio module 170 may convert sound into an electric signal or, conversely, convert an electric signal into sound. According to an embodiment, the audio module 170 acquires sound through the input device 150, the sound output device 155, or an external electronic device (for example, an external electronic device directly or wirelessly connected to the electronic device 101). Sound can be output through the electronic device 102) (for example, a speaker or headphones).
  • an external electronic device for example, an external electronic device directly or wirelessly connected to the electronic device 101. Sound can be output through the electronic device 102) (for example, a speaker or headphones).
  • the sensor module 176 detects an operating state (eg, power or temperature) of the electronic device 101, or an external environmental state (eg, a user state), and generates an electrical signal or data value corresponding to the detected state. can do.
  • the sensor module 176 may include, for example, a gesture sensor, a gyro sensor, an atmospheric pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an IR (infrared) sensor, a biometric sensor, It may include a temperature sensor, a humidity sensor, or an illuminance sensor.
  • the interface 177 may support one or more designated protocols that may be used for the electronic device 101 to connect directly or wirelessly with an external electronic device (eg, the electronic device 102 ).
  • the interface 177 may include, for example, a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital Card
  • the connection terminal 178 may include a connector through which the electronic device 101 can be physically connected to an external electronic device (eg, the electronic device 102 ).
  • the connection terminal 178 may include, for example, an HDMI connector, a USB connector, an SD card connector, or an audio connector (eg, a headphone connector).
  • the haptic module 179 may convert an electrical signal into a mechanical stimulus (eg, vibration or movement) or an electrical stimulus that a user can perceive through a tactile or motor sense.
  • the haptic module 179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 180 may capture a still image and a video.
  • the camera module 180 may include one or more lenses, image sensors, image signal processors, or flashes.
  • the power management module 188 may manage power supplied to the electronic device 101.
  • the power management module 388 may be implemented as, for example, at least a part of a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 189 may supply power to at least one component of the electronic device 101.
  • the battery 189 may include, for example, a non-rechargeable primary cell, a rechargeable secondary cell, or a fuel cell.
  • the communication module 190 is a direct (eg, wired) communication channel or a wireless communication channel between the electronic device 101 and an external electronic device (eg, electronic device 102, electronic device 104, or server 108). It is possible to support establishment and communication through the established communication channel.
  • the communication module 190 operates independently of the processor 120 (eg, an application processor), and may include one or more communication processors that support direct (eg, wired) communication or wireless communication.
  • the communication module 190 is a wireless communication module 192 (eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 194 (eg : A LAN (local area network) communication module, or a power line communication module) may be included.
  • a corresponding communication module is a first network 198 (for example, a short-range communication network such as Bluetooth, WiFi direct or IrDA (infrared data association)) or a second network 199 (for example, a cellular network, the Internet, or It can communicate with external electronic devices through a computer network (for example, a telecommunication network such as a LAN or WAN).
  • the wireless communication module 192 uses subscriber information (e.g., International Mobile Subscriber Identifier (IMSI)) stored in the subscriber identification module 196 in a communication network such as the first network 198 or the second network 199.
  • subscriber information e.g., International Mobile Subscriber Identifier (IMSI)
  • IMSI International Mobile Subscriber Identifier
  • the antenna module 197 may transmit a signal or power to the outside (eg, an external electronic device) or receive from the outside.
  • the antenna module may include one antenna including a conductor formed on a substrate (eg, a PCB) or a radiator formed of a conductive pattern.
  • the antenna module 197 may include a plurality of antennas. In this case, at least one antenna suitable for a communication method used in a communication network such as the first network 198 or the second network 199 is, for example, provided by the communication module 190 from the plurality of antennas. Can be chosen.
  • the signal or power may be transmitted or received between the communication module 190 and an external electronic device through the at least one selected antenna.
  • other components eg, RFIC
  • other than the radiator may be additionally formed as part of the antenna module 197.
  • At least some of the components are connected to each other through a communication method (e.g., a bus, general purpose input and output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI))) between peripheral devices and signals ( E.g. commands or data) can be exchanged with each other.
  • a communication method e.g., a bus, general purpose input and output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI)
  • GPIO general purpose input and output
  • SPI serial peripheral interface
  • MIPI mobile industry processor interface
  • commands or data may be transmitted or received between the electronic device 101 and the external electronic device 104 through the server 108 connected to the second network 199.
  • Each of the electronic devices 102 and 104 may be a device of the same or different type as the electronic device 101.
  • all or part of the operations executed by the electronic device 101 may be executed by one or more of the external electronic devices 102, 104, or 108.
  • the electronic device 101 needs to perform a function or service automatically or in response to a request from a user or another device, the electronic device 101 does not execute the function or service by itself.
  • One or more external electronic devices receiving the request may execute at least a part of the requested function or service, or an additional function or service related to the request, and transmit the execution result to the electronic device 101.
  • the electronic device 101 may process the result as it is or additionally and provide it as at least a part of a response to the request.
  • cloud computing, distributed computing, or client-server computing technology may be used.
  • FIG. 2 illustrates an electronic device 101 including a stylus pen 201 (eg, the electronic device 102 of FIG. 1) according to exemplary embodiments.
  • a stylus pen 201 eg, the electronic device 102 of FIG. 1
  • the electronic device 101 may include a structure in which a stylus pen 201 can be inserted.
  • the electronic device 101 may include a housing 210, and may include a hole 211 in a portion of the housing 210, for example, a portion of the side surface 210a.
  • the electronic device 101 may include a first inner space 212 that is a storage space connected to the hole 211, and the stylus pen 201 may be inserted into the first inner space 212.
  • the stylus pen 201 may include a first button 201a that can be pressed at one end to at least partially take out the stylus pen 201 from the first internal space 212 of the electronic device 101. .
  • a repulsion mechanism e.g., a repulsion mechanism by at least one elastic member such as a spring
  • the stylus pen 201 may be detached from.
  • 3A shows a stylus pen, according to one embodiments.
  • the stylus pen 201 includes a processor 220, a memory 230, a resonance circuit 287, a charging circuit 288, a battery 289, a communication circuit 290, and an antenna 297.
  • a trigger circuit 298 and/or a sensor 299 may be included.
  • the processor 220 of the stylus pen 201, at least a part of the resonance circuit 287, and/or at least a part of the communication circuit 290 may be configured on a printed circuit board or in a chip form. have.
  • the processor 220, the resonant circuit 287 and/or the communication circuit 290 may include a memory 230, a charging circuit 288, a battery 289, an antenna 297, a trigger circuit 298, and/or a sensor. Can be electrically connected to (299).
  • the processor 220 may include a customized hardware module or a generic processor configured to execute software (eg, an application program).
  • the processor 220 is a hardware device including at least one of various sensors provided in the stylus pen 201, a data measurement module, an input/output interface, a module that manages the state or environment of the stylus pen 201, or a communication module. It may include a component (function) or a software component (program).
  • the processor 220 may include one or a combination of two or more of hardware, software, or firmware.
  • the processor 220 includes information indicating a state of a button being pressed, sensing information obtained by the sensor 299, and/or information calculated based on the sensing information (for example, information related to the position of the stylus pen 201). , It may be set to transmit to the electronic device 101 through the communication circuit 290.
  • the resonant circuit 287 may be resonated based on an electromagnetic field signal generated from a digitizer of the electronic device 101 (for example, the display device 160), and an electromagnetic resonance (EMR) method by resonance
  • the input signal (or magnetic field and) can be emitted.
  • the electronic device 101 may check the position of the stylus pen 201 on the electronic device 101 by using an electromagnetic resonance method input signal.
  • the electronic device 101 is based on the magnitude of the induced electromotive force (eg, output current) generated by the electromagnetic resonance type input signal in each of a plurality of channels (eg, a plurality of loop coils) in the digitizer.
  • a plurality of channels eg, a plurality of loop coils
  • the electronic device 101 and the stylus pen 201 have been described as operating based on the EMR method, this is merely exemplary.
  • the electronic device 101 may generate a signal based on an electric field based on an electrically coupled resonance (ECR) method.
  • ECR electrically coupled resonance
  • the resonant circuit of the stylus pen 201 may be resonated by an electric field.
  • the electronic device 101 may check potentials in a plurality of channels (eg, electrodes) due to resonance from the stylus pen 201, and may also check the position of the stylus pen 201 based on the potential. .
  • the stylus pen 201 may also be implemented in an active electrostatic (AES) manner, and it will be understood by those skilled in the art that the present disclosure is not limited to a specific type of implementation.
  • the electronic device 101 may detect the stylus pen 201 based on a change in capacitance (eg, self-capacitance or mutual capacitance) associated with at least one electrode of the touch panel. In this case, the stylus pen 201 may not include a resonance circuit.
  • the term "panel” or “sensing panel” may generically refer to a digitizer and a touch screen panel (TSP).
  • the memory 230 may store information related to the operation of the stylus pen 201.
  • the information may include information for communication with the electronic device 101 and frequency information related to an input operation of the stylus pen 201.
  • the memory 230 is a program (or, an application, an algorithm, or an application for calculating information on the position of the stylus pen 201 (eg, coordinate information and/or displacement information) from the sensing data of the sensor 299, Or you can save the processing loop).
  • the memory 230 may also store a communication stack of the communication circuit 290.
  • the communication circuit 290 and/or the processor 220 may include a dedicated memory.
  • the resonant circuit 287 may include a coil (or an inductor) and/or a capacitor.
  • the resonance circuit 287 may resonate based on an input electric field and/or a magnetic field (eg, an electric field and/or a magnetic field generated from the digitizer of the electronic device 101 ).
  • the stylus pen 201 transmits a signal by the EMR method
  • the stylus pen 201 determines the resonance frequency based on an electromagnetic field generated from the inductive panel of the electronic device 101. It is possible to generate a signal containing.
  • the stylus pen 201 transmits a signal according to the AES method
  • the stylus pen 201 may generate a signal using the electronic device 101 and capacity coupling.
  • the stylus pen 201 transmits a signal by the ECR method
  • the stylus pen 201 generates a signal including a resonant frequency based on an electric field generated from a capacitive device of the electronic device. Can be generated.
  • the resonance circuit 287 may be used to change the strength or frequency of an electromagnetic field according to a user's operation state.
  • the resonance circuit 287 may provide various frequencies for recognizing a hovering input, a drawing input, a button input, or an erasing input.
  • the resonance circuit 287 may provide various resonance frequencies according to a connection combination of a plurality of capacitors, or may provide various resonance frequencies based on a variable inductor and/or a variable capacitor.
  • the resonant signal generated from the resonant circuit 287 may be rectified as a DC signal and provided to the battery 289.
  • the stylus pen 201 may check whether the stylus pen 201 is inserted into the electronic device 101 by using the voltage level of the DC signal sensed by the charging circuit 288. Alternatively, the stylus pen 201 may check whether or not the stylus pen 201 is inserted by checking a pattern corresponding to the signal identified by the charging circuit 288.
  • the battery 289 may be configured to store power for the operation of the stylus pen 201.
  • the battery 289 may include, for example, a lithium-ion battery or a capacitor, and may be rechargeable or exchangeable.
  • the battery 289 may be charged using power (eg, a DC signal (DC power)) provided from the charging circuit 288.
  • DC power DC signal
  • the communication circuit 290 may be configured to perform a wireless communication function between the stylus pen 201 and the communication module 190 of the electronic device 101.
  • the communication circuit 290 may transmit status information, input information, and/or location-related information of the stylus pen 201 to the electronic device 101 using a short-range communication method.
  • the communication circuit 290 transmits direction information (eg, motion sensor data) of the stylus pen 201 acquired through the trigger circuit 298, voice information input through a microphone, or information on the remaining amount of the battery 289 to the electronic device. Can be sent to (101).
  • the communication circuit 290 may transmit sensing data acquired from the sensor 299 and/or information related to the location of the stylus pen 201 identified based on the sensing data to the electronic device 101.
  • the communication circuit 290 may transmit information on the state of the button 337 provided in the stylus pen 201 to the electronic device 101.
  • the short-range communication method may include at least one of Bluetooth, BLE (bluetooth low energy), NFC, and Wi-Fi direct, but the type is not limited.
  • the antenna 297 may be used to transmit a signal or power to the outside (for example, the electronic device 101) or to receive it from the outside.
  • the stylus pen 201 may include a plurality of antennas 297, and among them, at least one antenna 297 suitable for a communication method may be selected. Through the at least one selected antenna 297, the communication circuit 290 may exchange signals or power with an external electronic device.
  • the trigger circuit 298 may include at least one button or sensor circuit.
  • the processor 220 may check the input method (eg, touch or press) or type (eg, EMR button or BLE button) of a button of the stylus pen 201.
  • the trigger circuit 298 may transmit a trigger signal to the electronic device 101 by using an input signal of a button or a signal through the sensor 299.
  • the sensor 299 may include an accelerometer, a gyro sensor, and/or a geomagnetic sensor.
  • the acceleration sensor may sense information about linear movement of the stylus pen 201 and/or acceleration of the stylus pen 201 with respect to three axes.
  • the gyro sensor may sense information related to rotation of the stylus pen 201.
  • the geomagnetic sensor may sense information on a direction in the absolute coordinate system of the stylus pen 201.
  • the sensor 299 includes not only a sensor for measuring movement, but also a sensor capable of generating an electrical signal or data value corresponding to an internal operating state of the stylus pen 201 or an external environmental state, a battery residual amount detection sensor, It may include at least one of a pressure sensor, an optical sensor, a temperature sensor, and a biometric sensor.
  • the processor 220 may transmit the information acquired from the sensor 299 to the electronic device 101 through the communication circuit 290.
  • the processor 220 based on the information obtained from the sensor 299, information related to the position of the stylus pen 201 (for example, coordinates of the stylus pen 201 and / or the displacement of the stylus pen 201) ) May be transmitted to the electronic device 101 through the communication circuit 290.
  • 3B shows a stylus pen, according to one embodiment.
  • the stylus pen 201 may include a pen housing 300 constituting the outer shape of the stylus pen 201 and an inner assembly inside the pen housing 300.
  • the internal assembly may be inserted into the pen housing 300 by one assembly operation in a state in which several parts mounted inside the stylus pen 201 are joined together.
  • the pen housing 300 has a shape extending elongated between the first end 300a and the second end 300b, and may include a second inner space 301 therein.
  • the pen housing 300 may have an elliptical cross section consisting of a long axis and a short axis, and may be formed in an elliptical column shape as a whole.
  • the first internal space 212 of the electronic device 101 described above in FIG. 2 may also have an elliptical cross section corresponding to the shape of the pen housing 300.
  • At least part of the pen housing 300 may include a synthetic resin (eg, plastic) and/or a metallic material (eg, aluminum).
  • the first end 300a of the pen housing 300 may be made of a synthetic resin material. Other various embodiments may be applied to the material of the pen housing 300.
  • the inner assembly may have an elongated shape corresponding to the shape of the pen housing 300.
  • the internal assembly can be largely divided into three configurations along the length direction.
  • the internal assembly includes a coil unit 310 disposed at a position corresponding to the first end 300a of the pen housing 300, and an ejection disposed at a position corresponding to the second end 300b of the pen housing 300 It may include an ejection member 320 and a circuit board portion 330 disposed at a position corresponding to the body of the pen housing 300.
  • the coil unit 310 includes a pen tip 311 exposed to the outside of the first end 300a when the internal assembly is completely inserted into the pen housing 300, a packing ring 312, and a coil wound multiple times. 313 and/or a pen pressure sensing unit 314 for acquiring a pressure change according to the pressure of the pen tip 311.
  • the packing ring 312 may include epoxy, rubber, urethane, or silicone.
  • the packing ring 312 may be provided for waterproof and dustproof purposes, and may protect the coil unit 310 and the circuit board unit 330 from flooding or dust.
  • the coil 313 may form a resonant frequency in a set frequency band (eg, 500 kHz), and the coil 313 is formed within a certain range by being combined with at least one element (eg, a capacitive element). It is possible to adjust the resonant frequency.
  • a set frequency band eg, 500 kHz
  • element e.g, a capacitive element
  • the ejection member 320 may include a configuration for removing the stylus pen 201 from the first internal space 212 of the electronic device 101.
  • the ejection member 320 is disposed around the shaft 321 and the shaft 321, and an ejection body 322 and a button portion 323 (e.g., the first in FIG. 2) forming the overall appearance of the ejection member 320 1 button (201a)) may be included.
  • the portion including the shaft 321 and the ejection body 322 is surrounded by the second end 300b of the pen housing 300, and the button portion At least a portion of the 323 may be exposed to the outside of the second end 300b.
  • a plurality of components may be disposed in the ejection body 322 to form a push-pull structure.
  • the button portion 323 is substantially coupled with the shaft 321 to perform a linear reciprocating motion with respect to the ejection body 322.
  • the button unit 323 may include a button having a locking structure so that a user can pull out the stylus pen 201 using a fingernail.
  • the stylus pen 201 may provide another input method by including a sensor that detects the linear reciprocating motion of the shaft 321.
  • the circuit board part 330 may include a printed circuit board 332, a base 331 surrounding at least one surface of the printed circuit board 332, and an antenna.
  • a substrate mounting portion 333 on which the printed circuit board 332 is disposed is formed on the upper surface of the base 331, and the printed circuit board 332 may be fixed in a state seated on the substrate mounting portion 333.
  • the printed circuit board 332 may include a first side and a second side, a variable capacitance capacitor or switch 334 connected to the coil 313 may be disposed on the first side, and the second side may be charged. Circuits, batteries 336 or communication circuits may be disposed.
  • the first side and the second side of the printed circuit board 332 may mean different laminated surfaces in a structure stacked up/down, and a printed circuit arranged along the length direction of the printed circuit board 332 It can refer to different parts of the substrate.
  • the battery 336 may include an electric double layered capacitor (EDLC).
  • the charging circuit is located between the coil 313 and the battery, and may include a voltage detector circuitry and a rectifier.
  • the battery 336 may not necessarily be disposed on the second surface of the printed circuit board 332. The location of the battery 336 may be set differently according to various mounting structures of the circuit board 330, and thus may be different from that shown in the drawings.
  • the antenna may include an antenna embedded in the antenna structure 339 and/or the printed circuit board 332 as illustrated in FIG. 3B.
  • a switch 334 may be provided on the printed circuit board 332.
  • the second button 337 provided in the stylus pen 201 is used to press the switch 334 and may be exposed to the outside through the side opening 302 of the pen housing 300. While the second button 337 is supported by the support member 338, if there is no external force acting on the second button 337, the support member 338 provides an elastic restoring force to keep the second button 337 constant. It can be restored or maintained as it is placed in the position. Meanwhile, the second button 337 may be implemented in any one of a physical key, a touch key, a motion key, a pressure key, and a key less method, and there is no limitation on the form of the button.
  • the circuit board part 330 may include, for example, a packing ring such as an O-ring. O-rings made of elastic bodies may be disposed at both ends of the base 331 to form a sealing structure between the base 331 and the pen housing 300. The support member 338 may partially contact the inner wall of the pen housing 300 around the side opening 302 to form a sealing structure.
  • the circuit board part 330 may also include a waterproof and dustproof structure similar to the packing ring 312 of the coil part 310 in at least one portion.
  • the stylus pen 201 may include a battery mounting portion 333a on which the battery 336 is disposed on the upper surface of the base 331.
  • the battery 336 that may be mounted on the battery seating portion 333a may include, for example, a cylinder type battery.
  • the stylus pen 201 may include a microphone and/or a speaker.
  • the microphone and/or speaker may be directly connected to the printed circuit board 332 or may be connected to a separate flexible printed circuit board (FPCB) connected to the printed circuit board 332.
  • the microphone and/or speaker may be disposed at a position parallel to the second button 337 in the long direction of the stylus pen 301.
  • FIG. 4 illustrates an electronic device and a stylus pen according to an embodiment.
  • the electronic device 101 may include a pen controller 410.
  • the pen controller 410 may include at least one coil 411 and 412, and may provide charging power to the stylus pen 201 through at least one coil 411 and 412. At least one of the coils 411 and 412 may be disposed at a position physically adjacent to the coil 421 of the stylus pen 201 when the stylus pen 201 is inserted into the storage space of the electronic device 101, but the coil There is no limit to the arrangement position of the 411 and the coil 412.
  • the electronic device 101 may include an area (or space) in which the stylus pen 201 can be mounted (or attached), and in this case, the stylus pen 201 is in the corresponding area (or space). Can be detached. It will be appreciated by those skilled in the art that the operation of the stylus pen 201 in the present disclosure may be performed when it is attached to the mounting area (or space) in another embodiment. At least some of the functions of the pen controller 410 may be performed by the processor 120, or the pen controller 410 and the processor 120 may be integrated to perform at least some of the functions.
  • the pen controller 410 When the pen controller 410 performs a specific operation, the specific operation may be actually performed by the processor 120 or may be performed by a control circuit independent from the processor 120.
  • the pen controller 410 may include a control circuit (eg, a control circuit independent from the processor 120 ), an inverter, and/or an amplifier in addition to the at least one coil 411 and 412.
  • the pen controller 410 may not include a control circuit, and in this case, a signal for charging may be provided to at least one of the coils 411 and 412 under the control of the processor 120.
  • the pen controller 410 may provide a signal having a pattern through at least one coil 411 and 412.
  • the pattern is shared in advance with the stylus pen 201 for control of the stylus pen 201, and may include, for example, at least one of a charge start instruction pattern, a charge end instruction pattern, or a detection pattern.
  • the coils 411 and 412 for providing a charging signal, or a signal having a pattern for control, are shown as two, but this is merely exemplary, and the number is not limited.
  • the resonance circuit 420 of the stylus pen 201 may include a coil 421, at least one capacitor 422 and 423, and/or a switch 424.
  • the switch 424 When the switch 424 is in the off state, the coil 421 and the capacitor 422 may form a resonance circuit, and when the switch 424 is in the on state, the coil 421 and the capacitors 422 and 423 are Resonant circuit can be configured. Accordingly, the resonance frequency of the resonance circuit 420 may be changed according to the on/off state of the switch 424.
  • the electronic device 101 may check the on/off state of the switch 424 based on the frequency of the signal from the stylus pen 201.
  • the switch 424 may be turned on/off, and the electronic device 101 determines whether the button 337 of the stylus pen 201 is pressed, It can be checked based on the frequency of the received signal checked through the digitizer.
  • the at least one rectifier 431 and 435 may rectify and output the AC waveform signal VPEN output from the resonance circuit 420.
  • the charging switch controller (SWchg ctrl) 432 may receive the rectified signal VM output from the rectifier 431. Based on the rectified signal VM, the charging switch controller 432 may check whether a signal generated from the resonance circuit 420 is a charging signal or a position detection signal. For example, the charge switch controller 432 may determine whether a signal generated from the resonance circuit 420 is a signal for charging or a signal for detecting a position based on the magnitude of the voltage of the rectified signal. Alternatively, the charge switch controller 432 may check whether a signal having a charging start pattern is input based on the waveform of the rectified signal.
  • the charging switch controller 432 may control the charging switch (SWchg) 436 to be turned on.
  • the charging switch controller 432 may control the charging switch (SWchg) 436 to be turned on.
  • the charge switch controller 432 may transmit a charge start signal chg_on to the charge switch 436.
  • the rectified signal VIN may be transmitted to the battery 437 through the charging switch 436.
  • the battery 437 may be charged using the received rectified signal VIN.
  • the over-voltage protection circuit (OVP) 433 may check the battery voltage VBAT and, when the battery voltage exceeds the overvoltage threshold, may control the charging switch 436 to be in an off state.
  • the load switch controller (SWL ctrl) 434 may control the load switch (SWL) 438 to be turned on.
  • the load switch 438 When the load switch 438 is turned on, power from the battery 437 may be transferred to a BLE communication circuit and a controller (BLE + controller) 439.
  • the BLE communication circuit and the controller 439 may operate using the received power.
  • the button control circuit 440 When the distance between the stylus pen 201 and the electronic device 101 is greater than the threshold distance, the button control circuit 440 may transmit information on the button input to the BLE communication circuit and the controller 439. have.
  • the BLE communication circuit and the controller 439 may transmit information on the received button input to the electronic device 101 through the antenna 441.
  • the sensor 450 may include a gyro sensor 451 and/or an acceleration sensor 452.
  • the sensing data acquired by the gyro sensor 451 and/or the acceleration sensor 452 may be transmitted to the BLE communication circuit and the controller 439.
  • the BLE communication circuit and controller 439 may transmit a communication signal including the received sensing data to the electronic device 101 through the antenna 441.
  • the BLE communication circuit and the controller 439 may check information related to the location of the stylus pen 201 (eg, coordinates and/or displacement of the stylus pen 201), which is identified based on the received sensing data. .
  • the BLE communication circuit and controller 439 may transmit information related to the identified location of the stylus pen 201 to the electronic device 101 through the antenna 441.
  • the BLE communication circuit and controller 439 may activate the acceleration sensor 452 when the stylus pen 201 is withdrawn from the electronic device 101.
  • the BLE communication circuit and controller 439 may activate the gyro sensor 451 when a button is pressed.
  • the activation time is merely exemplary, and there is no limit to the activation time for each sensor.
  • the sensor 450 may further include a geomagnetic sensor. When only the acceleration sensor 452 is activated, the stylus pen 201 may provide acceleration information measured by the acceleration sensor 452 to the electronic device 101, and the electronic device 101 It may operate based on the identified position and acceleration information of the stylus pen 201 at the same time.
  • FIG. 4 shows a BLE communication circuit and a controller 439
  • the present disclosure is not limited to BLE communication, and other suitable short-range communication methods may be used.
  • FIG. 5 illustrates a configuration of an electronic device according to an embodiment.
  • the electronic device 101 may include a sensing panel controller 511, a processor 512, a Bluetooth controller 513, and/or an antenna 514.
  • the electronic device 101 includes a sensing panel 503, a display assembly 502 disposed on the sensing panel 503, and/or a window 501 disposed on the display assembly 502. ) Can be included.
  • a touch screen panel for sensing a user's touch may be further disposed on the upper or lower side.
  • the touch screen panel may be positioned above the display assembly 502.
  • the sensing panel 503 may be implemented as a digitizer and may include a plurality of loop coils.
  • the sensing panel 503 may include an element (eg, an amplifier) for applying an electrical signal (eg, a transmission signal) to the loop coils. .
  • the sensing panel 503 may include elements (eg, amplifiers, capacitors, ADCs) for processing signals (eg, input signals) output from loop coils.
  • the sensing panel 503 may check the position of the stylus pen 201 and output it to the processor 120 based on the magnitude of signals respectively output from the loop coils (eg, digital values converted for each channel).
  • the processor 120 may check the position of the stylus pen 201 based on the magnitude of signals output from the loop coils (eg, digital values converted for each channel).
  • the sensing panel 503 may apply current to at least one of the loop coils, and at least one coil may form a magnetic field.
  • the stylus pen 201 may be resonated by a magnetic field formed around it, and a magnetic field may be formed from the stylus pen 201 by resonance.
  • Current may be output from each of the loop coils by the magnetic field formed from the stylus pen 201.
  • the electronic device 101 may check the position of the stylus pen 201 based on the magnitude of the current for each channel of the loop coils (eg, converted digital values).
  • coils extending in one axis (eg, x-axis) direction and coils extending in the other axis (eg, y-axis) direction may be included. There is no limit to the arrangement type.
  • the sensing panel controller 511 may apply the transmission signal Tx to at least some of the plurality of loop coils of the sensing panel 503, and the loop coil receiving the transmission signal Tx may form a magnetic field. .
  • the sensing panel controller 511 may receive a reception signal Rx from at least some of the plurality of loop coils in a time-division manner.
  • the sensing panel controller 511 may check the position of the stylus pen 201 based on the received signal Rx and transmit the position of the stylus pen 201 to the processor 512. For example, the size of the received signal Rx for each of a plurality of loop coils (eg, for each channel) may be different, and the position of the stylus pen 201 may be determined based on the sizes of the received signals. .
  • the electronic device 101 may determine whether a button of the stylus pen 201 is pressed based on the frequency of the received signal.
  • the frequency of the received signal is the first frequency
  • the electronic device 101 can confirm that the button of the stylus pen 201 is pressed.
  • the frequency of the received signal is the second frequency
  • the electronic device 110 may confirm that the button of the stylus pen 201 is not pressed or released.
  • the sensing panel is implemented as a touch screen panel (TSP)
  • the sensing panel 503 may check the position of the stylus pen 201 based on an output signal from the electrode.
  • the touch screen panel may be positioned above the display assembly 502.
  • the touch screen panel may be implemented in an in-cell structure in which a sensor electrode is positioned inside the display assembly 502, or an on-cell structure in which the sensor electrode is positioned on the display assembly 502 ( On-cell) structure can also be implemented.
  • the electronic device 101 may detect the pen based on a change in capacitance (mutual capacitance and/or self capacitance) in the touch panel electrode.
  • Hardware capable of sensing a pen signal from a digitizer or a stylus pen of a touch screen panel may be referred to as a sensing panel 503.
  • the electronic device 101 may check whether the button is pressed based on the received communication signal.
  • the sensing panel controller 511 may check whether the stylus pen 201 is inserted (or coupled) to the electronic device 101 based on the received signal, and may transmit this to the processor 512.
  • the sensing panel controller 511 may be implemented integrally with the sensing panel 503.
  • the pen controller 410 of FIG. 4 may be implemented with the sensing panel controller 510 and one integrated circuit (IC).
  • the processor 512 may transmit a signal for wireless charging based on whether or not it is inserted.
  • the processor 512 controls the Bluetooth controller 513 based on whether or not it is inserted, and controls the Bluetooth controller 513 to connect wireless communication to the stylus pen 201 if a wireless communication connection is not established. can do.
  • the stylus pen 201 may transmit charging capacity information to the electronic device 101 through wireless communication.
  • the stylus pen 201 may transmit information on a button press and sensor data to the electronic device 101.
  • the processor 512 may control to transmit a charging signal and a control signal to the sensing panel controller 511 based on data received from the stylus pen 201.
  • the processor 512 may check a gesture of the stylus pen 201 based on data received from the stylus pen 201 and may perform an operation corresponding to the gesture.
  • the processor 512 may transfer a function mapped to a gesture to an application.
  • the Bluetooth controller 513 may transmit and receive information through the stylus pen 201 and the antenna 514.
  • the display assembly 502 may include an element for displaying a screen.
  • the window 501 may be made of a transparent material so that at least a part of the display assembly 502 can be visually exposed.
  • 6A is a diagram illustrating operations of a stylus pen and an electronic device when an electronic device is inserted into the stylus pen according to an exemplary embodiment.
  • a stylus pen 201 may be inserted into a storage space of the electronic device 101.
  • the user may insert the stylus pen 201 into the storage space of the electronic device 101, and the corresponding operation is processed with a dotted line based on that the stylus pen 201 is not an active operation.
  • FIG. 6A illustrates an example in which the stylus pen 201 and the stylus pen 201 having no communication connection with the electronic device 101 are inserted into the electronic device 101.
  • the processor 120 included in the electronic device 101 or the processor 220 included in the stylus pen 201 It may mean performing a specific operation.
  • the processor 120 included in the electronic device 101 or the processor 220 included in the stylus pen 201 may cause other hardware to perform a specific operation. It can also mean controlling to perform a specific operation.
  • the processor 120 included in the electronic device 101 or the processor 220 included in the stylus pen 201 performs a specific operation. To perform, it may mean that an instruction stored in the memory is executed or an instruction is stored.
  • the electronic device 101 may detect the insertion of the stylus pen 201.
  • the electronic device 101 may detect insertion of the stylus pen 201 based on a received signal received from the stylus pen 201 in response to a transmission signal transmitted through the storage space coil. .
  • the electronic device 101 may perform an initialization operation, and may transmit, for example, a reset command to the stylus pen 201.
  • the electronic device 101 may transmit a reset command when it is confirmed that a connection is not established, an idle state, a stuck state, or a stylus pen 201 having no connection history is inserted.
  • the stylus pen 201 may perform a reset operation. For example, the stylus pen 201 may release the existing BLE connection and initialize the BLE communication module.
  • the stylus pen 201 may perform an advertising operation. For example, the stylus pen 201 may broadcast an advertisement signal.
  • the electronic device 101 may check the inserted stylus pen 201. The electronic device 101 may check the inserted stylus pen 201 based on the received advertisement signal.
  • the electronic device 101 may request a communication connection.
  • the electronic device 101 may transmit a connection request signal corresponding to the advertisement signal.
  • the stylus pen 201 may establish a communication connection with the electronic device 101 in operation 615.
  • 6B is a diagram illustrating a detailed operation of a stylus pen when an electronic device is inserted, according to an exemplary embodiment.
  • a stylus pen 201 may be inserted into a storage space of the electronic device 101.
  • the electronic device 101 may start charging in operation 625.
  • the electronic device 101 for example, transmits a signal of a pattern indicating the start of charging through the coils 411 and 412 of the storage space, or transmits a communication signal indicating the start of charging to the stylus pen 201 through a communication module. I can.
  • the stylus pen 201 may check information indicating charging start and perform charging start (chg_on). For example, the stylus pen 201 may control the charging switch 436 to connect the rectifier 435 to the battery 437.
  • the stylus pen 201 may detect a garbage in the storage space.
  • the electronic device 101 may transmit a reset start command to the stylus pen 201 in operation 631.
  • the stylus pen 201 may perform a reset.
  • the stylus pen 201 may initialize the BLE module.
  • the stylus pen 201 may perform an advertising procedure.
  • the electronic device 101 may start scanning for the stylus pen in operation 637 and continue scanning in operation 639. For example, during a timeout period (eg, 40 seconds), the electronic device 101 may perform a scan.
  • a timeout period eg, 40 seconds
  • the electronic device 101 may start searching for the inserted stylus pen in operation 641.
  • operations 637, 639, and 641 may be performed as one operation.
  • the electronic device 101 and the stylus pen 201 may perform a search procedure. For example, after transmitting the charging start signal or without transmitting the charging start signal, the electronic device 101 may search whether there is a stylus pen 201 that transmits an advertisement signal. .
  • the stylus pen 201 may be set to transmit an advertisement signal when a charging start signal is received. Accordingly, the electronic device 101 may check the stylus pen 201 inserted into the electronic device 101 by checking the advertisement signal received after transmitting the charging start signal.
  • the electronic device 101 may detect the inserted stylus pen 201.
  • the electronic device 101 may transmit a connect request to the stylus pen 201.
  • the electronic device 101 may receive a connection request from the stylus pen 201 in operation 649.
  • the electronic device 101 and the stylus pen 201 may be connected.
  • the stylus pen 201 may set a descriptor and transmit information about this to the electronic device 101.
  • the electronic device 101 may check the descriptor.
  • the descriptor may be a setting for an activated function (eg, a button event, device information including battery information), and the type is not limited.
  • the stylus pen 201 may transmit information on the descriptor to the electronic device 101.
  • the electronic device 101 may confirm that there is no need to perform a reset/communication connection with the stylus pen 201, and in this case, operations 631 to 651 may be omitted.
  • 6C is a diagram illustrating an operation of inserting an electronic device and a stylus pen according to an exemplary embodiment.
  • a stylus pen 201 may be inserted into a storage space of the electronic device 101.
  • the stylus pen 201 may be removed from the storage space after initial insertion and then reinserted.
  • the electronic device 101 may detect the insertion of the stylus pen 201.
  • the electronic device 101 may command the stylus pen 201 to activate charging.
  • the electronic device 101 may command activation of charging based on transmission of a signal having a pattern through the storage space coil or transmission of a communication signal through a communication module.
  • the electronic device 101 may initiate a charging mode.
  • the stylus pen 201 may detect the insertion of the stylus pen 201. The stylus pen 201 may determine whether to be inserted based on information received from the electronic device 101 or a voltage applied to a resonance circuit (or an output terminal of the rectifier) of the stylus pen 201.
  • the stylus pen 201 may deactivate the sensor. The stylus pen 201 may deactivate some sensors or may be set to omit deactivation of the sensor.
  • the electronic device 101 and the stylus pen 201 may perform a charging operation. Alternatively, the charging operation of the 673 may be performed immediately after the start of the charging mode of the 667, and there is no limitation on the execution time point.
  • FIG. 7 illustrates operations of the stylus pen and the electronic device when the electronic device is removed from the stylus pen according to an exemplary embodiment.
  • the stylus pen 201 may be removed from the storage space of the electronic device 101.
  • the user may take out the stylus pen 201 from the storage space of the electronic device 101.
  • the electronic device 101 may detect the removal of the stylus pen 201.
  • the electronic device 101 may detect the removal of the stylus pen 201 based on a non-reception of a response signal to a signal from the storage space coils 411 and 412, but there is no limitation on the removal detection method.
  • the electronic device 101 may be set to confirm insertion/removal of the stylus pen 201 based on sensing data from a detection sensor such as a hall sensor.
  • the stylus pen 201 may detect the removal of the stylus pen 201.
  • the stylus pen 201 may detect removal of the stylus pen 201 based on the non-receiving of a signal from the electronic device 101 based on the voltage VM of the output terminal of the rectifier 431, There are no restrictions on how to detect removal.
  • the stylus pen 201 may exchange parameters (eg, a connection interval and/or a slave latency) with the electronic device 101.
  • the stylus pen 201 may activate the acceleration sensor based on the detection of removal, and the stylus pen 201 may activate the acceleration sensor in operation 709 through the activated acceleration sensor. Information can be sensed.
  • the stylus pen 201 may transmit the sensed acceleration information to the electronic device 101.
  • the electronic device 101 may perform an operation based on the received acceleration information.
  • the stylus pen 201 may be set to activate an acceleration sensor, and a gyro sensor that consumes relatively high power may be set to maintain an inactive state.
  • the stylus pen 201 may check the input of the button in operation 711. When the button input is confirmed, the stylus pen 201 may activate the gyro sensor in operation 713.
  • the stylus pen 201 may sense rotation information in operation 715 through an activated gyro sensor, and in operation 717, the stylus pen 201 may transmit information based on the sensing result. For example, the stylus pen 201 may transmit sensing information acquired through an acceleration sensor and/or a gyro sensor to the electronic device 101. Alternatively, the stylus pen 201 can check the coordinates of the stylus pen 201 (eg, 2D coordinates or 3D coordinates) based on sensing information acquired through the acceleration sensor and the gyro sensor, and The coordinates may be transmitted to the electronic device 101.
  • the coordinates of the stylus pen 201 eg, 2D coordinates or 3D coordinates
  • the stylus pen 201 may check displacement information of the coordinates of the stylus pen 201 based on sensing information acquired through the acceleration sensor and the gyro sensor. The stylus pen 201 may transmit the confirmed displacement information to the electronic device 101. The stylus pen 201 may estimate an initial orientation of the stylus pen 201 based on information measured by the acceleration sensor. The stylus pen 201 may correct information on a location using an initial posture.
  • the electronic device 101 may perform an operation based on the received information.
  • the electronic device 101 may check the location information of the stylus pen 201 based on the sensing information and check a gesture corresponding to the location information.
  • the electronic device 101 may perform an operation corresponding to the identified gesture.
  • the electronic device 101 may confirm a gesture corresponding to the location information and perform an operation corresponding to the gesture.
  • the stylus pen 201 may transmit information to the electronic device 101 until the input of the pen button is released.
  • the electronic device 101 may check the gesture based on the location information of the stylus pen 201 that is checked before the button input release is detected. When a button input release is detected, the stylus pen 201 may deactivate the gyro sensor again.
  • the stylus pen 201 may activate both a gyro sensor and an acceleration sensor upon detection of removal.
  • the location information of the stylus pen 201 before the button is input may be used to correct a gesture direction, and gesture recognition accuracy may be improved.
  • the electronic device 101 may check initial posture information of the stylus pen 201 and recognize a gesture using a displacement based on this information.
  • FIG. 8 illustrates operations during insertion/removal between an electronic device and a stylus pen according to various embodiments of the present disclosure.
  • the stylus pen 201 when the stylus pen 201 is initially accommodated in the electronic device 101 (801), the stylus pen 201 and the electronic device 101 perform initialization of a communication module and communication connection (803). can do.
  • the electronic device 101 and the stylus pen 201 are in a gesture mode 813, an air mouse mode 815, and a BLE mode ( 817) or a pen mode 819.
  • Gesture mode 813, air mouse mode 815, BLE mode 817, or pen mode 819 processes at least one of a communication signal from the stylus pen 201 or the position of the stylus pen 201 It is about a method of doing, and may be referred to as a processing method.
  • the electronic device 101 and the stylus pen 201 can operate in the pen mode 819.
  • the electronic device 101 and the stylus pen 201 are in a gesture mode 813 and an air mouse mode 815.
  • BLE mode Entry conditions for each mode and operation for each mode will be described later.
  • the stylus pen 201 When the stylus pen 201 is reinserted into the electronic device 101 after being removed in operation 821, the stylus pen 201 may deactivate the sensor and perform charging in operation 823. The stylus pen 201 may also perform sensor deactivation and charging even when initially inserted.
  • FIG. 9 illustrates a method of operating an electronic device according to an embodiment.
  • 10 is a diagram illustrating a positional relationship between a stylus pen and an electronic device according to an exemplary embodiment.
  • the electronic device 101 may check removal of the stylus pen 201 in operation 901.
  • the electronic device 101 may determine whether the stylus pen 201 is detected based on a signal from the panel. For example, when the electronic device 101 uses the EMR method, the electronic device 101 may check whether the stylus pen 201 is detected based on a received signal output from the sensing panel 503.
  • the stylus pen 201 may be located within a recognition range h from the panel of the electronic device 101.
  • the sensing panel 503 may output a transmission signal 1001 (eg, a magnetic field) during the first period. Resonance may be generated in a resonance circuit in the stylus pen 201 by the transmission signal 1001, and a reception signal 1002 may be generated by the resonance.
  • the sensing panel 503 may check the position of the stylus pen 201 based on the received signal 1002 during the second period. When, for example, the strength of the received signal 1002 exceeds a threshold strength, the electronic device 101 may determine that the stylus pen 201 has been detected.
  • the stylus pen 201 When the stylus pen 201 is located outside the recognition range h from the panel of the electronic device 101, a received signal from the stylus pen 201 is not generated, or the strength of the received signal from the stylus pen 201 is It may be less than the critical intensity. In this case, the electronic device 101 may determine that the stylus pen 201 has not been detected. Alternatively, the electronic device 101 using the touch panel may determine that the stylus pen 201 has not been detected when the size of the capacitance change in the touch panel is less than the threshold change size. The stylus pen 201 may check whether the stylus pen 201 is within the recognition range based on the strength of the transmission signal 1001.
  • the electronic device 101 may communicate with the stylus pen 201 based on a first communication method (eg, a communication method using EMR).
  • a first communication method e.g, a communication method using EMR
  • the electronic device 101 may use a sensing panel 503 such as a digitizer, and the stylus pen 201 may use a resonance coil.
  • the electronic device 101 may also perform communication with the stylus pen 201 based on a second communication method (eg, a communication method using BLE).
  • the electronic device 101 may check the position of the stylus pen 201 based on a signal from the panel in operation 905. .
  • the electronic device 101 may perform a first operation corresponding to the position of the stylus pen 201 based on the confirmation result in operation 907. For example, the electronic device 101 may perform a function set on an object corresponding to the position of the stylus pen 201 or may display a drawing object according to the position of the stylus pen 201. The electronic device 101 may additionally check whether a button of the stylus pen 201 is pressed. The electronic device 101 may perform an operation further based on whether a button of the stylus pen 201 is pressed. The electronic device 101 may determine whether a button of the stylus pen 201 is pressed, based on a frequency of a signal identified on a panel or information received through a communication module.
  • the electronic device 101 when a gesture is identified based on information included in a communication signal within a recognition range h, the electronic device 101 is based on information included in a communication signal outside the recognition range h. Thus, a different operation may be performed than when the gesture is confirmed. For example, when an upper swipe gesture by a communication signal from the stylus pen 201 within the recognition range h is confirmed, the electronic device 101 may perform up-scrolling. When an upper swipe gesture by a communication signal from the stylus pen 201 outside the recognition range h is confirmed, the electronic device 101 may perform an enlargement operation. However, this is exemplary. The electronic device 101 may be set to ignore a gesture caused by a communication signal from the stylus pen 201 within the recognition range h.
  • the electronic device 101 provides information on the location of the stylus pen 201 and/or in operation 909 based on the communication signal. Information indicating whether a button of the stylus pen 201 is pressed can be checked.
  • the stylus pen 201 when the stylus pen 201 is outside the recognition range h, the stylus pen 201 cannot receive the transmission signal 1011 from the panel, and thus, a reception signal due to resonance occurs. Can't. Accordingly, the stylus pen 201 may transmit and receive the communication signal 1012 with the electronic device 101. The electronic device 101 may check information on the location of the stylus pen 201 and/or whether a button of the stylus pen 201 is pressed based on information included in the communication signal.
  • the electronic device 101 may perform a second operation corresponding to the confirmation result.
  • the electronic device 101 may check a processing mode based on information included in at least one communication signal, and may operate according to the identified processing mode.
  • the stylus pen 201 may detect the transmission signal 1001 from the sensing panel 503 of the electronic device 101. I can. When the transmission signal 1001 is detected, the stylus pen 201 may not transmit information indicating that the button is pressed to the Bluetooth controller 513, even if the button is pressed. Accordingly, even in a state in which the button is pressed, the stylus pen 201 may not transmit a communication signal indicating whether the button is pressed to the electronic device 101.
  • the stylus pen 201 may transmit and receive a communication signal 1012 with the electronic device 101. Meanwhile, the stylus pen 201 may enter the recognition range h while transmitting and receiving the communication signal 1012. In this case, the stylus pen 201 may detect the transmission signal 1001 from the sensing panel 503 of the electronic device 101. The stylus pen 201 can maintain transmission of the communication signal 1012 even if the transmission signal 1001 from the sensing panel 503 is detected when transmission of the communication signal 1012 is started.
  • FIG. 11 is a flowchart illustrating a method of operating an electronic device according to various embodiments of the present disclosure.
  • the electronic device 101 may confirm removal of the stylus pen 201 in operation 1101.
  • the electronic device 101 may determine that detection of the stylus pen 201 fails based on a signal from the panel.
  • the stylus pen 201 may be outside the recognition range from the panel of the electronic device 101.
  • the electronic device 101 may check information on the location of the stylus pen 201 and information indicating whether a button of the stylus pen 201 is pressed based on the communication signal.
  • the electronic device 101 may check the processing mode based on the confirmation result.
  • the electronic device 101 may set the processing mode to the BLE mode. That is, the electronic device 101 may perform an operation corresponding to whether a button is pressed in operation 1109.
  • the processing mode may be set to the air mouse mode. That is, the electronic device 101 may perform an operation corresponding to the mouse mode in operation 1111.
  • the electronic device 101 sets the processing mode to the gesture mode. I can. That is, the electronic device 101 may perform an operation mapped to a gesture in operation 1113.
  • processing mode setting conditions are merely exemplary and are not limited.
  • FIG. 12 illustrates a method of operating an electronic device and a stylus pen according to an exemplary embodiment.
  • the stylus pen 201 may confirm that a button is pressed. In operation 1203, the stylus pen 201 may transmit a communication signal including information indicating a button pressed state to the electronic device 101.
  • the electronic device 101 may confirm a button press based on the communication signal.
  • the stylus pen 201 may transmit a communication signal to the electronic device 101. Before the button is released, the stylus pen 201 may transmit a communication signal including information indicating that the button is pressed. The stylus pen 201 may also transmit a communication signal that does not contain information about the button.
  • the stylus pen 201 may be set not to transmit a communication signal until a specific event occurs. In this case, operations 1207, 1209, and 1211 may be omitted.
  • the stylus pen 201 may check the release of the button in operation 1213. In operation 1215, the stylus pen 201 may transmit a communication signal including information indicating a button release state to the electronic device 101.
  • the electronic device 101 may check whether a long-press is confirmed in operation 1217. For example, the electronic device 101 may check whether the long-press is confirmed based on whether the time between the button press time and the button release time exceeds a threshold time (eg, about 3 seconds). In addition, the electronic device 101 checks the long-press when the stop state of the stylus pen 201 is confirmed when the button is pressed, or a gesture corresponding to the movement of the stylus pen 201 is not confirmed. I can. The electronic device 101 may check a stop state or a gesture based on information about the position of the stylus pen 201 included in the communication signal received in operations 1207, 1209, and 1211.
  • a threshold time eg, about 3 seconds
  • the electronic device 101 may check the air mouse mode in operation 1219. However, if the long-press is not confirmed in operation 1217, the electronic device 101 may check the BLE mode in operation 1221.
  • the stylus pen 201 may confirm that the button is released after being pressed for a certain period of time, and based on this, the occurrence of a long press may be confirmed.
  • the stylus pen 201 may transmit, to the electronic device 101, a communication signal including information indicating the long-press when it is confirmed that the long-press has occurred.
  • the electronic device 101 may enter the air mouse mode by confirming that the information included in the communication signal indicates a long press. There are no restrictions on how to check the long-press.
  • the stylus pen 201 may transmit button press information including long-press, short-press, or double-press to the electronic device 101, and there is no limitation on button press information.
  • FIG. 13 illustrates a method of operating a stylus pen and an electronic device according to an exemplary embodiment.
  • the stylus pen 201 may check the air mouse mode in operation 1301, and the electronic device 101 may check the air mouse mode in operation 1303. As described above, the electronic device 101 may check the air mouse mode based on the long-press detection. The stylus pen 201 may check the air mouse mode based on detection of a long-press, or may check the air mouse mode by receiving information on a processing mode from the electronic device 101.
  • the stylus pen 201 may transmit information on the location of the stylus pen 201 in operation 1305.
  • the electronic device 101 may move the location of the pointer based on the location information.
  • the electronic device 101 may continuously receive information on the position of the stylus pen 201 and accordingly may continuously move the position of the pointer being displayed.
  • the stylus pen 201 may transmit a communication signal including information indicating a state of a button being pressed to the electronic device 101.
  • the stylus pen 201 may transmit a communication signal including information indicating a release state of a button of the pen to the electronic device 101.
  • the electronic device 101 may perform an operation corresponding to a click on the pointer position by checking the push and release of the button. The user may move the stylus pen 201 while pressing the button of the stylus pen 201. The electronic device 101 may perform a drag operation based on information on the position of the stylus pen 201 after receiving information indicating a state of pressing a button.
  • the stylus pen 201 may check whether the air mouse mode is released. For example, the electronic device 101 may terminate the air mouse mode based on a user input (eg, click a release icon) through a user interface (UI), and may notify this to the stylus pen 201. .
  • a user input eg, click a release icon
  • UI user interface
  • the stylus pen 201 may terminate the air mouse mode in operation 1317.
  • the electronic device 101 may confirm the end of the air mouse.
  • the electronic device 101 may end the air mouse mode by receiving information indicating the end of the air mouse from the stylus pen 201 or confirming an air mouse end event set in the electronic device 101.
  • 14A and 14B are diagrams illustrating an operation of an electronic device in an air mouse mode according to various embodiments.
  • the user in the air mouse mode, the user can move from left to right while pressing the button 337 of the stylus pen 201.
  • the electronic device 101 may receive a communication signal including information indicating the button 337 is pressed in the air mouse mode. Thereafter, the electronic device 101 may receive a plurality of communication signals including information on the location of the stylus pen 201.
  • the electronic device 101 may move the pointer 1401 based on the received location information.
  • the electronic device 101 may display a drawing object 1403 corresponding to a drag gesture based on movement of a pointer while a button is pressed. Even in the gesture mode, the electronic device 101 may display an object corresponding to a drag gesture (for example, a gesture type or a gesture input trajectory), and accordingly, the user checks the displayed object to determine the type of gesture that the user inputs. You can check.
  • a drag gesture for example, a gesture type or a gesture input trajectory
  • the electronic device 101 When the user moves the stylus pen 201 while not pressing the button 337 of the stylus pen 201, the electronic device 101 is based on a plurality of communication signals including position information, and the pointer ( 1401) can be moved.
  • the electronic device 101 may be connected to the docking station 1420 or to the external display device 1410 through the docking station 1420.
  • the connection through the docking station 1420 is merely exemplary, and the electronic device 101 may be directly connected to the external display device 1410 without an intermediate device.
  • the electronic device 101 may transmit a displayed screen to the external display device 1410.
  • the electronic device 101 may transmit data for configuring a screen of a processing result of the drag gesture to the external display device 1410. Accordingly, the external display device 1410 may move the position of the pointer 1411 according to the drag gesture.
  • the external display device 1410 may display a screen including the pointer 1411 and the drawing object 1413 moved according to the processing result.
  • the electronic device 101 can process the movement of the stylus pen 201 as a pointer movement, and the pressing and release of the button of the stylus pen 201 as the pressing and release of the legacy mouse button. Can be processed, but there are no restrictions.
  • 15A and 15B illustrate an air mouse termination process according to various embodiments.
  • the stylus pen 201 may be inserted into the electronic device 101.
  • the electronic device 101 may confirm insertion of the stylus pen 201 in operation 1503, and may command the stylus pen 201 to start charging in operation 1505.
  • the stylus pen 201 may start charging by confirming the start of charging in operation 1507. In operation 1509, it can be seen that the stylus pen 201 is located in the storage space.
  • the electronic device 101 may command the stylus pen 201 to end the air mouse mode in operation 1511.
  • the electronic device 101 may transmit a communication signal including information indicating the end of the air mouse mode to the stylus pen 201 through the communication module.
  • the electronic device 101 may also apply a pattern signal corresponding to the end of the air mouse mode to the storage space coil.
  • the stylus pen 201 may end the air mouse mode.
  • the stylus pen 201 may change a parameter (eg, a connection interval and/or a slave latency) and notify the electronic device 101 of the change.
  • a parameter eg, a connection interval and/or a slave latency
  • the stylus pen 201 and the electronic device 101 may update parameters.
  • the electronic device 101 may command the stylus pen 201 to end the air mouse mode.
  • operations 1521, 1523, 1525, 1527, 1529, 1535, and 1537 of FIG. 15B are operations 1501, 1503, 1505, 1507, 1509 1511, and 1515 of FIG. 15A. It is the same as and has been described with reference to FIG. 15A. Therefore, further description of these operations will be omitted.
  • the stylus pen 201 may terminate the air mouse mode based on confirming the position in the storage space.
  • the stylus pen 201 may terminate the air mouse mode after waiting for a predetermined period (eg, 5 seconds), but in another embodiment, the air mouse mode may be terminated immediately without a waiting period.
  • the stylus pen 201 may notify the end of the air mouse mode to the electronic device 101, and the electronic device 101 may end the air mouse mode in operation 1533.
  • the stylus pen 201 may command the electronic device 101 to end the air mouse mode. In this case, when another stylus pen is inserted into the electronic device 101, the air mouse mode is unintentionally terminated. May be prevented.
  • FIG. 16 illustrates a method of operating a stylus pen and an electronic device in a gesture mode according to an embodiment.
  • the stylus pen 201 can confirm that a button is pressed in operation 1601.
  • the stylus pen 201 may transmit a communication signal including information indicating a button pressed state to the electronic device 101.
  • the electronic device 101 may confirm that a button is pressed based on the communication signal.
  • the stylus pen 201 may transmit communication signals to the electronic device 101.
  • Each of the communication signals may include information on the location of the stylus pen 201.
  • the electronic device 101 may check a gesture based on information indicating a location. For example, the electronic device 101 may check a movement trajectory of coordinates according to information indicating a location, and may check a gesture corresponding to the movement trajectory.
  • the electronic device 101 confirms the gesture before the button is released, this is merely exemplary. When the button is released, an operation of confirming the gesture may be performed at this time.
  • the electronic device 101 may perform an operation corresponding to the gesture.
  • the electronic device 101 may trigger the gesture to perform an operation corresponding to the gesture.
  • the electronic device 101 may monitor whether a gesture is detected in real time, and when the gesture is detected, the electronic device 101 may perform an operation corresponding to the gesture by triggering the gesture.
  • Button release may be implemented as a trigger, and there is no limit to the type of trigger. For example, when it is confirmed that the stylus pen 201 is stopped, the electronic device 101 may perform an operation corresponding to the identified gesture based on information on the position before the stop.
  • the stylus pen 201 may check the button release.
  • the stylus pen 201 may transmit a communication signal including information indicating a button release state to the electronic device 101.
  • the electronic device 101 may check the button release based on information included in the communication signal. For example, the electronic device 101 may be set to end the mode based on confirmation of a button release. As described above, the electronic device 101 may set a button release as a trigger for performing an operation corresponding to a gesture.
  • FIG. 17 shows a gesture mode according to an embodiment.
  • the electronic device 101 may receive information on positions of a plurality of stylus pens 201 according to movement of the stylus pen 201 while the button 337 is pressed.
  • the electronic device 101 may check a circle gesture and a swipe gesture as candidate gestures, and may finally select a swipe gesture.
  • the electronic device 101 may determine that a function mapped to the swipe gesture in the gallery application is a gallery image conversion. Accordingly, the electronic device 101 converts and displays the first image 1701, which is the execution screen of the gallery application, into a screen including at least a part of the first image 1701 and at least a part of the second image 1702 can do.
  • the electronic device 101 may then display the entire second image 1702, and accordingly, image conversion may be performed.
  • the electronic device 101 may map and store an operation corresponding to a gesture for each application. For example, Table 1 below shows functions mapped to gestures for each application.
  • the electronic device 101 may map different functions to gestures with respect to a state (eg, a pre-capturing state or a capturing state) of one application (eg, a camera application). .
  • a state eg, a pre-capturing state or a capturing state
  • one application eg, a camera application
  • a function may not be mapped to a specific gesture (eg, an up/down swipe gesture).
  • the electronic device 101 may also set a function for a global gesture that is not limited to an application.
  • FIG. 18 illustrates an operation of an electronic device in a BLE mode according to an embodiment.
  • the electronic device 101 may check the BLE mode. For example, the electronic device 101 may receive a communication signal including information indicating the button 337 is pressed from the stylus pen 201. The electronic device 101 may perform an operation corresponding to the pressed state of the button 337. When it is confirmed that the button 337 is pressed, the electronic device 101 may perform an operation mapped to the button press (eg, selfie photographing) in an application running in the foreground. The electronic device 101 may store a preview image 1810.
  • FIG. 19 illustrates a method of operating a stylus pen according to an embodiment.
  • the stylus pen 201 may confirm removal of the stylus pen 201.
  • the stylus pen 201 may confirm removal of the stylus pen 201 based on the pattern and/or size of a signal output from the resonance circuit.
  • the stylus pen 201 may confirm removal of the stylus pen 201 based on information included in a communication signal from the electronic device 101.
  • the stylus pen 201 may activate some of the plurality of sensors. Others except for some of the plurality of sensors may be maintained in an inactive state.
  • the stylus pen 201 may transmit information based on data sensed by the activated sensor to the electronic device 101.
  • the stylus pen 201 may activate the acceleration sensor and transmit information sensed by the acceleration sensor or information acquired from the sensed information to the electronic device 101.
  • the electronic device 101 may check a two-dimensional gesture based on the acceleration sensing information of the stylus pen 201 and perform an operation corresponding to the gesture.
  • the electronic device 101 may correct other information using the acceleration sensing information, or may perform the identified operation by using the other information and the acceleration sensing information together.
  • the stylus pen 201 uses the information acquired using the acceleration sensor to check the posture of the stylus pen 201 and may be set not to transmit to the electronic device 101.
  • the stylus pen 201 may check whether a button of the stylus pen 201 is pressed in operation 1907. If it is confirmed that the button of the stylus pen 201 is pressed in operation 1907, the stylus pen 201 may activate a sensor in an inactive state in operation 1909. For example, the stylus pen 201 may activate other sensors (eg, gyro sensors) that were inactive.
  • sensors eg, gyro sensors
  • the stylus pen 201 may transmit information based on data sensed by a plurality of sensors to the electronic device 101. For example, the stylus pen 201 checks information on the displacement of the stylus pen 201 based on rotation information by the gyro sensor and linear acceleration information by the acceleration sensor and transmits it to the electronic device 101 can do. Acceleration information acquired before the gyro sensor is activated may be used to check the initial posture of the stylus pen 201, and the stylus pen 201 may check displacement information based on the initial posture.
  • the displacement information may be expressed in two or three dimensions, and coordinate information may be calculated in addition to the displacement information.
  • the stylus pen 201 may check whether a button of the stylus pen 201 is released. When it is determined that the button is released in operation 1913, the stylus pen 201 may activate some of the plurality of sensors and deactivate the remaining sensors in operation 1915.
  • the stylus pen 201 may be set to activate all of the plurality of sensors when removal is confirmed, or to activate all of the plurality of sensors when it is confirmed that the button is pressed, and when each sensor is activated There are no restrictions. As described above, as the sensors are differentially activated, power consumption may be reduced, and thus the usage time of the stylus pen 201 may increase.
  • the stylus pen 201 may enter the air mouse mode when a long-press of a button is detected as described above.
  • the stylus pen 201 may maintain activation of a plurality of sensors.
  • the stylus pen 201 may transmit information on a location using a plurality of activated sensors to the electronic device 101. Thereafter, when the air mouse mode is ended, the stylus pen 201 may deactivate some sensors.
  • the stylus pen 201 enters the gesture mode, when the release of the button is detected, some sensors may be deactivated.
  • the stylus pen 201 may not activate the gyro sensor. In this case, even if it is confirmed that the button is pressed, the gyro sensor may not be activated.
  • the stylus pen 201 may calibrate at least one sensor.
  • the sensor included in the stylus pen 201 may be periodically or if necessary corrected to improve errors caused by environmental changes (eg, external shock, temperature, humidity).
  • the stylus pen 201 may perform calibration on its own, or may perform calibration based on a command of the electronic device 101. After the stylus pen 201 is inserted into the electronic device 101, the stylus pen 201 may perform calibration every specified period (eg, 4 hours).
  • the stylus pen 201 may perform calibration when it is determined that it is not a user use condition (eg, a change in a sensing value of a sensor is less than a threshold value).
  • the stylus pen 201 may store, for example, sensing data that is checked when the conditions of use are not used as an offset.
  • the stylus pen 201 may perform calibration by correcting the sensed data to be sensed later with an offset.
  • the stylus pen 201 may store an existing offset before confirming a new offset, and then use the stored offset in the correction process.
  • a first example of the present disclosure may be an electronic device, wherein the electronic device includes a panel configured to check a position of a stylus pen, a communication module configured to transmit and receive a communication signal with the stylus pen, and at least one processor And, based on the detection of the stylus pen by the panel, the at least one processor performs a first operation based on the position of the stylus pen identified by the panel, and the stylus pen by the panel On the basis of not being detected: at least one of information on the position of the stylus pen included in at least one communication signal received from the stylus pen through the communication module or information indicating whether a button of the stylus pen is pressed Check one, and set to perform a second operation based on at least one of information on the position of the stylus pen included in the received at least one communication signal or information indicating whether a button of the stylus pen is pressed.
  • the electronic device includes a panel configured to check a position of a stylus pen, a communication module configured to transmit and receive a communication signal with the styl
  • the second example may be an electronic device related to the first example, or any other example described herein, wherein the electronic device includes a display, and the at least one processor is Based on the stylus pen not detected: Based on at least one first communication signal among the at least one communication signal, check a first processing method, control the display to display a pointer, and perform the first processing Based on the method, it may be set to change the position of the pointer based on information on the position of the stylus pen included in at least one second communication signal of the at least one communication signal.
  • the third example may be an electronic device associated with the first example, the second example, or any other example described herein, wherein the at least one processor is based on the at least one first communication signal. Accordingly, it may be set to confirm the first processing method based on the confirmation of the long-press of the button of the stylus pen.
  • the fourth example may be an electronic device associated with the first to third examples, or any other example described herein, wherein the at least one processor, based on the first processing method, It may be set to perform an operation mapped to a mouse click function based on at least one third communication signal among the at least one communication signal.
  • the fifth example may be an electronic device associated with the first to fourth examples, or any other example described herein, wherein the at least one processor confirms the end event of the first processing method
  • the communication module is controlled to transmit a communication signal including information indicating the end of the first processing method to the stylus pen, or the first processing method is When a communication signal including information indicating termination is received through the communication module, it may be set to terminate the first processing method.
  • the sixth example may be an electronic device associated with the first to fifth examples, or any other example described herein, wherein the at least one processor does not detect the stylus pen by the panel. Based on not: based on at least one fourth communication signal of the at least one communication signal, a second processing method is checked, and a fifth of the at least one communication signal is determined based on the second processing method. Based on information on the position of the stylus pen included in one communication signal, it may be set to check a gesture and perform an operation mapped to the gesture.
  • the seventh example may be an electronic device associated with the first to sixth examples, or any other example described herein, wherein the at least one processor is, based on the second processing method, the It may be set to check an application to which a gesture is to be assigned, and to perform an operation mapped to the gesture in the identified application.
  • the eighth example may be an electronic device associated with the first to seventh examples, or any other example described herein, wherein the at least one processor is, based on the second processing method, the Confirming a push of a button of the stylus pen based on at least one fourth communication signal, confirming the gesture based on information on a position of the stylus pen included in the at least one fifth communication signal, and the After receiving at least one fifth communication signal, through the communication module, at least one sixth communication signal of the at least one communication signal is received, and the stylus is based on the at least one sixth communication signal. It may be set to end the second processing method based on confirming the release of the button of the pen.
  • the ninth example may be an electronic device associated with the first to eighth examples, or any other example described herein, wherein the at least one processor does not detect the stylus pen by the panel. Based on not: It may be set to perform an operation corresponding to operation information of the button of the stylus pen included in at least one seventh communication signal among the at least one communication signal.
  • the tenth example may be an electronic device associated with the first to ninth examples, or any other example described herein, wherein the at least one processor is configured to detect the stylus pen by the panel. Based on: based on the frequency of the received signal generated from the stylus pen identified on the panel, it is determined whether the button of the stylus pen is pressed, the position of the stylus pen and whether the button of the stylus pen is pressed It may be set to perform the first operation based on.
  • An eleventh example of the present disclosure may be a stylus pen, wherein the stylus pen includes a resonant circuit including a button, a coil, and at least one capacitor, the movement of the stylus pen, the posture of the stylus pen, or the stylus pen.
  • the stylus pen includes a resonant circuit including a button, a coil, and at least one capacitor, the movement of the stylus pen, the posture of the stylus pen, or the stylus pen.
  • At least one sensor configured to sense at least one of the directions, a communication module, and at least one control circuit, wherein the at least one control circuit comprises: a transmission signal from a panel of the electronic device is not confirmed: Checks whether the button is pressed, and based on the push of the button, checks information on the location of the stylus pen based on data sensed by the at least one sensor, and information on the location of the stylus pen Or when the communication module is set to control the communication module to transmit at least one communication signal including at least one of information indicating whether the button is pressed, and when the transmission signal from the panel of the electronic device is confirmed, the At least one communication signal may not be transmitted.
  • the twelfth example may be a stylus pen associated with the eleventh example, or any other example described herein, wherein the at least one control circuit does not check the transmission signal from the panel of the electronic device. It may be set to maintain transmission of the other part of the at least one communication signal based on the confirmation of the transmission signal after at least a part of the at least one communication signal is transmitted.
  • the thirteenth example may be a stylus pen associated with the eleventh example, the twelfth example, or any other example described herein, wherein the at least one control circuit comprises the transmission from the panel of the electronic device.
  • the signal When the signal is confirmed, it may be set to refrain from transmitting information on whether the button is pressed to the communication module.
  • the fourteenth example may be a stylus pen associated with the eleventh to thirteenth examples, or any other example described herein, wherein the at least one control circuit comprises a first processing of the at least one communication signal Check the method, and based on the first processing method, to transmit information on at least one location in a time series identified based on the sensing data checked by the at least one sensor after the first processing method is confirmed. It can be set to control the communication module.
  • the fifteenth example may be a stylus pen associated with the eleventh to fourteenth examples, or any other example described herein, wherein the at least one control circuit is based on the confirmation of the long-press of the button Thus, it may be set to confirm the first processing method.
  • the sixteenth example may be a stylus pen associated with the eleventh to fifteenth examples, or any other example described herein, wherein the at least one control circuit is, based on the first processing method, the communication module may be set to control the communication module to transmit a communication signal including information indicating at least one of pressing of the button or releasing of the button.
  • the seventeenth example may be a stylus pen associated with the eleventh to sixteenth examples, or any other example described herein, wherein the at least one control circuit confirms the end event of the first processing method
  • the communication module is controlled to transmit a communication signal including information indicating the end of the first processing method to the electronic device, or the first processing method is When a communication signal including information indicating termination is received through the communication module, it may be set to terminate the first processing method.
  • the eighteenth example may be a stylus pen associated with the eleventh to seventeenth examples, or any other example described herein, wherein the at least one control circuit is the first processing method while the first processing method is being applied. It may be set to deactivate some of the at least one sensor before all at least one sensor is activated and before the first processing method is applied and after the first processing method is ended.
  • the nineteenth example may be a stylus pen associated with the eleventh to eighteenth examples, or any other example described herein, wherein the at least one control circuit comprises a second communication signal from the stylus pen. Time series confirmed based on the second processing method and based on the sensing data confirmed by the at least one sensor after the second processing method is confirmed until the end event of the second processing method is detected, based on the second processing method It may be configured to control the communication module to transmit information on at least one location of an enemy.
  • the twentieth example may be a stylus pen associated with the eleventh to nineteenth examples, or any other example described herein, wherein the at least one control circuit, based on the confirmation that the button is pressed, the It may be set to check the second processing method and detect the end event of the second processing method based on the confirmation of the release of the button.
  • a twenty-first example of the present disclosure may be an electronic device, wherein the electronic device includes a sensing means (eg, a sensing panel 503) configured to check the position of the stylus pen, and a communication signal configured to transmit and receive a communication signal with the stylus pen.
  • a sensing means eg, a sensing panel 503
  • a communication signal configured to transmit and receive a communication signal with the stylus pen.
  • a communication means for example, a communication module 190
  • a processing means for example, a processor 120
  • the processing means for example, the processor 120
  • the processing means comprises the sensing means (for example, the sensing panel 503).
  • the stylus pen performing a first operation based on the position of the stylus pen identified by the sensing means (eg, sensing panel 503), and performing a first operation, and the sensing means (eg: Based on the sensing panel 503 not detecting the stylus pen:
  • the stylus included in at least one communication signal received from the stylus pen through the communication means for example, the communication module 190
  • the 22nd example may be an electronic device associated with the 21st example, or any other example described herein, wherein the electronic device further includes a display means (eg, display device 160), and the Processing means (for example, processor 120), based on the detection of the stylus pen by the sensing means (for example, the sensing panel 503): at least one first communication of the at least one communication signal Based on a signal, a first processing method is checked, the display means is controlled to display a pointer, and based on the first processing method, included in at least one second communication signal of the at least one communication signal Based on information on the location of the stylus pen, it may be set to change the location of the pointer.
  • the electronic device further includes a display means (eg, display device 160), and the Processing means (for example, processor 120), based on the detection of the stylus pen by the sensing means (for example, the sensing panel 503): at least one first communication of the at least one communication signal Based on a signal, a first processing method is checked, the display means is
  • the 23rd example may be an electronic device associated with the 21st example, the 22nd example, or any other example described herein, wherein the processing means (eg, the processor 120) includes the at least one It may be set to check the first processing method based on the confirmation of the long-press of the button of the stylus pen based on the first communication signal.
  • the processing means eg, the processor 120
  • the processing means includes the at least one It may be set to check the first processing method based on the confirmation of the long-press of the button of the stylus pen based on the first communication signal.
  • the twenty-fourth example may be an electronic device associated with the twenty-first to twenty-third examples, or any other example described herein, wherein the processing means (eg, the processor 120) comprises the first processing Based on the method, it may be set to perform an operation mapped to a mouse click function based on at least one third communication signal among the at least one communication signal.
  • the processing means eg, the processor 120
  • the processing means comprises the first processing Based on the method, it may be set to perform an operation mapped to a mouse click function based on at least one third communication signal among the at least one communication signal.
  • the twenty-fifth example may be an electronic device associated with the twenty-first to twenty-fourth examples, or any other example described herein, wherein the processing means (eg, the processor 120) comprises the first processing
  • the communication means for example, the communication module 190
  • the communication means is configured to terminate the first processing method and transmit a communication signal including information indicating the end of the first processing method to the stylus pen. Control or, when a communication signal including information indicating the end of the first processing method is received from the stylus pen through the communication means (for example, the communication module 190), the first processing method is terminated. Can be set.
  • the twenty-sixth example may be an electronic device associated with the twenty-first to twenty-fifth examples, or any other example described herein, wherein the processing means (for example, the processor 120) comprises the sensing means ( Example: Based on the detection of the stylus pen by the sensing panel 503): Based on at least one fourth communication signal among the at least one communication signal, a second processing method is checked, and the second Based on the processing method, based on information on the position of the stylus pen included in the fifth at least one communication signal among the at least one communication signal, set to check a gesture and perform an operation mapped to the gesture Can be.
  • the processing means for example, the processor 120
  • the sensing means Example: Based on the detection of the stylus pen by the sensing panel 503: Based on at least one fourth communication signal among the at least one communication signal, a second processing method is checked, and the second Based on the processing method, based on information on the position of the stylus pen included in the fifth at least one communication signal among the at least one communication signal, set to check
  • the twenty-seventh example may be an electronic device associated with the twenty-first to twenty-sixth examples, or any other example described herein, wherein the processing means (eg, the processor 120) includes the second processing Based on the method, it may be set to check an application to which the gesture is to be assigned, and to perform an operation mapped to the gesture in the identified application.
  • the processing means eg, the processor 120
  • the 28th example may be an electronic device associated with the 21st to 27th examples, or any other example described herein, wherein the processing means (for example, the processor 120) is the second processing Based on the method, based on the at least one fourth communication signal, the button of the stylus pen is checked, and based on the information on the position of the stylus pen included in the at least one fifth communication signal, the After confirming the gesture and receiving the at least one fifth communication signal, at least one sixth communication signal among the at least one communication signal is received through the communication means (for example, the communication module 190). And, based on the confirmation of the release of the button of the stylus pen based on the at least one sixth communication signal, it may be set to end the second processing method.
  • the processing means for example, the processor 120
  • the 29th example may be an electronic device associated with the 21st to 28th examples, or any other example described herein, wherein the processing means (for example, the processor 120) includes the sensing means ( Example: Based on the detection of the stylus pen by the sensing panel 503): corresponding to operation information of the button of the stylus pen included in at least one seventh communication signal among the at least one communication signal It can be set to perform an operation.
  • the processing means for example, the processor 120
  • the sensing means Example: Based on the detection of the stylus pen by the sensing panel 503: corresponding to operation information of the button of the stylus pen included in at least one seventh communication signal among the at least one communication signal It can be set to perform an operation.
  • the 30th example may be an electronic device associated with the 21st to 29th examples, or any other example described herein, wherein the processing means (for example, the processor 120) includes the sensing means ( Example: Based on the detection of the stylus pen by the sensing panel 503: Based on the frequency of the received signal generated from the stylus pen identified by the sensing means (eg, the sensing panel 503), the stylus It may be set to check whether the button of the pen is pressed, and to perform the first operation based on the position of the stylus pen and whether the button of the stylus pen is pressed.
  • the processing means for example, the processor 120
  • the sensing means Example: Based on the detection of the stylus pen by the sensing panel 503: Based on the frequency of the received signal generated from the stylus pen identified by the sensing means (eg, the sensing panel 503), the stylus It may be set to check whether the button of the pen is pressed, and to perform the first operation based on the position of the stylus pen and whether the button of the styl
  • a thirty-first example of the present disclosure may be a stylus pen, wherein the stylus pen includes a button, a coil, and a resonance means (eg, a resonance circuit 287) including at least one capacitor, the movement of the stylus pen, and the stylus.
  • a resonance means eg, a resonance circuit 287 including at least one capacitor, the movement of the stylus pen, and the stylus.
  • At least one sensing means e.g., sensor 299
  • communication means e.g., communication circuit 290
  • at least one processing means set to sense at least one of the pen's posture or the direction of the stylus pen
  • the communication means for example, the communication circuit 290
  • the communication means for example, the communication circuit 290
  • the at least one communication signal including at least one of information on the position of the stylus pen or information indicating whether the button is pressed. If set and the transmission signal from the sensing means (for example, the sensing panel 503) of the electronic device is confirmed, the at least one communication signal may not be transmitted.
  • the 32nd example may be a stylus pen associated with the 31st example, or any other example described herein, wherein the at least one processing means (eg, the processor 220) comprises the sensing of the electronic device. After the transmission signal from the means (e.g., sensing panel 503) is not confirmed and at least a part of the at least one communication signal is transmitted, the transmission signal is confirmed, It can be set to keep some of the transmissions.
  • the at least one processing means e.g., the processor 220
  • the transmission signal is confirmed, It can be set to keep some of the transmissions.
  • the 33rd example may be a stylus pen associated with the 31st example, the 32nd example, or any other example described herein, wherein the at least one processing means (eg, the processor 220) is When the transmission signal from the sensing means (e.g., sensing panel 503) of the device is confirmed, information on whether the button is pressed should not be transmitted to the communication means (e.g., communication circuit 290). Can be set to
  • the 34th example may be a stylus pen associated with the 31st to 33rd examples, or any other example described herein, wherein the at least one processing means (for example, the processor 220) comprises the at least Check the first processing method of one communication signal, and based on the first processing method, the sensing data confirmed by the at least one sensing means (for example, sensor 299) after the first processing method is confirmed It may be set to control the communication means (for example, the communication circuit 290) so as to transmit information on at least one location based on the identified time series.
  • the at least one processing means for example, the processor 220
  • the at least Check the first processing method of one communication signal and based on the first processing method, the sensing data confirmed by the at least one sensing means (for example, sensor 299) after the first processing method is confirmed
  • the communication means for example, the communication circuit 290
  • the 35th example may be a stylus pen associated with the 31st to 34th examples, or any other example described herein, wherein the at least one processing means (for example, the processor 220) is the button Based on the confirmation of the long-press of, it may be set to confirm the first processing method.
  • the at least one processing means for example, the processor 220
  • the 36th example may be a stylus pen associated with the 31st to 35th examples, or any other example described herein, wherein the at least one processing means (for example, the processor 220) is 1
  • the communication means e.g., communication circuit 290
  • the communication means is configured to transmit a communication signal including information indicating at least one of pressing of the button or release of the button after confirming the first processing method. Can be set to control.
  • the 37th example may be a stylus pen associated with the 31st to 36th examples, or any other example described herein, wherein the at least one processing means (for example, the processor 220) is
  • the communication means for example, the communication circuit 290
  • the communication means terminates the first processing method and transmits a communication signal including information indicating the end of the first processing method to the electronic device.
  • the communication means for example, the communication circuit 290
  • the first processing method is Can be set to end.
  • the 38th example may be a stylus pen associated with the 31st to 37th examples, or any other example described herein, wherein the at least one processing means (for example, the processor 220) is 1 While the processing method is being applied, all of the at least one sensing means (for example, the sensor 299) is activated, and before the first processing method is applied and after the first processing method is terminated, the at least It may be set to deactivate some of one sensing means (eg, the sensor 299).
  • the at least one processing means for example, the processor 220
  • the 39th example may be a stylus pen associated with the 31st to 38th examples, or any other example described herein, wherein the at least one processing means (eg, the processor 220) is the stylus Checking the second processing method of the communication signal from the pen, and based on the second processing method, the at least one sensing means (for example, after confirming the second processing method until the end event of the second processing method is detected) It may be set to control the communication means (for example, the communication circuit 290) so as to transmit information on at least one location in a time series identified based on the sensing data checked by the sensor 299.
  • the at least one processing means eg, the processor 220
  • the communication means for example, the communication circuit 290
  • the 40th example may be a stylus pen associated with the 31st to 39th examples, or any other example described herein, wherein the at least one processing means (for example, the processor 220) is the button It may be set to check the second processing method based on confirming that is pressed, and detect the end event of the second processing method based on confirming that the button is released.
  • the at least one processing means for example, the processor 220
  • the button It may be set to check the second processing method based on confirming that is pressed, and detect the end event of the second processing method based on confirming that the button is released.
  • Electronic devices may be devices of various types.
  • the electronic device may include, for example, a computer device, a portable communication device (eg, a smartphone), a portable multimedia device, a portable medical device, a camera, a wearable device, or a home appliance.
  • a portable communication device eg, a smartphone
  • portable multimedia device e.g., a portable multimedia device
  • portable medical device e.g., a portable medical device
  • camera e.g., a camera
  • a wearable device e.g., a smart watch, smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch, or a smart watch.
  • phrases such as “at least one of, B, or C” may include any one of the items listed together in the corresponding one of the phrases, or all possible combinations thereof.
  • Terms such as “first”, “second”, or “first” or “second” may be used simply to distinguish the component from other corresponding components, and the components may be referred to in other aspects (eg, importance or Order) is not limited.
  • Some (eg, first) component is referred to as “coupled” or “connected” to another (eg, second) component, with or without the terms “functionally” or “communicatively”. When mentioned, it means that any of the above components can be connected to the other components directly (eg by wire), wirelessly, or via a third component.
  • module used in this document may include a unit implemented in hardware, software, or firmware, and may be used interchangeably with terms such as logic, logic blocks, parts, or circuits.
  • the module may be an integrally configured component or a minimum unit of the component or a part thereof that performs one or more functions.
  • the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of the present document are software including one or more instructions stored in a storage medium (eg, internal memory or external memory) that can be read by a machine (eg, a master device or a task performing device).
  • a storage medium eg, internal memory or external memory
  • Example: Program For example, the processor of the device (for example, a master device or a task performing device) may call at least one command of one or more commands stored from a storage medium and execute it. This makes it possible for the device to be operated to perform at least one function according to the at least one command invoked.
  • the one or more instructions may include code generated by a compiler or code executable by an interpreter.
  • a storage medium that can be read by a device may be provided in the form of a non-transitory storage medium.
  • non-transient only means that the storage medium is a tangible device and does not contain a signal (e.g., electromagnetic wave), and this term refers to the case where data is semi-permanently stored in the storage medium. It does not distinguish between temporary storage cases.
  • a signal e.g., electromagnetic wave
  • a method according to various embodiments disclosed in the present document may be provided by being included in a computer program product.
  • Computer program products can be traded between sellers and buyers as commodities.
  • Computer program products are distributed in the form of a device-readable storage medium (e.g. compact disc read only memory (CD-ROM)), or through an application store (e.g. Play StoreTM) or two user devices (e.g. It can be distributed (e.g., downloaded or uploaded) directly between, e.g. smartphones).
  • a device e.g. compact disc read only memory (CD-ROM)
  • an application store e.g. Play StoreTM
  • two user devices e.g. It can be distributed (e.g., downloaded or uploaded) directly between, e.g. smartphones).
  • at least a portion of the computer program product may be temporarily stored or temporarily generated in a storage medium that can be read by a device such as a server of a manufacturer, a server of an application store, or a memory of a relay server.
  • each component (eg, module or program) of the above-described components may include a singular number or a plurality of entities.
  • one or more components or operations among the above-described corresponding components may be omitted, or one or more other components or operations may be added.
  • a plurality of components eg, a module or a program
  • the integrated component may perform one or more functions of each component of the plurality of components in the same or similar to that performed by the corresponding component among the plurality of components prior to the integration. .
  • operations performed by a module, program, or other component are sequentially, parallel, repeatedly, or heuristically executed, or one or more of the above operations are executed in a different order or omitted. Or one or more other actions may be added.
  • Examples described in this disclosure include non-limiting example implementations of components corresponding to one or more features specified by the appended independent claims, and these features (or Their corresponding components), individually or in combination, may contribute to improving one or more technical problems that may be inferred by a person skilled in the art from this disclosure.
  • Additional example implementations include one or more elements taken jointly and individually, in any and all permutations, of any herein described implementation. It can be realized by doing. Still other example implementations may also be realized by combining one or more features of the appended claims with selected one or more components of any example implementation described in this disclosure.
  • any example implementation described in this disclosure may be omitted.
  • One or more components that may be omitted are components that a person skilled in the art would directly and clearly understand as not so essential to the function of the present technology in light of a technical problem discernible from the present disclosure.
  • a person skilled in the art does not need to modify other components or features of the further alternative example to compensate for the change, even if such omitted components are replaced or removed.
  • further example implementations may be included within the present disclosure, in accordance with the present technology, although a selected combination of features and/or components thereof is not specifically mentioned.
  • Two or more physically separate components of any described example implementation described in this disclosure may alternatively be integrated into a single component, if their integration is possible, and in a single component so formed. If the same function is performed by means of, the integration is possible. Conversely, a single component of any example implementation described in this disclosure may, alternatively, be implemented with two or more separate components that achieve the same functionality, where appropriate.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

전자 장치가 제공되며, 전자 장치는, 스타일러스 펜의 위치를 확인하도록 설정된 패널, 상기 스타일러스 펜과 통신 신호를 송수신하도록 설정된 통신 모듈, 및 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출됨에 기반하여: 상기 패널에 의하여 확인된 상기 스타일러스 펜의 위치에 기반하여 제 1 동작을 수행하고, 상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 스타일러스 펜으로부터, 상기 통신 모듈을 통하여 수신된 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 확인하고, 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나에 기반하여 제 2 동작을 수행하도록 설정될 수 있다.

Description

스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법
본 개시는, 일반적으로 스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법에 관한 것이다.
전자 장치는, 전자 장치와 무선 통신을 통하여 연결된 특정한(specified) 입력 장치들(예: 펜 입력 장치들 또는 스타일러스 펜들)를 통하여 사용자들로부터 다양한 입력을 받을 수 있다. 전자 장치는, 스타일러스 펜에 의하여 지정된 전자 장치상의 위치를 확인할 수 있다. 전자 장치는, 이에 대응하는 기능을 수행할 수 있다.
전자 장치는, 전자기 유도(Electro magnetic resonance, EMR)방식을 이용하여 스타일러스 펜으로부터 발생하는 자기장을 검출할 수 있다. 전자 장치는, 채널 별로 자기장에 의하여 발생되는 유도 기전력에 기반하여 스타일러스 펜의 위치를 확인할 수 있다.
스타일러스 펜은, 전자 장치와 근거리 통신(예: 블루투스TM 저 에너지(BLE))을 통하여 연결될 수 있다. 스타일러스 펜은, 예를 들어 스타일러스 펜의 하우징 상에 배치되는 버튼의 눌림 상태에 대한 정보를 근거리 통신을 통하여 전자 장치로 송신할 수 있다. 전자 장치는 수신한 정보에 기반하여 지정된 동작을 수행할 수 있다.
스타일러스 펜에 구비된 버튼이 눌린 지 여부에 따라, 전자 장치는 지정된 동작을 수행할 수 있다. 하지만, 스타일러스 펜에 구비된 버튼의 온/오프 상태에 따라 명령을 송신하는 경우, 소수의 전자 장치의 동작들만이 버튼의 온/오프 상태에 매칭되어 실행될 수 있다. 이에 따라, 스타일러스 펜에 기반한 다양한 동작을 지원하는 어플리케이션의 효과적인 제어가 어려울 수 있다.
일 실시예에 따라 전자 장치가 제공될 수 있으며, 전자 장치는 스타일러스 펜의 위치를 확인할 수 있는 패널(예: 디지타이저 또는 터치 패널) 및 통신 모듈을 포함한다. 스타일러스 펜이 패널이 인식 범위 내에 있는 경우에는 패널 처리 결과에 따라 스타일러스 펜의 위치를 확인한다. 스타일러스 펜이 패널이 인식 범위 밖에 있는 경우에는 통신 모듈에서 수신한 통신 신호에 따라 스타일러스 펜의 위치를 확인할 수 있다. 패널의 인식 범위 바깥의 펜의 위치를 확인할 수 있음에 따라, 제스처에 대응하는 기능이 수행될 수 있으며, 스타일러스 펜에 의한 추가적인 조작, 예를 들어 커서의 움직임의 마우스 기능이 가능하다.
본 발명의 다양한 각각의 측면들 및 특징들은 첨부된 청구항들에서 정의된다. 종속 청구항들의 특징들의 조합들(combinations)은, 단지 청구항들에서 명시적으로 제시되는 것뿐만 아니라, 적절하게 독립항들의 특징들과 조합될 수 있다.
또한, 본 개시에 기술된 임의의 하나의 실시 예(any one embodiment) 중 선택된 하나 이상의 특징들은 본 개시에 기술된 임의의 다른 실시 예 중 선택된 하나 이상의 특징들과 조합될 수 있으며, 이러한 특징들의 대안적인 조합이 본 개시에 논의된 하나 이상의 기술적 문제를 적어도 부분적으로 경감시키거나, 본 개시로부터 통상의 기술자에 의해 식별될 수 있는(discernable) 기술적 문제를 적어도 부분적으로 경감시키고, 나아가 실시 예의 특징들(embodiment features)의 이렇게 형성된 특정한 조합(combination) 또는 순열(permutation)이 통상의 기술자에 의해 양립 불가능한(incompatible) 것으로 이해되지만 않는다면, 그 조합은 가능하다.
본 개시에 기술된 임의의 예시 구현(any described example implementation)에 있어서 둘 이상의 물리적으로 별개의 구성 요소들은 대안적으로, 그 통합이 가능하다면 단일 구성 요소로 통합될 수도 있으며, 그렇게 형성된 단일한 구성 요소에 의해 동일한 기능이 수행된다면, 그 통합은 가능하다. 반대로, 본 개시에 기술된 임의의 실시 예(any embodiment)의 단일한 구성 요소는 대안적으로, 적절한 경우, 동일한 기능을 달성하는 둘 이상의 별개의 구성 요소들로 구현될 수도 있다.
일 실시예에 따른 전자 장치가 제공되며, 전자 장치는, 스타일러스 펜의 위치를 확인하도록 설정된 패널, 상기 스타일러스 펜과 통신 신호를 송수신하도록 설정된 통신 모듈, 및 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출됨에 기반하여: 상기 패널에 의하여 확인된 상기 스타일러스 펜의 위치에 기반하여 제 1 동작을 수행하고, 상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 스타일러스 펜으로부터, 상기 통신 모듈을 통하여 수신된 적어도 하나의 통신 신호로부터 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 확인하고, 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나에 기반하여 제 2 동작을 수행하도록 설정될 수 있다.
일 실시예에 따라서 스타일러스 펜이 제공되며, 스타일러스 펜은, 버튼, 코일 및 적어도 하나의 커패시터를 포함하는 공진 회로, 상기 스타일러스 펜의 움직임, 상기 스타일러스 펜의 자세, 또는 상기 스타일러스 펜의 방향 중 적어도 하나를 센싱하도록 설정된 적어도 하나의 센서, 통신 모듈, 및 적어도 하나의 제어 회로를 포함하고, 상기 적어도 하나의 제어 회로는, 전자 장치의 패널로부터의 송신 신호가 확인되지 않음에 기반하여: 상기 버튼의 눌림 여부를 확인하고, 상기 버튼의 눌림에 기반하여, 상기 적어도 하나의 센서에 의하여 센싱된 데이터에 기반하여 상기 스타일러스 펜의 위치에 대한 정보를 확인하고, 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 포함하는 적어도 하나의 통신 신호를 송신하도록 상기 통신 모듈을 제어하도록 설정되고, 상기 전자 장치의 패널로부터의 상기 송신 신호가 확인되는 경우에는, 상기 적어도 하나의 통신 신호가 송신되지 않도록 설정될 수 있다.
본 발명의 특정 실시 예들(certain embodiments)의 목적은 종래 기술과 관련된 문제점 및/또는 단점들 중 적어도 하나를, 적어도 부분적으로, 해결, 완화 또는 제거하는 것에 있다. 특정 실시 예들(certain embodiments)은 후술하는 장점들 중 적어도 하나를 제공하는 것을 목적으로 한다.
다양한 실시예에 따라서, 전자 장치는, 스타일러스 펜의 위치를 확인할 수 있는 패널(예: 디지타이저 또는 터치 패널) 및 통신 모듈을 포함한다. 전자 장치 및 그 동작 방법은, 스타일러스 펜이 패널이 인식 범위 내에 있는 경우에는 패널 처리 결과에 따라 스타일러스 펜의 위치를 확인한다. 스타일러스 펜이 패널이 인식 범위 밖에 있는 경우에는, 전자 장치 및 그 동작 방법은, 통신 모듈에서 수신한 통신 신호에 따라 스타일러스 펜의 위치를 확인할 수 있다. 인식 범위 밖에서의 펜의 위치가 확인 가능함에 따라, 제스처 대응 기능 수행, 커서 이동의 마우스 기능의 추가적인 스타일러스 펜에 의한 조작이 가능할 수 있다.
본 개시의 특정 실시 예들의 상기 및 다른 양상들, 특징들 및 이점들은 첨부 도면들과 관련하여 취해진 다음의 설명으로부터 더 명백해질 것이다.
도 1은, 일 실시예에 따른, 네트워크 환경 내의 전자 장치를 도시한다.
도 2는, 일 실시예에 따른, 스타일러스 펜을 포함하는 전자 장치를 도시한다.
도 3a는, 일 실시예에 따른, 스타일러스 펜을 도시한다.
도 3b는, 일 실시예에 따른, 스타일러스 펜을 도시한다.
도 4는, 일 실시예에 따른 전자 장치 및 스타일러스 펜을 도시한다.
도 5는 일 실시예에 따른 전자 장치를 도시한다.
도 6a는 일 실시예에 따른 스타일러스 펜의 전자 장치 삽입 시의 스타일러스 펜 및 전자 장치의 동작을 도시한다.
도 6b는 일 실시예에 따른 스타일러스 펜의 전자 장치의 삽입 시의 상세 동작을 도시한다.
도 6c는 일 실시예에 따른 전자 장치 및 스타일러스 펜의 삽입 시의 동작을 도시한다.
도 7은 일 실시예에 따른 스타일러스 펜의 전자 장치 탈거 시의 스타일러스 펜 및 전자 장치의 동작을 도시한다.
도 8은 일 실시예에 따른 전자 장치 및 스타일러스 펜 사이의 삽입/탈거 시의 동작들을 도시한다.
도 9는 일 실시예에 따른 전자 장치의 동작 방법을 설명하기 위한 흐름도를 도시한다.
도 10은 일 실시예에 따른 스타일러스 펜 및 전자 장치 사이의 위치 관계를 도시한다.
도 11은 일 실시예에 따른 전자 장치의 동작 방법을 도시한다.
도 12는 일 실시예에 따른 전자 장치 및 스타일러스 펜의 동작 방법을 도시한다.
도 13은 일 실시예에 따른 스타일러스 펜 및 전자 장치의 동작 방법을 도시한다.
도 14a 및 14b는 다양한 실시예에 의한 에어 마우스 모드에서의 전자 장치의 동작을 도시한다.
도 15a 및 15b는 다양한 실시예에 따른 에어 마우스 종료 과정을 도시한다.
도 16은 일 실시예에 따른 제스처 모드에서의 스타일러스 펜 및 전자 장치의 동작 방법을 도시한다.
도 17은 일 실시예에 따른 제스처 모드를 도시한다.
도 18은 일 실시예에 따른 BLE 모드에서의 전자 장치의 동작을 도시한다.
도 19는 일 실시예에 따른 스타일러스 펜의 동작 방법을 도시한다.
본 개시의 다양한 실시 예는 상세한 설명 및 첨부 도면을 참조하여 아래에 설명된다. 명료하고 간결성을 위해 잘 알려진 기능 및/또는 구성에 대한 설명은 생략한다.
도 1은, 다양한 실시예들에 따른, 네트워크 환경(100) 내의 전자 장치(101)의 블럭도이다. 도 1을 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제 1 네트워크(198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(102)와 통신하거나, 또는 제 2 네트워크(199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(104) 또는 서버(108)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 장치(150), 음향 출력 장치(155), 표시 장치(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)에는, 이 구성요소들 중 적어도 하나(예: 표시 장치(160) 또는 카메라 모듈(180))가 생략되거나, 하나 이상의 다른 구성 요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들은 하나의 통합된 회로로 구현될 수 있다. 예를 들면, 센서 모듈(176)(예: 지문 센서, 홍채 센서, 또는 조도 센서)은 표시 장치(160)(예: 디스플레이)에 임베디드된 채 구현될 수 있다
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)을 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 로드하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 추가적으로 또는 대체적으로, 보조 프로세서(123)은 메인 프로세서(121)보다 저전력을 사용하거나, 또는 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.
보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성요소들 중 적어도 하나의 구성요소(예: 표시 장치(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다.
메모리(130)는, 전자 장치(101)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들 웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.
입력 장치(150)는, 전자 장치(101)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 장치(150)은, 예를 들면, 마이크, 마우스, 키보드, 또는 디지털 펜(예:스타일러스 펜)을 포함할 수 있다.
음향 출력 장치(155)는 음향 신호를 전자 장치(101)의 외부로 출력할 수 있다. 음향 출력 장치(155)는, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있고, 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.
표시 장치(160)는 전자 장치(101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 표시 장치(160)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일실시예에 따르면, 표시 장치(160)는 터치를 감지하도록 설정된 터치 회로(touch circuitry), 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 센서 회로(예: 압력 센서)를 포함할 수 있다.
오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일실시예에 따르면, 오디오 모듈(170)은, 입력 장치(150)를 통해 소리를 획득하거나, 음향 출력 장치(155), 또는 전자 장치(101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102)) (예: 스피커 또는 헤드폰))를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일실시예에 따르면, 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.
인터페이스(177)는 전자 장치(101)이 외부 전자 장치(예: 전자 장치(102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일실시예에 따르면, 인터페이스(177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(178)는, 그를 통해서 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일실시예에 따르면, 연결 단자(178)은, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리할 수 있다. 일실시예에 따르면, 전력 관리 모듈(388)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다.
배터리(189)는 전자 장치(101)의 적어도 하나의 구성 요소에 전력을 공급할 수 있다. 일실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108))간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(198)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제 2 네트워크(199)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성 요소(예: 단일 칩)으로 통합되거나, 또는 서로 별도의 복수의 구성 요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크 내에서 전자 장치(101)를 확인 및 인증할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일실시예에 따르면, 안테나 모듈은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 하나의 안테나를 포함할 수 있다. 일실시예에 따르면, 안테나 모듈(197)은 복수의 안테나들을 포함할 수 있다. 이런 경우, 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(190)과 외부 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC)이 추가로 안테나 모듈(197)의 일부로 형성될 수 있다.
상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))를 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104)간에 송신 또는 수신될 수 있다. 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 외부 전자 장치들(102, 104, or 108) 중 하나 이상의 외부 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
도 2는, 일 실시예들에 따른, 스타일러스 펜(201)(예: 도 1의 전자 장치(102))을 포함하는 전자 장치(101)를 도시한다.
도 2를 참조하면, 전자 장치(101)는, 스타일러스 펜(201)이 삽입될 수 있는 구조를 포함할 수 있다. 전자 장치(101)는 하우징(210)을 포함하며, 상기 하우징(210)의 일 부분, 예를 들면, 측면(210a)의 일 부분에는 홀(211)을 포함할 수 있다. 전자 장치(101)는, 상기 홀(211)과 연결된 수납 공간인 제1 내부 공간(212)을 포함할 수 있으며, 스타일러스 펜(201)은 제1 내부 공간(212) 내에 삽입될 수 있다. 스타일러스 펜(201)은, 스타일러스 펜(201)을 전자 장치(101)의 제1 내부 공간(212)으로부터 적어도 부분적으로 꺼내도록하는, 일 단부에 눌림 가능한 제1 버튼(201a)을 포함할 수 있다. 상기 제1 버튼(201a)이 눌리면, 제1 버튼(201a)과 연계 구성된 반발 메커니즘(예를 들어, 스프링과 같은 적어도 하나의 탄성 부재에 의한 반발 메커니즘)이 작동하여, 제1 내부 공간(212)으로부터 스타일러스 펜(201)이 이탈될 수 있다.
도 3a는, 일 실시예들에 따른, 스타일러스 펜을 도시한다.
도 3a를 참조하면, 스타일러스 펜(201)은, 프로세서(220), 메모리(230), 공진 회로(287), 충전 회로(288), 배터리(289), 통신 회로(290), 안테나(297), 트리거 회로(298) 및/또는 센서(299)를 포함할 수 있다. 어떤 실시예들에서는, 상기 스타일러스 펜(201)의 프로세서(220), 공진 회로(287)의 적어도 일부 및/또는 통신 회로(290)의 적어도 일부는 인쇄회로기판 상에 또는 칩 형태로 구성될 수 있다. 상기 프로세서(220), 공진 회로(287) 및/또는 통신 회로(290)는 메모리(230), 충전 회로(288), 배터리(289), 안테나(297), 트리거 회로(298) 및/또는 센서(299)와 전기적으로 연결될 수 있다.
프로세서(220)는, 커스터마이즈드(customized) 하드웨어 모듈 또는 소프트웨어(예를 들어, 어플리케이션 프로그램)를 실행하도록 구성된 제너릭(generic) 프로세서를 포함할 수 있다. 상기 프로세서(220)는, 스타일러스 펜(201)에 구비된 다양한 센서들, 데이터 측정 모듈, 입출력 인터페이스, 스타일러스 펜(201)의 상태 또는 환경을 관리하는 모듈 또는 통신 모듈 중 적어도 하나를 포함하는 하드웨어적인 구성 요소(기능) 또는 소프트웨어적인 요소(프로그램)를 포함할 수 있다. 상기 프로세서(220)는 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함할 수 있다. 프로세서(220)는 버튼의 눌림 상태를 나타내는 정보, 센서(299)에 의하여 획득된 센싱 정보, 및/또는 센싱 정보에 기반하여 계산된 정보(예: 스타일러스 펜(201)의 위치와 연관된 정보)를, 통신 회로(290)를 통하여 전자 장치(101)로 송신하도록 설정될 수 있다.
공진 회로(287)는, 전자 장치(101)의 디지타이저(예: 표시 장치(160))로부터 발생되는 전자기장 신호에 기반하여 공진될 수 있으며, 공진에 의하여 전자기 공명 방식(electro-magnetic resonance, EMR) 입력 신호(또는, 자기장 및)를 방사할 수 있다. 전자 장치(101)는, 전자기 공명 방식 입력 신호를 이용하여, 전자 장치(101) 상의 스타일러스 펜(201)의 위치를 확인할 수 있다. 예를 들어, 전자 장치(101)는, 디지타이저 내의 복수 개의 채널들(예: 복수 개의 루프 코일들) 각각에서, 전자기 공명 방식 입력 신호에 의하여 발생되는 유도 기전력(예: 출력 전류)의 크기에 기반하여, 스타일러스 펜(201)의 위치를 확인할 수 있다.
한편, 여기에서는, 전자 장치(101) 및 스타일러스 펜(201)이 EMR 방식에 기반하여 동작하는 것과 같이 설명되었지만, 이는 단순히 예시적인 것이다. 예를 들어, 전자 장치(101)는 ECR(electrically coupled resonance) 방식에 기반하여 전기장에 기반한 신호를 발생시킬 수도 있다. 스타일러스 펜(201)의 공진 회로는, 전기장에 의하여 공진될 수 있다. 전자 장치(101)는, 스타일러스 펜(201)에서의 공진에 의한 복수 개의 채널들(예: 전극들)에서의 전위를 확인할 수 있으며, 전위에 기반하여 스타일러스 펜(201)의 위치를 확인할 수도 있다. 스타일러스 펜(201)은, 또한 AES(active electrostatic) 방식으로 구현될 수도 있으며, 본 개시는 특정한 구현 종류로 제한되지 않음을 당업자는 이해할 것이다. 아울러, 전자 장치(101)는 터치 패널의 적어도 하나의 전극과 연관된 커패시턴스(예를 들어, 셀프 커패시턴스 또는 뮤추얼 커패시턴스)의 변경에 기반하여 스타일러스 펜(201)을 검출할 수도 있다. 이 경우, 스타일러스 펜(201)에는 공진 회로가 포함되지 않을 수도 있다. 본 개시에서 "패널", 또는 "센싱 패널"의 용어는, 디지타이저 및 TSP(touch screen panel)를 포괄적으로 지칭할 수 있다.
메모리(230)는, 스타일러스 펜(201)의 동작에 관련된 정보를 저장할 수 있다. 예를 들어, 상기 정보는 상기 전자 장치(101)와의 통신을 위한 정보 및 스타일러스 펜(201)의 입력 동작에 관련된 주파수 정보를 포함할 수 있다. 아울러, 메모리(230)는, 센서(299)의 센싱 데이터로부터 스타일러스 펜(201)의 위치에 대한 정보(예: 좌표 정보, 및/또는 변위 정보)를 계산하기 위한 프로그램(또는, 어플리케이션, 알고리즘, 또는 처리 루프)을 저장할 수도 있다. 메모리(230)는, 통신 회로(290)의 통신 스택을 저장할 수도 있다. 통신 회로(290) 및/또는 프로세서(220)는 전용 메모리를 포함할 수도 있다.
공진 회로(287)는, 코일(coil)(또는, 인덕터(inductor)) 및/또는 캐패시터(capacitor)를 포함할 수 있다. 상기 공진 회로(287)는, 입력되는 전기장 및/또는 자기장(예: 전자 장치(101)의 디지타이저로부터 발생되는 전기장 및/또는 자기장)에 기반하여 공진할 수 있다. 스타일러스 펜(201)이 EMR 방식에 의하여 신호를 전송하는 경우, 스타일러스 펜(201)은 전자 장치(101)의 유도성 패널(inductive panel)로부터 발생되는 전자기장(electromagnetic field)에 기반하여, 공진 주파수를 포함하는 신호를 생성할 수 있다. 스타일러스 펜(201)이 AES 방식에 의하여 신호를 전송하는 경우, 스타일러스 펜(201)은 전자 장치(101)와 용량 결합(capacity coupling)을 이용하여 신호를 생성할 수 있다. 스타일러스 펜(201)이 ECR 방식에 의하여 신호를 전송하는 경우, 스타일러스 펜(201)은 전자 장치의 용량성(capacitive) 장치로부터 발생되는 전기장(electric field)에 기반하여, 공진 주파수를 포함하는 신호를 생성할 수 있다.
상기 공진 회로(287)는 사용자의 조작 상태에 따라 전자기장의 세기 또는 주파수를 변경시키는데 이용될 수 있다. 예를 들어, 상기 공진 회로(287)는, 호버링 입력, 드로잉 입력, 버튼 입력 또는 이레이징 입력을 인식하기 위한 다양한 주파수를 제공할 수 있다. 예를 들어, 공진 회로(287)는, 복수 개의 커패시터의 연결 조합에 따라 다양한 공진 주파수를 제공할 수 있거나, 또는 가변 인덕터, 및/또는 가변 커패시터에 기반하여 다양한 공진 주파수를 제공할 수도 있다.
충전 회로(288)는 스위칭 회로에 기반하여 공진 회로(287)와 연결된 경우, 공진 회로(287)에서 발생되는 공진 신호를 직류 신호로 정류하여 배터리(289)에 제공할 수 있다. 스타일러스 펜(201)은 충전 회로(288)에서 감지되는 직류 신호의 전압 레벨을 이용하여, 상기 전자 장치(101)에 스타일러스 펜(201)이 삽입되었는지 여부를 확인할 수 있다. 대안적으로, 스타일러스 펜(201)은 충전 회로(288)에서 확인되는 신호에 대응하는 패턴을 확인하여, 스타일러스 펜(201)이 삽입되었는지 여부를 확인할 수도 있다.
배터리(289)는 스타일러스 펜(201)의 동작을 위한 전력을 저장하도록 구성될 수 있다. 상기 배터리(289)는, 예를 들어, 리튬-이온 배터리, 또는 캐패시터를 포함할 수 있으며, 충전식 또는 교환식일 수 있다. 배터리(289)는 충전 회로(288)로부터 제공받은 전력(예를 들어, 직류 신호(직류 전력))을 이용하여 충전될 수 있다.
통신 회로(290)는, 스타일러스 펜(201)과 전자 장치(101)의 통신 모듈(190) 간의 무선 통신 기능을 수행하도록 구성될 수 있다. 통신 회로(290)는 근거리 통신 방식을 이용하여 스타일러스 펜(201)의 상태 정보, 입력 정보, 및/또는 위치와 연관된 정보를 전자 장치(101)로 전송할 수 있다. 통신 회로(290)는 트리거 회로(298)를 통해 획득한 스타일러스 펜(201)의 방향 정보(예: 모션 센서 데이터), 마이크로 폰을 통해 입력된 음성 정보 또는 배터리(289)의 잔량 정보를 전자 장치(101)로 전송할 수 있다. 통신 회로(290)는, 센서(299)로부터 획득된 센싱 데이터, 및/또는 센싱 데이터에 기반하여 확인된 스타일러스 펜(201)의 위치와 연관된 정보를 전자 장치(101)로 송신할 수 있다. 통신 회로(290)는, 스타일러스 펜(201)에 구비된 버튼(337)의 상태에 대한 정보를 전자 장치(101)로 송신할 수 있다. 근거리 통신 방식은 블루투스, BLE(bluetooth low energy), NFC, Wi-Fi direct 중 적어도 하나를 포함할 수 있으나, 그 종류에는 제한이 없다.
안테나(297)는 신호 또는 전력을 외부(예를 들어, 상기 전자 장치(101))로 송신하거나 외부로부터 수신하는데 이용될 수 있다. 스타일러스 펜(201)은, 복수의 안테나(297)들을 포함할 수 있고, 이들 중에, 통신 방식에 적합한 적어도 하나의 안테나(297)를 선택할 수 있다. 상기 선택된 적어도 하나의 안테나(297)를 통하여, 통신 회로(290)는 신호 또는 전력을 외부 전자 장치와 교환할 수 있다.
트리거 회로(298)는 적어도 하나의 버튼 또는 센서 회로를 포함할 수 있다. 프로세서(220)는 스타일러스 펜(201)의 버튼의 입력 방식(예를 들어, 터치 또는 눌림) 또는 종류(예를 들어, EMR 버튼 또는 BLE 버튼)를 확인할 수 있다. 트리거 회로(298)는 버튼의 입력 신호 또는 센서(299)를 통한 신호를 이용하여 전자 장치(101)로 트리거 신호를 전송할 수 있다.
센서(299)는, 가속도 센서(accelerometer), 자이로 센서(gyro sensor), 및/또는 지자계 센서(geomagnetic sensor)를 포함할 수 있다. 가속도 센서는, 스타일러스 펜(201)의 리니어한 움직임 및/또는 스타일러스 펜(201)의 3축에 대한 가속도에 대한 정보를 센싱할 수 있다. 자이로 센서는, 스타일러스 펜(201)의 회전과 관련된 정보를 센싱할 수 있다. 지자계 센서는, 스타일러스 펜(201)의 절대 좌표계 내에서의 향하는 방향에 대한 정보를 센싱할 수 있다. 센서(299)는, 움직임을 측정하기 위한 센서뿐만 아니라, 스타일러스 펜(201)의 내부의 작동 상태 또는 외부의 환경 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있는 센서, 배터리 잔량 감지 센서, 압력 센서, 광 센서, 온도 센서, 생체 센서 중 적어도 하나를 포함할 수 있다. 프로세서(220)는, 센서(299)로부터 획득한 정보를, 통신 회로(290)를 통하여 전자 장치(101)로 송신할 수 있다. 또는, 프로세서(220)는, 센서(299)로부터 획득한 정보에 기반하여, 스타일러스 펜(201)의 위치와 연관된 정보(예: 스타일러스 펜(201)의 좌표 및/또는 스타일러스 펜(201)의 변위)를, 통신 회로(290)를 통하여 전자 장치(101)로 송신할 수도 있다.
도 3b는, 일 실시예에 따른, 스타일러스 펜을 도시한다.
도 3b를 참조하면, 스타일러스 펜(201)은 스타일러스 펜(201)의 외형을 구성하는 펜 하우징(300)과 펜 하우징(300) 내부의 내부 조립체(inner assembly)를 포함할 수 있다. 상기 내부 조립체는, 스타일러스 펜(201) 내부에 실장되는 여러 부품들이 함께 결합된 상태에서, 펜 하우징(300) 내부에 1 회의 조립 동작으로 삽입될 수 있다.
펜 하우징(300)은, 제1 단부(300a) 및 제2 단부(300b) 사이에 길게 연장된 모양을 가지며, 내부에 제2 내부 공간(301)을 포함할 수 있다. 상기 펜 하우징(300)은 단면이 장축과 단축으로 이루어진 타원형일 수 있으며, 전체적으로는 타원 기둥 형태로 형성될 수 있다. 도 2에서 전술한, 전자 장치(101)의 제1 내부 공간(212) 또한 펜 하우징(300)의 형상에 대응하여 단면이 타원형으로 형성될 수 있다. 펜 하우징(300)은, 적어도 일부분이 합성 수지(예: 플라스틱) 및/또는 금속성 재질(예: 알루미늄)을 포함할 수 있다. 펜 하우징(300)의 제1 단부(300a)는 합성 수지 재질로 구성될 수 있다. 펜 하우징(300)의 재질에 대해서는 이 밖에 다양한 실시예들이 적용될 수 있다.
상기 내부 조립체(inner assembly)는, 펜 하우징(300)의 형상에 대응하여 길게 연장된 형상을 가질 수 있다. 상기 내부 조립체는 길이 방향을 따라 크게 3가지의 구성으로 구분될 수 있다. 상기 내부 조립체는, 펜 하우징(300)의 제1 단부(300a)에 대응하는 위치에 배치되는 코일부(310), 펜 하우징(300)의 제2 단부(300b)에 대응하는 위치에 배치되는 이젝션 부재(ejection member, 320) 및 펜 하우징(300)의 몸통에 대응하는 위치에 배치되는 회로기판부(330)를 포함할 수 있다.
상기 코일부(310)는, 상기 내부 조립체가 상기 펜 하우징(300)에 완전히 삽입되면 제1 단부(300a)의 외부로 노출되는 펜 팁(311), 패킹 링(312), 복수 회 권선된 코일(313) 및/또는 펜 팁(311)의 가압에 따른 압력의 변화를 획득하기 위한 필압 감지부(314)를 포함할 수 있다. 패킹 링(312)은 에폭시(epoxy), 고무, 우레탄 또는 실리콘을 포함할 수 있다. 패킹 링(312)은 방수 및 방진의 목적으로 구비될 수 있으며, 코일부(310) 및 회로기판부(330)를 침수 또는 먼지로부터 보호할 수 있다. 코일(313)은 설정된 주파수 대역(예: 500kHz)에서 공진 주파수를 형성할 수 있으며, 적어도 하나의 소자(예: 용량성 소자(capacitor))와 조합되어 일정 정도의 범위에서 코일(313)이 형성하는 공진 주파수를 조절할 수 있다.
상기 이젝션 부재(320)는, 전자 장치(101)의 제1 내부 공간(212)으로부터 스타일러스 펜(201)을 빼내기 위한 구성을 포함할 수 있다. 이젝션 부재(320)는 샤프트(321)와 상기 샤프트(321)의 둘레에 배치되며, 이젝션 부재(320)의 전체적인 외형을 이루는 이젝션 몸체(322) 및 버튼부(323)(예: 도 2의 제1 버튼(201a))를 포함할 수 있다. 상기 내부 조립체가 상기 펜 하우징(300)에 완전히 삽입되면, 상기 샤프트(321) 및 이젝션 몸체(322)를 포함한 부분은 상기 펜 하우징(300)의 제2 단부(300b)에 의해 둘러싸이고, 버튼부(323)의 적어도 일부분은 제2 단부(300b)의 외부로 노출될 수 있다. 이젝션 몸체(322) 내에는 복수의 부품들, 예를 들면, 캠 부재들 또는 탄성 부재들이 배치되어 푸시-풀(push-pull) 구조를 형성할 수 있다. 버튼부(323)는 실질적으로 샤프트(321)와 결합하여 이젝션 몸체(322)에 대하여 직선 왕복 운동을 할 수 있다. 버튼부(323)는 사용자가 손톱을 이용해 스타일러스 펜(201)을 빼낼 수 있도록 걸림 구조가 형성된 버튼을 포함할 수 있다. 스타일러스 펜(201)은 샤프트(321)의 직선 왕복 운동을 검출하는 센서를 포함함으로써, 또 다른 입력 방식을 제공할 수도 있다.
상기 회로기판부(330)는, 인쇄회로기판(332), 상기 인쇄회로기판(332)의 적어도 일면을 둘러싸는 베이스(331) 및 안테나를 포함할 수 있다. 베이스(331)의 상면에는 인쇄회로기판(332)이 배치되는 기판안착부(333)가 형성되고, 인쇄회로기판(332)은 기판안착부(333)에 안착된 상태로 고정될 수 있다. 인쇄회로기판(332)은 제1 면과 제2 면을 포함할 수 있으며, 제1 면에는 코일(313)과 연결되는 가변용량 커패시터 또는 스위치(334)가 배치될 수 있으며, 제2 면에는 충전 회로, 배터리(336) 또는 통신 회로가 배치될 수 있다. 여기서 인쇄회로기판(332)의 제1 면과 제2 면은, 위/아래로 적층된 구조에서 서로 다른 적층면을 의미할 수 있으며, 인쇄회로기판(332)의 길이 방향을 따라 배치된 인쇄회로기판의 서로 다른 부분을 지칭할 수 있다. 배터리(336)는 EDLC(electric double layered capacitor)를 포함할 수 있다. 충전 회로는 코일(313) 및 배터리 사이에 위치하며, 전압 검출 회로(voltage detector circuitry) 및 정류기(rectifier)를 포함할 수 있다. 배터리(336)는 반드시 인쇄회로기판(332)의 제2 면에 배치되지 않을 수 있다. 배터리(336)의 위치는 회로기판(330)의 다양한 실장 구조에 따라 상이하게 설정될 수 있으며, 이에 따라 도면에 도시된 것과 상이할 수 있다.
상기 안테나는, 도 3b에 도시된 예와 같은 안테나 구조물(339) 및/또는 인쇄회로기판(332)에 임베디드(embedded)되는 안테나를 포함할 수 있다. 인쇄회로기판(332) 상에는 스위치(334)가 구비될 수 있다. 스타일러스 펜(201)에 구비되는 제2 버튼(337)은 스위치(334)를 누르는데 이용되고 펜 하우징(300)의 측면 개구부(302)를 통해 외부로 노출될 수 있다. 상기 제2 버튼(337)은 지지부재(338)에 의해 지지되면서, 제2 버튼(337)에 작용하는 외력이 없으면, 지지부재(338)가 탄성 복원력을 제공하여 제2 버튼(337)을 일정 위치에 배치된 상태로 복원 또는 유지할 수 있다. 한편, 제2 버튼(337)은, 물리 키, 터치 키, 모션 키, 압력 키, 키 리스(key less)의 방식 중 어느 하나로 구현될 수 있으며, 버튼의 구현 형태에는 제한이 없다.
상기 회로기판부(330)는 예를 들면, 오-링(O-ring)과 같은 패킹 링을 포함할 수 있다. 상기 베이스(331)의 양단에 탄성체로 제작된 오-링이 배치되어 상기 베이스(331)와 상기 펜 하우징(300) 사이에 밀봉 구조가 형성될 수 있다. 상기 지지부재(338)는 부분적으로 상기 측면 개구부(302)의 주위에서 상기 펜 하우징(300)의 내벽에 밀착하여 밀봉 구조를 형성할 수 있다. 예컨대, 상기 회로기판부(330)도 적어도 일 부분에 상기 코일부(310)의 패킹 링(312)과 유사한 방수, 방진 구조를 포함할 수 있다.
스타일러스 펜(201)은, 베이스(331)의 상면에 배터리(336)가 배치되는 배터리 안착부(333a)를 포함할 수 있다. 배터리 안착부(333a)에 탑재될 수 있는 배터리(336)는, 예를 들어, 실린더형(cylinder type) 배터리를 포함할 수 있다.
스타일러스 펜(201)은, 마이크로 폰 및/또는 스피커를 포함할 수 있다. 마이크로 폰 및/또는 스피커는 인쇄회로기판(332)에 직접 연결되거나, 인쇄회로기판(332)과 연결된 별도의 FPCB(flexible printed circuit board) 에 연결될 수 있다. 마이크로 폰 및/또는 스피커는 스타일러스 펜(301)의 긴 방향으로 제2 버튼(337)과 평행한 위치에 배치될 수 있다.
도 4는, 일 실시예에 따른 전자 장치 및 스타일러스 펜을 도시한다.
도 4를 참조하면, 전자 장치(101)는, 펜 컨트롤러(410)를 포함할 수 있다. 펜 컨트롤러(410)는, 적어도 하나의 코일(411,412)을 포함할 수 있으며, 적어도 하나의 코일(411,412)을 통하여 스타일러스 펜(201)에 충전용 전력을 제공할 수 있다. 적어도 하나의 코일(411,412)은 스타일러스 펜(201)이 전자 장치(101)의 수납 공간으로 삽입된 경우, 스타일러스 펜(201)의 코일(421)과 물리적으로 인접하는 위치에 배치될 수 있으나, 코일(411) 및 코일(412)의 배치 위치에는 제한이 없다.
스타일러스 펜(201)의 수납 공간으로의 삽입은 단순히 예시적인 것이다. 전자 장치(101)는, 스타일러스 펜(201)이 장착(또는, 부착)될 수 있는 영역(또는, 공간)을 포함할 수도 있으며, 이 경우 스타일러스 펜(201)은 해당 영역(또는, 공간)에 탈부착될 수 있다. 본 개시에서의 스타일러스펜(201)의 수납 공간 내의 위치 시의 동작은, 다른 실시예에서 장착 영역(또는, 공간)에 부착된 경우에 수행될 수도 있음을 당업자는 이해할 것이다. 펜 컨트롤러(410)의 적어도 일부의 기능은 프로세서(120)에 의하여 수행될 수 있거나, 또는 펜 컨트롤러(410) 및 프로세서(120)가 통합되어 적어도 일부의 기능을 수행하도록 구현될 수도 있다. 펜 컨트롤러(410)가 특정 동작을 수행하는 경우, 특정 동작은 실제로 프로세서(120)에 의하여 수행되거나, 또는 프로세서(120)로부터 독립적인 제어 회로에 의하여 수행될 수 있다. 펜 컨트롤러(410)는, 적어도 하나의 코일(411,412)이외에도 제어 회로(예를 들어, 프로세서(120)로부터 독립적인 제어 회로), 인버터, 및/또는 증폭기를 포함할 수 있다. 펜 컨트롤러(410)는 제어 회로를 포함하지 않을 수도 있으며, 이 경우에는 프로세서(120)의 제어에 따라 적어도 하나의 코일(411,412)에 충전을 위한 신호를 제공할 수 있다.
펜 컨트롤러(410)는, 적어도 하나의 코일(411,412)을 통하여, 패턴을 가지는 신호를 제공할 수도 있다. 패턴은, 스타일러스 펜(201)의 제어를 위하여 스타일러스 펜(201)과 미리 공유된 것으로, 예를 들어 충전 개시 지시 패턴, 충전 종료 지시 패턴, 또는 검출 패턴 중 적어도 하나를 포함할 수 있다. 충전 신호, 또는 제어를 위한 패턴을 가지는 신호를 제공하기 위한 코일(411,412)은 2개로 도시되었지만 이는 단순히 예시적인 것으로, 그 숫자에는 제한이 없다.
스타일러스 펜(201)의 공진회로(420)는 코일(421), 적어도 하나의 커패시터(422,423), 및/또는 스위치(424)를 포함할 수 있다. 스위치(424)가 오프 상태인 경우에는, 코일(421) 및 커패시터(422)가 공진 회로를 구성할 수 있으며, 스위치(424)가 온 상태인 경우에는 코일(421)과 커패시터들(422,423)이 공진 회로를 구성할 수 있다. 이에 따라, 스위치(424)의 온/오프 상태에 따라 공진 회로(420)의 공진 주파수가 변경될 수 있다. 예를 들어, 전자 장치(101)는, 스타일러스 펜(201)으로부터의 신호의 주파수에 기반하여, 스위치(424)의 온/오프 상태를 확인할 수 있다. 스타일러스 펜(201)의 버튼(337)이 눌림/릴리즈되는 경우, 스위치(424)가 온/오프될 수 있으며, 전자 장치(101)는 스타일러스 펜(201)의 버튼(337)의 눌림 여부를, 디지타이저를 통하여 확인되는 수신 신호의 주파수에 기반하여 확인할 수 있다.
적어도 하나의 정류기(431,435)는, 공진 회로(420)로부터 출력되는 교류 파형의 신호(VPEN)를 정류하여 출력할 수 있다. 충전 스위치 컨트롤러(SWchg ctrl)(432)는, 정류기(431)로부터 출력되는 정류된 신호(VM)를 수신할 수 있다. 정류된 신호(VM)에 기반하여, 충전 스위치 컨트롤러(432)는, 공진 회로(420)에서 발생되는 신호가 충전용 신호인지 또는 위치 검출을 위한 신호인지 여부를 확인할 수 있다. 예를 들어, 충전 스위치 컨트롤러(432)는, 정류된 신호의 전압의 크기에 기반하여 공진 회로(420)에서 발생되는 신호가 충전용 신호인지 또는 위치 검출을 위한 신호인지 여부를 확인할 수 있다. 또는, 충전 스위치 컨트롤러(432)는, 정류된 신호의 파형에 기반하여 충전 개시용 패턴을 가지는 신호가 입력되는지 여부를 확인할 수도 있다.
충전용 신호인 것으로 확인되면, 충전 스위치 컨트롤러(432)는 충전 스위치(SWchg)(436)를 온 상태로 제어할 수 있다. 충전 개시용 패턴을 가지는 신호가 검출되면, 충전 스위치 컨트롤러(432)는, 충전 스위치(SWchg)(436)를 온 상태로 제어할 수 있다. 충전 스위치 컨트롤러(432)는 충전 개시 신호(chg_on)를 충전 스위치(436)로 전달할 수 있다. 이 경우, 정류된 신호(VIN)이 충전 스위치(436)를 통하여 배터리(battery)(437)로 전달될 수 있다. 배터리(437)는, 수신한 정류된 신호(VIN)를 이용하여 충전될 수 있다. 과전압 보호 회로(over-voltage protection circuit: OVP)(433)는 배터리 전압(VBAT)을 확인할 수 있으며, 배터리 전압이 과전압 임계치를 초과하면 충전 스위치(436)를 오프 상태로 제어할 수 있다.
로드 스위치 컨트롤러(SWL ctrl)(434)는, 배터리 전압이 동작 전압 임계치를 초과하는 것으로 확인되면, 로드 스위치(SWL)(438)를 온 상태로 제어할 수 있다. 로드 스위치(438)가 온 상태가 되면, 배터리(437)로부터의 전력이 BLE 통신 회로 및 컨트롤러(BLE + controller)(439)로 전달될 수 있다. BLE 통신 회로 및 컨트롤러(439)는 수신한 전력을 이용하여 동작할 수 있다. 버튼 제어 회로(button control)(440)는, 스타일러스 펜(201)과 전자 장치(101)와의 거리가 임계 거리보다 큰 경우, 버튼의 입력에 대한 정보를 BLE 통신 회로 및 컨트롤러(439)로 전달할 수 있다. BLE 통신 회로 및 컨트롤러(439)는 수신한 버튼 입력에 대한 정보를, 안테나(441)를 통하여 전자 장치(101)로 송신할 수 있다.
센서(450)는, 자이로 센서(451) 및/또는 가속도 센서(452)를 포함할 수 있다. 자이로 센서(451) 및/또는 가속도 센서(452)에 의하여 획득된 센싱 데이터는 BLE 통신 회로 및 컨트롤러(439)로 전달될 수 있다. BLE 통신 회로 및 컨트롤러(439)는, 수신한 센싱 데이터를 포함하는 통신 신호를 안테나(441)를 통하여 전자 장치(101)로 송신할 수 있다. 또는, BLE 통신 회로 및 컨트롤러(439)는, 수신한 센싱 데이터에 기반하여 확인된 스타일러스 펜(201)의 위치와 연관된 정보(예: 스타일러스 펜(201)의 좌표 및/또는 변위)를 확인할 수 있다. BLE 통신 회로 및 컨트롤러(439)는, 확인된 스타일러스 펜(201)의 위치와 연관된 정보를, 안테나(441)를 통하여, 전자 장치(101)로 송신할 수 있다.
BLE 통신 회로 및 컨트롤러(439)는, 스타일러스 펜(201)이 전자 장치(101)로부터 인출된 경우, 가속도 센서(452)를 활성화할 수 있다. BLE 통신 회로 및 컨트롤러(439)는, 버튼이 눌러지는 경우, 자이로 센서(451)를 활성화시킬 수 있다. 한편, 활성화 시점은 단순히 예시적인 것으로, 센서별 활성화 시점에는 제한이 없다. 아울러, 센서(450)는 지자계 센서를 더 포함할 수도 있다. 가속도 센서(452)만이 활성화된 경우, 스타일러스 펜(201)은 전자 장치(101)로 가속도 센서(452)에 의하여 측정된 가속도 정보를 제공할 수 있으며, 전자 장치(101)는 펜 신호에 기반하여 확인된 스타일러스 펜(201)의 위치와 가속도 정보에 동시에 기반하여 동작할 수도 있다.
추가적으로, 도 4가 BLE 통신 회로 및 컨트롤러(439)를 도시되지만, 본 개시는 BLE 통신에 제한되지 않으며, 다른 적절한 근거리 통신 방식을 이용할 수 있다.
도 5는 일 실시예에 따른 전자 장치의 구성을 도시한다.
도 5를 참조하면, 전자 장치(101)는, 센싱 패널 컨트롤러(sensing panel controller)(511), 프로세서(512), 블루투스 컨트롤러(513), 및/또는 안테나(514)를 포함할 수 있다. 전자 장치(101)는, 센싱 패널(503), 센싱 패널(503) 상에 배치되는 디스플레이 어셈블리(display assembly)(502), 및/또는 디스플레이 어셈블리(502) 상에 배치되는 윈도우(window)(501)를 포함할 수 있다. 센싱 패널 (503)이 디지타이저로 구현된 경우에는, 상측 또는 하측에, 사용자의 터치를 센싱하기 위한 터치 스크린 패널(touch screen panel)이 더 배치될 수도 있다. 터치 스크린 패널은, 디스플레이 어셈블리(502)의 상측에 위치할 수도 있다. 센싱 패널(503)은 디지타이저(digitizer)로 구현되어 복수 개의 루프 코일을 포함할 수 있다. 센싱 패널(503)이 디지타이저(digitizer)로 구현된 경우, 센싱 패널(503)은, 루프 코일들에 전기적인 신호(예: 전송 신호)를 인가하기 위한 소자(예: 증폭기)를 포함할 수 있다. 센싱 패널(503)는, 루프 코일들로부터 출력되는 신호(예: 입력 신호)를 처리하기 위한 소자(예: 증폭기, 커패시터, ADC)를 포함할 수 있다. 센싱 패널(503)은, 루프 코일들로부터 각각 출력되는 신호들의 크기(예: 채널 별 변환된 디지털 값들)에 기반하여, 스타일러스 펜(201)의 위치를 확인하여 프로세서(120)로 출력할 수 있다. 프로세서(120)가, 루프 코일들로부터 각각 출력되는 신호들의 크기(예: 채널 별 변환된 디지털 값들)에 기반하여 스타일러스 펜(201)의 위치를 확인할 수도 있다. 센싱 패널(503)은, 루프 코일들 중 적어도 하나에 전류를 인가할 수 있으며, 적어도 하나의 코일은 자기장을 형성할 수 있다. 스타일러스 펜(201)은 주변에 형성된 자기장에 의하여 공진될 수 있으며, 공진에 의하여 스타일러스 펜(201)으로부터 자기장이 형성될 수 있다. 스타일러스 펜(201)으로부터 형성된 자기장에 의하여, 루프 코일들 각각으로부터 전류가 출력될 수 있다. 전자 장치(101)는, 루프 코일들 채널 별 전류의 크기(예: 변환된 디지털 값들)에 기반하여, 스타일러스 펜(201)의 위치를 확인할 수 있다.
스타일러스 펜(201)의 위치를 판단하기 위하여, 1개의 축(예: x축) 방향으로 연장되는 코일들 및 다른 1개의 축(예: y축) 방향으로 연장되는 코일들을 포함할 수 있으나, 그 배열 형태에는 제한이 없다.
센싱 패널 컨트롤러(511)는, 센싱 패널(503)의 복수 개의 루프 코일 중 적어도 일부에 전송 신호(Tx)를 인가할 수 있으며, 전송 신호(Tx)를 수신한 루프 코일은 자기장을 형성할 수 있다. 센싱 패널 컨트롤러(511)는, 시분할적으로, 복수 개의 루프 코일 중 적어도 일부로부터 수신 신호(Rx)를 수신할 수 있다. 센싱 패널 컨트롤러(511)는, 수신 신호(Rx)에 기반하여 스타일러스 펜(201)의 위치를 확인할 수 있으며, 스타일러스 펜(201)의 위치를 프로세서(512)로 전달할 수 있다. 예를 들어, 복수 개의 루프 코일별(예를 들어, 채널 별) 수신 신호(Rx)의 크기가 상이할 수 있으며, 수신 신호의 크기들에 기반하여 스타일러스 펜(201)의 위치가 확인될 수 있다. 아울러, 전자 장치(101)는, 수신 신호의 주파수에 기반하여 스타일러스 펜(201)의 버튼의 눌림 여부를 확인할 수 있다. 수신 신호의 주파수가 제 1 주파수인 경우에는, 전자 장치(101)는 스타일러스 펜(201)의 버튼이 눌린 것으로 확인할 수 있다. 하지만, 수신 신호의 주파수가 제 2 주파수인 경우에는 전자 장치(110)는 스타일러스 펜(201)의 버튼이 눌려지지 않거나, 또는 릴리즈된 것으로 확인할 수 있다. 또는, 센싱 패널이 터치 스크린 패널(TSP)로 구현되는 경우에는, 센싱 패널(503)은 전극으로부터의 출력 신호에 기반하여 스타일러스 펜(201)의 위치를 확인할 수도 있다. 터치 스크린 패널은 디스플레이 어셈블리(502)의 상측에 위치할 수 있다. 터치 스크린 패널은, 센서 전극이 디스플레이 어셈블리(502)의 내측에 위치하는 인-셀(in-cell) 구조로 구현될 수도 있으며, 또는 센서 전극이 디스플레이 어셈블리(502) 상에 위치하는 온-셀(on-cell) 구조로 구현될 수도 있다. 대안적으로, 전자 장치(101)는 터치 패널 전극에서의 커패시턴스(상호 커패시턴스 및/또는 셀프 커패시턴스)의 변경에 기반하여 펜을 검출할 수도 있다. 디지타이저 또는 터치 스크린 패널의 스타일러스 펜으로부터의 펜 신호를 센싱할 수 있는 하드웨어를 센싱 패널(503)로 명명할 수 있다. 터치 스크린 패널을 이용하여 스타일러스 펜(201)의 위치를 확인하는 경우에는, 전자 장치(101)는 수신된 통신 신호에 기반하여 버튼의 눌림 여부를 확인할 수도 있다.
센싱 패널 컨트롤러(511)는, 수신 신호에 기반하여 스타일러스 펜(201)의 전자 장치(101)로의 삽입(또는, 결합) 여부를 확인할 수도 있으며, 이를 프로세서(512)로 전달할 수 있다. 센싱 패널 컨트롤러(511)는 센싱 패널(503)과 일체형으로 구현될 수도 있다. 도 4의 펜 컨트롤러(410)는 센싱 패널 컨트롤러(510)와 하나의 IC(integrated circuit)로 구현될 수도 있다. 프로세서(512)는, 삽입 여부에 기반하여 무선 충전을 위한 신호를 송출할 수도 있다. 프로세서(512)는, 삽입 여부에 기반하여 블루투스 컨트롤러(513)를 제어하여, 만약 무선 통신 연결이 형성되지 않은 경우에는, 스타일러스 펜(201)으로의 무선 통신을 연결하도록 블루투스 컨트롤러(513)를 제어할 수 있다. 아울러, 스타일러스 펜(201)의 장착 시에는, 스타일러스 펜(201)은 충전 용량 정보를, 무선 통신을 통하여, 전자 장치(101)로 송신할 수 있다. 스타일러스 펜(201)은, 스타일러스 펜(201) 탈거 시에는, 버튼 눌림, 센서 데이터에 대한 정보를 전자 장치(101)로 송신할 수 있다. 아울러, 프로세서(512)는, 스타일러스 펜(201)으로부터 수신된 데이터에 기반하여, 센싱 패널 컨트롤러(511)로 충전 신호 및 제어 신호를 송출하도록 제어할 수 있다. 프로세서(512)는, 스타일러스 펜(201)으로부터 수신된 데이터에 기반하여, 스타일러스 펜(201)의 제스처를 확인할 수 있으며, 제스처에 대응하는 동작을 수행할 수 있다. 프로세서(512)는, 제스처에 매핑된 기능을 어플리케이션에 전달할 수 있다. 블루투스 컨트롤러(513)는, 스타일러스 펜(201)과, 안테나(514)를 통하여 정보를 송수신할 수 있다. 디스플레이 어셈블리(502)는, 화면을 표시하기 위한 소자를 포함할 수 있다. 윈도우(501)는, 디스플레이 어셈블리(502)의 적어도 일부가 시각적으로 노출 될 수 있도록 투명 재질로 구성될 수 있다.
도 6a는 일 실시예에 따른 스타일러스 펜의 전자 장치 삽입 시의 스타일러스 펜 및 전자 장치의 동작을 도시한다.
도 6a를 참조하면, 601 동작에서, 스타일러스 펜(201)이 전자 장치(101)의 수납 공간에 삽입될 수 있다. 예를 들어, 사용자는, 스타일러스 펜(201)을 전자 장치(101)의 수납 공간으로 삽입할 수 있으며, 해당 동작이 스타일러스 펜(201)의 능동적인 동작이 아님에 기반하여 점선으로 처리하였다.
도 6a은, 스타일러스 펜(201)과 전자 장치(101)와 통신 연결이 형성되지 않은 스타일러스 펜(201)이 전자 장치(101)에 삽입되는 예시를 도시한다. 본 개시에서, 전자 장치(101), 또는 스타일러스 펜(201)이 특정 동작을 수행하는 경우, 전자 장치(101)에 포함된 프로세서(120) 또는 스타일러스 펜(201)에 포함된 프로세서(220)가 특정 동작을 수행하는 것을 의미할 수 있다. 전자 장치(101), 또는 스타일러스 펜(201)이 특정 동작을 수행하는 것은, 전자 장치(101)에 포함된 프로세서(120) 또는 스타일러스 펜(201)에 포함된 프로세서(220)가 다른 하드웨어로 하여금 특정 동작을 수행하도록 제어하는 것을 의미할 수도 있다. 또는, 전자 장치(101), 또는 스타일러스 펜(201)이 특정 동작을 수행하는 것은, 전자 장치(101)에 포함된 프로세서(120) 또는 스타일러스 펜(201)에 포함된 프로세서(220)가 특정 동작을 수행하도록, 메모리에 저장된 인스트럭션이 실행됨 또는 인스트럭션이 저장됨을 의미할 수도 있다.
603 동작에서, 전자 장치(101)는, 스타일러스 펜(201)의 삽입을 감지할 수 있다. 예를 들어, 전자 장치(101)는, 수납 공간 코일을 통하여 송신된 송신 신호에 대응하여, 스타일러스 펜(201)으로부터 수신되는 수신 신호에 기반하여, 스타일러스 펜(201)의 삽입을 감지할 수 있다. 삽입 감지 방식에는 제한이 없다.
605 동작에서, 전자 장치(101)는, 초기화 동작을 수행할 수 있으며, 예를 들어 리셋 명령을 스타일러스 펜(201)으로 전달할 수 있다. 전자 장치(101)는, 연결이 형성되지 않은 상태, 아이들(idle) 상태, 스턱(stuck) 상태, 연결 이력이 없는 스타일러스 펜(201)이 삽입됨이 확인되면, 리셋 명령을 전달할 수 있다.
607 동작에서, 스타일러스 펜(201)는, 리셋 동작을 수행할 수 있다. 예를 들어, 스타일러스 펜(201)은, 기존의 BLE 연결을 해제하고, BLE 통신 모듈을 초기화할 수 있다. 609 동작에서, 스타일러스 펜(201)은, 애드버타이징 동작을 수행할 수 있다. 예를 들어, 스타일러스 펜(201)은 애드버타이즈먼트 신호를 브로드캐스팅할 수 있다. 611 동작에서, 전자 장치(101)는, 삽입된 스타일러스 펜(201)을 확인할 수 있다. 전자 장치(101)는, 수신한 애드버타이즈먼트 신호에 기반하여, 삽입된 스타일러스 펜(201)을 확인할 수 있다.
613 동작에서, 전자 장치(101)는, 통신 연결을 요청할 수 있다. 예를 들어, 전자 장치(101)는, 애드버타이즈먼트 신호에 대응하는 연결 요청(connection request) 신호를 송신할 수 있다. 스타일러스 펜(201)은, 615 동작에서, 전자 장치(101)와 통신 연결(communication connection)을 형성할 수 있다.
도 6b는 일 실시예에 따른 스타일러스 펜의 전자 장치의 삽입 시의 상세 동작을 도시한다.
도 6b를 참조하면, 621 동작에서, 스타일러스 펜(201)이 전자 장치(101)의 수납 공간에 삽입될 수 있다.
전자 장치(101)는, 623 동작에서, 삽입이 확인되면, 625 동작에서, 충전을 개시(charge start)할 수 있다. 전자 장치(101)는, 예를 들어, 충전 개시를 나타내는 패턴의 신호를 수납 공간의 코일(411,412)을 통하여 전달하거나, 또는 통신 모듈을 통하여 충전 개시를 나타내는 통신 신호를 스타일러스 펜(201)으로 전달할 수 있다.
627 동작에서, 스타일러스 펜(201)은 충전 개시를 나타내는 정보를 확인하고, 충전 개시(chg_on)를 수행할 수 있다. 예를 들어, 스타일러스 펜(201)은, 정류기(435)를 배터리(437)에 연결하도록 충전 스위치(436)를 제어할 수 있다.
629 동작에서, 스타일러스 펜(201)은 수납 공간 내의 위치함(garage in)을 검출할 수 있다. 전자 장치(101)는 631 동작에서, 리셋 개시(reset start)의 명령을 스타일러스 펜(201)으로 전달할 수 있다.
633 동작에서, 스타일러스 펜(201)은 리셋을 수행할 수 있다. 예를 들어, 스타일러스 펜(201)은 BLE 모듈을 초기화할 수 있다.
635 동작에서, 스타일러스 펜(201)은 애드버타이징 절차를 수행할 수 있다.
전자 장치(101)는 637 동작에서 스타일러스 펜을 위한 스캔을 개시할 수 있으며, 639 동작에서 스캔을 지속할 수 있다. 예를 들어, 타임 아웃(예: 40초) 기간 동안 전자 장치(101)는 스캔을 수행할 수 있다.
641 동작에서, 전자 장치(101)는 삽입된 스타일러스 펜의 검색(search)을 641 동작에서 개시할 수 있다. 대안적으로, 637 동작, 639 동작, 및 641 동작은, 하나의 동작으로 수행될 수도 있다.
643 동작에서, 전자 장치(101) 및 스타일러스 펜(201)은 검색 절차를 수행할 수 있다. 예를 들어, 전자 장치(101)는, 충전 개시 신호를 송신한 이후 또는 충전 개시 신호를 송신하지 않고, 애드버타이즈먼트 신호를 송신하는 스타일러스 펜(201)이 존재하는지의 검색을 수행할 수 있다. 스타일러스 펜(201)은 충전 개시 신호를 수신한 경우에 애드버타이즈먼트 신호를 송신하도록 설정될 수 있다. 이에 따라, 전자 장치(101)는, 충전 개시 신호를 송신한 이후의 수신된 애드버타이즈먼트 신호를 확인함에 따라서, 전자 장치(101)에 삽입된 스타일러스 펜(201)을 확인할 수 있다.
645 동작에서, 전자 장치(101)는 삽입된 스타일러스 펜(201)을 검출할 수 있다.
647 동작에서, 전자 장치(101)는 연결 요청(connect request)을 스타일러스 펜(201)으로 전달할 수 있다. 전자 장치(101)는, 649 동작에서 스타일러스 펜(201)이 연결 요청을 수신할 수 있다. 651 동작에서, 전자 장치(101) 및 스타일러스 펜(201)이 연결될 수 있다.
653 동작에서, 스타일러스 펜(201)은 데스크립터(descriptor)를 설정(set)할 수 있으며, 이에 대한 정보를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 데스크립터를 확인할 수 있다. 데스크립터는, 활성화된 기능(예: 버튼 이벤트, 배터리 정보를 포함하는 장치 정보)에 대한 설정일 수 있으며, 그 종류에는 제한이 없다.
655 동작에서, 스타일러스 펜(201)은 데스크립터에 대한 정보를 전자 장치(101)로 송신할 수 있다. 대안적으로, 전자 장치(101)는 스타일러스 펜(201)과 리셋/통신 연결을 수행할 필요가 없다고 확인할 수도 있으며, 이 경우에는 631 동작부터 651 동작은 생략될 수도 있다.
도 6c는 일 실시예에 따른 전자 장치 및 스타일러스 펜의 삽입 시의 동작을 도시한다.
도 6c를 참조하면, 661 동작에서, 전자 장치(101)의 수납 공간으로 스타일러스 펜(201)이 삽입될 수 있다. 예를 들어, 스타일러스 펜(201)은 최초 삽입 이후에 수납 공간으로부터 탈거되었다가 재삽입될 수 있다. 663 동작에서, 전자 장치(101)는, 스타일러스 펜(201)의 삽입을 감지할 수 있다. 665 동작에서, 전자 장치(101)는, 충전 활성화를 스타일러스 펜(201)에 명령할 수 있다. 전자 장치(101)는, 수납 공간 코일을 통한 패턴을 가지는 신호의 송신, 또는 통신 모듈을 통한 통신 신호의 송신에 기반하여, 충전 활성화를 명령할 수 있다.
667 동작에서, 전자 장치(101)는, 충전 모드를 개시할 수 있다. 669 동작에서, 스타일러스 펜(201)은, 스타일러스 펜(201)의 삽입을 감지할 수 있다. 스타일러스 펜(201)은, 전자 장치(101)로부터 수신된 정보, 또는 스타일러스 펜(201)의 공진 회로(또는, 정류기 출력단)에 인가되는 전압의 크기에 기반하여 삽입 여부를 확인할 수 있다. 671 동작에서, 스타일러스 펜(201)은, 센서를 비활성화할 수 있다. 스타일러스 펜(201)은, 일부 센서를 비활성화할 수도 있으며, 또는 센서 비활성화를 생략하도록 설정될 수도 있다. 673 동작에서, 전자 장치(101) 및 스타일러스 펜(201)는, 충전 동작을 수행할 수 있다. 대안적으로, 673의 충전 동작은, 667의 충전 모드 개시 이후 바로 수행될 수도 있으며, 그 수행 시점에는 제한이 없다.
도 7은 일 실시예에 따른 스타일러스 펜의 전자 장치 탈거 시의 스타일러스 펜 및 전자 장치의 동작을 도시한다.
도 7을 참조하면, 701 동작에서, 스타일러스 펜(201)은, 전자 장치(101)의 수납 공간으로부터 탈거될 수 있다. 예를 들어, 사용자는, 전자 장치(101)의 수납 공간으로부터 스타일러스 펜(201)을 꺼낼 수 있다.
703 동작에서, 전자 장치(101)는, 스타일러스 펜(201)의 탈거를 감지할 수 있다. 예를 들어, 전자 장치(101)는, 수납 공간 코일(411,412)에서의 신호에 대한 응답 신호 미수신에 기반하여 스타일러스 펜(201)의 탈거를 감지할 수 있으나, 탈거 감지 방법에는 제한이 없다. 전자 장치(101)는, 홀 센서와 같은 검출 센서로부터의 센싱 데이터에 기반하여 스타일러스 펜(201)의 삽입/탈거를 확인하도록 설정될 수도 있다.
705 동작에서, 스타일러스 펜(201)은, 스타일러스 펜(201)의 탈거를 감지할 수 있다. 예를 들어, 스타일러스 펜(201)은, 정류기(431)의 출력단의 전압(VM)에 기반하여 전자 장치(101)로부터의 신호 미수신에 기반하여 스타일러스 펜(201)의 탈거를 감지할 수 있으나, 탈거 감지 방법에는 제한이 없다. 탈거가 감지된 경우, 스타일러스 펜(201)은 전자 장치(101)와 파라미터(예: 연결 인터벌(connection interval) 및/또는 슬레이브 레이튼시(slave latency))를 교환할 수도 있다.
스타일러스 펜(201)은, 707 동작에서, 탈거 감지에 기반하여, 가속도 센서를 활성화할 수 있으며, 스타일러스 펜(201)은, 활성화된 가속도 센서를 통하여, 709 동작에서, 스타일러스 펜(201)의 가속도 정보를 센싱할 수 있다.
스타일러스 펜(201)은, 센싱된 가속도 정보를 전자 장치(101)로 송신할 수 있다. 전자 장치(101)는, 수신한 가속도 정보에 기반하는 동작을 수행할 수 있다. 스타일러스 펜(201)은, 가속도 센서를 활성화하고, 상대적으로 높은 전력을 소모하는 자이로 센서는, 비활성화 상태를 유지하도록 설정될 수도 있다.
스타일러스 펜(201)은, 711 동작에서, 버튼의 입력을 확인할 수 있다. 버튼 입력이 확인되면, 스타일러스 펜(201)은, 713 동작에서, 자이로 센서를 활성화할 수 있다.
스타일러스 펜(201)은 활성화된 자이로 센서를 통하여, 715 동작에서, 회전 정보를 센싱할 수 있으며, 717 동작에서, 스타일러스 펜(201)은, 센싱 결과에 기반한 정보를 송신할 수 있다. 예를 들어, 스타일러스 펜(201)은, 가속도 센서 및/또는 자이로 센서를 통하여 획득한 센싱 정보를, 전자 장치(101)로 송신할 수 있다. 또는, 스타일러스 펜(201)은, 가속도 센서 및 자이로 센서를 통하여 획득한 센싱 정보에 기반하여, 스타일러스 펜(201)의 좌표(예: 2차원 좌표, 또는 3차원 좌표)를 확인할 수 있으며, 확인된 좌표를 전자 장치(101)로 송신할 수 있다. 또는, 스타일러스 펜(201)은, 가속도 센서 및 자이로 센서를 통하여 획득한 센싱 정보에 기반하여, 스타일러스 펜(201)의 좌표의 변위 정보를 확인할 수 있다. 스타일러스 펜(201)은, 확인된 변위 정보를 전자 장치(101)로 송신할 수 있다. 스타일러스 펜(201)은, 가속도 센서에 의하여 측정된 정보에 기반하여, 스타일러스 펜(201)의 초기 자세(orientation)을 추정할 수 있다. 스타일러스 펜(201)은 초기 자세를 이용하여 위치에 대한 정보를 보정할 수도 있다.
719 동작에서, 전자 장치(101)는, 수신한 정보에 기반하여 동작을 수행할 수 있다. 전자 장치(101)는, 센싱 정보를 수신한 경우에는, 센싱 정보에 기반한 스타일러스 펜(201)의 위치 정보를 확인하고, 위치 정보에 대응하는 제스처를 확인할 수 있다. 전자 장치(101)는, 확인된 제스처에 대응하는 동작을 수행할 수 있다. 전자 장치(101)는, 스타일러스 펜(201)의 위치 정보를 수신한 경우에는, 위치 정보에 대응하는 제스처를 확인하고, 제스처에 대응하는 동작을 수행할 수 있다. 예를 들어, 스타일러스 펜(201)은, 펜 버튼의 입력이 해제될 때까지 정보를 전자 장치(101)로 송신할 수 있다. 전자 장치(101)는, 버튼의 입력 해제가 검출되기 전까지 확인된 스타일러스 펜(201)의 위치 정보에 기반하여, 제스처를 확인할 수 있다. 버튼의 입력 해제가 검출되면, 스타일러스 펜(201)은 자이로 센서를 다시 비활성화시킬 수도 있다.
스타일러스 펜(201)은, 탈거 감지시 자이로 센서 및 가속도 센서를 모두 활성화시킬 수도 있다. 이 경우, 버튼 입력 이전의 스타일러스 펜(201)의 위치 정보는, 제스처 방향에 대한 보정에 이용될 수 있으며, 제스처 인식 정확도가 향상될 수 있다. 예를 들어, 전자 장치(101)는, 스타일러스 펜(201)의 초기 자세 정보를 확인하고, 이를 기준으로 한 변위를 이용하여 제스처를 인식할 수도 있다.
도 8은 다양한 실시예에 따른 전자 장치 및 스타일러스 펜 사이의 삽입/탈거 시의 동작들을 도시한다.
도 8을 참조하면, 스타일러스 펜(201)이 전자 장치(101)에 최초 수납된 경우(801), 스타일러스 펜(201) 및 전자 장치(101)는 통신 모듈의 초기화 및 통신 연결을 수행(803)할 수 있다.
동작 811에서, 전자 장치(101)의 수납 공간으로부터 스타일러스 펜(201)이 빠지는 경우, 전자 장치(101) 및 스타일러스 펜(201)은 제스처 모드(813), 에어 마우스 모드(815), BLE 모드(817), 또는 펜 모드(819) 중 어느 하나의 모드로 동작할 수 있다. 제스처 모드(813), 에어 마우스 모드(815), BLE 모드(817), 또는 펜 모드(819)는, 스타일러스 펜(201)으로부터의 통신 신호, 또는 스타일러스 펜(201)의 위치 중 적어도 하나를 처리하는 방식에 대한 것으로, 처리 방식으로 명명될 수도 있다. 예를 들어, 스타일러스 펜(201)이, 센싱 패널(예: 디지타이터 및/또는 터치 스크린 패널)의 인식 영역 이내(in-range)에 위치하는 경우, 전자 장치(101) 및 스타일러스 펜(201)은 펜 모드(819)로 동작할 수 있다. 예를 들어, 스타일러스 펜(201)이, 센싱 패널의 인식 영역 바깥(out-range)에 위치하는 경우, 전자 장치(101) 및 스타일러스 펜(201)은 제스처 모드(813), 에어 마우스 모드(815) 또는 BLE 모드 중 어느 하나로 동작할 수 있다. 각 모드에 대한 진입 조건 및 모드 별 동작에 대하여서는 후술하도록 한다.
스타일러스 펜(201)이, 동작 821에서, 전자 장치(101)로 탈거 이후에 재삽입되는 경우, 스타일러스 펜(201)은 센서를 비활성화하고 충전을 동작 823에서 수행할 수 있다. 스타일러스 펜(201)은, 최초 삽입 시에도 센서 비활성화 및 충전을 수행할 수도 있다.
도 9는 일 실시예에 따른 전자 장치의 동작 방법을 도시한다. 도 10은 일 실시예에 따른 스타일러스 펜 및 전자 장치 사이의 위치 관계를 도시한다.
도 9 및 도 10을 참조하면, 전자 장치(101)는, 901 동작에서, 스타일러스 펜(201)의 탈거를 확인할 수 있다.
903 동작에서, 전자 장치(101)는, 패널로부터의 신호에 기반하여 스타일러스 펜(201)이 검출되는지 여부를 확인할 수 있다. 예를 들어, 전자 장치(101)가 EMR 방식을 이용하는 경우, 전자 장치(101)는 센싱 패널(503)로부터 출력되는 수신 신호에 기반하여 스타일러스 펜(201)이 검출되는지 여부를 확인할 수 있다.
도 10을 참조하면, 스타일러스 펜(201)은 전자 장치(101)의 패널로부터 인식 범위(h)내에 위치할 수 있다. 센싱 패널(503)은, 제 1 기간 동안 송신 신호(1001)(예: 자기장)를 출력할 수 있다. 송신 신호(1001)에 의하여 스타일러스 펜(201) 내의 공진 회로에서 공진이 발생될 수 있으며, 공진에 의한 수신 신호(1002)가 발생될 수 있다. 센싱 패널(503)는, 제 2 기간 동안의 수신 신호(1002)에 기반하여 스타일러스 펜(201)의 위치를 확인할 수 있다. 전자 장치(101)는, 예를 들어 수신 신호(1002)의 세기가 임계 세기를 초과하는 경우, 스타일러스 펜(201)을 검출한 것으로 확인할 수 있다. 스타일러스 펜(201)이 전자 장치(101)의 패널로부터 인식 범위(h) 밖에 위치하는 경우, 스타일러스 펜(201)으로부터의 수신 신호가 발생하지 않거나, 또는 스타일러스 펜(201)의 수신 신호의 세기가 임계 세기 미만일 수 있다. 이 경우, 전자 장치(101)는 스타일러스 펜(201)을 검출하지 못한 것으로 확인할 수 있다. 대안적으로, 터치 패널을 이용하는 전자 장치(101)는, 터치 패널에서의 커패시턴스 변경의 크기가 임계 변경 크기 미만인 경우, 스타일러스 펜(201)을 검출하지 못한 것으로 확인할 수도 있다. 스타일러스 펜(201)은 송신 신호(1001)의 세기에 기반하여, 스타일러스 펜(201)이 인식 범위 내에 있는지 여부를 확인할 수도 있다. 상술한 바와 같이, 전자 장치(101)는 스타일러스 펜(201)과 제 1 통신 방식(예: EMR을 이용한 통신 방식)에 기반하여 통신을 수행할 수 있다. 제 1 통신 방식의 이용 시, 전자 장치(101)는 디지타이저와 같은 센싱 패널(503)을 이용하며, 스타일러스 펜(201)은 공진 코일을 이용할 수 있다. 전자 장치(101)는, 또한 제 2 통신 방식(예: BLE를 이용한 통신 방식)에 기반하여 스타일러스 펜(201)과 통신을 수행할 수도 있다.
도 9를 다시 참조하면, 동작 903에서, 스타일러스 펜(201)이 검출된 것으로 확인되면, 전자 장치(101)는 905 동작에서 패널로부터의 신호에 기반하여 스타일러스 펜(201)의 위치를 확인할 수 있다.
전자 장치(101)는, 907 동작에서 확인 결과에 기반하여 스타일러스 펜(201)의 위치에 대응하는 제 1 동작을 수행할 수 있다. 예를 들어, 전자 장치(101)는, 스타일러스 펜(201)의 위치에 대응하는 오브젝트에 설정된 기능을 수행하거나, 또는 스타일러스 펜(201)의 위치에 따라 드로잉 오브젝트를 표시할 수 있다. 전자 장치(101)는, 추가적으로 스타일러스 펜(201)의 버튼 눌림 여부를 확인할 수도 있다. 전자 장치(101)는, 스타일러스 펜(201)의 버튼의 눌림 여부에 더 기반하여 동작을 수행할 수도 있다. 전자 장치(101)는, 패널에서 확인되는 신호의 주파수 또는 통신 모듈을 통하여 수신된 정보에 기반하여, 스타일러스 펜(201)의 버튼의 눌림 여부를 확인할 수 있다.
도 10을 참조하면, 전자 장치(101)는, 인식 범위(h) 내에서 통신 신호에 포함된 정보에 기반하여 제스처가 확인되는 경우, 인식 범위(h) 밖에서의 통신 신호에 포함된 정보에 기반하여 제스처가 확인되는 경우와는 상이한 동작을 수행할 수도 있다. 예를 들어, 인식 범위(h)내의 스타일러스 펜(201)으로부터의 통신 신호에 의한 상측 스와이프 제스처가 확인되면, 전자 장치(101)는 업-스크롤을 수행할 수 있다. 인식 범위(h)밖의 스타일러스 펜(201)으로부터의 통신 신호에 의한 상측 스와이프 제스처가 확인되면, 전자 장치(101)는 확대 동작을 수행할 수 있다. 다만, 이는 예시적인 것이다. 전자 장치(101)는, 인식 범위(h) 내의 스타일러스 펜(201)으로부터의 통신 신호에 의한 제스처를 무시하도록 설정될 수도 있다.
도 9를 다시 참조하면, 903 동작에서 스타일러스 펜(201)이 검출되지 않은 것으로 확인되면, 전자 장치(101)는 909 동작에서 통신 신호에 기반하여 스타일러스 펜(201)의 위치에 대한 정보 및/또는 스타일러스 펜(201)의 버튼 눌림 여부를 나타내는 정보를 확인할 수 있다.
도 10을 다시 참조하면, 스타일러스 펜(201)이 인식 범위(h) 밖에 있는 경우, 스타일러스 펜(201)은 패널로부터의 송신 신호(1011)을 수신하지 못하며, 이에 따라 공진에 의한 수신 신호가 발생할 수 없다. 이에 따라, 스타일러스 펜(201)은 전자 장치(101)와 통신 신호(1012)를 송수신할 수 있다. 전자 장치(101)는, 통신 신호에 포함된 정보에 기반하여, 스타일러스 펜(201)의 위치에 대한 정보 및/또는 스타일러스 펜(201)의 버튼 눌림 여부를 확인할 수 있다.
911 동작에서, 전자 장치(101)는, 확인 결과에 대응하는 제 2 동작을 수행할 수 있다. 전자 장치(101)는, 적어도 하나의 통신 신호들에 포함된 정보에 기반하여 처리 모드를 확인할 수 있으며, 확인된 처리 모드에 따라 동작할 수 있다.
도 10을 다시 참조하면, 스타일러스 펜(201)이 인식 범위(h) 내에 위치하는 경우, 스타일러스 펜(201)은 전자 장치(101)의 센싱 패널(503)로부터의 송신 신호(1001)를 검출할 수 있다. 스타일러스 펜(201)은, 송신 신호(1001)가 검출되는 경우에는, 버튼의 눌림이 확인되어도, 확인된 버튼의 눌림을 나타내는 정보를 블루투스 컨트롤러(513)로 전달하지 않을 수 있다. 이에 따라, 버튼이 눌린 상태에서도, 스타일러스 펜(201)은 버튼의 눌림 여부를 나타내는 통신 신호를 전자 장치(101)로 송신하지 않을 수 있다.
스타일러스 펜(201)이 인식 범위(h) 바깥에 위치하는 경우, 스타일러스 펜(201)은 통신 신호(1012)를 전자 장치(101)와 송수신할 수 있다. 한편, 스타일러스 펜(201)은 통신 신호(1012)를 송수신하는 동안, 인식 범위(h) 내로 진입할 수도 있다. 이 경우, 스타일러스 펜(201)은 전자 장치(101)의 센싱 패널(503)로부터의 송신 신호(1001)를 검출할 수 있다. 스타일러스 펜(201)은, 통신 신호(1012)의 송신이 시작된 경우에는, 센싱 패널(503)로부터의 송신 신호(1001)가 검출된다 하더라도, 통신 신호(1012)의 송신을 유지할 수 있다.
도 11은 다양한 실시예에 따른 전자 장치의 동작 방법을 설명하기 위한 흐름도를 도시한다.
도 11을 참조하면, 전자 장치(101)는 1101 동작에서 스타일러스 펜(201)의 탈거를 확인할 수 있다. 1103 동작에서, 전자 장치(101)는, 패널로부터의 신호에 기반하여 스타일러스 펜(201)의 검출이 실패됨을 확인할 수 있다. 스타일러스 펜(201)은 전자 장치(101)의 패널로부터 인식 범위 밖에 있을 수 있다.
1105 동작에서, 전자 장치(101)는, 통신 신호에 기반하여 스타일러스 펜(201)의 위치에 대한 정보 및 스타일러스 펜(201)의 버튼 눌림 여부를 나타내는 정보를 확인할 수 있다.
1107 동작에서, 전자 장치(101)는, 확인 결과에 기반하여, 처리 모드를 확인할 수 있다.
예를 들어, 통신 신호에 포함된 정보에 기반하여 스타일러스 펜(201)의 움직임이 검출되지 않으면서, 1107 동작에서 스타일러스 펜(201)의 버튼(337)의 조작(눌림-릴리즈)이 확인되면, 전자 장치(101)는 처리 모드를 BLE 모드로 설정할 수 있다. 즉, 전자 장치(101)는 1109 동작에서 버튼 눌림 여부에 대응하는 동작을 수행할 수 있다.
1107 동작에서 통신 신호에 포함된 정보에 기반하여 스타일러스 펜(201)의 버튼(337)의 롱-프레스가 확인되면, 처리 모드를 에어 마우스 모드로 설정할 수 있다. 즉, 전자 장치(101)는 1111 동작에서 마우스 모드에 대응하는 동작을 수행할 수 있다.
1107 동작에서 통신 신호에 포함된 정보에 기반하여 스타일러스 펜(201)의 버튼(337)이 눌린 상태에서 스타일러스 펜(201)의 움직임이 검출되면, 전자 장치(101)는 처리 모드를 제스처 모드로 설정할 수 있다. 즉, 전자 장치(101)는 1113 동작에서 제스처에 매핑된 동작을 수행할 수 있다.
상술한 처리 모드의 설정 조건은 단순히 예시적인 것으로 제한은 없다.
도 12는 일 실시예에 따른 전자 장치 및 스타일러스 펜의 동작 방법을 도시한다.
도 12를 참조하면, 스타일러스 펜(201)은, 1201 동작에서, 버튼 눌림을 확인할 수 있다. 1203 동작에서, 스타일러스 펜(201)은 버튼 눌림 상태를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수 있다.
전자 장치(101)는, 1205 동작에서, 통신 신호에 기반하여, 버튼 눌림을 확인할 수 있다.
1207 동작, 1209 동작, 1211 동작에서, 스타일러스 펜(201)은 전자 장치(101)로 통신 신호를 송신할 수 있다. 버튼이 릴리즈되기 이전에는, 스타일러스 펜(201)은 버튼이 눌린 상태임을 나타내는 정보를 포함하는 통신 신호를 송신할 수 있다. 스타일러스 펜(201)은 버튼에 대한 정보가 포함되지 않은 통신 신호를 또한 송신할 수 있다.
대안적으로, 스타일러스 펜(201)은, 특정 이벤트가 발생되기 전에는 통신 신호를 송신하지 않도록 설정될 수도 있다. 이 경우에는 1207 동작, 1209 동작, 1211 동작은 생략될 수도 있다.
스타일러스 펜(201)은 1213 동작에서, 버튼의 릴리즈를 확인할 수 있다. 1215 동작에서, 스타일러스 펜(201)은 버튼 릴리즈 상태를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수 있다.
전자 장치(101)는 1217 동작에서 롱-프레스가 확인되는지 여부를 확인할 수 있다. 예를 들어, 전자 장치(101)는, 버튼 눌림 시점과 버튼 릴리즈 시점 사이의 시간이 임계 시간(예: 약 3초)을 초과하는지 여부에 기반하여 롱-프레스가 확인되는지 여부를 확인할 수도 있다. 아울러, 전자 장치(101)는, 버튼이 눌린 상태에서의 스타일러스 펜(201)의 정지 상태가 확인되거나, 또는 스타일러스 펜(201)의 움직임에 대응하는 제스처가 확인되지 않은 경우, 롱-프레스를 확인할 수 있다. 전자 장치(101)는, 1207 동작, 1209 동작, 1211 동작에서 수신한 통신 신호에 포함된 스타일러스 펜(201)의 위치에 대한 정보에 기반하여, 정지 상태 또는 제스처를 확인할 수 있다.
1217 동작에서 롱-프레스가 확인된 경우, 전자 장치(101)는 1219 동작에서 에어 마우스 모드를 확인할 수 있다. 하지만, 1217 동작에서 롱-프레스가 확인되지 않은 경우, 1221 동작에서, 전자 장치(101)는 BLE 모드를 확인할 수 있다. 스타일러스 펜(201)은, 버튼이 일정 시간 동안 눌린 상태를 유지하다가 릴리즈됨을 확인하고, 이에 기반하여 롱-프레스의 발생을 확인할 수 있다. 스타일러스 펜(201)은, 롱-프레스의 발생을 확인하면, 롱-프레스를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수도 있다. 전자 장치(101)는, 통신 신호에 포함된 정보가 롱-프레스를 나타내는 것을 확인하여, 에어 마우스 모드로 진입할 수도 있다. 롱-프레스를 확인하는 방식에는 제한이 없다.
아울러, 롱-프레스 검출은, 에어 마우스 모드의 진입 조건의 예시적인 것으로, 에어 마우스 모드의 진입 조건에는 제한이 없다. 스타일러스 펜(201)은, 롱-프레스, 숏-프레스, 또는 더블-프레스를 포함하는 버튼 눌림 정보를 전자 장치(101)로 송신할 수 있으며, 버튼 눌림 정보에는 제한이 없다.
도 13은 일 실시예에 따른 스타일러스 펜 및 전자 장치의 동작 방법을 도시한다.
도 13을 참조하면, 스타일러스 펜(201)은 1301 동작에서, 에어 마우스 모드를 확인할 수 있으며, 전자 장치(101)는 1303 동작에서 에어 마우스 모드를 확인할 수 있다. 상술한 바와 같이, 전자 장치(101)는, 롱-프레스 검출에 기반하여 에어 마우스 모드를 확인할 수 있다. 스타일러스 펜(201)은, 롱-프레스 검출에 기반하여 에어 마우스 모드를 확인하거나, 또는 전자 장치(101)로부터의 처리 모드에 대한 정보를 수신하여 에어 마우스 모드를 확인할 수 있다.
스타일러스 펜(201)은 1305 동작에서 스타일러스 펜(201)의 위치에 대한 정보를 송신할 수 있다.
1307 동작에서, 전자 장치(101)는 위치에 대한 정보에 기반하여, 포인터의 위치를 이동시킬 수 있다. 전자 장치(101)는, 지속적으로 스타일러스 펜(201)의 위치에 대한 정보를 수신할 수 있으며, 이에 따라 표시 중인 포인터의 위치를 연속하여 이동시킬 수 있다.
1309 동작에서, 스타일러스 펜(201)은 버튼의 눌림 상태를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수 있다. 1311 동작에서, 스타일러스 펜(201)은, 펜의 버튼의 릴리즈 상태를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수 있다. 1313 동작에서, 전자 장치(101)는 버튼의 눌림 및 릴리즈를 확인하여, 포인터 위치에 대한 클릭에 대응하는 동작을 수행할 수 있다. 사용자는 스타일러스 펜(201)의 버튼을 누른 상태에서 스타일러스 펜(201)을 이동시킬 수도 있다. 전자 장치(101)는, 버튼의 눌림 상태를 나타내는 정보를 수신한 이후, 스타일러스 펜(201)의 위치에 대한 정보에 기반하여 드래그 동작을 수행할 수도 있다.
1315 동작에서, 스타일러스 펜(201)은 에어 마우스 모드가 해제되는지 여부를 확인할 수 있다. 예를 들어, 전자 장치(101)는, UI(user interface)를 통한 사용자 입력(예: 해제 아이콘 클릭)에 기반하여 에어 마우스 모드를 종료할 수 있으며, 이를 스타일러스 펜(201)에 통지할 수 있다.
1315 동작에서 에어 마우스 모드가 해제되는 것을 확인하면, 스타일러스 펜(201)은 1317 동작에서, 에어 마우스 모드를 종료할 수 있다. 전자 장치(101)는 에어 마우스 종료를 확인할 수 있다. 예를 들어, 전자 장치(101)는 스타일러스 펜(201)으로부터 에어 마우스 종료를 나타내는 정보를 수신하거나, 또는 전자 장치(101)에 설정된 에어 마우스 종료 이벤트를 확인함으로써 에어 마우스 모드를 종료할 수 있다.
도 14a 및 14b는 다양한 실시예에 의한 에어 마우스 모드에서의 전자 장치의 동작을 도시한다.
도 14a를 참조하면, 에어 마우스 모드에서, 사용자는, 스타일러스 펜(201)의 버튼(337)을 누른 상태에서 좌에서 우측으로 이동시킬 수 있다. 전자 장치(101)는, 에어 마우스 모드에서, 버튼(337)의 눌림을 나타내는 정보를 포함하는 통신 신호를 수신할 수 있다. 이후, 전자 장치(101)는, 스타일러스 펜(201)의 위치에 대한 정보를 포함하는 복수 개의 통신 신호를 수신할 수 있다. 전자 장치(101)는, 수신된 위치에 대한 정보에 기반하여 포인터(1401)를 이동시킬 수 있다. 전자 장치(101)는, 버튼이 눌린 상태에서의 포인터 이동에 기반하여 드래그 제스처에 대응하는 드로잉 오브젝트(1403)를 표시할 수 있다. 전자 장치(101)는, 제스쳐 모드에서도 드래그 제스처에 대응하는 오브젝트(예: 제스쳐의 종류 또는 제스쳐 입력 궤적)를 표시할 수 있으며, 이에 따라 사용자는 표시되는 오브젝트를 확인함으로써 자신이 입력하는 제스쳐의 종류를 확인할 수 있다.
사용자가 스타일러스 펜(201)의 버튼(337)을 누르지 않은 상태에서 스타일러스 펜(201)을 이동시킨 경우, 전자 장치(101)는 위치에 대한 정보를 포함하는 복수 개의 통신 신호에 기반하여, 포인터(1401)를 이동시킬 수 있다.
도 14b를 참조하면, 전자 장치(101)는 도킹 스테이션(1420)에 연결될 수도 있으며, 도킹 스테이션(1420)을 통하여 외부 표시 장치(1410)에 연결될 수 있다. 다만, 도킹 스테이션(1420)을 통한 연결은 단순히 예시적이며, 전자 장치(101)는 중간 매개 장치 없이 직접적으로 외부 표시 장치(1410)로 연결될 수도 있다. 전자 장치(101)는, 표시되는 화면을 외부 표시 장치(1410)로 송출할 수 있다. 전자 장치(101)는, 드래그 제스처의 처리 결과의 화면을 구성하기 위한 데이터를 외부 표시 장치(1410)로 송출할 수 있다. 이에 따라, 외부 표시 장치(1410)는, 드래그 제스처에 따라서 포인터(1411)의 위치를 이동시킬 수 있다. 외부 표시 장치(1410)는, 처리 결과에 따라 이동한 포인터(1411) 및 드로잉 오브젝트(1413)를 포함하는 화면을 표시할 수 있다.
이에 따라, 에어 마우스 모드에서는, 전자 장치(101)는 스타일러스 펜(201)의 이동을 포인터 이동으로서 처리할 수 있으며, 스타일러스 펜(201)의 버튼의 눌림 및 릴리즈를 레거시 마우스 버튼의 눌림 및 릴리즈로서 처리할 수 있으나, 제한은 없다.
도 15a 및 15b는 다양한 실시예에 따른 에어 마우스 종료 과정을 도시한다.
도 15a를 참조하면, 1501 동작에서 스타일러스 펜(201)이 전자 장치(101)에 삽입될 수 있다. 전자 장치(101)는, 1503 동작에서 스타일러스 펜(201)의 삽입을 확인할 수 있으며, 1505 동작에서 스타일러스 펜(201)으로 충전 개시를 명령할 수 있다.
스타일러스 펜(201)은 1507 동작에서, 충전 개시를 확인하여 충전을 개시할 수 있다. 1509 동작에서, 스타일러스 펜(201)은 수납 공간 내의 위치함을 확인할 수 있다.
전자 장치(101)는 1511 동작에서 에어 마우스 모드 종료를 스타일러스 펜(201)에 명령할 수 있다. 전자 장치(101)는, 통신 모듈을 통하여 스타일러스 펜(201)에 에어 마우스 모드 종료를 나타내는 정보를 포함하는 통신 신호를 송신할 수 있다. 전자 장치(101)는, 또한, 수납 공간 코일에, 에어 마우스 모드 종료에 대응하는 패턴의 신호를 인가할 수도 있다.
1513 동작에서, 스타일러스 펜(201)은 에어 마우스 모드를 종료할 수 있다. 스타일러스 펜(201)은, 파라미터(예: 연결 인터벌 및/또는 슬레이브 레이튼시)를 변경하고, 이를 전자 장치(101)에 통지할 수 있다.
1515 동작에서, 스타일러스 펜(201) 및 전자 장치(101)는 파라미터 업데이트를 수행할 수 있다. 도 15a에서는, 전자 장치(101)가 에어 마우스 모드 종료를 스타일러스 펜(201)에 명령할 수 있다.
도 15b를 참조하면, 도 15b의 1521 동작, 1523 동작, 1525 동작, 1527 동작, 1529 동작, 1535 동작, 및 1537 동작에 대하여서는 도 15a의 1501, 1503, 1505, 1507, 1509 1511, 및 1515 동작과 동일하며, 도 15a를 참조하여 설명하였다. 그러므로 이 동작들의 더 이상의 설명은 생략하도록 한다.
1531 동작에서, 스타일러스 펜(201)은 수납 공간 내의 위치를 확인함에 기반하여, 에어 마우스 모드를 종료할 수 있다. 스타일러스 펜(201)은 일정 기간(예: 5초)을 대기한 이후에 에어 마우스 모드를 종료할 수도 있으나, 다른 구현 예에서는 대기 기간 없이 바로 에어 마우스 모드를 종료할 수도 있다.
스타일러스 펜(201)은, 에어 마우스 모드의 종료를 전자 장치(101)로 통지할 수도 있으며, 전자 장치(101)는 1533 동작에서 에어 마우스 모드를 종료할 수도 있다. 도 15b에서는, 스타일러스 펜(201)이 에어 마우스 모드 종료를 전자 장치(101)에 명령할 수도 있으며, 이 경우 다른 스타일러스 펜이 전자 장치(101)에 삽입되는 경우 에어 마우스 모드가 의도하지 않게 종료되는 것이 방지될 수도 있다.
도 16은 일 실시예에 따른 제스처 모드에서의 스타일러스 펜 및 전자 장치의 동작 방법을 도시한다.
도 16을 참조하면, 스타일러스 펜(201)은 1601 동작에서 버튼 눌림을 확인할 수 있다.
1603 동작에서, 스타일러스 펜(201)은 버튼 눌림 상태를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수 있다.
1605 동작에서, 전자 장치(101)는, 통신 신호에 기반하여, 버튼 눌림을 확인할 수 있다.
1607 동작, 1609 동작, 1611 동작에서, 스타일러스 펜(201)은 통신 신호들을 전자 장치(101)로 송신할 수 있다. 통신 신호들 각각에는 스타일러스 펜(201)의 위치에 대한 정보가 포함될 수 있다.
1613 동작에서, 전자 장치(101)는, 위치를 나타내는 정보에 기반하여 제스처를 확인할 수 있다. 예를 들어, 전자 장치(101)는, 위치를 나타내는 정보에 따른 좌표의 이동 궤적을 확인할 수 있으며, 이동 궤적에 대응되는 제스처를 확인할 수 있다. 도 16에서는, 전자 장치(101)가 버튼 릴리즈 이전에 제스처를 확인하는 것과 같이 도시되어 있지만, 이는 단순히 예시적인 것으로, 버튼 릴리즈가 확인되면 이 때 제스처를 확인하는 동작을 수행할 수도 있다.
1615 동작에서, 전자 장치(101)는, 제스처에 대응하는 동작을 수행할 수 있다. 전자 장치(101)는, 수신된 위치를 나타내는 정보에 기반하여 제스처가 확인되면 이를 트리거로 제스처에 대응하는 동작을 수행할 수 있다. 전자 장치(101)는 실시간으로 제스처의 검출 여부를 모니터링하다가 제스처가 검출되면, 이를 트리거로 하여 제스처에 대응하는 동작을 수행할 수도 있다. 버튼의 릴리즈가 트리거로 구현될 수도 있으며, 트리거의 종류에는 제한이 없다. 예를 들어, 전자 장치(101)는, 스타일러스 펜(201)의 정지가 확인되면, 정지 이전의 위치에 대한 정보에 기반하여 확인된 제스처에 대응하는 동작을 수행할 수 있다.
1617 동작에서, 스타일러스 펜(201)은, 버튼 릴리즈를 확인할 수 있다. 1619 동작에서, 스타일러스 펜(201)은 버튼 릴리즈 상태를 나타내는 정보를 포함하는 통신 신호를 전자 장치(101)로 송신할 수 있다. 1621 동작에서, 전자 장치(101)는 통신 신호에 포함된 정보에 기반하여 버튼 릴리즈를 확인할 수 있다. 예를 들어, 전자 장치(101)는, 버튼 릴리즈 확인에 기반하여 모드를 종료하도록 설정될 수도 있다. 상술한 바와 같이, 전자 장치(101)는 버튼 릴리즈를 제스처에 대응하는 동작 수행의 트리거로 설정할 수도 있다.
도 17은 일 실시예에 따른 제스처 모드를 도시한다.
도 17을 참조하면, 전자 장치(101)는, 버튼(337)이 눌러진 상태에서의 스타일러스 펜(201)의 이동에 따른 복수의 스타일러스 펜(201)의 위치에 대한 정보를 수신할 수 있다. 전자 장치(101)는, 후보 제스처로서 서클 제스처(circle gesture) 및 스와이프 제스처(swipe gesture)를 확인할 수 있으며, 최종적으로 스와이프 제스처를 선택할 수 있다. 전자 장치(101)는, 갤러리 어플리케이션에서 스와이프 제스처에 매핑된 기능이 갤러리 이미지 전환임을 확인할 수 있다. 이에 따라, 전자 장치(101)는 갤러리 어플리케이션의 실행 화면인 제 1 이미지(1701)를, 제 1 이미지(1701)의 적어도 일부와 제 2 이미지(1702)의 적어도 일부를 포함하는 화면으로 전환하여 표시할 수 있다. 전자 장치(101)는, 이후 제 2 이미지(1702)의 전체를 표시할 수 있으며, 이에 따라 이미지 전환이 수행될 수 있다.
전자 장치(101)는 어플리케이션별로, 제스처에 대응하는 동작을 매핑시켜 저장할 수 있다. 예를 들어, 하기의 표 1은 어플리케이션 별 제스처에 매핑된 기능을 나타낸다.
어플리케이션 상/하측 스와이프 제스처 좌/우측 스와이프 제스처 시계/반시계 방향 제스처
카메라 촬영 전: 전후 카메라 전환 촬영전: 모드 전환촬영중: N/A 후면 카메라 촬영 중:zoom in/out
갤러리 detail/detail view 확인 previous/next 사진 확인 즐겨찾기 추가/해제
노트 스크롤 업/다운 모드 탭 전환 핸드라이트 텍스트 변환/취소
인터넷 스크롤 업/다운 previous/next 화면 확인 새로 고침
뮤직 미설정 previous/next 트랙 볼륨 업/다운
비디오 미설정 previous/next 파일 볼륨 업/다운
오피스 프리젠테이션 시작 페이지 이동 특수 기능 실행/종료
표 1을 참조하면, 전자 장치(101)는, 하나의 어플리케이션(예: 카메라 어플리케이션)의 상태(state)(예: 촬영 전 상태 또는 촬영 중 상태)에 대하여, 제스처에 상이한 기능을 매핑할 수도 있다. 특정 어플리케이션(예: 뮤직 어플리케이션)에 대하여, 특정 제스처(예: 상/하측 스와이프 제스처)에 기능이 매핑되지 않을 수도 있다. 또는, 전자 장치(101)는, 어플리케이션에 제한되지 않는 글로벌 제스처에 대한 기능 또한 설정할 수도 있다.
도 18은 일 실시예에 따른 BLE 모드에서의 전자 장치의 동작을 도시한다.
도 18을 참조하면, 전자 장치(101)는 BLE 모드를 확인할 수 있다. 예를 들어, 전자 장치(101)는, 스타일러스 펜(201)으로부터 버튼(337)의 눌림을 나타내는 정보를 포함하는 통신 신호를 수신할 수 있다. 전자 장치(101)는, 버튼(337)의 눌림 상태에 대응하는 동작을 수행할 수 있다. 버튼(337)의 눌림이 확인되면, 전자 장치(101)는 포어 그라운드에서 실행 중인 어플리케이션에서, 버튼 눌림에 매핑된 동작(예: selfie 촬영)을 수행할 수 있다. 전자 장치(101)는, 프리뷰 이미지(1810)를 저장할 수 있다.
도 19는 일 실시예에 따른 스타일러스 펜의 동작 방법을 도시한다.
다양한 실시예에 따라서, 1901 동작에서, 스타일러스 펜(201)은, 스타일러스 펜(201)의 탈거를 확인할 수 있다. 예를 들어, 스타일러스 펜(201)은, 공진 회로에서 출력되는 신호의 패턴 및/또는 크기에 기반하여, 스타일러스 펜(201)의 탈거를 확인할 수 있다. 스타일러스 펜(201)은, 전자 장치(101)로부터의 통신 신호에 포함된 정보에 기반하여 스타일러스 펜(201)의 탈거를 확인할 수도 있다.
1903 동작에서, 스타일러스 펜(201)은, 복수 개의 센서들 중 일부를 활성화할 수 있다. 복수 개의 센서들 중 일부를 제외한 나머지는 비활성화 상태를 유지할 수 있다. 1905 동작에서, 스타일러스 펜(201)은, 활성화된 센서에 의하여 센싱된 데이터에 기반한 정보를 전자 장치(101)로 송신할 수 있다. 예를 들어, 스타일러스 펜(201)은 가속도 센서를 활성화하고, 가속도 센서에 의하여 센싱된 정보 또는 센싱된 정보로부터 획득된 정보를 전자 장치(101)로 송신할 수 있다. 전자 장치(101)는, 스타일러스 펜(201)의 가속도 센싱 정보에 기반하여 이차원 제스처를 확인하여 해당 제스처에 대응하는 동작을 수행할 수 있다. 전자 장치(101)는 다른 정보를 가속도 센싱 정보를 이용하여 보정하거나, 또는 다른 정보 및 가속도 센싱 정보를 함께 이용하여 확인된 동작을 수행할 수도 있다. 대안적으로, 스타일러스 펜(201)은 가속도 센서를 이용하여 획득된 정보를, 스타일러스 펜(201)의 자세를 확인하는데 이용하며, 전자 장치(101)로는 송신하지 않도록 설정될 수도 있다.
스타일러스 펜(201)은 1907 동작에서 스타일러스 펜(201)의 버튼이 눌린 지 여부를 확인할 수 있다. 1907 동작에서 스타일러스 펜(201)의 버튼이 눌린 것으로 확인되면, 스타일러스 펜(201)은 1909 동작에서, 비활성화 상태인 센서를 활성화할 수 있다. 예를 들어, 스타일러스 펜(201)은 비활성화 상태였던 나머지 센서(예: 자이로 센서)를 활성화시킬 수 있다.
1911 동작에서, 스타일러스 펜(201)은 복수 개의 센서들에 의하여 센싱된 데이터에 기반한 정보를 전자 장치(101)로 송신할 수 있다. 예를 들어, 스타일러스 펜(201)은, 자이로 센서에 의한 회전 정보 및 가속도 센서에 의한 리니어한 가속도 정보에 기반하여, 스타일러스 펜(201)의 변위에 대한 정보를 확인하여 전자 장치(101)로 송신할 수 있다. 자이로 센서가 활성화되기 이전에 획득되었던 가속도 정보는, 스타일러스 펜(201)의 초기 자세를 확인하는데 이용될 수 있으며, 스타일러스 펜(201)은 초기 자세를 기준으로 한 변위 정보를 확인할 수 있다. 변위 정보는, 2차원 또는 3차원으로 표현될 수 있으며, 변위 정보 이외에도 좌표 정보가 계산될 수도 있다.
1913 동작에서, 스타일러스 펜(201)은, 스타일러스 펜(201)의 버튼이 릴리즈되는지 여부를 확인할 수 있다. 1913 동작에서 버튼이 릴리즈된 것으로 확인되면, 스타일러스 펜(201)은 1915 동작에서 복수 개의 센서들 중 일부를 활성화하고, 나머지 센서를 비활성화할 수 있다.
대안적으로, 스타일러스 펜(201)은, 탈거가 확인되면 복수 개의 센서들 전체를 활성화하거나, 또는 버튼이 눌러짐이 확인되면 복수 개의 센서들 전체를 활성화하도록 설정될 수도 있으며, 센서 각각의 활성화 시점에는 제한이 없다. 상술한 바와 같이, 차등적으로 센서가 활성화됨에 따라서, 소모 전력이 감소될 수 있어, 스타일러스 펜(201)의 사용 시간이 증가할 수 있다.
스타일러스 펜(201)은, 상술한 바와 같이 버튼의 롱-프레스가 검출되면, 에어 마우스 모드로 진입할 수 있다. 스타일러스 펜(201)은 에어 마우스 모드로 진입한 경우에는, 버튼의 릴리즈가 검출된다 하더라도 복수 개의 센서들의 활성화를 유지할 수 있다. 스타일러스 펜(201)은, 활성화된 복수 개의 센서들을 이용한 위치에 대한 정보를 전자 장치(101)로 송신할 수 있다. 이후, 에어 마우스 모드가 종료되면, 스타일러스 펜(201)은 일부 센서들을 비활성화할 수 있다. 스타일러스 펜(201)은, 제스처 모드로 진입한 경우에는, 버튼의 릴리즈가 검출되면 일부 센서들을 비활성화할 수 있다.
스타일러스 펜(201)은 펜 모드에서는, 자이로 센서는 활성화하지 않을 수 있다. 이 경우, 버튼이 눌림이 확인되더라도 자이로 센서가 활성화되지 않을 수도 있다.
스타일러스 펜(201)은 적어도 하나의 센서의 캘리브레이션(calibration)을 수행할 수 있다. 스타일러스 펜(201)에 포함된 센서는, 환경변화(예: 외부충격, 온도, 습도)로 초래되는 오차를 개선하기 위해 주기적으로 또는 필요한 경우 보정될 수 있다. 스타일러스 펜(201)은, 자체적으로 캘리브레이션을 수행하거나, 또는 전자 장치(101)의 명령에 기반하여 캘리브레이션을 수행할 수 있다. 스타일러스 펜(201)은, 전자 장치(101)에 삽입된 이후, 지정된 주기(예: 4시간)마다 캘리브레이션을 수행할 수 있다.
대안적으로, 스타일러스 펜(201)은, 사용자 사용조건 아님이 확인되는 경우(예: 센서의 센싱 값 변화가 임계 값 이하), 캘리브레이션을 수행할 수 있다. 스타일러스 펜(201)은, 예를 들어 사용 조건이 아닌 경우에 확인되는 센싱 데이터를 오프셋(offset)으로 저장할 수 있다. 스타일러스 펜(201)은, 추후 센싱되는 센싱 데이터를 오프셋으로 보정함으로써 캘리브레이션을 수행할 수 있다. 스타일러스 펜(201)은, 새로운 오프셋을 확인하기 전까지 기존의 오프셋을 저장하였다가, 저장된 오프셋을 보정 과정에서 이용할 수도 있다.
본 개시의 제 1 예시는 전자 장치일 수 있으며, 여기에서, 전자 장치는, 스타일러스 펜의 위치를 확인하도록 설정된 패널, 상기 스타일러스 펜과 통신 신호를 송수신하도록 설정된 통신 모듈, 및 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출됨에 기반하여: 상기 패널에 의하여 확인된 상기 스타일러스 펜의 위치에 기반하여 제 1 동작을 수행하고, 상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 스타일러스 펜으로부터, 상기 통신 모듈을 통하여 수신된 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 확인하고, 상기 수신된 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나에 기반하여 제 2 동작을 수행하도록 설정될 수 있다.
제 2 예시는, 제 1 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 전자 장치는, 디스플레이를 포함하고, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 1 통신 신호에 기반하여, 제 1 처리 방식을 확인하고, 포인터를 표시하도록 상기 디스플레이를 제어하고, 상기 제 1 처리 방식에 기반하여, 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 2 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여, 상기 포인터의 위치를 변경하도록 설정될 수 있다.
제 3 예시는, 제 1 예시, 제 2 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 적어도 하나의 제 1 통신 신호에 기반하여 상기 스타일러스 펜의 버튼의 롱-프레스가 확인됨에 기반하여, 상기 제 1 처리 방식을 확인하도록 설정될 수 있다.
제 4 예시는, 제 1 예시 내지 제 3 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 제 1 처리 방식에 기반하여, 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 3 통신 신호에 기반하여, 마우스 클릭 기능에 매핑된 동작을 수행하도록 설정될 수 있다.
제 5 예시는, 제 1 예시 내지 제 4 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 제 1 처리 방식의 종료 이벤트가 확인되면 상기 제 1 처리 방식을 종료하고 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호를 상기 스타일러스 펜으로 송신하도록 상기 통신 모듈을 제어하거나, 또는, 상기 스타일러스 펜으로부터 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호가 상기 통신 모듈을 통하여 수신되면, 상기 제 1 처리 방식을 종료하도록 설정될 수 있다.
제 6 예시는, 제 1 예시 내지 제 5 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 4 통신 신호에 기반하여, 제 2 처리 방식을 확인하고, 상기 제 2 처리 방식에 기반하여, 상기 적어도 하나의 통신 신호 중 제 5 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여, 제스처를 확인하고, 상기 제스처에 매핑된 동작을 수행하도록 설정될 수 있다.
제 7 예시는, 제 1 예시 내지 제 6 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 제 2 처리 방식에 기반하여, 상기 제스처가 할당될 어플리케이션을 확인하고, 상기 확인된 어플리케이션에서 상기 제스처에 매핑된 동작을 수행하도록 설정될 수 있다.
제 8 예시는, 제 1 예시 내지 제 7 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 제 2 처리 방식에 기반하여, 상기 적어도 하나의 제 4 통신 신호에 기반하여 상기 스타일러스 펜의 버튼의 눌림을 확인하고, 상기 적어도 하나의 제 5 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여 상기 제스처를 확인하고, 상기 적어도 하나의 제 5 통신 신호를 수신한 이후에, 상기 통신 모듈을 통하여, 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 6 통신 신호를 수신하고, 상기 적어도 하나의 제 6 통신 신호에 기반하여 상기 스타일러스 펜의 상기 버튼의 릴리즈를 확인함에 기반하여, 상기 제 2 처리 방식을 종료하도록 설정될 수 있다.
제 9 예시는, 제 1 예시 내지 제 8 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 7 통신 신호에 포함된 상기 스타일러스 펜의 상기 버튼의 조작 정보에 대응하는 동작을 수행하도록 설정될 수 있다.
제 10 예시는, 제 1 예시 내지 제 9 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 적어도 하나의 프로세서는, 상기 패널에 의하여 상기 스타일러스 펜이 검출됨에 기반하여: 상기 패널에서 확인되는 상기 스타일러스 펜으로부터 발생된 수신 신호의 주파수에 기반하여, 상기 스타일러스 펜의 상기 버튼의 눌림 여부를 확인하고, 상기 스타일러스 펜의 위치 및 상기 스타일러스 펜의 상기 버튼의 눌림 여부에 기반하여 상기 제 1 동작을 수행하도록 설정될 수 있다.
본 개시의 제 11 예시는 스타일러스 펜일 수 있으며, 여기에서, 스타일러스 펜은, 버튼, 코일 및 적어도 하나의 커패시터를 포함하는 공진 회로, 상기 스타일러스 펜의 움직임, 상기 스타일러스 펜의 자세, 또는 상기 스타일러스 펜의 방향 중 적어도 하나를 센싱하도록 설정된 적어도 하나의 센서, 통신 모듈, 및 적어도 하나의 제어 회로를 포함하고, 상기 적어도 하나의 제어 회로는, 전자 장치의 패널로부터의 송신 신호가 확인되지 않음에 기반하여: 상기 버튼의 눌림 여부를 확인하고, 상기 버튼의 눌림에 기반하여, 상기 적어도 하나의 센서에 의하여 센싱된 데이터에 기반하여 상기 스타일러스 펜의 위치에 대한 정보를 확인하고, 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 포함하는 적어도 하나의 통신 신호를 송신하도록 상기 통신 모듈을 제어하도록 설정되고, 상기 전자 장치의 상기 패널로부터의 상기 송신 신호가 확인되는 경우에는, 상기 적어도 하나의 통신 신호가 송신되지 않을 수 있다.
제 12 예시는, 제 11 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 전자 장치의 상기 패널로부터의 상기 송신 신호가 확인되지 않고 상기 적어도 하나의 통신 신호의 적어도 일부가 송신된 이후에 상기 송신 신호가 확인됨에 기반하여, 상기 적어도 하나의 통신 신호의 다른 일부의 송신을 유지하도록 설정될 수 있다.
제 13 예시는, 제 11 예시, 제 12 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 전자 장치의 상기 패널로부터의 상기 송신 신호가 확인되는 경우에는, 상기 버튼의 눌림 여부에 대한 정보를 상기 통신 모듈로의 전달을 삼가하도록 설정될 수 있다.
제 14 예시는, 제 11 예시 내지 제 13 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 적어도 하나의 통신 신호의 제 1 처리 방식을 확인하고, 상기 제 1 처리 방식에 기반하여, 상기 제 1 처리 방식 확인 이후 상기 적어도 하나의 센서에 의하여 확인된 센싱 데이터에 기반하여 확인된 시계열적인 적어도 하나의 위치에 대한 정보를 송신하도록 상기 통신 모듈을 제어하도록 설정될 수 있다.
제 15 예시는, 제 11 예시 내지 제 14 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 버튼의 롱-프레스가 확인됨에 기반하여, 상기 제 1 처리 방식을 확인하도록 설정될 수 있다.
제 16 예시는, 제 11 예시 내지 제 15 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 제 1 처리 방식에 기반하여, 상기 제 1 처리 방식 확인 이후 상기 버튼의 눌림 또는 상기 버튼의 릴리즈 중 적어도 하나를 나타내는 정보를 포함하는 통신 신호를 송신하도록 상기 통신 모듈을 제어하도록 설정될 수 있다.
제 17 예시는, 제 11 예시 내지 제 16 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 제 1 처리 방식의 종료 이벤트가 확인되면 상기 제 1 처리 방식을 종료하고 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호를 상기 전자 장치로 송신하도록 상기 통신 모듈을 제어하거나, 또는, 상기 전자 장치로부터 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호가 상기 통신 모듈을 통하여 수신되면, 상기 제 1 처리 방식을 종료하도록 설정될 수 있다.
제 18 예시는, 제 11 예시 내지 제 17 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 제 1 처리 방식이 적용 중인 도중에 상기 적어도 하나의 센서를 모두 활성화하고, 상기 제 1 처리 방식이 적용되기 이전과, 상기 제 1 처리 방식이 종료된 이후에, 상기 적어도 하나의 센서 중 일부를 비활성화하도록 설정될 수 있다.
제 19 예시는, 제 11 예시 내지 제 18 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 스타일러스 펜으로부터의 통신 신호의 제 2 처리 방식을 확인하고, 상기 제 2 처리 방식에 기반하여, 상기 제 2 처리 방식의 종료 이벤트 검출 이전까지 상기 제 2 처리 방식 확인 이후 상기 적어도 하나의 센서에 의하여 확인된 센싱 데이터에 기반하여 확인된 시계열적인 적어도 하나의 위치에 대한 정보를 송신하도록 상기 통신 모듈을 제어하도록 설정될 수 있다.
제 20 예시는, 제 11 예시 내지 제 19 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 제어 회로는, 상기 버튼의 눌림이 확인됨에 기반하여 상기 제 2 처리 방식을 확인하고, 상기 버튼의 릴리즈가 확인됨에 기반하여 상기 제 2 처리 방식의 종료 이벤트를 검출하도록 설정될 수 있다.
본 개시의 제 21 예시는 전자 장치일 수 있으며, 여기에서, 전자 장치는, 스타일러스 펜의 위치를 확인하도록 설정된 센싱 수단(예: 센싱 패널(503)), 상기 스타일러스 펜과 통신 신호를 송수신하도록 설정된 통신 수단(예: 통신 모듈(190)), 및 처리 수단(예: 프로세서(120))를 포함하고, 상기 처리 수단(예: 프로세서(120))는, 상기 센싱 수단(예: 센싱 패널(503))에 의하여 상기 스타일러스 펜이 검출됨에 기반하여: 상기 센싱 수단(예: 센싱 패널(503))에 의하여 확인된 상기 스타일러스 펜의 위치에 기반하여 제 1 동작을 수행하고, 상기 센싱 수단(예: 센싱 패널(503))에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 스타일러스 펜으로부터, 상기 통신 수단(예: 통신 모듈(190))을 통하여 수신된 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 확인하고, 상기 수신된 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나에 기반하여 제 2 동작을 수행하도록 설정될 수 있다.
제 22 예시는, 제 21 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 전자 장치는, 표시 수단(예: 표시 장치(160))를 더 포함하고, 상기 처리 수단(예: 프로세서(120))는, 상기 센싱 수단(예: 센싱 패널(503))에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 1 통신 신호에 기반하여, 제 1 처리 방식을 확인하고, 포인터를 표시하도록 상기 표시 수단을 제어하고, 상기 제 1 처리 방식에 기반하여, 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 2 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여, 상기 포인터의 위치를 변경하도록 설정될 수 있다.
제 23 예시는, 제 21 예시, 제 22 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 적어도 하나의 제 1 통신 신호에 기반하여 상기 스타일러스 펜의 버튼의 롱-프레스가 확인됨에 기반하여, 상기 제 1 처리 방식을 확인하도록 설정될 수 있다.
제 24 예시는, 제 21 예시 내지 제 23 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 제 1 처리 방식에 기반하여, 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 3 통신 신호에 기반하여, 마우스 클릭 기능에 매핑된 동작을 수행하도록 설정될 수 있다.
제 25 예시는, 제 21 예시 내지 제 24 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 제 1 처리 방식의 종료 이벤트가 확인되면 상기 제 1 처리 방식을 종료하고 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호를 상기 스타일러스 펜으로 송신하도록 상기 통신 수단(예: 통신 모듈(190))을 제어하거나, 또는, 상기 스타일러스 펜으로부터 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호가 상기 통신 수단(예: 통신 모듈(190))을 통하여 수신되면, 상기 제 1 처리 방식을 종료하도록 설정될 수 있다.
제 26 예시는, 제 21 예시 내지 제 25 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 센싱 수단(예: 센싱 패널(503))에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 4 통신 신호에 기반하여, 제 2 처리 방식을 확인하고, 상기 제 2 처리 방식에 기반하여, 상기 적어도 하나의 통신 신호 중 제 5 적어도 하나의 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여, 제스처를 확인하고, 상기 제스처에 매핑된 동작을 수행하도록 설정될 수 있다.
제 27 예시는, 제 21 예시 내지 제 26 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 제 2 처리 방식에 기반하여, 상기 제스처가 할당될 어플리케이션을 확인하고, 상기 확인된 어플리케이션에서 상기 제스처에 매핑된 동작을 수행하도록 설정될 수 있다.
제 28 예시는, 제 21 예시 내지 제 27 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 제 2 처리 방식에 기반하여, 상기 적어도 하나의 제 4 통신 신호에 기반하여 상기 스타일러스 펜의 버튼의 눌림을 확인하고, 상기 적어도 하나의 제 5 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여 상기 제스처를 확인하고, 상기 적어도 하나의 제 5 통신 신호를 수신한 이후에, 상기 통신 수단(예: 통신 모듈(190))을 통하여, 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 6 통신 신호를 수신하고, 상기 적어도 하나의 제 6 통신 신호에 기반하여 상기 스타일러스 펜의 상기 버튼의 릴리즈를 확인함에 기반하여, 상기 제 2 처리 방식을 종료하도록 설정될 수 있다.
제 29 예시는, 제 21 예시 내지 제 28 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 센싱 수단(예: 센싱 패널(503))에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여: 상기 적어도 하나의 통신 신호 중 적어도 하나의 제 7 통신 신호에 포함된 상기 스타일러스 펜의 상기 버튼의 조작 정보에 대응하는 동작을 수행하도록 설정될 수 있다.
제 30 예시는, 제 21 예시 내지 제 29 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 전자 장치일 수 있으며, 여기에서, 상기 처리 수단(예: 프로세서(120))는, 상기 센싱 수단(예: 센싱 패널(503))에 의하여 상기 스타일러스 펜이 검출됨에 기반하여: 상기 센싱 수단(예: 센싱 패널(503))에서 확인되는 상기 스타일러스 펜으로부터 발생된 수신 신호의 주파수에 기반하여, 상기 스타일러스 펜의 상기 버튼의 눌림 여부를 확인하고, 상기 스타일러스 펜의 위치 및 상기 스타일러스 펜의 상기 버튼의 눌림 여부에 기반하여 상기 제 1 동작을 수행하도록 설정될 수 있다.
본 개시의 제 31 예시는 스타일러스 펜일 수 있으며, 여기에서, 스타일러스 펜은, 버튼, 코일 및 적어도 하나의 커패시터를 포함하는 공진 수단(예: 공진 회로(287)), 상기 스타일러스 펜의 움직임, 상기 스타일러스 펜의 자세, 또는 상기 스타일러스 펜의 방향 중 적어도 하나를 센싱하도록 설정된 적어도 하나의 센싱 수단(예: 센서(299)), 통신 수단(예: 통신 회로(290)), 및 적어도 하나의 처리 수단(예: 프로세서(220))를 포함하고, 상기 적어도 하나의 처리 수단(예: 프로세서(220))는, 전자 장치의 센싱 수단(예: 센싱 패널(503))로부터의 송신 신호가 확인되지 않음에 기반하여: 상기 버튼의 눌림 여부를 확인하고, 상기 버튼의 눌림에 기반하여, 상기 적어도 하나의 센싱 수단(예: 센서(299))에 의하여 센싱된 데이터에 기반하여 상기 스타일러스 펜의 위치에 대한 정보를 확인하고, 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 포함하는 적어도 하나의 통신 신호를 송신하도록 상기 통신 수단(예: 통신 회로(290))을 제어하도록 설정되고, 상기 전자 장치의 상기 센싱 수단(예: 센싱 패널(503))로부터의 상기 송신 신호가 확인되는 경우에는, 상기 적어도 하나의 통신 신호가 송신되지 않을 수 있다.
제 32 예시는, 제 31 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 전자 장치의 상기 센싱 수단(예: 센싱 패널(503))로부터의 상기 송신 신호가 확인되지 않고 상기 적어도 하나의 통신 신호의 적어도 일부가 송신된 이후에 상기 송신 신호가 확인됨에 기반하여, 상기 적어도 하나의 통신 신호의 다른 일부의 송신을 유지하도록 설정될 수 있다.
제 33 예시는, 제 31 예시, 제 32 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 전자 장치의 상기 센싱 수단(예: 센싱 패널(503))로부터의 상기 송신 신호가 확인되는 경우에는, 상기 버튼의 눌림 여부에 대한 정보를 상기 통신 수단(예: 통신 회로(290))로의 전달을 삼가하도록 설정될 수 있다.
제 34 예시는, 제 31 예시 내지 제 33 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 적어도 하나의 통신 신호의 제 1 처리 방식을 확인하고, 상기 제 1 처리 방식에 기반하여, 상기 제 1 처리 방식 확인 이후 상기 적어도 하나의 센싱 수단(예: 센서(299))에 의하여 확인된 센싱 데이터에 기반하여 확인된 시계열적인 적어도 하나의 위치에 대한 정보를 송신하도록 상기 통신 수단(예: 통신 회로(290))을 제어하도록 설정될 수 있다.
제 35 예시는, 제 31 예시 내지 제 34 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 버튼의 롱-프레스가 확인됨에 기반하여, 상기 제 1 처리 방식을 확인하도록 설정될 수 있다.
제 36 예시는, 제 31 예시 내지 제 35 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 제 1 처리 방식에 기반하여, 상기 제 1 처리 방식 확인 이후 상기 버튼의 눌림 또는 상기 버튼의 릴리즈 중 적어도 하나를 나타내는 정보를 포함하는 통신 신호를 송신하도록 상기 통신 수단(예: 통신 회로(290))을 제어하도록 설정될 수 있다.
제 37 예시는, 제 31 예시 내지 제 36 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 제 1 처리 방식의 종료 이벤트가 확인되면 상기 제 1 처리 방식을 종료하고 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호를 상기 전자 장치로 송신하도록 상기 통신 수단(예: 통신 회로(290))을 제어하거나, 또는, 상기 전자 장치로부터 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호가 상기 통신 수단(예: 통신 회로(290))을 통하여 수신되면, 상기 제 1 처리 방식을 종료하도록 설정될 수 있다.
제 38 예시는, 제 31 예시 내지 제 37 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 제 1 처리 방식이 적용 중인 도중에 상기 적어도 하나의 센싱 수단(예: 센서(299))를 모두 활성화하고, 상기 제 1 처리 방식이 적용되기 이전과, 상기 제 1 처리 방식이 종료된 이후에, 상기 적어도 하나의 센싱 수단(예: 센서(299)) 중 일부를 비활성화하도록 설정될 수 있다.
제 39 예시는, 제 31 예시 내지 제 38 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 스타일러스 펜으로부터의 통신 신호의 제 2 처리 방식을 확인하고, 상기 제 2 처리 방식에 기반하여, 상기 제 2 처리 방식의 종료 이벤트 검출 이전까지 상기 제 2 처리 방식 확인 이후 상기 적어도 하나의 센싱 수단(예: 센서(299))에 의하여 확인된 센싱 데이터에 기반하여 확인된 시계열적인 적어도 하나의 위치에 대한 정보를 송신하도록 상기 통신 수단(예: 통신 회로(290))을 제어하도록 설정될 수 있다.
제 40 예시는, 제 31 예시 내지 제 39 예시, 또는 여기에서 설명되는 어느 다른 예시와 연관되는 스타일러스 펜일 수 있으며, 여기에서, 상기 적어도 하나의 처리 수단(예: 프로세서(220))은, 상기 버튼의 눌림이 확인됨에 기반하여 상기 제 2 처리 방식을 확인하고, 상기 버튼의 릴리즈가 확인됨에 기반하여 상기 제 2 처리 방식의 종료 이벤트를 검출하도록 설정될 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 컴퓨터 장치, 휴대용 통신 장치 (예: 스마트폰), 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나",“A 또는 B 중 적어도 하나,”"A, B 또는 C," "A, B 및 C 중 적어도 하나,”및 “A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, “기능적으로” 또는 “통신적으로”라는 용어와 함께 또는 이런 용어 없이, “커플드” 또는 “커넥티드”라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 마스터 장치 또는 태스크 수행 장치) 의해 읽을 수 있는 저장 매체(storage medium)(예: 내장 메모리 또는 외장 메모리)에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어(예: 프로그램)로서 구현될 수 있다. 예를 들면, 기기(예: 마스터 장치 또는 태스크 수행 장치)의 프로세서는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체 는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, ‘비일시적’은 저장매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.
보호 범위는 첨부되는 독립 청구항에 의해 정의된다. 추가적인 특징들은 첨부되는 종속 청구항에 의하여 특정된다. 예시 구현들(Example implementations)은 임의의 청구항으로부터, 임의의 그리고 모든 순열(permutation)들로, 공동으로 그리고 개별적으로 취해진(taken) 하나 이상의 특징들을 포함함으로써 실현될 수 있다.
본 개시에서 기술된 예시들(examples)은, 첨부되는 독립 청구항들에 의해 특정된 하나 이상의 특징들에 대응하는 구성 요소들의 비제한적인 예시 구현들(example implementations)을 포함하며, 이들 특징들(또는 이들의 대응하는 구성 요소들)은, 개별적으로 또는 조합하여, 본 개시로부터 통상의 기술자에 의해 추론될 수 있는 하나 이상의 기술적 문제를 개선하는데 기여할 수 있다.
또한, 본 개시에서 기술되는 임의의 하나의 예시(example) 중 하나 이상의 선택된 구성 요소는, 본 개시에서 기술되는 다른 하나 이상의 예시(example)의 하나 이상의 선택된 구성 요소들과 조합될 수 있고, 또는 대안적으로 첨부되는 독립항의 특징들과 조합되어 추가적인 대체 예(example)를 형성할 수 있다.
추가적인 예시 구현들(example implementations)은, 본 개시에서 기술된 임의의 구현으로부터(of any herein described implementation), 임의의 그리고 모든 순열들로, 공동으로 그리고 개별적으로 취해진(taken) 하나 이상의 구성 요소들을 포함함으로써 실현될 수 있다. 또 다른 예시 구현들(example implementations)은, 첨부되는 청구항들의 하나 이상의 특징들을 본 개시에서 기술되는 임의의 예시 구현(example implementation) 중 선택된 하나 이상의 구성 요소들과 조합함으로써, 역시 실현될 수 있다.
그러한 추가적인 예시 구현들(example implementations)을 형성함에 있어서, 본 개시에서 기술되는 임의의 예시 구현(any example implementation) 중 일부 구성 요소들(some components)은 생략될 수 있다. 생략될 수 있는 하나 이상의 구성 요소들은, 통상의 기술자가 본 개시로부터 식별 가능한(discernible) 기술적 문제에 비추어 본 기술의 기능에 그렇게 필수적이지 않은 것이라고 직접적이고 명백하게 이해할 수 있는(would recognize) 구성 요소이다. 통상의 기술자는, 이러한 생략된 구성 요소들을 교체 또는 제거하더라도, 그 변경(change)을 보상하기 위하여 추가적인 대체 예(the further alternative example)의 다른 구성 요소들 또는 특징들을 수정(modification)할 필요가 없다는 점을 이해할 것이다(would recognize). 따라서, 추가적인 예시 구현들은(further example implementations), 본 기술에 따라서, 비록 그 특징들 및/또는 구성 요소들의 선택된 조합이 구체적으로 언급되지 않더라도, 본 개시 내에 포함될 수 있다.
본 개시에 기술된 임의의 예시 구현(any described example implementation)의 둘 이상의 물리적으로 별개의 구성 요소들은 대안적으로, 그 통합이 가능하다면 단일 구성 요소로 통합될 수도 있으며, 그렇게 형성된 단일한 구성 요소에 의해 동일한 기능이 수행된다면, 그 통합은 가능하다. 반대로, 본 개시에 기술된 임의의 예시 구현(any example implementation)의 단일한 구성 요소는, 대안적으로, 적절한 경우, 동일한 기능을 달성하는 둘 이상의 별개의 구성 요소들로 구현될 수도 있다.
본 개시가 특정 실시 예를 참조하여 도시되고 설명되었지만, 첨부 된 청구 범위 및 그 등가물에 의해 정의 된 바와 같이 본 개시의 사상 및 범위를 벗어나지 않으면 서 형태 및 세부 사항의 다양한 변경이 이루어질 수 있다는 것이 당업자에게 이해 될 것이다.

Claims (20)

  1. 전자 장치에 있어서,
    스타일러스 펜의 위치를 확인하도록 설정된 패널;
    상기 스타일러스 펜과 통신 신호를 송수신하도록 설정된 통신 모듈; 및
    적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는,
    상기 패널에 의하여 상기 스타일러스 펜이 검출됨에 기반하여:
    상기 패널에 의하여 확인된 상기 스타일러스 펜의 위치에 기반하여 제 1 동작을 수행하고,
    상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여:
    상기 스타일러스 펜으로부터, 상기 통신 모듈을 통하여 수신된 적어도 하나의 통신 신호로부터 상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 확인하고,
    상기 스타일러스 펜의 위치에 대한 정보 또는 상기 스타일러스 펜의 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나에 기반하여 제 2 동작을 수행하도록 설정된 전자 장치.
  2. 제 1 항에 있어서,
    디스플레이
    를 더 포함하고,
    상기 적어도 하나의 프로세서는,
    상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여:
    상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 수신한 적어도 하나의 제 1 통신 신호에 기반하여, 제 1 처리 방식을 확인하고, 포인터를 상기 디스플레이 상에 표시하고,
    상기 제 1 처리 방식에 기반하여, 상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 수신한 적어도 하나의 제 2 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여, 상기 포인터의 위치를 변경하도록 설정된 전자 장치.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 적어도 하나의 제 1 통신 신호에 기반하여 상기 스타일러스 펜의 버튼의 롱-프레스가 확인됨에 기반하여, 상기 제 1 처리 방식을 확인하도록 더 설정된 전자 장치.
  4. 제 1 항 내지 제 3 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 제 1 처리 방식에 기반하여, 상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 수신된 적어도 하나의 제 3 통신 신호에 기반하여, 마우스 클릭 기능에 매핑된 동작을 수행하도록 더 설정된 전자 장치.
  5. 제 1 항 내지 제 4 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 제 1 처리 방식의 종료 이벤트가 확인되면 상기 제 1 처리 방식을 종료하고 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호를 상기 스타일러스 펜으로 송신하도록 상기 통신 모듈을 제어하거나, 또는,
    상기 스타일러스 펜으로부터 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호가 상기 통신 모듈을 통하여 수신되면, 상기 제 1 처리 방식을 종료하도록 더 설정된 전자 장치.
  6. 제 1 항 내지 제 5 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여:
    상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 수신되는 적어도 하나의 제 4 통신 신호에 기반하여, 제 2 처리 방식을 확인하고,
    상기 제 2 처리 방식에 기반하여, 상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 수신되는 적어도 하나의 제 5 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여, 제스처를 확인하고,
    상기 제스처에 매핑된 동작을 수행하도록 더 설정된 전자 장치.
  7. 제 1 항 내지 제 6 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 제 2 처리 방식에 기반하여, 상기 제스처가 할당될 어플리케이션을 확인하고,
    상기 확인된 어플리케이션에서 상기 제스처에 매핑된 동작을 수행하도록 더 설정된 전자 장치.
  8. 제 1 항 내지 제 7 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 제 2 처리 방식에 기반하여, 상기 적어도 하나의 제 4 통신 신호에 기반하여 상기 스타일러스 펜의 버튼의 눌림을 확인하고,
    상기 적어도 하나의 제 5 통신 신호에 포함된 상기 스타일러스 펜의 위치에 대한 정보에 기반하여 상기 제스처를 확인하고,
    상기 적어도 하나의 제 5 통신 신호를 수신한 이후에, 상기 통신 모듈을 통하여, 상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 적어도 하나의 제 6 통신 신호를 수신하고,
    상기 적어도 하나의 제 6 통신 신호에 기반하여 상기 스타일러스 펜의 상기 버튼의 릴리즈를 확인함에 기반하여, 상기 제 2 처리 방식을 종료하도록 더 설정된 전자 장치.
  9. 제 1 항 내지 제 8 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 패널에 의하여 상기 스타일러스 펜이 검출되지 않음에 기반하여:
    상기 통신 모듈을 통하여 상기 스타일러스 펜으로부터 수신되는 적어도 하나의 제 7 통신 신호에 포함된 상기 스타일러스 펜의 상기 버튼의 조작 정보에 대응하는 동작을 수행하도록 더 설정된 전자 장치.
  10. 제 1 항 내지 제 9 항 중 어느 하나에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 패널에 의하여 상기 스타일러스 펜이 검출됨에 기반하여:
    상기 패널에서 확인되는 상기 스타일러스 펜으로부터 발생된 수신 신호의 주파수에 기반하여, 상기 스타일러스 펜의 상기 버튼의 눌림 여부를 확인하고,
    상기 스타일러스 펜의 위치 및 상기 스타일러스 펜의 상기 버튼의 눌림 여부에 기반하여 상기 제 1 동작을 수행하도록 더 설정된 전자 장치.
  11. 스타일러스 펜에 있어서,
    버튼;
    코일 및 적어도 하나의 커패시터를 포함하는 공진 회로;
    상기 스타일러스 펜의 움직임, 상기 스타일러스 펜의 자세, 또는 상기 스타일러스 펜의 방향 중 적어도 하나를 센싱하도록 설정된 적어도 하나의 센서;
    통신 모듈; 및
    적어도 하나의 제어 회로를 포함하고, 상기 적어도 하나의 제어 회로는,
    전자 장치의 패널로부터의 송신 신호가 확인되지 않음에 기반하여:
    상기 버튼의 눌림 여부를 확인하고,
    상기 버튼의 눌림에 기반하여, 상기 적어도 하나의 센서에 의하여 센싱된 데이터에 기반하여 상기 스타일러스 펜의 위치에 대한 정보를 확인하고,
    상기 스타일러스 펜의 위치에 대한 정보 또는 상기 버튼의 눌림 여부를 나타내는 정보 중 적어도 하나를 포함하는 적어도 하나의 통신 신호를 송신하도록 상기 통신 모듈을 제어하도록 설정되고,
    상기 전자 장치의 상기 패널로부터의 상기 송신 신호가 확인되는 경우에는, 상기 적어도 하나의 통신 신호가 송신되지 않는 스타일러스 펜.
  12. 제 11 항에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 전자 장치의 상기 패널로부터의 상기 송신 신호가 확인되지 않고 상기 적어도 하나의 통신 신호의 적어도 일부가 송신된 이후에 상기 송신 신호가 확인됨에 기반하여, 상기 적어도 하나의 통신 신호의 다른 일부의 송신을 유지하도록 설정되는 스타일러스 펜.
  13. 제 11 항 또는 제 12 항에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 전자 장치의 상기 패널로부터의 상기 송신 신호가 확인됨에 따라, 상기 버튼의 눌림 여부에 대한 정보를 상기 통신 모듈로의 전달을 삼가하도록 더 설정된 스타일러스 펜.
  14. 제 11 항 내지 제 13 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 적어도 하나의 통신 신호의 제 1 처리 방식을 확인하고,
    상기 제 1 처리 방식에 기반하여, 상기 제 1 처리 방식 확인 이후 상기 적어도 하나의 센서에 의하여 확인된 센싱 데이터에 기반하여 확인된 시계열적인 적어도 하나의 위치에 대한 정보를 송신하도록 상기 통신 모듈을 제어하도록 더 설정된 스타일러스 펜.
  15. 제 11 항 내지 제 14 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 버튼의 롱-프레스가 확인됨에 기반하여, 상기 제 1 처리 방식을 확인하도록 더 설정된 스타일러스 펜.
  16. 제 11 항 내지 제 15 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 제 1 처리 방식에 기반하여, 상기 제 1 처리 방식 확인 이후 상기 버튼의 눌림 또는 상기 버튼의 릴리즈 중 적어도 하나를 나타내는 정보를 포함하는 통신 신호를 송신하도록 상기 통신 모듈을 제어하도록 더 설정된 스타일러스 펜.
  17. 제 11 항 내지 제 16 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 제 1 처리 방식의 종료 이벤트가 확인되면 상기 제 1 처리 방식을 종료하고 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호를 상기 전자 장치로 송신하도록 상기 통신 모듈을 제어하거나, 또는,
    상기 전자 장치로부터 상기 제 1 처리 방식의 종료를 나타내는 정보를 포함하는 통신 신호가 상기 통신 모듈을 통하여 수신되면, 상기 제 1 처리 방식을 종료하도록 더 설정된 스타일러스 펜.
  18. 제 11 항 내지 제 17 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 제 1 처리 방식이 적용 중인 도중에 상기 적어도 하나의 센서를 모두 활성화하고,
    상기 제 1 처리 방식이 종료된 이후에, 상기 적어도 하나의 센서 중 일부를 비활성화하도록 더 설정된 스타일러스 펜.
  19. 제 11 항 내지 제 18 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 스타일러스 펜으로부터의 통신 신호의 제 2 처리 방식을 확인하고,
    상기 제 2 처리 방식에 기반하여, 상기 제 2 처리 방식의 종료 이벤트 검출 이전까지 상기 제 2 처리 방식 확인 이후 상기 적어도 하나의 센서에 의하여 확인된 센싱 데이터에 기반하여 확인된 시계열적인 적어도 하나의 위치에 대한 정보를 송신하도록 상기 통신 모듈을 제어하도록 더 설정된 스타일러스 펜.
  20. 제 11 항 내지 제 19 항 중 어느 하나에 있어서,
    상기 적어도 하나의 제어 회로는,
    상기 버튼의 눌림에 기반하여 상기 제 2 처리 방식을 확인하고, 상기 버튼의 릴리즈에 기반하여 상기 제 2 처리 방식의 종료 이벤트를 검출하도록 더 설정된 스타일러스 펜.
PCT/KR2020/010324 2019-08-06 2020-08-05 스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법 Ceased WO2021025457A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/978,123 US11874978B2 (en) 2019-08-06 2020-08-05 Electronic device for recognizing stylus pen and method of operating the same
EP20849884.0A EP3992761A4 (en) 2019-08-06 2020-08-05 ELECTRONIC DEVICE FOR RECOGNIZING PINS AND METHOD OF OPERATION THEREOF

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2019-0095799 2019-08-06
KR1020190095799A KR102732884B1 (ko) 2019-08-06 2019-08-06 스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법

Publications (1)

Publication Number Publication Date
WO2021025457A1 true WO2021025457A1 (ko) 2021-02-11

Family

ID=74503231

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/010324 Ceased WO2021025457A1 (ko) 2019-08-06 2020-08-05 스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법

Country Status (4)

Country Link
US (1) US11874978B2 (ko)
EP (1) EP3992761A4 (ko)
KR (1) KR102732884B1 (ko)
WO (1) WO2021025457A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022158866A1 (ko) * 2021-01-20 2022-07-28 삼성전자 주식회사 전자 장치 및 전자 장치의 전자 펜 포인터 표시 방법
CN114020385A (zh) * 2021-11-01 2022-02-08 联想(北京)有限公司 一种数据处理方法、装置及系统
CN116107469B (zh) * 2021-11-11 2025-01-03 荣耀终端有限公司 功能模式切换方法、电子设备及系统
WO2023146142A1 (ko) 2022-01-25 2023-08-03 삼성전자 주식회사 전자 장치 및 전자 펜 알림 및 연결 방법
KR102758468B1 (ko) * 2022-06-07 2025-01-22 주식회사 하이딥 입력 시스템
CN118051130B (zh) * 2022-06-28 2025-03-21 荣耀终端股份有限公司 演示控制的方法、装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001117685A (ja) * 1999-10-18 2001-04-27 Hitachi Information Systems Ltd ペン操作とマウス操作の切換え方法およびその方法を用いた情報機器
KR20140026966A (ko) * 2012-08-24 2014-03-06 삼성전자주식회사 펜 기능 운용 방법 및 시스템
KR20140096752A (ko) * 2013-01-29 2014-08-06 엘지전자 주식회사 이동 단말기 및 이동 단말기 제어방법
KR20140109062A (ko) * 2013-03-05 2014-09-15 주식회사 인프라웨어 제스쳐 인식 방법 및 장치
KR20150001957A (ko) * 2013-06-28 2015-01-07 삼성전자주식회사 펜 입력 처리 방법 및 상기 방법이 적용되는 장치

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060125375A (ko) 2005-06-02 2006-12-06 엘지전자 주식회사 마우스 기능을 구비한 스타일러스 펜과 그의 마우스 기능구현방법
US9329703B2 (en) 2011-06-22 2016-05-03 Apple Inc. Intelligent stylus
US8797301B2 (en) * 2012-02-15 2014-08-05 Cypress Semiconductor Corporation Active stylus to host data transmitting method
KR20140058006A (ko) 2012-11-05 2014-05-14 삼성전기주식회사 전자 펜 입력 시스템 및 그를 이용한 전자 펜 입력 방법
US8773405B1 (en) * 2013-01-10 2014-07-08 Cypress Semiconductor Corporation Stylus and related human interface devices with dynamic power control circuits
US9342162B2 (en) 2013-01-29 2016-05-17 Lg Electronics Inc. Mobile terminal and controlling method thereof
KR102081817B1 (ko) * 2013-07-01 2020-02-26 삼성전자주식회사 디지타이저 모드 전환 방법
KR102065409B1 (ko) * 2013-09-04 2020-01-13 엘지전자 주식회사 이동단말기 및 그 제어방법
CN104636010B (zh) * 2013-11-08 2018-07-10 禾瑞亚科技股份有限公司 发信器与其发信方法
KR102180236B1 (ko) 2014-02-20 2020-11-18 삼성전자 주식회사 전자 장치의 입력 처리 방법 및 장치
US9400570B2 (en) * 2014-11-14 2016-07-26 Apple Inc. Stylus with inertial sensor
US10042439B2 (en) * 2014-12-11 2018-08-07 Microsft Technology Licensing, LLC Interactive stylus and display device
KR102487046B1 (ko) * 2015-01-19 2023-01-11 가부시키가이샤 와코무 위치 지시기
US9639183B2 (en) * 2015-04-20 2017-05-02 Wacom Co., Ltd. System and method for bidirectional communication between stylus and stylus sensor controller
WO2018136057A1 (en) 2017-01-19 2018-07-26 Hewlett-Packard Development Company, L.P. Input pen gesture-based display control
US10719148B2 (en) * 2018-07-10 2020-07-21 Microsoft Technology Licensing, Llc Coupling a pen device to a companion device based on pen proximity
US11269428B2 (en) * 2018-09-09 2022-03-08 Microsoft Technology Licensing, Llc Changing a mode of operation of a computing device by a pen device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001117685A (ja) * 1999-10-18 2001-04-27 Hitachi Information Systems Ltd ペン操作とマウス操作の切換え方法およびその方法を用いた情報機器
KR20140026966A (ko) * 2012-08-24 2014-03-06 삼성전자주식회사 펜 기능 운용 방법 및 시스템
KR20140096752A (ko) * 2013-01-29 2014-08-06 엘지전자 주식회사 이동 단말기 및 이동 단말기 제어방법
KR20140109062A (ko) * 2013-03-05 2014-09-15 주식회사 인프라웨어 제스쳐 인식 방법 및 장치
KR20150001957A (ko) * 2013-06-28 2015-01-07 삼성전자주식회사 펜 입력 처리 방법 및 상기 방법이 적용되는 장치

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3992761A4 *

Also Published As

Publication number Publication date
KR102732884B1 (ko) 2024-11-25
US11874978B2 (en) 2024-01-16
US20220187930A1 (en) 2022-06-16
EP3992761A4 (en) 2022-08-24
KR20210017099A (ko) 2021-02-17
EP3992761A1 (en) 2022-05-04

Similar Documents

Publication Publication Date Title
WO2021020777A1 (en) Electronic device for identifying gesture performed by stylus pen and method for operating the same
WO2020045947A1 (en) Electronic device to control screen property based on distance between pen input device and electronic device and method of controlling same
WO2021085850A1 (en) Electronic device sharing peripheral device with external electronic device and method thereof
WO2021025336A1 (en) Apparatus and method for fast communication between master and slave
WO2020138729A1 (en) Electronic device for performing communication with pen input device with multiple input buttons and method of controlling same
WO2021201498A1 (en) Method and electronic device for providing notification based on distance of remote input device
WO2020013528A1 (ko) 플렉서블 디스플레이 및 이를 포함하는 전자 장치
WO2021020893A1 (ko) 스타일러스에 대한 보정을 수행하는 전자 장치 및 이의 동작 방법
EP3888009A1 (en) Electronic device including flexible printed circuit board laminated wireless charging coil and near field communication antenna pattern
WO2020076055A1 (en) Electronic device including pen input device and method of operating the same
WO2021020851A1 (en) Electronic device identifying gesture with stylus pen and method for operating the same
WO2021025500A1 (ko) 배터리를 포함하는 펜 입력 장치 및 그 동작 방법
WO2020032720A1 (en) Electronic device including button and method for operation in electronic device
WO2021025493A1 (ko) 스타일러스 펜 및 스타일러스 펜을 인식하는 전자 장치 및 그 동작 방법
WO2020171563A1 (en) Electronic device and method for controlling operation of display in same
WO2019245283A1 (ko) 안테나 구조물을 포함하는 전자 장치
WO2021187837A1 (ko) 원격 인터렉션 제어 방법 및 전자 장치
WO2021060839A1 (ko) 스타일러스 펜을 검출하는 전자 장치 및 그 동작 방법
WO2021201640A1 (ko) 스피커 모듈을 포함하는 전자 장치
WO2020027483A1 (en) Electronic device including digital pen
WO2020159308A1 (en) Electronic device and method for mapping function to button input
WO2020032524A1 (ko) 전자 장치와 연결된 스타일러스 펜과 연관된 정보를 출력하기 위한 장치 및 그에 관한 방법
WO2019027283A1 (en) ELECTRONIC APPARATUS COMPRISING A FORCE SENSOR AND METHOD FOR CONTROLLING ELECTRONIC APPARATUS THEREFOR
WO2024196117A1 (ko) 스타일러스 펜의 입력을 처리하는 전자 장치와 이의 동작 방법
WO2022154423A1 (ko) 전자 장치 및 전자 장치에서 스타일러스 펜의 입력을 처리하는 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20849884

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020849884

Country of ref document: EP

Effective date: 20220131

NENP Non-entry into the national phase

Ref country code: DE