WO2024063306A1 - 전자 장치 및 전자 장치의 제어 방법 - Google Patents

전자 장치 및 전자 장치의 제어 방법 Download PDF

Info

Publication number
WO2024063306A1
WO2024063306A1 PCT/KR2023/010958 KR2023010958W WO2024063306A1 WO 2024063306 A1 WO2024063306 A1 WO 2024063306A1 KR 2023010958 W KR2023010958 W KR 2023010958W WO 2024063306 A1 WO2024063306 A1 WO 2024063306A1
Authority
WO
WIPO (PCT)
Prior art keywords
external device
display
signal
received
input device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2023/010958
Other languages
English (en)
French (fr)
Inventor
한상진
권용환
이현지
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020220180607A external-priority patent/KR20240040590A/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to EP23868366.8A priority Critical patent/EP4576792A4/en
Publication of WO2024063306A1 publication Critical patent/WO2024063306A1/ko
Priority to US19/080,042 priority patent/US20250278234A1/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4432Powering on the client, e.g. bootstrap loading using setup parameters being stored locally or received from the server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability

Definitions

  • This disclosure relates to an electronic device and a method of controlling the electronic device, and more specifically, to an electronic device that can change an external device for providing content displayed on a display of the electronic device and a method of controlling the same.
  • various types of external devices for providing content are connected to electronic devices such as TVs or monitors to provide various content to users.
  • various external devices such as set-top boxes, PCs, game consoles, DVD players, external hard disks, etc. may be connected to electronic devices such as TVs or monitors.
  • various types of input devices related to external devices such as mice, PCs, electronic fans, game pads, and remote controls, are connected to and used in electronic devices.
  • the user must select which of the various external devices connected to the electronic device he/she wishes to receive content through, and also select which of the various input devices he/she wishes to use to perform user operations related to the content. This may cause user inconvenience.
  • the present disclosure is intended to overcome the limitations of the prior art as described above, and the purpose of the present disclosure is to provide, in particular, an external device for providing content displayed on the display of an electronic device based on the operation of an input device connected to the electronic device.
  • the purpose is to provide an electronic device that can change and a control method thereof.
  • an electronic device includes a display, at least one external device for providing content, and at least one input device for receiving user input.
  • a plurality of communication interfaces for connecting, a memory for storing mapping information indicating a mapping relationship between the at least one external device and the at least one input device, and the at least one input through a first communication interface among the plurality of communication interfaces.
  • a first external device corresponding to the first input device among the at least one external device is identified based on the mapping information, and a processor that receives an image signal from the first external device through a second communication interface among the plurality of communication interfaces and controls the display to display first content corresponding to the image signal.
  • the processor identifies whether the first external device is turned on, and when it is identified that the first external device is turned on, the first external device is connected to the first external device through a second communication interface among the plurality of communication interfaces. Receive an image signal from a device and, if the first external device is identified as being turned off, control the second communication interface to transmit a control signal to turn on the first external device to the first external device. And, when the first external device is turned on according to the control signal, the image signal can be received from the first external device through the second communication interface.
  • the processor executes a first application preset to correspond to the first external device among a plurality of applications provided by the electronic device,
  • the display can be controlled to display a screen corresponding to the first application.
  • the processor may control the display to display a screen corresponding to the first application.
  • the processor displays the second content. Control the display to stop and display a first user interface for selecting whether to display the first content, and stop displaying the second content through the first user interface and display the first content.
  • the display can be controlled to display the first content.
  • the processor identifies whether a signal according to the manipulation of the first input device is received again from the first input device within a preset first critical interval after the signal according to the manipulation of the first input device is received, and , when the signal according to the operation of the first input device is received again within the first critical section, the display is controlled to display the first content, and the signal according to the operation of the first input device is received again within the first threshold section. If the signal is not received again within the interval, the operation of the display can be maintained.
  • the processor transmits the received signal. Identify whether the received signal is an image signal, control the display to display second content corresponding to the received signal if the received signal is an image signal, and if the received signal is not an image signal, control the display to display second content corresponding to the received signal. Movement can be maintained.
  • mapping information may be obtained based on at least one of a user's settings and a history of receiving a signal from the at least one input device within a threshold time after receiving the signal from the at least one external device.
  • the processor transmits a control signal for turning off the power of at least one external device connected to the electronic device to each of the at least one external device.
  • At least one communication interface among the communication interfaces can be controlled.
  • the processor outputs a user input corresponding to a user input for turning off the electronic device from a second input device among the at least one input device through a fourth communication interface among the plurality of communication interfaces. 1
  • control the display to stop operation of the display, and control the fourth communication interface to maintain an activated state for the fourth communication interface while the operation of the display is stopped, While the operation of the display is stopped, if a second signal according to the operation of the second input device is received from the second input device through the fourth communication interface, the display can be controlled to display the first content. .
  • the processor receives the input signal from the second input device through the fourth communication interface according to the operation of the second input device.
  • a fifth communication interface among the plurality of communication interfaces is controlled to transmit the third signal to the fourth external device during a preset second critical period, and the fourth external device is transmitted within the second critical period.
  • a first image signal is received from the fourth external device through the fifth communication interface, and the display is controlled to display third content corresponding to the first image signal.
  • the display is controlled to display the first content, and after the second critical interval, the display is controlled through the fourth communication interface.
  • a fourth signal according to manipulation of the second input device is received from the second input device, the operation of the electronic device can be controlled based on the fourth signal.
  • the processor may control the display to display the first content while the third signal is transmitted to the fourth external device.
  • the processor Control the display to display a second user interface including an item for changing the sleep state of the device to an active state, and via the fourth communication interface based on a fifth signal received from the second input device.
  • a fifth communication interface among the plurality of communication interfaces is controlled to transmit the third signal to the fourth external device during a preset second critical period, and the fourth external device is controlled within the second critical period.
  • a first image signal is received from the fourth external device through the fifth communication interface, and the display is controlled to display third content corresponding to the first image signal. can do.
  • the processor controls the display to display the second user interface if the sleep state of the fourth external device does not change to the active state within the second critical interval, and the fourth external device displays the second user interface after the second critical interval.
  • a fourth signal according to manipulation of the second input device is received from the second input device through a communication interface, the operation of the electronic device can be controlled based on the fourth signal.
  • a method of controlling an electronic device includes controlling a first input device among at least one input device for receiving a user input.
  • a first input device corresponding to the first input device among the at least one external device is based on mapping information indicating a mapping relationship between the at least one external device for providing content and the at least one input device. 1 It includes identifying an external device, receiving an image signal from the first external device, and displaying first content corresponding to the image signal.
  • the method of controlling the electronic device includes identifying whether the first external device is turned on, and when it is determined that the first external device is turned on, receiving an image signal from the first external device. Step, when it is identified that the power of the first external device is turned off, transmitting a control signal to turn on the first external device to the first external device, and turning the first external device on according to the control signal.
  • the method may further include receiving the image signal from the first external device.
  • control method of the electronic device is such that, if the first external device is not turned on according to the control signal, a first application preset to correspond to the first external device among a plurality of applications provided by the electronic device is used.
  • the method may further include executing and displaying a screen corresponding to the first application.
  • the method of controlling the electronic device may further include displaying a screen corresponding to the first application when the first external device is identified as not connected to the electronic device.
  • control method of the electronic device is such that when a signal according to manipulation of the first input device is received while second content provided from a second external device among the at least one external device is displayed, the second content is displayed. stopping and displaying a first user interface for selecting whether to display the first content; and stopping displaying the second content and selecting to display the first content through the first user interface.
  • displaying the first content may be included.
  • the control method of the electronic device determines whether a signal according to the operation of the first input device is received again from the first input device within a preset critical interval after the signal according to the operation of the first input device is received. identifying, if the signal according to the operation of the first input device is received again within the critical section, displaying the first content, and if the signal according to the operation of the first input device is not received again within the critical section Otherwise, the method may further include maintaining the operation of the display included in the electronic device.
  • control method of the electronic device includes, when a signal is received from a third external device among the at least one external device while the first content is displayed on the display, identifying whether the received signal is an image signal. If the received signal is an image signal, displaying second content corresponding to the received signal, and if the received signal is not an image signal, maintaining the operation of the display included in the electronic device. More may be included.
  • mapping information may be obtained based on at least one of a user's settings and a history of receiving a signal from the at least one input device within a threshold time after receiving the signal from the at least one external device.
  • control method of the electronic device includes, when a user input for turning off the electronic device is received, a control signal for turning off the power of at least one external device connected to the electronic device to each of the at least one external device. Additional steps may be included.
  • the control method of the electronic device includes user input.
  • a signal according to manipulation of the first input device is received from a first input device among the at least one input device for receiving, a mapping relationship between the at least one external device for providing content and the at least one input device is established. Identifying a first external device corresponding to the first input device among the at least one external device based on the mapping information indicated, receiving an image signal from the first external device, and It may include displaying first content.
  • FIG. 1 is a diagram showing an electronic device, an external device, and an input device according to an embodiment of the present disclosure
  • FIG. 2 is a block diagram briefly showing the configuration of an electronic device according to an embodiment of the present disclosure
  • FIG. 3 is a flowchart illustrating various embodiments according to the connection state between an electronic device and an external device and the power state of the external device according to the present disclosure
  • FIG. 4 is a flowchart illustrating an embodiment related to receiving a user input regarding whether to display content through a first user interface according to the present disclosure
  • 5 to 8 are diagrams illustrating first user interfaces according to various embodiments of the present disclosure.
  • FIG. 9 is a flowchart for explaining an embodiment related to identifying whether an input device has been malfunctioned according to the present disclosure.
  • FIG. 10 is a flowchart illustrating an embodiment related to identifying the type of signal received from an external device according to the present disclosure
  • 11 is a flowchart illustrating an embodiment related to maintaining an activated state of an electronic device
  • FIG. 12 is a flowchart illustrating an embodiment related to a case where the fourth external device operates in a sleep state
  • FIG. 13 is a flowchart for explaining an embodiment related to providing a second user interface
  • FIG. 14 is a diagram illustrating a second user interface according to an embodiment of the present disclosure.
  • 15 is a block diagram illustrating in detail the configuration of an electronic device according to an embodiment of the present disclosure.
  • Figure 16 is a flowchart showing a control method of an electronic device according to an embodiment of the present disclosure.
  • expressions such as “have,” “may have,” “includes,” or “may include” refer to the presence of the corresponding feature (e.g., component such as numerical value, function, operation, or part). , and does not rule out the existence of additional features.
  • expressions such as “A or B,” “at least one of A or/and B,” or “one or more of A or/and B” may include all possible combinations of the items listed together.
  • “A or B,” “at least one of A and B,” or “at least one of A or B” includes (1) at least one A, (2) at least one B, or (3) it may refer to all cases including both at least one A and at least one B.
  • a component e.g., a first component
  • another component e.g., a second component
  • any component may be directly connected to the other component or may be connected through another component (e.g., a third component).
  • a component e.g., a first component
  • another component e.g., a second component
  • no other component e.g., a third component
  • the expression “configured to” used in the present disclosure may mean, for example, “suitable for,” “having the capacity to,” depending on the situation. ,” can be used interchangeably with “designed to,” “adapted to,” “made to,” or “capable of.”
  • the term “configured (or set to)” may not necessarily mean “specifically designed to” in hardware.
  • the expression “a device configured to” may mean that the device is “capable of” working with other devices or components.
  • the phrase "processor configured (or set) to perform A, B, and C" refers to a processor dedicated to performing the operations (e.g., an embedded processor), or by executing one or more software programs stored on a memory device.
  • a 'module' or 'unit' performs at least one function or operation, and may be implemented as hardware or software, or as a combination of hardware and software. Additionally, a plurality of 'modules' or a plurality of 'units' may be integrated into at least one module and implemented with at least one processor, except for 'modules' or 'units' that need to be implemented with specific hardware.
  • FIG. 1 is a diagram illustrating an electronic device 100, an external device 200, and an input device 300 according to an embodiment of the present disclosure.
  • a system for implementing various embodiments according to the present disclosure may include an electronic device 100, an external device 200, and an input device 300.
  • an electronic device 100 may include an electronic device 100, an external device 200, and an input device 300.
  • two external devices 200 and three input devices 300 are shown to indicate various types of external devices 200 and input devices 300 according to the present disclosure, but the electronic device 100 There may be one or more external devices 200 connected, and there may be one or more input devices 300 connected to the electronic device 100.
  • the 'electronic device 100' refers to a device that can display images or content on the display 110. Additionally, the electronic device 100 can transmit and receive various signals and information through communication connections with the external device 200 and the input device 300. In particular, the electronic device 100 can display content received from the external device 200 on the display 110 and receive a signal corresponding to the user input input to the input device 300.
  • a TV is shown as an example of the electronic device 100, but other devices, such as a monitor, laptop, or tablet PC, can display images or content, and include an external device 200 and an input device 300. Any device capable of communication connection with may correspond to the electronic device 100 according to the present disclosure without limitation in type.
  • 'content' is used as a general term for all types of images that can be displayed on the display 110 of the electronic device 100.
  • content may include photos, video content, a screen mirrored from the external device 200, a screen provided by the operating system or application of the electronic device 100, etc.
  • the 'external device 200' refers to a device that can provide content. Specifically, the external device 200 may transmit an image signal corresponding to content to the electronic device 100 through a communication connection with the electronic device 100.
  • the external device 200 may also be referred to as a 'source device' in the sense that it is a device that provides a source of content.
  • a PC 200-1 and a console game machine 200-2 are shown as examples of the external device 200, but other devices that can provide content such as a set-top box, a smartphone, etc. If so, it may correspond to the external device 200 according to the present disclosure.
  • the 'input device 300' refers to a device capable of receiving user input. Specifically, when a user input is received as the user operates the input device 300, a signal corresponding to the received user input may be transmitted to the electronic device 100.
  • the input device 300 may be referred to as a 'controller' in the sense that it is a device for user manipulation. For example, in Figure 1, a mouse 300-1, a keyboard 300-2, and a game pad 300-3 are shown as examples of the input device 300, but other devices capable of receiving user input are also used. If so, it may correspond to the input device 300 according to the present disclosure.
  • the external devices 200 and the input devices 300 are shown as connected to the electronic device 100 by wire, but this is only an example and the external devices 200 and the input devices 300 Of course, at least one of them may perform a wireless communication connection with the electronic device 100.
  • FIG. 2 is a block diagram briefly illustrating the configuration of an electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 may include a display 110, a plurality of communication interfaces 120, a memory 130, and a processor 140.
  • the display 110 may output an image under the control of the processor 140. Specifically, the display 110 may output content according to the present disclosure based on image data stored in the memory 130, image signals received from the external device 200, etc. Additionally, the display 110 may display a user interface (UI).
  • UI user interface
  • the display 110 may be implemented as a Liquid Crystal Display Panel (LCD), Organic Light Emitting Diodes (OLED), etc., and in some cases, the display 110 may also be implemented as a flexible display, a transparent display, etc.
  • the display 110 according to the present disclosure is not limited to a specific type.
  • the plurality of communication interfaces 120 include circuits and can perform communication with the external device 200.
  • the processor 140 may receive various data or information from the external device 200 or the input device 300 connected through the communication interface 120, and may transmit various data or information to the external device 200. It may be possible.
  • the communication interface 120 according to the present disclosure may be implemented in plural numbers. Some of the plurality of communication interfaces 120 may be used for communication with the external device 200, and some may be used for communication with the input device 300. can be used for
  • the communication interface 120 may include at least one of a WiFi module, a Bluetooth module, a wireless communication module, an NFC module, a High-Definition Multimedia Interface (HDMI) module, a Universal Serial Bus (USB) module, and a UWB module (Ultra Wide Band). You can.
  • the WiFi module and the Bluetooth module can each communicate using WiFi and Bluetooth methods.
  • various connection information such as SSID is first transmitted and received, and various information can be transmitted and received after establishing a communication connection using this.
  • the HDMI module is one of the uncompressed digital video/audio interface standards and can provide an interface between the electronic device 100 and an external device 200 that provides content.
  • the USB module can provide a communication system between the electronic device 100 and an external device 200 that provides content using a predefined input/output standard protocol.
  • the communication interface 120 can be implemented with various modules to provide video/audio data input and output between the electronic device 100 and the external device 200.
  • the wireless communication module can perform communication according to various communication standards such as IEEE, Zigbee, 3rd Generation (3G), 3rd Generation Partnership Project (3GPP), Long Term Evolution (LTE), and 5th Generation (5G).
  • the NFC module can perform communication using the NFC (Near Field Communication) method using the 13.56MHz band among various RF-ID frequency bands such as 135kHz, 13.56MHz, 433MHz, 860 ⁇ 960MHz, 2.45GHz, etc.
  • the UWB module can accurately measure ToA (Time of Arrival), which is the time for a pulse to reach the target, and AoA (Ange of Arrival), which is the angle of arrival of the pulse at the transmitter, and can thus accurately measure indoor Precise distance and position recognition is possible within an error range of several tens of centimeters.
  • ToA Time of Arrival
  • AoA Ange of Arrival
  • the processor 140 may receive a signal according to the operation of the input device 300 from the input device 300 through the communication interface 120. Additionally, the processor 140 may receive an image signal from the external device 200 through the communication interface 120. In addition, when the communication interface 120 is implemented to transmit a control signal to the external device 200 or the input device 300, such as HDMI CEC (Consumer Electronics Control), the processor 140 is configured to transmit a control signal to the external device 200 or the input device 300. A control signal for turning on the power of the input device 300 or a control signal for turning off the external device 200 or the input device 300 may be transmitted.
  • a control signal for turning on the power of the input device 300 or a control signal for turning off the external device 200 or the input device 300 may be transmitted.
  • At least one instruction regarding the electronic device 100 may be stored in the memory 130 .
  • an operating system (O/S) for driving the electronic device 100 may be stored in the memory 130.
  • the memory 130 may store various software programs or applications for operating the electronic device 100 according to various embodiments of the present disclosure.
  • the memory 130 may include a semiconductor memory such as flash memory or a magnetic storage medium such as a hard disk.
  • the memory 130 may store various software modules for operating the electronic device 100 according to various embodiments of the present disclosure, and the processor 140 executes various software modules stored in the memory 130.
  • the operation of the electronic device 100 can be controlled. That is, the memory 130 is accessed by the processor 140, and reading/writing/modifying/deleting/updating data by the processor 140 can be performed.
  • the term memory 130 refers to the memory 130, a ROM (not shown) within the processor 140, a RAM (not shown), or a memory card (not shown) mounted on the electronic device 100 (e.g. For example, it can be used to mean including micro SD card, memory stick).
  • the memory 130 includes mapping information indicating a mapping relationship between at least one external device 200 and at least one input device 300, and user information on which the mapping information is based.
  • Information about the settings, information about the signal reception history from the input device 300 that is the basis of the mapping information, etc. may be stored.
  • the memory 130 may store image signals received from the external device 200, information on a plurality of applications, information on the user interface, etc.
  • various information necessary within the scope of achieving the purpose of the present disclosure may be stored in the memory 130, and the information stored in the memory 130 is updated as it is received from the external device 200 or input by the user. It could be.
  • the processor 140 controls the overall operation of the electronic device 100. Specifically, the processor 140 is connected to the configuration of the electronic device 100 including the display 110, the communication interface 120, and the memory 130, and at least one memory 130 stored in the memory 130 as described above. By executing instructions, the overall operation of the electronic device 100 can be controlled.
  • Processor 140 may be implemented in various ways.
  • the processor 140 may include an application specific integrated circuit (ASIC), an embedded processor, a microprocessor, hardware control logic, a hardware finite state machine (FSM), and a digital signal processor.
  • ASIC application specific integrated circuit
  • FSM hardware finite state machine
  • DSP digital signal processor.
  • processor 140 may be used to include a Central Processing Unit (CPU), a Graphic Processing Unit (GPU), and a Micro Processor Unit (MPU).
  • CPU Central Processing Unit
  • GPU Graphic Processing Unit
  • MPU Micro Processor Unit
  • the processor 140 detects the user's manipulation of the input device 300 and displays content provided from the external device 200 corresponding to the input device 300.
  • the display 110 can be controlled to do so.
  • the processor 140 receives the first input device 300 from the first input device 300 among the at least one input device 300 through the first communication interface 120 of the plurality of communication interfaces 120. Signals according to operation can be received.
  • the first input device 300 refers to one input device 300 among at least one input device 300 that has a history of being connected to the electronic device 100, for example, a mouse connected to the electronic device 100. , it can be a keyboard or gamepad.
  • the first communication interface 120 refers to a communication interface 120 that connects the electronic device 100 and the first input device 300, and may be, for example, a Bluetooth module or a USB module.
  • 'manipulation' of the input device 300 refers to the act of the user pressing a key, physical button, or soft button included in the input device 300, the act of the user moving the input device 300, etc. , is used as a general term to refer to the user's actions for inputting user input through the input device 300.
  • the processor 140 selects a first external device corresponding to the first input device 300 among the at least one external device 200 based on the mapping information ( 200) can be identified.
  • mapping information' refers to information indicating a mapping relationship between at least one external device 200 and at least one input device 300.
  • mapping information may be obtained based on at least one of the user's settings and the history of receiving a signal from at least one input device 300 within a threshold time after receiving a signal from at least one external device 200. there is.
  • the mapping information can be predefined by the developer in consideration of various types of external devices 200 and various types of input devices 300, and the predefined mapping information can be updated or changed by the user's settings. .
  • mapping information may be obtained based on the user's settings and stored in the memory 130.
  • the processor 140 may control the display 110 to output a user interface including a list representing at least one external device 200 or a list representing at least one input device 300, and the user A user input for selecting the external device 200 corresponding to the input device 300 may be received through the interface.
  • the processor 140 may generate information about the input device 300 and the corresponding external device 200 as mapping information based on the user input, and store the generated mapping information in the memory 130 .
  • the processor 140 may provide a user interface that displays a list of external devices 200 including PCs, game consoles, and set-top boxes. Additionally, the processor 140 may receive a user input for selecting that the external device 200 corresponding to the mouse is a PC through the user interface. In this case, the processor 140 may generate mapping information indicating that the mouse and the PC correspond to (or map to) each other, and store the generated mapping information in the memory 130.
  • the mapping information is obtained based on the history of receiving a signal from at least one input device 300 within a threshold time after receiving a signal from at least one external device 200 and stored in the memory 130. It can be saved. For example, if a signal is received from the game pad within 10 seconds after receiving the signal from the console game machine, which is the external device 200, the processor 140 generates mapping information indicating that the console game machine and the game pad correspond to each other, , the generated mapping information can be stored in the memory 130.
  • the processor 140 sends a signal according to the user's operation to the electronic device among the at least one external device 200 based on the mapping information stored in the memory 130.
  • the first external device 200 corresponding to the first input device 300 transmitted to 100 can be identified.
  • the processor 140 connects the first external device 200 through the second communication interface 120 of the plurality of communication interfaces 120. Image signals can be received from.
  • the second external device 200 refers to one external device 200 among at least one external device 200 that has a history of being connected to the electronic device 100, for example, a PC connected to the electronic device 100. , it may be a console game console or set-top box.
  • the second communication interface 120 refers to a communication interface 120 that connects the electronic device 100 and the first external device 200, and may be, for example, a WiFi module or an HDMI module.
  • an image signal refers to a signal containing information related to an image, and the term image signal can be replaced with terms such as image data, video input signal, etc.
  • the processor 140 may control the second communication interface 120 to transmit a signal requesting transmission of an image signal, and may transmit an image from the first external device 200 through the second communication interface 120.
  • a signal can be received.
  • the electronic device The image signal may be set to be transmitted from the first external device 200 to the electronic device 100 without a request from 100.
  • the processor 140 stops transmitting the image signal.
  • the request signal may also be transmitted to the second external device 200.
  • the processor 140 may control the display 110 to display first content corresponding to the image signal. Specifically, the processor 140 provides an image signal corresponding to content displayed on the display 110 through a communication interface 120 for communication connection with the first external device 200 among the plurality of communication interfaces 120. By determining the communication interface 120 to do so, the content displayed on the display 110 can be changed and displayed.
  • the processor 140 transmits a so-called 'external input' from the communication interface 120 corresponding to the second external device 200 to the communication interface corresponding to the first external device 200.
  • the content displayed on the display 110 can be changed from the second content to the first content.
  • the processor 140 divides the second content and the first content into split screens.
  • the display 110 can be controlled to display (i.e., PBP, picture by picture), and the display 110 can be controlled to display the first content in a portion of the second content (i.e., PIP, picture in picture). You can control it.
  • the electronic device 100 provides content displayed on the display 110 of the electronic device 100 based on the operation of the input device 300 connected to the electronic device 100.
  • the external device 200 for this can be changed, and thus user convenience can be improved.
  • FIG. 3 is a flowchart for explaining various embodiments according to the connection state between the electronic device 100 and the external device 200 and the power state of the external device 200 according to the present disclosure.
  • the processor 140 may receive a signal according to the operation of the first input device 300 from the first input device 300 (S310). Specifically, the processor 140 may receive a signal according to the operation of the first input device 300 from the first input device 300 through the first communication interface 120. And, when a signal according to the manipulation of the first input device 300 is received, the processor 140 can identify the first external device 200 corresponding to the first input device 300 (S315). As described above in the description of FIG. 2, the process of identifying the first external device 200 corresponding to the first input device 300 may be performed based on mapping information previously stored in the memory 130.
  • the processor 140 can identify whether the first external device 200 is connected to the electronic device 100 ( S320). Specifically, the first external device 200 is identified among at least one external device 200 that has a history of being connected to the electronic device 100, and the processor 140 determines the point at which the first external device 200 is identified. It is possible to identify whether the first external device 200 is connected to the electronic device 100 through the second communication interface 120 among the plurality of communication interfaces 120. For example, the processor 140 determines whether the first external device 200 is connected to the electronic device 100 by wire through an HDMI module and whether the first external device 200 is connected to the electronic device 100 wirelessly through WiFi Direct. It is possible to identify whether or not it is connected to (100).
  • the processor 140 executes a first application preset to correspond to the first external device 200. (S355). Additionally, the processor 140 may control the display 110 to display a screen corresponding to the first application (S360).
  • the first application refers to an application preset to correspond to the first external device 200 among a plurality of applications provided by the electronic device 100. Information about the plurality of applications and information about the correspondence between the plurality of applications and the external devices 200 may be stored in the memory 130 of the electronic device 100. The correspondence relationship between the external device 200 and the application may be set by the developer or user.
  • the processor 140 executes the first application corresponding to the first external device 200 and displays the screen corresponding to the first application, so that the first external device 200 is not connected. It is possible to provide a function that matches the intention of the user who operates the input device 300 as much as possible.
  • the first application among the plurality of applications is a web browser application and may be set to correspond to the PC, which is the first external device 200
  • the second application among the plurality of applications is an OTT (over the top) service.
  • the third application among the plurality of applications is an IoT (Internet of Things) device management application or a home screen application, and may be set to be provided when an application corresponding to the external device 200 is not set.
  • IoT Internet of Things
  • the process can identify whether the first external device 200 is turned on (S325). Specifically, the processor 140 detects whether a signal is received from the first external device 200 or whether a current exceeding a preset value flows through the first external device 200. You can identify whether the power is on or not.
  • the processor 140 may receive a first image signal from the first external device 200 (S330). Then, the processor 140 may control the display 110 to display the first content corresponding to the first image signal (S335).
  • the processor 140 operates as described above in the description of FIG. 2 , the screen of the display 110 can be automatically changed to provide the first content provided from the first external device 200.
  • the processor 140 may identify whether the first external device 200 can be turned on according to the control signal. (S340). Specifically, the processor 140 determines whether a control signal can be transmitted to the first external device 200 through the second communication interface 120 and whether the first external device 200 controls the control received from the electronic device 100. It is possible to identify whether the first external device 200 can be powered on according to the control signal based on whether it is implemented to turn on the power based on the signal. For example, when the second communication interface 120 is implemented to transmit a control signal to the external device 200, such as HDMI CEC (Consumer Electronics Control), the processor 140 connects the first external device 200 according to the control signal. It can be identified as being able to turn on the power of (200).
  • HDMI CEC Consumer Electronics Control
  • the processor 140 executes a first application preset to correspond to the first external device 200, and (S355), a screen corresponding to the first application can be displayed (S360).
  • the first external device 200 is connected to the electronic device 100, but the power of the first external device 200 is turned off, and the first external device 200 is connected to the electronic device 100 according to a control signal transmitted by the electronic device 100.
  • the processor 140 responds to the first content instead of displaying it, as in the case where the first external device 200 is not connected to the electronic device 100.
  • the first application may be provided alternatively. Since the description of step S355 and step S360 has been described above, redundant description of the same content will be omitted.
  • the processor 140 turns on the first external device 200 with the first external device 200.
  • a control signal can be transmitted (S345).
  • the processor 140 may control the second communication interface to transmit a control signal for turning on the power of the first external device 200 to the first external device 200.
  • the processor 140 After transmitting a control signal for turning on the first external device 200 to the first external device 200, the processor 140 determines whether the first external device 200 is turned on according to the control signal. Can be identified (S350). Then, when the first external device 200 is identified as being turned on according to the control signal, the processor 140 receives the first image signal from the first external device 200 (S330) and The corresponding first content can be displayed (S335). In other words, if the power of the first external device 200 is turned off but the power of the first external device 200 is turned on according to transmission of a control signal, the processor 140 1 The screen of the display 110 can be automatically changed to provide content.
  • the processor 140 executes a first application preset to correspond to the first external device 200 (S355), and The screen corresponding to the application can be displayed (S360).
  • the processor 140 detects that the first external device 200 is not connected to the electronic device 100 and sends the control signal. Accordingly, as in the case where the power of the first external device 200 cannot be turned on, instead of displaying the first content, the corresponding first application may be provided as an alternative.
  • the processor 140 is not connected to the external device 100.
  • a control signal to turn off the device 200 may also be transmitted.
  • the processor 140 sends at least one control signal to turn off the power of at least one external device 200 connected to the electronic device 100.
  • At least one communication interface 120 among the plurality of communication interfaces 120 can be controlled to transmit to each of the external devices 200. Accordingly, integrated power management for the electronic device 100 and at least one external device 200 connected to the electronic device 100 is possible.
  • the electronic device 100 can remotely After turning on the external device 200, the content provided from the external device 200 is displayed, or alternatively, a corresponding application is provided instead of displaying the content provided from the external device 200, thereby meeting the user's intention. It is possible to provide appropriate content.
  • FIG. 4 is a flowchart illustrating an embodiment related to receiving a user input regarding whether to display content through a first user interface according to the present disclosure.
  • 5 to 8 are diagrams illustrating first user interfaces according to various embodiments of the present disclosure.
  • the processor 140 may display a first user interface, as described later, and determine whether to display the first content based on a user input received through the first user interface.
  • the processor 140 may control the display 110 to display second content provided from the second external device 200 (S410).
  • the first user interface according to the present disclosure is used not only when the second content is displayed on the display 110, but also when no content is displayed on the display 110, that is, at least one external device (although the image signal may be provided even when no image signal is received from 200), the following description will be made assuming the case where the second content is displayed on the display 110 as an example.
  • the second content refers to content that is different from the first content provided by the first external device 200.
  • the processor 140 may receive a signal according to the operation of the first input device 300 from the first input device 300 (S420) ).
  • the second external device 200 refers to a device different from the first external device 200 that provides the first content.
  • the processor 140 can identify the first external device 200 corresponding to the first input device 300 (S430).
  • the processor 140 may control the display 110 to display the first user interface (S440). Specifically, the processor 140 may display the first user interface as shown in FIGS. 5 to 8 based on information about the first user interface stored in the memory 130. However, the first user interface shown in FIGS. 5 to 8 is merely illustrative.
  • the first user interface includes a guidance message for checking whether to display content provided from the console game machine, which is the first external device 200, such as "Do you want to move to the console game machine screen?" , “OK”, and “CANCEL” may include UI items for user selection.
  • a notification that the mouse, which is the first input device 300, cannot be used on the screen of the second content currently being displayed such as “The mouse cannot currently be used. Do you want to change the external input to PC?” It may include a message, a guidance message for checking whether to display content provided from the PC, which is the first external device 200, and UI items for user selection, such as “OK” and “CANCEL”. .
  • a message indicating that the mouse, which is the first input device 300, cannot be used on the screen of the second content currently being displayed such as "The mouse cannot be used currently. Do you want to move to the AAA app screen?" , a guidance message for confirming whether to display the AAA application screen, which is an application provided by the electronic device 100, and UI items for user selection, such as “OK” and “CANCEL”. You can.
  • a guidance message for confirming whether to display the AAA application screen is provided instead of a message for confirming whether to display content provided from the PC, which is the first external device 200. As described, it is assumed that the first external device 200 is not connected to the electronic device 100 or the first external device 200 is turned off.
  • the first input device 300 is displayed on the screen of the second content currently being displayed, such as "You cannot currently use the mouse. Change the external input to PC or use the keyboard.”
  • a guidance message indicating that the mouse cannot be used a guidance message for confirming whether to display content provided from the PC, which is the first external device 200, and the first input device 300 and the first input device 300 on the screen of the second content currently being displayed. It may include a guidance message indicating that a keyboard, which is another input device 300, can be used, and UI items for user selection, such as “Change to PC,” “View keyboard guide,” and “CANCEL.”
  • the processor 140 When a user input for stopping display of the second content and selecting to display the first content is received through the first user interface (S450-Y), the processor 140 receives an image signal from the first external device 200. It is received (S460), and the first content corresponding to the image signal can be displayed (S470). On the other hand, if no user input is received to stop displaying the second content and select to display the first content through the first user interface (S450-Y), the processor 140 maintains the operation of the display 110. (S480).
  • a guidance message such as “You cannot currently use the mouse” is displayed when the screen currently displayed on the display of the electronic device 100 does not support the mouse (e.g., the game content screen (if it is displayed).
  • a UI item corresponding to the first user interface can be selected using the mouse on the first user interface.
  • the mouse pointer may be displayed on the layer.
  • the first user interface is displayed after the first external device 200 corresponding to the first input device 300 is identified and before receiving an image signal from the first external device 200.
  • the first user interface may be provided at various times, such as displaying the first user interface while receiving an image signal from the first external device 200.
  • the electronic device 100 improves user convenience by confirming the user's intention before switching the screen of the display 110 to display content provided from the external device 200. You can do it.
  • FIG. 9 is a flowchart for explaining an embodiment related to identifying whether the input device 300 has been malfunctioned according to the present disclosure.
  • the processor 140 when the processor 140 according to the present disclosure receives a signal according to the operation of the first input device 300 from the first input device 300 (S910), the first input device ( Whether or not to display the first content received from the first external device 200 can be determined depending on whether a signal according to the operation of 300 is received again (S920).
  • the processor 140 When the signal according to the operation of the first input device 300 is received again within the first critical interval (S920-Y), the processor 140 operates the first external device 200 corresponding to the first input device 300. It is possible to identify (S930), receive an image signal from the first external device 200 (S940), and display first content corresponding to the image signal (S950).
  • the first critical section can be calculated not only based on the time at which the first signal received from the first input device 300 is received, but also after receiving the first signal received from the first input device 300. It may be calculated after a certain period of time.
  • the processor 140 may determine that there is a user's intention to manipulate the first input device 300 and automatically change the screen of the display 110 to provide the first content provided from the first external device 200.
  • signals of the first input device 300 may be generated one after another due to the user's misoperation.
  • a plurality of signals may be generated and transmitted to the electronic device 100, and the electronic device 100 may be generated within the first critical section. It is possible to receive multiple signals.
  • the screen of the display 110 is adjusted to provide the first content provided from the first external device 200 based on the fact that a plurality of signals are received from the first input device 300 within the first critical section. Changing it may go against the user's intentions.
  • the first critical section may be calculated a predetermined time after reception of the first signal received from the first input device 300.
  • the processor 140 receives the second signal according to the manipulation of the first input device 300 again within 5 seconds, starting 3 seconds after the first signal according to the manipulation of the first input device 300 is received.
  • the screen of the display 110 can be automatically changed to provide the first content provided from the first external device 200. .
  • the processor 140 may maintain the operation of the display 110 (S960). Specifically, when second content is displayed on the display 110, the processor 140 may control the display 110 to maintain display of the second content. When no content is displayed on the display 110, the processor 140 may control the display 110 to maintain a state in which no content is displayed on the display 110.
  • the electronic device 100 can prevent the screen of the display 110 from being switched against the user's intention in case of misoperation of the input device 300.
  • FIG. 10 is a flowchart illustrating an embodiment related to identifying the type of signal received from the external device 200 according to the present disclosure.
  • the processor 140 can identify the type of signal received from the external device 200 and determine whether to switch the screen displayed on the display 110 based on the type.
  • the processor 140 may receive a signal from the third external device 200 while the first content is displayed (S1010). And, when a signal is received from the third external device 200, the processor 140 can identify whether the received signal is an image signal (S1020).
  • the processor 140 may identify whether the received signal is an image signal by identifying whether the received signal includes information related to the image (eg, pixel information).
  • the processor 140 may display second content corresponding to the received signal (S1030). On the other hand, if the received signal is not an image signal, the processor 140 may maintain the operation of the display 110 (S1040). For example, if the signal received from the third external device 200 is not an image signal, as in the case of a signal received to update the software of the electronic device 100 according to the update of the third external device 200, , the processor 140 may maintain the first content being displayed without switching the screen of the display 110 to display the screen corresponding to the third external device 200.
  • the module for identifying the type of signal received from an external device may not only be implemented as a software module, but may also be implemented as a hardware module in a system-on-chip format.
  • the electronic device 100 prevents the screen of the display 110 from switching and causing inconvenience to the user when the signal received from the external device 200 is an abnormal signal rather than an image signal. You can do it.
  • FIG. 11 is a flowchart explaining an embodiment related to maintaining an activated state of an electronic device.
  • FIG. 11 describes an embodiment related to a case where a user input for turning off the power of an electronic device is received and then a manipulation of the input device is received again.
  • the processor may receive a first signal corresponding to a user input for turning off the electronic device from the second input device while the first content is displayed (S1110). Specifically, while the first content is displayed, the processor sends a first signal corresponding to a user input for turning off the electronic device from a second input device among at least one input device through a fourth communication interface among a plurality of communication interfaces. You can receive it.
  • the second input device is an input device connected to the electronic device and may be, for example, a mouse or keyboard.
  • the first signal refers to a signal corresponding to a user input for turning off the electronic device. For example, it may be received based on a user input of selecting a power off item displayed on the display using a mouse, which is a second input device.
  • the fourth communication interface refers to a communication interface connecting an electronic device and a second input device, and may be, for example, a Bluetooth module or a USB module.
  • the processor may maintain the operation of the electronic device until the first signal is received. Accordingly, display of the first content may be maintained on the display until the first signal is received.
  • the processor may stop the operation of the display (S1120) and maintain the activation state for the fourth communication interface (S1130). Specifically, the processor may control the display to stop operation of the display, and control the fourth communication interface to maintain an activated state for the fourth communication interface while the operation of the display is stopped.
  • the processor may receive a second signal according to manipulation of the second input device from the second input device while the operation of the display is stopped (S1140). While the operation of the display is stopped, a second signal according to manipulation of the second input device may be received from the second input device through the fourth communication interface.
  • the processor may maintain the operation of the electronic device until the second signal is received. Accordingly, the operation of the display can be maintained until the second signal is received, and the activation state for the fourth communication interface can also be maintained.
  • the processor can display the first content (S1150). That is, when the second signal is received, the processor selects the first content (i.e., content corresponding to the last source) that was being displayed on the display before the first signal corresponding to the user input for turning off the electronic device is received. You can control the display to display it again. Depending on the embodiment, a home screen or a screen provided by a preset application may be displayed.
  • the activation state for the fourth communication interface is maintained and a second signal according to the user's operation is received from the second input device connected through the fourth communication interface.
  • the first there are no particular restrictions on the type and number of communication interfaces that remain activated despite a user input to turn off the device, and the type and number of input devices connected to the communication interfaces that remain activated.
  • the power of the display as well as the communication interface and other components are turned off to prevent power consumption, and as an exception, the power is turned on. Only the infrared signal receiving module may be maintained in an activated state to receive a signal corresponding to a user input from the remote control device. Therefore, according to the prior art, even if a user operation is input to a second input device such as a mouse or keyboard while the electronic device is turned off, the electronic device cannot receive a signal according to the operation of the second input device. do.
  • the electronic device when a first signal corresponding to a user input for turning off the electronic device is received, the electronic device turns off the display, but receives a signal according to the operation of the second input device.
  • the activation state for the fourth communication interface can be maintained. In other words, even if the first signal corresponding to the user input for turning off the electronic device is received, the electronic device enters a standby mode that allows receiving a signal according to the operation of the second input device through the fourth communication interface. can do. And, even while the operation of the display is stopped, the electronic device can receive a second signal according to the manipulation of the second input device from the second input device through the activated fourth communication interface.
  • FIG. 12 is a flowchart to explain an embodiment related to a case where the fourth external device operates in a sleep state.
  • FIG. 3 when the external device is not connected to the electronic device or the external device is turned off, content provided from the external device is displayed after remotely turning on the external device, or the external device is turned off.
  • FIGS. 12 to 14 describe an embodiment related to a case where an external device is connected to an electronic device and the external device is turned on but in a sleep state.
  • the processor may receive a third signal according to manipulation of the second input device from the second input device while the fourth external device operates in a sleep state (S1210).
  • the sleep state refers to a state in which the configuration of the external device is deactivated.
  • some components, such as the fifth communication interface remain active even in the sleep state of the fourth external device in order to receive a signal to activate the fourth external device. It can be maintained.
  • the fourth external device refers to an external device connected to the electronic device.
  • the third signal is a signal according to the operation of the second input device, for example, a signal according to the operation of moving the mouse, which is the second input device, or a signal according to the operation of inputting an arbitrary button on the keyboard, which is the second input device. You can.
  • the processor may maintain the operation of the electronic device until the third signal is received. On the other hand, when the third signal is received (S1210-Y), the processor may transmit the third signal to the fourth external device during the preset second critical interval (S1220).
  • the fifth communication interface among the plurality of communication interfaces can be controlled to transmit 3 signals to the fourth external device.
  • the third signal can be transmitted to the fourth external device through the electronic device.
  • the second critical period may be a period of 3 to 5 seconds, but may be changed depending on the user or developer's settings.
  • the fifth communication interface refers to a communication interface connecting an electronic device and a fourth external device, and may be, for example, a WiFi module or an HDMI module. Additionally, the fifth communication interface can maintain an activated state even in the sleep state of the fourth external device in order to receive a signal for activating the fourth external device.
  • the processor may control the display to display the first content.
  • the first content refers to the content displayed on the display before the third signal according to the operation of the second input device is received. That is, the processor can not only transmit the third signal to the fourth external device in a state where no content is displayed on the display (i.e., no signal state), but also transmit the third signal to the fourth external device before the third signal is received.
  • the third signal can be transmitted to the fourth external device while the first content is displayed again.
  • the processor receives the first image signal from the fourth external device (S1240) and responds to the received first image signal.
  • the third content can be displayed (S1250).
  • the processor It can be identified that the sleep state has changed to the active state. Thereafter, the processor may receive a first image signal from the fourth external device through the fifth communication interface and control the display to display third content corresponding to the first image signal.
  • the processor may control the display to display the first content (S1260).
  • the processor can control the operation of the electronic device based on the fourth signal (S1280). Specifically, when a fourth signal according to manipulation of the second input device is received from the second input device through the fourth communication interface after the second critical interval, the operation of the electronic device can be controlled based on the fourth signal.
  • the electronic device when the electronic device is a display device such as a TV or a monitor, and the fourth external device is a device such as a PC, while the fourth external device provides content to the electronic device, the second input device Based on this, only content/screen provided by the fourth external device can be provided. Additionally, when the fourth external device is in a sleep state, the operation of the electronic device can only be controlled based on the second input device, but the operation of the fourth external device cannot be controlled.
  • the electronic device can attempt to activate the fourth external device by first transmitting a third signal to the fourth external device while the fourth external device is operating in a sleep state. And, nevertheless, if the fourth external device is not activated during the critical period, the electronic device can control the content/screen provided by the electronic device based on the second input device to perform an operation that matches the user's intention. do.
  • FIG. 13 is a flowchart for explaining an embodiment related to providing a second user interface
  • FIG. 14 is a diagram illustrating a second user interface according to an embodiment of the present disclosure.
  • FIG. 12 an embodiment related to transmitting a third signal according to the operation of the second input device to the fourth external device while the fourth external device is operating in a sleep state has been described, but in FIG. 13 An embodiment related to providing a user interface based on a third signal resulting from manipulation of a second input device will be described.
  • the processor may receive a third signal according to manipulation of the second input device from the second input device while the fourth external device operates in a sleep state (S1310). Specifically, the processor may receive a third signal according to manipulation of the second input device from the second input device through the fourth communication interface while the fourth external device operates in a sleep state. Since the fourth external device, the second input device, and the third signal have been defined in the description of FIG. 12, duplicate descriptions of the same content will be omitted.
  • the processor may maintain the operation of the electronic device until the third signal is received.
  • the electronic device may display a second user interface including an item for changing the sleep state of the fourth external device to the active state (S1320).
  • the processor when a third signal according to manipulation of the second input device is received from the second input device through the fourth communication interface, the processor includes an item for changing the sleep state of the fourth external device to the active state.
  • the display can be controlled to display the user interface. That is, the processor does not immediately transmit the third signal to the fourth external device in response to receiving the third signal according to the operation of the second input device while the fourth external device is operating in a sleep state, but receives the user input.
  • a second user interface may be received to do this.
  • the processor may transmit the third signal to the fourth external device during the preset second critical period. (S1350). Specifically, when an item for changing the sleep state of the fourth external device to the active state is selected through the second user interface based on the fifth signal received from the second input device, the processor operates during the preset second critical period.
  • a fifth communication interface among a plurality of communication interfaces can be controlled to transmit a third signal to a fourth external device.
  • the second user interface includes a guidance message such as “The PC is currently in a sleep state. Do you want to control the PC?”, an item called “OK” to receive the user’s input, and “CANCEL”. It may include an item called ".
  • the processor may transmit the third signal to the fourth external device during the second critical interval.
  • the electronic device can maintain operation of the electronic device without transmitting the third signal to the fourth external device.
  • the processor receives the first image signal from the fourth external device (S1360) and responds to the received first image signal.
  • the third content can be displayed (S1370).
  • the processor may control the display to display the second user interface again (S1380). Afterwards, when a fourth signal according to manipulation of the second input device is received from the second input device (S1385), the processor can control the operation of the electronic device based on the fourth signal (S1390).
  • the electronic device first provides the second user interface and then provides the second input according to the user's selection. Based on the device, it is possible to determine whether to control the content/screen provided by the fourth external device or the content/screen provided by the electronic device.
  • the embodiments described above with reference to FIGS. 12 to 14 differ from the case in which the fourth external device operates in an active state while the fourth external device is operating in a sleep state, as in the embodiments described above with reference to FIG. 2 , etc., the content It is assumed that the external device for providing cannot be changed to a fourth external device.
  • the electronic device when the second input device is operated while the fourth external device is operating in a sleep state, the electronic device first sends a third signal to the fourth external device. Attempt to activate a fourth external device by transmitting a third signal, or first provide a second user interface by an electronic device and then attempt to activate a fourth external device by transmitting a third signal to the fourth external device according to the user's will. This makes it possible to determine the content to be controlled through the second input device.
  • FIG. 15 is a block diagram illustrating in detail the configuration of the electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 includes a display 110, a plurality of communication interfaces 120, a memory 130, and a processor 140, as well as a sensor 150. ), an input interface 160, and an output interface 170 may be further included.
  • the configurations shown in FIG. 15 are merely exemplary, and in carrying out the present disclosure, new configurations may be added or some configurations may be omitted in addition to the configurations shown in FIG. 15 .
  • the sensor 150 can detect various information inside and outside the electronic device 100.
  • the sensor 150 includes an image sensor 150, a Global Positioning System (GPS) sensor 150, a gyro sensor, a gyroscope, and an acceleration sensor 150. It may include at least one of a lidar sensor 150, an inertial measurement unit (IMU), and a motion sensor 150.
  • the sensor 150 may include various types of sensors 150, such as a temperature sensor 150, a humidity sensor 150, an infrared sensor 150, and a bio sensor 150.
  • the processor 140 acquires an image for the input device 300 through the image sensor 150 (or a camera including the image sensor 150), thereby obtaining an input device (
  • the user's manipulation of the input device 300 or the movement of the input device 300 can be identified.
  • the processor 140 operates on the input device 300 based on the signal received from the input device 300 as well as the user's manipulation of the input device 300 or information about the movement of the input device 300.
  • the user's manipulation intention can be identified, and the external device 200 corresponding to the input device 300 can be identified only when the user's manipulation intention is identified.
  • the input interface 160 includes a circuit, and the processor 140 can receive user commands for controlling the operation of the electronic device 100 through the input interface 160.
  • the input interface 160 may consist of a microphone, a remote control signal receiver (not shown), etc. Additionally, the input interface 160 may be implemented as a touch screen included in the display 110.
  • the microphone can acquire a signal for sound or voice generated outside of the electronic device 100. Specifically, the microphone may acquire vibration according to a sound or voice generated outside of the electronic device 100 and convert the acquired vibration into an electrical signal.
  • the microphone according to the present disclosure can acquire a voice signal for the user's voice generated by the user's speech. Then, the acquired signal can be converted into a digital signal and stored in the memory 130.
  • the microphone may include an A/D converter (Analog to Digital Converter) and may operate in conjunction with an A/D converter located outside the microphone.
  • A/D converter Analog to Digital Converter
  • the processor 140 may receive a user input for setting (designating) an external device 200 corresponding to the input device 300 through the input interface 160, and a first external User input for setting an application corresponding to the device 200, user input for selecting a UI item included in the user interface, etc. may be received.
  • User input as described above may be received in the form of a voice signal through a microphone.
  • the user input as described above can be received through the communication interface 120 according to the present disclosure as it is input to the input device 300 according to the present disclosure.
  • the output interface 170 includes a circuit, and the processor 140 can output various functions that the electronic device 100 can perform through the output interface 170. Additionally, the output interface 170 may include at least one of a display 110, a speaker, and an indicator.
  • the display 110 has been described with reference to FIG. 2 on the assumption that it is a separate configuration from the output interface 170, so duplicate description of the same content will be omitted.
  • the display 110 may output image data under the control of the processor 140. Specifically, the display 110 may output an image previously stored in the memory 130 under the control of the processor 140.
  • the display 110 may display a user interface (User Interface) stored in the memory 130.
  • the display 110 may be implemented as a Liquid Crystal Display Panel (LCD), Organic Light Emitting Diodes (OLED), etc., and in some cases, the display 110 may be implemented as a flexible display 110, a transparent display 110, etc. It is also possible to become
  • the display 110 according to the present disclosure is not limited to a specific type.
  • the speaker may output audio data under the control of the processor 140, and the indicator may light up under the control of the processor 140.
  • the processor 140 may output a voice message to confirm whether to change the content displayed on the display 110 through a speaker, and may also output a voice message according to the present disclosure.
  • voice messages related to actions can be output.
  • FIG. 16 is a flowchart showing a control method of the electronic device 100 according to an embodiment of the present disclosure.
  • the electronic device 100 receives information from the first input device 300 among at least one input device 300 according to the operation of the first input device 300.
  • a signal can be received (S1610).
  • mapping information may be obtained based on the user's settings and stored in the memory 130. In addition, mapping information may be obtained based on the history of receiving a signal from at least one input device 300 within a threshold time after receiving a signal from at least one external device 200 and stored in the memory 130. .
  • the electronic device 100 can receive an image signal from the first external device 200 (S1630). And, when an image signal is received from the first external device 200, the electronic device 100 can control the display 110 to display the first content corresponding to the image signal (S1640).
  • control method of the electronic device 100 may be implemented as a program and provided to the electronic device 100.
  • a program including a control method for the electronic device 100 may be stored and provided in a non-transitory computer readable medium.
  • the control method of the electronic device 100 includes at least one input device 300 for receiving user input. ), when a signal according to the operation of the first input device 300 is received from the first input device 300, the connection between at least one external device 200 for providing content and at least one input device 300 Identifying a first external device 200 corresponding to the first input device 300 among at least one external device 200 based on mapping information indicating a mapping relationship, receiving an image from the first external device 200 It includes receiving a signal and displaying first content corresponding to the image signal.
  • control method of the electronic device 100 and the computer-readable recording medium including the program for executing the control method of the electronic device 100 have been briefly described. However, this is only to omit redundant description, and the electronic device 100 control method has been briefly described. Of course, various embodiments of the device 100 can also be applied to a control method of the electronic device 100 and a computer-readable recording medium including a program that executes the control method of the electronic device 100.
  • the electronic device 100 displays a display 110 on the display 110 of the electronic device 100 based on the operation of the input device 300 connected to the electronic device 100.
  • the external device 200 for providing content can be changed, and thus user convenience can be improved.
  • the electronic device 100 remotely powers the external device 200 even when the external device 200 is not connected to the electronic device 100 or the external device 200 is turned off. After turning on, it is possible to provide content that meets the user's intention by displaying content provided from the external device 200 or alternatively providing a corresponding application instead of displaying content provided from the external device 200. There will be.
  • the electronic device 100 can improve user convenience by confirming the user's intention before switching the screen of the display 110 to display content provided from the external device 200, and the input device In case of malfunction of 300, it is possible to prevent the screen of the display 110 from being switched against the user's intention. Furthermore, if the signal received from the external device 200 is an abnormal signal rather than an image signal, the display ( 110), it is possible to prevent the screen from being switched and causing inconvenience to the user.
  • a storage medium that can be read by a device may be provided in the form of a non-transitory storage medium.
  • 'non-transitory storage medium' simply means that it is a tangible device and does not contain signals (e.g. electromagnetic waves). This term refers to cases where data is semi-permanently stored in a storage medium and temporary storage media. It does not distinguish between cases where it is stored as .
  • a 'non-transitory storage medium' may include a buffer where data is temporarily stored.
  • Computer program products are commodities and can be traded between sellers and buyers.
  • the computer program product may be distributed in the form of a machine-readable storage medium (e.g. compact disc read only memory (CD-ROM)) or via an application store (e.g. Play Store TM ) or on two user devices (e.g. It can be distributed (e.g. downloaded or uploaded) directly between smartphones) or online.
  • a portion of the computer program product e.g., a downloadable app
  • Each component e.g., module or program
  • each component may be composed of a single or multiple entities, and some of the sub-components described above may be omitted. Alternatively, other sub-components may be further included in various embodiments. Alternatively or additionally, some components (e.g., modules or programs) may be integrated into a single entity and perform the same or similar functions performed by each corresponding component prior to integration.
  • operations performed by a module, program, or other component may be executed sequentially, in parallel, iteratively, or heuristically, or at least some operations may be executed in a different order, omitted, or other operations may be added. You can.
  • unit or “module” used in the present disclosure includes a unit comprised of hardware, software, or firmware, and may be used interchangeably with terms such as logic, logic block, component, or circuit, for example. You can.
  • a “part” or “module” may be an integrated part, a minimum unit that performs one or more functions, or a part thereof.
  • a module may be comprised of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of the present disclosure may be implemented as software including instructions stored in a machine-readable storage media that can be read by a machine (e.g., a computer).
  • the device calls the stored instructions from the storage medium.
  • the device capable of operating according to the called command may include an electronic device (eg, the electronic device 100) according to the disclosed embodiments.
  • the processor may perform the function corresponding to the instruction directly or using other components under the control of the processor.
  • Instructions may contain code generated or executed by a compiler or interpreter.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

전자 장치 및 전자 장치의 제어 방법이 개시된다. 특히, 본 개시에 따른 전자 장치는 디스플레이, 컨텐츠를 제공하기 위한 적어도 하나의 외부 장치 및 사용자 입력을 수신하기 위한 적어도 하나의 입력 장치를 전자 장치와 연결하는 복수의 통신 인터페이스, 적어도 하나의 외부 장치 및 적어도 하나의 입력 장치 사이의 매핑 관계를 나타내는 매핑 정보를 저장하는 메모리, 복수의 통신 인터페이스 중 제1 통신 인터페이스를 통해 적어도 하나의 입력 장치 중 제1 입력 장치로부터 제1 입력 장치의 조작에 따른 신호가 수신되면, 매핑 정보에 기초하여 적어도 하나의 외부 장치 중 제1 입력 장치에 대응되는 제1 외부 장치를 식별하고, 복수의 통신 인터페이스 중 제2 통신 인터페이스를 통해 제1 외부 장치로부터 이미지 신호를 수신하고, 이미지 신호에 대응되는 제1 컨텐츠를 표시하도록 디스플레이를 제어하는 프로세서를 포함한다.

Description

전자 장치 및 전자 장치의 제어 방법
본 개시는 전자 장치 및 전자 장치의 제어 방법에 관한 것으로서, 구체적으로는 전자 장치의 디스플레이 상에 표시되는 컨텐츠를 제공하기 위한 외부 장치를 변경할 수 있는 전자 장치 및 이의 제어 방법에 관한 것이다.
근래에는 TV 또는 모니터 등과 같은 전자 장치에 컨텐츠의 제공을 위한 다양한 종류의 외부 장치(소스 장치)가 연결되어 사용자에게 다양한 컨텐츠를 제공하고 있다. 구체적으로, TV 또는 모니터 등과 같은 전자 장치에는 셋탑박스, PC, 콘솔 게임기, DVD 플레이어, 외장 하드 디스크 등과 같이 다양한 외부 장치가 연결될 수 있다. 또한, 전자 장치에는 외부 장치에 관련된 다양한 유형의 입력 장치, 예를 들어 마우스, PC, 전자 팬, 게임 패드, 리모컨 등과 같은 입력 장치들이 연결되어 이용되고 있다.
따라서, 사용자는 전자 장치에 연결된 다양한 외부 장치 중 어떠한 외부 장치를 통해 컨텐츠를 제공받고자 하는지를 선택하고, 또한 다양한 입력 장치 중 어떠한 입력 장치를 통해 해당 컨텐츠에 관련된 사용자 조작을 수행하고자 하는지를 선택해야 하는바, 이는 사용자의 불편을 초래할 수 있다.
이에 전자 장치에 연결된 외부 장치의 전원이 켜지면, 그 외부 장치로부터 수신되는 컨텐츠를 표시할 수 있도록, 해당 외부 장치에 대응되는 화면으로 자동 전환하는 종래 기술이 존재한다. 그러나 이러한 종래 기술에 따르면, 이미 외부 장치의 전원이 켜져 있는 경우에는 그 외부 장치에 대응되는 화면으로 전환할 수는 없다는 한계가 있다. 또한, 종래 기술에 따르면, 외부 장치의 전원이 꺼져 있는 상태에서는 사용자가 직접 외부 장치의 전원을 키는 방법 이외에는 자동으로 그 외부 장치에 대응되는 화면으로 전환할 수는 없다는 한계도 지적되고 있다. 뿐만 아니라, 종래 기술에 따르면, 전자 장치 또는 전자 장치에 연결된 외부 장치의 일부 구성이 비활성화되는 슬립 상태(sleep state)로 동작하는 경우, 입력 장치를 통해 전자 장치 또는 외부 장치 중 어떠한 장치를 제어할 것인지를 효과적으로 식별하고 해당 장치를 제어하기 어렵다는 한계도 지적되고 있다.
본 개시는 상술한 바와 같은 종래 기술의 한계를 극복하기 위한 것으로서, 본 개시의 목적은 특히 전자 장치와 연결된 입력 장치의 조작에 기초하여, 전자 장치의 디스플레이 상에 표시되는 컨텐츠를 제공하기 위한 외부 장치를 변경할 수 있는 전자 장치 및 이의 제어 방법을 제공하기 위한 것이다.
상술한 바와 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따르면, 전자 장치는 디스플레이, 컨텐츠를 제공하기 위한 적어도 하나의 외부 장치 및 사용자 입력을 수신하기 위한 적어도 하나의 입력 장치를 상기 전자 장치와 연결하는 복수의 통신 인터페이스, 상기 적어도 하나의 외부 장치 및 상기 적어도 하나의 입력 장치 사이의 매핑 관계를 나타내는 매핑 정보를 저장하는 메모리, 상기 복수의 통신 인터페이스 중 제1 통신 인터페이스를 통해 상기 적어도 하나의 입력 장치 중 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 상기 매핑 정보에 기초하여 상기 적어도 하나의 외부 장치 중 상기 제1 입력 장치에 대응되는 제1 외부 장치를 식별하고, 상기 복수의 통신 인터페이스 중 제2 통신 인터페이스를 통해 상기 제1 외부 장치로부터 이미지 신호를 수신하고, 상기 이미지 신호에 대응되는 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.
여기서, 상기 프로세서는 상기 제1 외부 장치의 전원이 켜져 있는지 여부를 식별하며, 상기 제1 외부 장치의 전원이 켜져 있는 것으로 식별되면, 상기 복수의 통신 인터페이스 중 제2 통신 인터페이스를 통해 상기 제1 외부 장치로부터 이미지 신호를 수신하고, 상기 제1 외부 장치의 전원이 꺼져 있는 것으로 식별되면, 상기 제1 외부 장치로 상기 제1 외부 장치의 전원을 키기 위한 제어 신호를 전송하도록 상기 제2 통신 인터페이스를 제어하며, 상기 제어 신호에 따라 상기 제1 외부 장치의 전원이 켜지면, 상기 제2 통신 인터페이스를 통해 상기 제1 외부 장치로부터 상기 이미지 신호를 수신할 수 있다.
여기서, 상기 프로세서는 상기 제어 신호에 따라 상기 제1 외부 장치의 전원이 켜지지 않으면, 상기 전자 장치에 의해 제공되는 복수의 어플리케이션 중 상기 제1 외부 장치에 대응되는 것으로 기 설정된 제1 어플리케이션을 실행하고, 상기 제1 어플리케이션에 대응되는 화면을 표시하도록 상기 디스플레이를 제어할 수 있다.
여기서, 상기 프로세서는 상기 제1 외부 장치가 상기 전자 장치와 연결되지 않은 것으로 식별되면, 상기 제1 어플리케이션에 대응되는 화면을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는 상기 적어도 하나의 외부 장치 중 제2 외부 장치로부터 제공되는 제2 컨텐츠가 상기 디스플레이 상에 표시되는 동안 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 상기 제2 컨텐츠의 표시를 중지하고 상기 제1 컨텐츠를 표시할 것인지 여부를 선택하기 위한 제1 사용자 인터페이스를 표시하도록 상기 디스플레이를 제어하고, 상기 제1 사용자 인터페이스를 통해 상기 제2 컨텐츠의 표시를 중지하고 상기 제1 컨텐츠를 표시하는 것을 선택하는 사용자 입력이 수신되면, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는 상기 제1 입력 장치의 조작에 따른 신호가 수신된 후 기 설정된 제1 임계 구간 내에 상기 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 다시 수신되는지 여부를 식별하고, 상기 제1 입력 장치의 조작에 따른 신호가 상기 제1 임계 구간 내에 다시 수신되면, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하며, 상기 제1 입력 장치의 조작에 따른 신호가 상기 제1 임계 구간 내에 다시 수신되지 않으면, 상기 디스플레이의 동작을 유지할 수 있다.
한편, 상기 프로세서는 상기 제1 컨텐츠가 상기 디스플레이 상에 표시되는 동안 상기 복수의 통신 인터페이스 중 제3 통신 인터페이스를 통해 상기 적어도 하나의 외부 장치 중 제3 외부 장치로부터 신호가 수신되면, 상기 수신된 신호가 이미지 신호인지 여부를 식별하고, 상기 수신된 신호가 이미지 신호이면, 상기 수신된 신호에 대응되는 제2 컨텐츠를 표시하도록 상기 디스플레이를 제어하며, 상기 수신된 신호가 이미지 신호가 아니면, 상기 디스플레이의 동작을 유지할 수 있다.
한편, 상기 매핑 정보는 사용자의 설정 및 상기 적어도 하나의 외부 장치로부터 신호가 수신된 후 임계 시간 내에 상기 적어도 하나의 입력 장치로부터 신호가 수신된 이력 중 적어도 하나에 기초하여 획득될 수 있다.
한편, 상기 프로세서는 상기 전자 장치의 전원을 끄기 위한 사용자 입력이 수신되면, 상기 전자 장치와 연결된 적어도 하나의 외부 장치의 전원을 끄기 위한 제어 신호를 상기 적어도 하나의 외부 장치 각각으로 전송하도록 상기 복수의 통신 인터페이스 중 적어도 하나의 통신 인터페이스를 제어할 수 있다.
한편, 상기 프로세서는 상기 제1 컨텐츠가 표시되는 동안 상기 복수의 통신 인터페이스 중 제4 통신 인터페이스를 통해 상기 적어도 하나의 입력 장치 중 제2 입력 장치로부터 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호가 수신되면, 상기 디스플레이의 동작을 중지하도록 상기 디스플레이를 제어하고, 상기 디스플레이의 동작이 중지되는 동안, 상기 제4 통신 인터페이스에 대한 활성화 상태가 유지되도록 상기 제4 통신 인터페이스를 제어하며, 상기 디스플레이의 동작이 중지되는 동안, 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제2 신호가 수신되면, 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는 상기 적어도 하나의 외부 장치 중 제4 외부 장치가 슬립 상태(sleep state)로 동작하는 동안 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 기 설정된 제2 임계 구간 동안 상기 제3 신호를 상기 제4 외부 장치로 전송하도록 상기 복수의 통신 인터페이스 중 제5 통신 인터페이스를 제어하고, 상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되면, 상기 제5 통신 인터페이스를 통해 상기 제4 외부 장치로부터 제1 이미지 신호를 수신하고, 상기 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시하도록 상기 디스플레이를 제어하며, 상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되지 않으면, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하고, 상기 제2 임계 구간 이후 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제4 신호가 수신되면, 상기 제4 신호에 기초하여 상기 전자 장치의 동작을 제어할 수 있다.
여기서, 상기 프로세서는 상기 제3 신호가 상기 제4 외부 장치로 전송되는 동안, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는 상기 제4 외부 장치가 슬립 상태로 동작하는 동안 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 상기 제4 외부 장치의 상기 슬립 상태를 활성화 상태로 변경하기 위한 아이템을 포함하는 제2 사용자 인터페이스를 표시하도록 상기 디스플레이를 제어하고, 상기 제2 입력 장치로부터 수신된 제5 신호에 기초하여 상기 제4 통신 인터페이스를 통해 상기 아이템이 선택되면, 기 설정된 제2 임계 구간 동안 상기 제3 신호를 상기 제4 외부 장치로 전송하도록 상기 복수의 통신 인터페이스 중 제5 통신 인터페이스를 제어하며, 상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되면, 상기 제5 통신 인터페이스를 통해 상기 제4 외부 장치로부터 제1 이미지 신호를 수신하고, 상기 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시하도록 상기 디스플레이를 제어할 수 있다.
여기서, 상기 프로세서는 상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되지 않으면, 상기 제2 사용자 인터페이스를 표시하도록 상기 디스플레이를 제어하고, 상기 제2 임계 구간 이후 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제4 신호가 수신되면, 상기 제4 신호에 기초하여 상기 전자 장치의 동작을 제어할 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따르면, 전자 장치의 제어 방법은 사용자 입력을 수신하기 위한 적어도 하나의 입력 장치 중 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 컨텐츠를 제공하기 위한 적어도 하나의 외부 장치 및 상기 적어도 하나의 입력 장치 사이의 매핑 관계를 나타내는 매핑 정보를 에 기초하여 상기 적어도 하나의 외부 장치 중 상기 제1 입력 장치에 대응되는 제1 외부 장치를 식별하는 단계, 상기 제1 외부 장치로부터 이미지 신호를 수신하는 단계 및 상기 이미지 신호에 대응되는 제1 컨텐츠를 표시하는 단계를 포함한다.
여기서, 상기 전자 장치의 제어 방법은 상기 제1 외부 장치의 전원이 켜져 있는지 여부를 식별하는 단계, 상기 제1 외부 장치의 전원이 켜져 있는 것으로 식별되면, 상기 제1 외부 장치로부터 이미지 신호를 수신하는 단계, 상기 제1 외부 장치의 전원이 꺼져 있는 것으로 식별되면, 상기 제1 외부 장치로 상기 제1 외부 장치의 전원을 키기 위한 제어 신호를 전송하는 단계 및 상기 제어 신호에 따라 상기 제1 외부 장치의 전원이 켜지면, 상기 제1 외부 장치로부터 상기 이미지 신호를 수신하는 단계를 더 포함할 수 있다.
여기서, 상기 전자 장치의 제어 방법은 상기 제어 신호에 따라 상기 제1 외부 장치의 전원이 켜지지 않으면, 상기 전자 장치에 의해 제공되는 복수의 어플리케이션 중 상기 제1 외부 장치에 대응되는 것으로 기 설정된 제1 어플리케이션을 실행하는 단계 및 상기 제1 어플리케이션에 대응되는 화면을 표시하는 단계를 더 포함할 수 있다.
여기서, 상기 전자 장치의 제어 방법은 상기 제1 외부 장치가 상기 전자 장치와 연결되지 않은 것으로 식별되면, 상기 제1 어플리케이션에 대응되는 화면을 표시하는 단계를 더 포함할 수 있다.
한편, 상기 전자 장치의 제어 방법은 상기 적어도 하나의 외부 장치 중 제2 외부 장치로부터 제공되는 제2 컨텐츠가 표시되는 동안 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 상기 제2 컨텐츠의 표시를 중지하고 상기 제1 컨텐츠를 표시할 것인지 여부를 선택하기 위한 제1 사용자 인터페이스를 표시하는 단계 및 상기 제1 사용자 인터페이스를 통해 상기 제2 컨텐츠의 표시를 중지하고 상기 제1 컨텐츠를 표시하는 것을 선택하는 사용자 입력이 수신되면, 상기 제1 컨텐츠를 표시하는 단계를 포함할 수 있다.
한편, 상기 전자 장치의 제어 방법은 상기 제1 입력 장치의 조작에 따른 신호가 수신된 후 기 설정된 임계 구간 내에 상기 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 다시 수신되는지 여부를 식별하는 단계, 상기 제1 입력 장치의 조작에 따른 신호가 상기 임계 구간 내에 다시 수신되면, 상기 제1 컨텐츠를 표시하는 단계 및 상기 제1 입력 장치의 조작에 따른 신호가 상기 임계 구간 내에 다시 수신되지 않으면, 상기 전자 장치에 포함된 디스플레이의 동작을 유지하는 단계를 더 포함할 수 있다.
한편, 상기 전자 장치의 제어 방법은 상기 제1 컨텐츠가 상기 디스플레이 상에 표시되는 동안 상기 적어도 하나의 외부 장치 중 제3 외부 장치로부터 신호가 수신되면, 상기 수신된 신호가 이미지 신호인지 여부를 식별하는 단계, 상기 수신된 신호가 이미지 신호이면, 상기 수신된 신호에 대응되는 제2 컨텐츠를 표시하는 단계 및 상기 수신된 신호가 이미지 신호가 아니면, 상기 전자 장치에 포함된 디스플레이의 동작을 유지하는 단계를 더 포함할 수 있다.
한편, 상기 매핑 정보는 사용자의 설정 및 상기 적어도 하나의 외부 장치로부터 신호가 수신된 후 임계 시간 내에 상기 적어도 하나의 입력 장치로부터 신호가 수신된 이력 중 적어도 하나에 기초하여 획득될 수 있다.
한편, 상기 전자 장치의 제어 방법은 상기 전자 장치의 전원을 끄기 위한 사용자 입력이 수신되면, 상기 전자 장치와 연결된 적어도 하나의 외부 장치의 전원을 끄기 위한 제어 신호를 상기 적어도 하나의 외부 장치 각각으로 전송하는 단계를 더 포함할 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따르면, 전자 장치의 제어 방법을 실행하는 프로그램을 포함하는 비일시적 컴퓨터 판독 가능 기록매체에 있어서, 상기 전자 장치의 제어 방법은 사용자 입력을 수신하기 위한 적어도 하나의 입력 장치 중 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 컨텐츠를 제공하기 위한 적어도 하나의 외부 장치 및 상기 적어도 하나의 입력 장치 사이의 매핑 관계를 나타내는 매핑 정보를 에 기초하여 상기 적어도 하나의 외부 장치 중 상기 제1 입력 장치에 대응되는 제1 외부 장치를 식별하는 단계, 상기 제1 외부 장치로부터 이미지 신호를 수신하는 단계 및 상기 이미지 신호에 대응되는 제1 컨텐츠를 표시하는 단계를 포함할 수 있다.
도 1은 본 개시의 일 실시 예에 따른 전자 장치, 외부 장치 및 입력 장치를 나타내는 도면,
도 2는 본 개시의 일 실시 예에 따른 전자 장치의 구성을 간략하게 나타내는 블록도,
도 3은 본 개시에 따른 전자 장치와 외부 장치의 연결 상태 및 외부 장치의 전원 상태에 따른 다양한 실시 예를 설명하기 위한 흐름도,
도 4는 본 개시에 따른 제1 사용자 인터페이스를 통해 컨텐츠의 표시 여부에 대한 사용자 입력을 수신하는 것에 관련된 실시 예를 설명하기 위한 흐름도,
도 5 내지 도 8은 본 개시의 다양한 실시 예에 따른 제1 사용자 인터페이스들을 예시적으로 나타내는 도면들,
도 9는 본 개시에 따른 입력 장치의 오조작 여부를 식별하는 것에 관련된 실시 예를 설명하기 위한 흐름도,
도 10은 본 개시에 따른 외부 장치로부터 수신된 신호의 유형을 식별하는 것에 관련된 실시 예를 설명하기 위한 흐름도,
도 11은 전자 장치의 활성화 상태를 유지하는 것에 관련된 실시 예를 설명하기 위한 흐름도,
도 12는 제4 외부 장치가 슬립 상태로 동작하는 경우에 관련된 실시 예를 설명하기 위한 흐름도,
도 13은 제2 사용자 인터페이스를 제공하는 것에 관련된 실시 예를 설명하기 위한 흐름도,
도 14는 본 개시의 일 실시 예에 따른 제2 사용자 인터페이스를 예시적으로 나타내는 도면,
도 15는 본 개시의 일 실시 예에 따른 전자 장치의 구성을 상세하게 나타내는 블록도, 그리고,
도 16은 본 개시의 일 실시 예에 따른 전자 장치의 제어 방법을 나타내는 흐름도이다.
본 실시 예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 특정한 실시 형태에 대해 범위를 한정하려는 것이 아니며, 본 개시의 실시 예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다.
덧붙여, 하기 실시 예는 여러 가지 다른 형태로 변형될 수 있으며, 본 개시의 기술적 사상의 범위가 하기 실시 예에 한정되는 것은 아니다. 오히려, 이들 실시 예는 본 개시를 더욱 충실하고 완전하게 하고, 당업자에게 본 개시의 기술적 사상을 완전하게 전달하기 위하여 제공되는 것이다.
본 개시에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 권리범위를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 개시에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 개시에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상"등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 개시에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다.
반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 개시에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다.
대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
실시 예에 있어서 '모듈' 혹은 '부'는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 '모듈' 혹은 복수의 '부'는 특정한 하드웨어로 구현될 필요가 있는 '모듈' 혹은 '부'를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다.
한편, 도면에서의 다양한 요소와 영역은 개략적으로 그려진 것이다. 따라서, 본 발명의 기술적 사상은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되지 않는다.
이하에서는 첨부한 도면을 참고하여 본 개시에 따른 실시 예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.
도 1은 본 개시의 일 실시 예에 따른 전자 장치(100), 외부 장치(200) 및 입력 장치(300)를 나타내는 도면이다.
도 1에 도시된 바와 같이, 본 개시에 따른 다양한 실시 예를 구현하기 위한 시스템은 전자 장치(100), 외부 장치(200) 및 입력 장치(300)를 포함할 수 있다. 도 1에서는 본 개시에 따른 외부 장치(200) 및 입력 장치(300)의 다양한 유형을 표시하기 위해 두 개의 외부 장치(200)와 세 개의 입력 장치(300)를 도시하였으나, 전자 장치(100)에 연결되는 외부 장치(200)는 하나 또는 복수 개일 수 있으며, 전자 장치(100)에 연결되는 입력 장치(300)도 하나 또는 복수 개일 수 있다.
본 개시에 따른 '전자 장치(100)'는 디스플레이(110) 상에 이미지 또는 컨텐츠를 표시할 수 있는 장치를 말한다. 또한, 전자 장치(100)는 외부 장치(200) 및 입력 장치(300)와의 통신 연결을 통해 다양한 신호와 정보를 송수신할 수 있다. 특히, 전자 장치(100)는 외부 장치(200)로부터 수신된 컨텐츠를 디스플레이(110) 상에 표시할 수 있으며, 입력 장치(300)에 입력된 사용자 입력에 대응되는 신호를 수신할 수 있다. 예를 들어, 도 1에서는 전자 장치(100)의 예로서 TV를 도시하였으나, 그 밖에도 모니터, 랩탑 또는 태블릿 PC 등과 같이, 이미지 또는 컨텐츠를 표시할 수 있고 외부 장치(200) 및 입력 장치(300)와의 통신 연결이 가능한 장치라면, 그 종류의 제한 없이 본 개시에 따른 전자 장치(100)에 해당될 수 있다.
본 개시에 있어서, '컨텐츠'는 전자 장치(100)의 디스플레이(110) 상에 표시될 수 있는 모든 종류의 이미지를 총칭하는 용어로 사용된다. 예를 들어, 컨텐츠는 사진, 비디오 컨텐츠, 외부 장치(200)로부터 미러링된 화면, 전자 장치(100)의 운영체제 또는 어플리케이션에 의해 제공되는 화면 등을 포함할 수 있다.
본 개시에 따른 '외부 장치(200)'는 컨텐츠를 제공할 수 있는 장치를 말한다. 구체적으로, 외부 장치(200)는 전자 장치(100)와의 통신 연결을 통해 전자 장치(100)에 컨텐츠에 대응되는 이미지 신호를 전송할 수 있다. 외부 장치(200)는 컨텐츠의 소스를 제공하는 장치라는 의미에서 '소스 장치' 등으로 지칭될 수도 있다. 예를 들어, 도 1에 서는 외부 장치(200)의 예로서 PC(200-1) 및 콘솔 게임기(200-2)를 도시하였으나, 그 밖에도 셋탑박스, 스마트폰 등과 같이 컨텐츠를 제공할 수 있는 장치라면 본 개시에 따른 외부 장치(200)에 해당될 수 있다.
본 개시에 따른 '입력 장치(300)'는 사용자 입력을 수신할 수 있는 장치를 말한다. 구체적으로, 사용자가 입력 장치(300)를 조작함에 따라 사용자 입력이 수신되면, 수신된 사용자 입력에 대응되는 신호를 전자 장치(100)로 전송할 수 있다. 입력 장치(300)는 사용자의 조작을 위한 장치라는 의미에서 '컨트롤러' 등으로 지칭될 수 있다. 예를 들어, 도 1에서는 입력 장치(300)의 예로서 마우스(300-1), 키보드(300-2) 및 게임 패드(300-3)를 도시하였으나, 그 밖에도 사용자 입력을 수신할 수 있는 장치라면 본 개시에 따른 입력 장치(300)에 해당될 수 있다.
한편, 도 1에서는 외부 장치(200)들과 입력 장치(300)들이 전자 장치(100)에 유선으로 연결된 것과 같이 도시하였으나, 이는 예시에 불과할 뿐 외부 장치(200)들과 입력 장치(300)들 중 적어도 하나는 전자 장치(100)와 무선으로 통신 연결을 수행할 수도 있음은 물론이다.
이하에서는 도 2 내지 도 12를 참조하며 본 개시에 따른 다양한 실시 예에 대해 설명한다.
도 2는 본 개시의 일 실시 예에 따른 전자 장치(100)의 구성을 간략하게 나타내는 블록도이다.
도 2에 도시된 바와 같이, 본 개시의 일 실시 예에 따른 전자 장치(100)는 디스플레이(110), 복수의 통신 인터페이스(120), 메모리(130) 및 프로세서(140)를 포함할 수 있다.
디스플레이(110)는 프로세서(140)의 제어에 의하여 이미지를 출력할 수 있다. 구체적으로, 디스플레이(110)는 메모리(130)에 저장된 이미지 데이터, 외부 장치(200)로부터 수신된 이미지 신호 등에 기초하여 본 개시에 따른 컨텐츠를 출력할 수 있다. 또한, 디스플레이(110)는 사용자 인터페이스(user interface, UI)를 표시할 수도 있다.
디스플레이(110)는 LCD(Liquid Crystal Display Panel), OLED(Organic Light Emitting Diodes) 등으로 구현될 수 있으며, 또한 디스플레이(110)는 경우에 따라 플렉서블 디스플레이, 투명 디스플레이 등으로 구현되는 것도 가능하다. 다만, 본 개시에 따른 디스플레이(110)가 특정한 종류에 한정되는 것은 아니다.
복수의 통신 인터페이스(120)는 회로를 포함하며, 외부 장치(200)와의 통신을 수행할 수 있다. 구체적으로, 프로세서(140)는 통신 인터페이스(120)를 통해 연결된 외부 장치(200) 또는 입력 장치(300)로부터 각종 데이터 또는 정보를 수신할 수 있으며, 외부 장치(200)로 각종 데이터 또는 정보를 전송할 수도 있다. 본 개시에 따른 통신 인터페이스(120)는 복수 개로 구현될 수 있는바, 복수의 통신 인터페이스(120) 중 일부는 외부 장치(200)와의 통신에 이용될 수 있으며, 일부는 입력 장치(300)와의 통신에 이용될 수 있다.
통신 인터페이스(120)는 WiFi 모듈, Bluetooth 모듈, 무선 통신 모듈, NFC 모듈, HDMI(High-Definition Multimedia Interface) 모듈, USB(Universal Serial Bus) 모듈 및 UWB 모듈(Ultra Wide Band) 중 적어도 하나를 포함할 수 있다.
구체적으로, WiFi 모듈과 Bluetooth 모듈 각각은 WiFi 방식, Bluetooth 방식으로 통신을 수행할 수 있다. WiFi 모듈이나 Bluetooth 모듈을 이용하는 경우에는 SSID 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 한편, HDMI 모듈은 비압축 방식의 디지털 비디오/오디오 인터페이스 규격의 하나로서, 전자 장치(100)와 컨텐츠를 제공하는 외부 장치(200) 사이의 인터페이스를 제공할 수 있다. USB 모듈은 기 정의된 입출력 표준 프로토콜을 이용하여 전자 장치(100)와 컨텐츠를 제공하는 외부 장치(200) 사이의 통신 시스템을 제공할 수 있다. HDMI 모듈과 USB 모듈 외에도, 통신 인터페이스(120)는 전자 장치(100)와 외부 장치(200) 사이의 영상/음성 데이터 입출력을 제공하기 위한 다양한 모듈로 구현될 수 있음은 물론이다.
또한, 무선 통신 모듈은 IEEE, Zigbee, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), 5G(5th Generation) 등과 같은 다양한 통신 규격에 따라 통신을 수행할 수 있다. 그리고, NFC 모듈은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 통신을 수행할 수 있다. 그리고, UWB 모듈은 UWB 안테나 간 통신을 통하여, 펄스가 목표물에 도달하는 시간인 ToA(Time of Arrival), 송신 장치에서의 펄스 도래각인 AoA(Ange of Arrival)을 정확히 측정할 수 있고, 이에 따라 실내에서 수십 cm 이내의 오차 범위에서 정밀한 거리 및 위치 인식이 가능하다.
특히, 본 개시에 따른 다양한 실시 예에 있어서, 프로세서(140)는 통신 인터페이스(120)를 통해 입력 장치(300)로부터 입력 장치(300)의 조작에 따른 신호를 수신할 수 있다. 또한, 프로세서(140)는 통신 인터페이스(120)를 통해 외부 장치(200)로부터 이미지 신호를 수신할 수 있다. 그리고, 통신 인터페이스(120)가 HDMI CEC(Consumer Electronics Control)와 같이 외부 장치(200) 또는 입력 장치(300)로 제어 신호를 전송할 수 있도록 구현된 경우, 프로세서(140)는 외부 장치(200) 또는 입력 장치(300)의 전원을 키기 위한 제어 신호 또는 외부 장치(200) 또는 입력 장치(300)의 전원을 끄기 위한 제어 신호를 전송할 수도 있다.
메모리(130)에는 전자 장치(100)에 관한 적어도 하나의 인스트럭션(instruction)이 저장될 수 있다. 그리고, 메모리(130)에는 전자 장치(100)를 구동시키기 위한 O/S(Operating System)가 저장될 수 있다. 또한, 메모리(130)에는 본 개시의 다양한 실시 예들에 따라 전자 장치(100)가 동작하기 위한 각종 소프트웨어 프로그램이나 애플리케이션이 저장될 수도 있다. 그리고, 메모리(130)는 플래시 메모리(Flash Memory) 등과 같은 반도체 메모리나 하드디스크(Hard Disk) 등과 같은 자기 저장 매체 등을 포함할 수 있다.
구체적으로, 메모리(130)에는 본 개시의 다양한 실시 예에 따라 전자 장치(100)가 동작하기 위한 각종 소프트웨어 모듈이 저장될 수 있으며, 프로세서(140)는 메모리(130)에 저장된 각종 소프트웨어 모듈을 실행하여 전자 장치(100)의 동작을 제어할 수 있다. 즉, 메모리(130)는 프로세서(140)에 의해 액세스되며, 프로세서(140)에 의한 데이터의 독취/기록/수정/삭제/갱신 등이 수행될 수 있다.
한편, 본 개시에서 메모리(130)라는 용어는 메모리(130), 프로세서(140) 내 롬(미도시), 램(미도시) 또는 전자 장치(100)에 장착되는 메모리 카드(미도시)(예를 들어, micro SD 카드, 메모리 스틱)를 포함하는 의미로 사용될 수 있다.
특히, 본 개시에 따른 다양한 실시 예에 있어서, 메모리(130)에는 적어도 하나의 외부 장치(200) 및 적어도 하나의 입력 장치(300) 사이의 매핑 관계를 나타내는 매핑 정보, 매핑 정보의 기반이 되는 사용자의 설정에 대한 정보, 매핑 정보의 기반이 되는 입력 장치(300)로부터의 신호 수신 이력에 대한 정보 등이 저장될 수 있다. 또한, 메모리(130)에는 외부 장치(200)로부터 수신된 이미지 신호, 복수의 어플리케이션에 대한 정보, 사용자 인터페이스에 대한 정보 등이 저장될 수 있다. 그 밖에도 본 개시의 목적을 달성하기 위한 범위 내에서 필요한 다양한 정보가 메모리(130)에 저장될 수 있으며, 메모리(130)에 저장된 정보는 외부 장치(200)로부터 수신되거나 사용자에 의해 입력됨에 따라 갱신될 수도 있다.
프로세서(140)는 전자 장치(100)의 전반적인 동작을 제어한다. 구체적으로, 프로세서(140)는 디스플레이(110), 통신 인터페이스(120) 및 메모리(130)를 포함하는 전자 장치(100)의 구성과 연결되며, 상술한 바와 같은 메모리(130)에 저장된 적어도 하나의 인스트럭션을 실행함으로써, 전자 장치(100)의 동작을 전반적으로 제어할 수 있다.
프로세서(140)는 다양한 방식으로 구현될 수 있다. 예를 들어, 프로세서(140)는 주문형 집적 회로(Application Specific Integrated Circuit, ASIC), 임베디드 프로세서, 마이크로 프로세서, 하드웨어 컨트롤 로직, 하드웨어 유한 상태 기계(hardware Finite State Machine, FSM), 디지털 신호 프로세서(Digital Signal Processor, DSP) 중 적어도 하나로 구현될 수 있다. 한편, 본 개시에서 프로세서(140)라는 용어는 CPU(Central Processing Unit), GPU(Graphic Processing Unit) 및 MPU(Micro Processor Unit)등을 포함하는 의미로 사용될 수 있다.
특히, 본 개시에 따른 다양한 실시 예에 있어서, 프로세서(140)는 사용자의 입력 장치(300)에 대한 조작을 감지하고, 입력 장치(300)에 대응되는 외부 장치(200)로부터 제공되는 컨텐츠를 표시하도록 디스플레이(110)를 제어할 수 있다.
구체적으로, 프로세서(140)는 복수의 통신 인터페이스(120) 중 제1 통신 인터페이스(120)를 통해 적어도 하나의 입력 장치(300) 중 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호를 수신할 수 있다. 여기서, 제1 입력 장치(300)는 전자 장치(100)와 연결된 이력이 있는 적어도 하나의 입력 장치(300) 중 하나의 입력 장치(300)를 말하며, 예를 들어 전자 장치(100)와 연결된 마우스, 키보드 또는 게임 패드일 수 있다. 그리고, 제1 통신 인터페이스(120)는 전자 장치(100)와 제1 입력 장치(300)를 연결하는 통신 인터페이스(120)를 말하며, 예를 들어, Bluetooth 모듈 또는 USB 모듈일 수 있다.
한편, 본 개시에 있어서 입력 장치(300)의 '조작'이란 사용자가 입력 장치(300)에 포함된 키, 물리 버튼 또는 소프트 버튼 등을 누르는 행위, 사용자가 입력 장치(300)를 움직이는 행위 등과 같이, 입력 장치(300)를 통해 사용자 입력을 입력하기 위한 사용자의 행위를 총칭하기 위한 용어로 사용된다.
제1 입력 장치(300)의 조작에 따른 신호가 수신되면, 프로세서(140)는 매핑 정보에 기초하여 적어도 하나의 외부 장치(200) 중 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별할 수 있다.
여기서, '매핑 정보'는 적어도 하나의 외부 장치(200) 및 적어도 하나의 입력 장치(300) 사이의 매핑 관계를 나타내는 정보를 말한다. 구체적으로, 매핑 정보는 사용자의 설정 및 적어도 하나의 외부 장치(200)로부터 신호가 수신된 후 임계 시간 내에 적어도 하나의 입력 장치(300)로부터 신호가 수신된 이력 중 적어도 하나에 기초하여 획득될 수 있다. 또한, 매핑 정보는 개발자가 다양한 유형의 외부 장치(200)와 다양한 유형의 입력 장치(300)를 고려하여 기 정의할 수 있으며, 기 정의된 매핑 정보는 업데이트되거나 사용자의 설정에 의해 변경될 수 있다.
일 실시 예에 있어서, 매핑 정보는 사용자의 설정에 기초하여 획득되어 메모리(130)에 저장될 수 있다. 구체적으로, 프로세서(140)는 적어도 하나의 외부 장치(200)를 나타내는 리스트 또는 적어도 하나의 입력 장치(300)를 나타내는 리스트를 포함하는 사용자 인터페이스를 출력하도록 디스플레이(110)를 제어할 수 있으며, 사용자 인터페이스를 통해 입력 장치(300)에 대응되는 외부 장치(200)를 선택하기 위한 사용자 입력을 수신할 수 있다. 그리고, 프로세서(140)는 사용자 입력에 기초하여 입력 장치(300) 및 그에 대응되는 외부 장치(200)에 대한 정보를 매핑 정보로서 생성하고, 생성된 매핑 정보를 메모리(130)에 저장할 수 있다.
예를 들어, 프로세서(140)는 PC, 콘솔 게임기 및 셋탑박스를 포함하는 외부 장치(200) 리스트를 나타내는 사용자 인터페이스를 사용자에게 제공할 수 있다. 그리고, 프로세서(140)는 사용자 인터페이스를 통해 마우스에 대응되는 외부 장치(200)가 PC라는 것을 선택하는 사용자 입력을 수신할 수 있다. 이 경우, 프로세서(140)는 마우스가 PC가 서로 대응(또는 매핑)된다는 것을 나타내는 매핑 정보를 생성하고, 생성된 매핑 정보를 메모리(130)에 저장할 수 있다.
일 실시 예에 있어서, 매핑 정보는 적어도 하나의 외부 장치(200)로부터 신호가 수신된 후 임계 시간 내에 적어도 하나의 입력 장치(300)로부터 신호가 수신된 이력에 기초하여 획득되어 메모리(130)에 저장될 수 있다. 예를 들어, 외부 장치(200)인 콘솔 게임기로부터 신호가 수신된 후 10초 이내에 게임 패드로부터 신호가 수신되면, 프로세서(140)는 콘솔 게임기와 게임 패드가 서로 대응된다는 것을 나타내는 매핑 정보를 생성하고, 생성된 매핑 정보를 메모리(130)에 저장할 수 있다.
상술한 바와 같이 매핑 정보가 메모리(130)에 저장되면, 프로세서(140)는 메모리(130)에 저장된 매핑 정보에 기초하여, 적어도 하나의 외부 장치(200) 중 사용자의 조작에 따른 신호를 전자 장치(100)로 전송한 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별할 수 있다.
제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별되면, 프로세서(140)는 복수의 통신 인터페이스(120) 중 제2 통신 인터페이스(120)를 통해 제1 외부 장치(200)로부터 이미지 신호를 수신할 수 있다.
여기서, 제2 외부 장치(200)는 전자 장치(100)와 연결된 이력이 있는 적어도 하나의 외부 장치(200) 중 하나의 외부 장치(200)를 말하며, 예를 들어 전자 장치(100)와 연결된 PC, 콘솔 게임기 또는 셋탑박스일 수 있다. 그리고, 제2 통신 인터페이스(120)는 전자 장치(100)와 제1 외부 장치(200)를 연결하는 통신 인터페이스(120)를 말하며, 예를 들어, WiFi 모듈 또는 HDMI 모듈일 수 있다. 한편, 이미지 신호는 이미지에 관련된 정보를 포함하는 신호를 말하며, 이미지 신호라는 용어는 이미지 데이터, 비디오 입력 신호 등과 같은 용어로 대체될 수 있다.
구체적으로, 프로세서(140)는 이미지 신호의 전송을 요청하는 신호를 전송하도록 제2 통신 인터페이스(120)를 제어할 수 있으며, 제2 통신 인터페이스(120)를 통해 제1 외부 장치(200)로부터 이미지 신호를 수신할 수 있다. 뿐만 아니라, 제1 전자 장치(100)와 제1 외부 장치(200)가 서로 통신 연결되어 있고 제1 전자 장치(100)와 제1 외부 장치(200)의 전원이 모두 켜져 있는 경우이면, 전자 장치(100)의 요청 없이도 제1 외부 장치(200)로부터 전자 장치(100)로 이미지 신호가 전송되도록 설정되어 있을 수도 있다.
한편, 제2 외부 장치(200)로부터 이미지 신호를 수신하고 있는 동안 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별되면, 프로세서(140)는 이미지 신호의 전송을 중단하도록 요청하는 신호를 제2 외부 장치(200)로 전송할 수도 있다.
제1 외부 장치(200)로부터 이미지 신호가 수신되면, 프로세서(140)는 이미지 신호에 대응되는 제1 컨텐츠를 표시하도록 디스플레이(110)를 제어할 수 있다. 구체적으로, 프로세서(140)는 복수의 통신 인터페이스(120) 중 제1 외부 장치(200)와의 통신 연결을 위한 통신 인터페이스(120)를 디스플레이(110) 상에 표시되는 컨텐츠에 대응되는 이미지 신호를 제공하기 위한 통신 인터페이스(120)로 결정함으로써 디스플레이(110) 상에 표시되는 컨텐츠를 변경하여 표시할 수 있다.
예를 들어, 전자 장치(100)의 디스플레이(110) 상에 제2 외부 장치(200)로부터 수신된 이미지 신호에 기초하여 제2 컨텐츠가 표시되고 있는 경우, 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별되면, 프로세서(140)는 소위 '외부 입력'을 제2 외부 장치(200)에 대응되는 통신 인터페이스(120)에서 제1 외부 장치(200)에 대응되는 통신 인터페이스(120)로 변경함으로써, 디스플레이(110) 상에 표시되는 컨텐츠를 제2 컨텐츠에서 제1 컨텐츠로 변경하여 표시할 수 있다.
한편, 디스플레이(110) 상에 제2 외부 장치(200)로부터 수신된 이미지 신호에 기초하여 제2 컨텐츠가 표시되고 있는 경우이면, 프로세서(140)는 제2 컨텐츠 및 제1 컨텐츠가 분할 화면으로 나누어 표시되도록(즉, PBP, picture by picture로) 디스플레이(110)를 제어할 수 있으며, 제2 컨텐츠 상의 일부 영역에 제1 컨텐츠가 표시되도록(즉, PIP, picture in picture로) 디스플레이(110)를 제어할 수 있다.
이상에서 상술한 실시 예에 따르면, 전자 장치(100)는 전자 장치(100)와 연결된 입력 장치(300)의 조작에 기초하여, 전자 장치(100)의 디스플레이(110) 상에 표시되는 컨텐츠를 제공하기 위한 외부 장치(200)를 변경할 수 있게 되며, 이에 따라 사용자의 편의성이 향상될 수 있다.
도 3은 본 개시에 따른 전자 장치(100)와 외부 장치(200)의 연결 상태 및 외부 장치(200)의 전원 상태에 따른 다양한 실시 예를 설명하기 위한 흐름도이다.
도 2에 대한 설명에 있어서는, 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있는 상태이고, 제1 외부 장치(200)의 전원이 켜져 있는 상태인 경우를 전제로 본 개시에 따른 다양한 실시 예에 대해 설명하였다. 이와 달리, 도 3에 대한 설명에 있어서는, 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 상태이거나 제1 외부 장치(200)의 전원이 꺼져 있는 상태인 경우를 고려한 실시 예들에 대해 설명한다.
도 3을 참조하면, 프로세서(140)는 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호를 수신할 수 있다(S310). 구체적으로, 프로세서(140)는 제1 통신 인터페이스(120)를 통해 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호를 수신할 수 있다. 그리고, 제1 입력 장치(300)의 조작에 따른 신호가 수신되면, 프로세서(140)는 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별할 수 있다(S315). 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별하는 과정은 도 2에 대한 설명에서 전술한 바와 같이, 메모리(130)에 기 저장된 매핑 정보에 기초하여 수행될 수 있다.
제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별되면, 프로세서(140)는 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있는지 여부를 식별할 수 있다(S320). 구체적으로, 제1 외부 장치(200)는 전자 장치(100)와 연결된 이력이 있는 적어도 하나의 외부 장치(200) 중에서 식별되는바, 프로세서(140)는 제1 외부 장치(200)가 식별된 시점에서 제1 외부 장치(200)가 복수의 통신 인터페이스(120) 중 제2 통신 인터페이스(120)를 통해 전자 장치(100)와 연결되어 있는지 여부를 식별할 수 있다. 예를 들어, 프로세서(140)는 제1 외부 장치(200)가 HDMI 모듈을 통해 유선으로 전자 장치(100)와 연결되어 있는지 여부 및 제1 외부 장치(200)가 WiFi 다이렉트를 통해 무선으로 전자 장치(100)와 연결되어 있는지 여부 등을 식별할 수 있다.
제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 것으로 식별되면(S320-N), 프로세서(140)는 제1 외부 장치(200)에 대응되는 것으로 기 설정된 제1 어플리케이션을 실행할 수 있다(S355). 그리고, 프로세서(140)는 제1 어플리케이션에 대응되는 화면을 표시하도록 디스플레이(110)를 제어할 수 있다(S360). 여기서, 제1 어플리케이션은 전자 장치(100)에 의해 자체적으로 제공되는 복수의 어플리케이션 중 제1 외부 장치(200)에 대응되는 것으로 기 설정된 어플리케이션을 말한다. 복수의 어플리케이션에 대한 정보 및 복수의 어플리케이션과 외부 장치(200)들 사이의 대응 관계에 대한 정보는 전자 장치(100)의 메모리(130)에 저장될 수 있다. 외부 장치(200)와 어플리케이션 사이의 대응 관계는 개발자 또는 사용자에 의해 설정될 수 있다.
구체적으로, 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 것으로 식별되면, 제1 외부 장치(200)로부터 이미지 신호를 수신하여 제1 컨텐츠를 표시할 수 없는 경우라고 할 수 있으므로, 프로세서(140)는 제1 외부 장치(200)에 대응되는 제1 어플리케이션을 실행하고, 제1 어플리케이션에 대응되는 화면을 표시함으로써, 제1 외부 장치(200)가 연결되지 않은 경우에도 제1 입력 장치(300)를 조작한 사용자의 의도에 최대한 부합하는 기능을 제공할 수 있다.
예를 들어, 복수의 어플리케이션 중 제1 어플리케이션은 웹 브라우저 어플리케이션으로서, 제1 외부 장치(200)인 PC에 대응되는 것으로 설정될 수 있으며, 복수의 어플리케이션 중 제2 어플리케이션은 OTT(over the top) 서비스 어플리케이션으로서, 제2 외부 장치(200)인 콘솔 게임기에 대응되는 것으로 설정될 수 있다. 한편, 복수의 어플리케이션 중 제3 어플리케이션은 IoT(Internet of Things) 장치 관리 어플리케이션 또는 홈 화면 어플리케이션으로서, 외부 장치(200)에 대응되는 어플리케이션이 설정되지 않은 경우에 제공되는 것으로 설정될 수 있다.
제1 외부 장치(200)가 전자 장치(100)와 연결되어 있는 것으로 식별되면(S320-N), 프로세스는 제1 외부 장치(200)의 전원이 켜져 있는지 여부를 식별할 수 있다(S325). 구체적으로, 프로세서(140)는 제1 외부 장치(200)로부터 신호가 수신되는지 여부 또는 제1 외부 장치(200)에 기 설정된 값 이상의 전류가 흐르는지 여부를 감지함으로써 제1 외부 장치(200)의 전원이 켜져 있는지 여부를 식별할 수 있다.
제1 외부 장치(200)의 전원이 켜져 있는 것으로 식별되면(S325-Y), 프로세서(140)는 제1 외부 장치(200)로부터 제1 이미지 신호를 수신할 수 있다(S330). 그리고, 프로세서(140)는 제1 이미지 신호에 대응되는 제1 컨텐츠를 표시하도록 디스플레이(110)를 제어할 수 있다(S335). 다시 말해, 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있고 제1 외부 장치(200)의 전원이 켜져 있는 경우이면, 프로세서(140)는 도 2에 대한 설명에서 상술한 바와 같이, 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 제공하도록 디스플레이(110)의 화면을 자동으로 변경할 수 있다.
제1 외부 장치(200)의 전원이 켜져 있지 않은 것으로 식별되면(S325-N), 프로세서(140)는 제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 있는지 여부를 식별할 수 있다(S340). 구체적으로, 프로세서(140)는 제2 통신 인터페이스(120)를 통해 제어 신호를 제1 외부 장치(200)로 전송할 수 있는지 여부 및 제1 외부 장치(200)가 전자 장치(100)로부터 수신된 제어 신호에 기초하여 전원을 켤 수 있도록 구현되었는지 여부 등에 기초하여 제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 있는지 여부를 식별할 수 있다. 예를 들어, 제2 통신 인터페이스(120)가 HDMI CEC(Consumer Electronics Control)와 같이 외부 장치(200)로 제어 신호를 전송할 수 있도록 구현된 경우, 프로세서(140)는 제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 있는 것으로 식별할 수 있다.
제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 없는 것으로 식별되면(S340-N), 프로세서(140)는 제1 외부 장치(200)에 대응되는 것으로 기 설정된 제1 어플리케이션을 실행하고(S355), 제1 어플리케이션에 대응되는 화면을 표시할 수 있다(S360). 다시 말해, 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지만 제1 외부 장치(200)의 전원이 꺼져 있는 경우이고, 전자 장치(100)에 의해 전송되는 제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 없는 경우이면, 프로세서(140)는 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 경우와 마찬가지로, 제1 컨텐츠를 표시하는 대신 그에 대응되는 제1 어플리케이션을 대체적으로 제공할 수 있다. 단계 S355 및 단계 S360에 대한 설명은 전술한 바 있으므로, 기타 동일한 내용에 대한 중복 설명은 생략한다.
제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 있는 것으로 식별되면(S340-Y), 프로세서(140)는 제1 외부 장치(200)로 제1 외부 장치(200)의 전원을 키기 위한 제어 신호를 전송할 수 있다(S345). 구체적으로, 프로세서(140)는 제1 외부 장치(200)의 전원을 키기 위한 제어 신호를 제1 외부 장치(200)로 전송하도록 제2 통신 엔티페이스를 제어할 수 있다.
제1 외부 장치(200)로 제1 외부 장치(200)의 전원을 키기 위한 제어 신호를 전송한 후, 프로세서(140)는 제어 신호에 따라 제1 외부 장치(200)의 전원이 켜졌는지 여부를 식별할 수 있다(S350). 그리고, 제어 신호에 따라 제1 외부 장치(200)의 전원이 켜진 것으로 식별되면, 프로세서(140)는 제1 외부 장치(200)로부터 제1 이미지 신호를 수신하고(S330), 제1 이미지 신호에 대응되는 제1 컨텐츠를 표시할 수 있다(S335). 다시 말해, 제1 외부 장치(200)의 전원이 꺼져 있었으나 제어 신호의 전송에 따라 제1 외부 장치(200)의 전원이 켜지면, 프로세서(140)는 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 제공하도록 디스플레이(110)의 화면을 자동으로 변경할 수 있게 된다.
제어 신호에 따라 제1 외부 장치(200)의 전원이 켜지지 않은 것으로 식별되면, 프로세서(140)는 제1 외부 장치(200)에 대응되는 것으로 기 설정된 제1 어플리케이션을 실행하고(S355), 제1 어플리케이션에 대응되는 화면을 표시할 수 있다(S360). 다시 말해, 제어 신호의 전송에도 불구하고 제1 외부 장치(200)의 전원이 켜지지 않으면, 프로세서(140)는 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 경우 및 제어 신호에 따라 제1 외부 장치(200)의 전원을 킬 수 없는 상황인 경우와 마찬가지로, 제1 컨텐츠를 표시하는 대신 그에 대응되는 제1 어플리케이션을 대체적으로 제공할 수 있다.
한편, 이상에서는 전자 장치(100)의 전원이 꺼져 있는 경우 전자 장치(100)의 전원을 키기 위한 제어 신호를 전송하는 실시 예에 대해 설명하였으나, 프로세서(140)는 전자 장치(100)와 연결된 외부 장치(200)의 전원을 끄기 위한 제어 신호를 전송할 수도 있다. 구체적으로, 전자 장치(100)의 전원을 끄기 위한 사용자 입력이 수신되면, 프로세서(140)는 전자 장치(100)와 연결된 적어도 하나의 외부 장치(200)의 전원을 끄기 위한 제어 신호를 적어도 하나의 외부 장치(200) 각각으로 전송하도록 복수의 통신 인터페이스(120) 중 적어도 하나의 통신 인터페이스(120)를 제어할 수 있다. 이에 따라, 전자 장치(100) 및 전자 장치(100)와 연결된 적어도 하나의 외부 장치(200)에 대한 일괄적인 전원 관리가 가능하게 된다.
이상에서 상술한 실시 예에 따르면, 전자 장치(100)는 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 상태이거나 외부 장치(200)의 전원이 꺼져 있는 상태인 경우에도, 원격으로 외부 장치(200)의 전원을 킨 후 외부 장치(200)로부터 제공되는 컨텐츠를 표시하거나, 외부 장치(200)로부터 제공되는 컨텐츠를 표시하는 대신 그에 대응되는 어플리케이션을 대체적으로 제공함으로써, 사용자의 의도에 부합하는 컨텐츠를 제공할 수 있게 된다.
도 4는 본 개시에 따른 제1 사용자 인터페이스를 통해 컨텐츠의 표시 여부에 대한 사용자 입력을 수신하는 것에 관련된 실시 예를 설명하기 위한 흐름도이다. 그리고, 도 5 내지 도 8은 본 개시의 다양한 실시 예에 따른 제1 사용자 인터페이스들을 예시적으로 나타내는 도면들이다.
이상에서는 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별되면, 자동으로 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 제공하는 실시 예에 대해 설명하였다. 그러나, 사용자의 의도가 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 디스플레이(110)에 표시하기 위한 의도가 아닌 경우와 같이, 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 표시하기에 앞서 사용자의 의사를 확인하는 것이 바람직한 경우가 있을 수 있다. 이를 위해, 프로세서(140)는 후술하는 바와 같은 제1 사용자 인터페이스를 표시하고, 제1 사용자 인터페이스를 통해 수신된 사용자 입력에 기초하여 제1 컨텐츠의 표시 여부를 결정할 수 있다.
도 4를 참조하면, 프로세서(140)는 제2 외부 장치(200)로부터 제공되는 제2 컨텐츠를 표시하도록 디스플레이(110)를 제어할 수 있다(S410). 물론, 본 개시에 따른 제1 사용자 인터페이스는 제2 컨텐츠가 디스플레이(110) 상에 표시되고 있는 경우뿐만 아니라, 디스플레이(110) 상에 아무런 컨텐츠가 표시되고 있지 않은 경우, 즉 적어도 하나의 외부 장치(200)로부터 아무런 이미지 신호도 수신되지 않는 경우에도 제공될 수 있으나, 이하에서는 제2 컨텐츠가 디스플레이(110) 상에 표시되고 있는 경우를 예시적으로 전제하여 설명한다. 여기서, 제2 컨텐츠는 제1 외부 장치(200)에 의해 제공되는 제1 컨텐츠와 상이한 컨텐츠를 말한다.
제2 외부 장치(200)로부터 제공되는 제2 컨텐츠가 표시되는 동안, 프로세서(140)는 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호를 수신할 수 있다(S420). 여기서, 제2 외부 장치(200)는 제1 컨텐츠를 제공하는 제1 외부 장치(200)와 상이한 장치를 말한다. 제1 입력 장치(300)의 조작에 따른 신호가 수신되면, 프로세서(140)는 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별할 수 있다(S430).
제1 외부 장치(200)가 식별되면, 프로세서(140)는 제1 사용자 인터페이스를 표시하도록 디스플레이(110)를 제어할 수 있다(S440). 구체적으로, 프로세서(140)는 메모리(130)에 저장된 제1 사용자 인터페이스에 대한 정보에 기초하여 도 5 내지 도 8에 도시된 바와 같은 제1 사용자 인터페이스를 표시할 수 있다. 다만, 도 5 내지 도 8에 도시된 제1 사용자 인터페이스는 예시적인 것에 불과하다.
도 5의 예시를 참조하면, 제1 사용자 인터페이스는 "콘솔 게임기 화면으로 이동하시겠습니까?"와 같이 제1 외부 장치(200)인 콘솔 게임기로부터 제공되는 컨텐츠를 표시할 것인지 여부를 확인하기 위한 안내 메시지와, "OK" 및 "CANCEL"과 같이 사용자의 선택을 위한 UI 아이템들을 포함할 수 있다.
도 6의 예시를 참조하면, "현재 마우스를 사용할 수 없습니다. 외부 입력을 PC로 변경하시겠습니까?"와 같이 현재 표시 중인 제2 컨텐츠의 화면에서 제1 입력 장치(300)인 마우스를 사용할 수 없다는 안내 메시지, 제1 외부 장치(200)인 PC로부터 제공되는 컨텐츠를 표시할 것인지 여부를 확인하기 위한 안내 메시지, 그리고, "OK" 및 "CANCEL"과 같이 사용자의 선택을 위한 UI 아이템들을 포함할 수 있다.
도 7의 예시를 참조하면, "현재 마우스를 사용할 수 없습니다. AAA 앱 화면으로 이동하시겠습니까?"와 같이 현재 표시 중인 제2 컨텐츠의 화면에서 제1 입력 장치(300)인 마우스를 사용할 수 없다는 안내 메시지, 전자 장치(100)에 의해 자체적으로 제공되는 어플리케이션인 AAA 어플리케이션 화면을 표시할 것인지 여부를 확인하기 위한 안내 메시지, 그리고, "OK" 및 "CANCEL"과 같이 사용자의 선택을 위한 UI 아이템들을 포함할 수 있다.
여기서, 제1 외부 장치(200)인 PC로부터 제공되는 컨텐츠를 표시할 것인지 여부를 확인하기 위한 메시지 대신 AAA 어플리케이션 화면을 표시할 것인지 여부를 확인하는 안내 메시지를 제공하는 것은, 도 3의 실시 예에서 설명한 바와 같이, 제1 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않거나, 제1 외부 장치(200)의 전원이 꺼져 있는 경우임을 전제한 것이다.
도 8의 예시를 참조하면, "현재 마우스를 사용할 수 없습니다. 외부 입력을 PC로 변경하시거나, 키보드를 사용하세요."와 같이, 현재 표시 중인 제2 컨텐츠의 화면에서 제1 입력 장치(300)인 마우스를 사용할 수 없다는 안내 메시지, 제1 외부 장치(200)인 PC로부터 제공되는 컨텐츠를 표시할 것인지 여부를 확인하기 위한 안내 메시지, 현재 표시 중인 제2 컨텐츠의 화면에서 제1 입력 장치(300)와 다른 입력 장치(300)인 키보드를 사용할 수 있다는 안내 메시지, 그리고, "PC로 변경", "키보드 가이드 보기" 및 "CANCEL"와 같이 사용자의 선택을 위한 UI 아이템들을 포함할 수 있다.
제1 사용자 인터페이스를 통해 제2 컨텐츠의 표시를 중지하고 제1 컨텐츠를 표시하는 것을 선택하는 사용자 입력이 수신되면(S450-Y), 프로세서(140)는 제1 외부 장치(200)로부터 이미지 신호를 수신하고(S460), 이미지 신호에 대응되는 제1 컨텐츠를 표시할 수 있다(S470). 반면, 제1 사용자 인터페이스를 통해 제2 컨텐츠의 표시를 중지하고 제1 컨텐츠를 표시하는 것을 선택하는 사용자 입력이 수신되지 않으면(S450-Y), 프로세서(140)는 디스플레이(110)의 동작을 유지할 수 있다(S480).
여기서, 제2 컨텐츠의 표시를 중지하고 제1 컨텐츠를 표시하는 것을 선택하는 사용자 입력이 수신되지 않는 경우는, 도 5 내지 도 8의 "CANCEL"와 같은 UI 아이템을 선택하는 사용자 입력이 수신된 경우뿐만 아니라, 기 설정된 시간 동안 제1 사용자 인터페이스를 통해 아무런 사용자 입력이 수신되지 않은 경우를 포함할 수 있다.
한편, 이상의 예시에서 "현재 마우스를 사용할 수 없습니다"와 같은 안내 메시지가 표시되는 것은, 현재 전자 장치(100)의 디스플레이 상에 표시되고 있는 화면이 마우스를 지원하지 않는 경우(예: 게임 컨텐츠 화면이 표시되고 있는 경우)임을 전제한다. 또한, 현재 전자 장치(100)의 디스플레이(110) 상에 표시되고 있는 화면이 마우스를 지원하지 않는 경우에도, 제1 사용자 인터페이스 상의 마우스를 이용하여 UI 아이템을 선택할 수 있도록 제1 사용자 인터페이스에 대응되는 레이어 상에 마우스 포인터가 표시될 수는 있다.
한편, 이상에서는 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별된 후 제1 외부 장치(200)로부터 이미지 신호를 수신하기에 앞서 제1 사용자 인터페이스를 표시하는 실시 예에 대해 설명하였으나, 실시 예에 따라서는 제1 외부 장치(200)로부터 이미지 신호를 수신하는 동안 제1 사용자 인터페이스를 표시하는 것과 같이 다양한 시점에 제1 사용자 인터페이스가 제공될 수 있음은 물론이다.
이상에서 상술한 실시 예에 따르면, 전자 장치(100)는 외부 장치(200)로부터 제공되는 컨텐츠를 표시하도록 디스플레이(110)의 화면을 전환하기에 앞서 사용자의 의사를 확인함으로써, 사용자의 편의성을 향상시킬 수 있게 된다.
도 9는 본 개시에 따른 입력 장치(300)의 오조작 여부를 식별하는 것에 관련된 실시 예를 설명하기 위한 흐름도이다.
이상에서는 제1 입력 장치(300)로부터 신호가 수신되면 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별하는 실시 예에 대해 설명하였으나, 사용자가 조작 의도 없이 제1 입력 장치(300)를 건드리는 경우가 있을 수 있다. 이와 같이 제1 입력 장치(300)의 오조작의 경우에도 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)로부터 컨텐츠를 수신하여 디스플레이(110) 상에 표시하는 것은 사용자의 의도에 반하게 될 수 있다.
따라서, 본 개시에 따른 프로세서(140)는 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호가 수신되면(S910), 기 설정된 제1 임계 구간 내에 제1 입력 장치(300)의 조작에 따른 신호가 다시 수신되는지 여부(S920)에 따라 제1 외부 장치(200)로부터 수신되는 제1 컨텐츠의 표시 여부를 결정할 수 있다.
제1 임계 구간 내에 제1 입력 장치(300)의 조작에 따른 신호가 다시 수신되면(S920-Y), 프로세서(140)는 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별하고(S930), 제1 외부 장치(200)로부터 이미지 신호를 수신하며(S940), 이미지 신호에 대응되는 제1 컨텐츠를 표시할 수 있다(S950). 여기서, 제1 임계 구간은 제1 입력 장치(300)로부터 수신된 제1 신호의 수신된 시점을 기준으로 기산될 수 있을 뿐만 아니라, 제1 입력 장치(300)로부터 수신된 제1 신호의 수신 후 소정의 시간 후에 기산될 수 있다.
예를 들어, 제1 입력 장치(300)의 조작에 따른 첫번째 신호가 수신된 후 제1 임계 구간인 5초 이내에 다시 제1 입력 장치(300)의 조작에 따른 두번째 신호가 수신되면, 프로세서(140)는 제1 입력 장치(300)에 대한 사용자의 조작 의도가 있는 것으로 결정하고, 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 제공하도록 디스플레이(110)의 화면을 자동으로 변경할 수 있다.
한편, 사용자의 오조작에 따른 제1 입력 장치(300)의 신호는 연이어 발생할 수 있다. 예를 들어, 사용자가 제1 입력 장치(300)인 마우스의 위치를 이동시키는 경우, 복수 개 신호가 발생되어 전자 장치(100)로 전송될 수 있으며, 전자 장치(100)는 제1 임계 구간 내에 복수 개의 신호를 수신할 수 있게 된다. 이 경우, 제1 임계 구간 내에 제1 입력 장치(300)로부터 복수 개의 신호를 수신하였다는 점에 기초하여 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 제공하도록 디스플레이(110)의 화면을 변경하면 사용자의 의도에 반하게 될 수 있다.
따라서, 전술한 바와 같이, 제1 임계 구간은 제1 입력 장치(300)로부터 수신된 제1 신호의 수신 후 소정의 시간 후에 기산될 수 있다. 예를 들어, 프로세서(140)는 제1 입력 장치(300)의 조작에 따른 첫번째 신호가 수신된 후 3초가 지난 후부터 기산하여 5초 이내에 다시 제1 입력 장치(300)의 조작에 따른 두번째 신호가 수신되면, 제1 입력 장치(300)에 대한 사용자의 조작 의도가 있는 것으로 결정하고, 제1 외부 장치(200)로부터 제공되는 제1 컨텐츠를 제공하도록 디스플레이(110)의 화면을 자동으로 변경할 수 있다.
한편, 제1 임계 구간 내에 제1 입력 장치(300)의 조작에 따른 신호가 다시 수신되지 않으면(S920-N), 프로세서(140)는 디스플레이(110)의 동작을 유지할 수 있다(S960). 구체적으로, 디스플레이(110) 상에 제2 컨텐츠가 표시되고 있는 경우, 프로세서(140)는 제2 컨텐츠의 표시를 유지하도록 디스플레이(110)를 제어할 수 있다. 디스플레이(110) 상에 아무런 컨텐츠가 표시되고 있지 않은 경우, 프로세서(140)는 디스플레이(110) 상에 아무런 컨텐츠가 표시되고 있지 않은 상태를 유지하도록 디스플레이(110)를 제어할 수 있다.
한편, 이상에서는 제1 임계 구간 내에 제1 입력 장치(300)의 조작에 따른 신호가 다시 수신되는지 여부에 기초하여 제1 입력 장치(300)의 오조작 여부를 식별하는 실시 예에 대해 설명하였으나, 이와 달리 제1 입력 장치(300)의 조작에 따른 신호가 수신된 횟수에 기초하여 제1 입력 장치(300)의 오조작 여부를 식별하는 것도 가능함은 물론이다.
이상에서 상술한 실시 예에 따르면, 전자 장치(100)는 입력 장치(300)의 오조작의 경우 사용자의 의도에 반하여 디스플레이(110)의 화면이 전환되는 것을 방지할 수 있게 된다.
도 10은 본 개시에 따른 외부 장치(200)로부터 수신된 신호의 유형을 식별하는 것에 관련된 실시 예를 설명하기 위한 흐름도이다.
이상에서는 외부 장치(200)로부터 이미지 신호를 수신하고 수신된 이미지 신호에 대응되는 컨텐츠를 표시하는 것에 관련된 실시 예를 설명하였으나, 외부 장치(200)로부터 이미지 신호가 아닌 신호가 수신될 수도 있다. 그리고, 이미지 신호가 아닌 신호가 수신되는 경우에도 디스플레이(110)에 표시되는 화면을 전환하는 것은 불필요할 뿐만 아니라 사용자에게 불편을 초래할 수도 있다. 따라서, 프로세서(140)는 외부 장치(200)로부터 수신된 신호의 유형을 식별하고, 그 유형에 기초하여 디스플레이(110)에 표시되는 화면의 전환 여부를 결정할 수 있다.
구체적으로, 도 10을 참조하면, 프로세서(140)는 제1 컨텐츠가 표시되는 동안 제3 외부 장치(200)로부터 신호를 수신할 수 있다(S1010). 그리고, 제3 외부 장치(200)로부터 신호가 수신되면, 프로세서(140)는 수신된 신호가 이미지 신호인지 여부를 식별할 수 있다(S1020).
구체적으로, 프로세서(140)는 수신된 신호가 이미지에 관련된 정보(예: 픽셀 정보)를 포함하고 있는지 여부를 식별함으로써, 수신된 신호가 이미지 신호인지 여부를 식별할 수 있다.
수신된 신호가 이미지 신호이면, 프로세서(140)는 수신된 신호에 대응되는 제2 컨텐츠를 표시할 수 있다(S1030). 반면, 수신된 신호가 이미지 신호가 아니면, 프로세서(140)는 디스플레이(110)의 동작을 유지할 수 있다(S1040). 예를 들어, 제3 외부 장치(200)의 업데이트에 따라 전자 장치(100)의 소프트웨어를 업데이트하기 위해 수신된 신호인 경우와 같이, 제3 외부 장치(200)로부터 수신된 신호가 이미지 신호가 아니면, 프로세서(140)는 제3 외부 장치(200)에 대응되는 화면을 표시하도록 디스플레이(110)의 화면을 전환하지 않고, 표시되고 있던 제1 컨텐츠를 유지할 수 있다.
한편, 상술한 바와 같이 외부 장치로부터 수신된 신호의 유형을 식별하기 위한 모듈은 소프트웨어 모듈로 구현될 수 있을 뿐만 아니라 시스템 온 칩(system on chip) 방식의 하드웨어 모듈로 구현될 수도 있다.
이상에서 상술한 실시 예에 따르면, 전자 장치(100)는 외부 장치(200)로부터 수신된 신호가 이미지 신호가 아닌 비정상 신호인 경우 디스플레이(110)의 화면이 전환되어 사용자에게 불편을 초래하는 것을 방지할 수 있게 된다.
도 11은 전자 장치의 활성화 상태를 유지하는 것에 관련된 실시 예를 설명하기 위한 흐름도이다.
이상에서는 전자 장치의 전원이 종료되지 않은 상태임을 전제로, 전자 장치와 연결된 입력 장치의 조작에 기초하여, 컨텐츠를 제공하기 위한 외부 장치를 변경하는 등의 실시 예들에 상술한 바 있다. 도 11에서는 전자 장치의 전원을 종료하기 위한 사용자 입력이 수신된 후, 다시 입력 장치의 조작이 수신되는 경우에 관련된 실시 예에 대해 설명한다.
도 11에 도시된 바와 같이, 프로세서는 제1 컨텐츠가 표시되는 동안 제2 입력 장치로부터 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호를 수신할 수 있다(S1110). 구체적으로, 프로세서는 제1 컨텐츠가 표시되는 동안 복수의 통신 인터페이스 중 제4 통신 인터페이스를 통해 적어도 하나의 입력 장치 중 제2 입력 장치로부터 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호를 수신할 수 있다.
여기서, 제2 입력 장치는 전자 장치에 연결된 입력 장치로서, 예를 들어 마우스 또는 키보드일 수 있다. 제1 신호는 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 신호를 말하며, 예를 들어 제2 입력 장치인 마우스를 이용하여 디스플레이 상에 표시된 전원 종료 아이템을 선택하는 사용자 입력에 기초하여 수신될 수 있다. 제4 통신 인터페이스는 전자 장치와 제2 입력 장치를 연결하는 통신 인터페이스를 말하며, 예를 들어, Bluetooth 모듈 또는 USB 모듈일 수 있다.
제1 신호가 수신되지 않으면(S1110-N), 프로세서는 제1 신호가 수신될 때까지 전자 장치의 동작을 유지할 수 있다. 이에 따라 제1 신호가 수신될 때까지 제1 컨텐츠의 표시가 디스플레이 상에 유지될 수 있다.
반면, 제1 신호가 수신되면(S1110-Y), 프로세서는 디스플레이의 동작을 중지하고(S1120), 제4 통신 인터페이스에 대한 활성화 상태를 유지할 수 있다(S1130). 구체적으로, 프로세서는 디스플레이의 동작을 중지하도록 디스플레이를 제어하고, 디스플레이의 동작이 중지되는 동안, 제4 통신 인터페이스에 대한 활성화 상태가 유지되도록 제4 통신 인터페이스를 제어할 수 있다.
프로세서는 디스플레이의 동작이 중지되는 동안, 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제2 신호를 수신할 수 있다(S1140). 디스플레이의 동작이 중지되는 동안 제4 통신 인터페이스를 통해 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제2 신호를 수신할 수 있다.
제2 신호가 수신되지 않으면(S1140-N), 프로세서는 제2 신호가 수신될 때까지 전자 장치의 동작을 유지할 수 있다. 이에 따라 제2 신호가 수신될 때까지 디스플레이의 동작이 유지되고 제4 통신 인터페이스에 대한 활성화 상태 또한 유지될 수 있다.
반면, 제2 신호가 수신되면(S1140-Y), 프로세서는 제1 컨텐츠를 표시할 수 있다(S1150). 즉, 제2 신호가 수신되면, 프로세서는 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호가 수신되기 전에 디스플레이 상에 표시되고 있던 제1 컨텐츠(즉, last source에 대응되는 컨텐츠)를 다시 표시하도록 디스플레이를 제어할 수 있다. 실시 예에 따라서는 홈 화면 또는 기 설정된 어플리케이션에 의해 제공되는 화면이 표시될 수도 있다.
이상에서는 제4 통신 인터페이스에 대한 활성화 상태를 유지하고, 제4 통신 인터페이스를 통해 연결된 제2 입력 장치로부터 사용자의 조작에 따른 제2 신호를 수신하는 경우를 전제로 설명하였으나, 복수의 통신 인터페이스 중 전자 장치의 전원을 끄기 위한 사용자 입력에 불구하고 활성화 상태가 유지되는 통신 인터페이스의 종류 및 개수와, 활성화 상태가 유지되는 통신 인터페이스와 연결된 입력 장치의 종류 및 개수에 특별한 제한이 따르지 않음은 물론이다.
종래 기술에 따르면, 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호가 수신되는 경우, 전력 소모를 방지하기 위해 디스플레이뿐만 아니라 통신 인터페이스를 비롯한 구성들의 전원이 종료되며, 예외적으로 전원을 키기 위한 사용자 입력에 대응되는 신호를 원격 제어 장치로부터 수신하기 위해 적외선 신호 수신 모듈만이 활성화 상태로 유지될 수 있다. 따라서, 종래 기술에 따르면, 전자 장치의 전원이 종료된 상태에서 마우스 또는 키보드와 같은 제2 입력 장치에 사용자 조작이 입력되도라도, 전자 장치는 제2 입력 장치의 조작에 따른 신호를 수신할 수 없게 된다.
반면, 본 개시에 따르면, 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호가 수신되는 경우, 전자 장치는 디스플레이의 전원을 종료하되, 제2 입력 장치의 조작에 따른 신호를 수신하기 위해 제4 통신 인터페이스에 대한 활성화 상태를 유지할 수 있다. 다시 말해, 전자 장치는 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호가 수신되더라도, 제4 통신 인터페이스를 통해 제2 입력 장치의 조작에 따른 신호를 수신할 수 있도록 하는 대기 모드에 진입할 수 있다. 그리고, 전자 장치는 디스플레이의 동작이 중지되는 동안에도, 활성화된 제4 통신 인터페이스를 통해 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제2 신호를 수신할 수 있게 된다.
도 12는 제4 외부 장치가 슬립 상태로 동작하는 경우에 관련된 실시 예를 설명하기 위한 흐름도이다.
도 3에 대한 설명에 있어서는 외부 장치가 전자 장치와 연결되어 있지 않은 상태이거나 외부 장치의 전원이 꺼져 있는 상태인 경우, 원격으로 외부 장치의 전원을 킨 후 외부 장치로부터 제공되는 컨텐츠를 표시하거나, 외부 장치로부터 제공되는 컨텐츠를 표시하는 대신 그에 대응되는 어플리케이션을 대체적으로 제공하는 실시 예에 대해 상술한 바 있다. 이와 달리, 도 12 내지 도 14에서는 외부 장치가 전자 장치와 연결되어 있고 외부 장치의 전원이 켜져 있으나 슬립 상태(sleep state)에 있는 경우에 관련된 실시 예에 대해 설명한다.
도 12를 참조하면, 프로세서는 제4 외부 장치가 슬립 상태로 동작하는 동안 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제3 신호를 수신할 수 있다(S1210). 여기서, 슬립 상태란 외부 장치의 구성이 비활성화된 상태를 말하며, 다만 제5 통신 인터페이스와 같은 일부 구성은 제4 외부 장치를 활성화시키기 위한 신호를 수신하기 위해 제4 외부 장치의 슬립 상태에서도 활성화 상태를 유지할 수 있다.
제4 외부 장치는 전자 장치와 연결된 하나의 외부 장치를 말한다. 그리고, 제3 신호는 제2 입력 장치의 조작에 따른 신호로서, 예를 들어 제2 입력 장치인 마우스를 움직이는 조작에 따른 신호, 제2 입력 장치인 키보드의 임의의 버튼을 입력하는 조작에 따른 신호일 수 있다.
제3 신호가 수신되지 않으면(S1210-N), 프로세서는 제3 신호가 수신될 때까지 전자 장치의 동작을 유지할 수 있다. 반면, 제3 신호가 수신되면(S1210-Y), 프로세서는 기 설정된 제2 임계 구간 동안 제3 신호를 제4 외부 장치로 전송할 수 있다(S1220).
구체적으로, 제4 외부 장치가 슬립 상태로 동작하는 동안 제4 통신 인터페이스를 통해 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 프로세서는 기 설정된 제2 임계 구간 동안 제3 신호를 제4 외부 장치로 전송하도록 복수의 통신 인터페이스 중 제5 통신 인터페이스를 제어할 수 있다. 이에 따라, 제3 신호는 전자 장치를 통해 제4 외부 장치로 전송될 수 있다. 예를 들어, 제2 임계 구간은 3초 내지 5초의 구간일 수 있으며, 다만 사용자 또는 개발자의 설정에 따라 변경될 수 있다.
한편, 제5 통신 인터페이스는 전자 장치와 제4 외부 장치를 연결하는 통신 인터페이스를 말하며, 예를 들어, WiFi 모듈 또는 HDMI 모듈일 수 있다. 그리고, 제5 통신 인터페이스는 제4 외부 장치를 활성화시키기 위한 신호를 수신하기 위해 제4 외부 장치의 슬립 상태에서도 활성화 상태를 유지할 수 있다.
한편, 제3 신호가 제4 외부 장치로 전송되는 동안, 프로세서는 제1 컨텐츠를 표시하도록 디스플레이를 제어할 수도 있다. 여기서, 제1 컨텐츠는 제2 입력 장치의 조작에 따른 제3 신호가 수신되기 전에 디스플레이 상에 표시되고 있던 컨텐츠를 말한다. 즉, 프로세서는 디스플레이 상에 아무런 컨텐츠를 표시하지 않은 상태(즉, no signal 상태)에서 제3 신호를 제4 외부 장치로 전송할 수 있을 뿐만 아니라, 제3 신호가 수신되기 전에 디스플레이 상에 표시되고 있던 제1 컨텐츠를 다시 표시하는 상태에서 제3 신호를 제4 외부 장치로 전송할 수 있다.
제2 임계 구간 내에 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되면(S1230-Y), 프로세서는 제4 외부 장치로부터 제1 이미지 신호를 수신하고(S1240), 수신된 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시할 수 있다(S1250). 구체적으로, 제2 임계 구간 동안 제3 신호를 제4 외부 장치로 전송한 결과, 제5 통신 인터페이스를 통해 제4 외부 장치로부터 제3 신호에 대한 응답 신호가 수신되면, 프로세서는 제4 외부 장치의 슬립 상태가 활성화 상태로 변경된 것으로 식별할 수 있다. 그 후, 프로세서는 제5 통신 인터페이스를 통해 제4 외부 장치로부터 제1 이미지 신호를 수신하고, 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시하도록 디스플레이를 제어할 수 있다.
제2 임계 구간 내에 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되지 않으면(S1230-N), 프로세서는 제1 컨텐츠를 표시하도록 디스플레이를 제어할 수 있다(S1260). 그 후 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제4 신호가 수신되면(S1270), 프로세서는 제4 신호에 기초하여 전자 장치의 동작을 제어할 수 있다(S1280). 구체적으로, 제2 임계 구간 이후 제4 통신 인터페이스를 통해 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제4 신호가 수신되면, 제4 신호에 기초하여 전자 장치의 동작을 제어할 수 있다.
종래 기술에 따르면, 예를 들어, 전자 장치가 TV 또는 모니터 등과 같은 디스플레이 장치이고 제4 외부 장치가 PC와 같은 장치인 경우, 제4 외부 장치가 전자 장치로 컨텐츠를 제공하는 동안에는 제2 입력 장치에 기초하여 제4 외부 장치에 의해 제공되는 컨텐츠/화면만을 제공할 수 있다. 또한, 제4 외부 장치가 슬립 상태이면 제2 입력 장치에 기초하여 전자 장치의 동작을 제어할 수 있을 뿐, 제4 외부 장치의 동작을 제어할 수는 없다.
반면, 본 개시에 따른 전자 장치는 제4 외부 장치가 슬립 상태로 동작하는 동안 우선 제4 외부 장치로 제3 신호를 전송함으로써, 제4 외부 장치의 활성화를 시도할 수 있게 된다. 그리고 그럼에도 불구하고 임계 구간 동안 제4 외부 장치가 활성화되지 않는다면, 전자 장치는 제2 입력 장치에 기초하여 전자 장치에 의해 제공되는 컨텐츠/화면을 제어함으로써 사용자의 의도에 부합하는 동작을 수행할 수 있게 된다.
도 13은 제2 사용자 인터페이스를 제공하는 것에 관련된 실시 예를 설명하기 위한 흐름도이고, 도 14는 본 개시의 일 실시 예에 따른 제2 사용자 인터페이스를 예시적으로 나타내는 도면이다.
도 12에 대한 실시 예에서는 제4 외부 장치가 슬립 상태로 동작하는 동안 우선 제4 외부 장치로 제2 입력 장치의 조작에 따른 제3 신호를 전송하는 것에 관련된 실시 예에 대해 설명하였으나, 도 13에서는 제2 입력 장치의 조작에 따른 제3 신호에 기초하여 사용자 인터페이스를 제공하는 것에 관련된 실시 예에 대해 설명한다.
도 13을 참조하면, 프로세서는 제4 외부 장치가 슬립 상태로 동작하는 동안 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제3 신호를 수신할 수 있다(S1310). 구체적으로, 프로세서는 제4 외부 장치가 슬립 상태로 동작하는 동안 제4 통신 인터페이스를 통해 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제3 신호를 수신할 수 있다. 제4 외부 장치, 제2 입력 장치 및 제3 신호는 도 12에 대한 설명에서 정의한 바 있으므로 동일한 내용에 대한 중복 설명은 생략한다.
제3 신호가 수신되지 않으면(S1310-N), 프로세서는 제3 신호가 수신될 때까지 전자 장치의 동작을 유지할 수 있다. 반면, 제3 신호가 수신되면(S1310-Y), 전자 장치는 제4 외부 장치의 슬립 상태를 활성화 상태로 변경하기 위한 아이템을 포함하는 제2 사용자 인터페이스를 표시할 수 있다(S1320).
구체적으로, 제4 통신 인터페이스를 통해 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 프로세서는 제4 외부 장치의 슬립 상태를 활성화 상태로 변경하기 위한 아이템을 포함하는 제2 사용자 인터페이스를 표시하도록 디스플레이를 제어할 수 있다. 즉, 프로세서는 제4 외부 장치가 슬립 상태로 동작하는 동안 제2 입력 장치의 조작에 따른 제3 신호가 수신되는 것에 응답하여 바로 제3 신호를 제4 외부 장치로 전송하지 않고, 사용자 입력을 수신하기 위한 제2 사용자 인터페이스를 수신할 수 있다.
제2 입력 장치로부터 수신된 제5 신호에 기초하여 활성화 상태로 변경하기 위한 아이템이 선택되면(S1340-Y), 프로세서는 기 설정된 제2 임계 구간 동안 제3 신호를 제4 외부 장치로 전송할 수 있다(S1350). 구체적으로, 제2 입력 장치로부터 수신된 제5 신호에 기초하여 제2 사용자 인터페이스를 통해 제4 외부 장치의 슬립 상태를 활성화 상태로 변경하기 위한 아이템이 선택되면, 프로세서는 기 설정된 제2 임계 구간 동안 제3 신호를 제4 외부 장치로 전송하도록 복수의 통신 인터페이스 중 제5 통신 인터페이스를 제어할 수 있다.
도 14의 예시를 참조하면, 제2 사용자 인터페이스는 "현재 PC가 슬립 상태에 있습니다. PC를 제어하시겠습니까?"와 같은 안내 메시지와 함께, 사용자의 입력을 수신하기 위한 "OK"라는 아이템과 "CANCEL"이라는 아이템을 포함할 수 있다. 여기서, 제2 입력 장치로부터 수신된 제5 신호에 기초하여 "OK"라는 아이템이 선택되면, 프로세서는 제2 임계 구간 동안 제3 신호를 제4 외부 장치로 전송할 수 있다. 반면, "CANCEL"라는 아이템이 선택되면, 전자 장치는 제3 신호를 제4 외부 장치로 전송하지 않고, 전자 장치의 동작을 유지할 수 있다.
제2 임계 구간 내에 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되면(S1350-Y), 프로세서는 제4 외부 장치로부터 제1 이미지 신호를 수신하고(S1360), 수신된 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시할 수 있다(S1370).
제2 임계 구간 내에 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되지 않으면(S1350-N), 프로세서는 다시 제2 사용자 인터페이스를 표시하도록 디스플레이를 제어할 수 있다(S1380). 그 후 제2 입력 장치로부터 제2 입력 장치의 조작에 따른 제4 신호가 수신되면(S1385), 프로세서는 제4 신호에 기초하여 전자 장치의 동작을 제어할 수 있다(S1390).
다시 말해, 제4 외부 장치가 슬립 상태로 동작하는 동안 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 전자 장치는 우선 제2 사용자 인터페이스를 제공한 후, 사용자의 선택에 따라 제2 입력 장치에 기초하여 제4 외부 장치에 의해 제공되는 컨텐츠/화면을 제어할 것인지, 아니면 전자 장치에 의해 제공되는 컨텐츠/화면을 제어할 것인지 여부를 결정할 수 있게 된다.
도 12 내지 도 14를 참조하여 상술한 실시 예들은 제4 외부 장치가 슬립 상태로 동작하고 있는 동안에는 제4 외부 장치가 활성화 상태로 동작하는 경우와는 달리, 도 2 등에서 전술한 실시 예와 같이 컨텐츠를 제공하기 위한 외부 장치를 제4 외부 장치로 변경할 수 없다는 것을 전제로 한다. 도 12 내지 도 14를 참조하여 상술한 실시 예에 따르면, 전자 장치는 제4 외부 장치가 슬립 상태로 동작하고 있는 동안 제2 입력 장치의 조작이 이루어지는 경우, 우선 제4 외부 장치로 제3 신호를 전송하여 제4 외부 장치의 활성화를 시도하거나, 또는 우선 전자 장치에 의해 제2 사용자 인터페이스를 제공한 후 사용자의 의사에 따라 제4 외부 장치로 제3 신호를 전송함으로써 제4 외부 장치의 활성화를 시도할 수 있으며, 이에 따라 제2 입력 장치를 통해 제어하고자 하는 컨텐츠를 결정할 수 있게 된다.
도 15는 본 개시의 일 실시 예에 따른 전자 장치(100)의 구성을 상세하게 나타내는 블록도이다.
도 15에 도시된 바와 같이, 본 개시의 일 실시 예에 따른 전자 장치(100)는 디스플레이(110), 복수의 통신 인터페이스(120), 메모리(130) 및 프로세서(140)뿐만 아니라, 센서(150), 입력 인터페이스(160) 및 출력 인터페이스(170)를 더 포함할 수 있다. 그러나, 도 15에 도시된 바와 같은 구성들은 예시적인 것에 불과할 뿐이며, 본 개시를 실시함에 있어 도 15에 도시된 바와 같은 구성에 더하여 새로운 구성이 추가되거나 일부 구성이 생략될 수 있음은 물론이다.
센서(150)는 전자 장치(100) 내부 및 외부의 다양한 정보를 감지할 수 있다. 구체적으로, 센서(150)는 이미지 센서(150), GPS(Global Positioning System) 센서(150), 자이로 센서(150)(gyro sensor, gyroscope), 가속도 센서(150)(acceleration sensor, accelerometer), 라이다 센서(150)(lidar sensor), 관성 센서(150)(Inertial Measurement Unit, IMU) 및 모션 센서(150) 중 적어도 하나를 포함할 수 있다. 뿐만 아니라, 센서(150)는 온도 센서(150), 습도 센서(150), 적외선 센서(150), 바이오 센서(150) 등과 같은 다양한 종류의 센서(150)를 포함할 수도 있다.
특히, 본 개시에 따른 다양한 실시 예에 있어서, 프로세서(140)는 이미지 센서(150)(또는 이미지 센서(150)를 포함하는 카메라)를 통해 입력 장치(300)에 대한 이미지를 획득함으로써 입력 장치(300)에 대한 사용자의 조작 또는 입력 장치(300)의 움직임 등을 식별할 수 있다. 그리고, 프로세서(140)는 입력 장치(300)로부터 수신된 신호뿐만 아니라 입력 장치(300)에 대한 사용자의 조작 또는 입력 장치(300)의 움직임에 대한 정보에 기초하여, 입력 장치(300)에 대한 사용자의 조작 의도를 식별하고, 사용자의 조작 의도가 식별되는 경우에 한하여 입력 장치(300)에 대응되는 외부 장치(200)를 식별할 수 있다.
입력 인터페이스(160)는 회로를 포함하며, 프로세서(140)는 입력 인터페이스(160)를 통해 전자 장치(100)의 동작을 제어하기 위한 사용자 명령을 수신할 수 있다. 구체적으로, 입력 인터페이스(160)는 마이크, 및 리모컨 신호 수신부(미도시) 등과 같은 구성으로 이루어 질 수 있다. 그리고, 입력 인터페이스(160)는 터치 스크린으로서 디스플레이(110)에 포함된 형태로 구현될 수도 있다.
마이크는 전자 장치(100)의 외부에서 발생된 사운드(sound) 또는 음성(voice)에 대한 신호를 획득할 수 있다. 구체적으로, 마이크는 전자 장치(100)의 외부에서 발생된 사운드 또는 음성에 따른 진동을 획득하고, 획득된 진동을 전기적인 신호로 변환할 수 있다.
본 개시에 따른 마이크는 사용자의 발화에 의해 발생된 사용자 음성에 대한 음성 신호를 획득할 수 있다. 그리고, 획득된 신호는 디지털 형태의 신호로 변환되어 메모리(130)에 저장될 수 있다. 마이크는 A/D 컨버터(Analog to Digital Converter)를 포함할 수 있으며, 마이크 외부에 위치한 A/D 컨버터와 연동하여 동작할 수도 있다.
특히, 본 개시에 따른 다양한 실시 예에 있어서, 프로세서(140)는 입력 인터페이스(160)를 통해 입력 장치(300)에 대응되는 외부 장치(200)를 설정(지정)하기 위한 사용자 입력, 제1 외부 장치(200)에 대응되는 어플리케이션을 설정하기 위한 사용자 입력, 사용자 인터페이스에 포함된 UI item을 선택하기 위한 사용자 입력 등을 수신할 수 있다. 상술한 바와 같은 사용자 입력은 마이크를 통해 음성 신호의 형태로 수신될 수 있다. 한편, 상술한 바와 같은 사용자 입력은 본 개시에 따른 입력 장치(300)에 입력됨에 따라 본 개시에 따른 통신 인터페이스(120)를 통해 수신될 수 있음은 물론이다.
출력 인터페이스(170)는 회로를 포함하며, 프로세서(140)는 출력 인터페이스(170)를 통해 전자 장치(100)가 수행할 수 있는 다양한 기능을 출력할 수 있다. 그리고, 출력 인터페이스(170)는 디스플레이(110), 스피커 및 인디케이터 중 적어도 하나를 포함할 수 있다. 디스플레이(110)에 대해서는 도 2를 참조하여 출력 인터페이스(170)와 별도의 구성인 것을 전제로 설명하였는바, 동일한 내용에 대한 중복 설명은 생략한다.
디스플레이(110)는 프로세서(140)의 제어에 의하여 영상 데이터를 출력할 수 있다. 구체적으로, 디스플레이(110)는 프로세서(140)의 제어에 의하여 메모리(130)에 기 저장된 영상을 출력할 수 있다. 특히, 본 개시의 일 실시 예에 따른 디스플레이(110)는 메모리(130)에 저장된 사용자 인터페이스(User Interface)를 표시할 수도 있다. 디스플레이(110)는 LCD(Liquid Crystal Display Panel), OLED(Organic Light Emitting Diodes) 등으로 구현될 수 있으며, 또한 디스플레이(110)는 경우에 따라 플렉서블 디스플레이(110), 투명 디스플레이(110) 등으로 구현되는 것도 가능하다. 다만, 본 개시에 따른 디스플레이(110)가 특정한 종류에 한정되는 것은 아니다.
스피커는 프로세서(140)의 제어에 의하여 오디오 데이터를 출력할 수 있으며, 인디케이터는 프로세서(140)의 제어에 의하여 점등될 수 있다.
특히, 본 개시에 따른 다양한 실시 예에 있어서, 프로세서(140)는 스피커를 통해 디스플레이(110) 상에 표시되는 컨텐츠를 변경할 것인지를 확인하기 위한 음성 메시지를 출력할 수 있으며, 그 밖에도 본 개시에 따른 동작에 관련된 다양한 음성 메시지를 출력할 수 있다.
도 16은 본 개시의 일 실시 예에 따른 전자 장치(100)의 제어 방법을 나타내는 흐름도이다.
도 16에 도시된 바와 같이, 본 개시의 일 실시 예에 따른 전자 장치(100)는 적어도 하나의 입력 장치(300) 중 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호를 수신할 수 있다(S1610).
제1 입력 장치(300)의 조작에 따른 신호가 수신되면, 전자 장치(100)는 매핑 정보에 기초하여 적어도 하나의 외부 장치(200) 중 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별할 수 있다(S1620). 일 실시 예에 있어서, 매핑 정보는 사용자의 설정에 기초하여 획득되어 메모리(130)에 저장될 수 있다. 또한, 매핑 정보는 적어도 하나의 외부 장치(200)로부터 신호가 수신된 후 임계 시간 내에 적어도 하나의 입력 장치(300)로부터 신호가 수신된 이력에 기초하여 획득되어 메모리(130)에 저장될 수 있다.
제1 입력 장치(300)에 대응되는 제1 외부 장치(200)가 식별되면, 전자 장치(100)는 제1 외부 장치(200)로부터 이미지 신호를 수신할 수 있다(S1630). 그리고, 제1 외부 장치(200)로부터 이미지 신호가 수신되면, 전자 장치(100)는 이미지 신호에 대응되는 제1 컨텐츠를 표시하도록 디스플레이(110)를 제어할 수 있다(S1640).
한편, 상술한 실시 예에 따른 전자 장치(100)의 제어 방법은 프로그램으로 구현되어 전자 장치(100)에 제공될 수 있다. 특히, 전자 장치(100)의 제어 방법을 포함하는 프로그램은 비일시적 판독 가능 매체(non-transitory computer readable medium)에 저장되어 제공될 수 있다.
구체적으로, 전자 장치(100)의 제어 방법을 실행하는 프로그램을 포함하는 비일시적 컴퓨터 판독 가능 기록매체에 있어서, 전자 장치(100)의 제어 방법은 사용자 입력을 수신하기 위한 적어도 하나의 입력 장치(300) 중 제1 입력 장치(300)로부터 제1 입력 장치(300)의 조작에 따른 신호가 수신되면, 컨텐츠를 제공하기 위한 적어도 하나의 외부 장치(200) 및 적어도 하나의 입력 장치(300) 사이의 매핑 관계를 나타내는 매핑 정보를 에 기초하여 적어도 하나의 외부 장치(200) 중 제1 입력 장치(300)에 대응되는 제1 외부 장치(200)를 식별하는 단계, 제1 외부 장치(200)로부터 이미지 신호를 수신하는 단계 및 이미지 신호에 대응되는 제1 컨텐츠를 표시하는 단계를 포함한다.
이상에서 전자 장치(100)의 제어 방법, 그리고 전자 장치(100)의 제어 방법을 실행하는 프로그램을 포함하는 컴퓨터 판독 가능 기록매체에 대해 간략하게 설명하였으나, 이는 중복 설명을 생략하기 위한 것일 뿐이며, 전자 장치(100)에 대한 다양한 실시 예는 전자 장치(100)의 제어 방법, 그리고 전자 장치(100)의 제어 방법을 실행하는 프로그램을 포함하는 컴퓨터 판독 가능 기록매체에 대해서도 적용될 수 있음은 물론이다.
상술한 바와 같은 본 개시의 다양한 실시 예에 따르면, 전자 장치(100)는 전자 장치(100)와 연결된 입력 장치(300)의 조작에 기초하여, 전자 장치(100)의 디스플레이(110) 상에 표시되는 컨텐츠를 제공하기 위한 외부 장치(200)를 변경할 수 있게 되며, 이에 따라 사용자의 편의성이 향상될 수 있다.
또한, 전자 장치(100)는 외부 장치(200)가 전자 장치(100)와 연결되어 있지 않은 상태이거나 외부 장치(200)의 전원이 꺼져 있는 상태인 경우에도, 원격으로 외부 장치(200)의 전원을 킨 후 외부 장치(200)로부터 제공되는 컨텐츠를 표시하거나, 외부 장치(200)로부터 제공되는 컨텐츠를 표시하는 대신 그에 대응되는 어플리케이션을 대체적으로 제공함으로써, 사용자의 의도에 부합하는 컨텐츠를 제공할 수 있게 된다.
뿐만 아니라, 전자 장치(100)는 외부 장치(200)로부터 제공되는 컨텐츠를 표시하도록 디스플레이(110)의 화면을 전환하기에 앞서 사용자의 의사를 확인함으로써, 사용자의 편의성을 향상시킬 수 있으며, 입력 장치(300)의 오조작의 경우 사용자의 의도에 반하여 디스플레이(110)의 화면이 전환되는 것을 방지할 수 있고, 나아가, 외부 장치(200)로부터 수신된 신호가 이미지 신호가 아닌 비정상 신호인 경우 디스플레이(110)의 화면이 전환되어 사용자에게 불편을 초래하는 것을 방지할 수 있게 된다.
기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적 저장매체'는 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다. 예로, '비일시적 저장매체'는 데이터가 임시적으로 저장되는 버퍼를 포함할 수 있다.
일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품(예: 다운로더블 앱(downloadable app))의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리(130)와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
이상에서 상술한 바와 같은 본 개시의 다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다.
다양한 실시 예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
한편, 본 개시에서 사용된 용어 "부" 또는 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. "부" 또는 "모듈"은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application-specific integrated circuit)으로 구성될 수 있다.
본 개시의 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 전자 장치(100))를 포함할 수 있다.
상기 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접 또는 상기 프로세서의 제어 하에 다른 구성요소들을 이용하여 상기 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시가 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.

Claims (15)

  1. 전자 장치에 있어서,
    디스플레이;
    컨텐츠를 제공하기 위한 적어도 하나의 외부 장치 및 사용자 입력을 수신하기 위한 적어도 하나의 입력 장치를 상기 전자 장치와 연결하는 복수의 통신 인터페이스;
    상기 적어도 하나의 외부 장치 및 상기 적어도 하나의 입력 장치 사이의 매핑 관계를 나타내는 매핑 정보를 저장하는 메모리;
    상기 복수의 통신 인터페이스 중 제1 통신 인터페이스를 통해 상기 적어도 하나의 입력 장치 중 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 상기 매핑 정보에 기초하여 상기 적어도 하나의 외부 장치 중 상기 제1 입력 장치에 대응되는 제1 외부 장치를 식별하고,
    상기 복수의 통신 인터페이스 중 제2 통신 인터페이스를 통해 상기 제1 외부 장치로부터 이미지 신호를 수신하고,
    상기 이미지 신호에 대응되는 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하는 프로세서; 를 포함하는 전자 장치.
  2. 제1 항에 있어서,
    상기 프로세서는,
    상기 제1 외부 장치의 전원이 켜져 있는지 여부를 식별하며,
    상기 제1 외부 장치의 전원이 켜져 있는 것으로 식별되면, 상기 복수의 통신 인터페이스 중 제2 통신 인터페이스를 통해 상기 제1 외부 장치로부터 이미지 신호를 수신하고,
    상기 제1 외부 장치의 전원이 꺼져 있는 것으로 식별되면, 상기 제1 외부 장치로 상기 제1 외부 장치의 전원을 키기 위한 제어 신호를 전송하도록 상기 제2 통신 인터페이스를 제어하며,
    상기 제어 신호에 따라 상기 제1 외부 장치의 전원이 켜지면, 상기 제2 통신 인터페이스를 통해 상기 제1 외부 장치로부터 상기 이미지 신호를 수신하는 전자 장치.
  3. 제2 항에 있어서,
    상기 프로세서는,
    상기 제어 신호에 따라 상기 제1 외부 장치의 전원이 켜지지 않으면, 상기 전자 장치에 의해 제공되는 복수의 어플리케이션 중 상기 제1 외부 장치에 대응되는 것으로 기 설정된 제1 어플리케이션을 실행하고,
    상기 제1 어플리케이션에 대응되는 화면을 표시하도록 상기 디스플레이를 제어하는 전자 장치.
  4. 제3 항에 있어서,
    상기 프로세서는,
    상기 제1 외부 장치가 상기 전자 장치와 연결되지 않은 것으로 식별되면, 상기 제1 어플리케이션에 대응되는 화면을 표시하도록 상기 디스플레이를 제어하는 전자 장치.
  5. 제1 항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 외부 장치 중 제2 외부 장치로부터 제공되는 제2 컨텐츠가 상기 디스플레이 상에 표시되는 동안 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 상기 제2 컨텐츠의 표시를 중지하고 상기 제1 컨텐츠를 표시할 것인지 여부를 선택하기 위한 제1 사용자 인터페이스를 표시하도록 상기 디스플레이를 제어하고,
    상기 제1 사용자 인터페이스를 통해 상기 제2 컨텐츠의 표시를 중지하고 상기 제1 컨텐츠를 표시하는 것을 선택하는 사용자 입력이 수신되면, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하는 전자 장치.
  6. 제1 항에 있어서,
    상기 프로세서는,
    상기 제1 입력 장치의 조작에 따른 신호가 수신된 후 기 설정된 제1 임계 구간 내에 상기 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 다시 수신되는지 여부를 식별하고,
    상기 제1 입력 장치의 조작에 따른 신호가 상기 제1 임계 구간 내에 다시 수신되면, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하며,
    상기 제1 입력 장치의 조작에 따른 신호가 상기 제1 임계 구간 내에 다시 수신되지 않으면, 상기 디스플레이의 동작을 유지하는 전자 장치.
  7. 제1 항에 있어서,
    상기 프로세서는,
    상기 제1 컨텐츠가 상기 디스플레이 상에 표시되는 동안 상기 복수의 통신 인터페이스 중 제3 통신 인터페이스를 통해 상기 적어도 하나의 외부 장치 중 제3 외부 장치로부터 신호가 수신되면, 상기 수신된 신호가 이미지 신호인지 여부를 식별하고,
    상기 수신된 신호가 이미지 신호이면, 상기 수신된 신호에 대응되는 제2 컨텐츠를 표시하도록 상기 디스플레이를 제어하며,
    상기 수신된 신호가 이미지 신호가 아니면, 상기 디스플레이의 동작을 유지하는 전자 장치.
  8. 제1 항에 있어서,
    상기 매핑 정보는 사용자의 설정 및 상기 적어도 하나의 외부 장치로부터 신호가 수신된 후 임계 시간 내에 상기 적어도 하나의 입력 장치로부터 신호가 수신된 이력 중 적어도 하나에 기초하여 획득되는 전자 장치.
  9. 제1 항에 있어서,
    상기 프로세서는,
    상기 전자 장치의 전원을 끄기 위한 사용자 입력이 수신되면, 상기 전자 장치와 연결된 적어도 하나의 외부 장치의 전원을 끄기 위한 제어 신호를 상기 적어도 하나의 외부 장치 각각으로 전송하도록 상기 복수의 통신 인터페이스 중 적어도 하나의 통신 인터페이스를 제어하는 전자 장치.
  10. 제1 항에 있어서,
    상기 프로세서는,
    상기 제1 컨텐츠가 표시되는 동안 상기 복수의 통신 인터페이스 중 제4 통신 인터페이스를 통해 상기 적어도 하나의 입력 장치 중 제2 입력 장치로부터 전자 장치의 전원을 끄기 위한 사용자 입력에 대응되는 제1 신호가 수신되면, 상기 디스플레이의 동작을 중지하도록 상기 디스플레이를 제어하고,
    상기 디스플레이의 동작이 중지되는 동안, 상기 제4 통신 인터페이스에 대한 활성화 상태가 유지되도록 상기 제4 통신 인터페이스를 제어하며,
    상기 디스플레이의 동작이 중지되는 동안, 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제2 신호가 수신되면, 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하는 전자 장치.
  11. 제10 항에 있어서,
    상기 프로세서는,
    상기 적어도 하나의 외부 장치 중 제4 외부 장치가 슬립 상태(sleep state)로 동작하는 동안 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 기 설정된 제2 임계 구간 동안 상기 제3 신호를 상기 제4 외부 장치로 전송하도록 상기 복수의 통신 인터페이스 중 제5 통신 인터페이스를 제어하고,
    상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되면, 상기 제5 통신 인터페이스를 통해 상기 제4 외부 장치로부터 제1 이미지 신호를 수신하고, 상기 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시하도록 상기 디스플레이를 제어하며,
    상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되지 않으면, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하고,
    상기 제2 임계 구간 이후 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제4 신호가 수신되면, 상기 제4 신호에 기초하여 상기 전자 장치의 동작을 제어하는 전자 장치.
  12. 제11 항에 있어서,
    상기 프로세서는,
    상기 제3 신호가 상기 제4 외부 장치로 전송되는 동안, 상기 제1 컨텐츠를 표시하도록 상기 디스플레이를 제어하는 전자 장치.
  13. 제10 항에 있어서,
    상기 프로세서는,
    상기 제4 외부 장치가 슬립 상태로 동작하는 동안 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제3 신호가 수신되면, 상기 제4 외부 장치의 상기 슬립 상태를 활성화 상태로 변경하기 위한 아이템을 포함하는 제2 사용자 인터페이스를 표시하도록 상기 디스플레이를 제어하고,
    상기 제2 입력 장치로부터 수신된 제5 신호에 기초하여 상기 제4 통신 인터페이스를 통해 상기 아이템이 선택되면, 기 설정된 제2 임계 구간 동안 상기 제3 신호를 상기 제4 외부 장치로 전송하도록 상기 복수의 통신 인터페이스 중 제5 통신 인터페이스를 제어하며,
    상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되면, 상기 제5 통신 인터페이스를 통해 상기 제4 외부 장치로부터 제1 이미지 신호를 수신하고, 상기 제1 이미지 신호에 대응되는 제3 컨텐츠를 표시하도록 상기 디스플레이를 제어하는 전자 장치.
  14. 제13 항에 있어서,
    상기 프로세서는,
    상기 제2 임계 구간 내에 상기 제4 외부 장치의 슬립 상태가 활성화 상태로 변경되지 않으면, 상기 제2 사용자 인터페이스를 표시하도록 상기 디스플레이를 제어하고,
    상기 제2 임계 구간 이후 상기 제4 통신 인터페이스를 통해 상기 제2 입력 장치로부터 상기 제2 입력 장치의 조작에 따른 제4 신호가 수신되면, 상기 제4 신호에 기초하여 상기 전자 장치의 동작을 제어하는 전자 장치.
  15. 전자 장치의 제어 방법에 있어서,
    사용자 입력을 수신하기 위한 적어도 하나의 입력 장치 중 제1 입력 장치로부터 상기 제1 입력 장치의 조작에 따른 신호가 수신되면, 컨텐츠를 제공하기 위한 적어도 하나의 외부 장치 및 상기 적어도 하나의 입력 장치 사이의 매핑 관계를 나타내는 매핑 정보를 에 기초하여 상기 적어도 하나의 외부 장치 중 상기 제1 입력 장치에 대응되는 제1 외부 장치를 식별하는 단계;
    상기 제1 외부 장치로부터 이미지 신호를 수신하는 단계; 및
    상기 이미지 신호에 대응되는 제1 컨텐츠를 표시하는 단계; 를 포함하는 전자 장치의 제어 방법.
PCT/KR2023/010958 2022-09-21 2023-07-27 전자 장치 및 전자 장치의 제어 방법 Ceased WO2024063306A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP23868366.8A EP4576792A4 (en) 2022-09-21 2023-07-27 ELECTRONIC DEVICE AND METHOD FOR CONTROLLING ELECTRONIC DEVICES
US19/080,042 US20250278234A1 (en) 2022-09-21 2025-03-14 Electronic device and method for controlling electronic device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20220119529 2022-09-21
KR10-2022-0119529 2022-09-21
KR1020220180607A KR20240040590A (ko) 2022-09-21 2022-12-21 전자 장치 및 전자 장치의 제어 방법
KR10-2022-0180607 2022-12-21

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US19/080,042 Continuation US20250278234A1 (en) 2022-09-21 2025-03-14 Electronic device and method for controlling electronic device

Publications (1)

Publication Number Publication Date
WO2024063306A1 true WO2024063306A1 (ko) 2024-03-28

Family

ID=90454562

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/010958 Ceased WO2024063306A1 (ko) 2022-09-21 2023-07-27 전자 장치 및 전자 장치의 제어 방법

Country Status (3)

Country Link
US (1) US20250278234A1 (ko)
EP (1) EP4576792A4 (ko)
WO (1) WO2024063306A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150066917A (ko) * 2013-12-09 2015-06-17 한국전자통신연구원 장치간 동기화 기반 원격 협업 장치
KR20160006545A (ko) * 2014-07-09 2016-01-19 (주)휴맥스 입력 장치와의 매핑을 통해 분할된 스크린을 개별 제어하기 위한 시스템 및 방법
KR20170006096A (ko) * 2015-07-07 2017-01-17 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR20190041067A (ko) * 2017-10-12 2019-04-22 삼성전자주식회사 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법
JP2021184652A (ja) * 2020-07-27 2021-12-02 マクセル株式会社 映像表示装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101121778B1 (ko) * 2004-01-06 2012-03-23 삼성전자주식회사 무선으로 영상기기 주변의 기기를 제어하는 방법 및 장치
KR101377885B1 (ko) * 2007-07-23 2014-03-24 엘지전자 주식회사 영상표시기기에서 외부입력 라벨 표시 장치 및 방법
KR101271996B1 (ko) * 2011-09-02 2013-06-05 엘지전자 주식회사 외부기기 리스트 제공방법 및 그를 이용한 영상 표시 기기
US11756412B2 (en) * 2011-10-28 2023-09-12 Universal Electronics Inc. Systems and methods for associating services and/or devices with a voice assistant
JP5198651B1 (ja) * 2011-12-22 2013-05-15 株式会社東芝 信号処理装置及び信号処理方法
KR102395529B1 (ko) * 2015-10-22 2022-06-02 삼성전자주식회사 통신 장치, 및 디스플레이 장치 및 그 제어방법
KR102570379B1 (ko) * 2016-04-22 2023-08-25 엘지전자 주식회사 스크린 미러링 기능을 제공하는 디스플레이 장치 및 그의 동작 방법
KR20170143406A (ko) * 2016-06-21 2017-12-29 삼성전자주식회사 리모컨신호를 수신하고 변환된 리모컨신호를 출력할 수 있는 디스플레이장치 및 그 제어방법
JP6741764B2 (ja) * 2016-09-15 2020-08-19 マクセル株式会社 映像表示装置および映像表示装置における連携制御方法
KR102623181B1 (ko) * 2016-10-05 2024-01-11 엘지전자 주식회사 무선 디바이스 및 무선 시스템
KR102405307B1 (ko) * 2018-01-16 2022-06-07 삼성전자주식회사 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
US11688330B2 (en) * 2021-11-29 2023-06-27 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof
US20250133256A1 (en) * 2023-10-19 2025-04-24 Samsung Electronics Co., Ltd. Electronic device and method for controlling the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150066917A (ko) * 2013-12-09 2015-06-17 한국전자통신연구원 장치간 동기화 기반 원격 협업 장치
KR20160006545A (ko) * 2014-07-09 2016-01-19 (주)휴맥스 입력 장치와의 매핑을 통해 분할된 스크린을 개별 제어하기 위한 시스템 및 방법
KR20170006096A (ko) * 2015-07-07 2017-01-17 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR20190041067A (ko) * 2017-10-12 2019-04-22 삼성전자주식회사 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법
JP2021184652A (ja) * 2020-07-27 2021-12-02 マクセル株式会社 映像表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4576792A4 *

Also Published As

Publication number Publication date
US20250278234A1 (en) 2025-09-04
EP4576792A1 (en) 2025-06-25
EP4576792A4 (en) 2026-02-25

Similar Documents

Publication Publication Date Title
WO2020184842A1 (ko) 전자 장치 및 전자 장치의 제어 방법
WO2017048076A1 (en) Display apparatus and method for controlling display of display apparatus
WO2017131335A1 (ko) 사용자 단말 장치 및 그 제어 방법
WO2017105015A1 (en) Electronic device and method of operating the same
WO2019164323A1 (ko) 디스플레이 패널을 통해 표시되는 콘텐트의 저장을 제어하기 위한 전자 장치 및 방법
WO2016064132A1 (en) Wearable device and method of transmitting content
WO2017078359A1 (en) Electronic apparatus, remote control apparatus, contorl method thereof, and electronic system
WO2019059427A1 (en) DISPLAY DEVICE AND CONTROL TERMINAL
WO2017052162A1 (en) Electronic apparatus, audio device, and method that is performable by the electronic apparatus to set network of the audio device
EP3262842A1 (en) Image display device and method of operating the same
WO2017069434A1 (en) Display apparatus and method for controlling display apparatus
WO2020091183A1 (ko) 사용자 특화 음성 명령어를 공유하기 위한 전자 장치 및 그 제어 방법
WO2017052135A1 (en) System for controlling notification event and method thereof
WO2019093852A1 (ko) 복수개의 전자 장치들 간의 거리 측정 방법 및 그에 따른 전자 장치
WO2017014453A1 (en) Apparatus for displaying an image and method of operating the same
WO2019221562A1 (en) Electronic device and method of controlling electronic device
WO2018190637A1 (ko) 디바이스의 통신 연결 방법 및 그 장치
WO2015068932A1 (en) Display apparatus and method of controlling display apparatus
WO2023090863A1 (ko) 전자 장치 및 그 동작 방법
WO2019164168A1 (ko) 블루투스 통신을 사용하는 전자 장치와 이의 동작 방법
WO2017018705A1 (en) Image display apparatus and method of operating the same
WO2023043057A1 (ko) 화면들 및 화면들에 대응하는 오디오 신호들을 공유하기 위한 전자 장치 및 그 방법
WO2023017989A1 (ko) 디스플레이 장치 및 그 동작 방법
WO2022149648A1 (ko) 디스플레이 장치 및 그 동작방법
WO2019112332A1 (en) Electronic apparatus and control method thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23868366

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023868366

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2023868366

Country of ref document: EP

Effective date: 20250318

NENP Non-entry into the national phase

Ref country code: DE

WWP Wipo information: published in national office

Ref document number: 2023868366

Country of ref document: EP