WO2017191875A1 - 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치 - Google Patents

전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치 Download PDF

Info

Publication number
WO2017191875A1
WO2017191875A1 PCT/KR2016/011847 KR2016011847W WO2017191875A1 WO 2017191875 A1 WO2017191875 A1 WO 2017191875A1 KR 2016011847 W KR2016011847 W KR 2016011847W WO 2017191875 A1 WO2017191875 A1 WO 2017191875A1
Authority
WO
WIPO (PCT)
Prior art keywords
external device
electronic device
application
control
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2016/011847
Other languages
English (en)
French (fr)
Inventor
김병오
김철주
이상정
이윤경
진동윤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to US16/096,376 priority Critical patent/US11036367B2/en
Publication of WO2017191875A1 publication Critical patent/WO2017191875A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/48—Indexing scheme relating to G06F9/48
    • G06F2209/482—Application
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G08C2201/21—Programming remote control devices via third means
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/92—Universal remote control
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop

Definitions

  • a method for controlling an external device by an electronic device and an electronic device thereof are provided.
  • the mobile device provides a dedicated application such as a remote control application for controlling an external device such as a smart TV.
  • a dedicated application such as a remote control application for controlling an external device such as a smart TV.
  • dedicated applications provided in mobile devices do not deviate significantly from the functionality provided by traditional remote controls.
  • the user of the mobile device is inconvenient in that it must learn about a dedicated application.
  • a first aspect of the disclosed embodiment for solving the above problems includes receiving a user input for a user interface (UI) provided to control an electronic device; Determining whether a foreground application is associated with an external device; And when the foreground application is associated with the external device, transmitting a control signal corresponding to a user input to the external device, wherein the electronic device controls the external device.
  • UI user interface
  • the user interface may be at least one button provided in the electronic device or at least one GUI provided to control the electronic device.
  • the determining whether the foreground application is associated with the external device may include receiving identification information of the application installed in the external device and execution information of the control application for controlling the application installed in the external device; And if the foreground application matches execution information of the control application, determining that the foreground application is associated with an external device.
  • the foreground application may be provided based on an application installation file received from an external device.
  • the foreground application may be provided based on URL information received from an external device.
  • control signal may be to up or down the volume of the external device.
  • control signal may be for switching the screen of the external device to the home screen.
  • the control signal is for switching the screen of the external device to the setting window screen.
  • the foreground application is executed according to a user input for selecting one of the application list displayed on the electronic device, and the application list may include identification information of applications installed in the external device.
  • the application list may be distinguished from an application list including identification information of applications installed in the electronic device.
  • the foreground application may be a widget including at least one of state information of an external device and information about an application running on the external device.
  • the user interface may be provided to control at least one application running on the electronic device, and the method of operating the electronic device may include receiving identification information of at least one application running on the external device;
  • Displaying a task management window comprising identification information of at least one application running on an external device and identification information of at least one application running on an electronic device.
  • the method of the first aspect may further include receiving a user input for terminating at least one application running on an external device in a task management window, and transmitting an application end signal to the external device in response to the user input. It may further comprise a step.
  • the user interface unit for receiving a user input for the user interface (UI) provided to control the electronic device, determines whether the foreground application is associated with the external device, the foreground application is external
  • an electronic device includes a controller configured to generate a control signal corresponding to a user input, and a communicator configured to transmit the control signal to an external device.
  • the third aspect also provides a computer readable recording medium having recorded thereon a program for implementing the method of the first aspect.
  • Embodiments provide a method for controlling external devices based on a user experience provided by the electronic device, and an electronic device.
  • FIG. 1 is a schematic diagram illustrating a method of controlling an external device by an electronic device.
  • FIG. 2 is a flowchart illustrating a method of operating an electronic device according to an embodiment.
  • 3A and 3B are examples of a UI provided for controlling an electronic device.
  • FIG. 4 is a flowchart illustrating a method of determining, by an electronic device, whether a foreground application is associated with an external device according to an embodiment.
  • FIG 5 illustrates an example in which the electronic device provides an application list including identification information of applications installed in an external device.
  • 6 is another example of an electronic device providing an application list including identification information of applications installed in an external device.
  • FIG. 7 is a flowchart for describing a method of executing an application associated with an external device, based on an application list provided by an electronic device.
  • FIG. 8 is an example of an electronic device executing a control application associated with an external device.
  • 9 is another example of an electronic device executing a control application associated with an external device.
  • 10 is another example in which the electronic device executes a control application associated with an external device.
  • 11 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to control a volume of the electronic device to an external device.
  • FIG. 12 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to control the volume of the electronic device to an external device.
  • FIG. 13 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to cancel execution of an electronic device to an external device.
  • FIG. 14 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to cancel execution of the electronic device to an external device.
  • 15 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to change a screen of the electronic device to a home screen to an external device.
  • FIG. 16 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to change a screen of the electronic device to a home screen to an external device.
  • 17 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to adjust screen brightness of the electronic device to an external device.
  • FIG. 18 illustrates an example in which the electronic device provides a control signal corresponding to a user input to a UI provided to adjust screen brightness of the electronic device, to an external device.
  • 19 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to activate a setting window of the electronic device to an external device.
  • the electronic device provides a control signal corresponding to a UI provided to activate a setting window of the electronic device to an external device.
  • FIG. 21 is a flowchart for describing a method in which an electronic device performs a task management function.
  • 22A and 22B illustrate examples of a task management window provided by an electronic device.
  • 23 and 24 illustrate a configuration of an electronic device according to an embodiment.
  • a first aspect of the disclosed embodiment for solving the above problems includes receiving a user input for a user interface (UI) provided to control an electronic device; Determining whether a foreground application is associated with an external device; And when the foreground application is associated with the external device, transmitting a control signal corresponding to a user input to the external device, wherein the electronic device controls the external device.
  • UI user interface
  • the user interface unit for receiving a user input for the user interface (UI) provided to control the electronic device, determines whether the foreground application is associated with the external device, the foreground application is external
  • an electronic device includes a controller configured to generate a control signal corresponding to a user input, and a communicator configured to transmit the control signal to an external device.
  • first and second may be used to describe various components, but the components are not limited by the terms. The terms are only used to distinguish one component from another.
  • first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component.
  • part refers to a hardware component, such as software, FPGA or ASIC, and “part” plays certain roles. However, “part” is not meant to be limited to software or hardware.
  • the “unit” may be configured to be in an addressable storage medium and may be configured to play one or more processors.
  • a “part” refers to components such as software components, object-oriented software components, class components, and task components, processes, functions, properties, procedures, Subroutines, segments of program code, drivers, firmware, microcode, circuits, data, databases, data structures, tables, arrays and variables.
  • the functionality provided within the components and “parts” may be combined into a smaller number of components and “parts” or further separated into additional components and “parts”.
  • FIG. 1 is a schematic diagram illustrating a method of controlling an external device by an electronic device.
  • the electronic device 10 may be connected by using a network that can communicate with at least one external device 20.
  • the electronic device 10 may control at least one external device 20 using a user interface (UI) provided to control the electronic device 10.
  • UI user interface
  • the user interface (UI) provided to control the electronic device 10 may be preset in order to intuitively control the basic functions of the electronic device 10.
  • the electronic device 10 may provide a UI for intuitively controlling functions such as volume control, screen brightness, screen switching, task management, and communication connection of the electronic device 10.
  • the UI provided to control the electronic device 10 may include a physical button 11 to 13 or a soft button 14 to 15 or a graphical user interface (GUI) 16 to 18 included in the electronic device 10. ) May be included.
  • GUI graphical user interface
  • the electronic device 10 uses the UI provided to control the electronic device 10 to perform the functions of the external device 20.
  • the foreground application may be an application currently activated in a multi-tasking environment.
  • that the application is associated with the external device 20 may be that the application is provided from the external device 20 or based on information provided from the external device 20.
  • the UI provided to control the electronic device 10 generally controls the functions of the electronic device 10 regardless of the foreground application.
  • the electronic device 10 may include a foreground application in which the electronic device ( The function of the electronic device 10 or the external device 20 may be controlled based on whether the electronic device 10 is connected to the external device 20. For example, when the foreground application is associated with the external device 20, the electronic device 10 provides the external device 20 with a control signal corresponding to a user input for the UI provided by the electronic device 10.
  • functions such as volume control, screen brightness, screen switching, task management, and communication connection of the external device 20 may be controlled.
  • the electronic device 10 may be a smartphone, a tablet personal computer, a mobile phone, a video phone, an e-book reader, a desktop personal computer, a laptop PC. It may include at least one of a laptop personal computer, a netbook computer, a personal digital assistant (PDA), a portable multimedia player (PMP), an MP3 player, or a mobile medical device.
  • PDA personal digital assistant
  • PMP portable multimedia player
  • MP3 player an MP3 player
  • the external device 20 may be a home appliance.
  • Home appliances are, for example, televisions, digital video disk (DVD) players, audio, refrigerators, air conditioners, vacuum cleaners, ovens, microwaves, washing machines, air purifiers, set-top boxes, home automation controls Panel (home automation control panel), security control panel, TV box (e.g. Samsung HomeSyncTM, Apple TVTM, or Google TVTM), game console (e.g. XboxTM, PlayStationTM), electronic dictionary, electronic key, camcorder It may include at least one of a (camcorder), or an electronic picture frame.
  • DVD digital video disk
  • the external device 20 may be a wearable device.
  • Wearable devices may be, for example, accessory types (e.g. watches, rings, bracelets, anklets, necklaces, glasses, contact lenses, or head-mounted-device (HMD)), fabrics or clothing integral types (e.g., It may include at least one of: an electronic garment, a body-attachable (eg, skin pad or tattoo), or a living implantable type (eg, an implantable circuit).
  • accessory types e.g. watches, rings, bracelets, anklets, necklaces, glasses, contact lenses, or head-mounted-device (HMD)
  • fabrics or clothing integral types e.g., It may include at least one of: an electronic garment, a body-attachable (eg, skin pad or tattoo), or a living implantable type (eg, an implantable circuit).
  • HMD head-mounted-device
  • the external device 20 may be a variety of medical devices (eg, various portable medical devices (such as blood glucose meters, heart rate monitors, blood pressure meters, or body temperature meters), magnetic resonance angiography (MRA), magnetic resonance imaging (MRI), CT). (computed tomography, imaging or ultrasound), navigation devices, global navigation satellite systems (GNSS), event data recorders (FDRs), flight data recorders (FDRs), automotive infotainment Devices, ship electronics (e.g. ship navigation devices, gyro compasses, etc.), avionics, security devices, vehicle head units, industrial or home robots, automatic teller's machines in financial institutions, Point of sales or point-of-sale devices (e.g. light bulbs, sensors, electrical or gas meters, sprinkler devices, fire alarms, thermostats, street lights, toasters) ), Exercise equipment, and the like.
  • various portable medical devices such as blood glucose meters, heart rate monitors, blood pressure meters, or body temperature meters
  • MRA magnetic resonance angiography
  • MRI magnetic resonance
  • FIG. 2 is a flowchart illustrating a method of operating an electronic device according to an embodiment.
  • the electronic device 10 receives a user input for a user interface (UI) provided to control the electronic device 10.
  • the user interface UI provided to control the electronic device 10 may include at least one button provided in the electronic device 10 or at least one graphical user provided to control the electronic device 10. interface).
  • the user input may include a press, a continuous press, a long press, a touch, a long-pressed touch input, or the like, for a button or a GUI provided in the electronic device 10. have.
  • 3A and 3B are examples of a UI provided for controlling an electronic device.
  • the electronic device 10 may provide a physical button and a soft button for controlling the electronic device 10.
  • the electronic device 10 may provide a physical button including a volume control button 11, a power button 12, and a home button 13 for volume control.
  • the electronic device 10 may provide a soft button including a task management button 14 and an undo button 15.
  • the present invention is not limited thereto, and more or fewer buttons may be provided by the manufacturer.
  • the electronic device 10 does not have a task management button 14 separately, and based on a user input (for example, continuous press input or long press input) for the home button 13, the task management button. The operation corresponding to the operation may be performed.
  • the electronic device 10 may provide a graphical user interface (GUI) for controlling the electronic device 10.
  • GUI graphical user interface
  • the electronic device 10 may activate the notification window 301 in response to a touch & drag input for the top of the screen.
  • the electronic device 10 may display the quick setting GUIs 17, the setting window execution GUI 16, and the screen brightness adjustment GUI 18, which may quickly change various settings of the electronic device 10 through the notification window 301.
  • the present invention is not limited thereto, and various GUIs for controlling the electronic device 10 may be provided by a manufacturer or a user.
  • the electronic device 10 may receive a user input for at least one UI illustrated in FIG. 3A or 3B.
  • the electronic device 10 determines whether the foreground application is associated with the external device 20.
  • the electronic device 10 may determine whether the foreground application is associated with the external device 20 based on the identification information of the application running from the external device 20. For example, when the identification information received from the external device 20 and the identification information of the foreground application match, the electronic device 10 may determine that the foreground application is associated with the external device 20.
  • the electronic device 10 may receive information about applications installed in the external device 20 in advance, and determine whether the foreground application matches the information about previously received applications.
  • the information on the applications installed in the external device 20 may include identification information of the applications installed in the external device 20 and execution information of the control application for controlling the applications installed in the external device 20.
  • the control application may be for the electronic device 10 to control an application executed in the external device 20.
  • the electronic device 10 may receive information about applications installed in the external device 20 periodically or at a predetermined time.
  • the electronic device 10 may provide an application list including identification information of applications installed in the external device 20.
  • the electronic device 10 receives a user input for selecting one of the application lists, the electronic device 10 transmits a control signal for executing the selected application to the external device 20 and transmits a control application corresponding to the selected application to the electronic device 10.
  • the control application may be associated with the external device 20 and match the information about the previously received applications.
  • the electronic device 10 may transmit a control signal corresponding to the user input to the external device 20.
  • the electronic device 10 may transmit a control signal corresponding to a user input for performing an operation such as volume control, screen brightness control, communication connection, etc. to the external device 20.
  • the electronic device 10 may transmit a control signal to the external device 20 while performing an operation corresponding to a user input.
  • the electronic device 10 transmits a control signal corresponding to a user input for performing an operation such as activating a setting window or switching a screen to the external device 20, activating a setting window of the electronic device 10 or displaying a screen. To switch the operation.
  • the electronic device 10 when the electronic device 10 is communicatively connected to the plurality of external devices 20, the electronic device 10 may transmit a control signal to a specific external device associated with the foreground application.
  • the external device 20 may perform an operation corresponding to the received control signal.
  • FIG. 4 is a flowchart illustrating a method of determining, by an electronic device, whether a foreground application is associated with an external device according to an embodiment.
  • the external device 20 may provide identification information of an application installed in the external device 20 and execution information of a control application for controlling an application installed in the external device 20. Can be sent to.
  • the external device 20 may control application identification information including an identification value 401 and an icon image 402 of an application installed in the external device 20 and an application installed in the external device 20.
  • the execution information 403 of the control application may be transmitted to the electronic device 10.
  • the execution information 403 of the control application may include information about an identification value and an execution file of the control application executed by the electronic device 10 to control the application installed by the electronic device 10 on the external device 20. It may include at least one.
  • the execution information 403 of the control application may include URL information, application installation file information, widget execution information, or the like.
  • the identification value 401 of the application may include a name, code, ID, or channel information of an application installed in the external device 20.
  • the electronic device 10 may manage information on applications received from the external device 20 as a table 400.
  • the electronic device 10 may provide an application list including at least one of an identification value 401 and an icon image 402 of the application, based on the application identification information received from the external device 20. have.
  • a control signal for executing the selected application may be provided to the external device 20, and the control application corresponding to the selected application may be executed in the electronic device 10.
  • the control application may be installed and executed in the electronic device 10 and may be a web application or a widget provided through a browser.
  • the electronic device 10 may execute and control applications installed in the external device 20 without installing a dedicated application for controlling the external device 20.
  • the electronic device 10 may determine whether the foreground application is associated with the external device 20 based on the received identification information of the application.
  • the electronic device 10 may determine whether a value matching the foreground application exists among the values stored in the table 400. For example, the electronic device 10 may determine whether the execution information of the foreground application matches the information 403 of the control application of the table 400.
  • the electronic device 10 may add a flag to an application descriptor to indicate a device to which each application is associated. In this case, the electronic device 10 may determine whether the foreground application is associated with the external device 20 with reference to the added flag.
  • FIG 5 illustrates an example in which the electronic device provides an application list including identification information of applications installed in an external device.
  • the electronic device 10 may receive identification information of applications installed in the external device 20 and provide an application list including identification information of applications installed in the external device 20. Can be.
  • the electronic device 10 may provide an application list by using the identification value (401 of FIG. 4) and the icon image (402 of FIG. 4) of the application installed in the external device 20.
  • the electronic device 10 may provide a folder 510 including an application list.
  • the electronic device 10 may display a list of applications included in the folder 510 on the screen, as illustrated in 530 of FIG. 5.
  • the electronic device 10 may distinguish and display an application list including identification information of applications installed in the electronic device 10 and an application list including identification information of applications installed in the external device 20.
  • the electronic device 10 may include at least one folder 520 including identification information of applications installed in the electronic device 10 and at least one folder including identification information of applications installed in the external device 20. 510 may be provided separately.
  • 6 is another example of an electronic device providing an application list including identification information of applications installed in an external device.
  • the electronic device 10 may provide icon lists 610 and 620 that intuitively represent the external device 20, thereby providing a list of applications corresponding to each external device.
  • the electronic device 10 may display an icon image 610 representing the first external device, an icon image 620 representing the second external device, and the like on the home screen.
  • the electronic device 10 may include an application list including identification information of applications installed in the first external device. I can display it.
  • FIG. 7 is a flowchart for describing a method of executing an application associated with an external device, based on an application list provided by an electronic device.
  • the electronic device 10 may provide an application list including identification information of applications installed in the external device 20.
  • the electronic device 10 may receive a user input for selecting one of the application list.
  • the electronic device 10 may transmit a control signal for executing the selected application to the external device 20.
  • the external device 20 may execute an application selected by the electronic device 10 based on the received control signal.
  • the electronic device 10 may execute a control application for controlling the selected application.
  • the control application may be an application executed based on the installation file received from the external device 20, a web application executed based on the URL, or a widget.
  • the control application executed in the electronic device 10 is associated with the external device 20.
  • FIG. 8 is an example of an electronic device executing a control application associated with an external device.
  • the electronic device 10 may execute a browser control application 810 for controlling the browser application 820 executed in the external device 20.
  • the browser control application 810 may be installed in the electronic device 10 based on the installation file received from the external device 20.
  • the browser control application 810 may provide a GUI for controlling input of the browser application 820, web page movement, content selection, and the like.
  • 9 is another example of an electronic device executing a control application associated with an external device.
  • the electronic device 10 may execute a web application 910 for controlling an A / V (Audio / Video) content playback application 920 executed in the external device 20.
  • the web application 910 may provide a GUI for controlling content selection and playback of the A / V content playback application 920 by accessing a URL received from the external device 20.
  • 10 is another example in which the electronic device executes a control application associated with an external device.
  • the electronic device 10 may execute widgets 1010 and 1020 for providing at least one of state information of the external device 20 and application information being executed. For example, when the electronic device 10 receives a long-press touch input on an icon (610 of FIG. 6) representing the external device 20, the electronic device 10 receives the widget 1010 indicating the state information of the external device 20. Can provide. In addition, the electronic device 10 may execute the widget 1020 corresponding to the application selected from the application list.
  • the electronic device 10 may provide a widget (not shown) including the event.
  • the event may include a preset notification event (for example, a TV program start time notification event, a refrigerator opening notification event, etc.), an update event of an application installed in the external device 20, and the like. have.
  • the event received from the external device 20 may be displayed in a notification bar or a notification window (301 in FIG. 3B) of the electronic device 10.
  • the electronic device 10 may control the external device 20 by using a user input to the GUI. Also, according to an embodiment, when the control applications illustrated in FIGS. 8 to 10 operate as the foreground application, the electronic device 10 receives a user input for a UI provided to control the electronic device 10. The external device 20 can be controlled by using.
  • 11 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to control a volume of the electronic device to an external device.
  • the electronic device 10 may receive a user input for the volume control button 11 provided in the electronic device 10.
  • the electronic device 10 may determine whether the foreground application is associated with the external device 20. If the foreground application is not associated with the external device 20, in operation S1130, the electronic device 10 may adjust the volume of the electronic device 10 in response to a user input.
  • the electronic device 10 may transmit a control signal for adjusting the volume of the external device 20 to the external device 20. For example, when the push input for the up button of the volume control button 11 is received, the electronic device 10 may transmit a control signal for increasing the volume of the external device 20. In addition, when a push input for a down button of the volume control button 11 is received, the electronic device 10 may transmit a control signal for reducing the volume of the external device 20.
  • FIG. 12 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to control the volume of the electronic device to an external device.
  • the electronic device 10 may execute a user input for the volume control button 11 for adjusting the volume of the electronic device 10 while the web application 910 associated with the external device 20 is running. 1210).
  • the electronic device 10 may provide a control signal corresponding to the user input 1210 to the external device 20.
  • the external device 20 may adjust the volume of the external device 20 based on the control signal received from the electronic device 10. In addition, the external device 20 may display an image 1220 indicating the volume controlled by the electronic device 10 on the screen.
  • FIG. 13 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to cancel execution of an electronic device to an external device.
  • the electronic device 10 may receive a user input for an undo button 15 provided in the electronic device 10.
  • the electronic device 10 may determine whether the foreground application is associated with an external device. If the foreground application is not associated with the external device 20, in operation S1330, the electronic device 10 may cancel the last executed task in the electronic device 10 in response to a user input.
  • the electronic device 10 may transmit a control signal to the external device 20 to cancel a task last executed in the external device 20.
  • FIG. 14 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to cancel execution of the electronic device to an external device.
  • the electronic device 10 may receive a user input 1410 for the undo button 15 during the execution of the web application 910 associated with the external device 20.
  • the electronic device 10 may transmit a control signal corresponding to the user input 1410 to the external device 20.
  • the external device 20 may cancel a task last executed in the external device 20 and display a previous screen based on the received control signal. For example, the A / V content playback application 920 currently running may be terminated and the execution screen of the browser application 820 previously executed may be displayed. In this case, the electronic device 10 may terminate the web application 910 corresponding to the A / V content playback application 920. In addition, the electronic device 10 may rerun the browser control application 810 of FIG. 8 corresponding to the browser application 820 that is re-executed in the external device 20.
  • 15 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to change a screen of the electronic device to a home screen to an external device.
  • the electronic device 10 may receive a user input for the home button 13 provided in the electronic device 10.
  • the electronic device 10 may determine whether the foreground application is associated with an external device. If the foreground application is not associated with the external device 20, in operation S1530, the electronic device 10 may switch the screen of the electronic device 10 to a home screen (or an initial screen) in response to a user input.
  • the electronic device 10 may output a control signal for switching the screen of the external device 20 to the home screen (or an initial screen). Can be sent to.
  • the electronic device 10 may switch the screen of the electronic device 10 to a home screen (or an initial screen).
  • FIG. 16 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to change a screen of the electronic device to a home screen to an external device.
  • the electronic device 10 receives a user input 1610 for the home button 13 during execution of a web application 910 associated with the external device 20, and corresponds to the user input 1610.
  • the control signal may be transmitted to the external device 20.
  • the external device 20 may switch the execution screen (not shown) of the A / V content playback application to the home screen 1620 based on the received control signal.
  • the electronic device 10 may switch the screen of the electronic device 10 to a home screen (not shown).
  • 17 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to adjust screen brightness of the electronic device to an external device.
  • the electronic device 10 may receive a user input for the screen brightness adjustment GUI 18 provided to quickly adjust the screen brightness of the electronic device 10.
  • the electronic device 10 may determine whether the foreground application is associated with the external device 20. If the foreground application is not associated with the external device 20, in operation S1730, the electronic device 10 may adjust the screen brightness of the electronic device 10 in response to a user input.
  • the electronic device 10 may transmit a control signal for adjusting the screen brightness of the external device 20 to the external device 20.
  • FIG. 18 illustrates an example in which the electronic device provides a control signal corresponding to a UI provided to adjust screen brightness of the electronic device to an external device.
  • the electronic device 10 may display a screen of the external device 20 in response to a user input 1810 for the screen brightness control GUI 18 provided in the notification window 301 of the electronic device 10. You can adjust the brightness.
  • the external device 20 may adjust the screen brightness of the external device 20 based on the control information received from the electronic device 10. In addition, the external device 20 may display an image 1820 indicating the current screen brightness controlled by the electronic device 10.
  • the electronic device 10 in response to a user input to the communication connection GUI 17 for quickly controlling the communication connection (eg, Bluetooth communication connection, Wi-Fi communication connection, etc.) of the electronic device 10, A control signal for controlling a communication connection of the external device 20 may be provided to the external device 20.
  • the external device 20 may establish or terminate a communication connection of the external device 20 based on the received control signal.
  • 19 is a flowchart illustrating a method of providing, by an electronic device, a control signal corresponding to a UI provided to activate a setting window of the electronic device to an external device.
  • the electronic device 10 may receive a user input for a setting window activation GUI 18 provided to quickly activate a setting window of the electronic device 10.
  • the electronic device 10 may determine whether the foreground application is associated with the external device 20. If the foreground application is not associated with the external device 20, in operation S1730, the electronic device 10 may activate a setting window corresponding to the electronic device 10 in response to a user input.
  • the setting window may include a plurality of pages for changing the setting of the electronic device 10 and the setting of the external device 20.
  • the setting window corresponding to the electronic device 10 may mean at least one page of which a setting of the electronic device 10 can be changed among the plurality of pages.
  • the electronic device 10 may generate each page based on configuration information received from the external device 20.
  • the electronic device 10 may transmit a control signal for switching the screen of the external device 20 to the setting window screen to the external device 20. .
  • the electronic device 10 may activate a setting window corresponding to the external device 20.
  • the setting window corresponding to the external device 20 may mean at least one page of which a setting of the external device 20 can be changed among the plurality of pages.
  • the electronic device provides a control signal corresponding to a UI provided to activate a setting window to an external device.
  • the electronic device 10 displays a screen of the external device 20 in response to a user input 2010 for the setting window activation GUI 16 provided in the notification window 301 of the electronic device 10.
  • the setting window 2020 may be switched to the screen.
  • the electronic device 10 may activate a setting window 2040 of the electronic device 10.
  • the electronic device 10 may activate a page 2041 for changing the setting of the external device 20, from among a plurality of pages included in the setting window 2040 of the electronic device 10.
  • the page 2041 for changing the setting of the external device 20 may include an item that is the same as or similar to the setting window 2020 activated by the external device 20.
  • FIG. 21 is a flowchart for describing a method in which an electronic device performs a task management function.
  • the electronic device 10 may receive a user input for the task management button 14.
  • the electronic device 10 may request identification information of an application running on the external device 20.
  • the electronic device 10 may receive identification information of an application running in the external device 20.
  • the electronic device 10 may provide a task management window including identification information of applications running in the electronic device 10 and the external device 20.
  • the task management window may switch the background application of the electronic device 10 or the external device 20 to the foreground application, or terminate the application running on the electronic device 10 or the external device 20. It can provide a GUI.
  • the electronic device 10 may receive a user input for terminating at least one application running on the external device 20 in the task management window.
  • the electronic device 10 may transmit an application termination signal to the external device 20 in response to the received user input.
  • 22A and 22B illustrate examples of a task management window provided by an electronic device.
  • the electronic device 10 may provide a task management window 2210 including identification information of applications running in the electronic device 10 and the external device 20. Meanwhile, the electronic device 10 may provide images 2211 to 2214 representing the devices on which the respective applications are executed. Thus, the user can intuitively recognize the device on which each application is running.
  • the task management window 2220 provided by the electronic device 10 may display identification information of an application being executed for each device. For example, the electronic device 10 divides the task management window 2220 to identify identification information 2222 of an application running on the electronic device 10 and identification information 2221 of an application running on the external device 20. ) Can be distinguished and displayed.
  • FIGS. 23 and 24 illustrate a configuration of an electronic device according to an embodiment.
  • the operation of each configuration shown in FIGS. 23 and 24 is related to the embodiment described in FIGS. 1 to 22 described above. Therefore, even if omitted below, the contents described above in FIGS. 1 to 22 may be applied to the operation of each component of FIGS. 23 and 24.
  • the electronic device 10 may include a user interface unit 1100, a controller 1200, and a communication unit 1300. However, not all components illustrated in FIG. 23 are essential components of the electronic device 10. The electronic device 10 may be implemented by more components than those illustrated in FIG. 23, or the electronic device 10 may be implemented by fewer components than those illustrated in FIG. 23.
  • the electronic device 10 may include an output unit 1400 and a sensing unit 1500 in addition to the user interface unit 1100, the control unit 1200, and the communication unit 1300. ) May further include an A / V input unit 1600 and a memory 1700.
  • the user interface unit 1100 may mean a means for a user to input data for controlling the electronic device 10.
  • the user interface unit 1100 includes a user interface (UI) provided for controlling the electronic device 10 and a user interface (UI) provided for controlling an application running on the electronic device 10. can do.
  • the UI provided to control the electronic device 10 may intuitively control functions such as volume control, screen brightness, screen switching, task management, and communication connection of the electronic device 10. It may include a UI for.
  • the UI provided to control the electronic device 10 may include at least one button or at least one graphical user interface (GUI) included in the electronic device 10.
  • GUI graphical user interface
  • the at least one GUI inputs data using a touch pad (contact capacitive method, pressure resistive film method, infrared sensing method, surface ultrasonic conduction method, integral tension measuring method, piezo effect method, etc.). It may be a means.
  • the user interface unit 1100 may further include a dome switch, a jog wheel, and the like.
  • the user interface 1100 may receive a user input for a UI provided to control the electronic device 10, and provide the received user input to the controller 1200. Meanwhile, the user's input may include a press, continuous press, long press, tap, touch and hold, double tap, drag, pan, flick, drag and drop, and swipe.
  • the controller 1200 may typically control the overall operation of the electronic device 10. For example, the controller 1200 executes programs stored in the memory 1700, such that the user interface unit 1100, the communication unit 1300, the output unit 1400, the sensing unit 1500, and the A / V input unit 1600 are executed. ) Can be controlled overall.
  • the controller 1200 may perform the operation of the electronic device 10 of FIGS. 1 to 22.
  • the controller 1200 may include a user interface unit 1100, a communication unit 1300, an output unit 1400, a sensing unit 1500, and A /.
  • the V input unit 1600 may be controlled overall.
  • the controller 1200 may determine whether the foreground application is associated with the external device 20. For example, the controller 1200 may determine whether the foreground application is associated with the external device 20 based on the identification information of the application running from the external device 20. Alternatively, the controller 1200 may receive information about applications installed in the external device 20 in advance and determine whether the foreground application matches the information about the previously received applications.
  • the information about the applications installed in the external device 20 the control application provided by the electronic device 10 to control the identification information of the applications installed in the external device 20 and the applications installed in the external device 20. It may include the execution information of.
  • the execution information of the control application may include URL information, an application installation file or a widget execution file. Therefore, the controller 1200 may determine whether the foreground application is associated with the external device 20 based on whether the foreground application matches the execution information of the control application. The controller 1200 may store information about applications installed in the external device 20 in the memory 1600.
  • the control unit 1200 when the foreground application is associated with the external device 20, the control unit 1200 performs a control signal corresponding to the user input instead of performing an operation corresponding to the user input received through the user interface 1100. Can be generated.
  • the controller 1200 may generate a control signal corresponding to a user input for performing an operation such as volume control, screen brightness control, and communication connection.
  • the controller 1200 may generate a control signal corresponding to the user input while performing an operation corresponding to the user input received through the user interface 1100. Can be.
  • the controller 1200 may generate a control signal corresponding to a user input for performing an operation such as activating a setting window or changing a screen, and activating a setting window or switching a screen.
  • the controller 1200 may provide the generated control signal to the communication unit 1300.
  • the controller 1200 may provide an application list based on the application identification information received from the external device 20. In addition, when one of the application list is selected, the controller 1200 may provide a control signal for executing the selected application to the communication unit 1300 and execute a control application corresponding to the selected application.
  • the controller 1200 may generate a task management window including identification information of applications running in the external device 20 in response to a user input for executing a task management function.
  • the identification information of the applications running in the external device 20 may be provided from the communication unit 1300.
  • the communication unit 1300 may include one or more components that allow the electronic device 10 to communicate with at least one external device 20.
  • the communication unit 1300 may include at least one of a short range communication unit 1310, a mobile communication unit 1320, and a broadcast receiving unit 1330.
  • the short-range wireless communication unit 1310 includes a Bluetooth communication unit, a BLE (Bluetooth Low Energy) communication unit, a near field communication unit, a WLAN (Wi-Fi) communication unit, a Zigbee communication unit, an infrared ray ( IrDA (Infrared Data Association) communication unit, WFD (Wi-Fi Direct) communication unit, UWB (ultra wideband) communication unit, Ant + communication unit and the like, but may not be limited thereto.
  • a Bluetooth communication unit a BLE (Bluetooth Low Energy) communication unit, a near field communication unit, a WLAN (Wi-Fi) communication unit, a Zigbee communication unit, an infrared ray ( IrDA (Infrared Data Association) communication unit, WFD (Wi-Fi Direct) communication unit, UWB (ultra wideband) communication unit, Ant + communication unit and the like, but may not be limited thereto.
  • the mobile communication unit 1320 may transmit / receive a radio signal with at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the broadcast receiver 1330 may receive a broadcast signal and / or broadcast related information from the outside through a broadcast channel.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the communication unit 1300 may receive information about applications installed in the external device 20.
  • the communication unit 1300 may receive information about applications installed in the external device 20 periodically or at a predetermined time.
  • the communicator 1300 may transmit a control signal for controlling the external device 20 to the external device 20.
  • the communicator 1300 may control a volume of the external device 20, adjust screen brightness, change a screen, activate a setting window, change a channel, connect a communication, connect an application, and execute an application. Can be sent to.
  • the communication unit 1300 may transmit the control signal to the external device 20 through an external server, a router, or the like.
  • the communication unit 1300 may receive identification information of at least one application running on the external device 20. In addition, the communication unit 1300 may receive an event from the external device 20.
  • the output unit 1400 may output an audio signal, a video signal, or a vibration signal, and the output unit 1400 may include a display unit 1410, an audio output unit 1420, and a vibration motor 1430. have.
  • the display unit 1410 displays and outputs information processed by the electronic device 10.
  • the display 1410 may display an application list including identification information of applications installed in the electronic device 10 or the external device 20.
  • the display 1410 may distinguish and display an application list including identification information of applications installed in the electronic device 10 and an application list including identification information of applications installed in the external device 20.
  • the display unit 1410 may display different folders or images including respective application lists.
  • the display unit 1410 may execute an application window, a notification window, a widget, a setting window, a home screen, a task management window, a notification bar, and the like under the control of the controller 1200. Can be displayed.
  • the display unit 1410 may be combined with the user interface unit 1100 to display a GUI provided to control the electronic device 10.
  • the display unit 1410 and the touch pad may be configured as a touch screen by forming a layer structure.
  • the display unit 1410 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, or a three-dimensional display.
  • the display may include at least one of a 3D display and an electrophoretic display.
  • the electronic device 10 may include two or more display units 1410 according to the implementation form of the electronic device 10. In this case, the two or more display units 1410 may be disposed to face each other using a hinge.
  • the sound output unit 1420 outputs audio data received from the communication unit 1300 or stored in the memory 1700.
  • the vibration motor 1430 may output a vibration signal.
  • the sensing unit 1500 may detect a state of the electronic device 10 or a state around the electronic device 10 and transmit the detected information to the controller 1200.
  • the sensing unit 1500 may include a geomagnetic sensor 1510, an acceleration sensor 1520, a temperature / humidity sensor 1530, an infrared sensor 1540, and a gyroscope sensor 1550.
  • a location sensor eg, GPS
  • an air pressure sensor 1570 e.g., a proximity sensor 1580
  • RGB sensor luminance sensor
  • the A / V input unit 1600 is for inputting an audio signal or a video signal, and may include a camera 1610 and a microphone 1620.
  • the camera 1610 may obtain an image frame such as a still image or a moving image through an image sensor in a video call mode or a photographing mode.
  • the microphone 1620 receives an external sound signal and processes it as electrical voice data.
  • the memory 1700 may store a program for processing and controlling the controller 1200, and may store data input to or output from the electronic device 10.
  • the memory 1700 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), RAM Random Access Memory (RAM) Static Random Access Memory (SRAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read-Only Memory (EEPROM), Programmable Read-Only Memory (PROM), Magnetic Memory, Magnetic Disk It may include at least one type of storage medium of the optical disk.
  • RAM Random Access Memory
  • SRAM Static Random Access Memory
  • ROM Read-Only Memory
  • EEPROM Electrically Erasable Programmable Read-Only Memory
  • PROM Programmable Read-Only Memory
  • Magnetic Memory Magnetic Disk It may include at least one type of storage medium of the optical disk.
  • Programs stored in the memory 1700 may be classified into a plurality of modules according to their functions.
  • the programs stored in the memory 1700 may be classified into a UI module 1710, a touch screen module 1720, a notification module 1730, and the like. .
  • the UI module 1710 may support a UI provided to control the electronic device 10 or a UI provided to provide an application.
  • the touch screen module 1720 may detect a touch gesture on the touch screen of the user and support information about the touch gesture.
  • the touch screen module 1720 according to some embodiments may recognize and analyze a touch code.
  • the touch screen module 1720 may be configured as separate hardware including a controller.
  • the notification module 1730 may generate a signal for notifying occurrence of an event of the electronic device 10.
  • the notification module 1730 may output the notification signal in the form of a video signal through the display unit 1410, may output the notification signal in the form of an audio signal through the sound output unit 1420, and the vibration motor 1430. Through the notification signal may be output in the form of a vibration signal.
  • Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media.
  • Computer readable media may include both computer storage media and communication media.
  • Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data.
  • Communication media typically includes computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transmission mechanism, and includes any information delivery media.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)
  • Computer Security & Cryptography (AREA)
  • Stored Programmes (AREA)

Abstract

전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 단계, 포그라운드(foreground) 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계, 및 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치로 전송하는 단계를 포함하는, 외부 장치를 제어하기 위한 전자 장치의 동작 방법을 제공한다.

Description

전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치
전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치에 관한 것이다.
모바일 장치의 사용이 보편화 되면서, 모바일 장치는 모바일 장치뿐 아니라 주변 기기들을 제어하기 위한 허브 역할을 수행하고 있다. 웨어러블 및 IOT 환경에서, 모바일 장치에 대한 중요도는 점점 더 커지고 있다.
모바일 장치는 스마트 TV 등과 같은 외부 장치를 제어하기 위한 리모콘 애플리케이션 등과 같은 전용 애플리케이션을 제공한다. 그러나, 모바일 장치에서 제공되는 전용 애플리케이션은, 전통적인 리모콘이 제공하는 기능을 크게 벗어나지 못하고 있다. 또한, 모바일 장치의 사용자는 전용 애플리케이션에 대한 학습을 해야 한다는 점에서 불편함이 있다.
상술한 과제를 해결하기 위한 개시된 실시예의 제1 측면은, 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 단계; 포그라운드(foreground) 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계; 및 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치로 전송하는 단계를 포함하는, 전자 장치가 외부 장치를 제어하는 방법을 제공한다.
또한, 사용자 인터페이스는, 전자 장치에 구비된 적어도 하나의 버튼 또는 전자 장치를 제어하기 위해 제공되는 적어도 하나의 GUI 일 수 있다.
또한, 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계는, 외부 장치에 설치된 애플리케이션의 식별 정보 및 외부 장치에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 외부 장치로부터 수신하는 단계; 및 포그라운드 애플리케이션이 제어 애플리케이션의 실행 정보에 매칭되면, 포그라운드 애플리케이션이 외부 장치에 연관되는 것으로 판단하는 단계를 포함할 수 있다.
또한, 포그라운드 애플리케이션은, 외부 장치로부터 수신된 애플리케이션 설치 파일에 기초하여 제공될 수 있다.
또한, 포그라운드 애플리케이션은, 외부 장치로부터 수신된 URL 정보에 기초하여 제공될 수 있다.
또한, 사용자 인터페이스가 음량 조절 버튼인 경우, 제어 신호는 외부 장치의 음량을 업(up) 또는 다운(down)하기 위한 것일 수 있다.
또한, 사용자 인터페이스가 홈 버튼인 경우, 제어 신호는 외부 장치의 화면을 홈 화면으로 전환하기 위한 것일 수 있다.
사용자 인터페이스가 설정창을 활성화하기 위한 GUI 인 경우, 제어 신호는 외부 장치의 화면을 설정창 화면으로 전환하기 위한 것인, 동작 방법.
또한, 포그라운드 애플리케이션은, 전자 장치에 표시된 애플리케이션 목록 중에서 하나를 선택하는 사용자 입력에 따라 실행되며, 애플리케이션 목록은, 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함할 수 있다.
또한, 애플리케이션 목록은, 전자 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 구별되어 표시될 수 있다.
또한, 포그라운드 애플리케이션은, 외부 장치의 상태 정보 및 외부 장치에서 실행 중인 애플리케이션에 대한 정보 중 적어도 하나를 포함하는 위젯(widget)일 수 있다.
또한, 사용자 인터페이스는 전자 장치에서 실행 중인 적어도 하나의 애플리케이션을 제어하기 위해 제공될 수 있으며, 전자 장치의 동작 방법은, 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신하는 단계; 및
외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보 및 전자 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 포함하는 태스크 매니지먼트(task management) 창을 표시하는, 동작 방법.
또한, 상기 제1 측면의 방법은, 태스크 매니지먼트 창에서, 외부 장치에서 실행 중인 적어도 하나의 애플리케이션을 종료하기 위한 사용자 입력을 수신하는 단계, 및 사용자 입력에 응답하여 애플리케이션 종료 신호를 외부 장치로 전송하는 단계를 더 포함할 수 있다.
또한, 제2 측면은, 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 사용자 인터페이스부, 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하고, 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 생성하는 제어부, 및 제어 신호를 외부 장치로 전송하는 통신부를 포함하는 전자 장치를 제공한다.
또한, 제3 측면은, 상기 제1 측면의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체를 제공한다.
실시예들은 전자 장치가 제공하는 사용자 경험(user experience)에 기초하여, 외부 장치들을 제어할 수 있는 방법 및 그 전자 장치를 제공하는 것을 목적으로 한다.
도 1은 전자 장치가 외부 장치를 제어하는 방법을 설명하기 위한 개요도이다.
도 2는 실시예에 따라 전자 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 3a 및 도 3b는 전자 장치를 제어하기 위해 제공되는 UI 의 일례이다.
도 4는 실시예에 따라 전자 장치가 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 방법을 설명하기 위한 흐름도이다.
도 5는 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 일례이다.
도 6은 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 다른 일례이다.
도 7은 전자 장치에서 제공된 애플리케이션 목록에 기초하여, 외부 장치와 연관된 애플리케이션이 실행되는 방법을 설명하기 위한 흐름도이다.
도 8은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 일례이다.
도 9는 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 다른 일례이다.
도 10은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 또 다른 일례이다.
도 11은 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 12는 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 13은 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 14는 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 15은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 16은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 17은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 18은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대한 사용자 입력에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 19는 전자 장치가 전자 장치의 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 20은 전자 장치가 전자 장치의 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 21은 전자 장치가 태스크 매니지먼트(task management) 기능을 수행하는 방법을 설명하기 위한 흐름도이다.
도 22a 및 도 22b는 전자 장치가 제공하는 태스크 매니지먼트 창의 일례이다.
도 23 및 도 24는 실시예에 따른 전자 장치의 구성을 도시한 도면이다.
상술한 과제를 해결하기 위한 개시된 실시예의 제1 측면은, 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 단계; 포그라운드(foreground) 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계; 및 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치로 전송하는 단계를 포함하는, 전자 장치가 외부 장치를 제어하는 방법을 제공한다.
또한, 제2 측면은, 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 사용자 인터페이스부, 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하고, 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 생성하는 제어부, 및 제어 신호를 외부 장치로 전송하는 통신부를 포함하는 전자 장치를 제공한다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되지는 않는다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 항목들의 조합 또는 복수의 관련된 항목들 중의 어느 하나의 항목을 포함한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에서 사용되는 "부"라는 용어는 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, "부"는 어떤 역할들을 수행한다. 그렇지만 "부"는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부"는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부"는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부"들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부"들로 결합되거나 추가적인 구성요소들과 "부"들로 더 분리될 수 있다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
도 1은 전자 장치가 외부 장치를 제어하는 방법을 설명하기 위한 개요도이다.
도 1을 참조하면, 전자 장치(10)는 적어도 하나의 외부 장치(20)와 상호 통신 가능한 네트워크를 이용하여 연결되어 있을 수 있다.
실시예에 따라 전자 장치(10)는 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)를 이용하여 적어도 하나의 외부 장치(20)를 제어할 수 있다. 여기서, 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)는, 전자 장치(10)의 기본적인 기능들을 직관적으로 제어하기 위해 미리 설정되어 있을 수 있다. 예를 들어, 전자 장치(10)는 전자 장치(10)의 음량 조절, 화면 밝기, 화면 전환, 태스크 매니지먼트(task management), 통신 연결 등의 기능을 직관적으로 제어하기 위한 UI 를 제공할 수 있다. 또한, 전자 장치(10)를 제어하기 위해 제공되는 UI 는, 전자 장치(10)에 구비된 물리 버튼(11 내지 13) 또는 소프트 버튼(14 내지 15) 또는 GUI(graphic user interface)(16 내지 18) 등을 포함할 수 있다.
실시예에 따라 전자 장치(10)는 포그라운드(foreground) 애플리케이션이 외부 장치(20)와 연관되어 있으면, 전자 장치(10)를 제어하기 위해 제공되는 UI 를 이용하여 외부 장치(20)의 기능을 직관적으로 제어할 수 있다. 여기서, 포그라운드(foreground) 애플리케이션은, 멀티 태스킹(multi-tasking) 환경에서 현재 활성화된 애플리케이션일 수 있다. 또한, 애플리케이션이 외부 장치(20)와 연관된다는 것은, 애플리케이션이 외부 장치(20)로부터 제공되거나, 외부 장치(20)로부터 제공된 정보에 기초하여 제공되는 것일 수 있다.
전자 장치(10)를 제어하기 위해 제공되는 UI 는, 일반적으로 포그라운드 애플리케이션에 관계없이 전자 장치(10)의 기능을 제어하나, 실시예에 따라 전자 장치(10)는 포그라운드 애플리케이션이 전자 장치(10) 또는 외부 장치(20)와 연관되는지 여부에 기초하여 전자 장치(10) 또는 외부 장치(20)의 기능을 제어할 수 있다. 예를 들어, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되면, 전자 장치(10)에서 제공되는 UI에 대한 사용자 입력에 대응되는 제어 신호를 외부 장치(20)에게 제공함으로써, 외부 장치(20)의 음량 조절, 화면 밝기, 화면 전환, 태스크 매니지먼트, 통신 연결 등의 기능을 제어할 수 있다.
전자 장치(10)는 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어 또는 모바일 의료기기 중 적어도 하나를 포함할 수 있다.
또한, 외부 장치(20)는 가전 제품(home appliance)일 수 있다. 가전 제품은, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
또는, 외부 장치(20)는 웨어러블 장치(wearable device)일 수 있다. 웨어러블 장치는, 예를 들어, 액세서리형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD)), 직물 또는 의류 일체형(예: 전자 의복), 신체 부착형(예: 스킨 패드(skin pad) 또는 문신), 또는 생체 이식형(예: implantable circuit) 중 적어도 하나를 포함할 수 있다.
또는, 외부 장치(20)는 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션(navigation) 장치, 위성 항법 시스템(GNSS(global navigation satellite system)), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구 등) 중 적어도 하나를 포함할 수 있다.
도 2는 실시예에 따라 전자 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 2를 참조하면, S210 에서, 전자 장치(10)는 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신한다. 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)는, 전자 장치(10)에 구비된 적어도 하나의 버튼, 또는 전자 장치(10)를 제어하기 위해 제공되는 적어도 하나의 GUI(graphic user interface)일 수 있다. 또한, 사용자 입력은, 전자 장치(10)에 구비된 버튼 또는 GUI 에 대한 누름, 연속 누름, 롱(long) 누름, 터치(touch), 롱프레스 터치(long-pressed touch) 입력 등을 포함할 수 있다.
도 3a 및 도 3b는 전자 장치를 제어하기 위해 제공되는 UI 의 일례이다.
도 3a를 참조하면, 전자 장치(10)는 전자 장치(10)를 제어하기 위한 물리 버튼 및 소프트 버튼을 제공할 수 있다. 예를 들어, 전자 장치(10)는 음량 조절을 위한 음량 조절 버튼(11), 전원 버튼(12) 및 홈 버튼(13)을 포함하는 물리 버튼을 제공할 수 있다. 또한, 전자 장치(10)는 태스크 매니지먼트(task management) 버튼(14) 및 실행 취소 버튼(15)을 포함하는 소프트 버튼을 제공할 수 있다. 그러나, 이에 제한되는 것은 아니며, 제조사에 의해 더 많은 수의 버튼 또는 더 적은 수의 버튼이 제공될 수 있다. 예를 들어, 전자 장치(10)는 태스크 매니지먼트 버튼(14)을 별도로 구비하지 않고, 홈 버튼(13)에 대한 사용자 입력(예를 들어, 연속 누름 입력 또는 롱 누름 입력)에 기초하여 태스크 매니지먼트 버튼에 대응되는 동작을 수행할 수 있다.
도 3b를 참조하면, 전자 장치(10)는 전자 장치(10)를 제어하기 위한 GUI(graphic user interface)를 제공할 수 있다. 예를 들어, 전자 장치(10)는 화면의 상단에 대한 터치앤드래그(touch&drag) 입력에 응답하여, 알림창(301)을 활성화할 수 있다. 또한, 전자 장치(10)는 알림창(301)을 통해 전자 장치(10)의 다양한 설정을 신속하게 변경할 수 있는 빠른 설정 GUI들(17), 설정창 실행 GUI(16) 및 화면 밝기 조절 GUI(18)를 제공할 수 있다. 그러나, 이에 제한되는 것은 아니며, 제조사 또는 사용자에 의해 전자 장치(10)를 제어하기 위한 다양한 GUI 가 제공될 수 있다.
다시 도 2를 참조하면, 실시예에 따라 전자 장치(10)는 도 3a 또는 도3b에 도시된 적어도 하나의 UI 에 대한 사용자 입력을 수신할 수 있다.
S220에서, 전자 장치(10)는 포그라운드(foreground) 애플리케이션이 외부 장치(20)와 연관되는지 여부를 판단한다.
실시예에 따라 전자 장치(10)는 외부 장치(20)로부터 실행 중인 애플리케이션의 식별 정보에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 판단할 수 있다. 예를 들어, 전자 장치(10)는 외부 장치(20)로부터 수신된 식별 정보와 포그라운드 애플리케이션의 식별 정보가 매칭되면, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는 것으로 판단할 수 있다.
또는, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 미리 수신하고, 포그라운드 애플리케이션이 미리 수신된 애플리케이션들에 대한 정보에 매칭되는지 여부를 판단할 수 있다. 여기서, 외부 장치(20)에 설치된 애플리케이션들에 대한 정보는, 외부 장치(20)에 설치된 애플리케이션들의 식별 정보 및 외부 장치(20)에 설치된 애플리케이션들을 제어하기 위한 제어 애플리케이션의 실행 정보를 포함할 수 있다. 제어 애플리케이션은, 외부 장치(20)에서 실행되는 애플리케이션을 전자 장치(10)가 제어하기 위한 것일 수 있다. 한편, 전자 장치(10)는, 주기적으로 또는 소정 시점에, 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 수신할 수 있다.
또한, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공할 수 있다. 전자 장치(10)는 애플리케이션 목록 중 하나를 선택하는 사용자 입력이 수신되면, 선택된 애플리케이션을 실행하기 위한 제어 신호를 외부 장치(20)로 전송하고, 선택된 애플리케이션에 대응되는 제어 애플리케이션을 전자 장치(10)에서 실행할 수 있다. 이때, 제어 애플리케이션이 포그라운드 애플리케이션으로 실행 중인 경우, 제어 애플리케이션은 외부 장치(20)에 연관되며, 미리 수신된 애플리케이션들에 대한 정보에 매칭될 수 있다.
S230에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송한다.
실시예에 따라 전자 장치(10)는 사용자 입력에 대응되는 동작을 수행하는 대신, 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 전자 장치(10)는 음량 조절, 화면 밝기 조절, 통신 연결 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다.
또는, 전자 장치(10)는 사용자 입력에 대응되는 동작을 수행하면서, 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 전자 장치(10)는 설정창 활성화, 화면 전환 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송하면서, 전자 장치(10)의 설정창을 활성화하거나 화면을 전환시키는 등의 동작을 수행할 수 있다.
한편, 전자 장치(10)가 복수의 외부 장치(20)와 통신 연결된 경우, 전자 장치(10)는 포그라운드 애플리케이션에 연관되는 특정 외부 장치로 제어 신호를 전송할 수 있다.
외부 장치(20)는 수신된 제어 신호에 대응되는 동작을 수행할 수 있다.
도 4는 실시예에 따라 전자 장치가 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 방법을 설명하기 위한 흐름도이다.
도 4를 참조하면, S410에서, 외부 장치(20)는 외부 장치(20)에 설치된 애플리케이션의 식별 정보 및 외부 장치(20)에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 전자 장치(10)로 전송할 수 있다.
예를 들어, 외부 장치(20)는 외부 장치(20)에 설치된 애플리케이션의 식별값(401) 및 아이콘 이미지(402)를 포함하는 애플리케이션 식별 정보 및 외부 장치(20)에 설치된 애플리케이션을 제어할 수 있는 제어 애플리케이션의 실행 정보(403)를 전자 장치(10)로 전송할 수 있다. 여기서, 제어 애플리케이션의 실행 정보(403)는, 전자 장치(10)가 외부 장치(20)에 설치된 애플리케이션을 제어하기 위해 전자 장치(10)에서 실행되는 제어 애플리케이션의 식별값 및 실행 파일에 대한 정보 중 적어도 하나를 포함할 수 있다. 예를 들어, 제어 애플리케이션의 실행 정보(403)는, URL 정보, 애플리케이션 설치 파일 정보 또는 위젯(widget) 실행 정보 등을 포함할 수 있다. 또한, 애플리케이션의 식별값(401)은 외부 장치(20)에 설치된 애플리케이션의 이름, 코드(code), 아이디, 또는 채널 정보 등을 포함할 수 있다. 한편, 전자 장치(10)는 외부 장치(20)로부터 수신된 애플리케이션들에 대한 정보를 테이블(table)(400)로 관리할 수 있다.
실시예에 따라 전자 장치(10)는 외부 장치(20)로부터 수신된 애플리케이션 식별 정보에 기초하여, 애플리케이션의 식별값(401) 및 아이콘 이미지(402) 중 적어도 하나를 포함하는 애플리케이션 목록을 제공할 수 있다. 또한, 애플리케이션 목록 중 하나가 선택되면, 선택된 애플리케이션을 실행하기 위한 제어 신호를 외부 장치(20)로 제공하고, 선택된 애플리케이션에 대응되는 제어 애플리케이션을 전자 장치(10)에서 실행할 수 있다. 제어 애플리케이션은, 예를 들어, 전자 장치(10)에 설치되어 실행될 수 있으며, 브라우저를 통해 제공되는 웹 애플리케이션, 또는 위젯일 수 있다. 이와 같이, 전자 장치(10)는 외부 장치(20)를 제어하기 위한 전용 애플리케이션을 설치하지 않으면서, 외부 장치(20)에 설치된 애플리케이션들을 실행 및 제어할 수 있다.
S420에서, 전자 장치(10)는 수신된 애플리케이션의 식별 정보에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 여부를 판단할 수 있다.
실시예에 따라 전자 장치(10)는 테이블(400)에 저장된 값들 중에서, 포그라운드 애플리케이션과 매칭되는 값이 존재하는지 판단할 수 있다. 예를 들어, 전자 장치(10)는 포그라운드 애플리케이션의 실행 정보가 테이블(400)의 제어 애플리케이션에 대한 정보(403)와 매칭되는지 판단할 수 있다.
또는, 실시예에 따라 전자 장치(10)는 애플리케이션 디스크립터(application descriptor)에 플래그(flag)를 추가하여, 각 애플리케이션이 연관된 장치를 나타낼 수도 있다. 이 경우, 전자 장치(10)는 추가된 플래그를 참조하여, 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 여부를 판단할 수 있다.
도 5는 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 일례이다.
도 5를 참조하면, 실시예에 따라 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 수신하여, 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공할 수 있다. 예를 들어, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션의 식별값(도 4의 401) 및 아이콘 이미지(도 4의 402)를 이용하여, 애플리케이션 목록을 제공할 수 있다.
또한, 전자 장치(10)는 애플리케이션 목록을 포함하는 폴더(folder)(510)를 제공할 수 있다. 전자 장치(10)는 폴더(510)에 대한 사용자 입력(540)이 수신되면, 도 5의 530에 도시된 바와 같이, 폴더(510)에 포함된 애플리케이션 목록을 화면에 표시할 수 있다.
한편, 전자 장치(10)는 전자 장치(10)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 구별하여 표시할 수 있다. 예를 들어, 전자 장치(10)는 전자 장치(10)에 설치된 애플리케이션들의 식별 정보를 포함하는 적어도 하나의 폴더(520)와 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 적어도 하나의 폴더(510)를 구별하여 제공할 수 있다.
도 6은 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 다른 일례이다.
도 6을 참조하면, 실시예에 따라 전자 장치(10)는 외부 장치(20)를 직관적으로 나타내는 아이콘 이미지(610, 620)를 제공함으로써, 각 외부 장치에 대응되는 애플리케이션 목록을 제공할 수 있다.
예를 들어, 전자 장치(10)는 제1 외부 장치를 나타내는 아이콘 이미지(610), 제2 외부 장치를 나타내는 아이콘 이미지(620) 등을 홈(home) 화면에 표시할 수 있다. 전자 장치(10)는 제1 외부 장치의 아이콘 이미지(610)에 대한 사용자 입력이 수신되면, 도 6의 630에 도시된 바와 같이, 제1 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 표시할 수 있다.
도 7은 전자 장치에서 제공된 애플리케이션 목록에 기초하여, 외부 장치와 연관된 애플리케이션이 실행되는 방법을 설명하기 위한 흐름도이다.
도 7을 참조하면, S710 에서, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공할 수 있다.
S720 에서, 전자 장치(10)는 애플리케이션 목록 중 하나를 선택하는 사용자 입력을 수신할 수 있다.
S730 에서, 전자 장치(10)는 선택된 애플리케이션을 실행하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. S740 에서, 외부 장치(20)는 수신된 제어 신호에 기초하여, 전자 장치(10)에서 선택된 애플리케이션을 실행할 수 있다.
S750 에서, 전자 장치(10)는 선택된 애플리케이션을 제어하기 위한 제어 애플리케이션을 실행할 수 있다. 제어 애플리케이션은, 외부 장치(20)로부터 수신된 설치 파일에 기초하여 실행되는 애플리케이션, URL 에 기초하여 실행되는 웹 애플리케이션, 또는 위젯일 수 있다. 또한, 전자 장치(10)에서 실행되는 제어 애플리케이션은 외부 장치(20)에 연관된다.
도 8은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 일례이다.
도 8을 참조하면, 전자 장치(10)는 외부 장치(20)에서 실행되는 브라우저 애플리케이션(820)을 제어하기 위한 브라우저 제어 애플리케이션(810)을 실행할 수 있다. 이때, 브라우저 제어 애플리케이션(810)은 외부 장치(20)로부터 수신된 설치 파일에 기초하여 전자 장치(10)에 설치될 수 있다. 또한, 브라우저 제어 애플리케이션(810)은 브라우저 애플리케이션(820)의 입력, 웹 페이지 이동, 콘텐트 선택 등을 제어할 수 있는 GUI 를 제공할 수 있다.
도 9는 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 다른 일례이다.
도 9를 참조하면, 전자 장치(10)는 외부 장치(20)에서 실행되는 A/V(Audio/Video) 콘텐트 재생 애플리케이션(920)을 제어하기 위한 웹 애플리케이션(910)을 실행할 수 있다. 예를 들어, 웹 애플리케이션(910)은 외부 장치(20)로부터 수신된 URL 에 접근함으로써, A/V 콘텐트 재생 애플리케이션(920)의 콘텐트 선택, 재생 등을 제어하기 위한 GUI 를 제공할 수 있다.
도 10은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 또 다른 일례이다.
도 10을 참조하면, 전자 장치(10)는 외부 장치(20)의 상태 정보 및 실행 중인 애플리케이션 정보 중 적어도 하나를 제공하기 위한 위젯(1010, 1020)을 실행할 수 있다. 예를 들어, 전자 장치(10)는 외부 장치(20)를 나타내는 아이콘(도 6의 610)에 대한 롱-프레스 터치 입력이 수신되면, 외부 장치(20)의 상태 정보를 나타내는 위젯(1010)을 제공할 수 있다. 또한, 전자 장치(10)는 애플리케이션 목록에서 선택된 애플리케이션에 대응되는 위젯(1020)을 실행할 수 있다.
또한, 전자 장치(10)는 외부 장치(20)로부터 이벤트(event)가 수신되면, 이벤트를 포함하는 위젯(미도시)을 제공할 수도 있다. 여기서, 이벤트는, 외부 장치(20)에 기 설정된 알림 이벤트(예를 들어, TV 프로그램 시작 시간 알림 이벤트, 냉장고 열림 알림 이벤트 등), 외부 장치(20)에 설치된 애플리케이션의 업데이트 이벤트 등을 포함할 수 있다. 한편, 외부 장치(20)로부터 수신된 이벤트는, 전자 장치(10)의 노티피케이션 바(notification bar) 또는 알림창(도 3b의 301)에서 표시될 수도 있다.
한편, 도 8 내지 도 10에 도시된 제어 애플리케이션들 등은 다양한 GUI 를 제공하며, 전자 장치(10)는 상기 GUI 에 대한 사용자 입력을 이용하여 외부 장치(20)를 제어할 수 있다. 또한, 실시예에 따라 전자 장치(10)는 도 8 내지 도 10에 도시된 제어 애플리케이션들 등이 포그라운드 애플리케이션으로 동작하는 경우, 전자 장치(10)를 제어하기 위해 제공되는 UI 에 대한 사용자 입력을 이용하여 외부 장치(20)를 제어할 수 있다.
도 11은 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 11을 참조하면, S1110 에서, 전자 장치(10)는 전자 장치(10)에 구비된 음량 조절 버튼(11)에 대한 사용자 입력을 수신할 수 있다.
S1120 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 포그라운드 애프리케이션이 외부 장치(20)와 연관되지 않으면, S1130 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)의 음량을 조절할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1140 에서, 전자 장치(10)는 외부 장치(20)의 음량을 조절하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 전자 장치(10)는 음량 조절 버튼(11)의 업(up) 버튼에 대한 누름 입력이 수신되면, 외부 장치(20)의 음량을 증가시키기 위한 제어 신호를 전송할 수 있다. 또한, 전자 장치(10)는 음량 조절 버튼(11)의 다운(down) 버튼에 대한 누름 입력이 수신되면, 외부 장치(20)의 음량을 감소시키기 위한 제어 신호를 전송할 수 있다.
도 12는 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 12를 참조하면, 전자 장치(10)는 외부 장치(20)에 연관된 웹 애플리케이션(910)의 실행 중, 전자 장치(10)의 음량을 조절하기 위한 음량 조절 버튼(11)에 대한 사용자 입력(1210)을 수신할 수 있다. 또한, 전자 장치(10)는 사용자 입력(1210)에 대응되는 제어 신호를 외부 장치(20)로 제공할 수 있다.
외부 장치(20)는 전자 장치(10)로부터 수신된 제어 신호에 기초하여, 외부 장치(20)의 음량을 조절할 수 있다. 또한, 외부 장치(20)는 전자 장치(10)에 의해 조절되는 음량을 나타내는 이미지(1220)를 화면에 표시할 수 있다.
도 13은 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 13을 참조하면, S1310 에서, 전자 장치(10)는 전자 장치(10)에 구비된 실행 취소 버튼(15)에 대한 사용자 입력을 수신할 수 있다.
S1320 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1330 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)에서 마지막으로 실행된 작업을 취소할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1340 에서, 전자 장치(10)는 외부 장치(20)에서 마지막으로 실행된 작업을 취소하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다.
도 14는 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 14를 참조하면, 전자 장치(10)는 외부 장치(20)에 연관된 웹 애플리케이션(910)의 실행 중에 실행 취소 버튼(15)에 대한 사용자 입력(1410)을 수신할 수 있다. 전자 장치(10)는 사용자 입력(1410)에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다.
외부 장치(20)는 수신된 제어 신호에 기초하여, 외부 장치(20)에서 마지막으로 실행된 작업을 취소하고 이전 화면을 표시할 수 있다. 예를 들어, 현재 실행 중인 A/V 콘텐트 재생 애플리케이션(920)을 종료하고, 이전에 실행 했던 브라우저 애플리케이션(820)의 실행 화면을 표시할 수 있다. 이 경우, 전자 장치(10)는 A/V 콘텐트 재생 애플리케이션(920)에 대응되는 웹 애플리케이션(910)을 종료할 수 있다. 또한, 전자 장치(10)는 외부 장치(20)에서 재실행되는 브라우저 애플리케이션(820)에 대응되는 브라우저 제어 애플리케이션(도 8의 810)을 재실행할 수 있다.
도 15은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 15를 참조하면, S1510 에서, 전자 장치(10)는 전자 장치(10)에 구비된 홈 버튼(13)에 대한 사용자 입력을 수신할 수 있다.
S1520 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1530 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)의 화면을 홈 화면(또는, 초기 화면)으로 전환할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1540 에서, 전자 장치(10)는 외부 장치(20)의 화면을 홈 화면(또는, 초기 화면)으로 전환하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 또한, 전자 장치(10)는 S1530 단계로 이동하여, 전자 장치(10)의 화면을 홈 화면(또는, 초기 화면)으로 전환할 수 있다.
도 16은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 16을 참조하면, 전자 장치(10)는 외부 장치(20)에 연관된 웹 애플리케이션(910)의 실행 중에 홈 버튼(13)에 대한 사용자 입력(1610)을 수신하고, 사용자 입력(1610)에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다.
외부 장치(20)는 수신된 제어 신호에 기초하여, A/V 콘텐트 재생 애플리케이션의 실행 화면(미도시)을 홈 화면(1620)으로 전환할 수 있다. 또한, 전자 장치(10)는 제어 신호를 외부 장치(20)로 전송한 후, 전자 장치(10)의 화면을 홈 화면(미도시)으로 전환할 수 있다.
도 17은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 17을 참조하면, S1710 에서, 전자 장치(10)는 전자 장치(10)의 화면 밝기를 신속하게 조절하기 위해 제공되는 화면 밝기 조절 GUI(18)에 대한 사용자 입력을 수신할 수 있다.
S1720 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1730 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)의 화면 밝기를 조절할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1740 에서, 전자 장치(10)는 외부 장치(20)의 화면 밝기를 조절하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다.
도 18은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 18을 참조하면, 전자 장치(10)는 전자 장치(10)의 알림창(301)에서 제공되는 화면 밝기 조절 GUI(18)에 대한 사용자 입력(1810)에 응답하여, 외부 장치(20)의 화면 밝기를 조절할 수 있다.
외부 장치(20)는 전자 장치(10)로부터 수신된 제어 정보에 기초하여, 외부 장치(20)의 화면 밝기를 조절할 수 있다. 또한, 외부 장치(20)는 전자 장치(10)에 의해 조절되는 현재 화면 밝기를 나타내는 이미지(1820)를 표시할 수 있다.
한편, 전자 장치(10)는 전자 장치(10)의 통신 연결(예를 들어, 블루투스 통신 연결, 와이파이 통신 연결 등)을 신속하게 제어하기 위한 통신 연결 GUI(17)에 대한 사용자 입력에 응답하여, 외부 장치(20)의 통신 연결을 제어하기 위한 제어 신호를 외부 장치(20)로 제공할 수도 있다. 이 경우, 외부 장치(20)는 수신된 제어 신호에 기초하여, 외부 장치(20)의 통신 연결을 설정하거나 종료할 수 있다.
도 19는 전자 장치가 전자 장치의 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 19를 참조하면, S1910 에서, 전자 장치(10)는 전자 장치(10)의 설정창을 신속하게 활성화하기 위해 제공되는 설정창 활성화 GUI(18)에 대한 사용자 입력을 수신할 수 있다.
S1920 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1730 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)에 대응되는 설정창을 활성화할 수 있다.
실시예에 따라 설정창은 전자 장치(10)의 설정 및 외부 장치(20)의 설정을 변경할 수 있는 복수의 페이지들을 포함할 수 있다. 따라서, 전자 장치(10)에 대응되는 설정창은, 복수의 페이지들 중, 전자 장치(10)의 설정을 변경할 수 있는 적어도 하나의 페이지를 의미할 수 있다. 전자 장치(10)는 외부 장치(20)로부터 수신된 설정 정보(configuration information)에 기초하여, 각 페이지를 생성할 수 있다.
만약, 포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1740 에서, 전자 장치(10)는 외부 장치(20)의 화면을 설정창 화면으로 전환하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 또한, S1950 에서, 전자 장치(10)는 외부 장치(20)에 대응되는 설정창을 활성화할 수 있다. 여기서, 외부 장치(20)에 대응되는 설정창은, 복수의 페이지들 중, 외부 장치(20)의 설정을 변경할 수 있는 적어도 하나의 페이지를 의미할 수 있다.
도 20은 전자 장치가 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 20을 참조하면, 전자 장치(10)는 전자 장치(10)의 알림창(301)에서 제공되는 설정창 활성화 GUI(16)에 대한 사용자 입력(2010)에 응답하여, 외부 장치(20)의 화면을 설정창(2020) 화면으로 전환할 수 있다.
또한, 전자 장치(10)는, 도20의 우측에 도시된 바와 같이, 전자 장치(10)의 설정창(2040)을 활성화할 수 있다. 이때, 전자 장치(10)는 전자 장치(10)의 설정창(2040)에 포함된 복수의 페이지들을 중에서, 외부 장치(20)의 설정을 변경할 수 있는 페이지(2041)를 활성화할 수 있다. 외부 장치(20)의 설정을 변경할 수 있는 페이지(2041)는 외부 장치(20)에서 활성화된 설정창(2020)과 동일 또는 유사한 항목을 포함할 수 있다.
도 21은 전자 장치가 태스크 매니지먼트(task management) 기능을 수행하는 방법을 설명하기 위한 흐름도이다.
도 21을 참조하면, S2110 에서, 전자 장치(10)는 태스크 매니지먼트 버튼(14)에 대한 사용자 입력을 수신할 수 있다.
S2120 에서, 전자 장치(10)는 외부 장치(20)에서 실행 중인 애플리케이션의 식별 정보를 요청할 수 있다. 또한, S2130 에서, 전자 장치(10)는 외부 장치(20)에서 실행 중인 애플리케이션의 식별 정보를 수신할 수 있다.
S2140 에서, 전자 장치(10)는 전자 장치(10) 및 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보를 포함하는 태스크 매니지먼트 창을 제공할 수 있다. 여기서, 태스크 매니지먼트 창은, 전자 장치(10) 또는 외부 장치(20)의 백그라운드(background) 애플리케이션을 포그라운드 애플리케이션으로 전환하거나, 전자 장치(10) 또는 외부 장치(20)에서 실행 중인 애플리케이션을 종료할 수 있는 GUI 를 제공할 수 있다.
예를 들어, 전자 장치(10)는 태스크 매니지먼트 창에서 외부 장치(20)에서 실행 중인 적어도 하나의 애플리케이션을 종료하기 위한 사용자 입력을 수신할 수 있다. 또한, 전자 장치(10)는 수신된 사용자 입력에 응답하여 애플리케이션 종료 신호를 외부 장치(20)로 전송할 수 있다.
도 22a 및 도 22b는 전자 장치가 제공하는 태스크 매니지먼트 창의 일례이다.
도 22a를 참조하면, 전자 장치(10)는 전자 장치(10) 및 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보를 포함하는 태스크 매니지먼트 창(2210)을 제공할 수 있다. 한편, 전자 장치(10)는 각 애플리케이션이 실행되는 장치를 나타내는 이미지(2211 내지 2214)를 제공할 수 있다. 따라서, 사용자는 직관적으로 각 애플리케이션이 실행 중인 장치를 인지할 수 있다.
도 22b를 참조하면, 전자 장치(10)에서 제공되는 태스크 매니지먼트 창(2220)은, 장치 별로, 실행 중인 애플리케이션의 식별 정보를 표시할 수도 있다. 예를 들어, 전자 장치(10)는 태스크 매니지먼트 창(2220)을 분할하여, 전자 장치(10)에서 실행중인 애플리케이션의 식별 정보(2222)와 외부 장치(20)에서 실행 중인 애플리케이션의 식별 정보(2221)를 구별하여 표시할 수 있다.
도 23 및 도 24는 실시예에 따른 전자 장치의 구성을 도시한 도면이다. 도 23 및 도 24에 도시된 각 구성의 동작은, 앞서 설명된 도 1 내지 도 22 에서 설명된 실시예와 관련된다. 따라서, 이하 생략된 내용이라 할지라도, 도 1 내지 도 22 에서 앞서 설명된 내용들은, 도 23 및 도 24의 각 구성의 동작에 적용될 수 있다.
도 23에 도시된 바와 같이, 실시예에 따른 전자 장치(10)는 사용자 인터페이스부(1100), 제어부(1200) 및 통신부(1300)를 포함할 수 있다. 그러나, 도 23에 도시된 구성 요소 모두가 전자 장치(10)의 필수 구성 요소인 것은 아니다. 도 23에 도시된 구성 요소보다 많은 구성 요소에 의해 전자 장치(10)가 구현될 수도 있고, 도 23에 도시된 구성 요소보다 적은 구성 요소에 의해 전자 장치(10)가 구현될 수도 있다.
예를 들어, 도 24에 도시된 바와 같이, 실시예에 따른 전자 장치(10)는 사용자 인터페이스부(1100), 제어부(1200) 및 통신부(1300) 이외에, 출력부(1400), 센싱부(1500), A/V 입력부(1600), 및 메모리(1700)를 더 포함할 수도 있다.
사용자 인터페이스부(1100)는 사용자가 전자 장치(10)를 제어하기 위한 데이터를 입력하는 수단을 의미할 수 있다.
실시예에 따라 사용자 인터페이스부(1100)는 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)와 전자 장치(10)에서 실행 중인 애플리케이션을 제어하기 위해 제공되는 사용자 인터페이스(UI)를 포함할 수 있다. 전자 장치(10)를 제어하기 위해 제공되는 UI 는, 예를 들어, 전자 장치(10)의 음량 조절, 화면 밝기, 화면 전환, 태스크 매니지먼트(task management), 통신 연결 등의 기능을 직관적으로 제어하기 위한 UI 를 포함할 수 있다.
또한, 전자 장치(10)를 제어하기 위해 제공되는 UI 는, 전자 장치(10)에 구비된 적어도 하나의 버튼 또는 적어도 하나의 GUI(graphic user interface)를 포함할 수 있다. 이때, 적어도 하나의 GUI는, 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등)를 이용하여 데이터를 입력하는 수단일 수 있다. 또한, 사용자 인터페이스부(1100)는 돔 스위치(dome switch), 조그 휠 등을 더 포함할 수 있다.
사용자 인터페이스부(1100)는 전자 장치(10)를 제어하기 위해 제공되는 UI 에 대한 사용자 입력을 수신하고, 수신된 사용자 입력을 제어부(1200)로 제공할 수 있다. 한편, 사용자의 입력에는, 누름, 연속 누름, 롱 누름, 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 스와이프 등이 있을 수 있다.
제어부(1200)는 통상적으로 전자 장치(10)의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(1200)는 메모리(1700)에 저장된 프로그램들을 실행함으로써, 사용자 인터페이스부(1100), 통신부(1300), 출력부(1400), 센싱부(1500), A/V 입력부(1600) 등을 전반적으로 제어할 수 있다. 제어부(1200)는 도 1 내지 도 22에서의 전자 장치(10)의 동작을 수행하기 위하여, 사용자 인터페이스부(1100), 통신부(1300), 출력부(1400), 센싱부(1500), A/V 입력부(1600) 등을 전반적으로 제어할 수 있다.
구체적으로, 제어부(1200)는 사용자 인터페이스부(1100)를 통해 사용자 입력이 수신되면, 포그라운드(foreground) 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 예를 들어, 제어부(1200)는 외부 장치(20)로부터 실행 중인 애플리케이션의 식별 정보에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 판단할 수 있다. 또는, 제어부(1200)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 미리 수신하고, 포그라운드 애플리케이션이 미리 수신된 애플리케이션들에 대한 정보에 매칭되는지 여부를 판단할 수 있다. 여기서, 외부 장치(20)에 설치된 애플리케이션들에 대한 정보는, 외부 장치(20)에 설치된 애플리케이션들의 식별 정보 및 외부 장치(20)에 설치된 애플리케이션들을 제어하기 위해 전자 장치(10)에서 제공되는 제어 애플리케이션의 실행 정보를 포함할 수 있다. 또한, 제어 애플리케이션의 실행 정보는, URL 정보, 애플리케이션 설치 파일 또는 위젯(widget) 실행 파일 등을 포함할 수 있다. 따라서, 제어부(1200)는 포그라운드 애플리케이션이 제어 애플리케이션의 실행 정보에 매칭되는지 여부에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 판단할 수 있다. 한편, 제어부(1200)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 메모리(1600)에 저장할 수 있다.
실시예에 따라 제어부(1200)는 포그라운드 애플리케이션이 외부 장치(20)에 연관되면, 사용자 인터페이스부(1100)를 통해 수신된 사용자 입력에 대응되는 동작을 수행하는 대신, 사용자 입력에 대응되는 제어 신호를 생성할 수 있다. 예를 들어, 제어부(1200)는 음량 조절, 화면 밝기 조절, 통신 연결 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 생성할 수 있다.
또는, 제어부(1200)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되면, 사용자 인터페이스부(1100)를 통해 수신된 사용자 입력에 대응되는 동작을 수행하면서, 사용자 입력에 대응되는 제어 신호를 생성할 수 있다. 예를 들어, 제어부(1200)는 설정창 활성화, 화면 전환 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 생성하고, 설정창을 활성화하거나 화면을 전환시키는 등의 동작을 수행할 수 있다. 또한, 제어부(1200)는 생성된 제어 신호를 통신부(1300)로 제공할 수 있다.
실시예에 따라 제어부(1200)는 외부 장치(20)로부터 수신된 애플리케이션 식별 정보에 기초하여 애플리케이션 목록을 제공할 수 있다. 또한, 제어부(1200)는 애플리케이션 목록 중 하나가 선택되면, 선택된 애플리케이션을 실행하기 위한 제어 신호를 통신부(1300)로 제공하고, 선택된 애플리케이션에 대응되는 제어 애플리케이션을 실행할 수 있다.
또한, 제어부(1200)는 태스크 매니지먼트(task management) 기능을 실행하는 사용자 입력에 응답하여, 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보를 포함하는 태스크 매니지먼트 창을 생성할 수 있다. 이때, 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보는, 통신부(1300)로부터 제공될 수 있다.
통신부(1300)는, 전자 장치(10)가 적어도 하나의 외부 장치(20)와 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 통신부(1300)는, 근거리 통신부(1310), 이동 통신부(1320) 및 방송 수신부(1330) 중 적어도 하나를 포함할 수 있다.
근거리 통신부(short-range wireless communication unit)(1310)는, 블루투스 통신부, BLE(Bluetooth Low Energy) 통신부, 근거리 무선 통신부(Near Field Communication unit), WLAN(와이파이) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
이동 통신부(1320)는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신할 수 있다. 방송 수신부(1330)는, 방송 채널을 통하여 외부로부터 방송 신호 및/또는 방송 관련된 정보를 수신할 수 있다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다.
실시예에 따라 통신부(1300)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 수신할 수 있다. 예를 들어, 통신부(1300)는 주기적으로, 또는 소정 시점에 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 수신할 수 있다.
또한, 통신부(1300)는 외부 장치(20)를 제어하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 통신부(1300)는 외부 장치(20)의 음량 조절, 화면 밝기 조절, 화면 전환, 설정창 활성화, 채널 변경, 통신 연결, 애플리케이션 실행 및 종료 등을 지시하는 제어 신호를 외부 장치(20)로 전송할 수 있다. 한편, 실시예에 따라 통신부(1300)는 상기 제어 신호를 외부 서버, 라우터(router) 등을 통해 외부 장치(20)로 전송할 수도 있다.
또한, 통신부(1300)는 외부 장치(20)에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신할 수 있다. 또한, 통신부(1300)는 외부 장치(20)로부터 이벤트를 수신할 수 있다.
출력부(1400)는, 오디오 신호 또는 비디오 신호 또는 진동 신호를 출력할 수 있으며, 출력부(1400)는 디스플레이부(1410), 음향 출력부(1420), 및 진동 모터(1430)를 포함할 수 있다.
디스플레이부(1410)는 전자 장치(10)에서 처리되는 정보를 표시 출력한다. 예를 들어, 디스플레이부(1410)는 전자 장치(10) 또는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 표시할 수 있다. 예를 들어, 디스플레이부(1410)는 전자 장치(10)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 구별하여 표시할 수 있다. 구체적으로, 디스플레이부(1410)는 각각의 애플리케이션 목록을 포함하는 서로 다른 폴더(folder) 또는 이미지를 표시할 수 있다.
또한, 디스플레이부(1410)는 제어부(1200)의 제어에 의해 애플리케이션의 실행창, 알림창, 위젯(widget), 설정창, 홈 화면, 태스크 매니지먼트(task management) 창, 노티피케이션 바(notification bar) 등을 표시할 수 있다.
또한, 디스플레이부(1410)는 사용자 인터페이스부(1100)와 결합되어, 전자 장치(10)를 제어하기 위해 제공되는 GUI 를 표시할 수 있다. 예를 들어, 디스플레이부(1410)와 터치패드가 레이어 구조를 이루어 터치 스크린으로 구성될 수 있다.
한편, 디스플레이부(1410)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophoretic display) 중에서 적어도 하나를 포함할 수 있다. 그리고 전자 장치(10)의 구현 형태에 따라 전자 장치(10)는 디스플레이부(1410)를 2개 이상 포함할 수도 있다. 이때, 2개 이상의 디스플레이부(1410)는 힌지(hinge)를 이용하여 마주보게 배치될 수도 있다.
음향 출력부(1420)는 통신부(1300)로부터 수신되거나 메모리(1700)에 저장된 오디오 데이터를 출력한다. 진동 모터(1430)는 진동 신호를 출력할 수 있다.
센싱부(1500)는 전자 장치(10)의 상태 또는 전자 장치(10) 주변의 상태를 감지하고, 감지된 정보를 제어부(1200)로 전달할 수 있다. 예를 들어, 센싱부(1500)는 지자기 센서(Magnetic sensor)(1510), 가속도 센서(Acceleration sensor)(1520), 온/습도 센서(1530), 적외선 센서(1540), 자이로스코프 센서(1550), 위치 센서(예컨대, GPS)(1560), 기압 센서(1570), 근접 센서(1580), 및 RGB 센서(illuminance sensor)(1590) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다.
A/V(Audio/Video) 입력부(1600)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(1610)와 마이크로폰(1620) 등이 포함될 수 있다.
카메라(1610)는 화상 통화모드 또는 촬영 모드에서 이미지 센서를 통해 정지영상 또는 동영상 등의 화상 프레임을 얻을 수 있다. 또한, 마이크로폰(1620)은 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다.
메모리(1700)는 제어부(1200)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 전자 장치(10)로 입력되거나 전자 장치(10)로부터 출력되는 데이터를 저장할 수도 있다.
메모리(1700)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
메모리(1700)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈(1710), 터치 스크린 모듈(1720), 알림 모듈(1730) 등으로 분류될 수 있다.
UI 모듈(1710)은 전자 장치(10)를 제어하기 위해 제공되는 UI 등 또는 애플리케이션을 제공하기 위해 제공되는 UI 등을 지원할 수 있다. 터치 스크린 모듈(1720)은 사용자의 터치 스크린 상의 터치 제스처를 감지하고, 터치 제스처에 관한 정보를 지원할 수 있다. 일부 실시예에 따른 터치 스크린 모듈(1720)은 터치 코드를 인식하고 분석할 수 있다. 터치 스크린 모듈(1720)은 컨트롤러를 포함하는 별도의 하드웨어로 구성될 수도 있다.
알림 모듈(1730)은 전자 장치(10)의 이벤트 발생을 알리기 위한 신호를 발생할 수 있다. 알림 모듈(1730)은 디스플레이부(1410)를 통해 비디오 신호 형태로 알림 신호를 출력할 수도 있고, 음향 출력부(1420)를 통해 오디오 신호 형태로 알림 신호를 출력할 수도 있고, 진동 모터(1430)를 통해 진동 신호 형태로 알림 신호를 출력할 수도 있다.
개시된 실시예들은 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (15)

  1. 외부 장치를 제어하기 위한 전자 장치의 동작 방법에 있어서,
    상기 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스에 대한 사용자 입력을 수신하는 단계;
    포그라운드(foreground) 애플리케이션이 상기 외부 장치와 연관되는지 여부를 판단하는 단계; 및
    상기 포그라운드 애플리케이션이 상기 외부 장치와 연관되면, 상기 사용자 입력에 대응되는 제어 신호를 상기 외부 장치로 전송하는 단계;를 포함하는, 동작 방법.
  2. 제 1 항에 있어서,
    상기 사용자 인터페이스는, 상기 전자 장치에 구비된 적어도 하나의 버튼 또는 상기 전자 장치를 제어하기 위해 제공되는 적어도 하나의 GUI 인, 동작 방법.
  3. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션이 상기 외부 장치와 연관되는지 여부를 판단하는 단계는,
    상기 외부 장치에 설치된 애플리케이션의 식별 정보 및 상기 외부 장치에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 상기 외부 장치로부터 수신하는 단계; 및
    상기 포그라운드 애플리케이션이 상기 제어 애플리케이션의 실행 정보에 매칭되면, 상기 포그라운드 애플리케이션이 상기 외부 장치에 연관되는 것으로 판단하는 단계; 를 포함하는, 동작 방법.
  4. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치로부터 수신된 애플리케이션 설치 파일에 기초하여 제공되는, 동작 방법.
  5. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치로부터 수신된 URL 정보에 기초하여 제공되는, 동작 방법.
  6. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 전자 장치에 표시된 애플리케이션 목록 중에서 하나를 선택하는 사용자 입력에 따라 실행되며,
    상기 애플리케이션 목록은, 상기 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는, 동작 방법.
  7. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치의 상태 정보 및 상기 외부 장치에서 실행 중인 애플리케이션에 대한 정보 중 적어도 하나를 포함하는 위젯(widget)인, 동작 방법.
  8. 제 1 항에 있어서,
    상기 사용자 인터페이스는, 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션을 제어하기 위해 제공되며,
    상기 동작 방법은,
    상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신하는 단계; 및
    상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보 및 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 포함하는 태스크 매니지먼트(task management) 창을 표시하는, 동작 방법.
  9. 외부 장치를 제어하기 위한 전자 장치에 있어서,
    상기 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스에 대한 사용자 입력을 수신하는 사용자 인터페이스부;
    포그라운드(foreground) 애플리케이션이 상기 외부 장치와 연관되는지 여부를 판단하고, 상기 포그라운드 애플리케이션이 상기 외부 장치와 연관되면, 상기 사용자 입력에 대응되는 제어 신호를 생성하는 제어부; 및
    상기 제어 신호를 상기 외부 장치로 전송하는 통신부;를 포함하는, 전자 장치.
  10. 제 9 항에 있어서,
    상기 사용자 인터페이스부는, 상기 전자 장치에 구비된 적어도 하나의 버튼 또는 상기 전자 장치를 제어하기 위해 제공되는 적어도 하나의 GUI(graphic user interface)를 포함하는, 전자 장치.
  11. 제 9 항에 있어서,
    상기 통신부는, 상기 외부 장치에 설치된 애플리케이션의 식별 정보 및 상기 외부 장치에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 상기 외부 장치로부터 수신하고,
    상기 제어부는, 상기 포그라운드 애플리케이션이 상기 제어 애플리케이션의 실행 정보에 매칭되면, 상기 포그라운드 애플리케이션이 상기 외부 장치에 연관되는 것으로 판단하는, 전자 장치.
  12. 제 9 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치로부터 수신된 애플리케이션 설치 파일 또는 URL 정보에 기초하여 제공되는, 전자 장치.
  13. 제 9 항에 있어서,
    상기 전자 장치에 표시된 애플리케이션 목록 중에서 하나를 선택하는 사용자 입력에 따라 실행되며,
    상기 애플리케이션 목록은, 상기 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는, 전자 장치.
  14. 제 9 항에 있어서,
    상기 사용자 인터페이스는, 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션을 제어하기 위해 제공되며,
    상기 통신부는, 상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신하고,
    상기 제어부는, 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보 및 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 포함하는 태스크 매니지먼트(task management) 창을 제공하는, 전자 장치.
  15. 제 1 항 내지 제 8 항 중 어느 한 항의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
PCT/KR2016/011847 2016-05-04 2016-10-20 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치 Ceased WO2017191875A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/096,376 US11036367B2 (en) 2016-05-04 2016-10-20 Method for controlling external device by electronic device, and electronic device therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160055769A KR102651875B1 (ko) 2016-05-04 2016-05-04 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치
KR10-2016-0055769 2016-05-04

Publications (1)

Publication Number Publication Date
WO2017191875A1 true WO2017191875A1 (ko) 2017-11-09

Family

ID=60203757

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/011847 Ceased WO2017191875A1 (ko) 2016-05-04 2016-10-20 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치

Country Status (3)

Country Link
US (1) US11036367B2 (ko)
KR (1) KR102651875B1 (ko)
WO (1) WO2017191875A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2017418882A1 (en) * 2017-06-13 2019-12-19 Huawei Technologies Co., Ltd. Display method and apparatus
KR102572483B1 (ko) * 2018-05-25 2023-08-30 삼성전자주식회사 전자 장치 및 외부 전자 장치를 제어하는 방법
CN110769320B (zh) * 2019-11-19 2021-10-15 三星电子（中国）研发中心 一种智能设备分享内容的方法、系统及装置
KR102884741B1 (ko) * 2020-03-24 2025-11-13 삼성전자주식회사 전자 장치 및 이의 제어 방법
CN114115691B (zh) * 2021-10-27 2023-07-07 荣耀终端有限公司 电子设备及其交互方法、介质
CN115878059A (zh) * 2022-10-20 2023-03-31 北京凌宇智控科技有限公司 头戴式显示设备上信息码的显示方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100026941A (ko) * 2008-08-29 2010-03-10 주식회사 유시스 휴대폰에 리모컨 기능을 부가하는 리모컨 기능 부가 시스템및 리모컨 기능 부가 방법
KR20130012397A (ko) * 2011-07-25 2013-02-04 엘지전자 주식회사 휴대 단말기 및 그 동작방법
US8504008B1 (en) * 2012-02-02 2013-08-06 Google Inc. Virtual control panels using short-range communication
US20140022192A1 (en) * 2012-07-18 2014-01-23 Sony Mobile Communications, Inc. Mobile client device, operation method, recording medium, and operation system
KR20140055794A (ko) * 2012-11-01 2014-05-09 주식회사 케이티 콘텐츠 맞춤형 인터페이스를 표시하는 모바일 디바이스 및 모바일 디바이스 사용 방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7586398B2 (en) 1998-07-23 2009-09-08 Universal Electronics, Inc. System and method for setting up a universal remote control
US9257037B2 (en) 1998-07-23 2016-02-09 Universal Electronics Inc. System and method for automatically setting up a universal remote control
US8176432B2 (en) 2001-11-20 2012-05-08 UEI Electronics Inc. Hand held remote control device having an improved user interface
US6989763B2 (en) 2002-02-15 2006-01-24 Wall Justin D Web-based universal remote control
US9208679B2 (en) 2006-09-05 2015-12-08 Universal Electronics Inc. System and method for configuring the remote control functionality of a portable device
US9154942B2 (en) 2008-11-26 2015-10-06 Free Stream Media Corp. Zero configuration communication between a browser and a networked media device
US8881060B2 (en) * 2010-04-07 2014-11-04 Apple Inc. Device, method, and graphical user interface for managing folders
US8995981B1 (en) 2010-12-13 2015-03-31 Csr Technology Inc. Systems and methods for remote control adaptive configuration
KR101836403B1 (ko) * 2011-04-12 2018-04-19 엘지전자 주식회사 디스플레이 장치의 리모콘 기능을 수행하는 이동 단말기
EP2521372A1 (en) 2011-05-03 2012-11-07 LG Electronics Inc. Electronic device and method for operating the same
WO2014027349A1 (en) 2012-08-14 2014-02-20 Switchbee Ltd. System and method for remote control of home appliances without infrastructure changes
KR101949737B1 (ko) 2012-08-28 2019-02-19 엘지전자 주식회사 이동 단말기 및 이의 제어 방법, 이를 위한 기록 매체
CN103677498A (zh) * 2012-09-11 2014-03-26 华为终端有限公司 图标排序显示的方法和终端设备
KR20140144504A (ko) 2013-06-11 2014-12-19 삼성전자주식회사 가전 기기와 모바일 기기, 가전 기기의 제어 시스템
KR102121918B1 (ko) 2013-12-20 2020-06-11 삼성전자주식회사 홈 네트워크 시스템에서 이벤트 통지 방법 및 장치
EP2916195B1 (en) 2014-03-03 2019-09-11 LG Electronics Inc. Mobile terminal and controlling method thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100026941A (ko) * 2008-08-29 2010-03-10 주식회사 유시스 휴대폰에 리모컨 기능을 부가하는 리모컨 기능 부가 시스템및 리모컨 기능 부가 방법
KR20130012397A (ko) * 2011-07-25 2013-02-04 엘지전자 주식회사 휴대 단말기 및 그 동작방법
US8504008B1 (en) * 2012-02-02 2013-08-06 Google Inc. Virtual control panels using short-range communication
US20140022192A1 (en) * 2012-07-18 2014-01-23 Sony Mobile Communications, Inc. Mobile client device, operation method, recording medium, and operation system
KR20140055794A (ko) * 2012-11-01 2014-05-09 주식회사 케이티 콘텐츠 맞춤형 인터페이스를 표시하는 모바일 디바이스 및 모바일 디바이스 사용 방법

Also Published As

Publication number Publication date
KR102651875B1 (ko) 2024-03-27
KR20170125655A (ko) 2017-11-15
US20190138172A1 (en) 2019-05-09
US11036367B2 (en) 2021-06-15

Similar Documents

Publication Publication Date Title
WO2018169365A1 (en) Electronic device for controlling audio output and operation method thereof
WO2019039871A1 (en) ELECTRONIC DEVICE AND METHOD FOR OPERATING APPLICATIONS
WO2017142373A1 (en) Method of controlling the sharing of videos and electronic device adapted thereto
WO2017043936A1 (en) Method for measuring angles between displays and electronic device using the same
WO2018143624A1 (ko) 디스플레이 제어 방법, 저장 매체 및 전자 장치
WO2014157897A1 (en) Method and device for switching tasks
WO2018034555A1 (ko) 디스플레이를 제어하는 전자 장치 및 방법
WO2016006851A1 (en) Electronic device, method of providing interface of the same, and accessory for the same
WO2016137272A1 (ko) 복수의 운영체제가 설치된 디바이스를 제어하는 방법 및 디바이스
WO2015093865A1 (en) Method for controlling a composition of a screen and electronic device thereof
WO2018070751A1 (en) Electronic device having a plurality of displays and operating method thereof
WO2015126121A1 (ko) 요청 정보에 따른 장치 제어 방법 및 이를 지원하는 장치
WO2018038482A1 (en) Electronic device including a plurality of touch displays and method for changing status thereof
WO2017078480A1 (en) Electronic device, wearable device, and method for controlling object displayed through electronic device
WO2017209530A1 (en) Method of switching application and electronic device therefor
WO2015133788A1 (en) Method and electronic device for displaying content
WO2017026732A1 (ko) 전자 장치 및 이의 알림 출력 제어 방법
WO2015182966A1 (en) Method for controlling display and electronic device
WO2017086676A1 (ko) 전자 장치 및 전자 장치의 컨텐츠 출력 방법
WO2017078366A1 (ko) 복수의 디스플레이들을 포함하는 전자 장치 및 그 동작 방법
WO2015046899A1 (en) Display apparatus and method of controlling display apparatus
WO2015072714A1 (en) Method and apparatus for providing application information
WO2017123016A1 (ko) 전자 장치의 플렉서블 디스플레이 및 그의 운용 방법
WO2018097683A1 (ko) 전자 장치, 외부 전자 장치 및 전자 장치와 외부 전자 장치를 연결하기 위한 방법
WO2017131401A1 (ko) 전자 장치 및 전자 장치의 사용자 인터페이스 제어 방법

Legal Events

Date Code Title Description
NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16901101

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 16901101

Country of ref document: EP

Kind code of ref document: A1