WO2016200171A1 - 전자 장치, 주변 기기 및 그 제어 방법 - Google Patents

전자 장치, 주변 기기 및 그 제어 방법 Download PDF

Info

Publication number
WO2016200171A1
WO2016200171A1 PCT/KR2016/006119 KR2016006119W WO2016200171A1 WO 2016200171 A1 WO2016200171 A1 WO 2016200171A1 KR 2016006119 W KR2016006119 W KR 2016006119W WO 2016200171 A1 WO2016200171 A1 WO 2016200171A1
Authority
WO
WIPO (PCT)
Prior art keywords
peripheral device
information
electronic device
external speaker
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2016/006119
Other languages
English (en)
French (fr)
Inventor
윤승일
진경신
윤현규
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020160069650A external-priority patent/KR102444075B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to US15/560,342 priority Critical patent/US10349171B2/en
Priority to CN201680034058.5A priority patent/CN107873136B/zh
Priority to EP16807811.1A priority patent/EP3258709B1/en
Publication of WO2016200171A1 publication Critical patent/WO2016200171A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; ELECTRIC HEARING AIDS; PUBLIC ADDRESS SYSTEMS
    • H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
    • H04R2205/024—Positioning of loudspeaker enclosures for spatial sound reproduction

Definitions

  • the present invention relates to an electronic device, a peripheral device, and a control method thereof, and more particularly, to an electronic device, a peripheral device, and a control method capable of sound output.
  • the present invention is in accordance with the above-described needs, an object of the present invention, by using an electronic device capable of sound output and a peripheral device capable of receiving sound electronic devices, peripheral devices and the like that can be utilized in various ways to determine the location between each device It is to provide a control method.
  • An electronic device for achieving the above object, the first speaker for outputting the first sound signal, the second speaker for outputting the second sound signal, the communication unit for communicating with the peripheral device And receiving information related to a time at which the first and second sound signals are received from the peripheral device receiving the first and second sound signals, respectively, and based on the received information, based on the electronic device. And a processor for determining a separation distance and a direction of the peripheral device.
  • the apparatus may further include a storage configured to store information about a preset target location corresponding to the peripheral device.
  • the processor may determine whether the peripheral device is located at the target location based on the separation distance and the direction. When the peripheral device is not located at the target location, movement information of the peripheral device for placing the peripheral device at the target location may be provided.
  • the received information may be information recording a state in which the first sound signal and the second sound signal different from the first sound signal are sequentially received through a microphone provided in the peripheral device.
  • the received information may be information including time information when the first sound signal and the second sound signal different from the first sound signal are sequentially received through a microphone provided in the peripheral device.
  • the processor may simultaneously output the first and second sound signals when a reference signal is received from the peripheral device.
  • the processor may further include first and second time information for receiving the first and second sound signals from the peripheral device extracted from the received information, and a time for receiving the reference signal and the first and second time signals.
  • the separation distance and the direction may be determined based on the third time information on the time difference at which the second sound signal is output.
  • the first and second speakers may be provided at right and left sides of the electronic device, respectively, and the processor may calculate a right separation distance by multiplying a time difference between the first and third time information by a speed value of an acoustic signal.
  • the left distance is calculated by multiplying the time difference between the second and third time information by the speed value of the sound signal, and based on the calculated right and left distances and the distance between the first and second speakers.
  • the separation distance and direction can be determined.
  • the processor may be configured to simultaneously output the first and second sound signals according to a preset event, and to receive the first and second sound signals from the peripheral device extracted from the received information, respectively.
  • the separation distance and the direction may be determined based on second time information and fourth time information at which the event occurs.
  • the movement information may be information about a relative location of the peripheral device based on the electronic device.
  • the display device may further include a display unit, and the processor may display a UI screen indicating the relative position through the display unit.
  • the processor may determine whether the peripheral device is located at the target location and, when the peripheral device is not located at the target location, move information of the peripheral device to place the peripheral device at the target location.
  • the UI screen displaying the may be displayed through the display unit.
  • the peripheral device may also include first and second external speakers, and the processor may be configured to provide information related to a time at which the first and second acoustic signals received from the first and second external speakers are received, respectively. If it is determined that the second external speaker is located closer to the first external speaker than the first external speaker based on the target position corresponding to the first external speaker, the second external speaker is a target corresponding to the first external speaker Providing movement information of the second external speaker for positioning, and when the second external speaker is disposed at a target position corresponding to the first external speaker, operating the second external speaker as the first external speaker The control signal may be transmitted to the second external speaker.
  • the processor may provide information indicating that the peripheral device is disposed at the target location.
  • At least one of the first and second sound signals may include device identification information for performing pairing with the peripheral device.
  • a method of controlling an electronic device having first and second speakers may include outputting first and second sound signals through the first and second speakers.
  • the method may further include storing information about a predetermined target location corresponding to the peripheral device, and the determining of the information may include determining whether the peripheral device is located at the target location based on the separation distance and the direction. If the peripheral device is not located at the target location, the mobile device may provide movement information of the peripheral device for placing the peripheral device at the target location.
  • the outputting of the first and second sound signals may simultaneously output the first and second sound signals when a reference signal is received from the peripheral device.
  • the determining may include: first and second time information for receiving the first and second sound signals from the peripheral device extracted from the received information, and a time and a time for receiving the reference signal, respectively.
  • the separation distance and the direction may be determined based on the third time information on the time difference between the first and second sound signals.
  • the first and second speakers may be provided at right and left sides of the electronic device, respectively, and the determining of the first and second speakers may be performed by multiplying a time difference between the first and third time information by a speed value of an acoustic signal and a right separation distance. , Calculate a left separation distance by multiplying the time difference of the second and third time information by the speed value of the sound signal, and based on the calculated right and left separation distances and the distance between the first and second speakers The distance and direction can be determined.
  • a peripheral device for communicating with an electronic device having a plurality of speakers may include a sound receiver, a communication unit for communicating with the electronic device, and a plurality of speakers provided in the electronic device.
  • a sound receiver When different first and second sound signals output are sequentially received through the sound receiving unit, the first and second time information from which the first and second sound signals are received, respectively, from the recorded information of the received sound signals.
  • a processor configured to determine a separation distance and a direction of the peripheral device based on the electronic device based on the first and second time information.
  • a function added to a peripheral device or the like may be variously utilized. Accordingly, the user's convenience is improved.
  • FIG. 1 is a schematic diagram showing the configuration of a home system according to an embodiment of the present invention.
  • FIG. 2 is a block diagram illustrating a configuration of an electronic device according to an embodiment of the present disclosure
  • 3A and 3B are block diagrams illustrating detailed configurations of the electronic device illustrated in FIG. 2;
  • FIGS. 4A and 4B are block diagrams illustrating a configuration of a peripheral device according to an exemplary embodiment.
  • 5 to 7 are diagrams for describing a method of determining a separation distance and a direction of a peripheral device according to various embodiments of the present disclosure
  • FIGS. 8A through 8B are diagrams for describing a service provided according to various embodiments of the present disclosure.
  • FIG. 9 is a sequence diagram illustrating an operation of an electronic device and a peripheral device according to an embodiment of the present disclosure.
  • FIG. 10 is a sequence diagram illustrating an operation of an electronic device and a peripheral device according to another embodiment of the present disclosure
  • 11 and 12 are block diagrams for briefly describing a configuration of a sound output system including a display apparatus and an external speaker, according to an exemplary embodiment
  • FIG. 13 and 14 illustrate a method for determining a separation distance and a direction of an external speaker according to various embodiments of the present disclosure
  • 15 is a block diagram for briefly explaining a configuration of a sound output system according to an exemplary embodiment.
  • 16 is a sequence diagram for briefly describing a configuration of an electronic device and an external speaker according to an embodiment of the present disclosure
  • FIG. 17 illustrates a process of pairing between an electronic device and an external speaker according to an embodiment of the present disclosure
  • 18A to 19 are diagrams for describing a UI screen displaying movement information of an external speaker according to one embodiment of the present invention.
  • 20 to 23 are flowcharts illustrating a control method of an electronic device and a peripheral device according to various embodiments of the present disclosure.
  • ordinal numbers such as “first” and “second” may be used to distinguish between components. These ordinal numbers are used to distinguish the same or similar components from each other, and the meaning of the terms should not be construed as limited by the use of these ordinal numbers. For example, the components combined with these ordinal numbers should not be construed as limiting the order of use or arrangement of the components. If necessary, the ordinal numbers may be used interchangeably.
  • modules such as “module”, “unit”, “part”, and the like are terms for referring to a component that performs at least one function or operation, and such components are referred to as hardware or software. It may be implemented or in a combination of hardware and software.
  • a plurality of "modules”, “units”, “parts”, etc. are integrated into at least one module or chip, except that each needs to be implemented as a specific specific hardware, at least one processor It may be implemented as (not shown).
  • a part when a part is connected to another part, this includes not only a direct connection but also an indirect connection through another medium.
  • the meaning that a part includes a certain component means that it may further include other components, without excluding other components, unless specifically stated otherwise.
  • FIG. 1 is a schematic diagram showing the configuration of a home system according to an embodiment of the present invention.
  • the home system 1000 may be implemented as a main electronic device 100 and a plurality of peripheral devices 200-1 to 200-4.
  • the electronic device 100 may be implemented as a device capable of outputting different sounds with at least two speakers.
  • the electronic device 100 may be implemented as a smart TV as illustrated.
  • the present invention is not limited thereto, and any device having at least two speakers may be applied without being limited thereto.
  • the plurality of peripheral devices 200-1 to 200-4 may be implemented as a device including a microphone capable of receiving a sound output from the electronic device 100, and for example, a predetermined space such as a home or an office. It can be implemented in all electrical and electronic products used in In particular, the plurality of peripheral devices 200-1 to 200-4 may be implemented to enable two-way communication with the electronic device 100. However, according to an embodiment, the peripheral devices 200-1 to 200-4 may perform one-way communication with the electronic device 100, which will be described later.
  • the home system 100 may be implemented as a home network system capable of connecting two or more peripheral devices 200-1 to 200-4 to a single wired or wireless system and enabling two-way communication. If the system to connect and control the device of the present invention is not limited to this can be applied.
  • the electronic device 100 may be configured to communicate with a gateway device, a network server, a controller device, or the like, or to have a function such as a gateway device, a network server, a controller device, and the like to perform operations of a plurality of devices in the network system. Can be controlled by
  • the electronic device 100 is implemented as a smart TV having at least two speakers, and the plurality of peripheral devices 200-1 to 200-4 are respectively. It may be implemented as a smart phone 200-1 with a microphone, a room speaker 200-2, a remote controller 200-3, and an air conditioner 200-4.
  • the peripheral device may be implemented in various forms such as a robot cleaner, a heater, a refrigerator, a washing machine, an air purifier, a monitor, a DVD player, a digital camera, an electronic frame, a lamp, and a blind.
  • FIG. 2 is a block diagram illustrating a configuration of an electronic device according to an embodiment of the present disclosure.
  • the electronic device 100 includes a first speaker 111, a second speaker 112, a communication unit 120, and a processor 130.
  • the first speaker 111 outputs a first sound signal.
  • the second speaker 112 outputs a second sound signal different from the first sound signal.
  • the second sound signal may be a signal different from at least one of a frequency, a range, a pitch, a tinebre, and a duration with the first sound signal.
  • the first sound signal output from the first speaker 111 may have a frequency of 10 Hz
  • the second sound signal output from the second speaker 112 may have a frequency of 20 Hz.
  • the first and second speakers 111 and 112 function to convert electrical pulses into sound waves, and are implemented in a coin type, that is, a dynamic type, which is divided according to a principle and a method of converting electrical signals into sound waves.
  • a coin type that is, a dynamic type, which is divided according to a principle and a method of converting electrical signals into sound waves.
  • the present invention is not limited thereto, and may be implemented as an electrostatic type, a dielectric type, a magnetostrictive type, or the like.
  • the first and second speakers 111 and 112 may be implemented in a multi-way manner in which a reproduction band is divided into low, mid, high, and the like, and is divided into appropriate speakers.
  • a high frequency speaker for reproducing high frequency sound signals
  • a midrange speaker for reproducing mid frequency sound signals
  • a low frequency sound signal for reproducing It may be implemented in the form including a low-frequency speaker (or woofer).
  • the first and second speakers 111 and 112 may be implemented as two speakers of the three speakers.
  • the first and second speakers 111 and 112 may be spaced apart from each other by a predetermined interval in the horizontal direction.
  • the first and second speakers 111 and 112 may be implemented as speakers embedded at the right end and the left end, respectively. no.
  • a separate speaker attached to the electronic device 100 may be included in the case where the electronic device 100 knows the attachment location thereof.
  • the communication unit 120 communicates with the peripheral device 200 having a microphone.
  • the communication unit 120 may be configured through various communication methods such as BT (BlueTooth), WI-FI (Wireless Fidelity), Zigbee, IR (Infrared), Serial Interface, Universal Serial Bus (USB), Near Field Communication (NFC), and the like. Communication with the peripheral device 200 may be performed.
  • BT Bluetooth
  • WI-FI Wireless Fidelity
  • Zigbee Wireless Fidelity
  • IR Infrared
  • USB Universal Serial Bus
  • NFC Near Field Communication
  • the communicator 120 may perform an interworking state by performing communication according to a predefined communication method with the external speaker 200.
  • the interworking may refer to any state in which communication is possible, such as an operation of initializing communication between the electronic device 100 and the peripheral device 200, an operation of forming a network, and an operation of device pairing.
  • device identification information such as a pin code of the peripheral device 200 may be provided to the electronic device 100, and thus a pairing procedure between the two devices may be performed.
  • the peripheral device 200 searches for the electronic device 100 through a digital living network alliance (DLNA) technology, and the electronic device 100.
  • the 100 and the peripheral device 200 may be paired by performing pairing.
  • DLNA digital living network alliance
  • the communication unit 120 may perform pairing by transmitting device identification information such as a pin code based on sound waves to the peripheral device 200.
  • device identification information such as a pin code based on sound waves
  • the peripheral device 200 receives the pin code
  • pairing is performed by automatically inputting the received pin code.
  • the communication unit 120 may receive information related to a product type and a location analyzed by the peripheral device 200 from the peripheral device 200.
  • the processor 130 controls the overall operation of the electronic device 100.
  • the processor 130 receives the first and second sound signals output from the first and second speaker units 111 and 112 by the microphone from the peripheral device 200 received by the microphone. Receive information on a time when the second sound signal is received. Subsequently, the processor 130 may determine the separation distance and the direction of the peripheral device 200 based on the received information.
  • the received information is a file that records (or records or captures) a state in which the first and second sound signals are sequentially received through the microphone provided in the peripheral device 200, or is provided in the peripheral device 200.
  • the first and second sound signals may be information including time information sequentially received through the microphone. That is, the peripheral device 200 records the state in which the first and second sound signals are sequentially received through the provided microphone, and then transmits the recorded information to the electronic device 100 as it is, or analyzes the recorded information to make the first information. After acquiring time information in which the first and second sound signals are sequentially received, the acquired time information may be transmitted to the electronic device 100.
  • the processor 130 may simultaneously output the first and second sound signals.
  • the peripheral device 200 may transmit a reference signal to the electronic device 100 and operate in the recording mode. That is, recording of the acoustic signal can be started.
  • the reference signal may be received through RF communication such as BT (BlueTooth), but is not limited thereto.
  • the processor 130 may calculate a time difference between a time point at which the first and second sound signals are output from a time point at which the reference signal is received from the peripheral device 200.
  • the processor 130 may determine the separation distance and the direction of the peripheral device 200 based on the location of the electronic device 100 based on the time information according to the above operation.
  • the processor 130 may include first and second time information for receiving the first and second sound signals from the peripheral device 200 extracted from the received information, and a time when the reference signal is output from the peripheral device 200 (or The distance and direction of the peripheral device 200 may be determined based on the time when the electronic device 100 received the reference signal) and the third time information about the time difference between the output of the first and second sound signals. .
  • the processor 130 may calculate a right separation distance by multiplying the time difference between the first time information and the third time information by the speed value of the sound signal. In the same manner, the processor 130 may calculate the left separation distance by multiplying the time difference between the second time information and the third time information by the speed value of the sound signal. Thereafter, the processor 130 may determine the separation distance and the direction of the peripheral device 200 based on the calculated right and left separation distances and distances between the first and second speakers 111 and 112.
  • the processor 130 simultaneously outputs the first and second sound signals according to a preset event and extracts the peripheral device 200 extracted from the received information.
  • the separation distance may be determined based on the first and second time information that respectively receive the first and second sound signals and the third time information when the event occurs. For example, when the time is synchronized between the electronic device 100 and the peripheral device 200, the electronic device 100 transmits a signal for requesting recording of the acoustic signal to the peripheral device 200, and then after a preset time.
  • the sound signal may be output and the separation distance may be determined based on the time information received from the peripheral device 200.
  • the ba and ca signals may be included. By multiplying the speed value, the right separation distance and the left separation distance may be calculated.
  • the processor 130 may provide various services based on the separation distance and the direction of the external device 200 obtained according to the above-described various embodiments.
  • the processor 130 may provide a remote control search service, a service for determining a direction and direction of the remote control according to an absolute coordinate method, and the peripheral device 200 may be a home theater speaker.
  • the HTS easy setup service the network configuration service between the IoT devices in the home network, the location detection of home appliances (eg, air conditioners, robot cleaners).
  • the processor 130 may apply a signal processing algorithm to the separation distance and the direction of the peripheral device 200.
  • the electronic device 100 converts the X and Y coordinates on the screen.
  • the processor 130 may designate the coordinates of the pointing object by mapping the converted X and Y coordinates to the X and Y coordinates of the pointing object on the UI screen of the display apparatus 100.
  • the location of the pointing object can be specified.
  • the position of the peripheral device 200 on the screen may be determined on the assumption that the peripheral device 200 faces the screen direction at the corresponding position. Accordingly, the pointing object can be displayed in the absolute coordinate method according to the trigger signal.
  • 3A and 3B are block diagrams illustrating detailed configurations of the electronic device illustrated in FIG. 2.
  • FIG. 3A is a block diagram illustrating a specific configuration of the electronic device shown in FIG. 2.
  • the electronic device 100 ′ may include a first speaker 111, a second speaker 112, a communication unit 120, a processor 130, a display unit 140, a storage unit 150, and an audio processing unit. 160, a video processor 170, and a user interface 180. Detailed description of parts overlapping with those shown in FIG. 2 among the elements illustrated in FIG. 3A will be omitted.
  • the processor 130 generally controls the operation of the electronic device 100 ′.
  • the processor 130 may access the RAM 131, the ROM 132, the main CPU 133, the graphics processor 134, the first to n interfaces 135-1 to 135-n, and the bus 136. Include.
  • the RAM 131, the ROM 132, the main CPU 133, the graphics processor 134, the first to nth interfaces 135-1 to 135-n, and the like may be connected to each other through the bus 136.
  • the first to n interfaces 135-1 to 135-n are connected to the aforementioned various components.
  • One of the interfaces may be a network interface connected to an external device via a network.
  • the main CPU 133 accesses the storage 150 and performs booting using the operating system stored in the storage 150. Then, various operations are performed using various programs, contents, data, etc. stored in the storage 150.
  • the ROM 132 stores a command set for system booting.
  • the main CPU 133 copies the O / S stored in the storage unit 150 to the RAM 131 according to the command stored in the ROM 132, and executes O / S.
  • Boot the system When the booting is completed, the main CPU 133 copies various application programs stored in the storage unit 150 to the RAM 131 and executes the application programs copied to the RAM 131 to perform various operations.
  • the graphic processor 134 generates a screen including various objects such as an icon, an image, a text, and the like by using a calculator (not shown) and a renderer (not shown), for example, a screen including a pointing object.
  • An operation unit (not shown) calculates attribute values such as coordinate values, shapes, sizes, colors, and the like in which each object is to be displayed according to the layout of the screen based on the received control command.
  • the renderer generates a screen having various layouts including objects based on the attribute value calculated by the calculator.
  • the screen generated by the renderer (not shown) is displayed in the user interface area of the display 140.
  • the operation of the processor 130 described above may be performed by a program stored in the storage unit 150 as shown in FIG. 3B.
  • the storage unit 150 stores various data such as an operating system (O / S) software module for driving the electronic device 100 'and various multimedia contents.
  • the storage unit 150 provides a communication module 151, a signal processing module 152, a location calculation module 153, and a service for providing a function according to an embodiment of the present invention as shown in FIG. 3B.
  • a program such as module 154 may be stored.
  • the processor 130 may receive a signal from the peripheral device 200 using the communication module 151 and transmit a signal to the peripheral device 200.
  • the processor 130 receives the reference signal from the peripheral device 200 using the communication module 151 and outputs time information outputting the sound signal through the first and second speakers 111 and 112.
  • the included signal may be transmitted to the peripheral device 200.
  • the processor 130 may signal-process a signal received from the peripheral device 200 using the signal processing module 152 or signal-process a signal to be transmitted to the peripheral device 200.
  • the processor 130 uses the signal processing module 152 to locate the file using the position calculation module 153.
  • Signal processing can be performed in a state that can be analyzed.
  • the storage 150 may store information about a target location corresponding to the peripheral device 200.
  • the target location refers to the most appropriate location where each peripheral device 200 should be arranged based on the electronic device 100.
  • the target location is a relative location with respect to the electronic device 100 and may be set and stored in a specific direction and distance from the electronic device 100.
  • the processor 130 may determine whether the peripheral device 200 is located at the target location by using information about the target location stored in the storage 150, and if it does not match, the peripheral device 200 may be determined. Movement information of the peripheral device 200 for placing at the target location may be provided.
  • the processor 130 receives the location information of the peripheral device 200 from the peripheral device 200 through the communication unit 120, and determines whether the peripheral device 200 is located at the target location according to the received location information. . If it is determined that the peripheral device 200 is not located at the target location, the processor 130 may provide movement information of the peripheral device 200 for placing the peripheral device 200 at the target location.
  • the movement information may include information about a current location of the peripheral device 200 received from the peripheral device 200 and a pre-stored target location for placing the peripheral device 200.
  • the movement information may include information about a direction and a distance from the position of the peripheral device 200 to the target position.
  • the processor 130 may calculate the location of the external device 200, that is, the separation distance and the direction, based on the value processed by the signal processing module 152 using the location calculation module 153.
  • the display unit 140 is a component that provides various content screens.
  • the content screen may include various contents such as images, videos, texts, music, etc., an application execution screen including various contents, and a graphical user interface (GUI) screen.
  • GUI graphical user interface
  • the electronic device 100 ′ including the display unit 140 may be referred to as a display device.
  • the processor 130 may display, via the display unit 140, a UI screen indicating a relative position of the peripheral device 200 based on the electronic device 100 based on the calculated distance and direction of the peripheral device 200.
  • Display a UI screen indicating a relative position of the peripheral device 200 based on the electronic device 100 based on the calculated distance and direction of the peripheral device 200.
  • the UI screen may be implemented in various forms such as an image, a video, and a text.
  • the display 140 may be implemented as a liquid crystal display panel (LCD), organic light emitting diodes (OLED), or the like, but is not limited thereto.
  • the display 140 may be implemented as a flexible display, a transparent display, or the like in some cases.
  • the processor 130 may display a 2D or 3D spatial layout including devices connected to a home network, and provide a location of the peripheral device 200 within the spatial layout.
  • the spatial layout may include information about at least one home device connected to the home network, and the information may include identification information of the home device in text (eg, home device name) or image (eg, home device). Due diligence, appearance images or icons) may be included.
  • the spatial layout may be generated based on location information and device type of each home device. Specifically, a virtual space layout is generated based on the location information and device type of each of the home devices connected to the home network, and the location information input whenever the existing home device is disconnected from the home network or the new home device is connected. You can update the spatial layout based on that.
  • the display unit 140 may be implemented in various forms of displays, such as a liquid crystal display panel (LCD), organic light emitting diodes (OLED), liquid crystal on silicon (LCoS), digital light processing (DLP), and the like.
  • the display 110 may include a driving circuit, a backlight unit, and the like, which may be implemented in the form of an a-si TFT, a low temperature poly silicon (LTPS) TFT, an organic TFT (OTFT), or the like.
  • the electronic device 100 ′ may include an audio processor 160 that performs sound data, a video processor 170 that performs video data processing, a camera for capturing a still image or a video under a user's control, and a user.
  • the apparatus may further include a user interface unit 180 including a microphone for receiving a voice or other sound and converting the voice or other sound into audio data.
  • the processor 130 may control the audio processor 160 to process the first and second sound signals output through the first and second speakers 111 and 112.
  • FIGS. 4A and 4B are block diagrams illustrating a configuration of a peripheral device according to an exemplary embodiment.
  • the peripheral device 200 includes a sound receiver 210, a communicator 220, and a processor 230.
  • the sound receiver 210 may be implemented to include at least one microphone that receives the first and second sound signals output from the electronic device 100.
  • the communication unit 220 communicates with the electronic device 100, and since a detailed configuration is similar to that of the communication unit 120 of the electronic device 100, a detailed description thereof will be omitted.
  • the processor 230 when the first and second different sound signals output from each of the plurality of speakers included in the electronic device 100 are sequentially received through the sound receiver 210, the processor 230 receives the received sound.
  • the signal may be recorded and the record information may be transmitted to the electronic device 100.
  • the processor 230 may transmit a trigger signal to the electronic device 100 to cause the electronic device 100 to output a sound signal according to a preset event (for example, a preset button input). That is, the processor 230 may perform an operation corresponding to the operation of the electronic device 100 described with reference to FIG. 2.
  • the peripheral device 200 may directly determine its separation distance and direction based on the location of the electronic device 100, and determine the determined information on the electronic device 100 as needed. Can provide.
  • the processor 230 when the first and second different sound signals output from each of the plurality of speakers included in the electronic device 100 are sequentially received through the sound receiver 210, the processor 230 receives the received sound. Record a signal, obtain a time at which the first and second sound signals are received from the record information, and determine a separation distance and a direction of the peripheral device 200 based on the obtained time. have. In this case, the processor 230 may transmit a trigger signal for causing the electronic device 100 to output a sound signal to the electronic device 100.
  • the processor 230 may include first and second time information for which the peripheral device 200 obtained from the recorded file receives the first and second sound signals, respectively, and the electronic device 100 for receiving the reference signal. The distance and direction from the electronic device 100 may be determined based on the time and the third time information on the time difference between the first and second sound signals output from the electronic device 100. In this case, the third time information may be obtained from the electronic device 100, and the processor 230 may calculate and obtain the time difference when the peripheral device 200 receives the first and second sound signals, respectively.
  • the processor 230 may calculate a right separation distance by multiplying the time difference between the first time information and the third time information by the speed value of the sound signal. In the same manner, the processor 230 may calculate the left separation distance by multiplying the difference between the second time information and the third time information by the speed value of the sound signal. Thereafter, the processor 230 may determine the separation distance and the direction from the electronic device 100 based on the calculated right and left separation distances.
  • the present disclosure is not limited to the above-described exemplary embodiment.
  • the processor 130 of the electronic device 100 transmits a signal for requesting recording of an acoustic signal to the external speaker 200, and then presets the preset signal.
  • the first and second sound signals may be simultaneously output according to the event.
  • FIG. 4B is a block diagram illustrating a specific configuration of the peripheral device illustrated in FIG. 4A.
  • the peripheral device 200 ′ includes a sound receiver 210, a communicator 220, a processor 230, a storage 240, an audio processor 250, and a speaker 260.
  • a sound receiver 210 receives sound from the peripheral device 200 ′ from the peripheral device 200 ′.
  • the operation of the processor 230 may be performed by a program stored in the storage 240.
  • the storage unit 240 may store a signal processing algorithm for processing a signal received from the peripheral device 200.
  • various data may be stored, such as an operating system (O / S) software for driving the electronic device 100, a signal processing algorithm for performing operations on various sensing signals, and the like, according to an embodiment.
  • O / S operating system
  • the detailed configuration of the processor 230 is similar to that of the processor 130 (FIG. 3A) of the electronic device 100 ′, and thus detailed description thereof will be omitted.
  • the peripheral device 200 when the peripheral device 200 is implemented as a pointing device according to the embodiment, it further includes a variety of sensors (for example, acceleration sensor, geomagnetic sensor, gyro sensor, etc.) for sensing the movement of the peripheral device 200 can do.
  • sensors for example, acceleration sensor, geomagnetic sensor, gyro sensor, etc.
  • the processor 230 may perform various operation operations according to various sensing signals.
  • the processor 230 may perform preprocessing on sensor values received from various sensors and transmit them to the electronic device 100.
  • it converts sensor values converted to digital values into actual physical quantities, fits the individual axes of the accelerometer, geomagnetic sensor, and gyro sensor into one defined axis. Pretreatment such as removing unwanted high frequency motion.
  • the calculation may be performed according to the detected signal processing algorithm, and the calculated value may be transmitted to the electronic device 100.
  • a power button unit for receiving a user command for power ON / OFF, for displaying a pointing object on a screen of the electronic device 100 and setting a reference position
  • the centering button unit may further include.
  • the peripheral device 200 may perform a pairing operation with the electronic device 100. After the pairing is completed, when the user presses the centering button unit (not shown), the pointing object may be displayed in the center of the display screen of the electronic device 100.
  • 5 to 7 are diagrams for describing a method of determining a separation distance and a direction of a peripheral device according to various embodiments of the present disclosure.
  • FIG 5 illustrates a case of an embodiment in which the peripheral device 200 determines the separation distance and the direction.
  • the peripheral device 200 outputs a reference signal, that is, a time reference signal, to the electronic device 100 and operates in a recording mode.
  • the electronic device 100 receiving the corresponding reference signal outputs different first and second sound signals through the right and left speakers, and the time for the time difference D2 from which the sound signal is output from the time point at which the reference signal is received.
  • the information is transmitted to the peripheral device 200.
  • the peripheral apparatus 200 extracts the first sound signal S R and the second sound signal S L from the received sound signal S, respectively, and the time point T R at which each sound signal is received; Information about T L may be obtained.
  • the peripheral apparatus 200 subtracts D2 from the time difference D1 R between the time point at which the reference signal is output and the time point at which the first sound signal is received through the microphone, that is, D1 R -D2 and the reference signal.
  • the time difference D1 L between the output time point and the time point at which the second sound signal is received through the microphone is obtained by subtracting D2, that is, based on the electronic device 100 based on the D1 L -D2.
  • the separation distance and direction can be calculated.
  • the processor 230 multiplies D1 R -D2 by the speed Vs (eg, 340 m / s) of the acoustic signal to calculate the separation distance L1 from the left speaker 711, and D1.
  • the distance L2 from the right speaker 712 can be calculated by multiplying L -D2 by the speed Vs of the sound signal.
  • the vertical separation distance L and the direction ⁇ from the electronic device 100 can be calculated based on this. Will be.
  • FIGS. 8A through 8B are diagrams for describing a service provided according to various embodiments of the present disclosure.
  • a user when a user wants to know a location of a movable peripheral device, for example, a remote controller, the user may be provided with a corresponding service by selecting a remote controller location search menu.
  • the electronic device 100 may provide information about the location of the remote controller to the UI screen in various manners as shown in FIGS. 8A and 8B. Can be.
  • a UI 810 may be provided to guide the position of the remote controller on a virtual space layout, or as shown in FIG. 8B, the approximate position of the remote controller may be determined based on the electronic device 100.
  • the UI 820 may be provided numerically.
  • FIG. 9 is a sequence diagram illustrating an operation of an electronic device and a peripheral device according to an embodiment of the present disclosure.
  • the peripheral device 200 first transmits a reference signal for sound output to the electronic device 100 (S910). In this case, the peripheral device 200 enters the recording mode (S920).
  • the electronic device 100 when the electronic device 100 receives the reference signal, the electronic device 100 outputs different sound signals through the plurality of speakers (S930).
  • the peripheral device 200 records the sound signal received through the microphone in the recording mode (S940).
  • the peripheral device 200 transmits the information on which the different sound signals sequentially received are recorded to the electronic device 100 (S950).
  • the electronic device 100 determines the location of the peripheral device 200 by analyzing the recording information received from the peripheral device 200 (S960).
  • FIG. 10 is a sequence diagram illustrating an operation of an electronic device and a peripheral device according to another exemplary embodiment of the present disclosure.
  • the peripheral device 200 first transmits a reference signal for sound output to the electronic device 100 (S1010). In this case, the peripheral device 200 enters the recording mode (S1020).
  • the electronic device 100 when the electronic device 100 receives the reference signal, the electronic device 100 outputs different sound signals through the plurality of speakers (S1030).
  • the peripheral device 200 records the sound signal received through the microphone in the recording mode (S1040).
  • the electronic device 100 transmits time information about the time when the reference signal is received and the time difference when the sound signal is output, to the electronic device 100 (S1050).
  • the peripheral apparatus 200 determines the position of the peripheral apparatus 200 by analyzing time information received from the electronic device 100 and recording information in which an audio signal is recorded (S1060).
  • 11 and 12 are block diagrams for briefly describing a configuration of a sound output system including a display apparatus and an external speaker, according to an exemplary embodiment.
  • FIG. 11 is a diagram for describing a method of providing an HTS easy setup service for setting a speaker constituting the sound output system 1000 ′ according to an exemplary embodiment.
  • the sound output system 1000 ′ is configured by arranging four speakers 1110 to 1140 on the left and right sides of the electronic device 100 will be described.
  • the electronic device 100 is a display device and the peripheral device 200 is implemented with a plurality of speakers.
  • the display apparatus 100 may measure the separation distance and the direction of each speaker, determine whether the connection is properly performed, and provide a feedback service accordingly. For example, assuming that the leftmost speaker 1110 and the rightmost speaker 1140 are connected incorrectly, the electronic device 100 measures the separation distance and the direction of the leftmost speaker 1110 and the rightmost (notch) for the incorrect setting. noti) to the user, or in some cases automatically change the connection settings. However, in the case of the embodiment, it may be assumed that the microphone is provided in each speaker, but is not limited thereto.
  • the display device may be based on a sound signal output from each speaker and a position of each speaker. 100 and the relative positions of the four speakers 1110 to 1140 may be determined.
  • FIG. 12 illustrates a sound output system 1000 ′ implemented as a home theater system in a living room of a home.
  • the home theater system is a sound output system that uses a high-definition video and abundant audio resources such as Dolby 5.1 channel, so that you can feel three-dimensional and realism in the home.
  • the home theater system includes a plurality of external speakers positioned next to or behind the listening position, and the plurality of external speakers serve to enhance a stereoscopic effect of sound.
  • a plurality of external speakers are generally composed of front L, front R, center, rear L, rear R, and subwoofer, and a plurality of external speakers are arranged in a reasonable position in a home environment so as to resemble a speaker arrangement in a theater. Can be the purpose.
  • the display apparatus 100 is an electronic device that may output different sound signals by including at least two speakers and may be implemented as a smart TV.
  • the present invention is not limited thereto, and an electronic device having at least two speakers may be applied without being limited thereto.
  • the external speaker 200 may be implemented as a speaker having a microphone capable of receiving a sound signal output from the display device 100, and in particular, the external speaker 200 may be bidirectionally communicated with the display device 100. Can be implemented. However, according to an exemplary embodiment, the external speaker 200 may perform one-way communication with the display apparatus 100, which will be described later.
  • the plurality of speakers 200 may be implemented as surround speakers constituting the home theater system 1000 ′.
  • the external speaker 200 may include a front L 200-1, a front R 200-2, a center 200-3, a rear L 200-4, and a rear as shown in FIG. 1.
  • the front L (200-1), the front R (200-2) speakers are preferably placed in front of the user
  • the rear L (200-4), rear R (200-5) speakers are preferably arranged on the side of the user. It is preferable to be arranged to surround the user.
  • the home theater system 1000 ′ may be implemented as a home network system capable of two-way communication by connecting the display apparatus 100 and the plurality of external speakers 200-1 to 200-8 to one wired or wireless system.
  • any system that connects and controls a plurality of devices through a network may be applied thereto.
  • the display apparatus 100 may be configured to communicate with a gateway device, a network server, a controller device, or the like, or to have a function such as a gateway device, a network server, a controller device, and overall operation of a plurality of devices in the network system. Can be controlled by
  • each external speaker 200-1 to 200-8 in order to guide the positions of the respective external speakers 200-1 to 200-8 to the appropriate positions, the current positions of the respective external speakers 200-1 to 200-8 are calculated correctly.
  • the position of each external speaker 200-1 to 200-8 may be calculated based on a triangulation method using an acoustic signal as a basic principle.
  • different sounds are output through two speakers provided in the display apparatus 100, and external speakers 200-1 to 200-8 placed around the electronic device 100 are provided.
  • external speakers 200-1 to 200-8 placed around the electronic device 100 are provided.
  • UI services to determine the location of the external speaker based on the triangulation method, and to properly arrange it based on the identified position.
  • FIG. 13 and 14 illustrate a method for determining a separation distance and a direction of an external speaker according to various embodiments of the present disclosure.
  • the external speaker 200-7 may multiply the speed Vs (eg, 340 m / s) of the sound signal by a value obtained by subtracting D2 from D1 L to the left of the display apparatus 100-1.
  • the separation distance y 1 from the first speaker 111 provided at may be calculated.
  • the external speaker 200-7 multiplies the speed Vs of the sound signal by subtracting D2 from D1 L to obtain a separation distance y 2 from the second speaker 112 provided on the right side of the display apparatus 100-1. Can be calculated. Accordingly, when y 1 and y 2 are calculated, the horizontal position of the external speaker 200-7 may be calculated by triangulation.
  • the first speaker When the distance y 1 from 111 and the distance y 2 from the second speaker 112 are calculated, the three elements of the triangle (the length of three sides) are determined, and the external speaker 200-7 is determined by triangulation.
  • the horizontal position of the external speaker 200-7 may be determined.
  • the external speaker 200-7 may transmit the information about the determined horizontal position to the display apparatus 100-1.
  • another display device 100-2 may include first and second microphones 191 and 192.
  • the first microphone 191 and the second microphone 192 are components for receiving a sound signal output from the external speaker 200.
  • the first microphone 191 and the second microphone 192 are spaced apart at predetermined intervals in the horizontal direction of the electronic device 100-2, and the first microphone 191 is a right end of the electronic device 100-2.
  • the second microphone 192 is preferably implemented in a form embedded in the left end, respectively.
  • the display apparatus 100-2 outputs a reference signal, that is, a time reference signal, to the external speaker 200-8 and operates in the recording mode.
  • the external speaker 200-8 that receives the reference signal outputs an acoustic signal, and transmits time information about the time difference D3 that outputs the acoustic signal from the time point at which the reference signal is received, to the display apparatus 100-2. send.
  • the processor 130 of the display apparatus 100-2 subtracts D3 from a time difference D2 R between a time point at which the reference signal is output and a time point at which the sound signal is received through the first microphone 191. Display based on D2 L -D3 minus D3 from the time difference (D2 L ) between D2 R -D3 and the time point at which the reference signal is output and the time point at which the sound signal is received through the second microphone 192.
  • the separation distance and the direction of the external speaker 200-8 may be calculated based on the device 100-2.
  • the processor 130 multiplies the speed Vs (for example, 340 m / s) of the sound signal by subtracting D3 from D2 R to obtain a separation distance y 1 from the first microphone 191. Can be calculated.
  • the processor 130 may calculate the separation distance y 2 from the second microphone 192 by multiplying the speed Vs of the sound signal by subtracting D3 from D2 L. Accordingly, when y 1 and y 2 are calculated, the processor 130 may calculate the horizontal position of the external speaker 200-8 by triangulation. That is, the distance d 1 between the first microphone 191 and the second microphone 192 in the display apparatus 100-2 is a distance away from the first microphone 191 by y 1 when it is referred to as previously stored known information. When the distance from the second microphone 192 by y 2 is calculated, three elements of the triangle (the length of three sides) are determined, and the processor 130 determines the horizontal position of the external speaker 200-8 by triangulation. Can be.
  • the electronic device 100 may further include a photographing unit (not shown).
  • the processor 130 may photograph the external speaker 200 through the photographing unit, and acquire position information of the external speaker 200 through an image frame including the photographed external speaker.
  • the processor 130 may determine the direction and distance between the electronic device 100 and the external speaker 200 based on the obtained location information.
  • the processor 130 of the display apparatus 100 may be configured to be the first from the external speaker 200. And by receiving the information related to the time when the second sound signal is received it can be determined that the separation distance and direction of the external speaker 200 by the method shown in FIGS.
  • 15 is a block diagram for briefly describing a configuration of a sound output system according to an exemplary embodiment.
  • the sound output system 1000 may include a display apparatus 100 and an external speaker 200.
  • the electronic device 100 may include a first speaker 111, a second speaker 112, a communication unit 120, a processor 130, a display unit 140, a storage unit 150, an audio processor 160, and a video processor. And may include 170.
  • the external speaker 200 may include a microphone 210, a communication unit 220, a processor 230, an audio processor 250, and a speaker 260.
  • a microphone 210 may include a microphone 210, a communication unit 220, a processor 230, an audio processor 250, and a speaker 260.
  • the external speaker 200 may transmit a reference signal to the display apparatus 100 to cause the display apparatus 100 to output an audio signal through the communication unit 220.
  • the reference signal may be based on an IR communication method or a BT communication method.
  • the processor 130 of the display apparatus 100 transmits the currently output sound signal through the audio processor 160 to the first sound signal having different frequencies from each other.
  • a second sound signal may be converted into a second sound signal, and the first sound signal and the second sound signal may be output using the first speaker 111 and the second speaker 112.
  • the audio processor 250 may separate the sound signal into a first sound signal and a second sound signal for each frequency band.
  • the processor 230 of the external speaker 200 determines a position including a direction and a distance of the external speaker 200 based on the display apparatus 100 based on the time information on which each sound signal is detected.
  • the information related to the determined position may be transmitted to the display apparatus 100 through the communication unit 220.
  • the processor 130 of the display apparatus 100 transmits movement information of the external speaker 200 for disposing the external speaker 200 at a target location previously stored in the storage unit 150 based on the received position-related information.
  • the UI screen to be displayed may be displayed through the display unit 140.
  • 16 is a sequence diagram for briefly describing a configuration of an electronic device and an external speaker according to an embodiment of the present disclosure.
  • a user may select an easy setup service for installing the sound output system 1000 on the UI displayed on the electronic device 100 (S1605).
  • the electronic device 100 may output different first and second sound signals through the first and second speakers 111 and 112 (S1610).
  • the electronic device 100 may transmit a sound wave-based pin code for pairing with the external speaker 200 in at least one of the first and second sound signals.
  • the external device 200 may switch to the pairing mode (S1620), and the pin code may be automatically input and paired with the electronic device 100 (S1625).
  • the electronic device 100 transmits wireless network connection information including information such as AP of Wi-Fi to the external speaker 200 (S1630), and the external speaker 200 receives the received wireless network.
  • the wireless network may be set based on the connection information (S1635).
  • the external speaker 200 may calculate a relative position of the external speaker 200 with the electronic device 100 by triangulation based on the time difference between the first sound signal and the second sound signal received (S1640). ).
  • the external speaker 200 transmits information related to the type and the calculated location of the external speaker 200 to the electronic device 100 (S1645), and the electronic device 100 receives the type and location of the received external speaker 200. It may be determined whether the current location of the external speaker 200 matches the target location based on the information associated with the (S1650).
  • the electronic device 100 may display a UI screen displaying movement information of the external speaker 200 for placing the external speaker 200 at the target location. ) May display a UI screen indicating that the screen is disposed at the target location (S1655).
  • FIG. 17 is a diagram illustrating a process of pairing between an electronic device and an external speaker according to an embodiment of the present disclosure.
  • the electronic device 100 scans a BT Discovery signal for searching for another Bluetooth device while outputting a first sound signal and a second sound signal different from the first sound signal.
  • the electronic device 100 transmits a Bluetooth hardware device address BD ADDR to the corresponding external speaker 200-1, and outputs first and second sound signals.
  • a sound wave-based pin code for a Bluetooth connection may be transmitted to the external speaker 200-1.
  • the other electronic device 300 without the authority of the outdoors may also be able to transmit the BD ADDR according to the scanning of the BT discovery signal to the external speaker (200-1) in the home, the external speaker (200-1) Since the sound signal and the sound wave-based pin code output from the other electronic device 300 are not received by the blocking film such as a wall, the pairing with the other electronic device 300 may be prevented.
  • the electronic device 100 may transmit the encrypted setting value of the electronic device 100 to the external speaker 200-1.
  • the electronic device may transmit wireless network connection information such as currently connected wireless AP information to the external speaker 200-1.
  • the external speaker 200-1 When the external speaker 200-1 is connected to the electronic device 100 through a wireless network, the external speaker 200-1 may transmit information about the type and location of the external speaker 200-1 to the electronic device 100.
  • 18A and 18B illustrate a UI screen displaying movement information of an external speaker, according to an embodiment of the present disclosure.
  • the processor 130 may determine that the position of the external speaker 200 does not match the target position corresponding to the corresponding external speaker 200.
  • the UI screen may be a screen displaying the determined position of the external speaker 200 and an appropriate position where the external speaker 200 should be disposed.
  • the UI screen may be a phrase for guiding a direction and a distance to which the external speaker 200 should be moved.
  • the movement information may include information about a current position of the external speaker 200 and a target position for disposing the external speaker 200.
  • the UI may display a 2D or 3D spatial layout and may display the location of the external speaker 200 based on the location of the display apparatus 100 within the spatial layout. In this case, when there are a plurality of external speakers 200, the positions of the respective external speakers 200 may be displayed.
  • the spatial layout is identification information of the external speaker 200, and text (eg, type of speaker, left / right information) or an image (eg, live-action of a speaker, an exterior image, or an icon) may be displayed. have.
  • the processor 130 may correspond to a location 1801 of the electronic device 100 and each target location 1801 to 1805 corresponding to a plurality of external speakers 200-1 to 200-5 on a spatial layout diagram. ) And positions 1807 to 1811 of the plurality of external speakers 200-1 to 200-5 currently determined. Accordingly, the user checks the positions of the plurality of external speakers 200-1 to 200-5 displayed on the electronic device 100, and checks the positions of the respective external speakers 200-1 to 200-5 for each external speaker. It may move to the target position (1801 ⁇ 1805) corresponding to (200-1 ⁇ 200-5). In this case, the UI displayed on the screen may show icons in the form of arrows 1812 to 1815 to allow the user to know the moving direction more intuitively.
  • the processor 130 If the position of the external speaker 200 matches the target position set in the corresponding external speaker 200, the processor 130 is disposed at an appropriate position, and thus the UI screen displaying that the external speaker 200 is properly positioned at the target position. Can be displayed.
  • the processor 130 may perform a current position 1811 of one external speaker 200-5 among the plurality of external speakers 200-1 through 200-5 at a target position 1806 corresponding to the current position 1811. If it is determined that the proximity to within the predetermined range, it may display a phrase such as "OK” indicating that the corresponding external speaker (200-5) is disposed at the target position (1806).
  • the movement information may include information about a direction and a separation distance from a position of the plurality of external speakers 200-1 to 200-5 to a target position corresponding to each external speaker 200-1 to 200-5. You may.
  • the processor 130 may display a message 1817 as movement information such as "relocation of the left rear speaker. 50 cm shift in the right 30 ° direction on the TV".
  • a message may be displayed in small letters at the bottom of the display unit 140 in which the content is displayed as well as the form shown in FIG. 18B. Accordingly, even when the user is watching the content, the electronic device 100 may display the movement information by minimizing the interference with the viewing of the content.
  • the processor 130 may output a voice for guiding each external speaker 200-1 to 200-5 to move to a corresponding target position through at least one of the first and second speakers 111 and 112. have.
  • the processor 130 may control the operation of each external speaker 200-1 to 200-5 based on the location information of each external speaker 200-1 to 200-5.
  • the processor 130 may perform location information of the first external speaker 200-1 and the second external speaker 200-2 from the first external speaker 200-1 and the second external speaker 200-2. Can be received through the communication unit 120, respectively.
  • the second Movement information of the second external speaker 200-2 for disposing the external speaker 200-2 at a target position corresponding to the first external speaker 200-1 may be provided.
  • the processor 130 replaces the second external speaker 200-2 with the first external speaker.
  • the control signal for operating as 200-1 may be transmitted to the second external speaker 200-2. Accordingly, the second external speaker 200-2 may operate like the first external speaker 200-1.
  • the processor 130 moves information of the first external speaker 200-1 to place the first external speaker 200-1 at a target position corresponding to the second external speaker 200-2.
  • the first external speaker 200-1 may operate like the second external speaker 200-2.
  • the left rear speaker 200-4 When it is determined that the left rear speaker 200-4 is located at a distance closer to the target position 1205 corresponding to the right rear speaker 200-5 than the right rear speaker 200-5, the left rear speaker ( The UI displaying the movement information for disposing 200-4 at the target position 1205 corresponding to the right rear speaker 200-5 may be displayed. Such a UI may be displayed in the form shown in FIG. 18A or 18B.
  • the processor 130 When the left rear speaker 200-4 is disposed at the target position 1205, the processor 130 generates a control signal that causes the left rear speaker 200-4 to operate like the right rear speaker 200-5.
  • the rear speaker 200-4 may transmit.
  • a message 1900 may be displayed such as "the operation of the left rear speaker is changed to the right rear speaker".
  • the processor 130 may transmit movement information for placing the external speaker 200 at a target location to an external display device connected by wire or wirelessly through the communication unit 110.
  • the external display apparatus having received the movement information may display the above-described UI screen displaying the movement information, and the effects thereof will be the same as described above.
  • the movement information may be provided by the external speaker 200.
  • the external speaker 200 determines whether or not the external speaker 200 is located at the target location, and outputs a notification sound only when the external speaker 200 is located at the target location. You can tell.
  • the external speaker 200 may include an LED or the like, and when the external speaker 200 is located at a target position, the external speaker 200 may output light of a specific color to the LED. Accordingly, the user can see the color of the LED to know whether the external speaker 200 is in the proper position.
  • 20 to 23 are flowcharts illustrating a control method of an electronic device and a peripheral device according to various embodiments of the present disclosure.
  • the electronic device 100 outputs different first and second sound signals through the first and second speakers (S2010).
  • the electronic device 100 may simultaneously output the first and second sound signals through the first and second speakers.
  • the received information is information in which the first and second sound signals are sequentially received through the microphone provided in the peripheral device 200, or time information in which the first and second sound signals are sequentially received. Information may be included.
  • the distance and direction of the peripheral device 200 are determined based on the received information (S2030).
  • the first and second time information respectively, which have received the first and second sound signals from the peripheral device 200 extracted from the received information, the time when the reference signal is received, and the first and second times.
  • the separation distance and the direction may be determined based on the third time information on the time difference at which the sound signal is output.
  • the first and second speakers may be implemented as speakers disposed on the right side and the left side of the electronic device 100.
  • the time difference between the first and third time information is multiplied by the speed value of the sound signal to the right.
  • the separation distance may be calculated, and the left separation distance may be calculated by multiplying the time difference between the second and third time information by the speed value of the sound signal.
  • the distance and direction of the peripheral apparatus may be determined based on the calculated right and left separation distances and distances between the first and second speakers.
  • the electronic device 100 may provide various services based on the location information of the peripheral device 200 obtained in the above-described manner.
  • 21 is a flowchart illustrating a control method of a peripheral device according to another exemplary embodiment.
  • a reception state is recorded ( S2110).
  • the peripheral device 200 may output a reference signal to the electronic device 100 and operate in a recording mode to record reception states of the first and second sound signals.
  • the first time information and the second time information at which the first and second sound signals are received are obtained from the information on which the received sound signal is recorded (S2120).
  • the distance and direction of the peripheral device 200 are determined based on the obtained first and second time information based on the electronic device 100 (S2130).
  • the peripheral device 200 may receive third time information about a time when the reference signal is received from the electronic device 100 and a time difference when the first and second sound signals are output.
  • the separation distance and the direction may be determined based on the first to third time information.
  • 22 is a flowchart illustrating a control method of an electronic device according to another embodiment of the present disclosure.
  • location information of an external speaker is received from an external speaker (S2210).
  • the electronic device outputs the first and second sound signals through the first and second speakers, respectively, and receives the first and second sound signals.
  • movement information of the external speaker for providing the external speaker at the target position is provided (S2230).
  • the movement information may include information about a current position of the external speaker and a target position for disposing the external speaker.
  • the movement information may include information about a direction and a distance from the position of the external speaker to the target position.
  • the movement information may be provided by displaying a UI screen displaying movement information of an external speaker.
  • the movement information may be provided in a manner of outputting a voice for guiding the external speaker to move to the target position through at least one of the first and second speakers.
  • FIG. 23 is a flowchart illustrating a control method of an electronic device according to another embodiment of the present disclosure.
  • an acoustic signal output from an external speaker is received through the first and second microphones (S2310). If there are a plurality of external speakers, the sound signals may be received in a predetermined order from the plurality of external speakers.
  • the position of the external speaker is determined based on the time when the first and second microphones receive the sound signal, respectively (S2320).
  • movement information of the external speaker for placing the external speaker at the target position is provided (S2340).
  • movement information of the external speakers for disposing the external speakers outputting the current sound signals among the sequentially output sound signals at the corresponding target positions may be provided.
  • the electronic device capable of sound output and the peripheral device capable of receiving sound it is possible to determine the location between each device and use it for various services.
  • the general user installs a sound output system such as a home theater, it is possible to easily and conveniently place the external speaker in a proper position without the help of an expert.
  • control method of the electronic device and the peripheral device may be implemented as a program and provided to a display system.
  • a non-transitory computer readable medium having stored therein a program for receiving time-related information and determining a distance and a direction of a peripheral device based on the electronic device based on the received information. ) May be provided.
  • the non-transitory readable medium refers to a medium that stores data semi-permanently and is readable by a device, not a medium storing data for a short time such as a register, a cache, a memory, and the like.
  • a non-transitory readable medium such as a CD, a DVD, a hard disk, a Blu-ray disk, a USB, a memory card, a ROM, or the like.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

전자 장치가 개시된다. 전자 장치는, 제1 음향 신호를 출력하는 제1 스피커, 제2 음향 신호를 출력하는 제2 스피커, 주변 기기와 통신을 수행하는 통신부 및, 제1 및 제2 음향 신호를 수신한 상기 주변 기기로부터 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보를 수신하고, 수신된 정보에 기초하여 전자 장치를 기준으로 주변 기기의 이격 거리 및 방향을 판단하는 프로세서를 포함한다.

Description

전자 장치, 주변 기기 및 그 제어 방법
본 발명은 전자 장치, 주변 기기 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 음향 출력이 가능한 전자 장치, 주변 기기 및 그 제어 방법에 관한 것이다.
전자 기술의 발달에 힘입어 다양한 종류의 전자 장치가 개발되어 보급되고 있다. 특히, 최근에는 TV를 비롯한 다양한 유형의 전자 장치들이 일반 가정에서 사용되고 있다. 이들 전자 장치들은 사용자의 요구에 따라 점차 다양한 기능을 구비하게 되었다.
특히, 리모콘과 같은 주변 기기의 경우 음성 인식 등의 기능이 추가됨에 따라 마이크를 구비하는 경우가 증가하고 있다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은, 음향 출력이 가능한 전자 장치와 음향 수신이 가능한 주변 기기를 이용하여 각 기기 간 위치를 파악하여 다양하게 활용할 수 있는 전자 장치, 주변 기기 및 그 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 전자 장치는, 제1 음향 신호를 출력하는 제1 스피커, 제2 음향 신호를 출력하는 제2 스피커, 주변 기기와 통신을 수행하는 통신부 및, 상기 제1 및 제2 음향 신호를 수신한 상기 주변 기기로부터 상기 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보를 수신하고, 상기 수신된 정보에 기초하여 상기 전자 장치를 기준으로 상기 주변 기기의 이격 거리 및 방향을 판단하는 프로세서를 포함한다.
또한, 상기 주변 기기에 대응되는 기 설정된 타겟 위치에 대한 정보를 저장하는 저장부를 더 포함하고, 상기 프로세서는, 상기 이격 거리 및 방향에 기초하여 상기 주변 기기가 상기 타겟 위치에 위치하는지 여부를 판단하고, 상기 주변 기기가 상기 타겟 위치에 위치하지 않는 경우 상기 주변 기기를 상기 타겟 위치에 배치시키기 위한 상기 주변 기기의 이동 정보를 제공할 수 있다.
여기서, 상기 수신된 정보는, 상기 주변 기기에 구비된 마이크를 통해 상기 제1 음향 신호 및 상기 제1 음향 신호와 상이한 상기 제2 음향 신호가 순차적으로 수신되는 상태를 기록한 정보일 수 있다.
또는, 상기 수신된 정보는, 상기 주변 기기에 구비된 마이크를 통해 상기 제1 음향 신호 및 상기 제1 음향 신호와 상이한 상기 제2 음향 신호가 순차적으로 수신된 시간 정보를 포함하는 정보일 수 있다.
또한, 상기 프로세서는, 상기 주변 기기로부터 기준 신호가 수신되면, 상기 제1 및 제2 음향 신호를 동시에 출력할 수 있다.
또한, 상기 프로세서는, 상기 수신된 정보에서 추출된 상기 주변 기기에서 상기 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보 및, 상기 기준 신호가 수신된 시간 및 상기 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보에 기초하여 상기 이격 거리 및 방향을 판단할 수 있다.
또한, 상기 제1 및 제2 스피커는 각각 상기 전자 장치의 우측 및 좌측에 구비되고, 상기 프로세서는, 상기 제1 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 우측 이격 거리를 산출하고, 상기 제2 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 좌측 이격 거리를 산출하며, 상기 산출된 우측 및 좌측 이격 거리 및 상기 제1 및 제2 스피커 간 거리에 기초하여 상기 이격 거리 및 방향을 판단할 수 있다.
또한, 상기 프로세서는, 기 설정된 이벤트에 따라 상기 제1 및 제2 음향 신호를 동시에 출력하고, 상기 수신된 정보에서 추출된 상기 주변 기기에 상기 제1 및 제2 음향 신호가 각각 수신된 제1 및 제2 시간 정보, 상기 이벤트가 발생된 제4 시간 정보에 기초하여 상기 이격 거리 및 방향을 판단할 수 있다.
여기서, 상기 이동 정보는, 상기 전자 장치를 기준으로 하는 상기 주변 기기의 상대적 위치에 대한 정보일 수 있다.
또한, 디스플레이부를 더 포함하고, 상기 프로세서는, 상기 상대적 위치를 나타내는 UI 화면을 상기 디스플레이부를 통해 디스플레이할 수 있다.
또한, 상기 프로세서는, 상기 주변 기기가 상기 타겟 위치에 위치하는지 여부를 판단하고, 상기 주변 기기가 상기 타겟 위치에 위치하지 않는 경우 상기 주변 기기를 상기 타겟 위치에 배치시키기 위한 상기 주변 기기의 이동 정보를 표시하는 UI 화면을 상기 디스플레이부를 통해 디스플레이할 수 있다.
또한, 상기 주변 기기는 제1 및 제2 외부 스피커를 포함하고, 상기 프로세서는, 상기 제1 및 제2 외부 스피커로부터 수신된, 상기 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보에 기초하여 상기 제1 외부 스피커에 대응되는 타겟 위치로부터 상기 제1 외부 스피커보다 상기 제2 외부 스피커가 더 근접한 거리에 위치하는 것으로 판단되면, 상기 제2 외부 스피커를 상기 제1 외부 스피커에 대응되는 타겟 위치에 배치시키기 위한 상기 제2 외부 스피커의 이동 정보를 제공하며, 상기 제2 외부 스피커가 상기 제1 외부 스피커에 대응되는 타겟 위치에 배치되면, 상기 제2 외부 스피커를 상기 제1 외부 스피커로 동작하도록 하는 제어 신호를 상기 제2 외부 스피커로 전송할 수 있다.
또한, 상기 프로세서는, 상기 주변 기기가 상기 타겟 위치에 위치하는 경우 상기 주변 기기가 상기 타겟 위치에 배치되었음을 알리는 정보를 제공할 수 있다.
또한, 상기 제1 및 제2 음향 신호 중 적어도 하나는 상기 주변 기기와 페어링(pairing)을 수행하기 위한 기기 식별 정보를 포함할 수 있다.
한편, 본 발명의 일 실시 예에 따른, 제1 및 제2 스피커를 구비한 전자 장치의 제어 방법은, 상기 제1 및 제2 스피커를 통해 제1 및 제2 음향 신호를 출력하는 단계, 상기 제1 및 제2 음향 신호를 수신한 주변 기기로부터 상기 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보를 수신하는 단계, 상기 수신된 정보에 기초하여 상기 전자 장치를 기준으로 상기 주변 기기의 이격 거리 및 방향을 판단하는 단계를 포함한다.
또한, 상기 주변 기기에 대응되는 기 설정된 타겟 위치에 대한 정보를 저장하는 단계를 더 포함하고, 상기 판단하는 단계는, 상기 이격 거리 및 방향에 기초하여 상기 주변 기기가 상기 타겟 위치에 위치하는지 여부를 판단하고, 상기 주변 기기가 상기 타겟 위치에 위치하지 않는 경우 상기 주변 기기를 상기 타겟 위치에 배치시키기 위한 상기 주변 기기의 이동 정보를 제공할 수 있다.
또한, 상기 제1 및 제2 음향 신호를 출력하는 단계는, 상기 주변 기기로부터 기준 신호가 수신되면, 상기 제1 및 제2 음향 신호를 동시에 출력할 수 있다.
또한, 상기 판단하는 단계는, 상기 수신된 정보에서 추출된 상기 주변 기기에서 상기 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보 및, 상기 기준 신호가 수신된 시간 및 상기 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보에 기초하여 상기 이격 거리 및 방향을 판단할 수 있다.
또한, 상기 제1 및 제2 스피커는 각각 상기 전자 장치의 우측 및 좌측에 구비되고, 상기 판단하는 단계는, 상기 제1 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 우측 이격 거리를 산출하고, 상기 제2 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 좌측 이격 거리를 산출하며, 상기 산출된 우측 및 좌측 이격 거리 및 상기 제1 및 제2 스피커 간 거리에 기초하여 상기 이격 거리 및 방향을 판단할 수 있다.
한편, 본 발명의 다른 실시 예에 따른 복수의 스피커를 구비하는 전자 장치와 통신하는 주변 기기는, 음향 수신부, 상기 전자 장치와 통신을 수행하는 통신부 및, 상기 전자 장치에 구비된 복수의 스피커 각각으로부터 출력되는 상이한 제1 및 제2 음향 신호가 상기 음향 수신부를 통해 순차적으로 수신되면, 상기 수신된 음향 신호를 기록한 정보로부터 상기 제1 및 제2 음향 신호가 각각 수신된 제1 및 제2 시간 정보를 획득하고, 상기 제1 및 제2 시간 정보에 기초하여 상기 전자 장치를 기준으로 상기 주변 기기의 이격 거리 및 방향을 판단하는 프로세서를 포함한다.
본 발명의 다양한 실시 예에 따르면, 주변 기기 등에 추가되는 기능을 다양하게 활용할 수 있게 된다. 이에 따라 사용자의 편의성이 향상된다.
도 1은 본 발명의 일 실시 예에 따른 홈 시스템의 구성을 나타내는 모식도,
도 2는 본 발명의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블록도,
도 3a 및 3b는 도 2에 도시된 전자 장치의 세부 구성을 나타내는 블록도,
도 4a 및 4b는 본 발명의 일 실시 예에 따른 주변 기기의 구성을 나타내는 블록도,
도 5 내지 7은 본 발명의 다양한 실시 예에 따라, 주변 기기의 이격 거리 및 방향을 판단하는 방법을 설명하기 위한 도면,
도 8a 내지 8b는 본 발명의 다양한 실시 예에 따라 제공되는 서비스를 설명하기 위한 도면,
도 9는 본 발명의 일 실시 예에 따른 전자 장치 및 주변 기기의 상호간 동작을 설명하기 위한 시퀀스도,
도 10은 본 발명의 다른 실시 예에 따른 전자 장치 및 주변 기기의 상호간 동작을 설명하기 위한 시퀀스도,
도 11 및 12는 본 발명의 일 실시 예에 따른 디스플레이 장치 및 외부 스피커를 포함하는 음향 출력 시스템의 구성을 간략히 설명하기 위한 블록도,
도 13 및 14는 본 발명의 다양한 실시 예에 따른 외부 스피커의 이격 거리 및 방향을 판단하기 위한 방법을 설명하기 위한 도면,
도 15는 본 발명의 일 실시 예에 따른 음향 출력 시스템의 구성을 간략히 설명하기 위한 블록도,
도 16은 본 발명의 일 실시 예에 따른 전자 장치 및 외부 스피커의 구성을 간략히 설명하기 위한 시퀀스도,
도 17은 본 발명의 일 실시 예에 따른, 전자 장치 및 외부 스피커 간에 페어링이 수행되는 과정을 설명하기 위한 도면,
도 18a 내지 도 19는 본 발명의 일 실시 예에 따른 외부 스피커의 이동 정보를 표시하는 UI 화면을 설명하기 위한 도면,
도 20 내지 23은 본 발명의 다양한 실시 예에 따른 전자 장치 및 주변 기기의 제어 방법을 설명하기 위한 흐름도이다.
-
본 발명에 대하여 구체적으로 설명하기에 앞서, 본 명세서 및 도면의 기재 방법에 대하여 설명한다.
먼저, 본 명세서 및 청구범위에서 사용되는 용어는 본 발명의 다양한 실시 예들에서의 기능을 고려하여 일반적인 용어들을 선택하였다. 하지만, 이러한 용어들은 당 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어일 수 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다.
또한, 본 명세서에 첨부된 각 도면에 기재된 동일한 참조 번호 또는 부호는 실질적으로 동일한 기능을 수행하는 부품 또는 구성요소를 나타낸다. 설명 및 이해의 편의를 위해서 서로 다른 실시 예들에서도 동일한 참조번호 또는 부호를 사용하여 설명하도록 한다. 즉, 복수의 도면에서 동일한 참조 번호를 가지는 구성 요소를 모두 도시하고 있다고 하더라도, 복수의 도면들이 하나의 실시 예를 의미하는 것은 아니다.
또한, 본 명세서 및 청구범위에서는 구성요소들 간의 구별을 위하여 “제1”, “제2” 등과 같이 서수를 포함하는 용어가 사용될 수 있다. 이러한 서수는 동일 또는 유사한 구성 요소들을 서로 구별하기 위하여 사용하는 것이며, 이러한 서수 사용으로 인하여 용어의 의미가 한정 해석되어서는 안될 것이다. 일 예로, 이러한 서수와 결합된 구성 요소는 그 숫자에 의해 사용 순서나 배치 순서 등이 제한 해석되어서는 안된다. 필요에 따라서는, 각 서수들은 서로 교체되어 사용될 수도 있다.
본 명세서에서 단수의 표현은 문맥상 명백하게 다름을 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, “포함하다” 또는 “구성하다” 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 실시 예에서 “모듈”, “유닛”, “부(part)” 등과 같은 용어는 적어도 하나의 기능이나 동작을 수행하는 구성 요소를 지칭하기 위한 용어이며, 이러한 구성 요소는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어 및 소프트웨어의 결합으로 구현될 수도 있다. 또한, 복수의 “모듈”, “유닛”, “부(part)” 등은 각각이 개별적인 특정한 하드웨어로 구현될 필요가 있는 경우를 제외하고는, 적어도 하나의 모듈이나 칩으로 일체화되어 적어도 하나의 프로세서(미도시)로 구현될 수 있다.
또한, 본 발명의 실시 예에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적인 연결뿐 아니라, 다른 매체를 통한 간접적인 연결의 경우도 포함한다. 또한 어떤 부분이 어떤 구성 요소를 포함한다는 의미는, 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있다는 것을 의미한다.
이하, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시 예에 따른 홈 시스템의 구성을 나타내는 모식도이다.
도 1에 따르면, 본 발명의 일 실시 예에 따른 홈 시스템(1000)은 메인 전자 장치(100) 및, 복수의 주변 디바이스(200-1 내지 200-4)로 구현될 수 있다.
전자 장치(100)는 적어도 두 개의 스피커를 구비하여 서로 다른 음향을 출력할 수 있는 장치로 구현될 수 있으며, 예를 들어 도시된 바와 같이 스마트 TV로 구현될 수 있다. 다만 이에 한정되는 것은 아니며, 적어도 두 개의 스피커를 구비한 장치라면 이에 한정되지 않고 적용가능하다.
복수의 주변 디바이스(200-1 내지 200-4)는 전자 장치(100)로부터 출력되는 음향을 수신할 수 있는 마이크를 구비하는 장치로 구현될 수 있으며, 예를 들어, 가정 또는 사무실 등과 같은 일정한 공간에서 쓰이는 모든 전기, 전자 제품으로 구현될 수 있다. 특히 복수의 주변 디바이스(200-1 내지 200-4)는 전자 장치(100)와 양 방향 통신이 가능하도록 구현될 수 있다. 다만 실시 예에 따라 주변 디바이스(200-1 내지 200-4)는 전자 장치(100)와 일방향 통신을 수행할 수도 있으나, 이에 대한 설명은 후술하도록 한다.
또한, 실시 예에 따라 홈 시스템(100)은 복수의 주변 디바이스(200-1 내지 200-4)를 유무선 하나의 시스템으로 연결, 쌍방향 통신이 가능한 홈 네트워크 시스템으로 구현될 수 있으나, 네트워크를 통해 복수의 기기를 연결하여 제어하는 시스템이면 이에 한정되지 않고 적용 가능하다.
이 경우, 전자 장치(100)는 게이트웨이 장치, 네트워크 서버, 컨트롤러 장치 등과 통신을 수행하거나, 게이트웨이 장치, 네트워크 서버, 컨트롤러 장치 등의 기능을 구비하도록 구현되어, 네트워크 시스템 내의 복수의 디바이스의 동작을 전반적으로 제어할 수 있다.
한편, 도 1과 같은 홈 시스템(1000)이 구축된 경우, 전자 장치(100)는 적어도 두 개의 스피커를 구비한 스마트 TV로 구현되고, 복수의 주변 디바이스(200-1 내지 200-4)는 각각 마이크를 구비한 스마트 폰(200-1), 룸 스피커(200-2), 리모콘(200-3), 에어컨(200-4)으로 구현될 수 있다. 하지만, 이는 일 예일 뿐, 주변 디바이스는 로봇 청소기, 히터, 냉장고, 세탁기, 공기 청정기, 모니터, DVD 플레이어, 디지털 카메라, 전자 액자, 전등, 블라인드 등 다양한 형태로 구현될 수 있음은 물론이다.
한편, 본 발명의 일 실시 예에 따르면, 전자 장치(100)에 구비된 두 개의 스피커를 통해 상이한 음향이 출력되고, 주변 디바이스에서 이를 수신하는 과정을 통해 해당 주변 디바이스의 위치를 파악하고, 파악된 위치에 기초하여 다양한 서비스를 제공할 수 있는데, 이하에서는 도면을 참조하여 본 발명의 다양한 실시 예에 대해 자세히 설명하도록 한다.
도 2는 본 발명의 일 실시 예에 따른 전자 장치의 구성을 나타내는 블록도이다.
도 2에 따르면, 전자 장치(100)는 제1 스피커(111), 제2 스피커(112), 통신부(120) 및 프로세서(130)를 포함한다.
제1 스피커(111)는 제1 음향 신호를 출력한다.
제2 스피커(112)는 제1 음향 신호와 상이한 제2 음향 신호를 출력한다. 여기서, 제2 음향 신호는, 제1 음향 신호와 주파수, 음역, 음고(pitch), 음색(tinebre), 음가(duration) 중 적어도 하나가 상이한 신호가 될 수 있다. 예를 들어, 제1 스피커(111)에서 출력되는 제1 음향 신호는 10Hz의 주파수를, 제2 스피커(112)에서 출력되는 제2 음향 신호는 20Hz의 주파수를 가질 수 있다.
제1 및 제2 스피커(111, 112)는 전기 펄스를 음파로 변환시키는 기능을 하며, 전기신호를 음파로 변환시키는 원리와 방법에 따라 구분되는 동전형(動電型) 즉, 다이내믹 형으로 구현될 수 있으나, 이에 한정되는 것은 아니며 정전형(靜電型), 유전체형(誘電體型), 자기왜형(磁氣歪型) 등으로 구현될 수 있다.
또한, 제1 및 제2 스피커(111, 112)는 재생 대역을 저음·중음·고음 등으로 음역을 나누고, 각각에 알맞은 스피커에 분담시키는 멀티웨이 방식으로 구현될 수 있다. 예를 들어, 3 개의 스피커에 분담시킨 3 웨이 방식의 경우, 고주파 음향 신호를 재생하기 위한 고음역 스피커(tweeter), 중간 주파수 음향 신호를 재생하기 위한 중음역 스피커(midrange), 저주파 음향 신호를 재생하기 위한 저음역 스피커(또는 우퍼(woofer)) 등을 포함하는 형태로 구현될 수 있다. 이 경우, 제1 및 제2 스피커(111, 112)는 3 개의 스피커 중 두 개의 스피커로 구현될 수 있다.
한편, 제1 및 제2 스피커(111, 112)는 가로 방향으로 기설정된 간격 이상 이격되어 구비될 수 있다. 예를 들어, 전자 장치(100)가 디지털 TV로 구현되는 경우 제1 및 제2 스피커(111, 112)는 우측 끝 단 및 좌측 끝 단에 각각 매립된 스피커로 구현될 수 있으나, 이에 한정되는 것은 아니다. 예를 들어, 전자 장치(100)에 부착된 별도의 스피커라도 전자 장치(100)가 그 부착 위치를 알 수 있는 경우라면 이에 포함될 수 있다.
통신부(120)는 마이크를 구비한 주변 기기(200)와 통신을 수행한다. 여기서, 통신부(120)는 BT(BlueTooth), WI-FI(Wireless Fidelity), Zigbee, IR(Infrared), Serial Interface, USB(Universal Serial Bus), NFC(Near Field Communication) 등과 같은 다양한 통신 방식을 통해 주변 기기(200)와 통신을 수행할 수 있다.
구체적으로, 통신부(120)는 기 설정된 이벤트가 발생하면, 외부 스피커(200)와의 기 정의된 통신 방식에 따라 통신을 수행하여 연동 상태가 될 수 있다. 여기서, 연동은 전자 장치(100)와 주변 기기(200) 간에 통신이 초기화되는 동작, 네트워크가 형성되는 동작, 기기 페어링이 수행되는 동작 등 통신이 가능한 상태가 되는 모든 상태를 의미할 수도 있다. 예를 들어 주변 기기(200)의 핀 코드(pin code) 등의 기기 식별 정보가 전자 장치(100)로 제공되고, 그에 따라 양 기기 간의 페어링 절차가 수행될 수 있다. 예를 들어, 전자 장치(100) 및 주변 기기(200)에서 기 설정된 이벤트가 발생하면, DLNA(Digital Living Network Alliance) 기술을 통해 주변 기기(200)가 전자 장치(100)를 탐색하고, 전자 장치(100) 및 주변 기기(200)가 페어링을 수행하여 연동 상태가 될 수 있다.
이때, 통신부(120)는 음파를 기반으로 하는 핀 코드(pin code) 등의 기기 식별 정보를 주변 기기(200)로 전송하여 페어링을 수행할 수 있다. 주변 기기(200)가 핀 코드를 수신하면 수신된 핀 코드를 자동으로 입력하여 페어링이 수행된다.
BT 등을 이용하여 주변 기기(200)와 페어링을 수행하고, 페어링된 주변 기기(200)에 대하여 와이파이(Wi-Fi) 등의 무선 네트워크 연결 정보를 전송하여 주변 기기(200)와 무선 네트워크 상으로 연결될 수 있다. 무선 네트워크로 연결되면, 통신부(120)는 주변 기기(200)로부터 제품 종류 및 주변 기기(200)에서 분석된 위치와 관련된 정보를 수신할 수 있다.
프로세서(130)는 전자 장치(100)의 전반적인 동작을 제어한다.
프로세서(130)는 통신부(110)에 의해, 제1 및 제2 스피커부(111, 112)를 통해 출력된 제1 및 제2 음향 신호를 마이크에 의해 수신한 주변 기기(200)로부터 제1 및 제2 음향 신호를 수신한 시간에 대한 정보를 수신한다. 이어서, 프로세서(130)는 수신된 정보에 기초하여 전자 장치(100)를 기준으로 주변 기기(200)의 이격 거리 및 방향을 판단할 수 있다.
여기서, 수신된 정보는, 주변 기기(200)에 구비된 마이크를 통해 제1 및 제2 음향 신호가 순차적으로 수신되는 상태를 기록(또는 녹음 또는 캡쳐)한 파일이거나, 주변 기기(200)에 구비된 마이크를 통해 제1 및 제2 음향 신호가 순차적으로 수신된 시간 정보를 포함하는 정보가 될 수 있다. 즉, 주변 기기(200)는 구비된 마이크를 통해 제1 및 제2 음향 신호가 순차적으로 수신되는 상태를 기록한 후, 기록된 정보를 그대로 전자 장치(100)로 전송하거나, 기록 정보를 분석하여 제1 및 제2 음향 신호가 순차적으로 수신된 시간 정보를 획득한 후, 획득된 시간 정보를 전자 장치(100)로 전송할 수도 있다.
또한, 프로세서(130)는 주변 기기(200)로부터 기준 신호(또는 트리거 신호)가 수신되면, 제1 및 제2 음향 신호를 동시에 출력할 수 있다. 이 경우, 주변 기기(200)는 전자 장치(100)에 기준 신호를 전송하고, 녹음 모드로 동작할 수 있다. 즉 음향 신호에 대한 기록을 시작할 수 있다. 여기서, 기준 신호를 BT(BlueTooth)와 같은 RF 통신을 통해 수신될 수 있으나, 이에 한정되는 것은 아니다.
또한, 프로세서(130)는 주변 기기(200)로부터 기준 신호를 수신한 시점부터 제1 및 제2 음향 신호가 출력된 시점 간의 시간차를 산출할 수 있다.
프로세서(130)는 상기와 같은 동작에 따른 시간 정보에 기초하여 전자 장치(100)의 위치를 기준으로 주변 기기(200)의 이격 거리 및 방향을 판단할 수 있다.
프로세서(130)는 수신된 정보로부터 추출된 주변 기기(200)에서 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보, 기준 신호가 주변 기기(200)에서 출력된 시간(또는 전자 장치(100)가 기준 신호를 수신한 시간) 및 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보에 기초하여 주변 기기(200)의 이격 거리 및 방향을 판단할 수 있다.
구체적으로, 프로세서(130)는 제1 시간 정보 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 우측 이격 거리를 산출할 수 있다. 동일한 방법으로, 프로세서(130)는 제2 시간 정보 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 좌측 이격 거리를 산출할 수 있다. 이 후, 프로세서(130)는 산출된 우측 및 좌측 이격 거리 및 제1 및 제2 스피커(111, 112) 간 거리에 기초하여 기초하여 주변 기기(200)의 이격 거리 및 방향을 판단할 수 있다.
다만, 상술한 실시 예에 한정되는 것은 아니며, 다른 실시 예에 따르면, 프로세서(130)는 기설정된 이벤트에 따라 제1 및 제2 음향 신호를 동시에 출력하고 수신된 정보에서 추출된 주변 기기(200)에서 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보, 이벤트가 발생된 제3 시간 정보에 기초하여 이격 거리를 판단할 수 있다. 예를 들어, 전자 장치(100) 및 주변 기기(200) 간 시간이 동기화된 경우, 전자 장치(100)는 주변 기기(200)에 음향 신호 기록을 요청하는 신호를 전송한 후, 기설정된 시간 후에 음향 신호를 출력하고, 주변 기기(200)로부터 수신된 시간 정보에 기초하여 이격 거리를 판단할 수 있다. 구체적으로, 전자 장치(100)가 음향 신호를 출력한 시간이 a, 주변 기기(200)에서 제1 및 제2 음향 신호를 수신한 시간이 각각 b, c 인 경우 b-a, c-a 각각에 음향 신호의 속도 값을 곱하여, 우측 이격 거리 및 좌측 이격 거리를 산출할 수 있다.
한편, 프로세서(130)는 상술한 다양한 실시 예에 따라 획득한 외부 기기(200)의 이격 거리 및 방향에 기초하여 다양한 서비스를 제공할 수 있다. 예를 들어 프로세서(130)는 주변 기기(200)가 리모콘으로 구현되는 경우 리모콘 찾기 서비스, 절대 좌표 방식에 따른 리모콘의 지향 방향 및 지향 위치를 판단하는 서비스, 주변 기기(200)가 홈씨어터 스피커로 구현되는 경우, HTS easy setup 서비스, 홈 네트워크 내 IoT 기기간 네트워크 구성 서비스, 가전 제품(예를 들어, 에어컨, 로봇 청소기)의 위치 감지를 통한 다양한 서비스를 제공할 수 있다.
예를 들어, 전자 장치(100)가 TV로 구현되고, 주변 기기(200)가 포인팅 디바이스로 구현되는 경우, 프로세서(130)는 주변 기기(200)의 이격 거리 및 방향에 신호 처리 알고리즘을 적용하여 전자 장치(100) 화면 상의 X, Y 좌표로 변환한다. 이 후, 프로세서(130)는 변환된 X, Y 좌표를 디스플레이 장치(100)의 UI 화면에서 포인팅 오브젝트의 X, Y 좌표에 매핑하여 포인팅 오브젝트의 좌표를 지정할 수 있다.
이렇게 지정된 좌표를 이용하여 포인팅 오브젝트의 위치를 지정할 수 있게 된다. 이 경우, 주변 기기(200)가 해당 위치에서 화면 방향을 향한다는 가정하에 화면 상에서 주변 기기(200)가 지향하는 위치를 판단할 수 있다. 이에 따라 트리거 신호에 따라 절대 좌표 방식으로 포인팅 오브젝트를 디스플레이할 수 있게 된다.
도 3a 및 3b는 도 2에 도시된 전자 장치의 세부 구성을 나타내는 블록도이다.
도 3a는 도 2에 도시된 전자 장치의 구체적 구성을 나타내는 블럭도이다. 도 3a에 따르면, 전자 장치(100')는 제1 스피커(111), 제2 스피커(112), 통신부(120), 프로세서(130), 디스플레이부(140), 저장부(150), 오디오 처리부(160), 비디오 처리부(170) 및 사용자 인터페이스부(180)를 포함한다. 도 3a에 도시된 구성 중 도 2에 도시된 구성과 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
프로세서(130)는 전자 장치(100')의 동작을 전반적으로 제어한다.
구체적으로, 프로세서(130)는 RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n), 버스(136)를 포함한다.
RAM(131), ROM(132), 메인 CPU(133), 그래픽 처리부(134), 제1 내지 n 인터페이스(135-1 ~ 135-n) 등은 버스(136)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(135-1 내지 135-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
메인 CPU(133)는 저장부(150)에 액세스하여, 저장부(150)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 저장부(150)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
ROM(132)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(133)는 ROM(132)에 저장된 명령어에 따라 저장부(150)에 저장된 O/S를 RAM(131)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(133)는 저장부(150)에 저장된 각종 어플리케이션 프로그램을 RAM(131)에 복사하고, RAM(131)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(134)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 오브젝트를 포함하는 화면, 예를 들어, 포인팅 오브젝트를 포함하는 화면을 생성한다. 연산부(미도시)는 수신된 제어 명령에 기초하여 화면의 레이아웃에 따라 각 오브젝트들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 오브젝트를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부(미도시)에서 생성된 화면은 디스플레이(140)의 사용자 인터페이스 영역 내에 표시된다.
한편, 상술한 프로세서(130)의 동작은 도 3b에 도시된 바와 같이 저장부(150)에 저장된 프로그램에 의해 이루어질 수도 있다.
저장부(150)는 전자 장치(100')를 구동시키기 위한 O/S(Operating System) 소프트웨어 모듈, 각종 멀티미디어 컨텐츠와 같은 다양한 데이터를 저장한다. 특히, 저장부(150)는 도 3b에 도시된 바와 같이 본 발명의 일 실시 예에 따른 기능을 제공하기 위한 통신 모듈(151), 신호 처리 모듈(152), 위치 산출 모듈(153) 및 서비스 제공 모듈(154) 등의 프로그램이 저장되어 있을 수 있다.
프로세서(130)는 통신 모듈(151)을 이용하여 주변 기기(200)로부터 신호를 수신하고, 주변 기기(200)로 신호를 전송할 수 있다.
예를 들어, 프로세서(130)는 통신 모듈(151)을 이용하여 주변 기기(200)로부터 기준 신호를 수신하고, 제1 및 제2 스피커(111, 112)를 통해 음향 신호를 출력한 시간 정보를 포함하는 신호를 주변 기기(200)로 전송할 수 있다.
프로세서(130)는 신호 처리 모듈(152)을 이용하여 주변 기기(200)로부터 수신된 신호를 신호 처리하거나, 주변 기기(200)로 전송할 신호를 신호처리 할 수 있다.
예를 들어, 주변 기기(200)로부터 제1 및 제2 음향 신호의 수신 상태를 기록한 파일이 수신되면, 프로세서(130)는 신호 처리 모듈(152)을 이용하여 해당 파일을 위치 산출 모듈(153)에서 분석 가능한 상태로 신호 처리할 수 있다.
또한, 저장부(150)는 주변 기기(200)에 대응되는 타겟 위치에 대한 정보를 저장할 수 있다. 여기서, 타겟 위치란, 전자 장치(100)를 기준으로 각 주변 기기(200)가 배치되어야할 가장 적절한 위치를 의미한다. 타겟 위치는 전자 장치(100)를 기준으로 하는 상대적 위치로서, 전자 장치(100)로부터 특정한 방향 및 거리로 설정되어 저장될 수 있다. 프로세서(130)는 저장부(150)에 저장된 타겟 위치에 대한 정보를 이용하여, 주변 기기(200)가 타겟 위치에 위치하는지 여부를 판단할 수 있으며, 일치하지 않는 경우, 주변 기기(200)를 타겟 위치에 배치시키기 위한 주변 기기(200)의 이동 정보를 제공할 수 있다.
프로세서(130)는 통신부(120)를 통해 주변 기기(200)로부터 주변 기기(200)의 위치 정보를 수신하고, 수신된 위치 정보에 따른 주변 기기(200)가 타겟 위치에 위치하는지 여부를 판단한다. 프로세서(130)는 주변 기기(200)가 타겟 위치에 위치하지 않는 것으로 판단되면, 주변 기기(200)를 타겟 위치에 배치시키기 위한 주변 기기(200)의 이동 정보를 제공할 수 있다.
여기서, 이동 정보는, 주변 기기(200)로부터 수신된 주변 기기(200)의 현재 위치 및 주변 기기(200)를 배치시키기 위한 기 저장된 타겟 위치에 대한 정보를 포함할 수 있다. 또한, 이동 정보는, 주변 기기(200)의 위치로부터 타겟 위치에 대한 방향 및 거리에 대한 정보를 포함할 수 있다.
또한, 프로세서(130)는 위치 산출 모듈(153)을 이용하여 신호 처리 모듈(152)을 통해 처리된 값에 기초하여 외부 기기(200)의 위치, 즉, 이격 거리 및 방향을 산출할 수 있다.
디스플레이부(140)는 다양한 컨텐츠 화면을 제공하는 구성이다. 여기서, 컨텐츠 화면은 이미지, 동영상, 텍스트, 음악 등과 같은 다양한 컨텐츠, 다양한 컨텐츠를 포함하는 어플리케이션 실행 화면, GUI(Graphic User Interface) 화면 등을 포함할 수 있다. 이러한 디스플레이부(140)를 포함하는 전자 장치(100')는 디스플레이 장치로 명명될 수도 있다.
특히, 프로세서(130)는 산출된 주변 기기(200)의 이격 거리 및 방향을 기초로 전자 장치(100)를 기준으로 주변 기기(200)의 상대적 위치를 나타내는 UI 화면을 디스플레이부(140)를 통해 디스플레이한다. 여기서, UI 화면은 이미지, 동영상, 텍스트 등과 같은 다양한 형태로 구현될 수 있다. 한편, 디스플레이(140)는 LCD(Liquid Crystal Display Panel), OLED(Organic Light Emitting Diodes) 등으로 구현될 수 있으나, 이에 한정되는 것은 아니다. 또한, 디스플레이(140)는 경우에 따라 플렉서블 디스플레이, 투명 디스플레이 등으로 구현되는 것도 가능하다.
구체적으로, 프로세서(130)는 홈 네트워크에 연결된 디바이스들을 포함하는 2D 또는 3D 공간 배치도를 디스플레이하고, 해당 공간 배치도 내에서 주변 기기(200)의 위치를 제공할 수 있다. 즉, 공간 배치도는 홈 네트워크에 연결된 적어도 하나의 홈 디바이스에 대한 정보를 포함할 수 있으며, 이러한 정보는 홈 디바이스의 식별 정보를 텍스트(예를 들어 홈 디바이스 명칭) 또는 이미지(예를 들어, 홈 디바이스의 실사, 외관 이미지 또는 아이콘) 형태로 포함할 수 있다. 한편, 공간 배치도는 홈 디바이스 각각의 위치 정보 및 디바이스 타입에 기초하여 생성될 수 있다. 구체적으로, 홈 네트워크에 연결된 홈 디바이스 각각의 위치 정보 및 디바이스 타입을 토대로 가상의 공간 배치도를 생성하고, 홈 네트워크에 기존 홈 디바이의 연결이 해제되거나, 새로운 홈 디바이스가 연결될 때마다 입력되는 위치 정보를 토대로 공간 배치도를 업데이트할 수 있다.
한편, 디스플레이부(140)는 LCD(Liquid Crystal Display Panel), OLED(Organic Light Emitting Diodes), LCoS(Liquid Crystal on Silicon), DLP(Digital Light Processing) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 또한, 디스플레이(110) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다.
그 밖에 전자 장치(100')는 음향 데이터에 대한 수행하는 오디오 처리부(160), 비디오 데이터에 대한 처리를 수행하는 비디오 처리부(170), 사용자의 제어에 따라 정지 영상 또는 동영상을 촬상하기 카메라, 사용자 음성이나 기타 음향을 입력받아 오디오 데이터로 변환하기 위한 마이크 등을 포함하는 사용자 인터페이스부(180)를 더 포함할 수 있다. 예를 들어, 프로세서(130)는 제1 및 제2 스피커(111, 112)를 통해 출력되는 제1 및 제2 음향 신호를 처리하도록 오디오 처리부(160)를 제어할 수 있다.
도 4a 및 4b는 본 발명의 일 실시 예에 따른 주변 기기의 구성을 나타내는 블록도이다.
도 4a에 따르면, 주변 기기(200)는 음향 수신부(210), 통신부(220) 및 프로세서(230)를 포함한다.
음향 수신부(210)는 전자 장치(100)에서 출력되는 제1 및 제2 음향 신호를 수신하는 적어도 하나의 마이크를 포함하도록 구현될 수 있다.
통신부(220)는 전자 장치(100)와 통신을 수행하며 상세한 구성은 전자 장치(100)의 통신부(120)와 유사하므로 자세한 설명은 생략하도록 한다.
일 실시 예에 따르면, 프로세서(230)는 전자 장치(100)에 구비된 복수의 스피커 각각으로부터 출력되는 상이한 제1 및 제2 음향 신호가 음향 수신부(210)를 통해 순차적으로 수신되면, 수신되는 음향 신호를 기록하고, 기록 정보를 전자 장치(100)로 전송할 수 있다. 이 경우, 프로세서(230)는 기설정된 이벤트(예를 들어, 기설정된 버튼 입력)에 따라 전자 장치(100)가 음향 신호를 출력하도록 하는 트리거 신호를 전자 장치(100)로 전송할 수 있다. 즉, 프로세서(230)는 도 2에서 설명한 전자 장치(100)의 동작에 대응되는 동작을 수행할 수 있다.
다만, 다른 실시 예에 따르면, 주변 기기(200)가 전자 장치(100)의 위치를 기준으로 자신의 이격 거리 및 방향을 직접 판단할 수 있으며, 판단된 정보를 필요에 따라 전자 장치(100)에 제공할 수 있다.
다른 실시 예에 따르면, 프로세서(230)는 전자 장치(100)에 구비된 복수의 스피커 각각으로부터 출력되는 상이한 제1 및 제2 음향 신호가 음향 수신부(210)를 통해 순차적으로 수신되면, 수신되는 음향 신호를 기록하고, 기록 정보로부터 제1 및 제2 음향 신호가 수신된 시간을 획득하고, 획득된 시간 기초하여 전자 장치(100)를 기준으로 주변 기기(200)의 이격 거리 및 방향을 판단할 수 있다. 이 경우, 프로세서(230)는 전자 장치(100)가 음향 신호를 출력하도록 하는 트리거 신호를 전자 장치(100)로 전송할 수 있다.
구체적으로, 프로세서(230)는 기록된 파일로부터 획득된 주변 기기(200)가 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보, 전자 장치(100)가 기준 신호를 수신한 시간 및 전자 장치(100)에서 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보에 기초하여 전자 장치(100)로부터의 이격 거리 및 방향을 판단할 수 있다. 이 경우, 제3 시간 정보는 전자 장치(100)로부터 획득될 수 있으며, 프로세서(230)가 주변 기기(200)가 제1 및 제2 음향 신호를 각각 수신한 시간차를 산출하여 획득할 수도 있다.
구체적으로, 프로세서(230)는 제1 시간 정보 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 우측 이격 거리를 산출할 수 있다. 동일한 방법으로, 프로세서(230)는 제2 시간 정보 및 제3 시간 정보의 차에 음향 신호의 속도 값을 곱하여 좌측 이격 거리를 산출할 수 있다. 이 후, 프로세서(230)는 산출된 우측 및 좌측 이격 거리에 기초하여 전자 장치(100)로부터의 이격 거리 및 방향를 판단할 수 있다.
다만, 상술한 실시 예에 한정되는 것은 아니며, 다른 실시 예에 따르면, 전자 장치(100)의 프로세서(130)는 외부 스피커(200)에 대하여 음향 신호 기록을 요청하는 신호를 전송한 후, 기 설정된 이벤트에 따라 제1 및 제2 음향 신호를 동시에 출력할 수 있다.
도 4b는 도 4a에 도시된 주변 기기의 구체적 구성을 나타내는 블럭도이다. 도 4b에 따르면, 주변 기기(200')는 음향 수신부(210), 통신부(220), 프로세서(230), 저장부(240), 오디오 처리부(250) 및 스피커(260)를 포함한다. 도 4b에 도시된 구성 중 도 4a에 도시된 구성과 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
프로세서(230)의 동작은 저장부(240)에 저장된 프로그램에 의해 이루어질 수 있다.
저장부(240)에는 주변 기기(200)에서 수신된 신호를 처리하기 위한 신호 처리 알고리즘이 저장될 수 있다. 또한, 구현 예에 따라 전자 장치(100)를 구동시키기 위한 O/S(Operating System) 소프트웨어, 다양한 감지 신호에 대한 연산을 수행하기 위한 신호 처리 알고리즘 등과 같이 다양한 데이터가 저장될 수 있다.
한편, 프로세서(230)의 세부 구성은 전자 장치(100')의 프로세서(130)(도 3a)와 유사하므로 자세한 설명은 생략하도록 한다.
한편, 구현 예에 따라 주변 기기(200)가 포인팅 디바이스로 구현되는 경우, 주변 기기(200)의 움직임을 센싱하기 위한 다양한 센서(예를 들어, 가속도 센서, 지자기 센서, 자이로 센서 등)를 더 포함할 수 있다.
이 경우, 프로세서(230)는 각종 센싱 신호에 따라 다양한 연산 동작을 수행할 수 있다. 예를 들어, 프로세서(230)는 다양한 센서들로부터 수신된 센서값에 대한 전처리를 수행하여 전자 장치(100)로 전송할 수 있다. 예를 들어, 디지털 값으로 변환된 센서 값을 실제 물리량으로 변환하고, 가속도 센서, 지자기 센서, 자이로 센서의 개별 축을 하나의 정의된 축으로 맞추는 작업을 수행하고, 저역 통과 필터링을 통해 센서의 전기적 잡음과 의도하지 않은 고주파 움직임을 제거하는 등의 전처리 작업을 수행할 수 있다. 다만, 경우에 따라서는, 감지된 신호 처리 알고리즘에 따라 연산하고, 연산된 값을 전자 장치(100)로 전송할 수도 있다.
또한, 주변 기기(200)가 포인팅 디바이스로 구현되는 경우, 전원 ON/OFF를 위한 사용자 명령을 입력받는 전원 버튼부, 전자 장치(100)의 화면 상에 포인팅 오브젝트를 표시하고 기준 위치를 설정하기 위한 센터링 버튼부 등을 더 포함할 수 있다. 예를 들어, 주변 기기(200)의 전원이 ON 되면 주변 기기(200)는 전자 장치(100)와 페어링 동작을 수행할 수 있다. 페어링이 완료된 후, 사용자가 센터링 버튼부(미도시)을 누름 조작하게 되면 전자 장치(100)의 디스플레이 화면의 센터에는 포인팅 오브젝트가 디스플레이될 수 있다.
도 5 내지 7은 본 발명의 다양한 실시 예에 따라, 주변 기기의 이격 거리 및 방향을 판단하는 방법을 설명하기 위한 도면이다.
도 5에서는 주변 기기(200)에서 이격 거리 및 방향을 판단하는 실시 예의 경우에 대해 설명하도록 한다.
도 5에 따르면, 주변 기기(200)가 기준 신호 즉, Time Reference 신호를 전자 장치(100)로 출력하고, 녹음 모드로 동작한다.
이 경우, 해당 기준 신호를 수신한 전자 장치(100)는 우측 및 좌측 스피커를 통해 상이한 제1 및 제2 음향 신호를 출력하고, 기준 신호를 수신한 시점부터 음향 신호를 출력한 시간차 D2에 대한 시간 정보를 주변 기기(200)로 전송한다.
이 경우, 도 6에 도시된 바와 같이 주변 기기(200)는 수신된 음향 신호 S에서 제1 음향 신호 SR 및 제2 음향 신호 SL를 각각 추출하고, 각 음향 신호가 수신된 시점 TR 및 TL에 대한 정보를 획득할 수 있다.
이 경우, 주변 기기(200)는 기준 신호를 출력한 시점 및 마이크를 통해 제1 음향 신호를 수신한 시점 간의 시간 차(D1R)에서 D2를 뺀 값 즉, D1R - D2 및, 기준 신호를 출력한 시점 및 마이크를 통해 제2 음향 신호를 수신한 시점 간의 시간 차(D1L)에서 D2를 뺀 값 즉, D1L - D2에 기초하여 전자 장치(100)를 기준으로 주변 기기(200)의 이격 거리 및 방향을 산출할 수 있다.
구체적으로, 도 7을 참고하면, 프로세서(230)는 D1R - D2에 음향 신호의 속도 Vs(예를 들어, 340m/s)를 곱하여 좌측 스피커(711)로부터의 이격 거리 L1을 산출하고, D1L - D2에 음향 신호의 속도 Vs를 곱하여 우측 스피커(712)로부터의 이격 거리 L2를 산출할 수 있다. 이 경우 전자 장치(100)에 구비된 좌측 스피커(711) 및 우측 스피커(712) 간 거리 A는 이미 알고 있으므로, 이에 기초하여 전자 장치(100)로부터의 수직 이격 거리 L 및 방향 θ를 산출할 수 있게 된다.
도 8a 내지 8b는 본 발명의 다양한 실시 예에 따라 제공되는 서비스를 설명하기 위한 도면이다.
본 발명의 일 실시 예에 따라 사용자가 이동 가능한 주변 기기, 예를 들어 리모콘의 위치를 알고자 하는 경우, 리모콘 위치 찾기 메뉴를 선택하여, 해당 서비스를 제공받을 수 있다.
즉, 전자 장치(100)는 상술한 방법으로 리모콘의 위치 즉, 이격 거리 및 방향이 판단되면, 도 8a 및 도 8b에 도시된 바와 같이 리모콘의 위치에 대한 정보를 다양한 방식의 UI 화면으로 제공할 수 있다. 예를 들어 도 8a에 도시된 바와 같이 가상의 공간 배치도 상에 리모콘 위치를 가이드 하는 UI(810)를 제공하거나, 또는 도 8b에 도시된 바와 같이 전자 장치(100)를 기준으로 리모콘의 대략적 위치를 수치적으로 제공하는 UI(820)를 제공할 수도 있다.
도 9는 본 발명의 일 실시 예에 따른 전자 장치 및 주변 기기의 상호간 동작을 설명하기 위한 시퀀스도이다.
도 9에 도시된 바에 따르면, 우선 주변 기기(200)가 전자 장치(100)로 음향 출력을 위한 기준 신호를 전송한다(S910). 이 경우, 주변 기기(200)는 녹음 모드로 진입한다(S920).
이어서, 전자 장치(100)가 기준 신호를 수신하면, 복수의 스피커를 통해 상이한 음향 신호를 출력한다(S930).
이 경우, 주변 기기(200)는 녹음 모드에서 마이크를 통해 수신되는 음향 신호를 기록한다(S940).
이어서, 주변 기기(200)는 순차적으로 수신된 상이한 음향 신호가 기록된 정보를 전자 장치(100)로 전송한다(S950).
전자 장치(100)는 주변 기기(200)로부터 수신된 기록 정보를 분석하여 주변 기기(200)의 위치를 판단한다(S960).
각 단계의 상세 동작에 대해서는 상술한 바 있으므로 자세한 설명은 생략하도록 한다.
도 10은 본 발명의 다른 실시 예에 따른 전자 장치 및 주변 기기의 상호간 동작을 설명하기 위한 시퀀스도이다.
도 10에 도시된 바에 따르면, 우선 주변 기기(200)가 전자 장치(100)로 음향 출력을 위한 기준 신호를 전송한다(S1010). 이 경우, 주변 기기(200)는 녹음 모드로 진입한다(S1020).
이어서, 전자 장치(100)가 기준 신호를 수신하면, 복수의 스피커를 통해 상이한 음향 신호를 출력한다(S1030).
이 경우, 주변 기기(200)는 녹음 모드에서 마이크를 통해 수신되는 음향 신호를 기록한다(S1040).
이어서, 전자 장치(100)는 기준 신호를 수신한 시간 및 음향 신호를 출력한 시간 차에 대한 시간 정보를 전자 장치(100)로 전송한다(S1050).
이 후, 주변 기기(200)는 전자 장치(100)로부터 수신된 시간 정보 및 음향 신호가 기록된 기록 정보를 분석하여 주변 기기(200)의 위치를 판단한다(S1060).
각 단계의 상세 동작에 대해서는 상술한 바 있으므로 자세한 설명은 생략하도록 한다.
도 11 및 12는 본 발명의 일 실시 예에 따른 디스플레이 장치 및 외부 스피커를 포함하는 음향 출력 시스템의 구성을 간략히 설명하기 위한 블록도이다.
도 11은 본 발명의 일 실시 예에 따라 음향 출력 시스템(1000')을 구성하는 스피커를 설정하는 HTS easy setup 서비스를 제공하는 방법을 설명하기 위한 도면이다. 도 11에 도시된 바와 같이 전자 장치(100)를 기준으로 좌우에 4 개의 스피커(1110 내지 1140)를 배치하여 음향 출력 시스템(1000')을 구성하는 경우를 상정하여 설명하도록 한다. 이하의 실시 예에서, 전자 장치(100)는 디스플레이 장치로, 주변 기기(200)는 복수의 스피커로 구현됨을 상정하여 설명하기로 한다.
예를 들어, 사용자가 음향 출력 시스템(1000')의 구성을 위해 4 개의 스피커(1110 내지 1140)를 연결하였다고 가정한다.
이 경우, 디스플레이 장치(100)는 각 스피커들의 이격 거리 및 방향을 측정하여, 연결이 제대로 되어 있는지 판단하고, 그에 따른 피드백 서비스를 제공할 수 있다. 예를 들어, 최좌측 스피커(1110) 및 최우측 스피커(1140)를 잘못 연결하였다고 가정하면, 전자 장치(100)는 이들의 이격 거리 및 방향을 측정하여, 설정이 제대로 되어 있지 않음에 대한 노티(noti)를 사용자에게 제공하거나, 경우에 따라서는 자동으로 연결 설정을 변경하는 것도 가능하다. 다만, 해당 실시 예의 경우, 각 스피커들에 마이크가 구비된 경우를 상정할 수도 있지만, 이에 한정되는 것은 아니다. 즉, 스피커 두 개와 마이크 하나만으로 본 발명의 기술적 사상을 적용할 수 있으므로, 전자 장치(100)에 마이크가 구비된 경우, 각 스피커들로부터 출력되는 음향 신호 및 각 스피커들의 위치에 기초하여 디스플레이 장치(100)와 4 개의 스피커(1110 내지 1140)들의 상대적 위치를 판단할 수 있음은 물론이다.
도 12는 집안의 거실에 홈씨어터(Home theater) 시스템으로 구현된 음향 출력 시스템(1000')을 도시한 것이다. 홈 씨어터 시스템은, 고화질의 영상과 돌비 5.1 채널과 같은 풍부한 오디오 자원을 이용하여 가정에서도 입체감, 현장감을 느낄 수 있도록 하는 음향 출력 시스템이다.
홈씨어터 시스템은, 청취위치를 기준으로 옆이나 뒤에 위치하는 복수 개의 외부 스피커를 포함하며, 복수 개의 외부 스피커는 음향의 입체효과를 높여주는 역할을 한다. 복수 개의 외부 스피커는 일반적으로 프론트 L, 프론트 R, 센터, 리어 L, 리어 R, 서브 우퍼로 구성되며, 복수 개의 외부 스피커는 극장의 스피커 배열과 유사하도록 가정환경에서 합리적인 위치에 배치되는 것이 기본 배치의 목적이 될 수 있다.
그러나, 기존에 홈씨어터 시스템을 설치하는 경우, 일반적인 사용자는 각 외부 스피커의 적절한 위치를 알기 어렵고, 이에 따라 설명서를 참조해가면서 각 외부 스피커를 배치시킬 수 밖에 없다. 또한, 설명서를 참조하더라도 TV를 기준으로 각 외부 스피커가 어느 방향으로 얼마만큼 떨어져 배치되어야 하는지 정확히 알기 어려운 문제가 있다. 따라서, 본 발명의 기술적 사상에 따른 일 실시 예에 의하면, 일반 사용자가 전문가의 도움 없이도, 쉽고 편리하게 외부 스피커를 배치시킬 수 있도록 가이드할 수 있다.
도 12에 도시된 바와 같이, 디스플레이 장치(100)는 적어도 두개의 스피커를 구비하여 서로 다른 음향 신호를 출력할 수 있는 전자 장치로서, 스마트 TV 등으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 적어도 두 개의 스피커를 구비한 전자 장치라면 이에 한정되지 않고 적용이 가능하다.
외부 스피커(200)는 디스플레이 장치(100)로부터 출력되는 음향 신호를 수신할 수 있는 마이크를 구비하는 스피커로 구현될 수 있으며, 특히 외부 스피커(200)는 디스플레이 장치(100)와 양방향 통신이 가능하도록 구현될 수 있다. 다만, 실시 예에 따라서는 외부 스피커(200)는 디스플레이 장치(100)와 일방향 통신을 수행할 수도 있으나, 이에 대한 설명은 후술하도록 한다.
구체적으로, 복수의 스피커(200)는 홈씨어터 시스템(1000')을 구성하는 서라운드(surround) 스피커로 구현될 수 있다. 일 예로서, 외부 스피커(200)는 도 1에 도시된 바와 같이, 프론트 L(200-1), 프론트 R(200-2), 센터(200-3), 리어 L(200-4), 리어 R(200-5), 서브우퍼(200-6), 백 L(200-7) 및 백 R(200-8) 스피커 등을 포함할 수 있으며, 각 외부 스피커(200-1 ~ 200-8)는 각 기능에 따라 적절한 위치에 배치되어야 한다. 일 예로, 프론트 L(200-1), 프론트 R(200-2) 스피커는 사용자의 전면에, 리어 L(200-4), 리어 R(200-5) 스피커는 사용자의 측면에 배치되는 것이 바람직하며, 사용자를 둘러 싸도록 배치되는 것이 바람직하다.
일 실시 예에 따른 홈씨어터 시스템(1000')은 디스플레이 장치(100) 및 복수의 외부 스피커(200-1 ~ 200-8)를 유무선 하나의 시스템으로 연결, 쌍방향 통신이 가능한 홈 네트워크 시스템으로 구현될 수 있으나, 네트워크를 통해 복수의 기기를 연결하여 제어하는 시스템이면 이에 한정되지 않고 적용 가능하다.
이 경우, 디스플레이 장치(100)는 게이트웨이 장치, 네트워크 서버, 컨트롤러 장치 등과 통신을 수행하거나, 게이트웨이 장치, 네트워크 서버, 컨트롤러 장치 등의 기능을 구비하도록 구현되어, 네트워크 시스템 내의 복수의 디바이스의 동작을 전반적으로 제어할 수 있다.
한편, 일반적인 사용자는 이러한 홈 씨어터 시스템을 설치하는 경우에 있어서, 디스플레이 장치(100)의 위치를 기준으로 각 외부 스피커(200-1 ~ 200-8)를 어느 방향에 얼마만큼 떨어진 거리에 놓아야 하는지 알기가 어렵고, 각 외부 스피커(200-1 ~ 200-8)의 종류 또한 알기가 쉽지 않다. 본 발명의 일 실시 예에 따르면, 각 외부 스피커(200-1 ~ 200-8)의 위치를 적절한 위치로 안내하기 위하여 각 외부 스피커(200-1 ~ 200-8)의 현재 위치가 정확히 산출되는 것이 선행되어야 하며 음향 신호를 통한 삼각 측량법을 기본원리로 하여 각 외부 스피커(200-1 ~ 200-8)의 위치가 산출될 수 있다.
이에 따른, 본 발명의 일 실시 예에 따르면, 디스플레이 장치(100)에 구비된 두 개의 스피커를 통해 상이한 음향이 출력되며, 전자 장치(100)의 주변에 놓인 외부 스피커(200-1 ~ 200-8)에서 서로 상이한 음향을 각각 수신하는 과정에 따라 삼각측량법에 기초하여 해당 외부 스피커의 위치를 파악하고, 파악된 위치에 기초하여 이를 적절하게 배치시키기 위한 다양한 UI 서비스를 제공할 수 있다. 이하에서는 도면을 참조하여 본 발명의 다양한 실시 예에 대해 자세히 설명하도록 한다.
도 13 및 14는 본 발명의 다양한 실시 예에 따른 외부 스피커의 이격 거리 및 방향을 판단하기 위한 방법을 설명하기 위한 도면이다.
구체적으로, 도 13을 참고하면, 외부 스피커(200-7)는 D1L에서 D2를 뺀 값에 음향 신호의 속도 Vs(예를 들어, 340m/s)를 곱하여 디스플레이 장치(100-1)의 좌측에 구비된 제1 스피커(111)로부터의 이격 거리 y1을 산출할 수 있다. 또한, 외부 스피커(200-7)는 D1L에서 D2를 뺀 값에 음향 신호의 속도 Vs를 곱하여 디스플레이 장치(100-1)의 우측에 구비된 제2 스피커(112)로부터의 이격 거리 y2를 산출할 수 있다. 이에 따라, y1 및 y2가 계산되면, 외부 스피커(200-7)의 수평 위치는 삼각 측량법에 의해 계산될 수 있다. 즉, 디스플레이 장치(100-1) 또는 외부 스피커(200-7)에서 제1 스피커(111) 및 제2 스피커(112) 사이의 거리 d1은 기 저장된 기지의 정보라고 했을 때, 제1 스피커(111)로부터 y1만큼 떨어진 거리와 제2 스피커(112)로부터 y2만큼 떨어진 거리가 계산되면 삼각형의 3요소(세 변의 길이)가 결정되며, 외부 스피커(200-7)는, 삼각 측량법에 의해 외부 스피커(200-7)의 수평 위치를 결정할 수 있다. 외부 스피커(200-7)는 결정된 수평 위치에 대한 정보를 디스플레이 장치(100-1)로 전송할 수 있다.
또한, 도 14를 참고하면, 본 발명의 다른 실시 예에 다른 디스플레이 장치(100-2)는 제1 및 제2 마이크(191, 192)를 구비할 수 있다. 제1 마이크(191) 및 제2 마이크(192)는 외부 스피커(200)로부터 출력된 음향 신호를 수신하기 위한 구성이다. 제1 마이크(191) 및 제2 마이크(192)는 전자 장치(100-2)의 가로 방향으로 기 설정된 간격으로 이격되어 있으며, 제1 마이크(191)는 전자 장치(100-2)의 우측 끝 단에 제2 마이크(192)는 좌측 끝 단에 각각 매립된 형태로 구현됨이 바람직하다. 이 경우, 디스플레이 장치(100-2)는 기준 신호 즉, time reference 신호를 외부 스피커(200-8)로 출력하고, 녹음 모드로 동작한다.
이 경우, 해당 기준 신호를 수신한 외부 스피커(200-8)는 음향 신호를 출력하고, 기준 신호를 수신한 시점부터 음향 신호를 출력한 시간차 D3에 대한 시간 정보를 디스플레이 장치(100-2)로 전송한다. 이 경우, 디스플레이 장치(100-2)의 프로세서(130)는 기준 신호를 출력한 시점 및 제1 마이크(191)를 통해 음향 신호를 수신한 시점 간의 시간 차(D2R)에서 D3를 뺀 값 즉, D2R - D3 및, 기준 신호를 출력한 시점 및 제2 마이크(192)를 통해 음향 신호를 수신한 시점 간의 시간 차(D2L)에서 D3를 뺀 값 즉, D2L - D3에 기초하여 디스플레이 장치(100-2)를 기준으로 외부 스피커(200-8)의 이격 거리 및 방향을 산출할 수 있다.
구체적으로 도 14를 참고하면, 프로세서(130)는 D2R에서 D3를 뺀 값에 음향 신호의 속도 Vs(예를 들어, 340m/s)를 곱하여 제1 마이크(191)로부터의 이격 거리 y1을 산출할 수 있다. 또한, 프로세서(130)는 D2L에서 D3를 뺀 값에 음향 신호의 속도 Vs를 곱하여 제2 마이크(192)로부터의 이격 거리 y2를 산출할 수 있다. 이에 따라, y1 및 y2가 계산되면, 프로세서(130)는 외부 스피커(200-8)의 수평 위치를 삼각 측량법에 의해 계산할 수 있다. 즉, 디스플레이 장치(100-2)에서 제1 마이크(191) 및 제2 마이크(192) 사이의 거리 d1은 기 저장된 기지의 정보라고 했을 때, 제1 마이크(191)로부터 y1 만큼 떨어진 거리와 제2 마이크(192)로부터 y2만큼 떨어진 거리가 계산되면 삼각형의 3요소(세 변의 길이)가 결정되며, 프로세서(130)는 삼각 측량법에 의해 외부 스피커(200-8)의 수평 위치를 결정할 수 있다.
또한, 본 발명의 다른 실시 예에 따른 전자 장치(100)는 촬영부(미도시)를 더 포함할 수 있다. 프로세서(130)는 촬영부를 통해 외부 스피커(200)를 촬영하고, 촬영된 외부 스피커가 포함된 영상 프레임을 통해 외부 스피커(200)의 위치 정보를 획득할 수 있다. 프로세서(130)는 획득된 위치 정보를 통해 전자 장치(100)와 외부 스피커(200) 간의 방향 및 거리를 판단할 수 있을 것이다.
한편, 도 13 내지 도 14에서는 외부 스피커(200)가 외부 스피커(200)의 이격 거리 및 방향을 판단하는 것으로 설명하였으나, 디스플레이 장치(100)의 프로세서(130)가 외부 스피커(200)로부터 제1 및 제2 음향 신호가 수신된 시간과 관련된 정보를 수신하여 도 13 내지 14에 도시된 방법으로 외부 스피커(200)의 이격 거리 및 방향을 판단할 수 있음은 물론이다.
도 15는 본 발명의 일 실시 예에 따른 음향 출력 시스템의 구성을 간략히 설명하기 위한 블록도이다.
도 15에 도시된 바와 같이, 음향 출력 시스템(1000)은 디스플레이 장치(100) 및 외부 스피커(200)로 구성될 수 있다. 전자 장치(100)는 제1 스피커(111), 제2 스피커(112), 통신부(120), 프로세서(130), 디스플레이부(140), 저장부(150), 오디오 처리부(160) 및 비디오 처리부(170)를 포함할 수 있다.
외부 스피커(200)는 마이크(210), 통신부(220), 프로세서(230), 오디오 처리부(250) 및 스피커(260)를 포함할 수 있다. 이하에서는 도 4a 및 4b에서의 설명과 중복되는 부분에 대한 자세한 설명은 생략하기로 한다.
외부 스피커(200)는 통신부(220)를 통해 디스플레이 장치(100)로 하여금 음향 신호를 출력하도록 하기 위한 기준 신호를 디스플레이 장치(100)로 전송할 수 있다. 이때, 기준 신호는 IR 통신 방식 또는 BT 통신 방식에 의할 수 있다. 디스플레이 장치(100)의 통신부(120)에서 기준 신호를 수신하면, 디스플레이 장치(100)의 프로세서(130)가 현재 출력되는 음향 신호를 오디오 처리부(160)를 통해 주파수가 서로 상이한 제1 음향 신호 및 제2 음향 신호로 변환하고, 제1 스피커(111) 및 제2 스피커(112)를 이용하여 제1 음향 신호 및 제2 음향 신호를 출력할 수 있다. 이때, 외부 스피커(200)가 마이크(210)를 통해 음향 신호를 감지하면, 오디오 처리부(250)에서 음향 신호를 주파수 대역별로 제1 음향 신호 및 제2 음향 신호로 분리할 수 있다.
외부 스피커(200)의 프로세서(230)는 각각의 음향 신호가 감지된 시간 정보를 이용하여, 디스플레이 장치(100)를 기준으로 하는 외부 스피커(200)의 방향 및 이격된 거리를 포함하는 위치를 판단할 수 있으며, 판단된 위치와 관련된 정보를 통신부(220)를 통해 디스플레이 장치(100)로 전송할 수 있다.
디스플레이 장치(100)의 프로세서(130)는, 수신된 위치와 관련된 정보에 기초하여 외부 스피커(200)를 저장부(150)에 기 저장된 타겟 위치에 배치시키기 위한 외부 스피커(200)의 이동 정보를 표시하는 UI 화면을 디스플레이부(140)를 통해 디스플레이할 수 있다.
도 16은 본 발명의 일 실시 예에 따른 전자 장치 및 외부 스피커의 구성을 간략히 설명하기 위한 시퀀스도이다.
먼저, 사용자가 전자 장치(100)에 디스플레이된 UI 상에서 음향 출력 시스템(1000)을 설치하기 위한 이지 셋업 서비스를 선택할 수 있다(S1605).
전자 장치(100)는 제1 및 제2 스피커(111, 112)를 통해 서로 다른 제1 및 제2 음향 신호를 출력할 수 있다(S1610). 이때, 전자 장치(100)는 제1 및 제2 음향 신호 중 적어도 하나에 외부 스피커(200)와의 페어링을 위한 음파 기반의 핀 코드를 포함시켜 전송할 수 있다.
외부 스피커(200)가 수신한 음향 신호로부터 핀 코드를 수신하면, 페어링 모드로 전환되고(S1620), 핀 코드가 자동적으로 입력되어 전자 장치(100)와 페어링될 수 있다(S1625). 페어링이 완료되면, 전자 장치(100)는 외부 스피커(200)에 대하여 Wi-Fi의 AP 등의 정보를 포함하는 무선 네트워크 연결 정보를 전달하고(S1630), 외부 스피커(200)는 수신된 무선 네트워크 연결 정보에 기초하여 해당 무선 네트워크를 설정할 수 있다(S1635).
한편, 외부 스피커(200)는 제1 음향 신호 및 제2 음향 신호가 수신된 시간 차에 기초하여 삼각 측량법에 의한 외부 스피커(200)의 전자 장치(100)와의 상대적 위치를 산출할 수 있다(S1640). 외부 스피커(200)는 외부 스피커(200)의 종류 및 산출된 위치와 관련된 정보를 전자 장치(100)로 전송하고(S1645), 전자 장치(100)는 수신된 외부 스피커(200)의 종류 및 위치와 관련된 정보에 기초하여 외부 스피커(200)의 현재 위치가 타겟 위치와 일치하는지 여부를 판단할 수 있다(S1650).
일치하지 않는 경우, 전자 장치(100)는 외부 스피커(200)를 타겟 위치에 배치시키기 위한 외부 스피커(200)의 이동 정보를 표시하는 UI 화면을 디스플레이할 수 있으며, 일치하는 경우에는 외부 스피커(200)가 타겟 위치에 배치되었음을 표시하는 UI 화면을 디스플레이할 수 있다(S1655).
도 17은 본 발명의 일 실시 예에 따른, 전자 장치 및 외부 스피커 간에 페어링이 수행되는 과정을 설명하기 위한 도면이다.
도 17에 도시된 바와 같이, 전자 장치(100)는 제1 음향 신호 및 제1 음향 신호와 다른 제2 음향 신호를 출력하면서, 타 블루투스 기기를 탐색하기 위한 BT Discovery 신호를 스캐닝한다. 전자 장치(100)는 외부 스피커(200-1)가 탐지되면, 해당 외부 스피커(200-1)에 대하여 블루투스 하드웨어 장치 주소(BD ADDR)를 전송하고, 제1 및 제2 음향 신호를 출력하면서, 블루투스 연결을 위한 음파 기반의 핀 코드를 외부 스피커(200-1)로 전송할 수 있다.
한편, 옥외의 권한이 없는 타 전자 장치(300) 또한 댁내의 외부 스피커(200-1)에 대하여 BT Discovery 신호의 스캐닝에 따른 BD ADDR의 전송이 가능할 수 있을 것이나, 외부 스피커(200-1)는 타 전자 장치(300)에서 출력되는 음향 신호 및 음파 기반의 핀 코드를 벽 등의 차단막에 의해 수신하지 못하므로, 타 전자 장치(300)와 페어링이 수행되는 것을 방지할 수 있다.
페어링이 수행되면 전자 장치(100)는 전자 장치(100)의 암호화된 설정 값을 외부 스피커(200-1)에 전송할 수 있다. 구체적으로 전자 장치는 현재 연결된 무선 AP 정보 등의 무선 네트워크 연결 정보 등을 외부 스피커(200-1)로 전송할 수 있다. 외부 스피커(200-1)는 전자 장치(100)와 무선 네트워크로 연결되면, 외부 스피커(200-1)의 종류 및 위치에 대한 정보를 전자 장치(100)로 전송할 수 있다.
도 18a 및 18b는 본 발명의 서로 다른 실시 예에 따른 외부 스피커의 이동 정보를 표시하는 UI 화면을 설명하기 위한 도면이다.
전자 장치(100)가 디스플레이부(140)를 구비한 경우, 프로세서(130)는 외부 스피커(200)의 위치가 해당 외부 스피커(200)에 대응되는 타겟 위치와 일치하지 않않으면, 외부 스피커(200)를 타겟 위치에 배치시키기 위한 외부 스피커(200)의 이동 정보를 표시하는 UI(User Interface) 화면을 디스플레이할 수 있다. 이때, UI 화면은 외부 스피커(200)의 판단된 위치 및 외부 스피커(200)가 배치되어야 할 적절한 위치를 표시하는 화면일 수 있다. 또한, UI 화면은 외부 스피커(200)가 이동되어야 할 방향과 거리를 안내하는 문구일 수도 있다. 또한, 이동 정보는 외부 스피커(200)의 현재 위치 및 외부 스피커(200)를 배치시키기 위한 타겟 위치에 대한 정보를 포함할 수 있다.
UI는 2D 또는 3D 공간 배치도를 디스플레이하고, 해당 공간 배치도 내에서 디스플레이 장치(100)의 위치를 기준으로 하는 외부 스피커(200)의 위치를 표시할 수 있다. 이때, 외부 스피커(200)가 복수 개인 경우, 각각의 외부 스피커(200)의 위치가 표시될 수 있다. 공간 배치도는 외부 스피커(200)에 대한 식별 정보로서, 텍스트(예를 들어, 스피커의 종류, 좌/우 정보) 또는 이미지(예를 들어, 스피커의 실사, 외관 이미지 또는 아이콘) 등이 표시될 수 있다.
도 18a에 도시된 바와 같이, 프로세서(130)는 공간 배치도 상에서 전자 장치(100)의 위치(1801), 복수의 외부 스피커(200-1 ~ 200-5)에 대응되는 각 타겟 위치(1801 ~ 1805) 및 현재 판단된 복수의 외부 스피커(200-1 ~ 200-5) 각각의 위치(1807 ~ 1811)를 디스플레이할 수 있다. 이에 따라, 사용자는 전자 장치(100)에 디스플레이된 복수의 외부 스피커(200-1 ~ 200-5)의 위치를 확인하면서, 각 외부 스피커(200-1 ~ 200-5)의 위치를 각 외부 스피커(200-1 ~ 200-5)에 대응되는 타겟 위치(1801 ~ 1805)로 이동시킬 수 있다. 이때, 화면에 디스플레이되는 UI는 화살표 모양의 아이콘(1812 ~ 1815)을 도시하여 사용자가 좀더 직관적으로 이동 방향을 알 수 있도록 할 수 있다.
프로세서(130)는 외부 스피커(200)의 위치가 해당 외부 스피커(200)에 설정된 타겟 위치와 일치하는 경우에는 적절한 위치에 배치된 것이므로 외부 스피커(200)가 타겟 위치에 적절히 배치되었음을 표시하는 UI 화면을 디스플레이할 수 있다.
도 18a에 도시된 바와 같이, 프로세서(130)는 복수의 외부 스피커(200-1 ~ 200-5) 중 일 외부 스피커(200-5)의 현재 위치(1811)가 대응되는 타겟 위치(1806)에 기 설정된 범위 내로 근접한 것으로 판단되면, 해당 외부 스피커(200-5)가 타겟 위치(1806)에 배치되었음을 나타내는 "OK" 등의 문구 등을 디스플레이할 수 있다.
또한, 이동 정보는, 복수의 외부 스피커(200-1 ~ 200-5)의 위치로부터 각 외부 스피커(200-1 ~ 200-5)에 대응되는 타겟 위치에 대한 방향 및 이격 거리에 대한 정보를 포함할 수도 있다.
도 18b에 도시된 바와 같이, 프로세서(130)는 이동 정보로서 "좌측 리어스피커의 재배치가 필요합니다. TV에서 우측 30° 방향으로 50cm 이동"과 같은 메시지(1817)를 디스플레이할 수도 있다. 이러한 메시지는 도 18b에 도시된 형태 뿐만 아니라, 컨텐츠가 디스플레이되는 디스플레이부(140)의 하단에 작은 글씨로 표시될 수도 있다. 이에 따라, 전자 장치(100)는 사용자가 컨텐츠를 시청 중인 경우에도 컨텐츠 시청에 대한 방해를 최소화하여 이동 정보를 표시할 수도 있다.
또한, 프로세서(130)는 제1 및 제2 스피커(111, 112) 중 적어도 하나를 통해 각 외부 스피커(200-1 ~ 200-5)를 대응되는 타겟 위치로 이동하도록 안내하는 음성을 출력할 수도 있다.
한편, 프로세서(130)는 각 외부 스피커(200-1 ~200-5)의 위치 정보에 기초하여, 각 외부 스피커(200-1 ~ 200-5)의 동작을 제어할 수 있다. 구체적으로, 프로세서(130)는 제1 외부 스피커(200-1) 및 제2 외부 스피커(200-2)로부터 제1 외부 스피커(200-1) 및 제2 외부 스피커(200-2)의 위치 정보를 통신부(120)를 통해 각각 수신할 수 있다. 이때, 만약 제1 외부 스피커(200-1)에 대응되는 타겟 위치로부터 제1 외부 스피커(200-1)보다 제2 외부 스피커(200-2)가 더 근접한 거리에 위치하는 것으로 판단되면, 제2 외부 스피커(200-2)를 제1 외부 스피커(200-1)에 대응되는 타겟 위치에 배치시키기 위한 제2 외부 스피커(200-2)의 이동 정보를 제공할 수 있다. 이와 함께, 프로세서(130)는 제2 외부 스피커(200-2)가 제1 외부 스피커(200-1)에 대응되는 타겟 위치에 배치되면, 제2 외부 스피커(200-2)를 제1 외부 스피커(200-1)로 동작하도록 하는 제어 신호를 제2 외부 스피커(200-2)로 전송할 수 있다. 이에 따라, 제2 외부 스피커(200-2)는 제1 외부 스피커(200-1)와 같이 동작할 수 있게 된다.
이와 동일한 방식으로 프로세서(130)는, 제1 외부 스피커(200-1)를 제2 외부 스피커(200-2)에 대응되는 타겟 위치로 배치시키기 위한 제1 외부 스피커(200-1)의 이동 정보를 제공할 수 있으며, 이에 따라 제1 외부 스피커(200-1)는 제2 외부 스피커(200-2)와 같이 동작할 수 있다.
좌측 리어스피커(200-4)가 우측 리어스피커(200-5)보다 우측 리어스피커(200-5)에 대응되는 타겟 위치(1205)에 더 근접한 거리에 위치하는 것으로 판단되는 경우, 좌측 리어스피커(200-4)를 우측 리어스피커(200-5)에 대응되는 타겟 위치(1205)에 배치시키기 위한 이동 정보를 표시하는 UI를 디스플레이할 수 있다. 이러한 UI는 도 18a 또는 18b에 도시된 형태로 디스플레이될 수 있다. 좌측 리어스피커(200-4)가 해당 타겟 위치(1205)에 배치되면, 프로세서(130)는 좌측 리어스피커(200-4)를 우측 리어스피커(200-5)와 같이 동작하도록 하는 제어 신호를 좌측 리어스피커(200-4)로 전송할 수 있다.
이때, 도 19에 도시된 바와 같이, "좌측 리어스피커가 우측 리어스피커로 동작이 변경됩니다"와 같은 메시지(1900)를 디스플레이할 수 있다.
한편, 프로세서(130)는 통신부(110)를 통해 유선 또는 무선으로 연결된 외부 디스플레이 장치에 외부 스피커(200)를 타겟 위치에 배치시키기 위한 이동 정보를 전송할 수도 있다. 이동 정보를 수신한 외부 디스플레이 장치는, 해당 이동 정보를 표시하는 상술한 바와 같은 UI 화면을 디스플레이할 수 있으며, 그 효과는 상술한 바와 같을 것이다.
한편, 이동 정보는 외부 스피커(200)가 제공할 수도 있다. 예를 들어, 외부 스피커(200)가 자신이 타겟 위치에 위치하는 지 여부를 판단하고, 타겟 위치에 위치하는 경우에만 알림음을 출력하여 사용자로 하여금 외부 스피커(200)가 적절한 위치에 놓였음을 알 수 있도록 할 수 있다. 또한, 외부 스피커(200)는 LED 등을 구비하여, 외부 스피커(200)가 타겟 위치에 위치한 경우, 특정한 색의 광을 LED로 출력하도록 할 수 있다. 이에 따라, 사용자는 LED의 색을 보고 외부 스피커(200)가 적절한 위치에 놓였는지 여부를 알 수 있다.
도 20 내지 23은 본 발명의 다양한 실시 예에 따른 전자 장치 및 주변 기기의 제어 방법을 설명하기 위한 흐름도이다.
도 20에 도시된 전자 장치의 제어 방법에 따르면, 전자 장치(100)는 제1 및 제2 스피커를 통해 상이한 제1 및 제2 음향 신호를 출력한다(S2010). 이 경우, 전자 장치(100)는 주변 기기(200)로부터 기준 신호가 수신되면, 제1 및 제2 스피커를 통해 제1 및 제2 음향 신호를 동시에 출력할 수 있다.
이어서, 마이크를 통해 제1 및 제2 음향 신호를 수신한 주변 기기(200)로부터 제1 및 제2 음향 신호가 수신된 시간과 관련된 정보를 수신한다(S2020). 여기서, 수신되는 정보는, 주변 기기(200)에 구비된 마이크를 통해 제1 및 제2 음향 신호가 순차적으로 수신되는 상태를 기록한 정보이거나, 제1 및 제2 음향 신호가 순차적으로 수신된 시간 정보를 포함하는 정보가 될 수 있다.
이 후, 수신된 정보에 기초하여 전자 장치(100)를 기준으로 주변 기기(200)의 이격 거리 및 방향을 판단한다(S2030).
구체적으로, S1230 단계에서는 수신된 정보에서 추출된 주변 기기(200)에서 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보 및, 기준 신호가 수신된 시간 및 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보에 기초하여 이격 거리 및 방향을 판단할 수 있다.
특히, 제1 및 제2 스피커는 전자 장치(100)의 우측 및 좌측에 배치된 스피커로 구현될 수 있으며, S1230 단계에서는 제1 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 우측 이격 거리를 산출하고, 제2 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 좌측 이격 거리를 산출할 수 있다. 또한, 산출된 우측 및 좌측 이격 거리 및, 제1 및 제2 스피커 간 거리에 기초하여 주변 기기의 이격 거리 및 방향를 판단할 수 있다.
한편, 전자 장치(100)는 상술한 방식으로 획득된 주변 기기(200)의 위치 정보에 기초하여 다양한 서비스를 제공할 수 있다.
도 21은 본 발명의 다른 실시 예에 따른 주변 기기의 제어 방법을 설명하기 위한 흐름도이다.
도 21에 도시된 주변 기기의 제어 방법에 따르면, 우선 외부 전자 장치(100)에 구비된 복수의 스피커 각각으로부터 출력되는 상이한 제1 및 제2 음향 신호가 마이크를 통해 수신되면 수신 상태를 기록한다(S2110). 이에 앞서 주변 기기(200)는 전자 장치(100)로 기준 신호를 출력하고, 녹음 모드로 동작하여 제1 및 제2 음향 신호의 수신 상태를 기록할 수 있다.
이어서, 수신된 음향 신호를 기록한 정보로부터 제1 및 제2 음향 신호가 각각 수신된 제1 시간 정보 및 제2 시간 정보를 획득한다(S2120).
이 후, 획득된 제1 및 제2 시간 정보에 기초하여 전자 장치(100)를 기준으로 주변 기기(200)의 이격 거리 및 방향을 판단한다(S2130).
또한, 주변 기기(200)는 전자 장치(100)로부터 기준 신호가 수신된 시간 및 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보를 수신할 수 있다.
이 경우, S2130 단계에서는 제1 내지 제3 시간 정보에 기초하여 이격 거리 및 방향을 판단할 수 있다.
도 22는 본 발명의 다른 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 외부 스피커로부터 외부 스피커의 위치 정보를 수신한다(S2210). 이때, 전자 장치는, 제1 및 제2 스피커를 통해 제1 및 제2 음향 신호를 각각 출력하고, 제1 및 제2 음향 신호를 수신한다.
이후, 외부 스피커에 대응되는 타겟 위치에 대한 기 저장된 정보 및 수신된 위치 정보에 기초하여, 외부 스피커가 타겟 위치에 위치하는지 여부를 판단한다(S2220).
이후, 외부 스피커가 타겟 위치에 위치하지 않는 경우, 외부 스피커를 타겟 위치에 배치시키기 위한 외부 스피커의 이동 정보를 제공한다(S2230). 여기서, 이동 정보는 외부 스피커의 현재 위치 및 외부 스피커를 배치시키기 위한 타겟 위치에 대한 정보를 포함할 수 있다. 또한, 이동 정보는 외부 스피커의 위치로부터 타겟 위치에 대한 방향 및 거리에 대한 정보를 포함할 수 있다.
한편, 이동 정보는, 외부 스피커의 이동 정보를 표시하는 UI 화면을 디스플레이하는 방식으로 제공될 수 있다. 또한, 제1 및 제2 스피커 중 적어도 하나를 통해 외부 스피커를 타겟 위치로 이동하도록 안내하는 음성을 출력하는 방식으로 이동 정보가 제공될 수도 있다.
도 23은 본 발명의 다른 실시 예에 따른 전자 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 제1 및 제2 마이크를 통해 외부 스피커로부터 출력된 음향 신호를 수신한다(S2310). 만약, 외부 스피커가 복수 개인 경우, 복수 개의 외부 스피커로부터 기 설정된 순서대로 음향 신호를 수신할 수 있다.
이후, 음향 신호를 제1 및 제2 마이크가 각각 수신한 시간에 기초하여 외부 스피커의 위치를 판단한다(S2320).
이후, 외부 스피커에 대응되는 타겟 위치에 대한 기 저장된 정보에 기초하여, 외부 스피커가 타겟 위치에 위치하는지 여부를 판단한다(S2330).
이후, 외부 스피커가 타겟 위치에 위치하지 않는 경우 외부 스피커를 타겟 위치에 배치시키기 위한 외부 스피커의 이동 정보를 제공한다(S2340). 외부 스피커가 복수 개인 경우에는, 순차적으로 출력되는 음향 신호 중에서 현재 음향 신호를 출력하는 외부 스피커를 대응되는 타겟 위치에 배치시키기 위한 외부 스피커의 이동 정보를 제공할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 음향 출력이 가능한 전자 장치와 음향 수신이 가능한 주변 기기를 이용하여 각 기기 간 위치를 파악하여 다양한 서비스에 활용할 수 있게 된다. 또한, 일반 사용자가 홈씨어터와 같은 음향 출력 시스템을 설치할 때에 전문가의 도움을 받지 않고도 쉽고 편리하게 외부 스피커를 적절한 위치에 배치시킬 수 있게 된다.
상술한 다양한 실시 예에 따른 전자 장치 및 주변 기기의 제어 방법은 프로그램으로 구현되어 디스플레이 시스템에 제공될 수 있다.
일 예로, 제1 및 제2 스피커를 통해 상이한 제1 및 제2 음향 신호를 출력하는 단계, 마이크를 통해 제1 및 제2 음향 신호를 수신한 주변 기기로부터 제1 및 제2 음향 신호가 수신된 시간과 관련된 정보를 수신하는 단계 및, 수신된 정보에 기초하여 전자 장치를 기준으로 주변 기기의 이격 거리 및 방향을 판단하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
-
-

Claims (15)

  1. 전자 장치에 있어서,
    제1 음향 신호를 출력하는 제1 스피커;
    제2 음향 신호를 출력하는 제2 스피커;
    주변 기기와 통신을 수행하는 통신부; 및
    상기 제1 및 제2 음향 신호를 수신한 상기 주변 기기로부터 상기 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보를 수신하고, 상기 수신된 정보에 기초하여 상기 전자 장치를 기준으로 상기 주변 기기의 이격 거리 및 방향을 판단하는 프로세서;를 포함하는 전자 장치.
  2. 제1항에 있어서,
    상기 주변 기기에 대응되는 기 설정된 타겟 위치에 대한 정보를 저장하는 저장부;를 더 포함하고,
    상기 프로세서는,
    상기 이격 거리 및 방향에 기초하여 상기 주변 기기가 상기 타겟 위치에 위치하는지 여부를 판단하고, 상기 주변 기기가 상기 타겟 위치에 위치하지 않는 경우 상기 주변 기기를 상기 타겟 위치에 배치시키기 위한 상기 주변 기기의 이동 정보를 제공하는, 전자 장치.
  3. 제1항에 있어서,
    상기 수신된 정보는,
    상기 주변 기기에 구비된 마이크를 통해 상기 제1 음향 신호 및 상기 제1 음향 신호와 상이한 상기 제2 음향 신호가 순차적으로 수신되는 상태를 기록한 정보인, 전자 장치.
  4. 제1항에 있어서,
    상기 수신된 정보는,
    상기 주변 기기에 구비된 마이크를 통해 상기 제1 음향 신호 및 상기 제1 음향 신호와 상이한 상기 제2 음향 신호가 순차적으로 수신된 시간 정보를 포함하는 정보인, 전자 장치.
  5. 제1항에 있어서,
    상기 프로세서는,
    상기 주변 기기로부터 기준 신호가 수신되면, 상기 제1 및 제2 음향 신호를 동시에 출력하는, 전자 장치.
  6. 제5항에 있어서,
    상기 프로세서는,
    상기 수신된 정보에서 추출된 상기 주변 기기에서 상기 제1 및 제2 음향 신호를 각각 수신한 제1 및 제2 시간 정보 및, 상기 기준 신호가 수신된 시간 및 상기 제1 및 제2 음향 신호가 출력된 시간 차에 대한 제3 시간 정보에 기초하여 상기 이격 거리 및 방향을 판단하는, 전자 장치.
  7. 제6항에 있어서,
    상기 제1 및 제2 스피커는 각각 상기 전자 장치의 우측 및 좌측에 구비되고,
    상기 프로세서는,
    상기 제1 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 우측 이격 거리를 산출하고, 상기 제2 및 제3 시간 정보의 시간 차에 음향 신호의 속도 값을 곱하여 좌측 이격 거리를 산출하며, 상기 산출된 우측 및 좌측 이격 거리 및 상기 제1 및 제2 스피커 간 거리에 기초하여 상기 이격 거리 및 방향을 판단하는, 전자 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    기 설정된 이벤트에 따라 상기 제1 및 제2 음향 신호를 동시에 출력하고, 상기 수신된 정보에서 추출된 상기 주변 기기에 상기 제1 및 제2 음향 신호가 각각 수신된 제1 및 제2 시간 정보, 상기 이벤트가 발생된 제4 시간 정보에 기초하여 상기 이격 거리 및 방향을 판단하는, 전자 장치.
  9. 제2항에 있어서,
    상기 이동 정보는,
    상기 전자 장치를 기준으로 하는 상기 주변 기기의 상대적 위치에 대한 정보인, 전자 장치.
  10. 제9항에 있어서,
    디스플레이부;를 더 포함하고,
    상기 프로세서는,
    상기 상대적 위치를 나타내는 UI 화면을 상기 디스플레이부를 통해 디스플레이하는, 전자 장치.
  11. 제10항에 있어서,
    상기 프로세서는,
    상기 주변 기기가 상기 타겟 위치에 위치하는지 여부를 판단하고, 상기 주변 기기가 상기 타겟 위치에 위치하지 않는 경우 상기 주변 기기를 상기 타겟 위치에 배치시키기 위한 상기 주변 기기의 이동 정보를 표시하는 UI 화면을 상기 디스플레이부를 통해 디스플레이하는, 전자 장치.
  12. 제2항에 있어서,
    상기 주변 기기는 제1 및 제2 외부 스피커를 포함하고,
    상기 프로세서는,
    상기 제1 및 제2 외부 스피커로부터 수신된, 상기 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보에 기초하여 상기 제1 외부 스피커에 대응되는 타겟 위치로부터 상기 제1 외부 스피커보다 상기 제2 외부 스피커가 더 근접한 거리에 위치하는 것으로 판단되면, 상기 제2 외부 스피커를 상기 제1 외부 스피커에 대응되는 타겟 위치에 배치시키기 위한 상기 제2 외부 스피커의 이동 정보를 제공하며, 상기 제2 외부 스피커가 상기 제1 외부 스피커에 대응되는 타겟 위치에 배치되면, 상기 제2 외부 스피커를 상기 제1 외부 스피커로 동작하도록 하는 제어 신호를 상기 제2 외부 스피커로 전송하는, 전자 장치.
  13. 제2항에 있어서,
    상기 프로세서는,
    상기 주변 기기가 상기 타겟 위치에 위치하는 경우 상기 주변 기기가 상기 타겟 위치에 배치되었음을 알리는 정보를 제공하는, 전자 장치.
  14. 제1 및 제2 스피커를 구비한 전자 장치의 제어 방법에 있어서,
    상기 제1 및 제2 스피커를 통해 제1 및 제2 음향 신호를 출력하는 단계;
    상기 제1 및 제2 음향 신호를 수신한 주변 기기로부터 상기 제1 및 제2 음향 신호가 각각 수신된 시간과 관련된 정보를 수신하는 단계;
    상기 수신된 정보에 기초하여 상기 전자 장치를 기준으로 상기 주변 기기의 이격 거리 및 방향을 판단하는 단계;를 포함하는 제어 방법.
  15. 복수의 스피커를 구비하는 전자 장치와 통신하는 주변 기기에 있어서,
    음향 수신부;
    상기 전자 장치와 통신을 수행하는 통신부; 및
    상기 전자 장치에 구비된 복수의 스피커 각각으로부터 출력되는 상이한 제1 및 제2 음향 신호가 상기 음향 수신부를 통해 순차적으로 수신되면, 상기 수신된 음향 신호를 기록한 정보로부터 상기 제1 및 제2 음향 신호가 각각 수신된 제1 및 제2 시간 정보를 획득하고, 상기 제1 및 제2 시간 정보에 기초하여 상기 전자 장치를 기준으로 상기 주변 기기의 이격 거리 및 방향을 판단하는 프로세서;를 포함하는 주변 기기.
PCT/KR2016/006119 2015-06-09 2016-06-09 전자 장치, 주변 기기 및 그 제어 방법 Ceased WO2016200171A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/560,342 US10349171B2 (en) 2015-06-09 2016-06-09 Electronic device, peripheral devices and control method therefor
CN201680034058.5A CN107873136B (zh) 2015-06-09 2016-06-09 电子设备、外围设备及其控制方法
EP16807811.1A EP3258709B1 (en) 2015-06-09 2016-06-09 Electronic device, peripheral devices and control method therefor

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
KR20150081195 2015-06-09
KR10-2015-0081195 2015-06-09
KR20150146650 2015-10-21
KR10-2015-0146650 2015-10-21
KR10-2016-0069650 2016-06-03
KR1020160069650A KR102444075B1 (ko) 2015-06-09 2016-06-03 전자 장치, 주변 기기 및 그 제어 방법

Publications (1)

Publication Number Publication Date
WO2016200171A1 true WO2016200171A1 (ko) 2016-12-15

Family

ID=57504565

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/006119 Ceased WO2016200171A1 (ko) 2015-06-09 2016-06-09 전자 장치, 주변 기기 및 그 제어 방법

Country Status (1)

Country Link
WO (1) WO2016200171A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3401766A1 (en) * 2017-05-09 2018-11-14 Funai Electric Co., Ltd. Display device for displaying a cursor
CN115802517A (zh) * 2022-12-06 2023-03-14 珠海格力电器股份有限公司 间距测算方法及测距系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3370433B2 (ja) * 1994-05-13 2003-01-27 株式会社竹中工務店 音像定位システム
KR100444025B1 (ko) * 1996-04-24 2004-12-13 하만인터내셔날인더스트리스인코포레이티드 자동밸런싱및보정을하는6축서라운드음향프로세서
JP2007060253A (ja) * 2005-08-24 2007-03-08 Sharp Corp スピーカ配置の判定システム
JP2008035251A (ja) * 2006-07-28 2008-02-14 Yamaha Corp オーディオシステム
KR101121682B1 (ko) * 2003-12-10 2012-04-12 소니 주식회사 멀티-스피커 오디오 시스템 및 자동 제어방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3370433B2 (ja) * 1994-05-13 2003-01-27 株式会社竹中工務店 音像定位システム
KR100444025B1 (ko) * 1996-04-24 2004-12-13 하만인터내셔날인더스트리스인코포레이티드 자동밸런싱및보정을하는6축서라운드음향프로세서
KR101121682B1 (ko) * 2003-12-10 2012-04-12 소니 주식회사 멀티-스피커 오디오 시스템 및 자동 제어방법
JP2007060253A (ja) * 2005-08-24 2007-03-08 Sharp Corp スピーカ配置の判定システム
JP2008035251A (ja) * 2006-07-28 2008-02-14 Yamaha Corp オーディオシステム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3258709A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3401766A1 (en) * 2017-05-09 2018-11-14 Funai Electric Co., Ltd. Display device for displaying a cursor
CN115802517A (zh) * 2022-12-06 2023-03-14 珠海格力电器股份有限公司 间距测算方法及测距系统

Similar Documents

Publication Publication Date Title
WO2016080733A1 (en) Electronic device for identifying peripheral apparatus and method thereof
WO2017003222A1 (en) Notification apparatus and object position notification method thereof
WO2014092469A1 (en) Content playing apparatus, method for providing ui of content playing apparatus, network server, and method for controlling by network server
WO2017048076A1 (en) Display apparatus and method for controlling display of display apparatus
WO2017131335A1 (ko) 사용자 단말 장치 및 그 제어 방법
WO2017105021A1 (en) Display apparatus and method for controlling display apparatus
WO2016060371A1 (en) Terminal for internet of things and operation method of the same
WO2012020864A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2017159941A1 (en) Display device and method of operating the same
WO2017018733A1 (en) Display apparatus and method for controlling a screen of display apparatus
WO2017099331A1 (ko) 전자 장치 및 전자 장치의 사용자 인터페이스 제공 방법
WO2015194693A1 (ko) 영상 표시 기기 및 그의 동작 방법
WO2015182844A1 (ko) 디스플레이 장치, 사용자 단말 장치, 서버 및 그 제어 방법
WO2017052162A1 (en) Electronic apparatus, audio device, and method that is performable by the electronic apparatus to set network of the audio device
WO2021029447A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2017119708A1 (en) Image display apparatus and method of operating the same
WO2017069434A1 (en) Display apparatus and method for controlling display apparatus
WO2019156408A1 (ko) 전자 장치 및 그 동작 방법
WO2019112308A1 (en) Electronic device, user terminal apparatus, and control method thereof
WO2015093640A1 (ko) 사용자 단말 장치 및 그의 인터랙션 서비스 제공 방법
WO2018021813A1 (en) Image display apparatus
WO2019013448A1 (en) OPTICAL CONNECTOR AND METHOD FOR CONTROLLING DISPLAY APPARATUS
WO2020080675A1 (en) Remote control apparatus and control method thereof
WO2021132868A1 (ko) 디스플레이 장치 및 그 제어 방법
WO2019194423A1 (en) Electronic apparatus and operating method thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16807811

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2016807811

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 15560342

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE