KR20170078106A - 사용자 단말 장치 및 그 제어 방법 - Google Patents

사용자 단말 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20170078106A
KR20170078106A KR1020150188274A KR20150188274A KR20170078106A KR 20170078106 A KR20170078106 A KR 20170078106A KR 1020150188274 A KR1020150188274 A KR 1020150188274A KR 20150188274 A KR20150188274 A KR 20150188274A KR 20170078106 A KR20170078106 A KR 20170078106A
Authority
KR
South Korea
Prior art keywords
object list
list
notification
specific condition
device corresponding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020150188274A
Other languages
English (en)
Other versions
KR102254699B1 (ko
Inventor
박은찬
정아름
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150188274A priority Critical patent/KR102254699B1/ko
Priority to US15/388,493 priority patent/US10809902B2/en
Priority to PCT/KR2016/015515 priority patent/WO2017116185A2/en
Priority to CN201680076873.8A priority patent/CN108431755B/zh
Priority to EP16882137.9A priority patent/EP3353636B1/en
Publication of KR20170078106A publication Critical patent/KR20170078106A/ko
Priority to US17/015,476 priority patent/US11487417B2/en
Application granted granted Critical
Publication of KR102254699B1 publication Critical patent/KR102254699B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L67/16—
    • H04L67/36—
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)
  • Alarm Systems (AREA)
  • Telephone Function (AREA)

Abstract

IoT(Interest of Things) 환경 기반의 사용자 단말 장치가 개시된다. 사용자 단말 장치는, IoT 환경을 구성하는 복수의 디바이스와 통신을 수행하기 위한 통신부, 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이하는 디스플레이부 및, 유저 인터페이스를 통해 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어하는 프로세서를 포함한다.

Description

사용자 단말 장치 및 그 제어 방법 { USER TERMINAL APPARATUS AND CONTROL METHOD THEREOF }
본 발명은 사용자 단말 장치 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 복수의 디바이스를 제어할 수 있는 사용자 단말 장치 및 그 제어 방법에 관한 것이다.
최근, 정보통신 기술의 발달에 따라, 사용자가 이용할 수 있는 다양한 IoT 지원 기기(Internet of Things Gadget)들이 보편화될 것으로 기대되고 있다. 따라서, IoT 환경에서는 다양한 기기들의 연결 기술이 보다 중요해질 것으로 예상되고 있다.
특히, IoT 기술은 가정 내에서 다양한 가전 기기를 제어하기 위한 목적으로도 활용성이 높다. 사용자는 가정 내 IoT 환경에서 TV, 세탁기, 에어컨 등 다양한 가전 기기를 유무선 네트워크로 연결하여, 정보를 공유하고 이들 가전 기기를 다양하계 연계하여 제어할 수 있다.
한편, 이러한 IoT 환경에서 다양한 디바이스의 여러 가지 기능을 제어하는 사용자 인터페이스 환경을 제공하기 위한 사용자 단말 장치에 대한 연구도 활발히 이루어지고 있다. 그러나, 기존의 IoT 환경에서 사용자 단말 장치를 통해 복수의 디바이스를 연계시키는 방법은, 사용자 단말 장치를 통해 표시되는 디바이스가 무엇인지 직관적으로 사용자가 알기 어렵고, 그 상호간의 연결의 설정이 어려우며, 그 연결 관계 또한 쉽게 알 수가 없어, 복수의 디바이스를 연계 시키는 과정이 복잡하다는 문제가 있었다. 또한, 복수의 디바이스를 연계하더라도, 연계됨에 따른 각 디바이스의 기능과 동작을 설정하는 것 또한 일반 사용자의 입장에서는 어려움이 있었다.
이에 따라, 좀 더 직관적으로 복수의 디바이스를 연계시킬 수 있는 방안에 대한 필요성이 대두되고 있다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 좀 더 직관적으로 복수의 디바이스를 연계시킬 수 있는 사용자 인터페이스를 제공하는 사용자 단말 장치 및 그 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 IoT(Interest of Things) 환경 기반의 사용자 단말 장치는, 상기 IoT 환경을 구성하는 복수의 디바이스와 통신을 수행하기 위한 통신부, 상기 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 상기 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이하는 디스플레이부 및, 상기 유저 인터페이스를 통해 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어하는 프로세서를 포함한다.
또한, 상기 프로세서는, 상기 특정 조건이 만족됨에 따른 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 설정하는 제어 신호를 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하고, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 특정 조건이 만족됨에 따른 신호를 수신하면 상기 알림을 제공하도록 설정하는 제어 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 제어할 수 있다.
또한, 상기 프로세서는, 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트가 함께 디스플레이된 상태에서 상기 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI(Graphic User Interface)를 디스플레이하도록 제어할 수 있다.
또한, 상기 GUI는, 상기 선택된 오브젝트들을 서로 연결하는 선분 형태의 도형일 수 있다.
또한, 상기 프로세서는, 상기 제1 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로부터 상기 제2 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로의 터치 앤 드래그가 수행되면, 상기 1 오브젝트 리스트에 포함된 오브젝트 및 상기 제2 오브젝트 리스트에 포함된 오브젝트에 각각 대응되는 디바이스들을 선택할 수 있다.
또한, 상기 프로세서는, 상기 조건을 설정하기 위한 메뉴를 상기 제1 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하도록 제어할 수 있다.
또한, 상기 프로세서는, 상기 알림을 제공하기 위한 동작을 설정하기 위한 메뉴를 상기 제2 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하도록 제어할 수 있다.
또한, 상기 프로세서는, 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스 및 상기 제2 오브젝트 리스트에서 상기 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 선택된 디바이스의 연결 정보를 리스트 형식으로 저장할 수 있다.
또한, 상기 프로세서는, 상기 제2 오브젝트 리스트에서 오브젝트가 추가적으로 선택되면, 추가적으로 선택된 오브젝트에 대응되는 타 디바이스가 상기 알림을 추가적으로 제공하는 디바이스로 설정되도록 상기 타 디바이스를 제어할 수 있다.
또한, 상기 프로세서는, 상기 제1 오브젝트 리스트에 포함된 복수의 오브젝트에 대응되는 디바이스에 대하여 우선 순위를 설정하고, 우선 순위가 높은 순서대로 상기 복수의 오브젝트에 대응되는 디바이스에 대한 정보를 디스플레이할 수 있다.
한편, 본 발명의 일 실시 예에 따른 IoT(Interest of Things) 환경 기반의 사용자 단말 장치의 제어 방법은, 상기 IoT 환경을 구성하는 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 상기 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이하는 단계, 상기 유저 인터페이스를 통해 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트를 선택하는 단계 및, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어하는 단계를 포함한다.
또한, 상기 제어하는 단계는, 상기 특정 조건이 만족됨에 따른 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 설정하는 제어 신호를 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하고, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 특정 조건이 만족됨에 따른 신호를 수신하면 상기 알림을 제공하도록 설정하는 제어 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 제어할 수 있다.
또한, 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트가 함께 디스플레이된 상태에서 상기 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI(Graphic User Interface)를 디스플레이하는 단계를 더 포함할 수 있다.
또한, 상기 GUI는, 상기 선택된 오브젝트들을 서로 연결하는 선분 형태의 도형일 수 있다.
또한, 상기 선택하는 단계는, 상기 제1 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로부터 상기 제2 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로의 터치 앤 드래그가 수행되면, 상기 제1 오브젝트 리스트에 포함된 오브젝트 및 상기 제2 오브젝트 리스트에 포함된 오브젝트에 각각 대응되는 디바이스를 선택할 수 있다.
또한, 상기 조건을 설정하기 위한 메뉴를 상기 제1 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하는 단계를 더 포함할 수 있다.
또한, 상기 알림을 제공하기 위한 동작을 설정하기 위한 메뉴를 상기 제2 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하는 단계를 더 포함할 수 있다.
또한, 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스 및 상기 제2 오브젝트 리스트에서 상기 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 선택된 디바이스의 연결 정보를 리스트 형식으로 저장하는 단계를 더 포함할 수 있다.
또한, 상기 제어하는 단계는, 상기 제2 오브젝트 리스트에서 오브젝트가 추가적으로 선택되면, 추가적으로 선택된 오브젝트에 대응되는 타 디바이스가 상기 알림을 추가적으로 제공하는 디바이스로 설정되도록 상기 타 디바이스를 제어할 수 있다.
또한, 상기 디스플레이하는 단계는, 상기 제1 오브젝트 리스트에 포함된 복수의 오브젝트에 대응되는 디바이스에 대하여 우선 순위를 설정하고, 우선 순위가 높은 순서대로 상기 복수의 오브젝트에 대응되는 디바이스에 대한 정보를 디스플레이할 수 있다.
본 발명의 다양한 실시 예에 따르면, IoT 환경에서 사용자 단말 장치를 통해 좀 더 직관적으로 복수의 디바이스를 연계시킬 수 있으므로, 사용자의 편의성이 증대될 수 있다.
도 1은 본 발명의 일 실시 예에 따른, IoT 환경을 구성하는 복수의 디바이스와 이를 제어하기 위한 사용자 단말 장치를 나타낸 도면,
도 2는 본 발명의 일 실시 예에 따른, 사용자 단말 장치의 구성을 간략히 도시한 블록도,
도 3A 및 도 3B는 본 발명의 일 실시 예에 따른, 복수의 디바이스를 제어하기 위한 유저 인터페이스 화면을 나타낸 도면,
도 4A 및 도 4B는 본 발명의 일 실시 예에 따른, 연결 관계를 설정하기 위한 디바이스를 선택하는 방법을 설명하기 위한 도면,
도 5 내지 도 7은 본 발명의 다양한 실시 예에 따른, 연결 관계가 설정된 유저 인터페이스 화면을 나타낸 도면,
도 8 내지 도 10은 본 발명의 다양한 실시 예에 따른, 조건을 설정하기 위한 메뉴를 설명하기 위한 도면,
도 11은 본 발명의 일 실시 예에 따른, 연결 관계가 설정된 디바이스에 대한 정보를 저장하는 리스트를 나타낸 도면,
도 12는 본 발명의 다른 실시 예에 따른, 사용자 단말 장치의 구성을 상세히 도시한 블록도,
도 13은 본 발명의 일 실시 예에 따른, 저장부의 구성을 상세히 도시한 블록도,
도 14는 본 발명의 일 실시 예에 따른, 디바이스 간 관계를 수립하는 방법을 설명하기 위한 흐름도,
도 15는 본 발명의 일 실시 예에 따른, 사용자 단말 장치의 제어 방법을 설명하기 위한 흐름도이다.
본 발명에 대하여 구체적으로 설명하기에 앞서, 본 명세서 및 도면의 기재 방법에 대하여 설명한다.
먼저, 본 명세서 및 청구범위에서 사용되는 용어는 본 발명의 다양한 실시 예들에서의 기능을 고려하여 일반적인 용어들을 선택하였다. 하지만, 이러한 용어들은 당 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어일 수 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다.
또한, 본 명세서에 첨부된 각 도면에 기재된 동일한 참조 번호 또는 부호는 실질적으로 동일한 기능을 수행하는 부품 또는 구성요소를 나타낸다. 설명 및 이해의 편의를 위해서 서로 다른 실시 예들에서도 동일한 참조번호 또는 부호를 사용하여 설명하도록 한다. 즉, 복수의 도면에서 동일한 참조 번호를 가지는 구성 요소를 모두 도시하고 있다고 하더라도, 복수의 도면들이 하나의 실시 예를 의미하는 것은 아니다.
또한, 본 명세서 및 청구범위에서는 구성요소들 간의 구별을 위하여 “제1”, “제2” 등과 같이 서수를 포함하는 용어가 사용될 수 있다. 이러한 서수는 동일 또는 유사한 구성 요소들을 서로 구별하기 위하여 사용하는 것이며, 이러한 서수 사용으로 인하여 용어의 의미가 한정 해석되어서는 안될 것이다. 일 예로, 이러한 서수와 결합된 구성 요소는 그 숫자에 의해 사용 순서나 배치 순서 등이 제한 해석되어서는 안된다. 필요에 따라서는, 각 서수들은 서로 교체되어 사용될 수도 있다.
본 명세서에서 단수의 표현은 문맥상 명백하게 다름을 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, “포함하다” 또는 “구성하다” 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 실시 예에서 “모듈”, “유닛”, “부(Part)” 등과 같은 용어는 적어도 하나의 기능이나 동작을 수행하는 구성 요소를 지칭하기 위한 용어이며, 이러한 구성 요소는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어 및 소프트웨어의 결합으로 구현될 수도 있다. 또한, 복수의 “모듈”, “유닛”, “부(part)” 등은 각각이 개별적인 특정한 하드웨어로 구현될 필요가 있는 경우를 제외하고는, 적어도 하나의 모듈이나 칩으로 일체화되어 적어도 하나의 프로세서(미도시)로 구현될 수 있다.
또한, 본 발명의 실시 예에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적인 연결뿐 아니라, 다른 매체를 통한 간접적인 연결의 경우도 포함한다. 또한 어떤 부분이 어떤 구성 요소를 포함한다는 의미는, 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있다는 것을 의미한다.
이하, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시 예에 따른, IoT 환경을 구성하는 복수의 디바이스와 이를 제어하기 위한 사용자 단말 장치를 나타낸 도면이다.
도 1에 따르면, 본 발명의 일 실시 예에 따른, IoT 환경은, 복수의 디바이스(11 ~ 17) 및 이를 제어하기 위한 사용자 단말 장치(100)를 포함한다. 또한, 복수의 디바이스(11 ~ 17) 및 사용자 단말 장치(100)를 중계하기 위한 액세스 포인트(Access Point, 이하 AP)(200)를 더 포함할 수 있다. 사용자 단말 장치(100)는 복수의 디바이스(11 ~ 17)와 적외선 방식, RF 방식, 근거리 자기장 통신(Near Field Communication; NFC) 방식, 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 다양한 통신 규격에 따라 데이터를 송신 또는 수신할 수 있다. 또는, 인터넷망을 포함하는 유/무선 네트워크와 연결되어 데이터를 송수신할 수 있다.
또한, 본 발명에 따른 사용자 단말 장치(100)는 복수의 디바이스(11 ~ 17)를 제어할 수 있고, 상술한 다양한 통신 방법에 의해 복수의 디바이스(11 ~ 17)로 각 디바이스를 제어하기 위한 제어 신호를 전송할 수 있다. 구체적으로, 사용자 단말 장치(100)는 복수의 디바이스(11 ~ 17)에 대하여 직접 제어 신호를 전송할 수도 있고, 중계기(200)를 통해 복수의 디바이스(11 ~ 17)에 제어 신호를 전송할 수도 있다. 또한, 사용자 단말 장치(100)는 복수의 디바이스 중 일 디바이스에 대하여 특정 조건이 만족되면 타 디바이스를 제어할 수 있는 제어 신호를 전송하도록 하는 제어 신호를 전송할 수도 있다.
한편, 도 1에서는, 복수의 디바이스(11 ~ 17)에 대한 예시로, 전자레인지 또는 가스레인지와 같은 조리기(11), 도어락(12), 세탁기(13), 욕조(14), TV(15), 스마트 폰(16), 에어컨(17)등을 포함한다.
또한, 사용자 단말 장치(100)는 복수의 디바이스(11 ~ 17)를 제어할 수 있는 기능 또는 어플리케이션이 설치된 태블릿(tablet) PC, 휴대폰, 스마트폰(smart phone), PDA(Personal Digital Assistants), MP3 플레이어, 전자 액자, PMP(Portable Multimedia Player) 등의 휴대 단말기 및 스마트 안경 등의 각종 웨어러블 기기와 같이 다양한 유형의 장치를 포함할 수 있다.
도 2는 본 발명의 일 실시 예에 따른, 사용자 단말 장치의 구성을 간략히 도시한 블록도이다.
도 2에 따르면, 사용자 단말 장치(100)는 통신부(110), 디스플레이부(120) 및 프로세서(130)를 포함한다.
통신부(110)는 복수의 디바이스와 통신을 수행하기 위한 구성이다. 통신부(110)는 복수의 디바이스와의 근거리 무선 통신을 수행할 수 있다. 이를 위해, 통신부(110)는 RF(Radio Frequency), 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, Infrared Data Association), UWB(Ultra Wideband), 지그비(Zigbee), DLNA(Digital Living Network Alliance) 등의 다양한 통신 규격에 따라 복수의 디바이스와 네트워크로 연결될 수 있다.
이때, 통신부(110)는 복수의 디바이스와 직접 통신을 수행할 수도 있으나, 액세스 포인트(10)와 같은 중계기를 통하여 복수의 디바이스와 통신을 수행할 수도 있다.
또한, 통신부(110)는 사용자 단말 장치(100)를 포함하는 인터넷 망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 포함한다. 예를 들어, 통신부(110)는 유선 네트워크와의 접속을 위해 이더넷(Ethernet) 단자 등을 포함할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Micro Access), HSDPA(High Speed Downlink Packet Access) 통신 등이 이용될 수 있다.
디스플레이부(120)는 복수의 디바이스를 제어하기 위한 유저 인터페이스(User Interface)를 디스플레이하는 구성이다. 디스플레이부(120)는 LCD(Liquid Crystal Display Panel), OLED(Organic Light Emitting Diodes), LCoS(Liquid Crystal on Silicon), DLP(Digital Light Processing) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 또한, 디스플레이부(120) 내에는 a-si TFT, LTPS(Low Temperature Poly Silicon) TFT, OTFT(Organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다.
특히, 디스플레이부(120)는 사용자의 터치에 의한 사용자 명령의 입력이 가능한 터치 디스플레이로 구현될 수 있다. 구체적으로, 사용자는 손가락 또는 전자펜을 이용하여 디스플레이부(120)에 표시된 다양한 컨텐츠를 터치함으로써, 원하는 정보를 입력할 수 있다. 즉, 디스플레이부(120)는 컨텐츠를 디스플레이하면서 동시에 터치 패드의 역할을 하는 터치 스크린(Touch Screen)으로 구현될 수 있다. 여기서, 터치가 이루어지는 디스플레이부(120)의 전면에는 디스플레이부(120)를 보호하기 위해 강화 처리된 유리 기판 및 보호 필름 등이 제공될 수 있다.
한편, 디스플레이부(120)를 통해 디스플레이되는 유저 인터페이스는, 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이할 수 있다. 이에 대한 구체적인 내용은 도 3A 및 도 3B를 참조하여 설명하도록 한다.
도 3A는 본 발명의 일 실시 예에 따른, 복수의 디바이스를 제어하기 위한 유저 인터페이스 화면을 나타낸 것이다.
도 3A를 참조하면, 디스플레이부(120)에 디스플레이되는 유저 인터페이스 화면은 복수의 디바이스를 제어하기 위한 어플리케이션 또는 프로그램으로부터 제공될 수 있다. 유저 인터페이스 화면은, 특정 조건이 설정될 조건설정 대상 디바이스를 선택할 수 있는 제1 오브젝트 리스트(31) 및 특정 조건이 만족됨에 따른 알림을 제공할 수 있는 알림용 디바이스를 선택할 수 있는 제2 오브젝트 리스트(32)를 포함할 수 있다.
제1 오브젝트 리스트(31)에는 도시된 바와 같이, 가스레인지 또는 전자레인지와 같은 조리기를 나타내는 오브젝트(31-1), 세탁기를 나타내는 오브젝트(31-2), 욕조를 나타내는 오브젝트(31-3) 및 에어컨을 나타내는 오브젝트(31-4) 등이 포함될 수 있다.
제2 오브젝트 리스트(32)에는 도시된 바와 같이, 스피커를 나타내는 오브젝트(32-1), 도어락을 나타내는 오브젝트(32-2), TV를 나타내는 오브젝트(32-3) 및 스마트 폰을 나타내는 오브젝트(32-4) 등이 포함될 수 있다.
사용자는 조리기를 나타내는 오브젝트(31-1)를 선택하여 조리기를 조건 설정 디바이스로 선택할 수 있다. 이와 마찬가지로, 사용자는 각 오브젝트(31-2 ~ 31-4)를 선택하여 각 오브젝트(31-2 ~ 31-4)에 대응되는 디바이스를 조건 설정 디바이스로 선택할 수 있다.
또한, 사용자는 스피커를 나타내는 오브젝트(32-1)를 선택하여 스피커를 알림용 디바이스로 선택할 수 있다. 이와 마찬가지로, 사용자는 각 오브젝트(32-2 ~ 32-4)를 선택하여 각 오브젝트(32-2 ~ 32-4)에 대응되는 디바이스를 알림용 디바이스로 선택할 수 있다.
한편, 사용자가 제1 오브젝트 리스트(31) 및 제2 오브젝트 리스트(32)에서 각각 오브젝트를 선택한 경우, 제1 오브젝트 리스트(31)에서 선택된 오브젝트에 대응되는 디바이스가 특정 조건을 만족하면, 제2 오브젝트 리스트(32)에서 선택된 오브젝트에 대응되는 디바이스가 알림을 출력할 수 있다.
여기서, 특정 조건이란 알림용 디바이스가 알림을 제공하도록 하기 위한 조건설정 대상 디바이스 또는 사용자 단말 장치(100)의 상태 조건을 의미한다. 예를 들어, 사용자가 조리기를 나타내는 오브젝트(31-1)를 선택하는 경우, 조리기에 설정되는 특정 조건은 조리기가 켜진 후로부터 기 설정된 시간의 경과가 될 수 있다. 조리기가 켜진 후로부터 30분이 경과하면 조리기와 연계된 알림용 디바이스에서 알림을 제공하도록 설정된 경우라면, 조리기가 켜진 후로부터 30분이 경과했을 때, 조리기와 연계된 알림용 디바이스가 해당 알림용 디바이스의 특성에 맞는 알림을 제공하여 사용자가 주의를 기울이게 할 수 있다.
이러한 특정 조건은, 조건설정 대상 디바이스 및 알림용 디바이스에 자체적으로 설정되어 있을 수도 있으나, 사용자가 사용자 단말 장치(100)를 통해 직접 설정하거나 변경할 수도 있다.
또한, 특정 조건은 조건설정 대상 디바이스와 알림용 디바이스를 포함하는 타 디바이스와의 연계동작이 동작이 될 수도 있다. 예를 들어, 조리기와 현관문에 설치된 도어락이 연계되어 있는 경우, 조리기가 켜져 있는 상태에서 현관문의 안쪽에서 도어락을 해제하면, 도어락에서 경고음과 같은 알림음을 출력하도록 하여 사용자가 조리기가 켜져 있음을 인지하도록 할 수 있다. 이때, 알림음은 “조리기가 켜져 있습니다”와 같이 음성 경고의 형식으로 출력될 수도 있다. 따라서, 사용자가 조리기가 켜진 상태로 외출하여 일어날 수 있는 화재와 같은 사고를 예방할 수 있다.
한편, 디바이스에 설정되는 특정 조건은 각 디바이스의 특성마다 다를 수 있다. 예를 들어, 세탁기에 설정되는 특정 조건은 세탁 완료, 세탁이 완료된 후 세탁물이 수거되지 않은 상태가 기 설정된 시간 이상 경과한 상태 또는 세탁물이 수거되지 않은 상태에서 세탁기와 연계된 타 디바이스의 특정 동작 등이 될 수 있다. 또한, 욕조에 설정되는 특정 조건은 욕조 안의 물의 온도가 기 설정된 온도에 이르른 상태, 욕조 안의 물이 기 설정된 높이로 차오른 상태 등이 될 수 있다.
한편, 이러한 조건이 설정될 수 있는 디바이스는 사용자 단말 장치(100)에 의해 자동적으로 검색되어 제1 오브젝트 리스트(31) 내에 자동적으로 리스트업(list up)될 수 있다. 또한, 음향이나 화면 등 다양한 방식으로 사용자에게 알림을 제공할 수 있는 디바이스 또한 자동적으로 검색되어 제2 오브젝트 리스트(32) 내에 자동적으로 리스트업될 수 있다. 그러나, 각 조건설정 대상 디바이스 및 알림용 디바이스는 사용자에 의해 수동적으로 추가될 수도 있다.
이때, 제1 오브젝트 리스트(31) 내에 리스트업(list up)되는 디바이스는 사용자의 주의를 특히 요하는 디바이스가 우선적으로 디스플레이될 수 있다. 예를 들어, 불을 이용하는 조리기는 부주의한 경우, 화재로 이어질 수 있으므로 사용자가 고도의 주의를 요하는 디바이스이다. 따라서, 이러한 위험도가 높은 조리기와 같은 디바이스는 제1 오브젝트 리스트(31) 내에 가장 상위에 디스플레이될 수 있다. 또한, 차순위로서 위험도가 덜 높은 디바이스들이 순차적으로 하위로 디스플레이될 수 있다.
한편, 도 3B를 참조하면, 제1 오브젝트 리스트(31) 및 제2 오브젝트 리스트(32)에 포함된 각 오브젝트의 내부 또는 외부의 일 측에는 조건설정 대상 디바이스를 나타내는 오브젝트와 알림용 디바이스를 나타내는 오브젝트를 서로 연결하기 위한 연결점(33-1 ~ 33-4, 34-1 ~ 34-4))이 추가적으로 디스플레이될 수도 있다.
제1 오브젝트 리스트(31)에 포함된 각 오브젝트에 대응되는 연결점(33-1 ~ 33-4)은 대응되는 오브젝트의 우측에, 제2 오브젝트 리스트(32)에 포함된 각 오브젝트에 대응되는 연결점(32-1 ~ 32-4)은 대응되는 오브젝트의 좌측에 디스플레이되는 것이 바람직하다.
한편, 프로세서(130)는 사용자 단말 장치(100)의 전반적인 동작을 제어하는 구성이다.
특히, 프로세서(130)는 유저 인터페이스를 통해 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어할 수 있다.
구체적으로, 프로세서(130)는 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 특정 조건이 만족됨에 따른 신호를 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 설정하는 제어 신호를 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 제어할 수 있다. 또한, 프로세서(130)는 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 특정 조건이 만족됨에 따른 신호를 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로부터 수신하면, 특정 조건이 만족됨에 따른 알림을 제공하도록 설정하는 제어 신호를 제2 오브젝트 리스트에서 선택된 오브젝트를 나타내는 디바이스로 전송하도록 제어할 수 있다.
이하, 편의상 제1 오브젝트 리스트에 포함된 오브젝트에 대응되는 디바이스를 조건설정 대상 디바이스로, 제2 오브젝트 리스트에 포함된 오브젝트에 대응되는 디바이스를 알림용 디바이스로 명명하도록 한다.
이에 따라, 제1 오브젝트 리스트에서 선택된 조건설정 대상 디바이스가 특정 조건을 만족하면, 사용자 단말 장치(100)를 통하지 않고도, 제2 오브젝트 리스트에서 선택된 알림용 디바이스에 직접 특정 조건이 만족됨에 따른 신호를 직접 전송할 수 있다. 물론, 특정 조건이 만족됨에 따른 신호는 중계기(200)를 거쳐 전송될 수도 있다.
이하, 제1 오브젝트 리스트에서 선택된 오브젝트와 제2 오브젝트 리스트에서 선택된 오브젝트를 각각 나타내는 디바이스는 서로 “관계가 수립되었다”라고 한다. 또한, 제1 오브젝트 리스트 및 제2 오브젝트 리스트에서 각각 오브젝트를 선택하는 동작은, 선택된 오브젝트를 나타내는 디바이스 간에 “관계를 수립한다”라고 한다.
한편, 프로세서(130)는 제1 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로부터 제2 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로의 터치 앤 드래그가 수행되면, 제1 오브젝트 리스트에 포함된 오브젝트 및 제2 오브젝트 리스트에 포함된 오브젝트를 각각 나타내는 디바이스를 선택할 수 있다. 이에 대한 구체적인 설명은 도 4A 및 도 4B를 참조하여 설명하도록 한다.
도 4A 및 도 4B는 본 발명의 일 실시 예에 따른, 연결 관계를 설정하기 위한 디바이스를 선택하는 방법을 설명하기 위한 도면이다.
도 4A에 도시된 바와 같이, 사용자는 제1 오브젝트 리스트(41)에 포함된 오브젝트들 중, 조리기를 나타내는 오브젝트(41-1)에 대응되는 연결점(43-1)을 터치하여, 제2 오브젝트 리스트(42)에 포함된 오브젝트들 중, 도어락을 나타내는 오브젝트(42-1)에 대응되는 연결점(44-1)으로 드래그하는 터치 앤 드래그 동작을 수행하여, 조리기와 도어락의 관계를 수립할 수 있다. 조리기와 도어락 간에 관계가 수립되면, 사용자는 조리기의 각 동작에 따라 도어락이 알림을 제공하기 위한 특정 조건을 설정할 수 있다. 예를 들어, 조리기가 켜진 상태로 동작하는 도중 도어락이 현관문 안쪽에서 해제되는 경우에는 도어락에 구비된 스피커를 통해 경고음이 출력될 수 있다. 즉, 프로세서(130)는 조리기가 켜진 상태에서 도어락이 현관문 안쪽에서 해제되는 조건이 만족되면, 그에 따른 신호를 도어락으로 전송하도록 설정하는 제어 신호를 조리기에 전송하고, 도어락이 해당 신호를 수신하면, 알림을 제공하도록 설정하는 제어 신호를 도어락에 전송하도록 제어할 수 있다.
또한, 손가락 터치를 이용하여 오브젝트를 연결하는 터치 동작은 터치 앤 드래그 외에 멀티 터치를 포함한 다양한 방법으로 수행될 수 있다. 도 4B에 도시된 바와 같이, 사용자는 두 손가락을 이용하여 제1 오브젝트 리스트(41)에 포함된 조리기를 나타내는 오브젝트(41-1)에 대응되는 연결점(43-1)과 제2 오브젝트 리스트(42)에 포함된 도어락을 나타내는 오브젝트(42-1)에 대응되는 연결점(44-1)을 터치하여 핀치(Pinch) 제스처를 수행함으로써 조리기와 도어락 간의 관계를 수립할 수 있다.
도 5 내지 도 7은 본 발명의 다양한 실시 예에 따른, 연결 관계가 설정된 사용자 인터페이스 화면을 나타낸 도면이다.
프로세서(130)는 제1 오브젝트 리스트(51) 및 제2 오브젝트 리스트(52) 각각에서 오브젝트가 선택되면, 제1 오브젝트 리스트(51) 및 제2 오브젝트 리스트(52)가 함께 디스플레이된 상태에서 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI(Graphic User Interface)를 디스플레이하도록 제어할 수 있다.
도 5는 본 발명의 일 실시 예에 따른, 디바이스간의 관계 수립을 나타내는 GUI를 도시한 것이다. 도 5를 참조하면, GUI(55)는 선택된 오브젝트(51-1, 52-1)들을 서로 연결하는 선분 형태의 도형으로 나타날 수 있다. 선분 형태의 도형은 도 5에 도시된 바와 같이, 화살표 모양의 형태로 도시될 수 있다. 또한, 연결이 이루어진 오브젝트에 대응되는 연결점(53-1, 54-1)은 연결이 이루어지지 않은 오브젝트에 대응되는 다른 연결점들과 구분되게 디스플레이될 수 있다.
한편, 도 6은 본 발명의 일 실시 예에 따른, 디바이스간의 관계 수립을 나타내는 GUI를 도시한 것이다. 조건설정 대상 디바이스는 복수의 알림용 디바이스와 관계가 수립될 수 있다.
예를 들어, 도 6에 도시된 바와 같이 제1 오브젝트 리스트(61) 내 조리기를 나타내는 오브젝트(61-1)에 대응되는 연결점(63-1)은 제2 오브젝트 리스트(62) 내 스피커를 나타내는 오브젝트(62-1)에 대응되는 연결점(64-1) 및 도어락을 나타내는 오브젝트(62-2)에 대응되는 연결점(64-2)와 각각 연결될 수 있다. 이때, 조리기에 설정된 특정 조건이 만족되는 경우, 스피커 및 도어락을 통해 알림음이 출력될 수 있다. 이때, 알림음은 스피커 및 도어락에서 동시에 또는 기 설정된 우선 순위대로 순차적으로 출력될 수 있다. 만약, 사용자가 도어락을 나타내는 오브젝트를 먼저 선택하여 관계를 수립한 후, 스피커를 나타내는 오브젝트를 두 번째로 선택하여 관계를 수립한 경우 도어락에서 먼저 알림음이 출력된 후에 기 설정된 시간 경과 후, 스피커에서 알림음이 출력될 수 있다.
또한, 알림용 디바이스 또한 복수의 조건설정 대상 디바이스와 관계가 수립될 수 있다. 제1 오브젝트 리스트(61) 내 조리기를 나타내는 오브젝트(61-1)에 대응되는 연결점(63-1) 및 에어컨을 나타내는 오브젝트(61-3)에 대응되는 연결점(63-3)은 모두 제2 오브젝트 리스트(62) 내 도어락을 나타내는 오브젝트(62-2)에 대응되는 연결점(64-2)과 연결될 수 있다. 이때, 조리기에 설정된 특정 조건 또는 에어컨에 설정된 특정 조건이 만족되는 경우, 도어락을 통해 알림음이 출력될 수 있다. 예를 들어, 에어컨이 동작하는 도중에 현관문의 안쪽에서 도어락이 해제되는 것을 특정 조건으로 설정한 경우라면, 프로세서(130)는 오브젝트들 간 연결에 따라 에어컨의 동작 중에 현관문의 안쪽에서 도어락이 해제되면 도어락에서 “에어컨을 끄시고 외출하세요”라는 알림음이 출력되도록 하는 제어 신호를 에어컨 및 도어락에 각각 전송할 수 있다.
이와 같이, 사용자는 제1 오브젝트 리스트(61) 내 각 디바이스를 나타내는 복수의 오브젝트와, 제2 오브젝트 리스트(62) 내 각 디바이스를 나타내는 복수의 오브젝트를 중복적으로 다양하게 연결할 수 있다.
한편, 알림용 디바이스가 시각적인 정보를 제공할 수 있는 디바이스인 경우, 알림은 시각적 형태로 제공될 수도 있다. 예를 들어, 사용자가 제1 오브젝트 리스트(61) 내 세탁기를 나타내는 오브젝트(61-2)에 대응되는 연결점(63-2)과 제2 오브젝트 리스트(62) 내 TV를 나타내는 오브젝트(62-3)에 대응되는 연결점(64-3)을 연결하여 세탁기와 TV 간에 관계를 수립하는 경우를 상정할 수 있다. 이때, 세탁기에 설정된 특정 조건이 ‘세탁 완료’인 경우, 세탁이 완료되는 때에, TV에 표시되는 화면을 통해 세탁이 완료되었음을 나타내는 정보가 제공될 수 있다. 예를 들어, 세탁이 완료되었음을 나타내는 정보는 TV에서 디스플레이되는 컨텐츠의 시청 방해를 최소화하기 위해 TV 화면의 일 측에 디스플레이되는 메시지의 형태로 제공될 수 있다.
한편, 도 7은 본 발명의 일 실시 예에 따른, 알림용 디바이스 간 신호의 릴레이 전달 방법을 설명하기 위한 도면이다.
알림용 디바이스는 특정 조건이 만족됨에 따라 수신된 신호를 타 알림용 디바이스로 릴레이 전송할 수 있다. 예를 들어, 도 7에 도시된 바와 같이, 사용자는 제1 오브젝트 리스트(71) 내 조리기를 나타내는 오브젝트(71-1)에 대응되는 연결점(73-1)과 제2 오브젝트 리스트(72) 내 헤드폰을 나타내는 오브젝트(72-2)에 대응되는 연결점(74-2)을 연결하여 조리기와 헤드폰 간의 관계를 수립할 수 있으며, 기 설정된 특정 조건에 따라 조리기가 켜진 후 20분이 경과하면, 헤드폰을 통해 알림음이 출력될 수 있다.
그러나, 이때 헤드폰의 전원이 꺼져있거나 사용자가 헤드폰을 잠시 벗어놓은 경우라면 알림음을 듣지 못하는 상황이 발생할 수 있다. 따라서, 사용자는 2차적으로 알림음을 제공할 2차 알림용 디바이스를 선택할 수 있다. 프로세서(130)는 헤드폰이 조리기 또는 중계기로부터 수신한 기 설정된 특정 조건이 만족됨에 따른 신호를 2차 알림용 디바이스로 릴레이 전달하도록 설정할 수 있으며, 2차 알림용 디바이스에서는 이에 따른 알림을 추가적으로 제공할 수 있다.
도 7을 참조하면, 조리기와 헤드폰 간에 관계가 수립된 이후 또는 조리기를 나타내는 오브젝트(71-1)가 위치한 영역으로부터 헤드폰을 나타내는 오브젝트(72-2)가 위치한 영역으로 터치 앤 드래그가 수행된 상태에서, 헤드폰을 나타내는 오브젝트(72-2)가 위치한 영역으로부터 스피커를 나타내는 오브젝트(72-1)가 위치한 영역으로 터치 앤 드래그가 수행되면, 헤드폰으로부터 스피커로의 관계가 추가적으로 수립될 수 있다. 프로세서(130)는, 헤드폰과 스피커 간에 릴레이 관계가 수립되었음을 나타내는 GUI(75-2)를 추가적으로 디스플레이하도록 제어할 수 있다. 이러한 릴레이 관계 설정에 따라, 헤드폰은 수신한 신호를 스피커로 릴레이 전달하게 된다.
또한, 다른 실시 예로서, 사용자는 제1 오브젝트 리스트(71) 내 욕조를 나타내는 오브젝트(71-2)에 대응되는 연결점(73-2)과 제2 오브젝트 리스트(72) 내 TV를 나타내는 오브젝트(72-3)에 대응되는 연결점(74-3)을 연결하여 욕조와 TV 간의 관계를 수립할 수 있으며, 기 설정된 특정 조건에 따라 욕조에 물이 기 설정된 높이만큼 차면, TV를 통해 알림을 제공할 수 있다. 구체적으로, 욕조는 물이 기 설정된 높이만큼 차오르는지 여부를 무게 센서 등을 이용해 감지하고, 물이 기 설정된 높이만큼 차올랐다고 판단되면, 설정된 조건이 만족되었음을 알리는 신호를 TV로 전송할 수 있다. TV는, 설정된 조건이 만족되었음을 알리는 신호를 수신하면 시각 또는 청각에 기초한 알림 정보를 제공할 수 있다.
그러나, TV의 전원이 꺼져있는 경우 등 TV를 통해 알림이 제공될 수 없는 경우에는 타 알림 디바이스를 통해서 알림이 제공될 수 있도록 사용자는 2차적으로 알림음을 제공할 2차 알림용 디바이스를 선택할 수 있다.
프로세서(130)는 헤드폰이 욕조 또는 중계기로부터 수신한 기 설정된 특정 조건이 만족됨에 따른 신호를 2차 알림용 디바이스로 릴레이 전달하도록 설정할 수 있으며, 2차 알림용 디바이스에서는 이에 따른 알림을 추가적으로 제공할 수 있다.
도 7을 참조하면, 욕조와 TV 간에 관계가 수립된 이후 또는 욕조를 나타내는 오브젝트(71-2)가 위치한 영역으로부터 TV를 나타내는 오브젝트(72-3)가 위치한 영역으로 터치 앤 드래그가 수행된 상태에서, TV을 나타내는 오브젝트(72-3)가 위치한 영역으로부터 사용자 단말 장치(100)를 나타내는 오브젝트(72-4)가 위치한 영역으로 터치 앤 드래그가 수행되면, TV로부터 사용자 단말 장치(100)의 관계가 추가적으로 수립될 수 있다. 프로세서(130)는, TV와 사용자 단말 장치(100) 간에 릴레이 관계가 수립되었음을 나타내는 GUI(75-4)를 추가적으로 디스플레이하도록 제어할 수 있다. 이러한 릴레이 관계 설정에 따라, TV는 수신한 신호를 사용자 단말 장치(100)로 릴레이 전달하게 된다.
도 8 내지 도 10은 본 발명의 다양한 실시 예에 따른, 조건을 설정하기 위한 메뉴를 설명하기 위한 도면이다.
도 8에 도시된 바와 같이, 사용자는 유저 인터페이스 화면에서 조건설정 대상 디바이스에 대한 알림 조건을 설정할 수 있다. 알림 조건을 설정할 수 있는 메뉴는 조건설정 대상 디바이스를 선택하면 나타날 수 있다.
구체적으로, 사용자가 제1 오브젝트 리스트 내 디바이스를 나타내는 오브젝트를 터치하면, 알림 조건을 선택할 수 있는 메뉴가 오브젝트의 주위에 디스플레이되며, 디스플레이된 메뉴에서 알림 조건을 터치하여 알림용 디바이스를 나타내는 오브젝트가 위치한 영역으로 드래그하면, 알림 조건을 선택함과 동시에 해당 조건설정 대상 디바이스와 알림용 디바이스의 관계를 수립할 수 있다.
예를 들어, 도 8에 따르면, 사용자가 제1 오브젝트 리스트(81) 내 전등을 나타내는 오브젝트(81-2)를 선택하면 전등이 켜지는 조건(83-1), 전등이 꺼지는 조건(83-2) 및 전등의 수명이 다하는 조건(83-3) 중 적어도 하나를 선택할 수 있는 메뉴가 해당 오브젝트(81-2)의 우측에 디스플레이될 수 있다. 사용자는 이들 메뉴에 포함된 조건들(83-1 ~ 83-3) 중 적어도 하나를 선택하고 제2 오브젝트 리스트(82) 내 알림용 디바이스를 나타내는 오브젝트들(82-1 ~ 82-4) 중 적어도 하나가 위치하는 영역으로 연결하여, 조건설정 대상 디바이스와 알림용 디바이스 간에 관계를 수립할 수 있다. 이때, 프로세서(130)는 사용자가 메뉴에서 선택된 조건이 만족되면 관계가 수립된 알림용 디바이스를 통해 알림이 제공될 수 있도록, 선택된 조건 설정 대상 디바이스 및 알림용 디바이스에 각각 제어 신호를 전송할 수 있다.
한편, 다른 실시 예로서, 사용자가 온도계를 나타내는 오브젝트(81-1)를 선택하면, 실내 온도가 기 설정된 온도 이상일 때 또는 기 설정된 온도 이하일 때의 조건 중 적어도 하나를 선택할 수 있는 메뉴가 디스플레이될 수 있다. 이때, 사용자가 해당 메뉴에서 어느 하나의 조건을 선택하여 알림용 디바이스 중 TV를 나타내는 오브젝트(82-3)와 연결하면(터치 앤 드래그 등의 동작으로) 온도계와 TV 간에 관계가 수립될 수 있다. 이때, 프로세서(130)는 사용자가 선택한 조건에 따라 실내 온도가 기 설정된 온도 이하로 떨어지거나 기 설정된 온도 이하로 높아지면 TV를 통해 알림이 제공될 수 있도록, 온도계 및 TV에 각각 제어 신호를 전송할 수 있다.
또한, 다른 실시 예로서, 사용자가 전기 계량기를 나타내는 오브젝트(81-3)를 선택하면, 알림이 제공되기 위한 가정 내 전기 사용량을 설정할 수 있는 메뉴가 디스플레이될 수 있다. 예를 들어, 전기 사용량이 1000kw에 도달할 조건, 전기 사용량이 1500kwh에 도달할 조건, 전기 사용량이 2000kwh에 도달할 조건 중 적어도 하나를 선택할 수 있는 메뉴가 디스플레이될 수 있다. 이때, 메뉴에 디스플레이되는 전기 사용량의 수치는 사용자에 의해 다양하게 변경 가능할 수 있다. 이때, 사용자가 해당 메뉴에서 어느 하나의 조건을 선택하여 알림용 디바이스 중 하나를 나타내는 오브젝트와 연결하면 전기 계량기와 해당 알림용 디바이스 간에 관계가 수립될 수 있다. 이때, 프로세서(130)는 사용자가 선택한 조건에 따라 가정 내 전기 사용량이 기 설정된 전력량에 도달하면 관계가 수립된 알림용 디바이스를 통해 알림이 제공될 수 있도록, 전기 계량기 및 전기 계량기와 관계가 수립된 알림용 디바이스에 각각 제어 신호를 전송할 수 있다.
또한, 다른 실시 예로서, 사용자가 수도 계량기를 나타내는 오브젝트(81-4)를 선택하면, 알림이 제공되기 위한 가정 내 수도 사용량을 설정할 수 있는 메뉴가 디스플레이될 수 있다. 예를 들어, 수도 사용량이 5톤에 도달할 조건, 수도 사용량이 10톤에 도달할 조건, 수도 사용량이 15톤에 도달할 조건 중 적어도 하나를 선택할 수 있는 메뉴가 디스플레이될 수 있다. 이때, 메뉴에 디스플레이되는 수도 사용량의 수치는 사용자에 의해 다양하게 변경 가능할 수 있다.
도 9는 본 발명의 일 실시 예에 따른, 알림용 디바이스의 동작을 설정하기 위한 메뉴를 설명하기 위한 도면이다.
사용자가 조건설정 대상 디바이스의 조건 설정 메뉴에서 어느 하나의 조건을 선택하여 알림용 디바이스를 나타내는 오브젝트 중 어느 하나가 위치한 영역으로 연결하면, 연결된 알림용 디바이스를 나타내는 오브젝트의 주위에 조건이 만족됨에 따른 해당 알림용 디바이스의 동작을 선택할 수 있는 메뉴가 디스플레이될 수 있다.
예를 들어, 도 9에 도시된 바와 같이, 사용자가 제1 오브젝트 리스트(91) 내 전등을 나타내는 오브젝트(91-2)에 대한 조건을 선택할 수 있는 메뉴 중 전등의 수명이 다하는 조건을 나타내는 메뉴(93-3)를 터치하여 제2 오브젝트 리스트(92) 내 타 사용자의 사용자 단말 장치(스마트 폰 등)를 나타내는 오브젝트(92-4)가 위치하는 영역으로 드래그하면, 해당 오브젝트(92-4)의 주위에 SMS(Short Message Service)의 방식으로 알림을 제공할 것인지 또는 팝업 메시지(Pop-up Message)의 방식으로 알림을 제공할 것인지를 선택할 수 있는 메뉴(95-1, 95-2)가 디스플레이 될 수 있다. 사용자가 해당 메뉴(95-1, 95-2)에서 SMS 방식의 알림 메뉴(95-1)을 선택하면, 전등의 수명이 다하는 조건을 나타내는 메뉴(93-3)와 SMS 방식의 알림 메뉴(95-1)를 연결하는 GUI가 디스플레이될 수 있다.
이에 따라, 전등의 수명이 다하는 경우, 전등은 타 사용자(예를 들면, 아버지)의 사용자 단말 장치에 대하여 SMS에 기반한 메시지를 전송하여 전등을 교체할 필요가 있음을 알려줄 수 있다. 이때, 전등은 직접 타 사용자의 사용자 단말 장치에 메시지를 전송할 수도 있으나, 메시지를 생성하여 전송할 수 있는 외부 서버를 통해 메시지를 전송할 수도 있다.
또한, 사용자가 제1 오브젝트 리스트(91) 내 전등을 나타내는 오브젝트(91-2)에 대한 조건을 선택할 수 있는 메뉴 중 전등이 켜지는 조건을 나타내는 메뉴(93-1)를 터치하여 제2 오브젝트 리스트(92) 내 도어락를 나타내는 오브젝트(92-2)가 위치하는 영역으로 드래그하면, 해당 오브젝트(92-2)의 주위에 도어락을 해제할 것인지 또는 도어락을 잠글지를 선택할 수 있는 해제 메뉴 및 잠김 메뉴(94-1, 94-2)가 디스플레이 될 수 있다. 사용자가 해당 메뉴(94-1, 94-2)에서 해제 메뉴(94-1)를 선택하면, 전등이 켜지는 조건을 나타내는 메뉴(93-1)와 도어락의 해제 메뉴(94-1)를 연결하는 GUI(96-1)가 디스플레이될 수 있다. 여기서, GUI(96-1)는 선택된 메뉴들을 서로 연결하는 선분 형태의 도형으로 구현될 수 있다. 선분 형태의 도형은 도 9에 도시된 바와 같이, 화살표 등 다양한 형태로 표현될 수 있다.
도 10은 본 발명의 일 실시 예에 따른 조건설정 대상 디바이스 및 알림용 디바이스의 관계 수립 및 조건이 설정된 화면을 도시한 것이다.
도 10에 따르면, 세탁기에 대한 각 조건에 따라 다른 알림용 디바이스에 의해 알림이 제공될 수 있다. 구체적으로, 세탁기에서 세탁이 진행중일 때, 세탁 완료 5분전 및 세탁 완료시에는 스피커를 통해 알림음을 출력하도록 할 수 있다. 또한, 세탁이 완료된 후, 세탁물이 세탁기에서 수거되지 않은 상태인 경우라면, 도어락이 현관문 안쪽에서 해제될 때, 도어락에서 알림음 또는 진동이 출력되도록 할 수 있다. 또한, 이와 동시에 또는 순차적으로 특정인의 사용자 단말 장치에 SMS, SNS(Social Network Service) 또는 Pop-up 메시지의 형식으로 알림을 제공할 수도 있다.
도 10은, 세탁기의 각 조건에 따라 스피커, 도어락 및 특정인의 사용자 단말 장치가 각각 세탁기와 관계가 수립된 화면을 도시한 것으로, 제1 오브젝트 리스트(1010) 내의 세탁기를 나타내는 오브젝트(1010-2)의‘세탁 완료 5분전’을 조건으로 선택할 수 있는 메뉴(1030-1)와 제2 오브젝트 리스트(1020) 내의 스피커를 나타내는 오브젝트(1020-1) 사이에, 세탁기와 스피커 간에 관계가 수립되었음을 나타내는 GUI(1040-1)가 디스플레이될 수 있다. 또한, ‘세탁 완료’를 조건으로 선택할 수 있는 메뉴(1030-2)와 스피커를 나타내는 오브젝트(1020-1) 사이에도 GUI(1040-2)가 디스플레이될 수 있다.
한편, ‘세탁이 완료된 후 도어락이 현관문 안쪽에서 해제되는 것’을 조건으로 선택할 수 있는 메뉴(1030-3)와 도어락을 나타내는 오브젝트(1020-2) 사이에, 세탁기와 도어락 간에 관계가 수립되었음을 나타내는 GUI(1040-3)가 디스플레이될 수 있다.
한편, 알림용 디바이스가 알림을 제공하기 위한 조건은, 특정 디바이스의 동작이 만족되는 것과는 관계되지 않을 수 있다. 예를 들어, 조건설정 대상 디바이스 중 시간을 나타내는 오브젝트(1010-1)와 알림용 디바이스를 연결하여, 특정 시간이 되면 해당 알림용 디바이스가 알림을 제공하도록 할 수 있다. 예를 들어, 사용자가 시간을 나타내는 오브젝트(1010-1)를 터치하면, 알림이 제공되는 시간을 선택할 수 있는 메뉴가 디스플레이될 수 있다. 사용자가 디스플레이된 메뉴에서 시간을 선택하고, 알림용 디바이스 중 어느 하나를 나타내는 오브젝트가 위치하는 영역으로 드래그함으로써 알림용 디바이스를 선택하면, 선택된 특정 시간과 알림용 디바이스 간에 관계가 수립될 수 있다. 이에 따라 선택된 시간에 선택된 알림용 디바이스를 통해 알림이 제공될 수 있다.
예를 들어, 사용자가 “오후 8시”를 알림 시간으로 설정하고, 알림용 디바이스를 스피커로 선택한 경우, 사용자 단말 장치(100)는 통신부(110)를 통해, 설정된 알림 시간에 대한 정보를 선택된 스피커로 전송할 수 있다. 스피커는 수신된 알림 시간에 대한 정보를 저장하고, 내부의 시계칩을 이용하여 알림 시간이 되면 알림음을 출력할 수 있다. 한편, 설정된 알림 시간에 대한 정보 및 현재 시간에 대한 정보는 사용자 단말 장치(100)가 스피커에 전송할 수도 있으며, 사용자 단말 장치(100)와 스피커가 중계기(200)를 통해 연결된 경우에는 중계기가 그러한 정보를 스피커에 전송할 수도 있다.
도 11은 본 발명의 일 실시 예에 따른, 연결 관계가 설정된 디바이스에 대한 정보를 저장하는 리스트를 나타낸 도면이다.
관계가 수립된 조건설정 대상 디바이스와 알림용 디바이스는 타 유저 인터페이스 화면에서 리스트로 관리될 수 있다. 구체적으로, 프로세서(130)는 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스 및 제2 오브젝트 리스트에서 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 선택된 디바이스의 연결 정보를 별도의 리스트 형식으로 저장할 수 있다.
도 11에 도시된 바와 같이, 조건설정 대상 디바이스 중 일 디바이스가 조리기이고, 조리기와 관계가 수립된 알림용 디바이스가 스피커, 도어락 및 TV인 경우, 프로세서(130)는 조리기를 나타내는 오브젝트(1110-1), 스피커를 나타내는 오브젝트(1110-2), 도어락을 나타내는 오브젝트(1110-3) 및 TV를 나타내는 오브젝트(1110-4)를 그룹으로 묶는 박스(1110) 형식으로 리스트를 제공할 수 있다. 이때, 조건설정 대상 디바이스와 알림용 디바이스는 서로 구분되어 디스플레이될 수 있다.
한편, 조건설정 대상 디바이스 중 일 디바이스가 전기 계량기이고, 전기 계량기와 관계가 수립된 알림용 디바이스가 도어락인 경우, 리스트에는 전기 계량기를 나타내는 오브젝트(1120-1)와 도어락을 나타내는 오브젝트(1120-2)가 그룹으로 묶인 박스(1120)가 포함될 수 있다.
리스트에는 순차적으로, 조건설정 대상 디바이스로서 세탁기를 나타내는 오브젝트(1130-1)와 알림용 디바이스로서 스피커를 나타내는 오브젝트(1130-2), TV를 나타내는 오브젝트(1130-3)가 그룹으로 묶인 박스(1130), 조건설정 대상 디바이스로서 욕조를 나타내는 오브젝트(1140-1)와 알림용 디바이스로서 사용자 단말 장치(100)를 나타내는 오브젝트(1140-2)가 그룹으로 묶인 박스(1140)가 디스플레이될 수 있다.
한편, 상술한 박스 형식으로 오브젝트를 디스플레이하여 연결 정보를 제공하는 방법은 일 실시 예에 불과할 뿐, 연결 정보를 제공하는 방법이 이에 한정되는 것은 아니며, 관계가 수립된 디바이스를 관리할 수 있는 화면은 텍스트, 아이콘 등을 포함하는 다양한 형태로 제공될 수 있음은 물론이다.
한편, 이러한 동작들은 설정이 이루어진 후 직접적으로 서로 연결되어 이루어질 수 있다.
도 12는 본 발명의 다른 실시 예에 따른, 사용자 단말 장치의 구성을 상세히 도시한 블록도이다.
도 12에 도시된 바와 같이, 본 발명의 다른 실시 예에 따른 사용자 단말 장치(100’)는 통신부(110), 디스플레이부(120), 프로세서(130), 저장부(140), 오디오 처리부(150), 오디오 출력부(160), 비디오 처리부(170) 및 사용자 인터페이스부(180)를 포함한다. 이하에서는 도 2에서의 설명과 중복되는 부분에 대한 설명은 생략하기로 한다.
프로세서(130)는 RAM(131), ROM(132), 그래픽 처리부(133), CPU(134), 제1 인터페이스 내지 n 인터페이스(135-1 ~ 135-n) 및 버스(136)를 포함한다. 여기서, RAM(131), ROM(132), 그래픽 처리부(133), CPU(134), 제1 인터페이스 내지 n 인터페이스(135-1 ~ 135-n) 등은 버스(136)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(135-1 ~ 135-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
CPU(134)는 저장부(140)에 액세스하여, 저장부(140)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, CPU(134)는 저장부(140)에 저장된 각종 프로그램, 컨텐츠 및 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
RAM(131)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, CPU(134)는 ROM(132)에 저장된 명령어에 따라 저장부(140)에 저장된 O/S를 RAM(131)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU(134)는 저장부(140)에 저장된 각종 애플리케이션 프로그램을 RAM(131)에 복사하고, RAM(131)에 복사된 애플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(133)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부는 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부는 연산부에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다.
한편, 상술한 프로세서(130)의 동작은 저장부(140)에 저장된 프로그램이 실행되어 이루어질 수 있다.
저장부(140)는 사용자 단말 장치(100')를 구동시키기 위한 O/S(Operating System) 소프트웨어 모듈, 각종 멀티미디어 컨텐츠와 같은 다양한 데이터를 저장할 수 있다. 특히, 저장부(140)의 구체적인 구성에 대해서는 도 13을 참조하여 설명하도록 한다.
도 13은 본 발명의 일 실시 예에 따른, 저장부의 구성을 상세히 도시한 블록도이다. 도 13에 따르면, 저장부(140)는 베이스 모듈(141), 센싱 모듈(142), 통신 모듈(143), 프리젠테이션 모듈(144), 웹 브라우저 모듈(145) 및 서비스 모듈(146)을 포함하는 소프트웨어가 저장될 수 있다.
베이스 모듈(141)이란 사용자 단말 장치(100’)에 포함된 각 하드웨어들로부터 전달되는 신호를 처리하여 상위 레이어 모듈로 전달하는 기초 모듈을 의미한다. 스토리지 모듈(141-1)은 데이터 베이스(DB)나 레지스트리를 관리하는 프로그램 모듈이다. 보안 모듈(141-2)은 하드웨어에 대한 이증(Certification), 요청 허용(Permission), 보안 저장(Secure Storage) 등을 지원하는 프로그램 모듈이고, 네트워크 모듈(141-3)은 네트워크 연결을 지원하기 위한 모듈이다.
센싱 모듈(142)은 각종 센서들로부터 정보를 수집하고, 수집된 정보를 분석 및 관리하는 모듈이다.
통신 모듈(143)은 외부와 통신을 수행하기 위한 모듈이다. 통신 모듈(143)은 메시징 모듈 및 전화 모듈을 포함할 수 있다.
프리젠테이션 모듈(144)은 디스플레이 화면을 구성하기 위한 모듈이다. 프리젠테이션 모듈(144)은 멀티미디어 컨텐츠를 재생하여 출력하기 위한 멀티미디어 모듈, UI 및 그래픽 처리를 수행하는 UI 렌더링 모듈을 포함한다. 프로세서(130)는 프리젠테이션 모듈(144)을 실행하여 조건설정 대상 디바이스 및 알림용 디바이스를 나타내는 오브젝트를 각각 포함하는 제1 오브젝트 리스트 및 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이할 수 있다. 또한, 프로세서(130)는 프리젠테이션 모듈(144)을 실행하여, 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI(Graphic User Interface)를 디스플레이할 수 있다.
웹 브라우저 모듈(145)은 웹 브라우징을 수행하여 웹 서버에 액세스하는 모듈을 의미한다.
서비스 모듈(146)은 다양한 서비스를 제공하기 위한 각종 어플리케이션을 포함하는 모듈이다. 구체적으로는, 서비스 모듈(146)은 SNS 프로그램, 컨텐츠 재생 프로그램 등과 같은 다양한 프로그램 모듈을 포함할 수 있다.
도 14는 본 발명의 일 실시 예에 따른, 사용자 단말 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, IoT 환경을 구성하는 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이한다(S1410).
이 후, 유저 인터페이스를 통해 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트를 선택한다(S1420). 이때, 제1 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로부터 제2 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로의 터치 앤 드래그가 수행되면, 제1 오브젝트 리스트에 포함된 오브젝트 및 제2 오브젝트 리스트에 포함된 오브젝트에 각각 대응되는 디바이스를 선택하도록 제어할 수 있다.
한편, 조건을 설정하기 위한 메뉴를 제1 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이할 수 있다. 이때, 사용자는 조건을 설정하기 위한 메뉴를 통해 알림 조건을 설정할 수 있다. 또한, 알림을 제공하기 위한 동작을 설정하기 위한 메뉴를 제2 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이할 수 있다.
제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 각각 선택된 오브젝트에 대응되는 디바이스 간에 서로 관계를 수립할 수 있다(S1430). 구체적으로, 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어할 수 있다.
구체적으로, 특정 조건이 만족됨에 따른 신호를 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스를 전송하도록 설정하는 제어 신호를 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하고, 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 특정 조건이 만족됨에 따른 신호를 수신하면 알림을 제공하도록 설정하는 제어 신호를 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 제어할 수 있다.
이때 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 제1 오브젝트 리스트 및 제2 오브젝트 리스트가 함께 디스플레이된 상태에서 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI를 디스플레이할 수 있다. 여기서, GUI는 선택된 오브젝트들을 서로 연결하는 선분 형태의 도형일 수 있다.
한편, 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스 및 제2 오브젝트 리스트에서 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 선택된 디바이스의 연결 정보를 리스트 형식으로 저장할 수 있다.
도 15는 본 발명의 일 실시 예에 따른, 사용자 단말 장치의 제어 방법을 설명하기 위한 흐름도이다.
먼저, 제1 오브젝트 리스트 및 제2 오브젝트 리스트를 포함하는 유저 인터페이스(UI)를 디스플레이한다(S1505). 디스플레이된 유저 인터페이스를 통한 사용자 명령에 따라, 제1 오브젝트 리스트 중 하나의 조건 설정 디바이스를 선택한다(S1510). 조건 설정 디바이스가 선택된 후, 해당 조건 설정 디바이스에 복수의 조건을 설정할 수 있는 메뉴가 존재하는지 여부를 판단하고(S1515), 조건을 설정할 수 있는 메뉴가 존재하는 경우(S1515:Y), 조건 설정 메뉴를 디스플레이한다(S1520). 디스플레이된 조건 설정 메뉴에서 조건이 선택되면(S1525), 사용자 명령에 따라, 제2 오브젝트 리스트 중 적어도 하나의 알림용 디바이스를 선택할 수 있다(S1530). 한편, 조건을 설정할 수 있는 메뉴가 존재하지 않는 경우(S1515:N), 조건 설정 메뉴가 디스플레이되지 않고, 사용자 명령에 따라, 제2 오브젝트 리스트 중 적어도 하나의 알림용 디바이스를 선택할 수 있다(S1530).
알림용 디바이스가 선택되면, 제1 오브젝트 리스트에서 선택된 조건 설정 디바이스 및 제2 오브젝트 리스트에서 선택된 알림용 디바이스간에 관계가 수립될 수 있다(S1535). 관계가 수립된 조건 설정 디바이스 및 알림용 디바이스는 링크 디바이스 리스트로 저장되어 관리될 수 있다(S1540).
이 후, 조건 설정 디바이스에 대한 조건 설정 메뉴에서 선택된 조건이 만족되는 경우(S1545:Y), 해당 조건 설정 디바이스와 관계가 수립된 알림용 디바이스를 통해 알림이 제공될 수 있다(S1550).
상술한 다양한 실시 예에 따른 사용자 단말 장치(100)의 제어 방법은 프로그램으로 구현되어 다양한 기록 매체에 저장될 수 있다. 즉, 각종 프로세서에 의해 처리되어 상술한 다양한 제어 방법을 실행할 수 있는 컴퓨터 프로그램이 기록 매체에 저장된 상태로 사용될 수도 있다.
일 예로, IoT 환경을 구성하는 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이하는 단계, 유저 인터페이스를 통해 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 오브젝트를 선택하는 단계 및, 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 제1 오브젝트 리스트 및 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체한 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크 USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100, 100': 사용자 단말 장치 200: 중계기
110: 통신부 120: 디스플레이부
130: 프로세서

Claims (20)

  1. IoT(Interest of Things) 환경 기반의 사용자 단말 장치에 있어서,
    상기 IoT 환경을 구성하는 복수의 디바이스와 통신을 수행하기 위한 통신부;
    상기 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 상기 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이하는 디스플레이부; 및
    상기 유저 인터페이스를 통해 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어하는 프로세서;를 포함하는 사용자 단말 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 특정 조건이 만족됨에 따른 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 설정하는 제어 신호를 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하고, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 특정 조건이 만족됨에 따른 신호를 수신하면 상기 알림을 제공하도록 설정하는 제어 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 제어하는 사용자 단말 장치.
  3. 제1항에 있어서,
    상기 프로세서는,
    상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트가 함께 디스플레이된 상태에서 상기 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI(Graphic User Interface)를 디스플레이하도록 제어하는, 사용자 단말 장치.
  4. 제3항에 있어서,
    상기 GUI는,
    상기 선택된 오브젝트들을 서로 연결하는 선분 형태의 도형인, 사용자 단말 장치.
  5. 제 1항에 있어서,
    상기 프로세서는,
    상기 제1 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로부터 상기 제2 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로의 터치 앤 드래그가 수행되면, 상기 1 오브젝트 리스트에 포함된 오브젝트 및 상기 제2 오브젝트 리스트에 포함된 오브젝트에 각각 대응되는 디바이스들을 선택하는, 사용자 단말 장치.
  6. 제1항에 있어서,
    상기 프로세서는,
    상기 조건을 설정하기 위한 메뉴를 상기 제1 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하도록 제어하는, 사용자 단말 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 알림을 제공하기 위한 동작을 설정하기 위한 메뉴를 상기 제2 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하도록 제어하는, 사용자 단말 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스 및 상기 제2 오브젝트 리스트에서 상기 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 선택된 디바이스의 연결 정보를 리스트 형식으로 저장하는, 사용자 단말 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 제2 오브젝트 리스트에서 오브젝트가 추가적으로 선택되면, 추가적으로 선택된 오브젝트에 대응되는 타 디바이스가 상기 알림을 추가적으로 제공하는 디바이스로 설정되도록 상기 타 디바이스를 제어하는, 사용자 단말 장치.
  10. 제1항에 있어서,
    상기 프로세서는,
    상기 제1 오브젝트 리스트에 포함된 복수의 오브젝트에 대응되는 디바이스에 대하여 우선 순위를 설정하고, 우선 순위가 높은 순서대로 상기 복수의 오브젝트에 대응되는 디바이스에 대한 정보를 디스플레이하는, 사용자 단말 장치.
  11. IoT(Interest of Things) 환경 기반의 사용자 단말 장치의 제어 방법에 있어서,
    상기 IoT 환경을 구성하는 복수의 디바이스 중에서 특정 조건이 설정된 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제1 오브젝트 리스트 및 상기 특정 조건이 만족되면 알림을 제공할 수 있는 적어도 하나의 디바이스를 나타내는 오브젝트를 포함하는 제2 오브젝트 리스트를 포함하는 유저 인터페이스를 디스플레이하는 단계;
    상기 유저 인터페이스를 통해 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트를 선택하는 단계; 및
    상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스에 설정된 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 설정되도록 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 선택된 오브젝트에 대응되는 디바이스를 제어하는 단계;를 포함하는 제어 방법.
  12. 제11항에 있어서,
    상기 제어하는 단계는,
    상기 특정 조건이 만족됨에 따른 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 설정하는 제어 신호를 상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하고, 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스가 상기 특정 조건이 만족됨에 따른 신호를 수신하면 상기 알림을 제공하도록 설정하는 제어 신호를 상기 제2 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스로 전송하도록 제어하는, 제어 방법.
  13. 제11항에 있어서,
    상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트 각각에서 오브젝트가 선택되면, 상기 제1 오브젝트 리스트 및 상기 제2 오브젝트 리스트가 함께 디스플레이된 상태에서 상기 선택된 오브젝트에 대응되는 디바이스가 서로 연결되었음을 나타내는 GUI(Graphic User Interface)를 디스플레이하는 단계;를 더 포함하는, 제어 방법.
  14. 제13항에 있어서,
    상기 GUI는,
    상기 선택된 오브젝트들을 서로 연결하는 선분 형태의 도형인, 제어 방법.
  15. 제11항에 있어서,
    상기 선택하는 단계는,
    상기 제1 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로부터 상기 제2 오브젝트 리스트에 포함된 오브젝트가 위치한 영역으로의 터치 앤 드래그가 수행되면, 상기 제1 오브젝트 리스트에 포함된 오브젝트 및 상기 제2 오브젝트 리스트에 포함된 오브젝트에 각각 대응되는 디바이스를 선택하는, 제어 방법.
  16. 제11항에 있어서,
    상기 조건을 설정하기 위한 메뉴를 상기 제1 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하는 단계;를 더 포함하는 제어 방법.
  17. 제11항에 있어서,
    상기 알림을 제공하기 위한 동작을 설정하기 위한 메뉴를 상기 제2 오브젝트 리스트에서 선택된 오브젝트의 주위에 디스플레이하는 단계;를 더 포함하는 제어 방법.
  18. 제11항에 있어서,
    상기 제1 오브젝트 리스트에서 선택된 오브젝트에 대응되는 디바이스 및 상기 제2 오브젝트 리스트에서 상기 특정 조건이 만족됨에 따른 알림을 제공하는 디바이스로 선택된 디바이스의 연결 정보를 리스트 형식으로 저장하는 단계;를 더 포함하는, 제어 방법.
  19. 제11항에 있어서,
    상기 제어하는 단계는,
    상기 제2 오브젝트 리스트에서 오브젝트가 추가적으로 선택되면, 추가적으로 선택된 오브젝트에 대응되는 타 디바이스가 상기 알림을 추가적으로 제공하는 디바이스로 설정되도록 상기 타 디바이스를 제어하는, 제어 방법.
  20. 제11항에 있어서,
    상기 디스플레이하는 단계는,
    상기 제1 오브젝트 리스트에 포함된 복수의 오브젝트에 대응되는 디바이스에 대하여 우선 순위를 설정하고, 우선 순위가 높은 순서대로 상기 복수의 오브젝트에 대응되는 디바이스에 대한 정보를 디스플레이하는, 제어 방법.
KR1020150188274A 2015-12-29 2015-12-29 사용자 단말 장치 및 그 제어 방법 Active KR102254699B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020150188274A KR102254699B1 (ko) 2015-12-29 2015-12-29 사용자 단말 장치 및 그 제어 방법
US15/388,493 US10809902B2 (en) 2015-12-29 2016-12-22 User terminal apparatus and control method thereof
PCT/KR2016/015515 WO2017116185A2 (en) 2015-12-29 2016-12-29 User terminal apparatus and control method thereof
CN201680076873.8A CN108431755B (zh) 2015-12-29 2016-12-29 用户终端装置及其控制方法
EP16882137.9A EP3353636B1 (en) 2015-12-29 2016-12-29 User terminal apparatus and control method thereof
US17/015,476 US11487417B2 (en) 2015-12-29 2020-09-09 User terminal apparatus and control method for controlling internet of things devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150188274A KR102254699B1 (ko) 2015-12-29 2015-12-29 사용자 단말 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20170078106A true KR20170078106A (ko) 2017-07-07
KR102254699B1 KR102254699B1 (ko) 2021-05-24

Family

ID=59087252

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150188274A Active KR102254699B1 (ko) 2015-12-29 2015-12-29 사용자 단말 장치 및 그 제어 방법

Country Status (5)

Country Link
US (2) US10809902B2 (ko)
EP (1) EP3353636B1 (ko)
KR (1) KR102254699B1 (ko)
CN (1) CN108431755B (ko)
WO (1) WO2017116185A2 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190081593A (ko) * 2017-12-29 2019-07-09 주식회사 엘지유플러스 IoT 가전기기를 제어하는 방법 및 그 장치
WO2020055045A1 (ko) * 2018-09-13 2020-03-19 삼성전자 주식회사 아이오티 기기 제어 서비스를 제공하는 전자 장치 및 그 제어 방법
KR20240058474A (ko) * 2022-10-26 2024-05-03 조현석 적외선을 이용한 가전 Iot 구축 시스템
US12621847B2 (en) 2022-10-24 2026-05-05 Samsung Electronics Co., Ltd. Electronic device capable of controlling neighboring device and method for controlling the same

Families Citing this family (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11368327B2 (en) 2008-08-11 2022-06-21 Icontrol Networks, Inc. Integrated cloud system for premises automation
US11244545B2 (en) 2004-03-16 2022-02-08 Icontrol Networks, Inc. Cross-client sensor user interface in an integrated security network
US9729342B2 (en) 2010-12-20 2017-08-08 Icontrol Networks, Inc. Defining and implementing sensor triggered response rules
US11582065B2 (en) 2007-06-12 2023-02-14 Icontrol Networks, Inc. Systems and methods for device communication
US10237237B2 (en) 2007-06-12 2019-03-19 Icontrol Networks, Inc. Communication protocols in integrated systems
US11343380B2 (en) 2004-03-16 2022-05-24 Icontrol Networks, Inc. Premises system automation
US12063220B2 (en) 2004-03-16 2024-08-13 Icontrol Networks, Inc. Communication protocols in integrated systems
US10339791B2 (en) 2007-06-12 2019-07-02 Icontrol Networks, Inc. Security network integrated with premise security system
US11489812B2 (en) 2004-03-16 2022-11-01 Icontrol Networks, Inc. Forming a security network including integrated security system components and network devices
US10142392B2 (en) 2007-01-24 2018-11-27 Icontrol Networks, Inc. Methods and systems for improved system performance
US11368429B2 (en) 2004-03-16 2022-06-21 Icontrol Networks, Inc. Premises management configuration and control
US10721087B2 (en) 2005-03-16 2020-07-21 Icontrol Networks, Inc. Method for networked touchscreen with integrated interfaces
US10522026B2 (en) 2008-08-11 2019-12-31 Icontrol Networks, Inc. Automation system user interface with three-dimensional display
US11190578B2 (en) 2008-08-11 2021-11-30 Icontrol Networks, Inc. Integrated cloud system with lightweight gateway for premises automation
US11916870B2 (en) 2004-03-16 2024-02-27 Icontrol Networks, Inc. Gateway registry methods and systems
US11811845B2 (en) 2004-03-16 2023-11-07 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US8635350B2 (en) 2006-06-12 2014-01-21 Icontrol Networks, Inc. IP device discovery systems and methods
JP2007529826A (ja) 2004-03-16 2007-10-25 アイコントロール ネットワークス， インコーポレイテッド 対象事項管理ネットワーク
US11496568B2 (en) 2005-03-16 2022-11-08 Icontrol Networks, Inc. Security system with networked touchscreen
US10999254B2 (en) 2005-03-16 2021-05-04 Icontrol Networks, Inc. System for data routing in networks
US20110128378A1 (en) 2005-03-16 2011-06-02 Reza Raji Modular Electronic Display Platform
US20170180198A1 (en) 2008-08-11 2017-06-22 Marc Baum Forming a security network including integrated security system components
US11615697B2 (en) 2005-03-16 2023-03-28 Icontrol Networks, Inc. Premise management systems and methods
US20120324566A1 (en) 2005-03-16 2012-12-20 Marc Baum Takeover Processes In Security Network Integrated With Premise Security System
US11700142B2 (en) 2005-03-16 2023-07-11 Icontrol Networks, Inc. Security network integrating security system and network devices
US12063221B2 (en) 2006-06-12 2024-08-13 Icontrol Networks, Inc. Activation of gateway device
US10079839B1 (en) 2007-06-12 2018-09-18 Icontrol Networks, Inc. Activation of gateway device
US11706279B2 (en) 2007-01-24 2023-07-18 Icontrol Networks, Inc. Methods and systems for data communication
US7633385B2 (en) 2007-02-28 2009-12-15 Ucontrol, Inc. Method and system for communicating with and controlling an alarm system from a remote server
US8451986B2 (en) 2007-04-23 2013-05-28 Icontrol Networks, Inc. Method and system for automatically providing alternate network access for telecommunications
US12283172B2 (en) 2007-06-12 2025-04-22 Icontrol Networks, Inc. Communication protocols in integrated systems
US11212192B2 (en) 2007-06-12 2021-12-28 Icontrol Networks, Inc. Communication protocols in integrated systems
US11601810B2 (en) 2007-06-12 2023-03-07 Icontrol Networks, Inc. Communication protocols in integrated systems
US10523689B2 (en) 2007-06-12 2019-12-31 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US11218878B2 (en) 2007-06-12 2022-01-04 Icontrol Networks, Inc. Communication protocols in integrated systems
US11316753B2 (en) 2007-06-12 2022-04-26 Icontrol Networks, Inc. Communication protocols in integrated systems
US11646907B2 (en) 2007-06-12 2023-05-09 Icontrol Networks, Inc. Communication protocols in integrated systems
US12184443B2 (en) 2007-06-12 2024-12-31 Icontrol Networks, Inc. Controlling data routing among networks
US11423756B2 (en) 2007-06-12 2022-08-23 Icontrol Networks, Inc. Communication protocols in integrated systems
US12003387B2 (en) 2012-06-27 2024-06-04 Comcast Cable Communications, Llc Control system user interface
US10223903B2 (en) 2010-09-28 2019-03-05 Icontrol Networks, Inc. Integrated security system with parallel processing architecture
US12541237B2 (en) 2007-08-10 2026-02-03 Icontrol Networks, Inc. Integrated security system with parallel processing architecture
US11831462B2 (en) 2007-08-24 2023-11-28 Icontrol Networks, Inc. Controlling data routing in premises management systems
US11916928B2 (en) 2008-01-24 2024-02-27 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US20170185278A1 (en) * 2008-08-11 2017-06-29 Icontrol Networks, Inc. Automation system user interface
US11729255B2 (en) 2008-08-11 2023-08-15 Icontrol Networks, Inc. Integrated cloud system with lightweight gateway for premises automation
US11758026B2 (en) 2008-08-11 2023-09-12 Icontrol Networks, Inc. Virtual device systems and methods
US11258625B2 (en) 2008-08-11 2022-02-22 Icontrol Networks, Inc. Mobile premises automation platform
US11792036B2 (en) 2008-08-11 2023-10-17 Icontrol Networks, Inc. Mobile premises automation platform
US8638211B2 (en) 2009-04-30 2014-01-28 Icontrol Networks, Inc. Configurable controller and interface for home SMA, phone and multimedia
US8836467B1 (en) 2010-09-28 2014-09-16 Icontrol Networks, Inc. Method, system and apparatus for automated reporting of account and sensor zone information to a central station
US11750414B2 (en) 2010-12-16 2023-09-05 Icontrol Networks, Inc. Bidirectional security sensor communication for a premises security system
US9147337B2 (en) 2010-12-17 2015-09-29 Icontrol Networks, Inc. Method and system for logging security event data
US10001898B1 (en) 2011-07-12 2018-06-19 Domo, Inc. Automated provisioning of relational information for a summary data visualization
US9202297B1 (en) * 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
US11405463B2 (en) 2014-03-03 2022-08-02 Icontrol Networks, Inc. Media content management
US10360746B1 (en) * 2016-12-30 2019-07-23 Alarm.Com Incorporated Controlled indoor access using smart indoor door knobs
EP3506216A1 (en) * 2017-12-28 2019-07-03 Netatmo Smart lock with power saving having an electromechanical key
KR102478031B1 (ko) * 2018-03-08 2022-12-16 삼성전자주식회사 외부 장치와의 연결을 위한 전자 장치 및 방법
CN109147288A (zh) * 2018-09-25 2019-01-04 珠海格力电器股份有限公司 报警及设置方法、装置、系统、终端、服务器及存储介质
WO2020208937A1 (ja) * 2019-04-08 2020-10-15 株式会社ワコム デジタルインクを管理するホームｕｉシステム
CN111669430B (zh) * 2020-04-30 2021-12-31 华为技术有限公司 通信方法、控制物联网设备的方法、电子设备
CN114153531A (zh) * 2020-08-18 2022-03-08 华为技术有限公司 管理物联网设备的方法和装置
US20220150578A1 (en) * 2020-11-06 2022-05-12 Arris Enterprises Llc. System and method for providing a unitary internet-of-things interface via a media gateway appliance
CN114389910B (zh) * 2022-01-12 2025-01-03 湖北星纪魅族科技有限公司 基于uwb实现的终端控制方法以及终端控制装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110140896A1 (en) * 2009-12-15 2011-06-16 Mindray Ds Usa, Inc. Systems and methods for selecting parameters used in a portable patient monitor
US20140176316A1 (en) * 2012-12-24 2014-06-26 Samsung Electronics Co., Ltd. Display apparatus and method of displaying a message
US20150019710A1 (en) * 2013-07-11 2015-01-15 Neura, Inc. Interoperability mechanisms for internet of things integration platform

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7103834B1 (en) 1997-06-25 2006-09-05 Samsung Electronics Co., Ltd. Method and apparatus for a home network auto-tree builder
US20140098247A1 (en) * 1999-06-04 2014-04-10 Ip Holdings, Inc. Home Automation And Smart Home Control Using Mobile Devices And Wireless Enabled Electrical Switches
US7047092B2 (en) * 2003-04-08 2006-05-16 Coraccess Systems Home automation contextual user interface
US20050268109A1 (en) * 2004-05-07 2005-12-01 Mcintosh Christopher P Object based communication network
JP2006246026A (ja) 2005-03-03 2006-09-14 Canon Inc ディジタル装置
US8112549B2 (en) 2005-07-14 2012-02-07 Yahoo! Inc. Alert mechanism for notifying multiple user devices sharing a connected-data-set
US8099178B2 (en) * 2005-08-22 2012-01-17 Trane International Inc. Building automation system facilitating user customization
US8042048B2 (en) 2005-11-17 2011-10-18 Att Knowledge Ventures, L.P. System and method for home automation
US8154398B2 (en) * 2007-10-23 2012-04-10 La Crosse Technology Remote location monitoring
JP2009146146A (ja) 2007-12-13 2009-07-02 Panasonic Corp 情報処理装置およびホームネットワークシステム
JP2009246026A (ja) 2008-03-28 2009-10-22 Sekisui Chem Co Ltd ペースト状接着剤及びこの接着剤を用いた電子部品内蔵基板の製造方法
US20130173062A1 (en) * 2009-12-08 2013-07-04 Pamela Koenig-Richardson Smart building unified managed solutions
JP2012060235A (ja) 2010-09-06 2012-03-22 Sony Corp 動作条件設定システム、ユーザ装置、設定サーバ、及び動作条件設定方法
US8375118B2 (en) * 2010-11-18 2013-02-12 Verizon Patent And Licensing Inc. Smart home device management
CN102651160B (zh) * 2011-02-23 2016-06-29 上海晨兴希姆通电子科技有限公司 监控中心、双向报警系统及双向报警方法
KR101240274B1 (ko) 2011-07-07 2013-03-11 엘지전자 주식회사 이동 단말기 및 그의 컨텐츠 믹싱방법
US9639506B2 (en) * 2011-07-07 2017-05-02 Honeywell International Inc. Interface for home energy manager
KR20130048533A (ko) 2011-11-02 2013-05-10 엘지전자 주식회사 원격제어장치의 동작 방법
KR102073601B1 (ko) * 2012-07-25 2020-02-06 삼성전자주식회사 사용자 단말 장치 및 그의 제어 방법
KR20140026887A (ko) * 2012-08-23 2014-03-06 삼성전자주식회사 모바일 장치에 연결되는 외부 장치에 따른 어플리케이션 목록 제공 장치 및 방법
KR101558236B1 (ko) * 2012-10-16 2015-10-12 전자부품연구원 ＩｏＴ 브라우징 방법 및 장치
US20140244001A1 (en) 2013-02-25 2014-08-28 Qualcomm Incorporated Controlling many different devices from a smart controller
KR102203885B1 (ko) * 2013-04-26 2021-01-15 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
US9622291B2 (en) * 2013-06-11 2017-04-11 Samsung Electronics Co., Ltd Wireless communication method and apparatus supporting multiple communication services
US9871865B2 (en) * 2013-07-11 2018-01-16 Neura, Inc. Physical environment profiling through internet of things integration platform
US20150058802A1 (en) * 2013-08-22 2015-02-26 Homersoft Sp. Zo.O. Graphical User Interface for Defining Relations Among Products and Services
US9332040B2 (en) * 2013-10-07 2016-05-03 Google Inc. Hazard detection unit facilitating convenient setup of plural instances thereof in the smart home
US10768784B2 (en) * 2013-12-06 2020-09-08 Vivint, Inc. Systems and methods for rules-based automations and notifications
US9772612B2 (en) * 2013-12-11 2017-09-26 Echostar Technologies International Corporation Home monitoring and control
US9210192B1 (en) * 2014-09-08 2015-12-08 Belkin International Inc. Setup of multiple IOT devices
US9410712B2 (en) * 2014-10-08 2016-08-09 Google Inc. Data management profile for a fabric network
US10194485B2 (en) * 2014-12-18 2019-01-29 Motorola Solutions, Inc. Method and apparatus for automated dispatch of mobile devices in a communication system
US9685059B2 (en) * 2015-02-12 2017-06-20 Google Inc. Devices and methods for providing heat-source alerts
US10114351B2 (en) * 2015-03-05 2018-10-30 Google Llc Smart-home automation system that suggests or autmatically implements selected household policies based on sensed observations
US9585119B2 (en) * 2015-05-08 2017-02-28 International Business Machines Corporation Multichannel preferred device notification
US20170063611A1 (en) * 2015-08-28 2017-03-02 Stringify Inc. User Configuration Mechanism for Internet-of-Things (IOT)
US10116573B2 (en) * 2015-12-14 2018-10-30 Afero, Inc. System and method for managing internet of things (IoT) devices and traffic using attribute classes

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110140896A1 (en) * 2009-12-15 2011-06-16 Mindray Ds Usa, Inc. Systems and methods for selecting parameters used in a portable patient monitor
US20140176316A1 (en) * 2012-12-24 2014-06-26 Samsung Electronics Co., Ltd. Display apparatus and method of displaying a message
US20150019710A1 (en) * 2013-07-11 2015-01-15 Neura, Inc. Interoperability mechanisms for internet of things integration platform

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190081593A (ko) * 2017-12-29 2019-07-09 주식회사 엘지유플러스 IoT 가전기기를 제어하는 방법 및 그 장치
WO2020055045A1 (ko) * 2018-09-13 2020-03-19 삼성전자 주식회사 아이오티 기기 제어 서비스를 제공하는 전자 장치 및 그 제어 방법
US12003965B2 (en) 2018-09-13 2024-06-04 Samsung Electronics Co., Ltd Electronic device for providing IOT device control service, and control method therefor
US12621847B2 (en) 2022-10-24 2026-05-05 Samsung Electronics Co., Ltd. Electronic device capable of controlling neighboring device and method for controlling the same
KR20240058474A (ko) * 2022-10-26 2024-05-03 조현석 적외선을 이용한 가전 Iot 구축 시스템

Also Published As

Publication number Publication date
CN108431755B (zh) 2021-09-17
US20170185281A1 (en) 2017-06-29
US11487417B2 (en) 2022-11-01
WO2017116185A2 (en) 2017-07-06
US20200401304A1 (en) 2020-12-24
WO2017116185A3 (en) 2018-02-22
EP3353636B1 (en) 2022-03-09
US10809902B2 (en) 2020-10-20
CN108431755A (zh) 2018-08-21
EP3353636A4 (en) 2018-08-08
KR102254699B1 (ko) 2021-05-24
EP3353636A2 (en) 2018-08-01

Similar Documents

Publication Publication Date Title
CN108431755B (zh) 用户终端装置及其控制方法
EP3175336B1 (en) Electronic device and method for displaying user interface thereof
EP2993568B1 (en) Electronic device including touch sensitive display and method for operating the same
KR102242983B1 (ko) 통합 메시지 어플리케이션 운용 방법 및 이를 지원하는 전자장치
CN105740082A (zh) 共享数据的方法及其电子设备
CN105302456A (zh) 显示设备及其控制方法
US20150339018A1 (en) User terminal device and method for providing information thereof
CN105630326A (zh) 电子设备和控制电子设备中的对象的方法
CN106055190A (zh) 用于经由显示器的部分提供信息的设备和方法
KR102272343B1 (ko) 전자 펜 운용 방법 및 이를 지원하는 전자 장치
CN108475162B (zh) 用于显示用户界面的方法和用于支持该方法的电子装置
CN106662975A (zh) 用于处理触摸输入的方法和装置
US20190333441A1 (en) Case of electronic device for controlling display and method therefor
KR20170037409A (ko) 전자 장치 및 그 ui 제공 방법
KR102625255B1 (ko) 알림 제공 방법 및 이를 구현한 전자 장치
KR102161159B1 (ko) 전자 장치 및 전자 장치에서 색상 추출 방법
US10115300B2 (en) Method and apparatus for remote control
CN112148169B (zh) 标识显示控制方法、装置及电子设备
CN103412707B (zh) 一种显示框显示的方法、装置和设备
US10320786B2 (en) Electronic apparatus and method for controlling the same
KR102277217B1 (ko) 블록을 설정하는 전자 장치 및 방법
KR20170037795A (ko) 휴대용 단말 장치 및 그 제어 방법
EP3304412B1 (en) Electronic apparatus and method for controlling the same
KR20150082039A (ko) 어플리케이션 동작 방법 및 전자 장치

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

P22-X000 Classification modified

St.27 status event code: A-2-2-P10-P22-nap-X000

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5