WO2015137740A1 - Home network system using robot and control method thereof - Google Patents

Home network system using robot and control method thereof Download PDF

Info

Publication number
WO2015137740A1
WO2015137740A1 PCT/KR2015/002383 KR2015002383W WO2015137740A1 WO 2015137740 A1 WO2015137740 A1 WO 2015137740A1 KR 2015002383 W KR2015002383 W KR 2015002383W WO 2015137740 A1 WO2015137740 A1 WO 2015137740A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
home
unit
robot
control logic
Prior art date
Application number
PCT/KR2015/002383
Other languages
French (fr)
Korean (ko)
Inventor
송세경
김동경
Original Assignee
(주)퓨처로봇
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)퓨처로봇 filed Critical (주)퓨처로봇
Publication of WO2015137740A1 publication Critical patent/WO2015137740A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/12—Arrangements for remote connection or disconnection of substations or of equipment thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46—Interconnection of networks

Definitions

  • the present invention relates to a home network system using a robot and a control method thereof, and more particularly, to control home network devices such as home appliances, sensor devices, and media devices using a robot that can be connected to a cloud server or a mobile terminal.
  • the present invention relates to a home network system using a robot and a method of controlling the same, in which a robot cannot perform its own function in controlling a home network device to support extended functions by selecting available external devices.
  • the home network system is to connect and manage electronic devices in a home to an internal network.
  • an interface such as a PC or a smart phone installed with a service application for managing the home network should be used.
  • the home network system has a mainstream uniform and passive system, and thus a system for actively and intelligently sharing, feeding back and controlling the situation information of the home network to the user is required.
  • home robots that can provide various services in the home associated with the present invention move using wheels, and provide information service through a wireless network, security and surveillance services in the home, data transmission and real-time data through a wireless communication device, and real time. It means a service robot that can be used in homes that provide monitoring services.
  • robots can move on their own, provide human-friendly voice and video information, and be competitive in terms of finding and delivering information to users. Taking advantage of these robots, research is being continued to provide convenience in various fields.
  • Patent Document 1 Korean Patent Application No. 2008-0067999: Event execution method and system for a robot synchronized with a mobile terminal
  • the present invention has been made to solve the above-described problems, the robot in controlling the home network devices, such as home appliances, sensor devices, media devices using a robot that can be connected to a cloud server or a mobile terminal and the robot in controlling the home network device
  • the robot in controlling the home network devices
  • the home network devices such as home appliances, sensor devices, media devices using a robot that can be connected to a cloud server or a mobile terminal
  • the robot in controlling the home network device
  • a technical problem to provide a home network system using a robot and a control method thereof to support extended functions by selecting available external devices.
  • a home network device unit including a plurality of electronic devices for transmitting and receiving data through a first network; A cloud server for transmitting and receiving data through a second network; And collect state information of the home network device connected to the first network, control its operation, select control logic to be performed by recognizing an input from the outside, and obtain data necessary for processing the selected control logic. And a home manager robot configured to process the obtained data.
  • the home manager robot may collect the corresponding data from the cloud server through the second network when it is determined that data necessary for executing the control logic is not stored therein.
  • the home manager robot may provide the acquired data to the electronic device through the first network to execute the control logic when it is determined that a device necessary for executing the control logic is not provided. can do.
  • the home network device unit may include a media device unit including an electronic device for playing at least one of audio and video data according to the control logic; A home appliance unit executing a preset function according to the control logic; And a sensor device unit providing sensing information to the home manager robot.
  • the home manager robot may further include: a recognizer configured to recognize an external input; A determination unit to determine the control logic to be performed according to the external input; A processor configured to acquire data necessary for the control logic processing, select a device to process the acquired data, and control the device to process the data; And a device selector which receives the data from the processing unit and delivers the data to a device to process the data.
  • the home manager robot may further include a multimedia DB storing data necessary for processing the control logic; And retrieving and providing the data from the multimedia DB according to a request of the processing unit, and when the data is not stored in the multimedia DB, requesting the data from the multimedia server through the second network and receiving the data. And a media selector to provide the processor to the processor.
  • the home manager robot may further include a media presenter configured to reproduce data received from the device selector using at least one of audio and video; And a robot behavior expression unit controlling the operation of the home manager robot according to the data received from the device selection unit.
  • the device selector may transmit the data to at least one of the media expression unit, the robot behavior expression unit, and the home network device unit connected to the first network according to a request of the processing unit.
  • the home network device unit A media device unit including an electronic device for playing at least one of audio and video data according to the control logic; A home appliance unit executing a preset function according to the control logic; And a sensor device unit providing sensing information to the home manager robot.
  • the step (c) may include: requesting, by the processor, data necessary for processing the control logic from the media selection unit; Determining, by the media selector, whether data necessary for processing the control logic is stored therein; If the data is not stored, requesting the data from the media selector to the cloud server through the second network; And providing, by the media selection unit, data received from the cloud server to the processing unit.
  • step (c) may include determining whether to process the data with an internal device; And a media expression unit that reproduces the received data as at least one of audio or video when the internal device processes the data, or a robot behavior expression unit that controls the operation of the home manager robot according to the data. Providing the data to the.
  • a home network device such as a home appliance device, a sensor device, or a media device can be controlled by using a robot that can be connected to a cloud server or a mobile terminal.
  • FIG. 1 is a block diagram of a home network system using a robot according to an embodiment of the present invention
  • FIG. 2 is a control block diagram of a home manager robot of a home network system using a robot according to an embodiment of the present invention.
  • FIG. 3 is a control flowchart of a home network system using a robot according to an embodiment of the present invention.
  • FIG. 4 is a control flowchart of a home network system using a robot according to another embodiment of the present invention.
  • FIG. 1 is a block diagram of a home network system using a robot 200 according to an embodiment of the present invention.
  • the home network system is connected to a home network device including a media device unit 300, a home appliance device unit 310, and a sensor device unit 320 through a first network.
  • a home manager robot 200 connected to the cloud server 100 and the remote terminal 150 through the second network.
  • the first network transmits and receives data between the home manager robot 200 and each home network device.
  • the first network may include various communication networks such as wireless Internet, mobile communication network, Wi-Fi, Bluetooth, RF communication.
  • the home network device connects to the home manager robot 200 through the first network, transmits and receives data, and processes the data received from the home manager robot 200.
  • the home network device may include a media device unit 300, a home appliance device 310, and a sensor device unit 320.
  • the media device unit 300 may process media data such as audio data and video data.
  • the media device unit 300 may play at least one of audio and video according to control logic executed by the home manager robot 200.
  • the media device unit 300 may receive and store media data from the home manager robot 200, play the media data, or transmit the media data to the home manager robot 200.
  • the media device unit 300 may include a TV, audio, a camera, and the like.
  • the home appliance unit 310 may be powered on or off according to control logic executed by the home manager robot 200 or perform functions assigned to the home appliance.
  • the home appliance unit 310 may include a lamp, an air conditioner, a cleaner, and the like.
  • the sensor device 320 detects a temperature, a movement, and the like and provides the detected information to the home manager robot 200.
  • the sensor device 320 may include a temperature sensor, a method sensor, and the like.
  • the second network transmits and receives data between the home manager robot 200 and an external device.
  • the second network may include a data communication network such as wireless internet and mobile communication network.
  • the cloud server 100 provides various services such as data storage and provision service, streaming service, and information provision service according to a request of the home manager robot 200 received through the second network.
  • the remote terminal 150 connects with the home manager robot 200 through the second network to provide status information of the home network device or transmit information input by the user to the home manager robot 200.
  • the remote terminal 150 may include a smartphone, a tablet, a PC, and the like.
  • the home manager robot 200 may transmit and receive data through the first network or the second network.
  • the home manager robot 200 performs a function as the server 100 of the home network system.
  • the home manager robot 200 collects data from the aforementioned home network devices or generates and transmits information for controlling the home network devices to the corresponding device. .
  • the home manager robot 200 may provide the information collected from the home network devices to the remote terminal 150 of the user, and control the home network devices according to the user's selection input to the remote terminal 150.
  • the home manager robot 200 provides various services such as data storage and providing service, streaming service, and information providing service to the cloud server 100.
  • the home manager robot 200 recognizes control logic to be performed according to a user input or an input through the sensor device unit 320.
  • the home manager robot 200 determines whether the control logic can be processed by itself, and selects an external device to be used for the control logic process when it is determined that the control logic cannot be processed by itself.
  • the home manager robot 200 accesses the selected external device and executes control logic to be performed.
  • the media device may request and receive necessary video data from the cloud server 100 and play back the received video data. You can select to command the media device to send or play. Therefore, the home manager robot 200 can also provide the video data that can not be provided by the home manager robot 200 by itself to collect and play the video information that is suitable for the current home situation without user intervention as video data. have.
  • FIG. 2 is a control block diagram of a home manager robot 200 of a home network system using a robot according to an embodiment of the present invention.
  • the home manager robot 200 includes a recognizer 210, a determiner 212, a processor 214, a media selector 216, a multimedia DB 218, and a device selector 220. ), A media expression unit 222 and a robot behavior expression unit 224.
  • the recognition unit 210 recognizes a user input or recognizes data input through an input means such as a sensor of the sensor device 320 or a camera of the media device 300. For example, temperature information input through the temperature sensor, motion information input through the security sensor, and user input information input to the user input unit may be recognized. In addition, the recognition unit 210 may recognize the emotional state of the user according to the expression of the user input to the camera.
  • the determination unit 212 determines the control logic to be performed based on the recognition result. For example, it may be recognized that the temperature of the boiler should be adjusted according to the temperature information, or it may be determined to output a danger signal according to the motion information input through the security sensor. In addition, it may be determined to control a specific home network device according to a user input, or control logic to control the home network device according to the emotional state of the user may be determined.
  • the processor 214 processes the control logic determined by the determiner 212.
  • the processor 214 collects data necessary to perform the control logic, selects a device to process the data, and transmits the selected data to the device selector 220.
  • the processor 214 may select necessary data from the multimedia DB 218 stored therein through the media selector 216.
  • the multimedia DB 218 is embedded in the home manager robot 200 and stores content data, gesture data, comment data, LED control data, and the like. If the necessary data is not stored in the multimedia DB 218, the media selector 216 requests the data from the cloud server 100 through the second network.
  • the device selector 220 receives the device selection information and the data to be provided to the device from the processor 214 and controls the data to be processed in the device.
  • the device selector 220 may process the corresponding data through the media expression unit 222 and the robot behavior expression unit 224 in the home manager robot 200 or provide the data to the home network device through the first network. You can control the data to be processed. For example, content data or comment data may be provided to the media presentation unit 222 so that the corresponding content or comment may be played.
  • the gesture data and the LED data may be provided to the robot behavior expression unit 224 to control the gesture and the LED of the home manager robot 200.
  • the device selector 220 may provide the data received from the processor 214 to the media device 300 through the first network to control the data to be processed.
  • the home manager robot 200 of the present invention may support an extended function by selecting available external devices in the case of a function that the robot cannot perform itself in performing control logic recognized from the outside. .
  • FIG. 3 is a control flowchart of a home network system using a robot according to an embodiment of the present invention.
  • the home manager robot 200 recognizes the surrounding situation through the recognizer 210 (S110).
  • the home manager robot 200 may recognize a user input or recognize data input through an input means such as a sensor of the sensor device 320 or a camera of the media device 300.
  • the determination unit 212 determines the control logic to be performed based on the recognition result of the recognition unit 210 (S112).
  • the home manager robot 200 may store setting information configured to execute specific control logic in a specific situation. For example, when the detected value of the sensor device is greater than or equal to a certain value, it may be set to output an alarm message, and may be set to display weather and news information at a specific time.
  • the determination unit 212 requests the execution of the control logic to the processing unit 214 side, and thus, the processing unit 214 determines data necessary for executing the control logic and an apparatus to process the corresponding data (S114).
  • the processing unit 214 requests data necessary for the media selection unit 216, and the media selection unit 216 determines whether data necessary for control logic is stored locally, that is, in the multimedia DB 218. It is determined (S116).
  • the media selecting unit 216 reads out the corresponding data and transmits the data to the processing unit 214 (S118). Accordingly, the processor 214 transfers the data provided by the media selector 216 to the device selector 220.
  • the media selector 216 requests and acquires necessary data from the cloud server 100 through the second network (S120).
  • the media selector 216 transfers data obtained from the outside to the processor 214, and the processor 214 transmits data provided by the media selector 216 to the device selector 220.
  • the device selector 220 determines whether the home manager robot 200 can process the data received from the processor 214 (S122), and processes the data directly within the home manager robot 200 when the data is processable (S124). ).
  • the media processing unit 222 or the robot behavior expression unit 224 of the home manager robot 200 may process data to provide a corresponding function.
  • a device to process the corresponding data is selected from the home network devices connected to the first network (S126), and the data is provided to the selected device. Control to process the data in the corresponding device (S128).
  • FIG. 4 is a control flowchart of a home network system using a robot according to another embodiment of the present invention, which illustrates a case in which the home manager robot 200 provides data according to a user request.
  • the home manager robot 200 recognizes the surrounding situation through the recognizer 210 (S210).
  • the user's request input through the input unit may be recognized (S212).
  • the determination unit 212 determines the control logic to be executed according to the user's request recognized by the recognition unit 210, and provides the determination to the processing unit 214.
  • the processor 214 requests multimedia information necessary for the media selector 216 according to the control logic to be executed, and the media selector 216 determines whether the corresponding information exists in the local area (S214).
  • the media selector 216 reads out the data and transmits the data to the processor 214 (S216).
  • the media selector 216 requests and acquires necessary data from the cloud server 100 through the second network (S218).
  • the media selector 216 transfers data obtained from the outside to the processor 214.
  • the processor 214 determines whether the user's request is to be processed and expressed in the home manager robot 200 or to be reproduced and expressed through a peripheral device connected to the first network to provide media data to the device selector 220. (S220).
  • the device selector 220 When processing and expressing in the home manager robot 200, the device selector 220 provides media data to at least one of the media presenter 222 and the robot behavior presenter 224 to display the home manager robot 200. Play the multimedia and control to express the robot behavior (S222).
  • the processor 214 determines whether to express the user's request alone in the peripheral device or to express the home manager robot 200 and the peripheral device in cooperation with each other (S224).
  • the device selector 220 controls the user to select a required peripheral device (S226), and then provides media data to the peripheral device to play the data in the peripheral device (S228). ).
  • the step S226 may be omitted and the media may be immediately provided to the peripheral device for playback.
  • the device selector 220 When the home manager robot 200 and the peripheral device are interoperated with each other, the device selector 220 provides media data to at least one of the media presenter 222 and the robot behavior presenter 224 to provide the home manager robot. While controlling the multimedia at 200 and expressing the robot behavior, the media data is provided to the necessary peripheral device to control the media data at the peripheral device at step S222.
  • the present invention controls the home network devices such as home appliances, sensor devices, media devices and the like by using a robot that can be connected to a cloud server or a mobile terminal, and uses a function that the robot cannot perform itself in controlling the home network device.
  • the present invention can be used to provide a home network system using a robot and a method of controlling the same, by selecting possible external devices to support extended functions.
  • cloud server 150 remote terminal
  • media selection unit 218 multimedia DB
  • robot behavior expression unit 300 media device unit

Abstract

The present invention relates to a home network system using a robot and a control method thereof, and the present system comprises: a home network device unit including a plurality of electronic devices for transmitting and receiving data over a first network; a cloud server for transmitting and receiving data over a second network; and a home manager robot for collecting state information of the home network device unit connected to the first network and controlling the operation thereof, determining a control logic to be performed by recognizing an input from the outside, collecting relevant data over the second network from the cloud server if it is determined that data required to execute the control logic is not stored therein, and providing the collected data over the first network to the electronic device and executing the control logic if it is determined that devices required to execute the control logic are not equipped. Accordingly, it is possible to control home network devices, such as electronic devices, sensor devices, and media devices, using a robot connectable to a cloud server or a mobile terminal, and to select available external devices, thereby being capable of supporting extended functions if the robot is unable to perform a function autonomously in controlling the home network devices.

Description

로봇을 이용한 홈 네트워크 시스템 및 그 제어방법Home network system using robot and its control method
본 발명은 로봇을 이용한 홈 네트워크 시스템 및 그 제어방법에 관한 것으로서, 보다 상세하게는, 클라우드 서버 혹은 모바일 단말과 접속 가능한 로봇을 이용하여 가전 장치, 센서 장치, 미디어 장치 등의 홈 네트워크 장치들을 제어하고 홈 네트워크 장치를 제어함에 있어서 로봇이 자체적으로 수행할 수 없는 기능의 경우 이용 가능한 외부 장치들을 선택하여 확장된 기능을 지원할 수 있도록 하는 로봇을 이용한 홈 네트워크 시스템 및 그 제어방법에 관한 것이다.The present invention relates to a home network system using a robot and a control method thereof, and more particularly, to control home network devices such as home appliances, sensor devices, and media devices using a robot that can be connected to a cloud server or a mobile terminal. The present invention relates to a home network system using a robot and a method of controlling the same, in which a robot cannot perform its own function in controlling a home network device to support extended functions by selecting available external devices.
홈 네트워크 시스템은 가정 내 전자 장치들을 내부 네트워크로 연결하여 통합 관리할 수 있도록 한 것이다. 종래의 홈 네트워크 시스템에서 사용자가 홈 네트워크의 장치를 제어하거나 정보를 확인하기 위해서는 홈 네트워크를 관리하는 서비스 애플리케이션이 설치된 PC, 혹은, 스마트폰 등의 인터페이스를 이용해야 한다. The home network system is to connect and manage electronic devices in a home to an internal network. In a conventional home network system, in order for a user to control a device of a home network or to check information, an interface such as a PC or a smart phone installed with a service application for managing the home network should be used.
이와 같이, 종래 기술에 따른 홈 네트워크 시스템은 획일적이고 수동적인 시스템이 주류를 이루고 있어, 홈 네트워크의 상황정보를 능동적이고 지능적으로 사용자에게 공유하고 피드백하여 제어하는 시스템이 필요하다.As described above, the home network system according to the prior art has a mainstream uniform and passive system, and thus a system for actively and intelligently sharing, feeding back and controlling the situation information of the home network to the user is required.
한편, 로봇 분야의 경우 공장에서 사람의 접근이 통제된 지역에 설치되어 인간을 대신해서 반복작업이나 힘든 작업을 대신해 주던 산업용 로봇 시장의 성장이 포화상태에 이르러 성장이 둔화됨에 따라 다수의 대중들이 일상 생활 속에서 손쉽게 활용할 수 있도록 로봇을 하나의 기전기기 혹은 개인용 상품으로 개발하기 위한 노력이 활발히 진행되고 있다.On the other hand, in the case of the robot field, the mass growth of the industrial robot market, which was installed in factories with controlled access by humans and replaced the repetitive or hard work on behalf of humans, saturated and slowed down. Efforts are being made to develop robots as a machine or personal product so that they can be easily used in everyday life.
다양한 로봇 중 본 발명과 연관되는 가정에서 다양한 서비스를 제공할 수 있는 홈 로봇은 바퀴를 사용하여 이동하면서 무선 네트워크를 통한 정보 서비스, 가정 내의 보안 및 감시 서비스, 무선 정보통신 기기를 통한 데이터 전송 및 실시간 모니터링 서비스 등을 제공하는 가정에서 사용할 수 있는 서비스 로봇을 의미한다. Among the various robots, home robots that can provide various services in the home associated with the present invention move using wheels, and provide information service through a wireless network, security and surveillance services in the home, data transmission and real-time data through a wireless communication device, and real time. It means a service robot that can be used in homes that provide monitoring services.
개인용 컴퓨터와 비교하면 로봇 스스로 이동할 수 있고 사람에게 친숙한 음성 및 영상 정보를 제공할 수 있으며 정보를 스스로 찾아 사용자에게 전달할 수 있다는 측면에서 경쟁력을 갖게 된다. 이러한 로봇의 장점을 살려 다양한 분야에서 편의를 제공하기 위한 연구가 계속되고 있다.Compared to personal computers, robots can move on their own, provide human-friendly voice and video information, and be competitive in terms of finding and delivering information to users. Taking advantage of these robots, research is being continued to provide convenience in various fields.

선행기술문헌Prior art literature
(특허문헌 1) 한국특허출원 제2008-0067999호 : 휴대단말기와 동기화된 로봇의 이벤트 실행방법 및 그 시스템(Patent Document 1) Korean Patent Application No. 2008-0067999: Event execution method and system for a robot synchronized with a mobile terminal
본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로서, 클라우드 서버 혹은 모바일 단말과 접속 가능한 로봇을 이용하여 가전 장치, 센서 장치, 미디어 장치 등의 홈 네트워크 장치들을 제어하고 홈 네트워크 장치를 제어함에 있어서 로봇이 자체적으로 수행할 수 없는 기능의 경우 이용 가능한 외부 장치들을 선택하여 확장된 기능을 지원할 수 있도록 하는 로봇을 이용한 홈 네트워크 시스템 및 그 제어방법을 제공하는데 그 기술적 과제가 있다.The present invention has been made to solve the above-described problems, the robot in controlling the home network devices, such as home appliances, sensor devices, media devices using a robot that can be connected to a cloud server or a mobile terminal and the robot in controlling the home network device In the case of a function that cannot be performed by itself, there is a technical problem to provide a home network system using a robot and a control method thereof to support extended functions by selecting available external devices.

상술한 과제를 해결하기 위한 본 발명의 일 측면에 따르면, 제1네트워크를 통해 데이터를 송수신하는 다수의 전자장치를 포함하는 홈 네트워크 장치부; 제2네트워크를 통해 데이터를 송수신하는 클라우드 서버; 및 상기 제1네트워크에 접속된 상기 홈 네트워크 장치부의 상태정보를 수집하고 그 동작을 제어하며, 외부로부터의 입력을 인식하여 수행해야 할 제어 로직을 선택하고, 상기 선택된 제어 로직 처리에 필요한 데이터를 획득하고, 획득된 데이터를 처리하는 홈 매니저 로봇;을 포함하는 홈 네트워크 시스템이 제공된다.According to an aspect of the present invention for solving the above problems, a home network device unit including a plurality of electronic devices for transmitting and receiving data through a first network; A cloud server for transmitting and receiving data through a second network; And collect state information of the home network device connected to the first network, control its operation, select control logic to be performed by recognizing an input from the outside, and obtain data necessary for processing the selected control logic. And a home manager robot configured to process the obtained data.
이 때,상기 홈 매니저 로봇은, 상기 제어 로직 실행 시 필요한 데이터가 내부에 저장되어 있지 않은 것으로 확인된 경우 상기 제2네트워크를 통해 상기 클라우드 서버로부터 해당 데이터를 수집할 수 있다.In this case, the home manager robot may collect the corresponding data from the cloud server through the second network when it is determined that data necessary for executing the control logic is not stored therein.
또한 상기 상기 홈 매니저 로봇은, 상기 제어 로직 실행 시 필요한 장치가 구비되어 있지 않은 것으로 확인된 경우 상기 제1네트워크를 통해 상기 획득된 데이터를 상기 전자장치에 제공하여 상기 제어 로직을 실행하는 것을 특징으로 할 수 있다.The home manager robot may provide the acquired data to the electronic device through the first network to execute the control logic when it is determined that a device necessary for executing the control logic is not provided. can do.
여기서, 상기 홈 네트워크 장치부는, 상기 제어 로직에 따라 오디오 및 비디오 데이터 중 적어도 어느 하나를 재생하는 전자장치를 포함하는 미디어 장치부; 상기 제어 로직에 따라 기 설정된 기능을 실행하는 가전 장치부; 및 상기 홈 매니저 로봇에 감지 정보를 제공하는 센서 장치부;를 포함할 수 있다.Here, the home network device unit may include a media device unit including an electronic device for playing at least one of audio and video data according to the control logic; A home appliance unit executing a preset function according to the control logic; And a sensor device unit providing sensing information to the home manager robot.
그리고, 상기 홈 매니저 로봇은, 외부 입력을 인식하는 인식부; 상기 외부 입력에 따라 수행해야 할 상기 제어 로직을 판단하는 판단부; 상기 제어 로직 처리에 필요한 데이터를 획득하고 획득된 데이터를 처리할 장치를 선택하여 해당 장치에서 상기 데이터를 처리하도록 제어하는 처리부; 및 상기 처리부로부터 상기 데이터를 전달받아 상기 데이터를 처리할 장치에 전달하는 장치 선택부;를 포함할 수 있다.The home manager robot may further include: a recognizer configured to recognize an external input; A determination unit to determine the control logic to be performed according to the external input; A processor configured to acquire data necessary for the control logic processing, select a device to process the acquired data, and control the device to process the data; And a device selector which receives the data from the processing unit and delivers the data to a device to process the data.
또한, 상기 홈 매니저 로봇은, 상기 제어 로직 처리에 필요한 데이터가 저장된 멀티미디어 DB; 및 상기 처리부의 요청에 따라 상기 멀티미디어 DB로부터 상기 데이터를 검색하여 제공하고, 상기 멀티미디어 DB에 상기 데이터가 저장되어 있지 않은 경우 상기 제2네트워크를 통해 상기 클라우드 서버 측에 해당 데이터를 요청하여 수신된 데이터를 상기 처리부에 제공하는 미디어 선택부;를 포함할 수 있다.The home manager robot may further include a multimedia DB storing data necessary for processing the control logic; And retrieving and providing the data from the multimedia DB according to a request of the processing unit, and when the data is not stored in the multimedia DB, requesting the data from the multimedia server through the second network and receiving the data. And a media selector to provide the processor to the processor.
또한, 상기 홈 매니저 로봇은, 상기 장치 선택부로부터 수신된 데이터를 오디오 또는 비디오 중 적어도 어느 하나로 재생하는 미디어 표현부; 및 상기 장치 선택부로부터 수신된 데이터에 따라 상기 홈 매니저 로봇의 동작을 제어하는 로봇행위 표현부;를 포함할 수 있다.The home manager robot may further include a media presenter configured to reproduce data received from the device selector using at least one of audio and video; And a robot behavior expression unit controlling the operation of the home manager robot according to the data received from the device selection unit.
그리고, 상기 장치 선택부는, 상기 처리부의 요청에 따라 상기 데이터를 상기 미디어 표현부, 상기 로봇행위 표현부 및 상기 제1네트워크에 접속된 상기 홈 네트워크 장치부 중 적어도 어느 하나에 전달할 수 있다.The device selector may transmit the data to at least one of the media expression unit, the robot behavior expression unit, and the home network device unit connected to the first network according to a request of the processing unit.
상술한 과제를 해결하기 위한 본 발명의 다른 측면에 따르면, (a) 인식부를 통해 외부 입력을 인식하는 단계; (b) 판단부에서 상기 외부 입력에 따라 수행해야 할 상기 제어 로직을 판단하는 단계; (c) 처리부에서 상기 제어 로직 처리에 필요한 데이터를 획득하고 획득된 데이터를 처리할 장치를 선택하여 내부적으로 처리하거나 또는 제1네트워크에 연결된 홈 네트워크 장치에서 상기 데이터를 처리하도록 제어하는 단계; 및 (d) 장치 선택부에서 상기 처리부로부터 상기 데이터를 전달받아 상기 데이터를 처리할 장치에 전달하는 단계;를 포함하는 것을 특징으로 하는 홈 네트워크 시스템의 제어방법이 제공된다.According to another aspect of the present invention for solving the above problems, (a) recognizing the external input through the recognition unit; (b) determining, by the determination unit, the control logic to be performed according to the external input; (c) a process of acquiring data required for the control logic processing by the processor and selecting a device to process the acquired data to process the data internally or to process the data in a home network device connected to a first network; And (d) receiving the data from the processing unit in a device selection unit and delivering the data to a device to process the data.
여기서, 상기 홈 네트워크 장치부는; 상기 제어 로직에 따라 오디오 및 비디오 데이터 중 적어도 어느 하나를 재생하는 전자장치를 포함하는 미디어 장치부; 상기 제어 로직에 따라 기 설정된 기능을 실행하는 가전 장치부; 및 상기 홈 매니저 로봇에 감지 정보를 제공하는 센서 장치부;를 포함할 수 있다.Here, the home network device unit; A media device unit including an electronic device for playing at least one of audio and video data according to the control logic; A home appliance unit executing a preset function according to the control logic; And a sensor device unit providing sensing information to the home manager robot.
그리고, 상기 (c) 단계는, 상기 처리부에서 미디어 선택부 측에 상기 제어 로직 처리에 필요한 데이터를 요청하는 단계; 상기 미디어 선택부가 상기 제어 로직 처리에 필요한 데이터가 내부에 저장되어 있는지 여부를 판단하는 단계; 상기 데이터가 저장되어 있지 않은 경우 상기 미디어 선택부가 제2네트워크를 통해 클라우드 서버 측에 해당 데이터를 요청하는 단계; 및 상기 미디어 선택부가 상기 클라우드 서버로부터 수신된 데이터를 상기 처리부에 제공하는 단계;를 포함할 수 있다.The step (c) may include: requesting, by the processor, data necessary for processing the control logic from the media selection unit; Determining, by the media selector, whether data necessary for processing the control logic is stored therein; If the data is not stored, requesting the data from the media selector to the cloud server through the second network; And providing, by the media selection unit, data received from the cloud server to the processing unit.
또한, 상기 (c) 단계는, 상기 데이터를 내부 장치로 처리할지 여부를 판단하는 단계; 및 상기 내부 장치로 처리할 경우, 상기 수신된 데이터를 오디오 또는 비디오 중 적어도 어느 하나로 재생하는 미디어 표현부 또는, 상기 데이터에 따라 상기 홈 매니저 로봇의 동작을 제어하는 로봇행위 표현부 중 적어도 어느 한 측에 상기 데이터를 제공하는 단계;를 포함할 수 있다.In addition, step (c) may include determining whether to process the data with an internal device; And a media expression unit that reproduces the received data as at least one of audio or video when the internal device processes the data, or a robot behavior expression unit that controls the operation of the home manager robot according to the data. Providing the data to the.
본 발명의 로봇을 이용한 홈 네트워크 시스템 및 그 제어방법에 따르면, 클라우드 서버 혹은 모바일 단말과 접속 가능한 로봇을 이용하여 가전 장치, 센서 장치, 미디어 장치 등의 홈 네트워크 장치들을 제어할 수 있다.According to the home network system using the robot of the present invention and a control method thereof, a home network device such as a home appliance device, a sensor device, or a media device can be controlled by using a robot that can be connected to a cloud server or a mobile terminal.
또한, 본 발명의 로봇을 이용한 홈 네트워크 시스템 및 그 제어방법에 따르면, 홈 네트워크 장치를 제어함에 있어서 로봇이 자체적으로 수행할 수 없는 기능의 경우 이용 가능한 외부 장치들을 선택하여 확장된 기능을 지원할 수 있다.In addition, according to the home network system using the robot of the present invention and a control method thereof, in the case of a function that the robot cannot perform itself in controlling the home network device, it is possible to support an extended function by selecting available external devices. .
도 1은 본 발명의 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 구성도1 is a block diagram of a home network system using a robot according to an embodiment of the present invention
도 2는 본 발명의 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 홈 매니저 로봇의 제어 블럭도2 is a control block diagram of a home manager robot of a home network system using a robot according to an embodiment of the present invention.
도 3은 본 발명의 일 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 제어 흐름도3 is a control flowchart of a home network system using a robot according to an embodiment of the present invention.
도 4는 본 발명의 다른 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 제어 흐름도4 is a control flowchart of a home network system using a robot according to another embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 보다 상세히 설명하기로 한다. 첨부 도면을 참조하여 설명함에 있어 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the description with reference to the accompanying drawings, the same or corresponding components will be given the same reference numerals and redundant description thereof will be omitted.
도 1은 본 발명의 실시예에 따른 로봇(200)을 이용한 홈 네트워크 시스템의 구성도이다.1 is a block diagram of a home network system using a robot 200 according to an embodiment of the present invention.
도 1에 도시된 바와 같이 본 발명에 따른 홈 네트워크 시스템은, 제1네트워크를 통해 미디어 장치부(300), 가전 장치부(310), 센서 장치부(320)를 포함하는 홈 네트워크 장치와 접속되고 제2네트워크를 통해 클라우드 서버(100) 및 리모트 단말(150)과 접속되는 홈 매니저 로봇(200)을 포함한다.As shown in FIG. 1, the home network system according to the present invention is connected to a home network device including a media device unit 300, a home appliance device unit 310, and a sensor device unit 320 through a first network. And a home manager robot 200 connected to the cloud server 100 and the remote terminal 150 through the second network.
제1네트워크는 홈 매니저 로봇(200)과 각 홈 네트워크 장치 간의 데이터를 송수신한다. 제1네트워크는 무선 인터넷, 이동통신망, 와이파이, 블루투스, RF통신 등의 다양한 통신 네트워크를 포함할 수 있다.The first network transmits and receives data between the home manager robot 200 and each home network device. The first network may include various communication networks such as wireless Internet, mobile communication network, Wi-Fi, Bluetooth, RF communication.
홈 네트워크 장치는 제1네트워크를 통해 홈 매니저 로봇(200)과 접속하여 데이터를 송수신하고, 홈 매니저 로봇(200)에서 수신된 데이터를 처리한다. 이러한 홈 네트워크 장치는, 미디어 장치부(300), 가전 장치부(310), 센서 장치부(320)를 포함할 수 있다.The home network device connects to the home manager robot 200 through the first network, transmits and receives data, and processes the data received from the home manager robot 200. The home network device may include a media device unit 300, a home appliance device 310, and a sensor device unit 320.
미디어 장치부(300)는 오디오 데이터, 비디오 데이터 등의 미디어 데이터를 처리할 수 있다. 미디어 장치부(300)는 홈 매니저 로봇(200)에 의해 실행되는 제어 로직에 따라 오디오 및 비디오 중 적어도 어느 하나를 재생할 수 있다. 또한, 미디어 장치부(300)는 홈 매니저 로봇(200)으로부터 미디어 데이터를 수신하여 저장 및 재생하거나, 혹은, 홈 매니저 로봇(200) 측에 미디어 데이터를 송신할 수 있다. 이러한 미디어 장치부(300)는 TV, 오디오, 카메라 등을 포함할 수 있다.The media device unit 300 may process media data such as audio data and video data. The media device unit 300 may play at least one of audio and video according to control logic executed by the home manager robot 200. In addition, the media device unit 300 may receive and store media data from the home manager robot 200, play the media data, or transmit the media data to the home manager robot 200. The media device unit 300 may include a TV, audio, a camera, and the like.
가전 장치부(310)는 홈 매니저 로봇(200)에 의해 실행되는 제어 로직에 따라 전원이 온/오프 되거나, 해당 가전 장치에 부여된 기능들을 수행할 수 있다. 이러한 가전 장치부(310)는 전등, 에어컨, 청소기 등을 포함할 수 있다.The home appliance unit 310 may be powered on or off according to control logic executed by the home manager robot 200 or perform functions assigned to the home appliance. The home appliance unit 310 may include a lamp, an air conditioner, a cleaner, and the like.
센서 장치부(320)는 온도, 움직임 등을 감지하고 감지된 정보를 홈 매니저 로봇(200) 측에 제공한다. 이러한 센서 장치부(320)는 온도센서, 방법 센서 등을 포함할 수 있다.The sensor device 320 detects a temperature, a movement, and the like and provides the detected information to the home manager robot 200. The sensor device 320 may include a temperature sensor, a method sensor, and the like.
제2네트워크는 홈 매니저 로봇(200)과 외부 장치 간의 데이터를 송수신한다. 제2네트워크는 무선 인터넷, 이동통신망 등의 데이터 통신 네트워크를 포함할 수 있다.The second network transmits and receives data between the home manager robot 200 and an external device. The second network may include a data communication network such as wireless internet and mobile communication network.
클라우드 서버(100)는 제2네트워크를 통해 수신된 홈 매니저 로봇(200)의 요청에 따라, 데이터 저장 및 제공 서비스, 스트리밍 서비스, 정보제공 서비스 등, 다양한 서비스를 제공한다.The cloud server 100 provides various services such as data storage and provision service, streaming service, and information provision service according to a request of the home manager robot 200 received through the second network.
리모트 단말(150)은 제2네트워크를 통해 홈 매니저 로봇(200)과 접속하여 홈 네트워크 장치의 상태정보를 제공하거나 사용자가 입력한 정보를 홈 매니저 로봇(200) 측에 송신한다. 리모트 단말(150)은 스마트폰, 태블릿, PC 등을 포함할 수 있다.The remote terminal 150 connects with the home manager robot 200 through the second network to provide status information of the home network device or transmit information input by the user to the home manager robot 200. The remote terminal 150 may include a smartphone, a tablet, a PC, and the like.
홈 매니저 로봇(200)은 제1네트워크 혹은 제2네트워크를 통해 데이터를 송수신할 수 있다. 홈 매니저 로봇(200)은 홈 네트워크 시스템의 서버(100)로서의 기능을 수행하는 것으로서, 전술한 홈 네트워크 장치들로부터 데이터를 수집하거나, 홈 네트워크 장치들을 제어하기 위한 정보를 생성하여 해당 장치에 전송한다. The home manager robot 200 may transmit and receive data through the first network or the second network. The home manager robot 200 performs a function as the server 100 of the home network system. The home manager robot 200 collects data from the aforementioned home network devices or generates and transmits information for controlling the home network devices to the corresponding device. .
홈 매니저 로봇(200)은 홈 네트워크 장치들로부터 수집된 정보를 사용자의 리모트 단말(150)로 제공하고, 리모트 단말(150)로 입력된 사용자의 선택에 따라 홈 네트워크 장치들을 제어할 수 있다.The home manager robot 200 may provide the information collected from the home network devices to the remote terminal 150 of the user, and control the home network devices according to the user's selection input to the remote terminal 150.
홈 매니저 로봇(200)은 클라우드 서버(100) 측에 데이터 저장 및 제공 서비스, 스트리밍 서비스, 정보제공 서비스 등, 다양한 서비스를 제공한다.The home manager robot 200 provides various services such as data storage and providing service, streaming service, and information providing service to the cloud server 100.
홈 매니저 로봇(200)은 사용자 입력 혹은 센서 장치부(320)를 통한 입력에 따라 수행해야 할 제어 로직을 인식한다. 홈 매니저 로봇(200)은 제어 로직을 자체적으로 처리할 수 있는지 여부를 판단하고, 자체적으로 처리할 수 없는 것으로 판단된 경우 제어 로직 처리에 사용할 외부 장치를 선택한다. 홈 매니저 로봇(200)은 선택된 외부 장치에 접속하여 수행하고자 했던 제어 로직을 실행한다.The home manager robot 200 recognizes control logic to be performed according to a user input or an input through the sensor device unit 320. The home manager robot 200 determines whether the control logic can be processed by itself, and selects an external device to be used for the control logic process when it is determined that the control logic cannot be processed by itself. The home manager robot 200 accesses the selected external device and executes control logic to be performed.
예컨대, 홈 매니저 로봇(200)이 현재 홈 내 상황에 적합한 특정 정보를 동영상으로 제공하고자 하는 경우 필요한 동영상 데이터를 클라우드 서버(100) 측에 요청하여 수신하고, 수신된 동영상 데이터를 재생할 수 있는 미디어 장치를 선택하여 해당 미디어 장치에 송신 및 재생을 명령할 수 있다. 이에, 홈 매니저 로봇(200)이 자체적으로 제공할 수 없는 동영상도 홈 매니저 로봇(200)이 자체적으로 수집하여 재생 처리하도록 함으로써 사용자의 개입 없이 현재 홈 내 상황에 적합한 정보를 동영상 데이터로 제공받을 수 있다.For example, when the home manager robot 200 wants to provide specific information suitable for a current home situation as a video, the media device may request and receive necessary video data from the cloud server 100 and play back the received video data. You can select to command the media device to send or play. Therefore, the home manager robot 200 can also provide the video data that can not be provided by the home manager robot 200 by itself to collect and play the video information that is suitable for the current home situation without user intervention as video data. have.
도 2는 본 발명의 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 홈 매니저 로봇(200)의 제어 블럭도이다.2 is a control block diagram of a home manager robot 200 of a home network system using a robot according to an embodiment of the present invention.
도 2에 도시된 바와 같이, 홈 매니저 로봇(200)은 인식부(210), 판단부(212), 처리부(214), 미디어 선택부(216), 멀티미디어 DB(218), 장치 선택부(220), 미디어 표현부(222) 및 로봇행위 표현부(224)를 포함한다.As shown in FIG. 2, the home manager robot 200 includes a recognizer 210, a determiner 212, a processor 214, a media selector 216, a multimedia DB 218, and a device selector 220. ), A media expression unit 222 and a robot behavior expression unit 224.
인식부(210)는 사용자의 입력을 인식하거나, 센서 장치부(320)의 센서, 미디어 장치부(300)의 카메라 등의 입력 수단을 통해 입력되는 데이터를 인식한다. 예컨대, 온도 센서를 통해 입력되는 온도 정보, 방범 센서를 통해 입력되는 움직임 정보, 사용자 입력부로 입력된 사용자 입력정보를 인식할 수 있다. 또한, 인식부(210)는 카메라로 입력된 사용자의 표정에 따라 사용자의 감정상태를 인식하는 것도 가능하다.The recognition unit 210 recognizes a user input or recognizes data input through an input means such as a sensor of the sensor device 320 or a camera of the media device 300. For example, temperature information input through the temperature sensor, motion information input through the security sensor, and user input information input to the user input unit may be recognized. In addition, the recognition unit 210 may recognize the emotional state of the user according to the expression of the user input to the camera.
판단부(212)는 인식결과에 기초하여 수행해야 할 제어 로직을 판단한다. 예컨대, 온도 정보에 따라 보일러의 온도를 조절해야 함을 인식하거나, 방범 센서를 통해 입력된 움직임 정보에 따라 위험 신호를 출력할 것을 판단할 수 있다. 또한, 사용자의 입력에 따라 특정 홈 네트워크 장치를 제어할 것을 판단하거나, 사용자의 감정상태에 따라 그에 따른 홈 네트워크 장치를 제어할 제어 로직을 판단할 수 있다.The determination unit 212 determines the control logic to be performed based on the recognition result. For example, it may be recognized that the temperature of the boiler should be adjusted according to the temperature information, or it may be determined to output a danger signal according to the motion information input through the security sensor. In addition, it may be determined to control a specific home network device according to a user input, or control logic to control the home network device according to the emotional state of the user may be determined.
처리부(214)는 판단부(212)에서 판단된 제어 로직을 처리한다. 처리부(214)는 제어 로직을 수행하는데 필요한 데이터를 수집하고 해당 데이터를 처리할 장치를 선택하여 장치 선택부(220) 측에 전달한다. 여기서, 처리부(214)는 미디어 선택부(216)를 통해 내부에 저장된 멀티미디어 DB(218)로부터 필요한 데이터를 선택할 수 있다. 멀티미디어 DB(218)는 홈 매니저 로봇(200)에 내장되며, 컨텐츠 데이터, 제스처 데이터, 멘트 데이터 및 LED 제어 데이터 등이 저장된다. 미디어 선택부(216)는 필요한 데이터가 멀티미디어 DB(218)에 저장되어 있지 않은 경우, 제2네트워크를 통해 클라우드 서버(100) 측에 해당 데이터를 요청한다.The processor 214 processes the control logic determined by the determiner 212. The processor 214 collects data necessary to perform the control logic, selects a device to process the data, and transmits the selected data to the device selector 220. Here, the processor 214 may select necessary data from the multimedia DB 218 stored therein through the media selector 216. The multimedia DB 218 is embedded in the home manager robot 200 and stores content data, gesture data, comment data, LED control data, and the like. If the necessary data is not stored in the multimedia DB 218, the media selector 216 requests the data from the cloud server 100 through the second network.
장치 선택부(220)는 처리부(214)로부터 장치 선택정보와 해당 장치에 제공할 데이터를 전달받아 해당 장치에서 데이터가 처리되도록 제어한다. 장치 선택부(220)는 홈 매니저 로봇(200) 내부의 미디어 표현부(222), 로봇 행위 표현부(224)를 통해 해당 데이터가 처리되도록 하거나, 제1네트워크를 통해 홈 네트워크 장치에 제공하여 해당 데이터가 처리되도록 제어할 수 있다. 예컨대, 컨텐츠 데이터 혹은 멘트 데이터의 경우 미디어 표현부(222)에 제공하여 해당 컨텐츠 혹은 멘트가 재생되도록 할 수 있다. 그리고, 제스처 데이터, LED 데이터의 경우 로봇 행위 표현부(224)에 제공하여 홈 매니저 로봇(200)의 제스처와 LED를 제어할 수 있다. 또한, 장치 선택부(220)는 처리부(214)로부터 전달받은 데이터를 제1네트워크를 통해 미디어 장치부(300)에 제공하여 해당 데이터가 처리되도록 제어할 수 있다.The device selector 220 receives the device selection information and the data to be provided to the device from the processor 214 and controls the data to be processed in the device. The device selector 220 may process the corresponding data through the media expression unit 222 and the robot behavior expression unit 224 in the home manager robot 200 or provide the data to the home network device through the first network. You can control the data to be processed. For example, content data or comment data may be provided to the media presentation unit 222 so that the corresponding content or comment may be played. In addition, the gesture data and the LED data may be provided to the robot behavior expression unit 224 to control the gesture and the LED of the home manager robot 200. In addition, the device selector 220 may provide the data received from the processor 214 to the media device 300 through the first network to control the data to be processed.
이러한 구성에 따라, 본 발명의 홈 매니저 로봇(200)은 외부로부터 인식된 제어 로직을 수행함에 있어서 로봇이 자체적으로 수행할 수 없는 기능의 경우 이용 가능한 외부 장치들을 선택하여 확장된 기능을 지원할 수 있다.According to this configuration, the home manager robot 200 of the present invention may support an extended function by selecting available external devices in the case of a function that the robot cannot perform itself in performing control logic recognized from the outside. .
도 3은 본 발명의 일 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 제어 흐름도이다.3 is a control flowchart of a home network system using a robot according to an embodiment of the present invention.
홈 매니저 로봇(200)은 인식부(210)를 통해 주변의 상황을 인식한다(S110). 홈 매니저 로봇(200)은 사용자의 입력을 인식하거나, 센서 장치부(320)의 센서, 미디어 장치부(300)의 카메라 등의 입력 수단을 통해 입력된 데이터를 인식할 수 있다.The home manager robot 200 recognizes the surrounding situation through the recognizer 210 (S110). The home manager robot 200 may recognize a user input or recognize data input through an input means such as a sensor of the sensor device 320 or a camera of the media device 300.
판단부(212)는 인식부(210)의 인식결과에 기초하여 수행해야 할 제어 로직을 판단한다(S112). 여기서, 홈 매니저 로봇(200)에는 특정 상황에서 특정 제어 로직을 실행하도록 설정한 설정정보가 저장될 수 있다. 예컨대, 센서 장치의 감지값이 특정 값 이상이면 경보 메시지를 출력하도록 설정될 수 있으며, 특정 시간에는 날씨, 뉴스 정보를 표시하도록 설정될 수 있다.The determination unit 212 determines the control logic to be performed based on the recognition result of the recognition unit 210 (S112). Here, the home manager robot 200 may store setting information configured to execute specific control logic in a specific situation. For example, when the detected value of the sensor device is greater than or equal to a certain value, it may be set to output an alarm message, and may be set to display weather and news information at a specific time.
판단부(212)는 처리부(214) 측에 제어 로직의 실행을 요청하며, 이에, 처리부(214)는 제어 로직 실행 시 필요한 데이터와 해당 데이터를 처리할 장치를 판단한다(S114).The determination unit 212 requests the execution of the control logic to the processing unit 214 side, and thus, the processing unit 214 determines data necessary for executing the control logic and an apparatus to process the corresponding data (S114).
처리부(214)는 미디어 선택부(216) 측에 필요한 데이터를 요청하며, 이에, 미디어 선택부(216)는 제어 로직에 필요한 데이터가 로컬, 즉, 내부의 멀티미디어 DB(218)에 저장되어 있는지를 판단한다(S116).The processing unit 214 requests data necessary for the media selection unit 216, and the media selection unit 216 determines whether data necessary for control logic is stored locally, that is, in the multimedia DB 218. It is determined (S116).
판단결과, 내부의 멀티미디어 DB(218)에 필요한 데이터가 저장되어 있는 경우 미디어 선택부(216)는 해당 데이터를 독출하여 처리부(214)로 전달한다(S118). 이에, 처리부(214)는 미디어 선택부(216)에서 제공하는 데이터를 장치 선택부(220)로 전달한다.As a result of determination, when necessary data is stored in the internal multimedia DB 218, the media selecting unit 216 reads out the corresponding data and transmits the data to the processing unit 214 (S118). Accordingly, the processor 214 transfers the data provided by the media selector 216 to the device selector 220.
로컬 영역에 데이터가 저장되어 있지 않은 경우 미디어 선택부(216)는 제2네트워크를 통해 클라우드 서버(100) 측에 필요한 데이터를 요청하여 획득한다(S120). 미디어 선택부(216)는 외부로부터 획득한 데이터를 처리부(214)로 전달하며, 처리부(214)는 미디어 선택부(216)에서 제공하는 데이터를 장치 선택부(220)로 전달한다.If the data is not stored in the local area, the media selector 216 requests and acquires necessary data from the cloud server 100 through the second network (S120). The media selector 216 transfers data obtained from the outside to the processor 214, and the processor 214 transmits data provided by the media selector 216 to the device selector 220.
장치 선택부(220)는 처리부(214)로부터 전달받은 데이터를 홈 매니저 로봇(200)에서 처리 가능한지를 판단하고(S122), 처리 가능한 데이터인 경우 홈 매니저 로봇(200) 내에서 직접 처리한다(S124). 예컨대, 홈 매니저 로봇(200)의 미디어 표현부(222) 혹은 로봇 행위 표현부(224)를 통해 데이터를 처리하여 해당 기능을 제공할 수 있다.The device selector 220 determines whether the home manager robot 200 can process the data received from the processor 214 (S122), and processes the data directly within the home manager robot 200 when the data is processable (S124). ). For example, the media processing unit 222 or the robot behavior expression unit 224 of the home manager robot 200 may process data to provide a corresponding function.
반면, 획득된 데이터를 홈 매니저 로봇(200)에서 처리할 수 없는 것으로 판단된 경우 제1네트워크에 접속된 홈 네트워크 장치 중 해당 데이터를 처리할 장치를 선택하고(S126), 선택된 장치에 데이터를 제공하여 해당 장치에서 데이터가 처리되도록 제어한다(S128).On the other hand, if it is determined that the acquired data cannot be processed by the home manager robot 200, a device to process the corresponding data is selected from the home network devices connected to the first network (S126), and the data is provided to the selected device. Control to process the data in the corresponding device (S128).
도 4는 본 발명의 다른 실시예에 따른 로봇을 이용한 홈 네트워크 시스템의 제어 흐름도로서, 홈 매니저 로봇(200)이 사용자 요청에 따라 데이터를 제공하는 경우를 예시하고 있다.4 is a control flowchart of a home network system using a robot according to another embodiment of the present invention, which illustrates a case in which the home manager robot 200 provides data according to a user request.
홈 매니저 로봇(200)은 인식부(210)를 통해 주변의 상황을 인식하며(S210). 입력부를 통해 입력되는 사용자의 요청을 인식할 수 있다(S212). 판단부(212)는 인식부(210)를 통해 인식된 사용자의 요청에 따라, 실행해야 할 제어 로직을 판단하여 처리부(214) 측에 제공한다.The home manager robot 200 recognizes the surrounding situation through the recognizer 210 (S210). The user's request input through the input unit may be recognized (S212). The determination unit 212 determines the control logic to be executed according to the user's request recognized by the recognition unit 210, and provides the determination to the processing unit 214.
처리부(214)는 실행해야 할 제어 로직에 따라 미디어 선택부(216) 측에 필요한 멀티미디어 정보를 요청하며, 이에, 미디어 선택부(216)는 로컬 영역에 해당 정보가 존재하는지를 판단한다(S214).The processor 214 requests multimedia information necessary for the media selector 216 according to the control logic to be executed, and the media selector 216 determines whether the corresponding information exists in the local area (S214).
판단결과, 내부의 멀티미디어 DB(218)에 필요한 데이터가 저장되어 있는 경우 미디어 선택부(216)는 해당 데이터를 독출하여 처리부(214)로 전달한다(S216). As a result of determination, when necessary data is stored in the multimedia DB 218, the media selector 216 reads out the data and transmits the data to the processor 214 (S216).
반면, 로컬 영역에 데이터가 저장되어 있지 않은 경우 미디어 선택부(216)는 제2네트워크를 통해 클라우드 서버(100) 측에 필요한 데이터를 요청하여 획득한다(S218). 미디어 선택부(216)는 외부로부터 획득한 데이터를 처리부(214)로 전달한다.On the other hand, if the data is not stored in the local area, the media selector 216 requests and acquires necessary data from the cloud server 100 through the second network (S218). The media selector 216 transfers data obtained from the outside to the processor 214.
처리부(214)는 사용자의 요청을 홈 매니저 로봇(200) 내에서 처리하여 표현할 것인지 혹은 제1네트워크로 연결된 주변 장치를 통해 재생하여 표현할 것인지 여부를 판단하여 장치 선택부(220)에 미디어 데이터를 제공한다(S220).The processor 214 determines whether the user's request is to be processed and expressed in the home manager robot 200 or to be reproduced and expressed through a peripheral device connected to the first network to provide media data to the device selector 220. (S220).
홈 매니저 로봇(200) 내에서 처리하여 표현할 경우 장치 선택부(220)는 미디어 표현부(222)와 로봇행위 표현부(224) 중 적어도 어느 한 측에 미디어 데이터를 제공하여 홈 매니저 로봇(200)에서 멀티미디어를 재생하고 로봇 행위를 표현하도록 제어한다(S222).When processing and expressing in the home manager robot 200, the device selector 220 provides media data to at least one of the media presenter 222 and the robot behavior presenter 224 to display the home manager robot 200. Play the multimedia and control to express the robot behavior (S222).
주변 장치에서 처리하여 표현할 경우, 처리부(214)는 사용자의 요청을 주변장치에서 단독으로 표현할 것인지 혹은 홈 매니저 로봇(200)과 주변 장치를 상호 연동하여 표현할 것인지를 판단한다(S224). If the peripheral device is processed and expressed, the processor 214 determines whether to express the user's request alone in the peripheral device or to express the home manager robot 200 and the peripheral device in cooperation with each other (S224).
주변장치에서 단독으로 표현할 경우 장치 선택부(220)는 필요한 주변장치를 사용자가 선택하도록 한 후(S226), 해당 주변 장치에 미디어 데이터를 제공하여 주변장치에서 미디어를 데이터를 재생하도록 제어한다(S228). 여기서, 이용할 주변장치가 미리 설정되어 있는 경우에는 S226단계를 생략하고 바로 해당 주변장치에 미디어를 데이터를 제공하여 재생하도록 하는 것이 가능하다. When the peripheral device is expressed alone, the device selector 220 controls the user to select a required peripheral device (S226), and then provides media data to the peripheral device to play the data in the peripheral device (S228). ). In this case, when the peripheral device to be used is set in advance, the step S226 may be omitted and the media may be immediately provided to the peripheral device for playback.
홈 매니저 로봇(200)과 주변 장치를 상호 연동하여 표현할 경우 장치 선택부(220)는 미디어 표현부(222)와 로봇행위 표현부(224) 중 적어도 어느 한 측에 미디어 데이터를 제공하여 홈 매니저 로봇(200)에서 멀티미디어를 재생하고 로봇 행위를 표현하도록 제어하는 한편, 필요한 주변 장치에 미디어 데이터를 제공하여 주변장치에서도 미디어 데이터를 재생하도록 제어한다(S222).When the home manager robot 200 and the peripheral device are interoperated with each other, the device selector 220 provides media data to at least one of the media presenter 222 and the robot behavior presenter 224 to provide the home manager robot. While controlling the multimedia at 200 and expressing the robot behavior, the media data is provided to the necessary peripheral device to control the media data at the peripheral device at step S222.
이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.As such, those skilled in the art will appreciate that the present invention can be implemented in other specific forms without changing the technical spirit or essential features thereof. Therefore, the above-described embodiments are to be understood as illustrative in all respects and not as restrictive. The scope of the present invention is shown by the following claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalent concepts should be construed as being included in the scope of the present invention. do.
본 발명은 클라우드 서버 혹은 모바일 단말과 접속 가능한 로봇을 이용하여 가전 장치, 센서 장치, 미디어 장치 등의 홈 네트워크 장치들을 제어하고 홈 네트워크 장치를 제어함에 있어서 로봇이 자체적으로 수행할 수 없는 기능의 경우 이용 가능한 외부 장치들을 선택하여 확장된 기능을 지원할 수 있도록 하는 로봇을 이용한 홈 네트워크 시스템 및 그 제어방법을 제공하는 데에 이용할 수 있다.The present invention controls the home network devices such as home appliances, sensor devices, media devices and the like by using a robot that can be connected to a cloud server or a mobile terminal, and uses a function that the robot cannot perform itself in controlling the home network device. The present invention can be used to provide a home network system using a robot and a method of controlling the same, by selecting possible external devices to support extended functions.

부호의 설명Explanation of the sign
100 : 클라우드 서버 150 : 리모트 단말100: cloud server 150: remote terminal
200 : 홈 매니저 로봇 210 : 인식부200: home manager robot 210: recognition unit
212 : 판단부 214 : 처리부212: judgment unit 214: processing unit
216 : 미디어 선택부 218 : 멀티미디어 DB216: media selection unit 218: multimedia DB
220 : 장치 선택부 222 : 미디어 표현부220: device selection unit 222: media presentation unit
224 : 로봇행위 표현부 300 : 미디어 장치부224: robot behavior expression unit 300: media device unit
310 : 가전 장치부 320 : 센서 장치부310: home appliance device 320: sensor device

Claims (12)

  1. 제1네트워크를 통해 데이터를 송수신하는 다수의 전자장치를 포함하는 홈 네트워크 장치부;
    제2네트워크를 통해 데이터를 송수신하는 클라우드 서버; 및
    상기 제1네트워크에 접속된 상기 홈 네트워크 장치부의 상태정보를 수집하고 그 동작을 제어하며, 외부로부터의 입력을 인식하여 수행해야 할 제어 로직을 선택하고, 상기 선택된 제어 로직 처리에 필요한 데이터를 획득하고, 획득된 데이터를 처리하는 홈 매니저 로봇;
    을 포함하는 홈 네트워크 시스템.    A home network device unit including a plurality of electronic devices for transmitting and receiving data through a first network;
    A cloud server for transmitting and receiving data through a second network; And
    Collects state information of the home network device connected to the first network and controls its operation, selects control logic to be performed by recognizing an input from the outside, obtains data required for processing the selected control logic, and A home manager robot for processing the acquired data;
    Home network system comprising a.
  2. 제1항에 있어서,
    상기 홈 매니저 로봇은,
    상기 제어 로직 실행 시 필요한 데이터가 내부에 저장되어 있지 않은 것으로 확인된 경우 상기 제2네트워크를 통해 상기 클라우드 서버로부터 해당 데이터를 수집하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 1,
    The home manager robot,
    And collecting data from the cloud server through the second network when it is determined that data necessary for executing the control logic is not stored therein.
  3. 제1항에 있어서,
    상기 홈 매니저 로봇은,
    상기 제어 로직 실행 시 필요한 장치가 구비되어 있지 않은 것으로 확인된 경우 상기 제1네트워크를 통해 상기 획득된 데이터를 상기 전자장치에 제공하여 상기 제어 로직을 실행하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 1,
    The home manager robot,
    And if it is determined that a device necessary for executing the control logic is not provided, providing the obtained data to the electronic device through the first network to execute the control logic.
  4. 제1항에 있어서,
    상기 홈 네트워크 장치부는,
    상기 제어 로직에 따라 오디오 및 비디오 데이터 중 적어도 어느 하나를 재생하는 전자장치를 포함하는 미디어 장치부;
    상기 제어 로직에 따라 기 설정된 기능을 실행하는 가전 장치부; 및
    상기 홈 매니저 로봇에 감지 정보를 제공하는 센서 장치부;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 1,
    The home network device unit,
    A media device unit including an electronic device for playing at least one of audio and video data according to the control logic;
    A home appliance unit executing a preset function according to the control logic; And
    A sensor device unit providing sensing information to the home manager robot;
    Home network system comprising a.
  5. 제1항에 있어서,
    상기 홈 매니저 로봇은,
    외부 입력을 인식하는 인식부;
    상기 외부 입력에 따라 수행해야 할 상기 제어 로직을 선택하는 판단부;
    상기 제어 로직 처리에 필요한 데이터를 획득하고 획득된 데이터를 처리할 장치를 선택하여 해당 장치에서 상기 데이터를 처리하도록 제어하는 처리부; 및
    상기 처리부로부터 상기 데이터를 전달받아 상기 데이터를 처리할 장치에 전달하는 장치 선택부;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 1,
    The home manager robot,
    A recognition unit that recognizes an external input;
    A determination unit to select the control logic to be performed according to the external input;
    A processor configured to acquire data necessary for the control logic processing, select a device to process the acquired data, and control the device to process the data; And
    A device selection unit receiving the data from the processing unit and transferring the data to a device to process the data;
    Home network system comprising a.
  6. 제5항에 있어서,
    상기 홈 매니저 로봇은,
    상기 제어 로직 처리에 필요한 데이터가 저장된 멀티미디어 DB; 및
    상기 처리부의 요청에 따라 상기 멀티미디어 DB로부터 상기 데이터를 검색하여 제공하고, 상기 멀티미디어 DB에 상기 데이터가 저장되어 있지 않은 경우 상기 제2네트워크를 통해 상기 클라우드 서버 측에 해당 데이터를 요청하여 수신된 데이터를 상기 처리부에 제공하는 미디어 선택부;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 5,
    The home manager robot,
    A multimedia DB storing data necessary for processing the control logic; And
    The data is retrieved and provided from the multimedia DB according to a request of the processing unit, and if the data is not stored in the multimedia DB, the data is received by requesting the data from the cloud server through the second network. A media selection unit provided to the processing unit;
    Home network system comprising a.
  7. 제5항에 있어서,
    상기 홈 매니저 로봇은,
    상기 장치 선택부로부터 수신된 데이터를 오디오 또는 비디오 중 적어도 어느 하나로 재생하는 미디어 표현부; 및
    상기 장치 선택부로부터 수신된 데이터에 따라 상기 홈 매니저 로봇의 동작을 제어하는 로봇행위 표현부;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 5,
    The home manager robot,
    A media presentation unit for playing the data received from the device selection unit in at least one of audio and video; And
    A robot behavior expression unit controlling the operation of the home manager robot according to the data received from the device selection unit;
    Home network system comprising a.
  8. 제7항에 있어서,
    상기 장치 선택부는,
    상기 처리부의 요청에 따라 상기 데이터를 상기 미디어 표현부, 상기 로봇행위 표현부 및 상기 제1네트워크에 접속된 상기 홈 네트워크 장치부 중 적어도 어느 하나에 전달하는 것을 특징으로 하는 홈 네트워크 시스템.    The method of claim 7, wherein
    The device selection unit,
    And at least one of the media expression unit, the robot behavior expression unit, and the home network device unit connected to the first network in response to a request of the processing unit.
  9. (a) 인식부를 통해 외부 입력을 인식하는 단계;
    (b) 판단부에서 상기 외부 입력에 따라 수행해야 할 상기 제어 로직을 선택하는 단계;
    (c) 처리부에서 상기 제어 로직 처리에 필요한 데이터를 획득하고 획득된 데이터를 처리할 장치를 선택하여 내부적으로 처리하거나 또는 제1네트워크에 연결된 홈 네트워크 장치에서 상기 데이터를 처리하도록 제어하는 단계; 및
    (d) 장치 선택부에서 상기 처리부로부터 상기 데이터를 전달 받아 상기 데이터를 처리할 장치에 전달하는 단계;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템의 제어방법.    (a) recognizing an external input through a recognizer;
    (b) selecting, by the determination unit, the control logic to be performed according to the external input;
    (c) a process of acquiring data required for the control logic processing by the processor and selecting a device to process the acquired data to process the data internally or to process the data in a home network device connected to a first network; And
    (d) receiving the data from the processing unit at a device selection unit and transferring the data to a device to process the data;
    Control method of a home network system comprising a.
  10. 제9항에 있어서,
    상기 홈 네트워크 장치부는;
    상기 제어 로직에 따라 오디오 및 비디오 데이터 중 적어도 어느 하나를 재생하는 전자장치를 포함하는 미디어 장치부;
    상기 제어 로직에 따라 기 설정된 기능을 실행하는 가전 장치부; 및
    상기 홈 매니저 로봇에 감지 정보를 제공하는 센서 장치부;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템의 제어방법.    The method of claim 9,
    The home network device unit;
    A media device unit including an electronic device for playing at least one of audio and video data according to the control logic;
    A home appliance unit executing a preset function according to the control logic; And
    A sensor device unit providing sensing information to the home manager robot;
    Control method of a home network system comprising a.
  11. 제9항에 있어서,
    상기 (c) 단계는,
    상기 처리부에서 미디어 선택부 측에 상기 제어 로직 처리에 필요한 데이터를 요청하는 단계;
    상기 미디어 선택부가 상기 제어 로직 처리에 필요한 데이터가 내부에 저장되어 있는지 여부를 판단하는 단계;
    상기 데이터가 저장되어 있지 않은 경우 상기 미디어 선택부가 제2네트워크를 통해 클라우드 서버 측에 해당 데이터를 요청하는 단계; 및
    상기 미디어 선택부가 상기 클라우드 서버로부터 수신된 데이터를 상기 처리부에 제공하는 단계;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템의 제어방법.    The method of claim 9,
    In step (c),
    Requesting, by the processing unit, data necessary for processing the control logic from the media selection unit;
    Determining, by the media selector, whether data necessary for processing the control logic is stored therein;
    If the data is not stored, requesting the data from the media selector to the cloud server through the second network; And
    Providing, by the media selection unit, data received from the cloud server to the processing unit;
    Control method of a home network system comprising a.
  12. 제9항에 있어서,
    상기 (c) 단계는,
    상기 데이터를 내부 장치로 처리할 지 여부를 판단하는 단계; 및
    상기 내부 장치로 처리할 경우, 상기 수신된 데이터를 오디오 또는 비디오 중 적어도 어느 하나로 재생하는 미디어 표현부 또는, 상기 데이터에 따라 상기 홈 매니저 로봇의 동작을 제어하는 로봇행위 표현부 중 적어도 어느 한 측에 상기 데이터를 제공하는 단계;
    를 포함하는 것을 특징으로 하는 홈 네트워크 시스템의 제어방법.    The method of claim 9,
    In step (c),
    Determining whether to process the data with an internal device; And
    When processing by the internal device, at least one of a media expression unit for playing the received data in at least one of audio or video, or a robot behavior expression unit for controlling the operation of the home manager robot in accordance with the data. Providing the data;
    Control method of a home network system comprising a.
PCT/KR2015/002383 2014-03-12 2015-03-12 Home network system using robot and control method thereof WO2015137740A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140028757A KR101635068B1 (en) 2014-03-12 2014-03-12 Home network system and method using robot
KR10-2014-0028757 2014-03-12

Publications (1)

Publication Number Publication Date
WO2015137740A1 true WO2015137740A1 (en) 2015-09-17

Family

ID=54072101

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/002383 WO2015137740A1 (en) 2014-03-12 2015-03-12 Home network system using robot and control method thereof

Country Status (2)

Country Link
KR (1) KR101635068B1 (en)
WO (1) WO2015137740A1 (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017069801A1 (en) * 2015-10-23 2017-04-27 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US20180234501A1 (en) 2015-10-23 2018-08-16 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10218833B2 (en) 2015-10-23 2019-02-26 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10491738B2 (en) 2015-10-23 2019-11-26 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10674866B2 (en) 2015-10-23 2020-06-09 Traeger Pellet Grills Llc Smoke generation cooking system and methods
US10701199B2 (en) 2015-10-23 2020-06-30 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10708409B2 (en) 2015-10-23 2020-07-07 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10735575B2 (en) 2015-10-23 2020-08-04 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10757244B2 (en) 2015-10-23 2020-08-25 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10785363B2 (en) 2015-10-23 2020-09-22 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10791208B2 (en) 2015-10-23 2020-09-29 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US11765261B2 (en) 2015-10-23 2023-09-19 Traeger Pellet Grills, LLC. Mobile application for controlling outdoor grill

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070025368A1 (en) * 2003-05-30 2007-02-01 Lg Electronics, Inc. Home network system
KR20090047077A (en) * 2007-11-07 2009-05-12 주식회사 이디 Home network system for sharing of gui using robot server between home network and individual mobile object
KR20120072022A (en) * 2010-12-23 2012-07-03 한국전자통신연구원 Virtual smarthome system, server, home gateway based on clouding computing and method thereof
WO2012161440A2 (en) * 2011-05-25 2012-11-29 (주) 퓨처로봇 System and method for operating a smart service robot

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040011010A (en) * 2002-07-26 2004-02-05 모스트아이텍 주식회사 Home secreting/home networking system by using robot and operating method thereof
KR20070052641A (en) * 2005-11-17 2007-05-22 한국전자통신연구원 Robot server, content providing system and method comprising the same
KR20080067999A (en) 2008-07-01 2008-07-22 박철현 Electronic payment method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070025368A1 (en) * 2003-05-30 2007-02-01 Lg Electronics, Inc. Home network system
KR20090047077A (en) * 2007-11-07 2009-05-12 주식회사 이디 Home network system for sharing of gui using robot server between home network and individual mobile object
KR20120072022A (en) * 2010-12-23 2012-07-03 한국전자통신연구원 Virtual smarthome system, server, home gateway based on clouding computing and method thereof
WO2012161440A2 (en) * 2011-05-25 2012-11-29 (주) 퓨처로봇 System and method for operating a smart service robot

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
NAM, KYU - TAE ET AL.: "A Design of Network Based Home Robot System in Wireless Home Network Environment", THE JOURNAL OF THE KOREA CONTENTS ASSOCIATION, vol. 5, no. 5, 2005, pages 85 - 91, XP055224346 *

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017069801A1 (en) * 2015-10-23 2017-04-27 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
NO20180470A1 (en) * 2015-10-23 2018-04-06 Traeger Pellet Grills Llc Cloud system for controlling outdoor grill with mobile application
GB2557057A (en) * 2015-10-23 2018-06-13 Traeger Pellet Grills Llc Cloud system for controlling outdoor grill with mobile application
US20180234501A1 (en) 2015-10-23 2018-08-16 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10158720B2 (en) 2015-10-23 2018-12-18 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10218833B2 (en) 2015-10-23 2019-02-26 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10455022B2 (en) 2015-10-23 2019-10-22 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10491738B2 (en) 2015-10-23 2019-11-26 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10652386B2 (en) 2015-10-23 2020-05-12 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10674866B2 (en) 2015-10-23 2020-06-09 Traeger Pellet Grills Llc Smoke generation cooking system and methods
US10701199B2 (en) 2015-10-23 2020-06-30 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10708409B2 (en) 2015-10-23 2020-07-07 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10735523B2 (en) 2015-10-23 2020-08-04 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10735575B2 (en) 2015-10-23 2020-08-04 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10757244B2 (en) 2015-10-23 2020-08-25 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10764423B2 (en) 2015-10-23 2020-09-01 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10785363B2 (en) 2015-10-23 2020-09-22 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US10791208B2 (en) 2015-10-23 2020-09-29 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US10951751B2 (en) 2015-10-23 2021-03-16 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US11206307B2 (en) 2015-10-23 2021-12-21 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US11324357B2 (en) 2015-10-23 2022-05-10 Traeger Pellet Grills, Llc Smoke generation cooking system and methods
NO346389B1 (en) * 2015-10-23 2022-07-04 Traeger Pellet Grills Llc Cloud system for controlling outdoor grill with mobile application
GB2557057B (en) * 2015-10-23 2022-07-20 Traeger Pellet Grills Llc Cloud system for controlling outdoor grill with mobile application
US11622008B2 (en) 2015-10-23 2023-04-04 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US11622007B2 (en) 2015-10-23 2023-04-04 Traeger Pellet Grills, Llc Cloud system for controlling outdoor grill with mobile application
US11765261B2 (en) 2015-10-23 2023-09-19 Traeger Pellet Grills, LLC. Mobile application for controlling outdoor grill
US11785130B2 (en) 2015-10-23 2023-10-10 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US11825010B2 (en) 2015-10-23 2023-11-21 Traeger Pellet Grills, Llc Mobile application for controlling outdoor grill
US11819157B2 (en) 2015-10-23 2023-11-21 Traeger Pellet Grills, Llc Smoke generation cooking system and methods

Also Published As

Publication number Publication date
KR101635068B1 (en) 2016-07-01
KR20150106553A (en) 2015-09-22

Similar Documents

Publication Publication Date Title
WO2015137740A1 (en) Home network system using robot and control method thereof
US10861461B2 (en) LED design language for visual affordance of voice user interfaces
JP6186517B2 (en) Task setting method, apparatus, program, and recording medium
KR101637813B1 (en) Proximity detection of candidate companion display device in same room as primary display using wi-fi or bluetooth signal strength
JP2021052403A (en) Smart controlled media reproduction in smart media environment
CN107517438B (en) Method for requesting sharing of Bluetooth device, electronic device and computer storage medium
US20130106686A1 (en) Gesture processing framework
US20150046830A1 (en) Methods, Device and Social Network Manager for Enabling Interaction with Another Device
US10944829B2 (en) Methods, systems, and devices for multiplexing service information from sensor data
US10623199B2 (en) Outputting audio based on user location
US20200014556A1 (en) Methods, systems, and devices for managing client devices using a virtual anchor manager
CN105182783A (en) Method, apparatus and terminal for controlling intelligent devices
KR101691284B1 (en) Proximity detection of candidate companion display device in same room as primary display using infrared signaling
US20150312622A1 (en) Proximity detection of candidate companion display device in same room as primary display using upnp
CN112702633A (en) Multimedia intelligent playing method and device, playing equipment and storage medium
CN104866084A (en) Methods, device and system for gesture recognition
WO2016160211A1 (en) Technologies for a seamless data streaming experience
CN104125162A (en) Network source access processing method and device
CN112770166A (en) Multimedia intelligent playing method and device, playing equipment and storage medium
CN107409241A (en) For polymerizeing the system and method with analysis system state
JP6128349B2 (en) Proximity detection of candidate companion display devices in the same room as the primary display using a camera
KR20190015456A (en) Media things based on media centric internet of things and method of operating the same
WO2017041558A1 (en) Analyzing and processing method, device and system
TWI681685B (en) Connection method of wireless system
KR101535837B1 (en) Media server and method for transmitting contents

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15760845

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15760845

Country of ref document: EP

Kind code of ref document: A1