KR20210032834A - Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof - Google Patents

Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof Download PDF

Info

Publication number
KR20210032834A
KR20210032834A KR1020190114348A KR20190114348A KR20210032834A KR 20210032834 A KR20210032834 A KR 20210032834A KR 1020190114348 A KR1020190114348 A KR 1020190114348A KR 20190114348 A KR20190114348 A KR 20190114348A KR 20210032834 A KR20210032834 A KR 20210032834A
Authority
KR
South Korea
Prior art keywords
iot device
iot
state
information
server
Prior art date
Application number
KR1020190114348A
Other languages
Korean (ko)
Other versions
KR102356229B1 (en
Inventor
김동일
조세나
호윤주
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020190114348A priority Critical patent/KR102356229B1/en
Publication of KR20210032834A publication Critical patent/KR20210032834A/en
Application granted granted Critical
Publication of KR102356229B1 publication Critical patent/KR102356229B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2812—Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809—Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Abstract

The present invention relates to an operating method of an IoT server for an IoT linkage service to provide the linkage service which controls a state change of other IoT devices in response to an occurrence event of the IoT device. According to an embodiment of the present invention, the operating method of an IoT server for an IoT linkage service comprises the steps of: receiving content playing state information from at least one of a set-top box and a content server in an environment in which the set-top box and an IoT device are linked through an IoT server; determining whether a state change of the IoT device is necessary based on the playing state information; and transmitting control information for changing a state of the IoT device to the IoT device in accordance with the determination.

Description

IoT 연동 서비스를 위한 IoT 서버의 동작 방법 및 이를 위한 IoT 서버{Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof}Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof}

이하의 실시예는 IoT 연동 서비스를 위한 IoT 서버의 동작 방법 및 이를 실행하는 IoT 서버에 관한 것이다.The following embodiments relate to a method of operating an IoT server for an IoT interworking service and an IoT server executing the same.

IoT(Internet of Things) 기술이란, 디지털 네트워킹 기술을 사용자 주변의 사물에 도입하여 사용자가 느끼는 공간적, 시간적 한계를 극복하기 위한 기술로서, 기기의 자동화에 다양한 형태로 적용될 수 있다.IoT (Internet of Things) technology is a technology for overcoming spatial and temporal limitations felt by users by introducing digital networking technology to objects around the user, and can be applied in various forms to automation of devices.

현재에는 IoT 환경의 일반화로 모든 사물이 인터넷에 연결되는 형태로 발전 중에 있으며, 인공지능 기술의 발전으로 인해 카메라를 이용한 객체 인식률이 향상되고 있다. 4차 산업혁명으로 인해 다양한 센서 모듈 및 액추에이터 모듈에 대한 요구가 증가하고 있으며, 시장에서는 유사한 모듈 또는 기능이 업그레이된 모듈 또는 새로운 모듈들이 출시되는 양이 증가하고 있다.Nowadays, due to the generalization of the IoT environment, all objects are being developed in the form of connecting to the Internet, and the recognition rate of objects using cameras is improving due to the development of artificial intelligence technology. Due to the 4th industrial revolution, the demand for various sensor modules and actuator modules is increasing, and the amount of similar modules or modules with upgraded functions or new modules being released in the market is increasing.

실시예에서, IoT 기기들 간의 상황 정보를 공유함으로써 IoT 기기의 발생 이벤트에 대응하여 다른 IoT 기기의 상태 변경을 제어하는 연동 서비스를 제공하고자 한다.In an embodiment, it is intended to provide a linked service that controls state change of another IoT device in response to an occurrence event of an IoT device by sharing context information between IoT devices.

IoT 연동 서비스를 위한 IoT 서버의 동작 방법에 있어서, 셋톱박스 및 IoT 기기가 상기 IoT 서버를 통해 연동되는 환경에서, 상기 셋톱박스 및 컨텐츠 서버 중 적어도 하나로부터 컨텐츠의 재생 상황 정보를 수신하는 단계; 상기 재생 상황 정보에 기초하여 상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계; 및 상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계를 포함하는, IoT 서버의 동작 방법이 제공될 수 있다.What is claimed is: 1. A method of operating an IoT server for an IoT linked service, the method comprising: in an environment in which a set-top box and an IoT device are interlocked through the IoT server, receiving content playback status information from at least one of the set-top box and a content server; Determining whether a state change of the IoT device is required based on the reproduction situation information; And transmitting control information for changing the state of the IoT device to the IoT device according to the determination.

상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계는, 상기 IoT 기기의 현재 상태를 판단하는 단계; 및 상기 재생 상황 정보 및 상기 IoT 기기의 현재 상태를 고려하여 상기 상태 변경이 필요한지 판단하는 단계를 포함할 수 있다.The determining whether the state of the IoT device needs to be changed may include determining a current state of the IoT device; And determining whether the state change is necessary in consideration of the reproduction situation information and the current state of the IoT device.

상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는, 상기 IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, 상기 셋톱박스와 연결된 디스플레이 장치에 상기 IoT 기기의 상태 변경을 추천하기 위한 메시지를 출력하도록 제어 메시지를 상기 셋톱박스로 전송하는 단계를 포함할 수 있다.Transmitting control information for changing the state of the IoT device to the IoT device according to the determination may include, when it is determined that the state of the IoT device needs to be changed, the IoT device is displayed on a display device connected to the set-top box. It may include transmitting a control message to the set-top box to output a message for recommending a state change.

상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는, 상기 제어 메시지에 대해 수신된 응답 정보에 대응하여 상기 제어 정보를 상기 IoT 기기로 전송하는 단계를 포함할 수 있다.Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made includes transmitting the control information to the IoT device in response to response information received for the control message. can do.

상기 IoT 기기의 상태 변경을 추천하기 위한 메시지는, 상기 디스플레이 장치에 출력되는 상기 컨텐츠와 중첩되어 표시될 수 있다.The message for recommending the state change of the IoT device may be displayed by overlapping with the content output on the display device.

상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는, 상기 IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, 인공지능 스피커에서 상기 IoT 기기의 상태 변경을 추천하기 위한 메시지를 음성으로 출력하도록 제어 메시지를 상기 인공지능 스피커로 전송하는 단계를 포함할 수 있다.Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made may include, if it is determined that the state of the IoT device needs to be changed, the artificial intelligence speaker recommends changing the state of the IoT device. It may include the step of transmitting a control message to the artificial intelligence speaker to output the message for voice.

상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는, 상기 인공지능 스피커에 입력된 상기 제어 메시지에 대한 음성 답변에 따른 응답 정보에 대응하여 상기 제어 정보를 상기 IoT 기기로 전송하는 단계를 더 포함할 수 있다.Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made may include transmitting the control information in response to response information according to a voice response to the control message input to the artificial intelligence speaker. It may further include transmitting to the IoT device.

상기 셋톱박스에서 특정 카테고리의 컨텐츠가 재생됨을 감지하고, 상기 특정 카테고리의 컨텐츠의 재생 이후 일정 시간 이내에 상기 IoT 기기가 수동 제어된 상기 IoT 기기의 상태 변경 정보를 수신하는 상황이 일정 횟수 이상 발생하는 경우, 상기 재생 상황 정보에 대응하여 상기 IoT 기기의 상태 변경을 위한 판단하기 위한 판단 기준 정보를 생성하는 단계를 더 포함할 수 있다.When the set-top box detects that content of a specific category is being played, and a situation in which the IoT device receives status change information of the manually controlled IoT device within a certain time after the content of the specific category occurs more than a certain number of times And generating determination reference information for determining a state change of the IoT device in response to the reproduction situation information.

상기 판단 기준 정보에 기초하여 상기 IoT 기기의 상태 변경을 위한 제어 메시지를 제공하고, 상기 IoT 기기의 상태 변경의 실행을 동의하지 않는 상황이 일정 횟수 이상 발생하는 경우, 상기 판단 기준 정보를 삭제하는 단계를 더 포함할 수 있다.Providing a control message for changing the state of the IoT device based on the determination criterion information, and deleting the determination criterion information when a situation that does not agree to the execution of the state change of the IoT device occurs more than a certain number of times It may further include.

본 발명의 실시예를 통해 실시예에서, IoT 기기들 간의 상황 정보를 공유함으로써 IoT 기기의 발생 이벤트에 대응하여 다른 IoT 기기의 상태 변경을 제어하는 연동 서비스를 제공할 수 있다.According to an embodiment of the present invention, by sharing context information between IoT devices, a linked service for controlling a state change of another IoT device in response to an occurrence event of an IoT device may be provided.

도 1은 일실시예에 있어서, IoT 기기 간의 연동 서비스를 위한 IoT 서버의 동작 방법의 흐름도이다.
도 2는 일실시예에 있어서, IoT 기기 간의 연동 서비스의 일례이다.
도 3은 일실시예에 있어서, IoT 기기 간의 연동 서비스의 다른 일례이다.
도 4는 일실시예에 있어서, IoT 서버의 구성을 설명하기 위한 블록도이다.1 is a flowchart illustrating a method of operating an IoT server for an interworking service between IoT devices according to an embodiment.
2 is an example of an interworking service between IoT devices according to an embodiment.
3 is another example of an interworking service between IoT devices according to an embodiment.
4 is a block diagram illustrating a configuration of an IoT server according to an embodiment.

이하, 본 발명의 실시예에 대해서 첨부된 도면을 참조하여 자세히 설명하도록 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 명세서에서 개시되어 있는 특정한 구조적 또는 기능적 설명들은 단지 기술적 개념에 따른 실시예들을 설명하기 위한 목적으로 예시된 것으로서, 실시예들은 다양한 다른 형태로 실시될 수 있으며 본 명세서에 설명된 실시예들에 한정되지 않는다.Specific structural or functional descriptions disclosed in this specification are exemplified only for the purpose of describing embodiments according to a technical concept, and the embodiments may be implemented in various different forms and are limited to the embodiments described herein. It doesn't work.

제1 또는 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 이해되어야 한다. 예를 들어 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Terms such as first or second may be used to describe various components, but these terms should be understood only for the purpose of distinguishing one component from other components. For example, a first component may be referred to as a second component, and similarly, a second component may be referred to as a first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 표현들, 예를 들어 "~간의에"와 "바로~간의에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.When a component is referred to as being "connected" or "connected" to another component, it is understood that it may be directly connected or connected to the other component, but other components may exist in the middle. It should be. On the other hand, when a component is referred to as being "directly connected" or "directly connected" to another component, it should be understood that there is no other component in the middle. Expressions describing the relationship between the elements, for example, "between" and "just between" or "neighboring to" and "directly adjacent to" should be interpreted as well.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Singular expressions include plural expressions unless the context clearly indicates otherwise. In the present specification, terms such as "comprise" or "have" are intended to designate that the specified features, numbers, steps, actions, components, parts, or combinations thereof exist, but one or more other features or numbers, It is to be understood that the presence or addition of steps, actions, components, parts or combinations thereof does not preclude the possibility of preliminary exclusion.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the relevant technical field. Terms as defined in a commonly used dictionary should be construed as having a meaning consistent with the meaning of the related technology, and should not be interpreted as an ideal or excessively formal meaning unless explicitly defined in the present specification. Does not.

이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.Hereinafter, embodiments will be described in detail with reference to the accompanying drawings. The same reference numerals shown in each drawing indicate the same members.

도 1은 일실시예에 있어서, IoT 기기 간의 연동 서비스를 위한 IoT 서버의 동작 방법의 흐름도이다.1 is a flowchart illustrating a method of operating an IoT server for an interworking service between IoT devices according to an embodiment.

실시예에 따른 연동 서비스는 셋톱박스 및 IoT 기기들이 IoT 서버를 통해 연동되는 환경에서 실행될 수 있다. 예를 들어, IoT 기기들로는 IoT 조명, TV, 인공지능 스피커 등의 기기들이 포함될 수 있고, IoT 서버는 셋톱박스를 통해 출력되는 재생 상황에 대응하여 IoT 조명, TV, 인공지능 스피커 등 중 어느 하나의 IoT 기기의 동작을 제어하는 방법을 제공할 수 있다.The interworking service according to the embodiment may be executed in an environment in which a set-top box and IoT devices are interlocked through an IoT server. For example, IoT devices may include devices such as IoT lighting, TV, and artificial intelligence speakers, and the IoT server responds to the playback situation output through the set-top box, It can provide a method of controlling the operation of IoT devices.

셋톱박스는 별도의 연결된 TV를 디스플레이 장치로 이용하는 장비일 수도 있고, 소프트웨어적으로 구현되어, 디스플레이 장치를 포함한 디바이스(노트북, 태블릿, 스마트TV 등)에서 구현되는 장치도 포함된다. 셋톱박스와 연결된 디스플레이 장치는 셋톱박스가 구현된 장치와 별도의 장치 이거나, 디스플레이를 구비한 장치로 해당 장치 내에 셋톱박스 기능이 구현되는 것을 포함한다.The set-top box may be a device that uses a separate connected TV as a display device, or is implemented in software, and includes a device implemented in a device (laptop, tablet, smart TV, etc.) including a display device. The display device connected to the set-top box is a device separate from the device in which the set-top box is implemented, or a device having a display and includes a set-top box function implemented in the device.

단계(110)에서 IoT 서버는, 셋톱박스 및 컨텐츠 서버 중 적어도 하나로부터 컨텐츠의 재생 상황 정보를 수신한다.In step 110, the IoT server receives content playback status information from at least one of a set-top box and a content server.

실시예에서 재생 상황 정보는, 셋톱박스에서 재생 중인 컨텐츠의 종류에 대한 정보, 재생 시각에 대한 정보, 재생 시간에 대한 정보 등이 포함될 수 있고, 컨텐츠의 종류로 예를 들어, 실시간 방송, 영화, TV 다시 보기 등 중 어떤 형태의 컨텐츠가 재생되는지에 대한 정보가 포함될 수 있다.In an embodiment, the playback status information may include information on the type of content being played in the set-top box, information on the playback time, information on the playback time, etc. As the type of content, for example, real-time broadcast, movie, Information on what type of content is played, such as TV replay, may be included.

단계(120)에서 IoT 서버는, 재생 상황 정보에 기초하여 IoT 기기의 상태 변경이 필요한지 판단한다.In step 120, the IoT server determines whether it is necessary to change the state of the IoT device based on the reproduction situation information.

실시예에서, 셋톱박스에서 재생 중인 컨텐츠에 대한 재생 상황 정보에 대응하여 IoT 기기의 상태를 제어하는 루틴에 대해 학습하는 딥러닝 과정을 통해 재생 상황 정보에 대응하여 IoT 기기의 상태의 변경 여부를 판단할 수 있다.In an embodiment, it is determined whether the state of the IoT device is changed in response to the playback situation information through a deep learning process that learns about a routine that controls the state of the IoT device in response to the playback situation information for the content being played in the set-top box. can do.

실시예에서, IoT 서버에서 사용자의 IoT 기기의 사용 패턴을 학습할 수 있고, 학습 결과에 따라 재생 상황 정보에 대응하는 IoT 기기의 상태의 변경 여부를 판단할 수 있다.In an embodiment, the IoT server may learn a usage pattern of the user's IoT device, and it may be determined whether or not the state of the IoT device corresponding to the playback situation information is changed according to the learning result.

다른 실시예에서, 사용자에 의해 IoT 서버에 등록된 패턴에 기초하여 재생 상황 정보에 대응하는 IoT 기기의 상태의 변경 여부를 판단할 수 있다.In another embodiment, it may be determined whether or not the state of the IoT device corresponding to the playback situation information is changed based on the pattern registered in the IoT server by the user.

IoT 기기의 상태 변경 여부를 판단하기 위해 IoT 기기의 현재 상태에 대한 정보를 획득하여 IoT 기기의 현재 상태를 파악할 수 있고, 재생 상황 정보 및 IoT 기기의 현재 상태를 고려하여 상태 변경이 필요한지 판단할 수 있다.In order to determine whether the state of the IoT device has changed, the current state of the IoT device can be obtained by acquiring information on the current state of the IoT device, and it is possible to determine whether a state change is necessary by considering the playback status information and the current state of the IoT device. have.

예를 들어, 셋톱박스에서 특정 카테고리의 컨텐츠가 재생되는 상황에 대응하여 미리 정해진 시간 이내에 사용자의 수동 제어로 IoT 기기(예컨대 IoT 조명)의 상태 변경이 일정 기준 횟수 이상 발생하는 경우, 해당 컨텐츠가 셋톱박스에서 재생되는 재생 상황 정보에 대응하여, 해당 IoT 기기의 상태 변경이 필요한 것으로 판단할 수 있다.For example, in response to a situation in which content of a specific category is played in a set-top box, if the status of an IoT device (e.g., IoT lighting) is changed by a user's manual control within a predetermined period of time, the corresponding content is set-top. In response to the playback situation information played in the box, it may be determined that the state of the IoT device needs to be changed.

실시예에서는 이러한 IoT 기기의 상태 변경을 판단하기 위한 판단 기준 정보를 생성할 수 있다. IoT 서버는 판단 기준 정보에 기초하여 IoT 기기의 상태 변경을 위한 제어 정보를 IoT 기기 또는 셋톱박스 등으로 제공할 수 있다.In an embodiment, determination criterion information for determining a state change of such an IoT device may be generated. The IoT server may provide control information for changing the state of the IoT device to an IoT device or a set-top box based on the determination criterion information.

또한, 실시예에서 판단 기준 정보에 기초하여 IoT 기기의 상태 변경을 위한 제어 메시지를 제공되었으나, 만약 사용자에 의하여 IoT 기기의 상태 변경의 실행을 동의하지 않는 상황이 일정 횟수 이상 발생하는 경우, IoT 서버는 해당 판단 기준 정보를 삭제할 수 있다.In addition, in the embodiment, a control message for changing the state of the IoT device is provided based on the determination criterion information, but if a situation occurs more than a certain number of times when the user does not agree to the execution of the state change of the IoT device, the IoT server May delete the corresponding determination criterion information.

단계(130)에서 IoT 서버는, 판단 여부에 따라 IoT 기기의 상태 변경을 위한 제어 정보를 IoT 기기로 전송한다.In step 130, the IoT server transmits control information for changing the state of the IoT device to the IoT device according to whether it is determined.

실시예에서, IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, IoT 기기의 상태를 자동으로 변경할 수 있고, 또는 IoT 기기의 상태 변경을 사용자에게 문의한 뒤 사용자로부터 수신되는 응답 정보에 기초하여 상태를 변경하거나 변경하지 않을 수 있다.In an embodiment, when it is determined that the state of the IoT device needs to be changed, the state of the IoT device can be automatically changed, or the state of the IoT device is determined based on response information received from the user after inquiring to the user about the change of the state of the IoT device. May or may not change.

IoT 기기의 상태를 자동으로 변경하는 경우, IoT 서버는 IoT 기기의 상태 변경을 공지하기 위한 메시지를 IoT 기기 혹은 셋톱박스와 연결된 출력 장치를 이용하여 출력하되, 시각적 또는 청각적 메시지로 출력될 수 있다.In the case of automatically changing the state of the IoT device, the IoT server outputs a message for notifying the change of the state of the IoT device using an output device connected to the IoT device or set-top box, but may be output as a visual or audible message. .

또는 IoT 기기의 상태 변경을 문의하기 위해, IoT 서버는 IoT 기기, 셋톱박스와 연결된 출력 장치(예를 들어, 디스플레이) 또는 다른 IoT 기기(예를 들어, 인공지능 스피커 등)을 이용하여 사용자에게 IoT 기기의 상태 변경을 문의할 수 있다.Or, in order to inquire about the change of the state of the IoT device, the IoT server uses the IoT device, an output device connected to the set-top box (for example, a display), or another IoT device (for example, an artificial intelligence speaker, etc.) to the user. You can inquire about changing the state of the device.

예를 들어, 셋톱박스 또는 셋톱박스와 연결된 TV의 디스플레이를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 시각적으로 출력될 수 있으며, 이를 위해 제어 메시지가 셋톱박스 또는 TV로 전송될 수 있다. 또는 제어 메시지를 인공지능 스피커로 전송하여 인공지능 스피커를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 청각적으로 출력될 수 있다.For example, a message recommending a state change of an IoT device may be visually output through a display of a set-top box or a TV connected to the set-top box, and a control message may be transmitted to the set-top box or TV for this purpose. Alternatively, a message recommending change of the state of the IoT device may be audibly output through the artificial intelligence speaker by transmitting a control message to the artificial intelligence speaker.

실시예에서, IoT 서버는 IoT 기기의 상태 변경에 대한 문의에 대한 응답 정보를 수신하면 응답 정보에 대응하여 IoT 기기의 상태를 변경하기 위한 제어 정보를 생성하여 IoT 기기로 전송하거나, 제어 정보를 생성하지 않을 수 있다.In an embodiment, the IoT server generates control information for changing the state of the IoT device in response to the response information upon receiving response information to an inquiry about the change of the state of the IoT device, and transmits it to the IoT device, or generates control information. I can't.

셋톱박스 또는 TV의 디스플레이를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 시각적으로 출력되는 경우, IoT 기기의 상태 변경에 대해서 동의 및 반대를 위한 두 가지 버튼이 출력되고, 두 가지 버튼 중 사용자로부터의 어느 하나의 버튼의 입력에 따라 생성된 응답 정보를 수신하여, IoT 서버는 제어 정보를 생성하거나 생성하지 않을 수 있다. 제어 정보가 생성되는 경우, IoT 서버는 상태 변경의 대상이 되는 IoT 기기로 해당 제어 정보를 전송하여 IoT 기기의 상태를 제어할 수 있다. When a message recommending the change of the state of the IoT device is visually displayed through the display of the set-top box or TV, two buttons for agreeing and disagreeing with the change of the state of the IoT device are displayed. Upon receiving response information generated according to the input of any one button, the IoT server may or may not generate control information. When control information is generated, the IoT server may control the state of the IoT device by transmitting the corresponding control information to the IoT device subject to the state change.

실시예에 따른 IoT 기기의 상태 변경을 추천하기 위한 메시지는 셋톱박스 또는 TV의 디스플레이 장치에 출력되는 경우 디스플레이에 출력되는 컨텐츠와 중첩되어 동시에 표시될 수 있다.When a message for recommending a state change of an IoT device according to an embodiment is output to a set-top box or a display device of a TV, the message may be displayed simultaneously by overlapping with the content output on the display.

인공지능 스피커를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 청각적으로 출력되는 경우, 해당 메시지의 출력 이후 사용자의 음성 답변을 통해 상태 변경에 대한 동의 또는 반대를 지시하는 응답 정보가 생성될 수 있다. 예를 들어, "그래", "응"이나 "아니", "싫어" 등의 동의 또는 반대를 위한 음성 답변이 인공지능 스피커로 수신될 수 있다. 수신된 음성 답변에 기초하여 인공지능 스피커 자체 또는 인공지능 스피커와 연동된 별도의 음성 인식 서버를 통해 응답 정보가 생성되고, 생성된 응답 정보는 IoT 서버로 전송된다.When the message recommending the state change of the IoT device is output aurally through the artificial intelligence speaker, response information indicating consent or disagreement to the state change may be generated through the user's voice response after the message is output. . For example, a voice response for consent or disagreement such as "yes", "yes", "no", and "dislike" may be received by the artificial intelligence speaker. Response information is generated through the artificial intelligence speaker itself or a separate speech recognition server interlocked with the artificial intelligence speaker based on the received voice response, and the generated response information is transmitted to the IoT server.

IoT 기기의 상태를 변경하는 일례로, 재생 상황 정보에 셋톱박스를 통해 영화 컨텐츠가 TV로 출력되는 상황이 포함되는 경우, IoT 서버는 실시간으로 IoT 조명의 조도를 판단하고, IoT 조명의 상태를 변경할지에 대해 판단할 수 있다.As an example of changing the state of an IoT device, when the playback situation information includes a situation in which movie content is output to a TV through a set-top box, the IoT server determines the illuminance of the IoT lighting in real time and changes the state of the IoT lighting. You can judge whether or not to do it.

앞서 설명된 IoT 기기 간의 연동 서비스를 제공하기 위한 동작 방법은 IoT 서버가 아닌 셋톱박스에 의해 실행될 수도 있다. 실시예에서, 셋톱박스에서 IoT 서버의 역할을 수행할 수 있다.The above-described operation method for providing interworking services between IoT devices may be executed by a set-top box rather than an IoT server. In an embodiment, the set-top box may serve as an IoT server.

이하의 도 2 및 도 3의 실시예는 IoT 기기 간 연동 서비스의 일실시예에 대한 것으로 설명에 의한 실시예에 한정되지는 않으며 다양한 실시예로 확대될 수 있다.The embodiments of FIGS. 2 and 3 below are for an embodiment of an interworking service between IoT devices, and are not limited to the described embodiments, and may be expanded to various embodiments.

도 2는 일실시예에 있어서, IoT 기기 간의 연동 서비스의 일례이다.2 is an example of an interworking service between IoT devices according to an embodiment.

실시예는 TV를 통해 또는 빔 프로젝터 등의 디스플레이 장치를 통해 출력되는 화면에 대한 것이다. 실시예에서 TV는 영화 컨텐츠(200)를 출력하고 있으며, 영화 컨텐츠(200)는 해당 디스플레이 장치와 연결된 셋톱박스로부터 수신하여 출력될 수 있다.The embodiment relates to a screen output through a TV or a display device such as a beam projector. In an embodiment, the TV outputs movie content 200, and the movie content 200 may be received and output from a set-top box connected to a corresponding display device.

실시예에 도시된 장면은 영화 컨텐츠(200)가 재생된 이후 출력되는 화면일 수 있다. 실시예에서, IoT 서버는 셋톱박스를 통해 영화 컨텐츠(200)가 디스플레이 장치에 재생되기 시작 이후(예를 들어, 영화 재생이 시작된 뒤 수 분 이후에) 상태 변경 추천을 위한 제어 메시지(210)를 셋톱박스로 또는 디스플레이 장치로 전송하여 영화 컨텐츠(200)에 중첩되어 출력되도록 할 수 있다.The scene illustrated in the embodiment may be a screen that is output after the movie content 200 is reproduced. In an embodiment, the IoT server sends a control message 210 for recommending a state change after the movie content 200 starts to be played on the display device through the set-top box (for example, a few minutes after the movie starts playing). It may be transmitted to a set-top box or a display device to be superimposed on the movie content 200 to be output.

실시예에서, IoT 서버는 기학습된 상황에 대응하여 또는 사용자의 설정에 대응하여, 영화 컨텐츠(200)의 재생의 재생 상황 정보에 대응하는 "영화 볼 때"에 연동된 IoT 기기에 대한 상태 변경이 필요한지 판단하여, IoT 기기에 대한 제어 정보를 확인할 수 있다. 일 실시예에 따르면, 영화 컨텐츠의 재생에 대한 재생 상황 정보에 대응하여 IoT 기기 중 "거실 조명"을 OFF하는 것으로 제어 정보가 기등록될 수 있다.In an embodiment, the IoT server changes the state of the IoT device linked to "when watching a movie" corresponding to the playback situation information of the playback of the movie content 200 in response to a pre-learned situation or a user's setting. By judging whether this is necessary, you can check the control information for the IoT device. According to an embodiment, control information may be pre-registered by turning off the "living room lighting" of the IoT device in response to the reproduction situation information for the reproduction of the movie content.

실시예에 따른 제어 메시지(210)는 IoT 서버에서 영화 컨텐츠(200)의 실행 및 거실 조명이 ON 상태인 상황을 감지하는 경우에 제공될 수 있다. 예를 들어, 영화 컨텐츠(200)가 실행되었을 시, 거실 조명이 OFF 상태인 경우 제어 메시지(210)는 셋톱박스나 디스플레이 장치로 제공되지 않을 수 있다.The control message 210 according to the embodiment may be provided when the IoT server detects the execution of the movie content 200 and a situation in which the living room lighting is in the ON state. For example, when the movie content 200 is executed, when the living room lighting is in an OFF state, the control message 210 may not be provided to a set-top box or a display device.

실시예에서, 제어 메시지(210)에 의하여 실행 버튼(211) 및 취소 버튼(212)이 제공될 수 있으며 사용자는 셋톱박스 리모컨 또는 TV 리모컨의 버튼 등을 이용한 입력을 통해 제어 메시지(210)에 의하여 추천되는 IoT 기기의 상태 변경의 실행을 동의하거나 동의하지 않을 수 있다.In the embodiment, the execution button 211 and the cancel button 212 may be provided by the control message 210, and the user can receive the control message 210 through input using a button of a set-top box remote control or a TV remote control. You may or may not agree to the implementation of the recommended IoT device state change.

일 실시예에서는, 리모컨의 마이크나 인공지능 스피커형의 셋톱박스를 이용한 음성 인식을 통하여 인식 혹은 입력되는 사용자의 음성 답변에 대응하여 IoT 기기의 상태 변경의 실행을 동의하거나 동의하지 않을 수 있다.In an embodiment, in response to a user's voice response recognized or input through voice recognition using a microphone of a remote control or an artificial intelligence speaker-type set-top box, it is possible to agree or disagree with the execution of the state change of the IoT device.

도 3은 일실시예에 있어서, IoT 기기 간의 연동 서비스의 다른 일례이다.3 is another example of an interworking service between IoT devices according to an embodiment.

실시예는, 인공지능 스피커(300)를 통해 음성으로 제어 메시지(310)를 출력하는 형태에 대한 것이다.The embodiment relates to a form of outputting the control message 310 by voice through the artificial intelligence speaker 300.

해당 실시예를 도 2의 실시예로 확대하면, 영화 컨텐츠(200)의 재생 시 인공지능 스피커(300)에서 음성의 메시지로 제어 메시지(210)의 내용을 전달할 수 있다.If this embodiment is expanded to the embodiment of FIG. 2, when the movie content 200 is played back, the artificial intelligence speaker 300 may transmit the content of the control message 210 as a voice message.

인공지능 스피커(300)를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 청각적으로 출력되는 경우, 해당 메시지의 출력 이후 사용자의 음성 답변을 통해 상태 변경에 대한 동의 또는 반대할 수 있다. 수신된 음성 답변은 인공지능 스피커 자체 또는 인공지능 스피커와 연동된 별도의 음성 인식 서버를 통해 응답 정보가 생성되고, 생성된 응답 정보를 IoT 서버가 수신 받을 수 있다.When a message recommending a state change of an IoT device is output aurally through the artificial intelligence speaker 300, after the message is output, a user's voice response may be used to agree or object to the state change. For the received voice response, response information is generated through the artificial intelligence speaker itself or a separate speech recognition server interlocked with the artificial intelligence speaker, and the generated response information can be received by the IoT server.

도 3의 실시예에 따른 재생 상황 정보는, TV를 통해 불특정 컨텐츠가 재생되는 도중 인공지능 스피커(300)를 통해 음악을 재생하는 상황에 대한 것이다. 예를 들어, TV에서 컨텐츠 재생 중에 사용자에 의해 인공지능 스피커(300)에서 음악을 재생하면, 해당 재생 상황 정보에 대응하여 TV를 OFF하는 제어 정보가 IoT 서버에 미리 등록될 수 있다.The reproduction situation information according to the embodiment of FIG. 3 relates to a situation in which music is reproduced through the artificial intelligence speaker 300 while unspecified content is being reproduced through the TV. For example, when a user plays music on the artificial intelligence speaker 300 while content is being played on a TV, control information for turning off the TV in response to the corresponding playback situation information may be registered in advance in the IoT server.

실시예에 따른 제어 메시지(310)는 IoT 서버에서 TV의 실행 및 인공지능 스피커에서 음악이 재생 중인 상황을 감지하는 경우에 제공될 수 있다.The control message 310 according to the embodiment may be provided when the IoT server detects a situation in which the TV is running and music is being played on the artificial intelligence speaker.

실시예에서는, 인공지능 스피커(300)로 출력되는 제어 메시지(310)에 대한 사용자의 음성 답변의 응답을 통해 TV를 OFF하는 제어 정보의 실행을 동의하거나 동의하지 않을 수 있다.In an embodiment, through a response to a user's voice response to the control message 310 output to the artificial intelligence speaker 300, the execution of control information for turning off the TV may or may not be agreed.

도 4는 일실시예에 있어서, IoT 서버의 블록도이다.4 is a block diagram of an IoT server according to an embodiment.

실시예에 따른 IoT 서버(400)는 메모리(410) 및 하나 이상의 프로세서(420)가 포함될 수 있고, IoT 서버(400)의 동작 방법이 메모리(410)에 저장되어 프로세서(420)에 의해 실행될 수 있다.The IoT server 400 according to the embodiment may include a memory 410 and one or more processors 420, and an operation method of the IoT server 400 may be stored in the memory 410 and executed by the processor 420. have.

IoT 서버(400)는, 셋톱박스 및 컨텐츠 서버 중 적어도 하나로부터 컨텐츠의 재생 상황 정보를 수신한다.The IoT server 400 receives content playback status information from at least one of a set-top box and a content server.

실시예에서 재생 상황 정보는, 셋톱박스에서 재생 중인 컨텐츠의 종류에 대한 정보, 재생 시각에 대한 정보, 재생 시간에 대한 정보 등이 포함될 수 있고, 컨텐츠의 종류로 예를 들어, 실시간 방송, 영화, TV 다시 보기 등 중 어떤 형태의 컨텐츠가 재생되는지에 대한 정보가 포함될 수 있다.In an embodiment, the playback status information may include information on the type of content being played in the set-top box, information on the playback time, information on the playback time, etc. As the type of content, for example, real-time broadcast, movie, Information on what type of content is played, such as TV replay, may be included.

IoT 서버(400)는, 재생 상황 정보에 기초하여 IoT 기기의 상태 변경이 필요한지 판단한다.The IoT server 400 determines whether it is necessary to change the state of the IoT device based on the reproduction situation information.

실시예에서, 셋톱박스에서 재생 중인 컨텐츠에 대한 재생 상황 정보에 대응하여 IoT 기기의 상태를 제어하는 루틴에 대해 학습하는 딥러닝 과정을 통해 재생 상황 정보에 대응하여 IoT 기기의 상태의 변경 여부를 판단할 수 있다.In an embodiment, it is determined whether the state of the IoT device is changed in response to the playback situation information through a deep learning process that learns about a routine that controls the state of the IoT device in response to the playback situation information for the content being played in the set-top box. can do.

실시예에서, IoT 서버(400)에서 사용자의 IoT 기기의 사용 패턴을 학습할 수 있고, 학습 결과에 따라 재생 상황 정보에 대응하는 IoT 기기의 상태의 변경 여부를 판단할 수 있다.In an embodiment, the IoT server 400 may learn a usage pattern of the user's IoT device, and determine whether the state of the IoT device corresponding to the playback situation information is changed according to the learning result.

다른 실시예에서, 사용자에 의해 IoT 서버(400)에 등록된 패턴에 기초하여 재생 상황 정보에 대응하는 IoT 기기의 상태의 변경 여부를 판단할 수 있다.In another embodiment, it may be determined whether the state of the IoT device corresponding to the playback situation information is changed based on the pattern registered in the IoT server 400 by the user.

IoT 기기의 상태 변경 여부를 판단하기 위해 IoT 기기의 현재 상태에 대한 정보를 획득하여 IoT 기기의 현재 상태를 파악할 수 있고, 재생 상황 정보 및 IoT 기기의 현재 상태를 고려하여 상태 변경이 필요한지 판단할 수 있다.In order to determine whether the state of the IoT device has changed, the current state of the IoT device can be obtained by acquiring information on the current state of the IoT device, and it is possible to determine whether a state change is necessary by considering the playback status information and the current state of the IoT device. have.

예를 들어, 셋톱박스에서 특정 카테고리의 컨텐츠가 재생되는 상황에 대응하여 미리 정해진 시간 이내에 사용자의 수동 제어로 IoT 기기(예컨대 IoT 조명)의 상태 변경이 일정 기준 횟수 이상 발생하는 경우, 해당 컨텐츠가 셋톱박스에서 재생되는 재생 상황 정보에 대응하여, 해당 IoT 기기의 상태 변경이 필요한 것으로 판단할 수 있다.For example, in response to a situation in which content of a specific category is played in a set-top box, if the status of an IoT device (e.g., IoT lighting) is changed by a user's manual control within a predetermined period of time, the corresponding content is set-top. In response to the playback situation information played in the box, it may be determined that the state of the IoT device needs to be changed.

IoT 서버(400)는, 판단 여부에 따라 IoT 기기의 상태 변경을 위한 제어 정보를 IoT 기기로 전송한다.The IoT server 400 transmits control information for changing the state of the IoT device to the IoT device according to whether it is determined.

실시예에서, IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, IoT 기기의 상태를 자동으로 변경할 수 있고 또는 IoT 기기의 상태 변경을 사용자에게 문의한 뒤 사용자로부터 수신되는 응답 정보에 기초하여 상태를 변경하거나 변경하지 않을 수 있다.In an embodiment, when it is determined that the state of the IoT device needs to be changed, the state of the IoT device may be automatically changed, or the state of the IoT device may be changed based on response information received from the user after inquiring to the user to change the state of the IoT device. May or may not change.

IoT 기기의 상태를 자동으로 변경하는 경우, IoT 서버(400)는 IoT 기기의 상태 변경을 공지하기 위한 메시지를 IoT 기기 혹은 셋톱박스와 연결된 출력 장치를 이용하여 출력하되, 시각적 또는 청각적 메시지로 출력될 수 있다.In the case of automatically changing the state of the IoT device, the IoT server 400 outputs a message for notifying the change of the state of the IoT device using an output device connected to the IoT device or set-top box, but outputs a visual or audible message. Can be.

또는 IoT 기기의 상태 변경을 문의하기 위해, IoT 서버(400)는 IoT 기기, 셋톱박스와 연결된 출력장치(예를 들어, 디스플레이) 또는 다른 IoT 기기(예를 들어, 스피커 등)을 이용하여 사용자에게 IoT 기기의 상태 변경을 문의할 수 있다.Or, in order to inquire about the change of the state of the IoT device, the IoT server 400 may use an IoT device, an output device (eg, a display) connected to the set-top box, or another IoT device (eg, a speaker, etc.) to the user. You can inquire about changes in the state of the IoT device.

예를 들어, 셋톱박스 또는 셋톱박스와 연결된 TV의 디스플레이를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 시각적으로 출력될 수 있으며, 이를 위해 제어 메시지가 셋톱박스 또는 TV 로 전송될 수 있다. 또는 제어 메시지를 인공지능 스피커로 전송하여 인공지능 스피커를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 청각적으로 출력될 수 있다.For example, a message recommending a state change of an IoT device may be visually output through a display of a set-top box or a TV connected to the set-top box, and a control message may be transmitted to the set-top box or TV for this purpose. Alternatively, a message recommending change of the state of the IoT device may be audibly output through the artificial intelligence speaker by transmitting a control message to the artificial intelligence speaker.

실시예에서, IoT 서버(400)는 IoT 기기의 상태 변경에 대한 문의에 대한 응답 정보를 수신하면 응답 정보에 대응하여 IoT 기기의 상태를 변경하기 위한 제어 정보를 생성하여 IoT 기기로 전송하거나, 제어 정보를 생성하지 않을 수 있다.In an embodiment, the IoT server 400 generates control information for changing the state of the IoT device in response to the response information upon receiving response information to an inquiry about the change of the state of the IoT device and transmits it to the IoT device, or controls It may not generate information.

셋톱박스 또는 TV의 디스플레이를 통해 IoT 기기의 상태 변경을 추천하는 제어 메시지가 시각적으로 출력되는 경우, IoT 기기의 상태 변경에 대해서 동의 및 반대를 위한 두 가지 버튼이 출력되고, 두 가지 버튼 중 사용자로부터의 어느 하나의 버튼의 입력에 따라 생성된 응답 정보를 수신하여 IoT 서버(400)는 제어 정보를 생성하거나 생성하지 않을 수 있다. 제어 정보가 생성되는 경우, IoT 서버(400)는 상태 변경의 대상이 되는 IoT 기기로 해당 제어 정보를 전송하여 IoT 기기의 상태를 제어할 수 있다. When a control message recommending the change of the state of the IoT device is visually output through the display of the set-top box or TV, two buttons for agreeing and disagreeing with the change of the state of the IoT device are displayed, among the two buttons, from the user. The IoT server 400 may or may not generate control information by receiving response information generated according to the input of any one of the buttons. When control information is generated, the IoT server 400 may control the state of the IoT device by transmitting the corresponding control information to the IoT device subject to the state change.

실시예에 따른 IoT 기기의 상태 변경을 추천하기 위한 메시지는 셋톱박스 또는 TV의 디스플레이 장치에 출력되는 경우 디스플레이에 출력되는 컨텐츠와 중첩되어 동시에 표시될 수 있다.When a message for recommending a state change of an IoT device according to an embodiment is output to a set-top box or a display device of a TV, the message may be displayed simultaneously by overlapping with the content output on the display.

인공지능 스피커를 통해 IoT 기기의 상태 변경을 추천하는 메시지가 청각적으로 출력되는 경우, 해당 메시지의 출력 이후 사용자의 음성 답변을 통해 상태 변경에 대한 동의 또는 반대를 지시하는 응답 정보가 생성될 수 있다. 예를 들어, "그래", "응"이나 "아니", "싫어" 등의 동의 또는 반대를 위한 음성 답변을 인공지능 스피커로 수신될 수 있다. 수신된 음성 답변에 기초하여 인공지능 스피커 자체 또는 인공지능 스피커와 연동된 별도의 음성 인식 서버를 통해 응답 정보가 생성되고, 생성된 응답 정보는 IoT 서버로 전송된다.When the message recommending the state change of the IoT device is output aurally through the artificial intelligence speaker, response information indicating consent or disagreement to the state change may be generated through the user's voice response after the message is output. . For example, a voice response for consent or disagreement such as "yes", "yes", "no", and "dislike" may be received by the artificial intelligence speaker. Response information is generated through the artificial intelligence speaker itself or a separate speech recognition server interlocked with the artificial intelligence speaker based on the received voice response, and the generated response information is transmitted to the IoT server.

이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The embodiments described above may be implemented as a hardware component, a software component, and/or a combination of a hardware component and a software component. For example, the devices, methods, and components described in the embodiments are, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate (FPGA). array), programmable logic unit (PLU), microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications executed on the operating system. Further, the processing device may access, store, manipulate, process, and generate data in response to the execution of software. For the convenience of understanding, although it is sometimes described that one processing device is used, one of ordinary skill in the art, the processing device is a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that it may include. For example, the processing device may include a plurality of processors or one processor and one controller. In addition, other processing configurations are possible, such as a parallel processor.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of these, configuring the processing unit to operate as desired or processed independently or collectively. You can command the device. Software and/or data may be interpreted by a processing device or, to provide instructions or data to a processing device, of any type of machine, component, physical device, virtual equipment, computer storage medium or device. , Or may be permanently or temporarily embodyed in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored on one or more computer-readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and usable to those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -A hardware device specially configured to store and execute program instructions such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operation of the embodiment, and vice versa.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described by the limited drawings, a person of ordinary skill in the art can apply various technical modifications and variations based on the above. For example, the described techniques are performed in a different order from the described method, and/or components such as systems, structures, devices, circuits, etc. described are combined or combined in a form different from the described method, or other components Alternatively, even if substituted or substituted by an equivalent, an appropriate result can be achieved.

Claims (20)

IoT 연동 서비스를 위한 IoT 서버의 동작 방법에 있어서,
셋톱박스 및 IoT 기기가 상기 IoT 서버를 통해 연동되는 환경에서, 상기 셋톱박스 및 컨텐츠 서버 중 적어도 하나로부터 컨텐츠의 재생 상황 정보를 수신하는 단계;
상기 재생 상황 정보에 기초하여 상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계; 및
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계
를 포함하는,
IoT 서버의 동작 방법.
In the method of operating an IoT server for an IoT linked service,
In an environment in which a set-top box and an IoT device are interlocked through the IoT server, receiving information on a reproduction situation of a content from at least one of the set-top box and a content server;
Determining whether a state change of the IoT device is necessary based on the reproduction situation information; And
Transmitting control information for changing the state of the IoT device to the IoT device according to the determination.
Containing,
How the IoT server works.
 제1항에 있어서,
상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계는,
상기 IoT 기기의 현재 상태를 판단하는 단계; 및
상기 재생 상황 정보 및 상기 IoT 기기의 현재 상태를 고려하여 상기 상태 변경이 필요한지 판단하는 단계
를 포함하는,
IoT 서버의 동작 방법.
The method of claim 1,
The step of determining whether the state of the IoT device needs to be changed comprises:
Determining a current state of the IoT device; And
Determining whether the state change is necessary in consideration of the reproduction situation information and the current state of the IoT device
Containing,
How the IoT server works.
 제1항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는,
상기 IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, 상기 셋톱박스와 연결된 디스플레이 장치에 상기 IoT 기기의 상태 변경을 추천하기 위한 메시지를 출력하도록 제어 메시지를 상기 셋톱박스로 전송하는 단계
를 포함하는,
IoT 서버의 동작 방법.
The method of claim 1,
Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made,
When it is determined that the state of the IoT device needs to be changed, transmitting a control message to the set-top box to output a message for recommending the state change of the IoT device to a display device connected to the set-top box.
Containing,
How the IoT server works.
 제3항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는,
상기 제어 메시지에 대해 수신된 응답 정보에 대응하여 상기 제어 정보를 상기 IoT 기기로 전송하는 단계
를 포함하는,
IoT 서버의 동작 방법.
The method of claim 3,
Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made,
Transmitting the control information to the IoT device in response to response information received for the control message
Containing,
How the IoT server works.
 제3항에 있어서,
상기 IoT 기기의 상태 변경을 추천하기 위한 메시지는,
상기 디스플레이 장치에 출력되는 상기 컨텐츠와 중첩되어 표시되는,
IoT 서버의 동작 방법.
The method of claim 3,
The message for recommending the state change of the IoT device is,
Displayed by being overlapped with the content output on the display device,
How the IoT server works.
 제1항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는,
상기 IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, 인공지능 스피커에서 상기 IoT 기기의 상태 변경을 추천하기 위한 메시지를 음성으로 출력하도록 제어 메시지를 상기 인공지능 스피커로 전송하는 단계
를 포함하는,
IoT 서버의 동작 방법.
The method of claim 1,
Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made,
When it is determined that the state of the IoT device needs to be changed, transmitting a control message to the artificial intelligence speaker so that the artificial intelligence speaker outputs a message for recommending the state change of the IoT device as a voice.
Containing,
How the IoT server works.
 제6항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계는,
상기 인공지능 스피커에 입력된 상기 제어 메시지에 대한 음성 답변에 따른 응답 정보에 대응하여 상기 제어 정보를 상기 IoT 기기로 전송하는 단계
를 포함하는,
IoT 서버의 동작 방법.
The method of claim 6,
Transmitting control information for changing the state of the IoT device to the IoT device according to whether the determination is made,
Transmitting the control information to the IoT device in response to response information according to a voice response to the control message input to the artificial intelligence speaker
Containing,
How the IoT server works.
 제1항에 있어서,
상기 셋톱박스에서 특정 카테고리의 컨텐츠가 재생됨을 감지하고, 상기 특정 카테고리의 컨텐츠의 재생 이후 일정 시간 이내에 상기 IoT 기기가 수동 제어된 상기 IoT 기기의 상태 변경 정보를 수신하는 상황이 일정 횟수 이상 발생하는 경우, 상기 재생 상황 정보에 대응하여 상기 IoT 기기의 상태 변경을 위한 판단하기 위한 판단 기준 정보를 생성하는 단계
를 더 포함하는,
IoT 서버의 동작 방법.
The method of claim 1,
When the set-top box detects that content of a specific category is being played, and a situation in which the IoT device receives status change information of the manually controlled IoT device within a certain time after the content of the specific category occurs more than a certain number of times And generating determination criterion information for determining a state change of the IoT device in response to the reproduction situation information
Further comprising,
How the IoT server works.
 제8항에 있어서,
상기 판단 기준 정보에 기초하여 상기 IoT 기기의 상태 변경을 위한 제어 메시지를 제공하고, 상기 IoT 기기의 상태 변경의 실행을 동의하지 않는 상황이 일정 횟수 이상 발생하는 경우, 상기 판단 기준 정보를 삭제하는 단계
를 더 포함하는,
IoT 서버의 동작 방법.
The method of claim 8,
Providing a control message for changing the state of the IoT device based on the determination criterion information, and deleting the determination criterion information when a situation where the execution of the state change of the IoT device is not agreed occurs more than a certain number of times
Further comprising,
How the IoT server works.
 연동 서비스를 위한 셋톱박스의 동작 방법에 있어서,
상기 셋톱박스 및 IoT 기기가 연동되는 환경에서, 상기 셋톱박스 및 컨텐츠 서버 중 적어도 하나로부터 컨텐츠의 재생 상황 정보를 수신하는 단계;
상기 재생 상황 정보에 기초하여 상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계; 및
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계
를 포함하는,
셋톱박스의 동작 방법.
In the method of operating a set-top box for interlocking service,
In an environment in which the set-top box and the IoT device are interlocked, receiving content playback status information from at least one of the set-top box and a content server;
Determining whether a state change of the IoT device is necessary based on the reproduction situation information; And
Transmitting control information for changing the state of the IoT device to the IoT device according to the determination.
Containing,
How the set-top box works.
 하드웨어와 결합되어 제1항 내지 제10항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
A computer program stored in a medium for executing the method of any one of claims 1 to 10 in combination with hardware.
 IoT 연동 서비스를 위한 IoT 서버에 있어서,
하나 이상의 프로세서;
메모리; 및
상기 메모리에 저장되어 있으며 상기 하나 이상의 프로세서에 의하여 실행되도록 구성되는 하나 이상의 프로그램을 포함하고,
상기 프로그램은,
셋톱박스 및 IoT 기기가 상기 IoT 서버를 통해 연동되는 환경에서, 상기 셋톱박스 및 컨텐츠 서버 중 적어도 하나로부터 컨텐츠의 재생 상황 정보를 수신하는 단계;
상기 재생 상황 정보에 기초하여 상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계; 및
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계
를 실행하는,
IoT 서버.
In the IoT server for IoT linked service,
One or more processors;
Memory; And
At least one program stored in the memory and configured to be executed by the at least one processor,
The above program,
In an environment in which a set-top box and an IoT device are interlocked through the IoT server, receiving information on a reproduction situation of a content from at least one of the set-top box and a content server;
Determining whether a state change of the IoT device is necessary based on the reproduction situation information; And
Transmitting control information for changing the state of the IoT device to the IoT device according to the determination.
To run,
IoT server.
 제12에 있어서,
상기 IoT 기기의 상태 변경이 필요한지 판단하는 단계에서,
상기 IoT 기기의 현재 상태를 판단하는 단계; 및
상기 재생 상황 정보 및 상기 IoT 기기의 현재 상태를 고려하여 상기 상태 변경이 필요한지 판단하는 단계
를 실행하는,
IoT 서버.
The method of claim 12,
In the step of determining whether the state of the IoT device needs to be changed,
Determining a current state of the IoT device; And
Determining whether the state change is necessary in consideration of the reproduction situation information and the current state of the IoT device
To run,
IoT server.
 제12항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계에서,
상기 IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, 상기 셋톱박스와 연결된 디스플레이 장치에 상기 IoT 기기의 상태 변경을 추천하기 위한 메시지를 출력하도록 제어 메시지를 상기 셋톱박스로 전송하는 단계
를 실행하는,
IoT 서버.
The method of claim 12,
In the step of transmitting control information for changing the state of the IoT device to the IoT device according to the determination,
When it is determined that the state of the IoT device needs to be changed, transmitting a control message to the set-top box to output a message for recommending the state change of the IoT device to a display device connected to the set-top box.
To run,
IoT server.
 제14항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계에서,
상기 제어 메시지에 대해 수신된 응답 정보에 대응하여 상기 제어 정보를 상기 IoT 기기로 전송하는 단계
를 실행하는,
IoT 서버.
The method of claim 14,
In the step of transmitting control information for changing the state of the IoT device to the IoT device according to the determination,
Transmitting the control information to the IoT device in response to response information received for the control message
To run,
IoT server.
 제14항에 있어서,
상기 IoT 기기의 상태 변경을 추천하기 위한 메시지는,
상기 디스플레이 장치에 출력되는 상기 컨텐츠와 중첩되어 표시되는,
IoT 서버.
The method of claim 14,
The message for recommending the state change of the IoT device is,
Displayed by being overlapped with the content output on the display device,
IoT server.
 제12항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계에서,
상기 IoT 기기의 상태 변경이 필요한 것으로 판단된 경우, 인공지능 스피커에서 상기 IoT 기기의 상태 변경을 추천하기 위한 메시지를 음성으로 출력하도록 제어 메시지를 상기 인공지능 스피커로 전송하는 단계
를 실행하는,
IoT 서버.
The method of claim 12,
In the step of transmitting control information for changing the state of the IoT device to the IoT device according to the determination,
When it is determined that the state of the IoT device needs to be changed, transmitting a control message to the artificial intelligence speaker so that the artificial intelligence speaker outputs a message for recommending the state change of the IoT device as a voice.
To run,
IoT server.
 제17항에 있어서,
상기 판단 여부에 따라 상기 IoT 기기의 상태 변경을 위한 제어 정보를 상기 IoT 기기로 전송하는 단계에서,
상기 인공지능 스피커에 입력된 상기 제어 메시지에 대한 음성 답변에 따른 응답 정보에 대응하여 상기 제어 정보를 상기 IoT 기기로 전송하는 단계
를 실행하는,
IoT 서버.
The method of claim 17,
In the step of transmitting control information for changing the state of the IoT device to the IoT device according to the determination,
Transmitting the control information to the IoT device in response to response information according to a voice response to the control message input to the artificial intelligence speaker
To run,
IoT server.
 제12항에 있어서,
상기 셋톱박스에서 특정 카테고리의 컨텐츠가 재생됨을 감지하고, 상기 특정 카테고리의 컨텐츠의 재생 이후 일정 시간 이내에 상기 IoT 기기가 수동 제어된 상기 IoT 기기의 상태 변경 정보를 수신하는 상황이 일정 횟수 이상 발생하는 경우, 상기 재생 상황 정보에 대응하여 상기 IoT 기기의 상태 변경을 위한 판단하기 위한 판단 기준 정보를 생성하는 단계
를 더 실행하는
IoT 서버.
The method of claim 12,
When the set-top box detects that content of a specific category is being played, and a situation in which the IoT device receives status change information of the manually controlled IoT device within a certain time after the content of the specific category occurs more than a certain number of times And generating determination criterion information for determining a state change of the IoT device in response to the reproduction situation information
To run more
IoT server.
 제19항에 있어서,
상기 판단 기준 정보에 기초하여 상기 IoT 기기의 상태 변경을 위한 제어 메시지를 제공하고, 상기 IoT 기기의 상태 변경의 실행을 동의하지 않는 상황이 일정 횟수 이상 발생하는 경우, 상기 판단 기준 정보를 삭제하는 단계
를 더 실행하는,
IoT 서버.The method of claim 19,
Providing a control message for changing the state of the IoT device based on the determination criterion information, and deleting the determination criterion information when a situation where the execution of the state change of the IoT device is not agreed occurs more than a certain number of times
To run more,
IoT server.
KR1020190114348A 2019-09-17 2019-09-17 Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof KR102356229B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190114348A KR102356229B1 (en) 2019-09-17 2019-09-17 Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190114348A KR102356229B1 (en) 2019-09-17 2019-09-17 Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof

Publications (2)

Publication Number Publication Date
KR20210032834A true KR20210032834A (en) 2021-03-25
KR102356229B1 KR102356229B1 (en) 2022-01-26

Family

ID=75222721

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190114348A KR102356229B1 (en) 2019-09-17 2019-09-17 Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof

Country Status (1)

Country Link
KR (1) KR102356229B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023121041A1 (en) * 2021-12-24 2023-06-29 삼성전자 주식회사 Electronic device for controlling external electronic device, and method for controlling same

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130074847A (en) * 2011-12-27 2013-07-05 오종택 System and method for managing device profile using mobile phone, appliances, and service server for personal environment service
KR20150029974A (en) * 2013-09-11 2015-03-19 엘지전자 주식회사 Display device and method for controlling the same
KR20170075597A (en) * 2015-12-23 2017-07-03 삼성전자주식회사 Method and appratus for controlling a device
KR101925034B1 (en) * 2017-03-28 2018-12-04 엘지전자 주식회사 Smart controlling device and method for controlling the same
KR20180137913A (en) * 2017-06-20 2018-12-28 삼성전자주식회사 Electronic device for playing contents and operating method thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130074847A (en) * 2011-12-27 2013-07-05 오종택 System and method for managing device profile using mobile phone, appliances, and service server for personal environment service
KR20150029974A (en) * 2013-09-11 2015-03-19 엘지전자 주식회사 Display device and method for controlling the same
KR20170075597A (en) * 2015-12-23 2017-07-03 삼성전자주식회사 Method and appratus for controlling a device
KR101925034B1 (en) * 2017-03-28 2018-12-04 엘지전자 주식회사 Smart controlling device and method for controlling the same
KR20180137913A (en) * 2017-06-20 2018-12-28 삼성전자주식회사 Electronic device for playing contents and operating method thereof

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023121041A1 (en) * 2021-12-24 2023-06-29 삼성전자 주식회사 Electronic device for controlling external electronic device, and method for controlling same

Also Published As

Publication number Publication date
KR102356229B1 (en) 2022-01-26

Similar Documents

Publication Publication Date Title
US11212486B1 (en) Location based device grouping with voice control
KR102025391B1 (en) Device control according to user's talk position
US20200288263A1 (en) Environmental condition based spatial audio presentation
US20190304448A1 (en) Audio playback device and voice control method thereof
US10971144B2 (en) Communicating context to a device using an imperceptible audio identifier
JP6752870B2 (en) Methods and systems for controlling artificial intelligence devices using multiple wake words
CN104985599A (en) Intelligent robot control method and system based on artificial intelligence and intelligent robot
KR101968725B1 (en) Media selection for providing information corresponding to voice query
KR20180052347A (en) Voice recognition apparatus and method
KR102209092B1 (en) Method and system for controlling artificial intelligence device using plurality wake up word
CN104520924A (en) Encoding and rendering of object based audio indicative of game audio content
US11140503B2 (en) Timer-based access for audio streaming and rendering
CN111142833B (en) Method and system for developing voice interaction product based on contextual model
KR20200038162A (en) Method and apparatus for controlling audio signal for applying audio zooming effect in virtual reality
US20210004201A1 (en) Audio capture and rendering for extended reality experiences
CN105723740A (en) Screen-relative rendering of audio and encoding and decoding of audio for such rendering
KR20210032834A (en) Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof
KR101609064B1 (en) Interactive guide using augmented reality
KR20210000965A (en) Operating Method of Service Server For IoT Simultaneous Execution And Service Server of Thereof
KR102370161B1 (en) Operating Method Of IoT Server For IoT Linkage Service And IoT Server Of Thereof
US10448186B2 (en) Distributed audio mixing
KR102070300B1 (en) Method, computer program and system for tuning hearing aid
KR102551681B1 (en) Method and apparatus for outputting content with adjusted volume
US8943247B1 (en) Media sink device input identification
CN112261569B (en) Method and equipment for playing multiple channels

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant