KR20210123401A - 자동화 환경들을 위한 다중역할 디바이스들 - Google Patents

자동화 환경들을 위한 다중역할 디바이스들 Download PDF

Info

Publication number
KR20210123401A
KR20210123401A KR1020217029400A KR20217029400A KR20210123401A KR 20210123401 A KR20210123401 A KR 20210123401A KR 1020217029400 A KR1020217029400 A KR 1020217029400A KR 20217029400 A KR20217029400 A KR 20217029400A KR 20210123401 A KR20210123401 A KR 20210123401A
Authority
KR
South Korea
Prior art keywords
automation
role
host
hub
devices
Prior art date
Application number
KR1020217029400A
Other languages
English (en)
Inventor
로버트 피. 마돈나
티모시 알. 로카시오
아서 에이. 제이콥슨
빅터 렌디나
데이비드 더블유. 타첼
Original Assignee
사반트 시스템즈, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 사반트 시스템즈, 인크. filed Critical 사반트 시스템즈, 인크.
Publication of KR20210123401A publication Critical patent/KR20210123401A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/283Processing of data at an internetworking point of a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/2866Architectures; Arrangements
    • H04L67/30Profiles
    • H04L67/303Terminal profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Selective Calling Equipment (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 일 양태에 따르면, 호스트 또는 허브와 같은 자동화 제어 디바이스에는 그것이 다중역할 자동화 제어 디바이스가 되도록 향상된 기능성이 제공된다. 다중역할 자동화 제어 디바이스는 네이티브 제어 프로토콜이 일반적으로 호환가능하지 않은 확장된 다양성의 "스마트" 또는 다른 디바이스들을 제어할 수 있다. 다중역할 자동화 제어 디바이스는 호스트, 허브, 사운드바, "스마트" 서모스탯, "스마트" 증폭기, 오디오 스피커, 또는 다른 디바이스를 포함하는 다양한 기본 디바이스들을 사용하여 구현될 수 있다.

Description

자동화 환경들을 위한 다중역할 디바이스들
관련 출원들에 대한 상호 참조
본 출원은 Madonna 등에 의해 2019년 2월 14일에 출원되고 MULTI-ROLE DEVICES FOR AUTOMATION ENVIRONMENTS에 대한 미국 임시 특허 출원 일련 번호 제62/805,456호의 혜택을 주장하며, 미국 임시 특허 출원은 참조로 이로써 포함된다.
포함된 특허들 및 출원들
2011년 4월 19일에 발행되고, 명칭이 PROGRAMMING ENVIRONMENT AND METADATA MANAGEMENT FOR PROGRAMMABLE MULTIMEDIA CONTROLLER인 미국 특허 제7,930,644호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다. 2012년 7월 3일에 발행되고, 명칭이 LOCATION-BASED SHARING OF MULTIMEDIA CONTROL RESOURCES인 미국 특허 제8,213,463호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다. 2012년 10월 23일에 발행되고, 명칭이 VIRTUAL ROOM-BASED LIGHT FIXTURE AND DEVICE CONTROL인 미국 특허 제8,296,669호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다. 2014년 2월 25일에 발행되고, 명칭이 APPARATUS AND METHOD FOR MIXING GRAPHICS WITH VIDEO IMAGES인 미국 특허 제8,659,704호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다. 2015년 10월 6일에 발행되고, 명칭이 PROGRAMMABLE MULTIMEDIA CONTROLLER WITH PROGRAMMABLE SERVICES인 미국 특허 제9,153,125호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다. 2018년 9월 6일에 발행되고, 명칭이 SMALL SCREEN VIRTUAL ROOM-BASED USER INTERFACE인 동시계류중인 출원 일련 번호 제16/123,731호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다. 2019년 1월 22일에 발행되고, 명칭이 DEVICE MOUNTING SYSTEM인 동시계류중인 출원 일련 번호 제16/254,245호는 본 출원과 공동 양수인에게 양도되고 참조로 이로써 포함된다.
발명의 분야
본 발명은 일반적으로 자동화의 분야에 관한 것으로, 더 구체적으로, 자동화 환경들에서 다수의 역할을 수행하게 할 수 있는 다양한 디바이스들의 능력들을 개선하는 것에 관한 것이다.
거주 및 상업 환경들의 자동화에 대한 요구는 "스마트" 도어벨들, 서모스탯들, 조명, 보안 시스템들, 오디오, 비디오, 및 많은 다른 디바이스들의 극적으로 확장되는 시장을 초래하였다. 이들 디바이스들은 경쟁 또는 성능 이유들로, 서로 일반적으로 호환가능하지 않은 상이한 제어 프로토콜들을 채택했던 상당 수의 제조자들에 의해 제공된다. 따라서, 하나의 제조자에 의해 제공되는 "스마트" 서모스탯은 광범위하게 채택된 표준에 따라 동작하지 않고, 종종 상이한 제조자에 의해 제공되는 "스마트" 조명으로 상호운영되지 않을 것이다. 다른 단점들 중에서, 이러한 상호운용성 부족은 특정 자동화 환경을 위한 디바이스들을 선택할 시에 최종 사용자의 선택들을 제한한다. 다른 단점은 최종 사용자가 단일 제어 디바이스(예를 들어, 리모트 컨트롤, 스마트폰, 또는 태블릿)로 환경 내의 디바이스들의 전부를 효과적으로 제어할 수 없다는 것이다.
그 결과, 최종 사용자는 하나의 제조자가 관심 "스마트" 디바이스들의 전부를 최종 사용자에게 제공하지 않을지라도, 그러한 제조자를 선택하거나, 다수의 제조자를 비용 증가 및 상호운용성 부족으로 선택하도록 종종 강요받는다.
본 발명의 일 양태에 따르면, 호스트 또는 허브와 같은 자동화 제어 디바이스에는 그것이 다중역할 자동화 제어 디바이스가 되도록 향상된 기능성이 제공된다. 다중역할 자동화 제어 디바이스는 네이티브 제어 프로토콜이 일반적으로 호환가능하지 않은 확장된 다양성의 "스마트" 또는 다른 디바이스들을 제어할 수 있다. 다중역할 자동화 제어 디바이스는 호스트, 허브, 사운드바, "스마트" 서모스탯, "스마트" 증폭기, 오디오 스피커, 또는 다른 디바이스를 포함하는 다양한 기본 디바이스들을 사용하여 구현될 수 있다.
본 발명의 다른 양태에 따르면, 자동화 제어 허브에는 그것이 다중역할 자동화 제어 허브가 되도록 향상된 기능성이 제공된다. 자동화 제어 허브에 이용가능한 고성능 그래픽스 처리를 강화하면, 다중역할 자동화 제어 허브에는 향상된 온 스크린 디스플레이가 제공된다. 향상된 온 스크린 디스플레이는 자동화 제어 허브가 그것의 네이티브 기능성으로 제어할 수 있는 것보다 확장된 다양성의 디바이스들을 통한 자동화 제어를 위해 사용자 인터페이스를 제공한다. 향상된 온 스크린 디스플레이는 또한 다른 것들 중에서 윈도잉, 타일링, 및 픽처 인 픽처를 포함하는 고급 비디오 디스플레이 관리를 제공할 수 있다. 향상된 온 스크린 디스플레이는 또한 자동화 환경의 실질적으로 모든 양태들의 실시간 제어 및 상태뿐만 아니라, 구성을 지원할 수 있다. 더 구체적으로, 향상된 온 스크린 디스플레이는 서비스들, 페이브리트들, 장면들, 자동화들, 및 스케줄링에 대한 액세스 및 이들을 통한 제어를 제공할 수 있다.
게다가, 향상된 온 스크린 디스플레이들을 갖는 다수의 자동화 제어 허브는 그러한 온 스크린 디스플레이들을 다수의 TV 또는 비디오 모니터에 분배하는 공유 자원으로서 함께 풀링될 수 있다. 그러한 분배는 TV HDMI에 전용인 IP를 통한 송신 또는 스트리밍에 의해 달성될 수 있다.
본 발명의 다른 양태에 따르면, 유선 네트워크 연결성을 포함하는 천장 또는 벽 장착가능 스피커에는 무선 네트워크 연결성을 포함하는 부가 기능성이 제공된다. 그 결과, 각각의 스피커는 오디오 출력 디바이스뿐만 아니라 무선 네트워크 액세스 포인트 둘 다로서 기능하는 다중역할 스피커가 된다. 게다가, 다중역할 스피커는 위에 참조된 바와 같이, 제3 역할, 즉 자동화 제어 디바이스를 수행할 수 있다.
본 발명의 다른 양태에 따르면, 자동화 제어 허브에는 AVB 네트워크 연결성이 제공되고 자동화 제어 허브는 다중역할 자동화 제어 허브가 된다. AVB 네트워크를 통해, 다중역할 자동화 제어 허브는 뮤직을 네트워킹된 스피커들, 사운드바들, 또는 다른 디바이스들에 분배한다.
아래의 발명 설명은 첨부 도면을 언급한다.
도 1은 본 발명의 일 양태에 따른 다중역할 자동화 호스트를 포함하는 자동화된 환경의 블록도이다.
도 2는 도 1에 도시된 다중역할 자동화 호스트에 대한 베이스로서 사용될 수 있는 사운드바의 블록도이다.
도 3은 도 1에 도시된 다중역할 자동화 호스트 및 다른 디바이스들에 의해 수행되는 상위 레벨 메시징의 일 예를 예시하는 메시지 흐름도이다.
도 4는 도 1에 도시된 다중역할 자동화 호스트 및 다른 디바이스들에 의해 수행되는 하위 레벨 메시징의 일 예를 예시하는 메시지 흐름도이다.
도 5는 본 발명의 일 양태에 따른 향상된 온 스크린 디스플레이를 제공하는 다중역할 자동화 허브를 포함하는 자동화된 환경의 블록도이다.
도 6a 내지 도 6d는 도 5에 도시된 다중역할 자동화 허브에 의해 생성되는 향상된 온 스크린 디스플레이의 예시적 스크린샷들이다.
도 7은 도 5에 도시된 향상된 온 스크린 디스플레이를 갖는 다중역할 자동화 허브에 의해 수행되는 상위 레벨 메시징의 일 예를 예시하는 메시지 흐름도이다.
도 7a는 다수가 공유 자원이 되기 위해 풀링되는 자동화된 환경의 블록도이다.
도 7b는 도 7a의 다양한 디바이스들 중에 통신을 예시하는 메시지 흐름도이다.
도 8은 본 발명의 일 양태에 따른 다중역할 스피커의 블록도이다.
도 9는 본 발명의 일 양태에 따른 다중역할 증폭기의 블록도이다.
도 1은 다중역할 자동화 호스트(104)를 포함하는 자동화 환경(100)을 도시한다. 제1 네트워크 클라우드(102)는 다중역할 자동화 호스트(104)에 의해 액세스가능하다. 다중역할 자동화 호스트(104)는 시스템 구성(도시되지 않음)을 포함하며 이는 결국, 다중역할 자동화 호스트(104)에 의해 제어되는 각각의 프로파일링된 디바이스(108a...108b)와 연관된 구성요소 또는 디바이스 프로파일(도시되지 않음)을 포함한다. 일반적으로, 디바이스 프로파일은 연관된 디바이스에 대한 입력들, 출력들, 및 이용가능 세트의 커맨드들을 설명하는 파일 또는 다른 데이터 구조이다. 내부 스토리지, 네트워크 클라우드(102), 또는 다른 외부 소스를 통해, 다중역할 자동화 호스트(104)는 주어진 디바이스를 제어하기 위해 연관된 디바이스 프로파일에 대한 액세스를 가져야 한다.
다중역할 자동화 호스트(104)에 적절한 시스템 구성, 구성요소 프로파일, 및 하드웨어 및 소프트웨어의 예들은 위에 참조로 포함된 미국 특허 제9,153,125호에서 발견될 수 있다.
사용자는 다중역할 자동화 호스트(104)와 호환가능한 호스트 제어 애플리케이션(120)을 실행하는 사용자 디바이스(116a)를 동작함으로써 다중역할 자동화 호스트(104)와 상호작용하고, 이를 효과적으로 제어할 수 있다. 사용자 디바이스(116a)는 호스트 제어 애플리케이션(120)을 실행하고 다중역할 자동화 호스트(104)와 통신하기 위한 적절한 네트워크 연결성을 가질 수 있는 스마트폰, 태블릿, 또는 다른 디바이스로 구현될 수 있다. 대안적으로, 사용자는 다중역할 자동화 호스트(104)와 호환가능한 사용자 리모트(118a)를 사용하여 다중역할 자동화 호스트(104)와 상호작용하고 이를 효과적으로 제어할 수 있다. 다중역할 자동화 호스트(104)는 예를 들어, 스마트 호스트 모델 SHC-S2-00, 서라운드 사운드 사운드바, "스마트" 멀티스탯 서모스탯, "스마트" 오디오 스피커(도 8과 관련하여 아래에 설명된 바와 같음), "스마트" 증폭기(도 9와 관련하여 아래에 설명된 바와 같음), 또는 매사추세츠주 한니스 소재의 Savant Systems, LLC에 의해 제공된 다른 디바이스들에 기초할 수 있다.
제2 네트워크 클라우드(110)는 자동화 허브(112)에 의해 액세스가능하다. 임의의 프로파일링된 디바이스를 제어할 수 있는 다중역할 자동화 호스트(104)와 달리, 자동화 허브(112)는 종래에 제어 프로토콜 준수로서 인증되었던 디바이스들(114a 내지 114c)(즉, 자동화 허브(112)의 제조자에 의해 지정된 제어 프로토콜을 준수하는 것으로 인증되었던 디바이스들)만을 제어할 수 있다.
사용자는 자동화 허브(112)와 호환가능한 허브 제어 애플리케이션(122)을 실행하는 사용자 디바이스(116b)를 동작함으로써 자동화 허브(112)와 상호작용하고 이를 효과적으로 제어할 수 있다. 사용자 디바이스(116b)는 허브 제어 애플리케이션(122)을 실행하고 자동화 허브(112)와 통신하기 위한 적절한 네트워크 연결성을 가질 수 있는 스마트폰, 태블릿, 또는 다른 디바이스로 구현될 수 있다. 대안적으로, 사용자는 자동화 허브(112)와 호환가능한 사용자 리모트(118b)를 사용하여 자동화 허브(112)와 상호작용하고 이를 효과적으로 제어할 수 있다. 자동화 허브(112)는 예를 들어, Apple TV®, HomePod™, 또는 iPad® 실행 HomeKit®에 기초할 수 있으며, 그의 전부는 캘리포니아주 쿠퍼티노 소재의 애플 인크에 의해 제공된다.
다중역할 자동화 호스트(104)는 자동화 브리지(106)를 포함한다. 일 실시예에서, 애플 인크로부터 입수가능한 SDK는 자동화 브리지(106)를 생성하고 그것을 다중역할 자동화 호스트(104)에 내장하기 위해 사용될 수 있다. 아래에 더 상세히 설명되는 바와 같이, 자동화 브리지(106)는 인증된 제어 프로토콜 준수 디바이스들(114a 내지 114c)에 의해 사용되는 바와 같이 동일한 제조자 지정 제어 프로토콜을 사용하여 자동화 허브(112)와 (양방향) 통신하는 기능을 부분적으로 한다. 자동화 브리지(106) 또한 다중역할 자동화 호스트(104)에 의한 처리를 위해 자동화 허브(112)로부터 수신된 제어 프로토콜 메시지들을 적절한 형태로 변환하는 기능을 한다(그 역도 또한 마찬가지임). 유리하게는, 그러한 통신 및 프로토콜 변환을 통해, 그리고 디바이스의 타입에 따라, 프로파일링된 디바이스들(108a...108b)뿐만 아니라 사용자 리모트(118a)는 자동화 허브(112)에 노출된다. 즉, 프로파일링된 디바이스들(108a...108b) 및 사용자 리모트(118a)는 자동화 허브(112)에 의해 사용된 제어 프로토콜을 준수하는 것으로 인증되지 않을지라도, 다중역할 자동화 호스트(104) 덕택으로 자동화 허브(112)에 보이게 되고 자동화 허브에 의해 제어가능하게 된다.
도 2는 다중역할 자동화 호스트(104)(도 1)를 구현하기 위해 사용될 수 있는 전동 서라운드 사운드 사운드바(200)의 블록도를 도시한다. 마이크로프로세서(202)는 오디오 디지털 신호 프로세서(digital signal processor)(DSP)(204)와 양방향 통신으로 결합된다. 오디오 DSP(204)는 또한 토스링크(214)에 결합된다. 오디오 DSP(204)는 다양한 오디오 스피커들(208)에 출력들이 결합되는 증폭기(206)에 출력들이 결합되는 디지털 아날로그 변환기들(도시되지 않음)에 결합된다.
마이크로프로세서(202)는 또한 WISA 모듈(210)뿐만 아니라 WiFi 듀얼 밴드 모듈(212)과 양방향 통신으로 결합된다. 게다가, 마이크로프로세서(202)는 LAN/AVB 포트(216), 마이크로폰(218), RS232 제어 포트들, 적외선(IR) 제어 포트들, 또는 다른 제어 포트들을 포함할 수 있는 제어 포트들(220)에 결합된다. AC/DC 전원(224)은 전력을 사운드바(200)에 제공한다.
도 3은 프로파일링된 디바이스들(108a...108b) 및 사용자 리모트(118a)(도 1)가 자동화 허브(112)에 보이고 자동화 허브에 의해 제어가능하게 하기 위해 필요한 상위 레벨 메시징의 일 예를 예시하는 메시지 흐름도를 도시한다. 사용자 디바이스(116a) 상에 실행하는 호스트 제어 애플리케이션(120)은 다중역할 자동화 호스트(104)로 발견 프로토콜(300)을 개시한다. 다음에, 호스트 제어 애플리케이션(120)은 호스트 프로비전 메시지(302)를 송신한다. 이에 응답하여, 다중역할 자동화 호스트(104)는 자동화 허브(112)에 의해 지원되고/제어될 적절한 타입인 임의의(프로파일) 디바이스(들)를 식별하기 위해 그 구성의 질의(304)로 진행한다. 적절한 타입의 적어도 하나의 프로파일링된 디바이스가 식별되는 것을 가정하면, 다중역할 자동화 호스트(104)는 브리지(106)를 통해, 허브에의 브리지 디바이스들 추가 메시지(306)를 자동화 허브(112)에 송신한다.
그 후에, 호스트 제어 애플리케이션(120)은 디바이스 제어 메시지(308)를 다중역할 자동화 호스트(104)에 발행하며 이는 메시지(308)가 전송되는 프로파일링된 디바이스를 통해 제어(310)를 가함으로써 응답한다. 대조적으로, 허브 제어 애플리케이션(122)이 프로파일링된 디바이스에 전송되는 디바이스 제어 메시지(312)를 발행할 때, 자동화 허브(112)는 제어 요청 메시지(314)를 다중역할 자동화 호스트(104)에 포워딩함으로써 응답한다. 결국, 다중역할 자동화 호스트(104)는 메시지(312)가 전송되는 프로파일링된 디바이스를 통해 제어(316)를 가함으로써 응답한다.
도 4는 허브 제어 애플리케이션(122) 및 자동화 허브(112)가 위에 설명된 바와 같이 다중역할 자동화 호스트(104)를 통해 보이고 있었던 프로파일링된 디바이스(108a)를 통해 제어를 가하고 있을 때 발생하는 하위 레벨 메시징의 일 예를 예시하는 메시지 흐름도를 도시한다. 이러한 예에서, 자동화 허브(112)는 Apple TV®, HomePod™, 또는 iPad® 실행 HomeKit®을 나타낸다. 허브 제어 애플리케이션(122)는 HMActionSet 실행 메시지(400)를 자동화 허브(112)에 발행하며 이는 결국, 디바이스 특성 기입 메시지(402)를 다중역할 자동화 호스트(104)에 발행한다. 디바이스 특성 기입 메시지(402)는 예를 들어, 램프를 어둡게 하기 위해 조작될 수 있다.
이에 응답하여, 다중역할 자동화 호스트(104)는 메시지(402)가 전송되는 디바이스와 부합하는 프로파일을 위치파악한(404) 다음, 프로파일링된 커맨드(406)를 디바이스(108a)에 송신한다. 프로파일링된 커맨드(406)는 실질적으로 메시지(402)와 비교가능하지만 디바이스(108a)에 의해 예상되고 이해되는 형태로 다중역할 자동화 호스트(104)에 의해 준비된다. 프로파일링된 커맨드(406)의 수신 및 실행 후에, 디바이스(108a)는 커맨드 응답(408)을 다중역할 자동화 호스트(104)에 송신하며 이는 결국, 특성 업데이트 메시지(410)를 자동화 허브(112)에 송신한다.
이제 도 5를 참조하면, 자동화 환경(500)이 도시된다. 일반적으로, 도 5에 도시된 각각의 구성요소 또는 디바이스는 비교가능 구조를 포함하고 하나를 제외하고 도 1에 도시되고 위에 설명된 대응하는 구성요소 또는 디바이스의 기능을 할 수 있다. 다중역할 자동화 허브(512)는 허브로서의 그의 역할에서, 위에 설명된 자동화 허브(112)(도 1)와 실질적으로 비교가능한 방식으로 기능한다. 그러나, 다중역할 자동화 허브(512)는 부가 역할에서, 텔레비전(524)에 대한 향상된 온 스크린 디스플레이(enhanced on screen display)(EOSD)를 생성한다.
바람직한 실시예에서, 위에 참조된 바와 같이, 자동화 허브(112)는 Apple TV® 실행 HomeKit®에 기초할 수 있다. Apple TV®은 사용자가 부착된 TV를 플레이하거나, 파워 온/오프하기 위해 오디오/비디오를 선택하는 것을 허용하는 제한된 온 스크린 디스플레이를 포함하지만, 그러한 제한된 온 스크린 디스플레이는 다른 디바이스들을 제어할 수 없다. 그러나, Apple TV®은 고성능 그래픽스 처리 능력을 포함한다.
본 발명의 일 양태에 따르면, 애플리케이션이 제공되며, 애플리케이션은 애플 인크의 tvOS® 상에 실행하고, 도 6a 내지 도 6d에 도시된 바와 같이 EOSD(600)를 생성하기 위해 Apple TV®로 구축된 고성능 그래픽스 처리를 강화한다. Apple TV®을 제재 모드로 배치함으로써, Apple TV®은 EOSD(600)를 생성하는 애플리케이션으로 자동 부팅될 것이다.
도 6a에 도시된 바와 같이, EOSD(600)는 회전 아이콘들, 그래픽들, 이미지들, 비디오 또는 다른 콘텐츠의 3개의 수평 밴드로서 포맷팅될 수 있다. 예를 들어, 밴드(602)는 집의 다양한 방들 및 구역들에 대응하는 일련의 "장면들"을 디스플레이한다. 사용자가 대응하는 이미지를 센터링하고 선택하기 위해 (사용자 디바이스들(516a 또는 516b), 또는 사용자 리모트들(518a 또는 518b)(도 5)을 사용하여 EOSD(600)와 상호작용함으로써) 특정 "장면"을 선택할 때, 다중역할 자동화 호스트(504) 또는 다중역할 자동화 허브(512)의 제어 하에 있는 조명, 디바이스들, 음영들, 매체들, 또는 임의의 다른 자원의 이전에 정의된 조건들 또는 상태들은 선택된 방 또는 구역에 설정될 것이다.
EOSD(600)의 밴드(604)는 다양한 시스템들 및 서비스들에 대응하는 아이콘들을 디스플레이한다. 사용자가 센터링된 "보안" 아이콘을 선택할 때, EOSD(600)는 밴드(608)가 수개의 폐쇄 회로 보안 카메라들로부터 생방송들(live feeds)을 디스플레이하는 도 6b에 도시된 스크린으로 전환된다. 유사하게, 도 6c에 도시된 바와 같이, 사용자가 센터링된 "조명" 아이콘을 선택할 때, EOSD(600)는 밴드(610)가 수직 슬라이더 바 제어와 함께 개별 방들 또는 램프들의 현재 조명 조건들의 트루 이미지들을 디스플레이하는 도 6d에 도시된 스크린으로 전환된다. 현재 조명 조건들의 그러한 트루 이미지들을 발생시키고 디스플레이하기 위한 예시적 기술들은 미국 특허 제8,296,669호, 및 동시계류중인 출원 일련 번호 제16/123,731호에 설명되어 있으며, 그것의 둘 다는 위에 참조로 포함되어 있다.
EOSD(600)는 또한 다른 것들 중에서 윈도잉, 타일링, 및 픽처 인 픽처를 포함하는 고급 비디오 디스플레이 관리를 제공할 수 있다. EOSD(600)를 발생시키기 위한 하드웨어 및 소프트웨어에 관한 상세들은 위에 참조로 포함된 특허들 및 계류중인 특허 출원들에서 발견될 수 있다.
도 7은 EOSD(600)를 갖는 다중역할 자동화 허브(512)가 다중역할 자동화 호스트(504)와 상호작용할 때 발생하는 하위 레벨 메시징의 일 예를 예시하는 메시지 흐름도를 도시한다. 호스트 제어 애플리케이션(520)은 프로파일링된 디바이스 제어 메시지(700)를 다중역할 자동화 호스트(504)에 발행한다. 메시지(700)가 프로파일링된 디바이스에 전송되기 때문에, 다중역할 자동화 호스트(504)는 프로파일링된 디바이스 커맨드 실행(702)으로 진행한다.
그 후에, 호스트 제어 애플리케이션(520)은 인증된 디바이스 제어 메시지(704)를 발행한다. 메시지(704)가 프로파일링된 디바이스에 전송되지 않기 때문에, 다중역할 자동화 호스트(504)는 포워드 요청 메시지(706)를, 브리지(506)를 통해, 다중역할 자동화 허브(512)에 발행한다. 다중역할 자동화 허브(512)는 결국, 제어 요청 메시지(708)를 자동화 허브(112)에 발행하며 이는 인증된 디바이스 커맨드 실행(710)으로 진행한다.
본 발명의 일 양태에 따르면, 애플리케이션이 제공되며, 애플리케이션은 애플 인크의 tvOS® 상에 실행하고, Apple TV®을 다중역할 자동화 호스트로 변환하기 위해 필요한 기능성을 제공한다. 전용 리모트에 의해 제어가능한 다른 디바이스들은 또한 다중역할 자동화 호스트의 역할을 하기에 적절할 수 있다. 일반적으로, 애플리케이션은 프로파일링된 디바이스들을 인식하고 제어하는 능력을 포함하는 모든 필요한 자동화 호스트 기능성을 구체화한다. Apple TV®의 네이티브 기능성 때문에, 이러한 타입의 다중역할 자동화 호스트는 부가 허브 또는 다른 중간 디바이스 없이 프로파일링된 디바이스들 및 인증된 디바이스들의 혼합을 효과적으로 제어할 수 있다. 게다가, 이러한 타입의 다중역할 자동화 호스트의 능력은 AVB 네트워크 연결성의 추가에 의해 추가로 향상될 수 있다. 그러한 연결성은 Apple TV® 다중역할 자동화 호스트의 경우에, AVB 가능 스피커들, 사운드바들 또는 다른 디바이스들에 직접 디지털 형태의 뮤직의 분배를 허용한다.
본 발명의 다른 양태에 따르면, 다수의 애플 TV는 다수의 TV에 대한 공유 자원이 되기 위해 함께 풀링될 수 있다. 도 7a에 도시된 바와 같이, 자동화된 환경(700)은 한 그룹의 TV들(712a 내지 712c)을 포함하며, 그 각각은 비디오 스위치(714)에 결합된다. 다중역할 자동화 호스트(716)는 다수의 애플 TV(718a 및 718b), 및 향상된 OSD를 갖는 다수의 허브(726a 및 726b)(위에 설명된 향상된 OSD를 갖는 허브(512)(도 5)와 실질적으로 유사함)와 마찬가지로, 비디오 스위치(714)에 결합된다.
일반적으로, 다중역할 자동화 호스트(716)로부터의 커맨드들에 응답하여, 비디오 스위치(714)는 다양한 것들의 TV들(712a 내지 712c)과, 다양한 것들의 애플 TV들(718a 내지 718b) 또는 향상된 OSD를 갖는 허브들(726a 내지 726b) 사이에 비디오 신호 연결들 또는 경로들을 설정하고 해체하는 기능을 한다. 다중역할 자동화 호스트(716)는 또한 단일 애플 TV(718a 내지 718b)와 다수의 TV(712a 내지 712c) 사이에 비디오 신호 연결을 설정하라고 비디오 스위치(714)에 명령할 수 있다. 유사하게, 다중역할 자동화 호스트(716)는 또한 향상된 OSD를 갖는 단일 허브(726a 내지 726b)와 다수의 TV(712a 내지 712c) 사이에 비디오 신호 연결을 설정하라고 비디오 스위치(714)에 명령할 수 있다.
도 7b는 TV들(712a 내지 712c) 중 하나 상에 향상된 OSD를 디스플레이하기 위해 필요한 도 7a의 다양한 디바이스들 중에 통신을 예시하는 메시지 흐름도이다. 통신은 사용자(도시되지 않음)가 다중역할 자동화 호스트(716)로 구역 X 메시지(728)에 대한 OSD 요청의 송신을 야기하는 사용자 리모트(724) 상의 버튼을 누르는 것으로 시작된다. 다중역할 자동화 호스트(716)는 실제로, 특정 애플 TV(718a 내지 718b)(토큰과 연관됨)를 요청된 OSD 세션에 전용하는 디큐 메뉴 토큰 Y에 의해 우선 응답한다. 다음에, 다중역할 자동화 호스트(716)는 활성화 OSD 메시지(732)를 메뉴 자원 Y(762)(즉, 토큰 Y와 연관된 특정 애플 TV)에 송신한다. 이것 후에 시작 스트림 1 메시지(734)가 다중역할 자동화 호스트(716)로부터 메뉴 자원 Y의 비디오 송신기(758)로 팔로잉되고, 결국, 크기조절된 비디오를 갖는 시작 스트림 1 메시지(736)가 구역 X(764)에 의해 사용된 현재 송신기로 팔로잉된다.
다음에, 다중역할 자동화 호스트(716)는 픽처 인 픽처를 설정하고 적절한 송신기들을 할당하는 메시지(738)를 구역 X 비디오 수신기(760)에 송신한다. 이러한 지점에서, 향상된 OSD는 픽처 인 픽처에 나타난다(740). 그 다음, 사용자 OSD 내비게이션 메시지(742)는 사용자 리모트(724)로부터 메뉴 자원 Y(762)로 송신된다. 이것 후에 사용자 리모트(724)로부터의 취소 또는 선택 메시지(744)가 팔로잉된다. 취소 메시지(744)가 송신되었다면, OSD 비활성화 메시지(746)는 메뉴 자원 Y로부터 다중역할 자동화 호스트(716)로 송신된다. 이것 후에 OSD 세션이 끝났기 때문에 메뉴 토큰 Y가 큐(748)로 복귀된다.
그 후에, 메시지(750)는 원래 송신기에 대한 풀 스크린 비디오를 복원하기 위해 다중역할 호스트(716)로부터 송신된다. 이것 후에 정지 스트림 1 메시지(752)가 현재 송신기(764)로 팔로잉되고, 정지 스트림 1 메시지가 메뉴 자원 Y의 비디오 송신기(758)로 팔로잉되고, 풀 스크린 비디오(756)의 복원이 팔로잉된다.
게다가, 위에 설명된 향상된 OSD 예와 유사하게, 애플 TV(718a 내지 718b) 상에 이용가능한 다른 서비스들은 다수의 TV(712a 내지 712c)와 공유될 수 있다. 따라서, 넷플릭스, 날씨, 또는 많은 다른 것들과 같은 서비스들은 적절한 비디오 연결들을 설정하기 위해 비디오 스위치(714)를 이용하여, 애플 TV를 제재 모드에 배치하고 선택된 비디오를 IP를 통해 송신함으로써 다수의 TV(712a 내지 712c)와 공유될 수 있다.
본 발명의 다른 양태에 따르면, 천장 또는 벽 장착가능 스피커, 예컨대 동시계류중인 출원 일련 번호 제16/254,245호에 개시되고 위에 참조로 포함된 것들, 또는 북셸프 또는 다른 스피커는 향상된 기능성을 제공받고 다중역할 스피커가 된다. 이전에 개시된 스피커들은 디지털 오디오 및 파워 오버 이더넷(power over Ethernet)(PoE) 둘 다가 수신되는 LAN/AVB 포트를 포함한다. 도 8에 도시된 바와 같이, 다중역할 스피커(800)는 마이크로프로세서(804)에 결합된 LAN/AVB 포트(802)를 포함한다. 마이크로폰(806)은 디지털 신호 프로세서(DSP)(808)와 마찬가지로 마이크로프로세서(804)에 결합된다. 증폭기(810)는 DSP(808)뿐만 아니라 스피커(812)에 결합된다. 다중역할 스피커(800)는 또한 WISA 모듈(814) 및 WiFi 듀얼 밴드 모듈(816)을 포함하며, 그 둘 다는 무선 연결성을 제공한다. 그것의 WISA 모듈(814) 또는 LAN/AVB 포트(802)를 통해, 다중역할 스피커(800)는 디지털 오디오를 이하의 2개의 형태 중 어느 하나로 분배할 수 있다: 16 비트, 44.1kHz 형태(에어플레이 2에 사용됨), 또는 더 높은 충실도 24 비트, 96kHz 형태.
그것의 WiFi 듀얼 밴드 모듈(816)을 통해, 다중역할 스피커(800)는 무선 액세스 포인트의 역할을 할 뿐만 아니라 에어플레이 2를 위한 지원을 제공한다. 집 전체에 오디오를 제공하기 위해, 스피커들은 집의 대부분 방 또는 다른 구역들 도처에 흔히 분배된다. 스피커들이 다중역할 스피커들이 되도록 무선 네트워크 연결성을 그러한 스피커들에 제공함으로써, 강건한 무선 네트워크 커버리지는 개별 무선 액세스 포인트들의 필요없이 달성된다. 그것의 WISA 모듈(814)을 통해, 다중역할 스피커(800)는 스테레오 사운드를 제공하기 위해 WISA 스피커(820)와 페어링될 수 있다. 페어링된 WISA 스피커(820)는 WISA 모듈(830) 및 DSP(824)에 결합된 마이크로컨트롤러(822)를 포함한다. DSP(824)는 증폭기(826)에 결합되며, 증폭기는 결국 스피커(828)에 결합된다. 일반적으로, 페어링된 WISA 스피커(820)는 다중역할 스피커(800)로부터 WISA 모듈(830)을 통해 디지털 오디오를 수신한다.
자동화 환경(100)(도 1) 내에서, 다중역할 스피커(800)는 이하의 4개의 역할의 임의의 조합으로 서빙할 수 있다: 오디오 스피커; 다중역할 자동화 호스트(104)(도 1); 무선 액세스 포인트; 및 WISA 스피커(820)와의 페어링.
도 9는 증폭기(906)에 차례로 결합되는 DSP(904)에 결합된 마이크로프로세서(902)를 포함하는 다중역할 증폭기(900)를 도시한다. 마이크로프로세서(902)는 LAN/AVB 포트(908), 아날로그 입력(910), 토스링크 입력(912), 및 RS232, IR, 또는 다른 제어 포트들을 포함할 수 있는 제어 포트들(914)에 각각 결합된다. AC/DC 전원(916)은 전력을 다중역할 증폭기(900)에 제공한다. 다중역할 증폭기(900)는 RCA 프리앰프 출력(920)을 제공하고 외부 패시브 스피커들(918)을 구동하기 위해 사용될 수 있다.
자동화 환경(100)(도 1) 내에서, 다중역할 증폭기(900)는 오디오 증폭기 및 다중역할 자동화 호스트(104)(도 1) 둘 다의 역할을 할 수 있다.
상술한 설명은 이러한 발명의 특정 실시예들에 관한 것이었다. 그러나, 다른 변화들 및 수정들은 장점들의 일부 또는 전부를 달성하면서, 설명된 실시예들에 이루어질 수 있다는 점이 분명할 것이다. 예를 들어, 이러한 발명의 교시들은 컴퓨터, 하드웨어, 펌웨어, 또는 그것의 조합 상에 실행하는 프로그램 명령어들을 갖는 컴퓨터 판독가능 매체를 포함하는 소프트웨어로서 구현될 수 있다는 것이 분명히 고려된다. 따라서, 이러한 설명은 예로서만 취해지고 본 발명의 범위를 달리 제한하는 것으로 취해지지 않아야 한다. 따라서, 첨부된 청구항들의 목적은 본 발명의 진정한 사상 및 범위 내에 있는 바와 같은 모든 그러한 변화들 및 수정들을 망라하는 것이다.

Claims (3)

  1. 자동화 제어 장치로서,
    다중역할 자동화 호스트를 포함하며, 상기 다중역할 자동화 호스트는 적어도 하나의 사용자 디바이스와 통신하기 위한 연결성을 갖고, 상기 적어도 하나의 사용자 디바이스는 상기 다중역할 자동화 호스트가 응답하는 한 세트의 사용자 커맨드들을 갖고;
    상기 다중역할 자동화 호스트는 상기 다중역할 자동화 호스트가 하나 이상의 프로파일링된 디바이스를 직접 제어하는 제1 역할에서 동작하며, 상기 하나 이상의 프로파일링된 디바이스 각각은 상기 다중역할 자동화 호스트에 의해 액세스가능한 연관된 프로파일을 갖고, 상기 연관된 프로파일 각각은 상기 연관된 프로파일링된 디바이스가 응답하는 한 세트의 디바이스 커맨드들을 설명하는 정보를 포함하고;
    상기 다중역할 자동화 호스트는 상기 다중역할 자동화 호스트가 미리 결정된 제어 프로토콜을 준수하는 것으로 각각 인증되는 제1 세트의 하나 이상의 디바이스를 직접 제어하고, 상기 미리 결정된 제어 프로토콜을 준수하는 것으로 각각 인증되는 제2 세트의 하나 이상의 디바이스를 제1 자동화 허브를 통해 간접 제어하는 제2 역할에서 동작하는, 자동화 제어 장치.
  2. 제1항에 있어서, 상기 다중역할 자동화 호스트는 상기 미리 결정된 제어 프로토콜에 기초하여 제1 형태의 메시지들을 사용하여 상기 자동화 허브와 통신하고, 다중역할 자동화 컨트롤러에 의한 처리를 위해 상기 제1 형태를 제2 형태로 변환하는 자동화 브리지를 포함하며, 상기 하나 이상의 프로파일링된 디바이스는 상기 자동화 허브에 보여지고 상기 자동화 허브에 의해 제어가능하게 되는, 자동화 제어 장치.
  3. 자동화 환경에서 디바이스들을 제어하는 방법으로서,
    자동화 허브와 네트워킹되는 다중역할 자동화 호스트를 발견하기 위해 사용자 디바이스를 사용하는 단계;
    상기 다중역할 자동화 호스트와 연관된 구성이 상기 자동화 허브에 의해 제어될 적절한 타입의 하나 이상의 프로파일링된 디바이스를 포함하는지를 결정하는 단계;
    상기 자동화 허브에 의해 제어될 적어도 하나의 프로파일링된 디바이스를 식별하는 메시지를 상기 다중역할 자동화 호스트로부터 상기 자동화 허브로 송신하는 단계; 및
    상기 적어도 하나의 프로파일링된 디바이스를 제어하기 위해 상기 다중역할 자동화 호스트와 함께 상기 자동화 허브를 사용하는 단계
    를 포함하는, 방법.
KR1020217029400A 2019-02-14 2020-02-14 자동화 환경들을 위한 다중역할 디바이스들 KR20210123401A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962805456P 2019-02-14 2019-02-14
US62/805,456 2019-02-14
PCT/US2020/018222 WO2020168154A1 (en) 2019-02-14 2020-02-14 Multi-role devices for automation environments

Publications (1)

Publication Number Publication Date
KR20210123401A true KR20210123401A (ko) 2021-10-13

Family

ID=69960706

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020217029400A KR20210123401A (ko) 2019-02-14 2020-02-14 자동화 환경들을 위한 다중역할 디바이스들

Country Status (9)

Country Link
US (2) US11863343B2 (ko)
EP (1) EP3925195A1 (ko)
JP (1) JP2022520397A (ko)
KR (1) KR20210123401A (ko)
CN (1) CN113796059A (ko)
AU (1) AU2020221287A1 (ko)
CA (1) CA3130208A1 (ko)
IL (1) IL285561A (ko)
WO (1) WO2020168154A1 (ko)

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4369035B2 (ja) * 2000-11-10 2009-11-18 シャープ株式会社 情報通信システムおよび情報通信方法ならびに情報通信方法のプログラムを記録したコンピュータ読取可能な記録媒体
US8659704B2 (en) 2005-12-20 2014-02-25 Savant Systems, Llc Apparatus and method for mixing graphics with video images
US9153125B2 (en) * 2005-12-20 2015-10-06 Savant Systems, Llc Programmable multimedia controller with programmable services
US7480753B2 (en) * 2006-04-27 2009-01-20 Standard Microsystems Corporation Switching upstream and downstream logic between ports in a universal serial bus hub
US20080005262A1 (en) * 2006-06-16 2008-01-03 Henry Wurzburg Peripheral Sharing USB Hub for a Wireless Host
CN102413374A (zh) * 2006-08-18 2012-04-11 索尼株式会社 具有可换个性适配器的能自动重配置多媒体系统
US8421602B2 (en) * 2006-09-13 2013-04-16 Savant Systems, Llc Remote control unit for a programmable multimedia controller
US7930644B2 (en) 2006-09-13 2011-04-19 Savant Systems, Llc Programming environment and metadata management for programmable multimedia controller
JP2008245046A (ja) * 2007-03-28 2008-10-09 Brother Ind Ltd 複合機、およびデバイス制御システム
US8213463B2 (en) 2008-09-04 2012-07-03 Savant Systems, Llc Location-based sharing of multimedia control resources
US10613704B2 (en) * 2009-06-03 2020-04-07 Savant Systems, Llc Small screen virtual room-based user interface
RU2528016C2 (ru) 2009-06-03 2014-09-10 Савант Системс Ллс Способ и устройство для управления осветительным устройством в виртуальной комнате
US8526929B1 (en) * 2009-09-25 2013-09-03 Sprint Communications Company L.P. Mobile communication device provisioning and management
US8719581B2 (en) * 2010-09-22 2014-05-06 Savant Systems, Llc Programmable multimedia controller with flexible user access and shared device configurations
US9823892B2 (en) * 2011-08-26 2017-11-21 Dts Llc Audio adjustment system
US8649883B2 (en) * 2011-10-04 2014-02-11 Advanergy, Inc. Power distribution system and method
TW201339898A (zh) * 2012-03-23 2013-10-01 Primax Electronics Ltd 可應用於不同作業系統之鍵盤裝置
US10149335B2 (en) 2014-11-10 2018-12-04 Qualcomm Incorporated Connectivity module for internet of things (IOT) devices
US9704537B2 (en) 2015-09-03 2017-07-11 Echostar Technologies L.L.C. Methods and systems for coordinating home automation activity
US9806900B2 (en) 2015-10-05 2017-10-31 Savant Systems, Llc Wireless provisioning and configuring of hardware elements of a home automation system
US10320583B2 (en) 2016-10-07 2019-06-11 Verizon Patent And Licensing Inc. System and method for facilitating interoperability across internet of things (IOT) domains
CN111954780B (zh) 2018-01-22 2022-08-02 萨万特系统公司 设备安装系统

Also Published As

Publication number Publication date
CN113796059A (zh) 2021-12-14
US20200267013A1 (en) 2020-08-20
CA3130208A1 (en) 2020-08-20
IL285561A (en) 2021-09-30
AU2020221287A1 (en) 2021-08-26
US20240089141A1 (en) 2024-03-14
JP2022520397A (ja) 2022-03-30
WO2020168154A1 (en) 2020-08-20
US11863343B2 (en) 2024-01-02
EP3925195A1 (en) 2021-12-22

Similar Documents

Publication Publication Date Title
US11487500B2 (en) Portable playback device state variable
US11552843B2 (en) Playback devices and bonded zones
JP6797938B2 (ja) 媒体出力装置間での媒体転送
KR101248703B1 (ko) 다수의 장치 제어의 셋업을 위한 방법, 시스템 및 컴퓨터 판독가능 기록 매체
US20210329309A1 (en) Grouping in a system with multiple media playback protocols
US10271395B2 (en) Smart LED lighting device and system thereof
JP6081489B2 (ja) ネットワーク化された音楽再生のシステムおよび方法
US8884886B2 (en) Touch sensitive video signal display for a programmable multimedia controller
US9554089B2 (en) Smart LED lighting device and remote video chat system thereof
KR102304365B1 (ko) 디스플레이 장치 및 그의 명령 전송 방법
US11863343B2 (en) Multi-role devices for automation environments
Yun et al. Orchestral media: the method for synchronizing single media with multiple devices for ubiquitous home media services
US20150029401A1 (en) AV switching device control using a Zero Configuration Network protocol
CN117812524A (zh) 显示设备、播放设备和数据传输方法
JP2020024434A (ja) メディアシステムにおけるマルチチャンネルペアリング

Legal Events

Date Code Title Description
A201 Request for examination