KR102148906B1 - 페어링된 디바이스 - Google Patents

페어링된 디바이스 Download PDF

Info

Publication number
KR102148906B1
KR102148906B1 KR1020167001015A KR20167001015A KR102148906B1 KR 102148906 B1 KR102148906 B1 KR 102148906B1 KR 1020167001015 A KR1020167001015 A KR 1020167001015A KR 20167001015 A KR20167001015 A KR 20167001015A KR 102148906 B1 KR102148906 B1 KR 102148906B1
Authority
KR
South Korea
Prior art keywords
user
media device
indication
communication
pairing
Prior art date
Application number
KR1020167001015A
Other languages
English (en)
Other versions
KR20160023778A (ko
Inventor
카이도 커트
크리스토퍼 제임스 풀즈
Original Assignee
마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 filed Critical 마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Publication of KR20160023778A publication Critical patent/KR20160023778A/ko
Application granted granted Critical
Publication of KR102148906B1 publication Critical patent/KR102148906B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

미디어 디바이스가 본 명세서에 개시되어 있다. 미디어 디바이스는 경험을 사용자에게 전달하도록 구성된 출력 컴포넌트를 포함한다. 또한, 미디어 디바이스는 경험에 관한 정보를 페어링된 사용자 디바이스와 교환하기 위한 페어링 통신 링크(pairing communication link), 및 사용자 디바이스로부터 수신된 표시를 직접 검출하도록 구성된 검출 컴포넌트를 포함한다. 표시는 통신 링크 이외의 무선 인터페이스를 통해 수신된다. 게다가, 미디어 디바이스는 표시를 디코딩하기 위한 처리 컴포넌트를 포함한다. 미디어 디바이스는, 표시를 디코딩한 것에 응답하여, 페어링 통신 링크를 통해 페어링된 사용자 디바이스와 정보를 교환하도록 구성되어 있고, 이 정보는 옵션에 관한 정보를 포함한다. 처리 컴포넌트는 옵션의 선택을 검출하고 선택된 옵션을 구현하기 위해 미디어 디바이스의 동작을 수정하도록 또한 구성되어 있다.

Description

페어링된 디바이스{PAIRED DEVICES}
통상의 통신 시스템들은 개인용 컴퓨터 또는 모바일 디바이스와 같은 디바이스의 사용자가 인터넷과 같은 패킷 기반 컴퓨터 네트워크를 통해 음성 또는 화상 통화를 할 수 있게 한다. 이러한 통신 시스템들은 VoIP(voice over internet protocol 또는 video over internet protocol) 시스템들을 포함한다. 이 시스템들은, 종종 통상의 고정 회선 또는 모바일 셀룰러 네트워크보다 상당히 비용이 낮기 때문에, 사용자에 유리하다. 장거리 통신에 대해 특히 그러할 수 있다. VoIP 시스템을 사용하기 위해, 사용자는 자신의 디바이스 상에 클라이언트 소프트웨어를 설치하고 실행한다. 클라이언트 소프트웨어는 VoIP 접속을 설정하는 것은 물론, 등록(registration) 및 인증(authentication)과 같은 다른 기능들을 제공한다. 음성 통신에 부가하여, 클라이언트는 또한 인스턴트 메시징(instant messaging, IM), SMS 메시징, 파일 전송 및 음성 메일과 같은 다른 통신 매체에 대한 접속을 확립할 수 있다.
최근에, 인터넷 기능이 텔레비전 세트(종종 "스마트 TV"라고 지칭됨) 내에 또는 텔레비전 세트에 접속되도록 구성된 셋톱 박스 내에 통합되고 있다. 이것은 인터넷과 같은 패킷 기반 컴퓨터 네트워크를 통한 통신을 가능하게 하기 위해 클라이언트 소프트웨어를 텔레비전 세트에 통합시키는 것을 포함한다.
패킷 기반 통신 클라이언트를 TV에 임베딩(embedding)하는 것은 화상 통화(video calling)에 이용될 수 있는 대화면이 존재한다는 장점이 있다. 게다가, 특히 전기 간선으로부터 전원을 공급받는(mains electricity powered) 대형 소비자 전자 디바이스에 대한 전력 요건이, 예를 들어, 모바일 디바이스들보다 덜 엄격하기 때문에, TV에 상당한 처리 능력이 제공될 수 있다. 이것은 고품질 음성 및 비디오 인코딩과 같은 전 범위의 특징들이 임베디드 통신 클라이언트에 포함될 수 있게 한다.
하드웨어 디바이스들을 스마트 TV 내에 통합시키는 것이 또한 공지되어 있다. 예를 들어, 스마트 TV가 음성 커맨드에 반응할 수 있게 하기 위해 스마트 TV의 환경(예를 들어, 집의 방)을 항상 경청할 수 있는 마이크가 스마트 TV 내에 통합될 수 있다.
미디어 디바이스가 제공된다. 미디어 디바이스는 경험을 사용자에게 전달하도록 구성된 출력 컴포넌트를 포함한다. 또한, 미디어 디바이스는 경험에 관한 정보를 페어링된 사용자 디바이스와 교환하기 위한 페어링 통신 링크(pairing communication link), 및 사용자 디바이스로부터 수신된 표시(indication)를 직접 검출하도록 구성된 검출 컴포넌트를 포함한다. 표시는 통신 링크 이외의 무선 인터페이스(air interface)를 통해 수신된다. 게다가, 미디어 디바이스는 표시를 디코딩하기 위한 처리 컴포넌트를 포함한다. 미디어 디바이스는, 표시를 디코딩한 것에 응답하여, 페어링 통신 링크를 통해 페어링된 사용자 디바이스와 정보를 교환하도록 구성되어 있고, 상기 정보는 옵션에 관한 정보를 포함한다. 처리 컴포넌트는 옵션의 선택을 검출하고 선택된 옵션을 구현하기 위해 미디어 디바이스의 동작을 수정하도록 또한 구성되어 있다.
미디어 디바이스에서 전달되도록 구성된 경험에 관한 정보를 페어링된 미디어 디바이스와 교환하기 위한 페어링 통신 링크를 포함하는 사용자 디바이스가 또한 제공된다. 사용자 디바이스는 또한 통신 링크 이외의 무선 인터페이스를 통해 전송하기 위한 표시를 생성하는 표시 생성기, 및 미디어 디바이스가 전송된 표시를 검출한 것에 응답하여, 페어링 통신 링크를 통해 페어링된 미디어 디바이스와 정보를 교환하도록 구성된 처리 컴포넌트를 포함한다. 그 정보는 옵션에 관한 정보를 포함하며, 그로써 옵션의 선택의 검출 시에 미디어 디바이스가 자신의 동작을 수정할 수 있게 한다.
이 발명의 내용은 이하에서 발명을 실시하기 위한 구체적인 내용에 추가로 기술되는 일련의 개념들을 간략화된 형태로 소개하기 위해 제공된다. 이 발명의 내용은 청구하는 발명의 대상의 주요 특징들 또는 필수적인 특징들을 언급하기 위한 것이 아니며, 청구하는 발명의 대상의 범주를 제한하기 위해 사용되기 위한 것도 아니다.
기술된 실시예들의 더 나은 이해를 위해 그리고 기술된 실시예들이 어떻게 실시될 수 있는지를 보여주기 위해, 이제부터, 예로서, 하기의 도면들을 참조할 것이다.
도 1은 통신 시스템의 개략적 예시를 나타낸 도면.
도 2는 미디어 디바이스의 개략 블록도.
도 3는 사용자 디바이스의 개략 블록도.
도 4는 방법의 개략 블록도.
실시예들에 대해 이제부터 예시적으로만 기술할 것이다.
하나 이상의 보조[컴패니언(companion)] 사용자 디바이스들(예컨대, 스마트폰) 상에서, 이벤트(예컨대, 음성 또는 화상 통화를 나타내는 가청 호출음)를 나타내는, 알려진 오디오 톤들이 있는지 경청하는 것 및/또는 알려진 시각적 표시자들(알려진 QR 코드들 등)이 있는지 살펴보는 것을 할 수 있고 이벤트와 어떻게 상호 작용할지에 관한 옵션들을 제시할 수 있는 미디어 디바이스(예컨대, TV)가 본 명세서에 개시되어 있다.
미디어 디바이스는 경험을 사용자에게 전달하도록 구성된 출력 컴포넌트를 가진다. 예를 들어, 미디어 디바이스는 통신 클라이언트의 대화면 경험 버전을 사용자에게 전달하기 위해 사용되는, 대화면의 형태로 되어 있는 출력 컴포넌트를 가질 수 있다. 미디어 디바이스는, 표시를 검출한 것에 응답하여, 페어링된(컴패니언) 사용자 디바이스와의 자동 통신을 확립하도록 구성되어 있다.
사용자 디바이스는 경험을 사용자에게 전달하도록 구성된 출력 컴포넌트를 가진다. 예를 들어, 사용자 디바이스는 통신 클라이언트의 대안의 경험 버전을 사용자에게 전달할 수 있다. 사용자 디바이스 클라이언트 및 미디어 디바이스 클라이언트는 링킹(linking)되어 있을 수 있고, 사용자 디바이스 클라이언트는 "컴패니언 앱(companion app)" 스타일 경험을 제공한다.
도 1은 제2 사용자 디바이스(104)와 연관되어 있는 제2 사용자(102)("사용자 A") 및, 이 실시예에서, TV(television)인 미디어 디바이스(110)의 근방에 있는 제1 사용자(112)("사용자 B")를 포함하는 통신 시스템(100)을 도시한 것이다.
TV와 동일한 환경에 하나 이상의 다른 디바이스들이 있는 것은 흔히 있는 일이다. 이 다른 디바이스들은 본 명세서에서 "컴패니언 디바이스(companion device)"라고 지칭되는데, 이에 대해서는 이하에서 더 상세히 설명할 것이다. 예를 들어, 거실에, 스마트폰 및 랩톱 컴퓨터와 같은 컴패니언 디바이스들이 존재할 수 있다. 도 1은 컴패니언 디바이스의 이러한 일례를 랩톱 컴퓨터(114)로서 예시하고 있다. 도 1에서는, TV(110)에 부가하여, 단일의 컴패니언 사용자 디바이스(114)를 도시하고 있지만, TV(110)의 근방에 복수의 컴패니언 디바이스들이 존재할 수 있다는 것을 잘 알 것이다.
사용자 디바이스(104)는 통신 시스템(100)에서의 네트워크(106)를 거쳐 컴패니언 사용자 디바이스(114) 또는 TV(110)와 통신할 수 있고, 그로써 사용자들(102 및 112)이 네트워크(106)를 거쳐 서로 통신할 수 있게 한다.
도 1에 도시된 통신 시스템(100)은 패킷 기반 통신 시스템이지만, 다른 유형들의 통신 시스템이 사용될 수 있을 것이다. 네트워크(106)는, 예를 들어, 인터넷일 수 있다. 사용자 디바이스들(104 및 114) 각각은, 예를 들어, 휴대폰(mobile phone), 태블릿, 랩톱, PC(personal computer)(예를 들어, Windows™, Mac OS™ 및 Linux™ PC를 포함함), 게임 디바이스, PDA(personal digital assistant) 또는 네트워크(106)에 접속될 수 있는 다른 임베디드 디바이스(embedded device)일 수 있다. 사용자 디바이스(104) 및 컴패니언 디바이스(114)는 각자의 디바이스의 사용자로부터 정보를 수신하고 그 사용자에게 정보를 출력하도록 구성되어 있다. 사용자 디바이스(104) 및 컴패니언 디바이스(114)는 디스플레이 및 스피커와 같은 출력 수단을 포함한다. 사용자 디바이스(104) 및 컴패니언 디바이스(114)는 또한 키패드, 터치 스크린, 마우스, 오디오 신호를 수신하기 위한 마이크 및/또는 비디오 신호의 영상들을 포착(capture)하기 위한 카메라와 같은 입력 수단을 포함한다. 사용자 디바이스(104) 및 컴패니언 디바이스(114)는 네트워크(106)에 접속되어 있다. 터치 스크린의 경우, 사용자는 스와이프 또는 제스처에 의해 커맨드를 입력할 수 있다.
유의할 점은, 대안의 실시예들에서, 사용자 디바이스(104) 및 컴패니언 디바이스(114)가 도 1에 도시되지 않은 부가의 중간 네트워크들을 거쳐 네트워크(106)에 접속될 수 있다는 것이다. 예를 들어, 사용자 디바이스(104)가 모바일 디바이스인 경우, 사용자 디바이스는 도 1에 도시되지 않은 셀룰러 모바일 네트워크를 거쳐 네트워크(106)에 접속할 수 있다.
사용자 디바이스(104), 컴패니언 디바이스(114), 및 TV(110) 각각은 통신 시스템(100)과 연관된 소프트웨어 공급자에 의해 제공되는 통신 클라이언트(108)의 인스턴스(instance)를 실행한다. 통신 클라이언트는 각자의 디바이스 내의 로컬 프로세서 상에서 실행되는 소프트웨어 프로그램이다. 클라이언트는 디바이스가 통신 시스템(100)을 통해 데이터를 전송 및 수신하기 위해 디바이스에서 요구되는 처리를 수행한다.
통신 시스템(100)은 또한 서비스 공급자[예컨대, 네트워크(106)의 운영자]와 연관된 백 엔드 서버(back-end server)(120)를 포함한다. 디바이스(114) 및 TV(110) 둘 다는 네트워크(106)를 거쳐 백 엔드 서버(120)와 통신하도록 동작할 수 있다. 단일의 서버로서 도시되어 있지만, 서버(120)의 기능이 임의의 수의 적당한 컴퓨팅 디바이스들 간에 분배될 수 있다는 것을 잘 알 것이다.
각각의 통신 클라이언트(108a, 108b, 108c)는 사용자 디바이스(104), TV(110) 및 컴패니언 디바이스를 특정의 각자의 사용자와 연관시키는 로그인/등록 기능을 갖는다. 사용자들은 동일한 로그인/등록 상세(detail)와 연관된 다른 디바이스들 상에서 실행 중인 통신 클라이언트 인스턴스들을 가질 수 있다.
특정의 사용자 이름을 가지는 동일한 사용자가 상이한 단말들 상에서 동일한 클라이언트 애플리케이션의 다수의 인스턴스들에 동시에 로그인될 수 있는 경우에, 통신 네트워크(106)의 백 엔드 서버(120)는 사용자 이름(사용자 ID)을 그 다수의 인스턴스들 모두에 매핑하는 것은 물론, 개별적인 서브 식별자(서브 ID)를 특정의 개별 인스턴스 각각에 매핑하도록 구성되어 있다. 이와 같이, 통신 시스템은 통신 시스템 내에 사용자에 대한 일관성 있는 ID(identity)를 여전히 유지하면서 상이한 인스턴스들을 구별할 수 있다.
사용자(102)는 디바이스(104)에서 "사용자 A"로서 로그인되어 있다. 사용자(112)는 디바이스(114)에서 "사용자 B"로서 그리고 TV(110)에서 "사용자 B"로서 로그인되어 있다. TV(110)는 다수의 ID들로서 로그인될 수 있고, 그 ID들 중 하나가 디바이스(114)의 ID(즉, "사용자 B")와 일치한다.
TV(110)는 모뎀과 같은 네트워크 인터페이스를 거쳐 네트워크(106)에 접속되어 있다. 도 1에 도시된 TV(110)는 독립형 유닛이지만, 별개의 TV 및 STB(set-top box) 또는 다른 TV에 접속된 디바이스가 또한 사용될 수 있다는 것을 잘 알 것이다.
TV(110)는 임베디드 통신 클라이언트(108b)(클라이언트 엔진)를 실행하고 있다. 유의할 점은, 대안의 실시예들에서, 임베디드 통신 클라이언트가 STB에서 실행될 수 있다는 것이다. 임베디드 통신 클라이언트(108b)는 TV(110) 내의 로컬 프로세서 상에서 실행되는 소프트웨어를 포함한다.
TV(110)는 사용자(112)로부터 정보를 수신하고 사용자에게 정보를 출력하도록 구성되어 있다. 리모콘 유닛(remote control unit)은 TV(110)의 제어를 위해 사용자(112)에 의해 조작되는 입력 디바이스로서 기능할 수 있다. TV(110)는 또한 방송 텔레비전 신호들을 수신할 수 있고, 이들을 비디오(텔레비전 프로그램들)로서 TV 화면 상에서 사용자에게 디스플레이할 수 있다. 방송 텔레비전 신호들은 지상, 위성 또는 케이블 방송에 의해 전달될 수 있고, 아날로그 신호 또는 디지털 데이터의 형태로 되어 있을 수 있다.
이제부터, TV(110)에 임베딩된 하드웨어 및 소프트웨어 기능 블록들을 예시하고 있는 도 2를 참조한다. TV(110)는 화면(202) 및 적어도 하나의 스피커(212)를 비롯한 다수의 출력 컴포넌트들을 포함한다. 화면(202)은 영상들을 사용자(112)에게 디스플레이하기 위한 것이고, 비디오 신호들을 화면(202) 상에 올바르게 디스플레이되기 위해 요구되는 형태로 변환하도록 구성된 비디오 드라이버 하드웨어(204)에 의해 구동된다. 비디오 드라이버 하드웨어(204)는 2 개의 프레임 버퍼들(206 및 208)로부터 디지털 비디오 데이터를 제공받는다. 프레임 버퍼들(206 및 208)은 사용자에게 디스플레이되어야 하는 비디오 데이터를 버퍼링하는 저장 디바이스이다. 프레임 버퍼 2("FB2")는, 공지된 바와 같이 방송 TV의 디스플레이를 위한, 표준 TV 비디오 신호들을 수신한다. 프레임 버퍼 1("FB1")은, 곧 설명하겠지만, 패킷 기반 통신 클라이언트에 관련된 비디오 데이터를 저장한다. 오디오 증폭기(210)는 TV 오디오 신호들을 수신하고, 이들을 적어도 하나의 스피커(212)를 통해 출력하기 위해 증폭시킨다.
TV 오디오 및 비디오 입력 신호들 자체는 위성 중계기 스테이션(satellite repeater station), 무선 지상 중계기 스테이션(wireless terrestrial repeater station) 또는 케이블과 같은 임의의 적당한 수단을 통해 브로드캐스팅되고 TV(110)의 텔레비전 수신기 유닛(도시 생략)에 의해 수신되는 텔레비전 신호들로부터 온 것이다. 유의할 점은, 브로드캐스팅이 포인트 투 포인트 통신과 상이하다[멀티캐스팅(즉, 포인트 투 멀티포인트(point-to-multipoint))과 상이한 것을 포함함]는 것이다. 브로드캐스팅에서는, 신호들이 마구잡이로 - 즉, 사용자가 신호를 수신하기로 선택했는지에 관계없이(그렇지만, 권한 있는 사용자들만이 방송에 액세스할 수 있도록 복호화 키 또는 이러한 것들이 여전히 요구될 수 있음) - 전송되는 반면, 포인트 투 포인트 통신에서는, 신호들이 신호들을 수신하는 사용자 또는 사용자들에 의해 요청되어야만 한다. 달리 말하면, 방송을 수신하기 위해, 사용자는 방송국으로 어떤 신호도 송신할 필요 없이 "채널을 맞추기(tune in)"만 하는 반면, 포인트 투 포인트 접속을 확립하기 위해서는, 사용자와 방송국 간에 신호들이 교환되어야만 한다.
TV 수신기 유닛은, 예를 들어, 안테나, 위성 안테나 또는 케이블 입력; 샘플링 회로; 필터; 저잡음 증폭기; 믹서, 및/또는 아날로그-디지털 변환기를 포함할 수 있다. 수신기 유닛에 의해 수신된 후에, 신호들은 이어서, 도 1의 프레임 버퍼들 및 증폭기들에 입력되기 전에, 신호 처리 장치(역시 도시되지 않음)에 의해 처리된다. 이러한 신호 처리는 통상의 기술자에게 공지되어 있고, 따라서 본 명세서에서 상세히 논의되지 않는다.
TV(110)에 임베딩된 패킷 기반 통신 클라이언트는 대략 4 개의 주요 요소들에 기초한다. 이 4 개의 요소들은 메모리에 저장되고 프로세서 상에서 실행되는 소프트웨어 요소들로서 도시되어 있지만, 대안들이 생각되고 있다. 4 개의 요소들은 클라이언트 엔진(214); 오디오 엔진(216); 비디오 엔진(217); 및 TV 사용자 인터페이스(218)이다.
클라이언트 엔진(214)은 패킷 기반 통신 시스템에의 접속들을 확립하는 일을 맡고 있다. 이것은 TV(110)와 네트워크(106) 간의 접속을 거쳐 수행된다. TV(110)는 모뎀과 같은 네트워크 인터페이스(122)를 거쳐 네트워크(106)에 접속되어 있고, TV(110)와 네트워크 인터페이스 사이의 접속은 케이블(유선) 접속 또는 무선 접속을 통한 것일 수 있다. 클라이언트 엔진(214)은 호 설정, 인증, 암호화 및 접속 관리는 물론, 방화벽 통과, 프레즌스 상태 업데이트(presence state updating), 및 연락처 목록 관리와 같은 패킷 기반 통신 시스템에 관련된 다른 기능들을 수행한다.
오디오 엔진(216)은 마이크(228)를 통해 TV(110)에 입력되는 음성 신호들을 네트워크(106)를 거쳐 전송하기 위한 VoIP 패킷들로서 인코딩하는 일, 및 네트워크(106)로부터 수신되는 VoIP 패킷들을 오디오 정보로서 TV(110)의 사용자(112)에게 제시하기 위해 디코딩하는 일을 맡고 있다. 마이크(228)는 TV(110) 내에 통합되거나 유선 또는 무선 접속을 통해 TV(110)에 접속될 수 있다.
비디오 엔진(217)은 화상 통화에서 [예컨대, 웹캠(220) 또는 다른 비디오 카메라로부터) TV에 입력되는 비디오 신호들을 네트워크(106)를 거쳐 전송하기 위한 비디오 패킷들로서 인코딩하는 일, 및 화상 통화에서 네트워크(106)로부터 수신되는 비디오 패킷들을 비디오 영상으로서 TV(110)의 사용자(112)에게 제시하기 위해 디코딩하는 일을 맡고 있다. 웹캠(220)은 TV(110) 내에 통합되거나 유선 또는 무선 접속을 통해 TV(110)에 접속될 수 있다.
TV 사용자 인터페이스("UI")(218)는 시각적 정보를 TV 화면(202) 상에 디스플레이되는 그래픽 사용자 인터페이스의 형태로 TV(110)의 사용자(112)에게 제시하는 일을 맡고 있다.
클라이언트 엔진(214)은 UI가 사용자에게 무엇을 디스플레이하는지를 제어하기 위해 TV UI(218)에 접속되어 있다. 클라이언트 엔진(214)은 또한 네트워크(106)를 거쳐 음성 및 비디오 패킷들을 효율적으로 전송 및 수신하기 위해 오디오 엔진(216) 및 비디오 엔진(217)과 밀접하게 통합되어 있다.
비디오 엔진(217)은 TV 화면(202) 상에 디스플레이될 비디오 데이터를 제공하기 위해 FB2(208)에 접속되어 있다.
TV UI(218)는, 그래픽 사용자 인터페이스 데이터가 버퍼링되고 궁극적으로 화면(202) 상에서 사용자에게 디스플레이되도록, FB1(206)에 접속되어 있다. TV UI(218)는 또한 (음성 신호들 또는 통지들과 같은) 사운드가 TV 스피커들(212)로부터 생성될 수 있게 하는 증폭기(210)에 접속되어 있다. TV UI(218)는 또한 리모콘 유닛과 통신하기 위해 사용되는 적외선("IR") 수신기(224) 및/또는 블루투스 송수신기(226)에 접속되어 있을 수도 있다.
유의할 점은, 임베디드 통신 클라이언트가 TV에 접속하기 위한 STB(또는 다른 TV에 접속된 디바이스)에 제공되어 있는 경우, 도 1의 시스템은 화면(202), 증폭기(210), 스피커(212), 웹캠(220) 및 마이크(228) 블록들이 TV 자체에 위치해 있는 반면, 나머지 기능 블록들이 TV에 접속되어 있는 셋톱 박스에 위치해 있다는 점에서만 상이하다.
클라이언트 엔진(214)은 마이크(228)로부터의 입력들을 수신하는 오디오 모니터링 애플리케이션(230), 및 카메라(220)로부터의 입력들을 수신하는 비디오 모니터링 애플리케이션(232)을 포함한다. 모니터링 애플리케이션들(230, 232)은 그 각자의 입력들을 분석하는 동작을 한다.
TV(110)는 자신의 환경을 계속하여 경청하도록 구성되어 있다. 즉, TV(110)는 분석을 위해 오디오 모니터링 애플리케이션(230)에 입력되는 오디오 신호들을 마이크(228)를 사용하여 반복하여 포착하도록 구성되어 있다.
TV(110)는 또한 자신의 환경을 계속하여 관찰하도록 구성되어 있다. 즉, TV(110)는 분석을 위해 비디오 모니터링 애플리케이션(232)에 입력되는 비디오 신호들을 카메라(220)를 사용하여 반복하여 포착하도록 구성되어 있다.
도 3은 통신 시스템(100)을 통해 통신하기 위해 통신 클라이언트 인스턴스(306)가 실행되는 사용자 디바이스(114)의 상세도를 예시한 것이다. 사용자 디바이스(114)는 CPU(central processing unit) 또는 "처리 모듈"(302)을 포함하고, 터치 스크린으로서 구현될 수 있는 디스플레이(308), 및 오디오 신호들을 출력하기 위한 스피커(speaker 또는 "loudspeaker")(310)와 같은 출력 디바이스들; 오디오 신호들을 수신하기 위한 마이크(312), 영상 데이터를 수신하기 위한 카메라(316), 및 키패드(318)와 같은 입력 디바이스들; 데이터를 저장하기 위한 메모리(314); 및 네트워크(106)와의 통신을 위한 모뎀과 같은 네트워크 인터페이스(320)가 CPU(202)에 접속되어 있다. 사용자 디바이스(114)는 도 3에 도시된 것들 이외의 요소들을 포함할 수 있다. 디스플레이(308), 스피커(310), 마이크(312), 메모리(314), 카메라(316), 키패드(318), 및 네트워크 인터페이스(320)는, 도 3에 도시된 바와 같이, 사용자 디바이스(104) 내에 통합될 수 있다. 대안의 사용자 디바이스들에서, 디스플레이(308), 스피커(310), 마이크(312), 메모리(314), 카메라(316), 키패드(318), 및 네트워크 인터페이스(320) 중 하나 이상이 사용자 디바이스(114) 내에 통합되지 않을 수도 있고, 각자의 인터페이스들을 통해 CPU(302)에 접속될 수 있다. 이러한 인터페이스의 일례가 USB 인터페이스이다. 사용자 디바이스(114)의 네트워크 인터페이스(320)를 통한 네트워크(106)에의 접속이 무선 접속인 경우, 네트워크 인터페이스(320)는 신호들을 네트워크(106)로 무선으로 전송하고 네트워크(106)로부터 신호들을 무선으로 수신하기 위한 안테나를 포함할 수 있다.
도 3는 또한 CPU(302) 상에서 실행되는 OS(operating system)(304)를 예시하고 있다. 통신 시스템(100)의 클라이언트 인스턴스(306)의 소프트웨어가 OS(304) 상에서 실행된다. 운영 체제(304)는 컴퓨터의 하드웨어 자원들을 관리하고, 네트워크 인터페이스(320)를 거쳐 네트워크(106)에 대해 네트워크(106)로부터 전송되는 데이터를 처리한다. 클라이언트(306)는 운영 체제(304)와 통신하고 통신 시스템을 통한 접속을 관리한다. 클라이언트(306)는 사용자(112)에게 정보를 제시하고 사용자(112)로부터 정보를 수신하는 데 사용되는 클라이언트 사용자 인터페이스를 가진다. 이러한 방식으로, 클라이언트(306)는 사용자(112)가 통신 시스템(100)을 거쳐 통신할 수 있게 하는 데 필요한 처리를 수행한다.
디바이스(114) 및 TV(110)는 확립된 페어링 관계를 갖는다. 즉, 디바이스(114) 및 TV(110)는 서로 무선 통신(예컨대, 블루투스 통신)을 할 수 있고, 어떤 스테이지에서, 그들 사이의 관계를 확립하기 위해 초기 페어링 절차가 완료되었다. 예를 들어, 사용자에 의해 개시된 블루투스 페어링 절차의 일부로서, 관계를 확립하기 위해 전형적으로 공유 암호(shared secret)가 생성되고, 기술 분야에 공지된 기법들을 사용하여 TV(110) 및 디바이스(114) 둘 다에 저장될 수 있다. 그 후에, 디바이스(114) 및 TV(110)는 서로에게 자신을 밝힐 수 있고, 서로 볼 수 있을 때마다[즉, 디바이스(114)가 TV(110)로부터 도달 거리 내에 있을 때마다] 공유 암호를 사용하여 보안 링크를 생성할 수 있다. 디바이스(114) 및 TV(110)는 서로로부터 도달 거리를 벗어나 있을 때에도, 둘 다가 공유 암호를 유지하는 한, 페어링된 채로 있다.
디바이스(114) 및 TV(110)는 또한 확립된 프레즌스 관계(presence relationship)를 갖는다. 즉, 디바이스(114)가 TV(110)로부터 도달 거리 내에 있고, 따라서 TV(110)에 보이며, 따라서 전술한 바와 같이 페어링에 기초하여 링크가 확립될 수 있다.
이와 같이, 디바이스(114)는 TV(110)에 대해 컴패니언 디바이스로서 기능할 수 있다. 즉, 디바이스(114)에서 실행되는 클라이언트 애플리케이션(108c)은 기존의 프레즌스 및 페어링 관계들에 의해 확립되는, TV(110)와 디바이스(114) 간에 정보를 교환하기 위한 페어링 통신 링크를 거쳐, 임베디드 클라이언트 애플리케이션(108b)과 상호작용할 수 있다. 이것은 도 4를 참조하여 이하에서 더 상세히 기술된다.
블루투스에 대하여 전술하였지만, 컴패니언 디바이스(114)가, 무선 및 유선 접속 프로토콜들 둘 다를 사용하여, 다수의 상이한 방식들로 TV(110)와 페어링될 수 있다는 것을 잘 알 것이다. 예를 들어, 컴패니언 디바이스(114)는 WiFi 접속, 이더넷 접속 또는 다른 유형의 데이터 접속을 거쳐 TV(110)와 통신 접속될 수 있고, 이들 중 임의의 것에 대해, 적당한 페어링 관계가 확립될 수 있다.
예를 들어, 기존의 프레즌스 및 페어링 관계는 디바이스(114) 및 TV(110) 둘 다가 "사용자 B"로서 로그인되어 있다는 사실로부터 생긴 것일 수 있다. 이 경우에, 페어링 통신 링크가 [예컨대, 무선 인터페이스를 거쳐 디바이스(114)와 TV(110) 간에 직접 확립되기보다는] 기술 분야에 공지되어 있는 기법들을 사용하여 네트워크(106)를 거쳐 백 엔드 서버(120)를 통해 확립될 수 있다.
이제부터, 도 4를 참조하여 방법(400)에 대해 설명할 것이다.
논의된 바와 같이, TV(110) 및 디바이스(114) 둘 다는 경험들을 하나 이상의 출력 컴포넌트들을 거쳐 사용자(112)에게 전달하도록 구성되어 있다. 경험들에 관한 정보를 디바이스(114)와 교환하기 위해 페어링 통신 링크가 사용된다.
단계(S402)에서, 이벤트는 통신 링크 이외의 무선 인터페이스를 거쳐 이벤트의 표시(404)를 출력하라고 컴패니언 디바이스(114)를 트리거한다. 이벤트는, 예를 들어, 사용자 디바이스(104)로부터 컴패니언 디바이스(114)에 수신되는 들어오는 음성 또는 화상 통화와 같은 통신 이벤트일 수 있다. 표시는 스피커(310)를 통해 재생되는 오디오 표시(경고) 및/또는 디스플레이(308)를 통해 디스플레이되는 시각적 표시의 형태로 되어 있을 수 있다.
TV(110)가, 표시를 검출하고 디코딩하는 것에 의해, 이벤트가 발생한 것으로 결정할 수 있도록, 표시가 TV(110)에 의해 검출 가능하고 TV(110)에 의해 인식 가능하다.
표시(404)가 오디오 경고인 실시예들에서, 단계(S406)에서, 오디오 경고는, (논의된 바와 같이, 자신의 환경을 계속해서 경청하고 있는) TV(110)에 의해, 오디오 모니터링 애플리케이션(230)에 입력되어 그에 의해 분석되는 오디오 신호로서 포착된다.
오디오 경고가 TV(110)에 의해 인식 가능하고, 이는 다양한 방식들로 달성될 수 있다. 예를 들어, 이것을 달성하는 간단한 방식은 특정의 이벤트가 다수의 미리 결정된 가청 경고들 - 각각이 구별되는 오디오 파형을 갖고 그에 관한 정보가 TV(110)에 저장됨 - 중 하나를 트리거하는 것이다. 즉, 오디오 경고가 인식 가능한 오디오 시퀀스를 포함한다. 오디오 모니터링 애플리케이션(230)은 이어서 포착된 오디오를 (예컨대) 푸리에 분석을 사용하여 분석하는 것에 의해 오디오 경고를 디코딩하고, 따라서 파형(그리고 따라서 이벤트)을 인식할 수 있다.
대안적으로, 이벤트에 관한 정보가 비가청(초음파) 워터마크로서 인코딩될 수 있다. 특정 유형의 이벤트에 대해, 정보는 이벤트의 유형을 나타낼 수 있다. 예를 들어, 착신 호(incoming call)에 대해, 정보는 이벤트가 착신 호라는 것을 나타낼 수 있다. 비가청 워터마크의 형태로 된 정보를 인코딩 및 디코딩하는 기법들이 기술 분야에 공지되어 있다.
비가청 워터마크가 이어서 TV(110)의 마이크(312)에 의해 포착되고 오디오 모니터링 애플리케이션(230)에 의해 디코딩되며, 그에 의해 TV(110)가 디코딩된 정보에 기초하여 이벤트를 식별할 수 있게 된다.
이것은 사용자(112)가 호의 수신 시에 재생될 (예컨대) 사용자 지정된 벨소리(customized ringtone)[즉, 그 자체로 TV(110)에 의해 인식 가능할 필요가 없음]를 선택할 수 있게 한다. 착신 호에 응답하여 벨소리를 오디오 스트림으로서 재생하기 전에, 클라이언트(306)는 비가청 워터마크의 형태로 되어 있는 착신 호에 관한 인코딩된 정보를 오디오 스트림에 삽입한다. 이와 같이, 스피커(312)를 통해 재생되는 오디오 경고는 착신 호를 사용자에게 알려주는 역할을 하는 가청 성분 및 착신 호를 TV(110)에 알려주는 역할을 하는 비가청 성분 둘 다를 갖는다.
단계(S406)에서, 오디오 모니터링 애플리케이션(230)은 표시를 직접 검출하고 표시를 디코딩하는 것에 의해 이벤트가 발생한 것으로 결정한다. 그에 응답하여, TV(110)는, 기존의 프레즌스 및 페어링 관계들을 통해 확립된 페어링 통신 링크를 거쳐, 이벤트를 식별했다는 통지(즉, 표시를 디코딩했고 경험을 제공할 수 있다는 통지)를 디바이스(114)로 송신한다[단계(S408)].
단계(S410)에서, 디바이스(114)는 이벤트를 처리하기 위한 선택 가능 옵션들의 목록을, 다시 말하지만, 페어링 통신 링크를 거쳐, TV(110)에 제공하고, 단계(S412)에서, TV(110)는 그 목록을 화면(202)을 통해 사용자에게 디스플레이한다. 단계(S414)에서, 사용자(112)는 디스플레이된 옵션들 중에서 선택하고, TV(110)의 동작이 선택된 옵션을 구현하도록 수정된다.
그에 부가하여 또는 대안적으로, 이벤트를 처리하기 위한 선택 가능 옵션들이 컴패니언 디바이스(114)의 디스플레이(308) 상에 디스플레이되고 디바이스(114)의 입력 수단을 사용하여 선택된다. 그에 응답하여, 디바이스(114)는 TV(110)로 하여금 옵션을 구현하게 하는 제어 신호를 TV(110)로 전송한다.
양 경우에, 옵션에 관한 정보가 페어링 통신 링크를 거쳐 교환된다.
TV는 디바이스(114)로 하여금 자신의 동작을 수정하게 하는 제어 신호를 디바이스(114)로 전송하도록 또한 구성될 수 있다.
예를 들어, 이벤트가 원격 호출측 사용자[사용자(102) 등]로부터 컴패니언 디바이스(114)에 수신되는 통신 이벤트(음성 또는 화상 통화 등)인 경우, TV(110) 및/또는 디바이스(114) 상에 디스플레이되는 옵션들 중 하나는, 그 대신에, 호를 TV(110)로 이전(transfer)하는 것[즉, 디바이스(114) 상에서보다는 TV에서 호에 답신하거나 호를 계속하는 것]일 수 있다. 사용자가 호를 이전하는 옵션을 선택하면, TV는 디바이스(114)로부터 TV(110)로의 통신 이벤트의 이전을 개시하는 제어 신호를 송신한다. TV(110)는 디바이스(114)로 역시 송신되는 네트워크 어드레스를 갖는다. 디바이스(114)는 이어서, 호출측 사용자와 TV(110) 사이에 네트워크 접속이 확립될 수 있게 함으로써 호가 TV로 이전될 수 있도록, TV(110)의 네트워크 어드레스를 포함하는 메시지를 호출측 사용자에게 송신한다.
논의된 바와 같이, 실시예들에서, 페어링 통신 링크가 백 엔드 서버(120)를 통해 확립되고, 이 경우에 정보(통지들, 선택된 옵션들, 선택 가능 옵션들, 기타 등등)는 네트워크(106)를 거쳐 백 엔드 서버(120)로 송신된다.
호가 확립되기 전에(예컨대, "벨 울림(ringing)" 기간 동안) 호가 TV(110)로 이전되고 이어서 TV(110)에서 확립될 수 있다. 대안적으로, 호가 먼저 디바이스(114)에서 확립되고 이어서 나중에(즉, 통화 동안) 이전될 수 있다.
대안의 실시예들에서, 이벤트는, 오디오 경고 대신에 또는 그에 부가하여, QR(Quick Response) 코드와 같은 시각적 표시가 디바이스(114)의 디스플레이(308) 상에 디스플레이되도록 트리거할 수 있다. 디스플레이(308)가 카메라(220)에 보이면, TV(110)는 시각적 표시의 영상 데이터를 포착할 것이다[논의된 바와 같이, TV(110)는 자신의 환경을 계속 관찰하고 있다]. 예를 들어, 디바이스(114)가 스마트폰인 실시예들에서, 사용자(112)는 디스플레이(308)을 카메라(220) 쪽으로 지향시킬 수 있다. 비디오 모니터링 애플리케이션(232)은 이어서 포착된 영상 데이터를 분석하고, 시각적 표시를 검출하며, 이벤트가 발생한 것으로 결정한다. 그 후에, 본 방법은 전술한 바와 같이(S408로부터 계속) 진행된다.
일반적으로, 본 명세서에 기술된 기능들(예컨대, 도 2 및 도 3에 도시된 기능 모듈들 및 도 4에 도시된 기능 단계들) 중 임의의 것이 소프트웨어, 펌웨어, 하드웨어(예컨대, 고정 논리 회로), 또는 이 구현들의 조합을 사용하여 구현될 수 있다. 도 2 및 도 3에 개별적으로 도시된 모듈들 및 단계들이 개별적인 모듈들 또는 단계들로서 구현될 수 있거나 그렇지 않을 수 있다. 본 명세서에서 사용되는 "모듈", "기능", "컴포넌트" 및 "논리"라는 용어들은 일반적으로 소프트웨어, 펌웨어, 하드웨어, 또는 이들의 조합을 나타낸다. 소프트웨어 구현의 경우에, 모듈, 기능, 또는 논리는 프로세서(예컨대, CPU 또는 CPU들) 상에서 실행될 때 지정된 작업들을 수행하는 프로그램 코드를 나타낸다. 프로그램 코드는 하나 이상의 컴퓨터 판독 가능 메모리 디바이스들에 저장될 수 있다. 본 명세서에 기술된 기법들의 특징들이 플랫폼-독립적(platform-independent)이며, 이는 그 기법들이 각종의 프로세서들을 갖는 각종의 상용 컴퓨팅 플랫폼들에서 구현될 수 있다는 것을 의미한다. 예를 들어, 사용자 디바이스들은 또한 사용자 디바이스들의 하드웨어로 하여금 동작들(예컨대, 프로세서 기능 블록들 등)을 수행하게 하는 엔티티(예컨대, 소프트웨어)를 포함할 수 있다. 예를 들어, 사용자 디바이스들은 사용자 디바이스들, 그리고, 보다 상세하게는, 사용자 디바이스들의 운영 체제 및 연관된 하드웨어로 하여금 동작들을 수행하게 하는 명령어들을 유지하도록 구성될 수 있는 컴퓨터 판독 가능 매체를 포함할 수 있다. 이와 같이, 명령어들은 운영 체제 및 연관된 하드웨어를 동작들을 수행하도록 구성하고 이러한 방식으로 운영 체제 및 연관된 하드웨어를 기능들을 수행하도록 변환시키는 기능을 한다. 명령어들은 각종의 상이한 구성들을 통해 컴퓨터 판독 가능 매체에 의해 사용자 디바이스들에 제공될 수 있다.
컴퓨터 판독 가능 매체의 하나의 이러한 구성은 신호 베어링 매체(signal bearing medium)이고, 따라서 네트워크를 통하는 등에 의해, 명령어들을 (예컨대, 반송파로서) 컴퓨팅 디바이스로 전송하도록 구성되어 있다. 컴퓨터 판독 가능 매체는 또한 컴퓨터 판독 가능 저장 매체로서 구성될 수 있고, 따라서 신호 베어링 매체가 아니다. 컴퓨터 판독 가능 저장 매체의 예는 RAM(random-access memory), ROM(read-only memory), 광 디스크, 플래시 메모리, 하드 디스크 메모리, 그리고 명령어들 및 다른 데이터를 저장하기 위해 자기, 광, 및 다른 기법들을 사용할 수 있는 다른 메모리 디바이스들을 포함한다.
발명의 대상이 구조적 특징들 및/또는 방법 동작들과 관련하여 기술되어 있지만, 첨부된 청구범위에 한정된 발명의 대상이 전술한 구체적인 특징들 또는 동작들로 꼭 제한되는 것은 아님을 잘 알 것이다. 오히려, 전술한 구체적인 특징들 및 동작들은 청구항들을 구현하는 예시적인 형태들로서 개시되어 있다. 상세하게는, 전술한 실시예들이 임베디드 통신 클라이언트를 갖는 TV를 참조하여 기술되었지만, 클라이언트가 또한, 셋톱 박스, 게임 콘솔 또는 비디오 재생 디바이스[예컨대, 비디오 디스크 플레이어 또는 PVR(personal video recorder)]와 같은, TV에 접속하기 위한 다른 유형의 미디어 디바이스 내에 임베딩될 수 있다는 것을 잘 알 것이다.
게다가, 전술한 실시예들이 통신 클라이언트에 의해 전달되는 특정의 경험들에 대해 기술되었지만, 전형적인 사용자 디바이스가 많은 상이한 애플리케이션들 또는 "앱들"의 버전들 - 각각이 그 디바이스에 적절한 특정의 경험을 전달할 수 있음 - 을 실행하는 동작을 한다는 것을 잘 알 것이다. 이와 유사하게, 전형적인 미디어 디바이스들은 또한 대안의 경험들을 제공하는 그 애플리케이션들 또는 "앱들"의 (어쩌면 상이한) 버전들을 실행하는 동작을 한다. 청구하는 발명의 대상이 모든 이러한 경험들에 광의적으로 적용 가능하다는 것을 잘 알 것이다.

Claims (20)

  1. 미디어 디바이스에 있어서,
    출력 디바이스에 대한 인터페이스와,
    상기 미디어 디바이스와 사용자 디바이스 간의 페어링 통신 링크를 용이하게 하도록 구성된 송신기 및 수신기와,
    적어도 부분적으로 하드웨어로 구현되며, 상기 페어링 통신 링크 이외의 무선 인터페이스(air interface)를 통해 상기 사용자 디바이스로부터 수신된 표시(indication)를 직접 검출하도록 구성된 검출 컴포넌트로서, 상기 표시는 오디오 표시 또는 시각적 표시 중 하나 이상을 포함하는 것인, 상기 검출 컴포넌트와,
    프로세서를 포함하고,
    상기 프로세서는 상기 미디어 디바이스로 하여금,
    사용자 이름(username)과 연관되며 상기 사용자 이름으로 로그인된 제1 통신 클라이언트를 실행하게 하고,
    상기 페어링 통신 링크를 사용해 상기 사용자 디바이스와 페어링하여 상기 페어링 통신 링크를 통해 상기 제1 통신 클라이언트와, 상기 사용자 디바이스 상의 제2 통신 클라이언트 간의 통신을 제공하게 하며－상기 제2 통신 클라이언트는 상기 사용자 이름과 연관되고 상기 사용자 이름으로 로그인되며, 상기 미디어 디바이스는 상기 제1 통신 클라이언트와 상기 제2 통신 클라이언트가 상기 사용자 이름과 연관되는 것에 적어도 부분적으로 기초하여, 상기 사용자 디바이스와 페어링하도록 구성됨－,
    상기 페어링된 사용자 디바이스로부터 상기 검출 컴포넌트를 통해 수신된 검출된 표시를 디코딩하게 하고－상기 검출된 표시는 상기 제2 통신 클라이언트와 연관되는 통신 이벤트와 연관됨－,
    상기 출력 디바이스에 대한 인터페이스를 사용하여 상기 검출된 표시와 연관되는 데이터를 출력하게 하며,
    상기 표시를 디코딩하는 것에 응답하여, 상기 페어링 통신 링크를 통해, 상기 제1 통신 클라이언트로부터의 정보를 상기 페어링된 사용자 디바이스와 연관되는 상기 제2 통신 클라이언트와 교환하게 하며－상기 정보는 옵션에 관한 정보를 포함함－,
    상기 옵션의 선택을 검출하게 하고,
    상기 선택된 옵션을 구현하기 위해 상기 미디어 디바이스의 동작을 수정하게 하도록 구성되는, 미디어 디바이스.
  2. 제1항에 있어서, 상기 프로세서는 또한, 상기 미디어 디바이스로 하여금, 상기 표시가 디코딩되었다는 통지를 상기 정보의 일부로서, 상기 페어링된 사용자 디바이스에 전송하게 하도록 구성되는, 미디어 디바이스.
  3. 제1항에 있어서, 상기 옵션은, 상기 정보의 일부로서 수신되고 상기 출력 디바이스에 대한 인터페이스를 사용하여 사용자에게 출력되는 선택 가능 옵션이고, 상기 프로세서는 또한, 상기 미디어 디바이스로 하여금, 상기 미디어 디바이스에서 제1 사용자에 의한 상기 옵션의 선택을 검출하게 하도록 구성되는, 미디어 디바이스.
  4. 제1항에 있어서, 상기 프로세서는 또한, 상기 미디어 디바이스로 하여금, 상기 옵션이 상기 페어링된 사용자 디바이스에서 선택된 것에 응답하여 상기 페어링된 사용자 디바이스에 의해 상기 정보의 일부로서 전송된 제어 신호를 검출함으로써 상기 옵션의 선택을 검출하게 하도록 구성되는, 미디어 디바이스.
  5. 제1항에 있어서, 상기 출력 디바이스에 대한 인터페이스는 사용자 인터페이스에서 제1 사용자에게 정보를 디스플레이하기 위한 디스플레이에 대한 인터페이스를 포함하는, 미디어 디바이스.
  6. 제1항에 있어서, 상기 검출 컴포넌트는 상기 오디오 표시를 검출하기 위한 마이크를 포함하는, 미디어 디바이스.
  7. 제6항에 있어서, 상기 오디오 표시는 초음파 워터마크(sonic watermark)를 포함하는, 미디어 디바이스.
  8. 제6항에 있어서, 상기 오디오 표시는 상기 검출 컴포넌트에 의해 인식 가능한 오디오 시퀀스(audio sequence)를 포함하는, 미디어 디바이스.
  9. 제1항에 있어서, 상기 검출 컴포넌트는 상기 시각적 표시를 검출하기 위한 카메라를 포함하는, 미디어 디바이스.
  10. 제1항에 있어서, 상기 프로세서는 또한, 상기 미디어 디바이스로 하여금, 상기 페어링된 사용자 디바이스의 동작을 수정하는 것과 연관된 제어 신호를 상기 페어링된 사용자 디바이스에 전송하게 하도록 구성되는, 미디어 디바이스.
  11. 제10항에 있어서, 상기 프로세서는 또한,
    상기 미디어 디바이스와 제2 사용자 디바이스 사이에 통신 이벤트가 확립될 수 있게 하는 정보를 상기 페어링된 사용자 디바이스에 송신하도록 구성되는, 미디어 디바이스.
  12. 제11항에 있어서, 상기 정보는, 상기 제2 사용자 디바이스와의 통신 이벤트를 확립하기 위한 상기 미디어 디바이스의 네트워크 어드레스를 포함하는, 미디어 디바이스.
  13. 제11항에 있어서, 상기 프로세서는, 상기 미디어 디바이스로 하여금, 상기 페어링된 사용자 디바이스로부터 이전되는(transferred) 상기 제2 통신 클라이언트와 연관된 확립된 통신 이벤트를 수신하게 하도록 구성되는, 미디어 디바이스.
  14. 사용자 디바이스에 있어서,
    미디어 디바이스와의 페어링 통신 링크를 용이하게 하도록 구성된 송신기 및 수신기와,
    적어도 부분적으로, 상기 페어링 통신 링크 이외의 무선 인터페이스를 통해 상기 미디어 디바이스에 전송할 표시를 생성하기 위해 구현되는 표시 생성기로서, 상기 표시는 오디오 표시 또는 시각적 표시 중 하나 이상을 포함하는 것인, 상기 표시 생성기와,
    프로세서를 포함하고,
    상기 프로세서는 상기 사용자 디바이스로 하여금,
    사용자 이름과 연관되는, 소프트웨어 공급자로부터의 제1 통신 클라이언트를 실행하게 하고－상기 제1 통신 클라이언트는 상기 사용자 이름으로 로그인되며, 상기 페어링 통신 링크 이외의 무선 인터페이스를 통해 상기 미디어 디바이스에 전송할 표시의 생성을 트리거하도록 구성됨－,
    상기 페어링 통신 링크를 사용해 상기 미디어 디바이스와 페어링하여 상기 제1 통신 클라이언트와, 상기 미디어 디바이스 상의 상기 소프트웨어 공급자로부터의 제2 통신 클라이언트 간의 통신을 제공하게 하며－상기 제2 통신 클라이언트는 상기 사용자 이름과 연관되고 상기 사용자 이름으로 로그인되며, 상기 사용자 디바이스는 상기 제1 통신 클라이언트와 상기 제2 통신 클라이언트가 상기 사용자 이름과 연관되는 것에 적어도 부분적으로 기초하여, 상기 미디어 디바이스와 페어링하도록 구성됨－,
    상기 무선 인터페이스를 통해 전송된 표시를 상기 미디어 디바이스가 검출하는 것에 응답하여, 상기 페어링 통신 링크를 통해, 정보를 상기 페어링된 미디어 디바이스와 교환하게 하도록 구성되며,
    상기 정보는 상기 제1 통신 클라이언트와 연관되는 통신 이벤트와 연관된 옵션에 관한 정보를 포함함으로써, 상기 페어링된 미디어 디바이스로 하여금 상기 옵션의 검출 시에 자신의 동작을 수정하는 것을 가능하게 하는, 사용자 디바이스.
  15. 제14항에 있어서, 상기 프로세서는 또한,
    선택 가능 옵션인 상기 옵션을 상기 페어링된 미디어 디바이스에 상기 정보의 일부로서 제공하고,
    상기 선택 가능 옵션이 상기 페어링된 미디어 디바이스의 사용자에 의해 활성화되었을 때 상기 페어링된 미디어 디바이스로부터 제어 신호를 수신하며,
    상기 제어 신호에 기초하여 상기 사용자 디바이스의 동작을 수정하도록 구성되는, 사용자 디바이스.
  16. 제14항에 있어서, 출력 디바이스를 더 포함하며, 상기 옵션은 상기 출력 디바이스를 통해 사용자에게 출력되고,
    상기 프로세서는 또한,
    상기 사용자에 의한 옵션의 선택을 검출하고,
    상기 옵션의 선택을 검출하는 것에 응답하여, 제어 신호를 상기 정보의 일부로서 상기 페어링된 미디어 디바이스에 전송하도록 구성되는, 사용자 디바이스.
  17. 제14항에 있어서, 출력 디스플레이 디바이스를 더 포함하는, 사용자 디바이스.
  18. 제14항에 있어서, 상기 제1 통신 클라이언트는 또한, 상기 페어링 통신 링크와는 상이한 네트워크를 통해 제2 사용자 디바이스와 통신 이벤트를 확립하도록 구성되는, 사용자 디바이스.
  19. 제16항에 있어서, 상기 프로세서는 또한, 상기 제어 신호에 기초하여 상기 제1 통신 클라이언트를 통해 확립된 통신 이벤트를 상기 페어링된 미디어 디바이스에 이전하도록 구성되는, 사용자 디바이스.
  20. 방법에 있어서,
    페어링 통신 링크를 통해 미디어 디바이스를 사용자 디바이스와 페어링하는 단계로서, 상기 미디어 디바이스는, 사용자 이름과 연관되며 상기 사용자 이름으로 로그인된 제1 통신 클라이언트를 포함하고, 상기 사용자 디바이스는, 상기 사용자 이름과 연관되며 상기 사용자 이름으로 로그인된 제2 통신 클라이언트를 포함하며, 상기 페어링은, 상기 제1 통신 클라이언트와 상기 제2 통신 클라이언트가 상기 사용자 이름과 연관되는 것에 적어도 부분적으로 기초하여, 상기 사용자 디바이스와페어링하는 것을 포함하는 것인, 상기 사용자 디바이스와 페어링하는 단계와,
    상기 미디어 디바이스에서, 상기 페어링 통신 링크 이외의 무선 인터페이스를 통해 상기 페어링된 사용자 디바이스로부터 수신된 표시를 직접 검출하는 단계로서, 상기 페어링된 사용자 디바이스로부터의 표시는 상기 페어링 통신 링크와는 상이한 통신 네트워크 링크를 통한 제2 사용자 디바이스와의 통신 세션과 연관된 것이며, 상기 표시는 오디오 표시 또는 시각적 표시 중 하나 이상을 포함하는 것인, 상기 표시를 직접 검출하는 단계와,
    상기 표시를 디코딩하고 상기 페어링 통신 링크를 통해 정보를 상기 페어링된 사용자 디바이스와 교환하는 단계와,
    상기 미디어 디바이스에서 상기 페어링 통신 링크를 통해 선택 가능 옵션을 수신하고 선택 가능 옵션을 사용자에게 출력하는 단계; 및
    상기 옵션의 선택을 검출하고 상기 선택된 옵션에 기초하여 상기 페어링된 사용자 디바이스에 정보－상기 정보는 제2 통신 디바이스와의 확립된 통신 이벤트가 상기 페어링된 사용자 디바이스로부터 상기 미디어 디바이스에 이전될 수 있게 함－를 송신하는 단계를 포함하는, 방법.
KR1020167001015A 2013-06-20 2014-06-17 페어링된 디바이스 KR102148906B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/923,092 US9681189B2 (en) 2013-06-20 2013-06-20 Paired devices
US13/923,092 2013-06-20
PCT/US2014/042599 WO2014204878A1 (en) 2013-06-20 2014-06-17 Paired devices

Publications (2)

Publication Number Publication Date
KR20160023778A KR20160023778A (ko) 2016-03-03
KR102148906B1 true KR102148906B1 (ko) 2020-08-28

Family

ID=51225874

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167001015A KR102148906B1 (ko) 2013-06-20 2014-06-17 페어링된 디바이스

Country Status (5)

Country Link
US (1) US9681189B2 (ko)
EP (1) EP2995086B1 (ko)
KR (1) KR102148906B1 (ko)
CN (1) CN105453576B (ko)
WO (1) WO2014204878A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11954704B2 (en) 2009-11-17 2024-04-09 Thomas W. Heeter Secure data delivery system
JP6008564B2 (ja) * 2011-06-20 2016-10-19 三菱電機株式会社 空気調和機
CN104768054A (zh) * 2014-01-03 2015-07-08 光宝电子(广州)有限公司 音频播放装置、多媒体影音播放系统及其播放方法
US10204104B2 (en) 2015-04-14 2019-02-12 Google Llc Methods, systems, and media for processing queries relating to presented media content
CN106454197B (zh) * 2016-10-10 2019-05-14 无锡纽微特科技有限公司 基于中间件实现机顶盒视频通话的方法
WO2023200860A1 (en) * 2022-04-12 2023-10-19 Heeter Thomas W Secure data delivery system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110292299A1 (en) 2010-05-26 2011-12-01 Rovi Technologies Corporation Systems and methods for controlling an electronic device
US20120260302A1 (en) 2011-04-05 2012-10-11 Harris Technology, Llc Video Player and Portable Computer with Detection

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8306811B2 (en) * 1996-08-30 2012-11-06 Digimarc Corporation Embedding data in audio and detecting embedded data in audio
US20030041332A1 (en) * 2001-08-21 2003-02-27 Allen Paul G. System and method for mitigating interruptions during television viewing
CN100361510C (zh) * 2002-10-23 2008-01-09 皇家飞利浦电子股份有限公司 通过追踪通信联机接入时间重播遗漏电视节目的机顶终端
KR100514191B1 (ko) * 2003-01-23 2005-09-13 삼성전자주식회사 통합 리모트 컨트롤러 및 그 통합 리모트 컨트롤러용셋톱박스
US7843485B1 (en) * 2003-12-23 2010-11-30 At&T Intellectual Property Ii, L.P. Integration of home entertainment devices with a software client for telephony
US20080137643A1 (en) 2006-12-08 2008-06-12 Microsoft Corporation Accessing call control functions from an associated device
US7965826B2 (en) * 2006-12-08 2011-06-21 Sony Corporation Apparatus and method for collaborating between a video device and a telephonic device
US8253772B2 (en) 2008-04-04 2012-08-28 Centurylink Intellectual Property Llc Method, apparatus and system for incorporating voice or video communication into a television or compatible audio capable visual display
US8250147B2 (en) 2008-06-25 2012-08-21 Microsoft Corporation Remote call control and conferencing using paired devices
GB2463107A (en) * 2008-09-05 2010-03-10 Skype Ltd A remote control unit of a media device for placing/receiving calls, comprising activating one of the two wireless transceivers when needed.
US8516533B2 (en) * 2008-11-07 2013-08-20 Digimarc Corporation Second screen methods and arrangements
US8875168B2 (en) * 2009-07-30 2014-10-28 Avaya Inc. Audio/Video monitoring service using set-top boxes and application servers
US9571782B2 (en) 2010-02-17 2017-02-14 CSC Holdings, LLC Feature activation on occurrence of an event
CN101888430A (zh) * 2010-06-30 2010-11-17 中山大学 一种感应手机来电并进行提醒处理的方法及系统
US8558863B2 (en) * 2010-10-05 2013-10-15 At&T Intellectual Property I, L.P. Audio and video calling through multiple terminal devices
US9717090B2 (en) * 2010-12-31 2017-07-25 Microsoft Technology Licensing, Llc Providing notifications of call-related services
US20120287219A1 (en) 2011-05-12 2012-11-15 Sreekanth Ravi Wireless network device configuration using image capture
CN102572584A (zh) * 2011-12-12 2012-07-11 青岛海信电器股份有限公司 对移动电话进行扩展的智能电视系统及方法
CN102740144B (zh) * 2012-07-05 2015-07-22 合一网络技术(北京)有限公司 一种通过视频网站提供基于信息网络的电视频道的方法
US8971690B2 (en) * 2012-12-07 2015-03-03 Intel Corporation Technique to coordinate activities between a content device and a wireless device based on context awareness
CN103051796A (zh) * 2012-12-20 2013-04-17 康佳集团股份有限公司 一种智能终端与手机的交互方法及系统
US8813134B2 (en) * 2012-12-20 2014-08-19 Verizon Patent And Licensing Inc. Mobile device caller ID to smart TV devices
US9706252B2 (en) * 2013-02-04 2017-07-11 Universal Electronics Inc. System and method for user monitoring and intent determination
US9553927B2 (en) * 2013-03-13 2017-01-24 Comcast Cable Communications, Llc Synchronizing multiple transmissions of content

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110292299A1 (en) 2010-05-26 2011-12-01 Rovi Technologies Corporation Systems and methods for controlling an electronic device
US20120260302A1 (en) 2011-04-05 2012-10-11 Harris Technology, Llc Video Player and Portable Computer with Detection

Also Published As

Publication number Publication date
WO2014204878A1 (en) 2014-12-24
EP2995086A1 (en) 2016-03-16
KR20160023778A (ko) 2016-03-03
CN105453576B (zh) 2019-04-30
US20140380362A1 (en) 2014-12-25
CN105453576A (zh) 2016-03-30
EP2995086B1 (en) 2023-01-04
US9681189B2 (en) 2017-06-13

Similar Documents

Publication Publication Date Title
KR102223411B1 (ko) 페어링되지 않은 장치
KR102148906B1 (ko) 페어링된 디바이스
EP2335409B1 (en) Communication system and method
KR101593257B1 (ko) 통신 시스템 및 방법
US8473994B2 (en) Communication system and method
EP2335411B1 (en) Communication system and method
US20150095933A1 (en) Device Pairing
US8413199B2 (en) Communication system and method
WO2015096679A1 (zh) 一种同屏互动方法以及装置
US20110030021A1 (en) Audio/Video Monitoring Service Using Set-top Boxes and Application Servers
US20160157206A1 (en) Information notification method and instant notification device
EP2763423A1 (en) Method and apparatus for reproducing content
WO2014143761A2 (en) Systems and methods for configuration of wireless camera
WO2014026625A1 (zh) 音频输入状态处理方法、发送端设备及接收端设备
EP3078203B1 (fr) Module de pilotage d'un récepteur de contenus multimédias, serveur et procédés d'élaboration de contenus et de messages associés
CN115102918A (zh) 消息同步方法、装置及系统、相关设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right