KR20110048457A - Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기 - Google Patents

Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기 Download PDF

Info

Publication number
KR20110048457A
KR20110048457A KR1020100101872A KR20100101872A KR20110048457A KR 20110048457 A KR20110048457 A KR 20110048457A KR 1020100101872 A KR1020100101872 A KR 1020100101872A KR 20100101872 A KR20100101872 A KR 20100101872A KR 20110048457 A KR20110048457 A KR 20110048457A
Authority
KR
South Korea
Prior art keywords
user input
back channel
session
source device
input back
Prior art date
Application number
KR1020100101872A
Other languages
English (en)
Other versions
KR101732057B1 (ko
Inventor
이재민
나일주
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100101872A priority Critical patent/KR101732057B1/ko
Priority to US12/917,684 priority patent/US9264670B2/en
Publication of KR20110048457A publication Critical patent/KR20110048457A/ko
Priority to US14/801,442 priority patent/US9473744B2/en
Priority to US15/275,920 priority patent/US10440065B2/en
Application granted granted Critical
Publication of KR101732057B1 publication Critical patent/KR101732057B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W84/00—Network topologies
    • H04W84/02—Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10—Small scale networks; Flat hierarchical networks
    • H04W84/12—WLAN [Wireless Local Area Networks]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

Wi-Fi Display 규격에 따라 통신하는 AV 소스 기기 및 AV 싱크 기기에서 사용자 입력 백 채널을 제공하는 방법 및 기기를 개시한다. 본 발명은 Wi-Fi Display 규격에 따라 AV 소스 기기 및 AV 소스 기기 간 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계, AV 제어 세션을 이용하여 AV 싱크 기기로부터 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 단계, 및 사용자 입력 백 채널을 통하여 AV 싱크 기기에서 AV 소스 기기로 사용자 입력을 송신하는 단계를 포함한다.

Description

ＡＶ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기{Method and apparatus for providing user input back channel in AV system}
본 발명은 AV(Audio/Video) 시스템에서 사용자 입력 백 채널(User Input Back Channel; UIBC)을 제공하는 방법 및 기기에 관한 것으로서, 보다 상세하게는 Wi-Fi Display(WFD) 규격에 따라 통신하는 AV 소스 기기 및 AV 싱크 기기에서 사용자 입력 백 채널을 제공하는 방법 및 기기에 관한 것이다.
최근에 Wi-Fi(Wireless Fidelity) 규격에서 고품질 및 저지연(High Quality & Low latency)을 만족하면서 AV 데이터를 전송하고자 하는 요구에 의해 새로이 Wi-Fi Display 규격이 정의되고 있다. Wi-Fi Display 규격에서는 소스 기기에서의 AV 데이터 전송 및 사용자 입력에 의한 제어를 고려하고 있다. 그러나 사용자는 소스 기기보다 싱크 기기에 더 가까이 있을 가능성이 높으므로, 사용자가 싱크 기기에서 기기를 제어하거나 데이터를 입력할 경우 싱크 기기에서 소스 기기로 제어 명령이나 사용자 데이터를 전달할 방법이 요구된다.
본 발명은 Wi-Fi Display 규격에 따라 통신하는 AV 소스 기기 및 AV 싱크 기기 간의 사용자 입력 백 채널을 제공한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 의한 AV 싱크 기기가 AV 소스 기기와 통신하는 방법의 일 실시예는, Wi-Fi Display(WFD) 규격에 따라 상기 AV 소스 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계, 상기 AV 제어 세션을 이용하여, 상기 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 단계, 및 상기 사용자 입력 백 채널을 통하여 상기 AV 소스 기기로 사용자 입력을 송신하는 단계를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력은 상기 AV 소스 기기의 제어를 위한 기능 코드, 포인팅 정보, 및 문자 데이터 중 적어도 하나를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 제어 세션은 RTSP(Real Time Streaming Protocol) 세션인 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널을 활성화하는 단계는, 상기 AV 소스 기기로부터 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 질의를 수신하는 단계, 상기 AV 소스 기기로 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 답변을 송신하는 단계, 상기 AV 소스 기기로부터 상기 AV 싱크 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 수신하는 단계, 및 상기 AV 소스 기기로 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 송신하는 단계를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 싱크 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널을 활성화하는 단계는, 상기 AV 소스 기기로 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 질의를 송신하는 단계, 상기 AV 소스 기기로부터 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 답변을 수신하는 단계, 상기 AV 소스 기기로 상기 AV 소스 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 송신하는 단계, 및 상기 AV 소스 기기로부터 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 수신하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 소스 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력을 송신하는 단계는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 송신하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널을 활성화하는 단계는, 상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하는 단계를 포함하며, 상기 사용자 입력을 송신하는 단계는, 상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 송신하는 단계를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력을 송신하는 단계는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 송신하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널의 데이터 세션은 RTP 세션, 블루투쓰 세션, 지그비 세션, 및 DLNA 세션 중 어느 하나인 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력을 송신하는 단계는, 상기 DLNA 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 송신하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 소스 기기로 상기 사용자 입력 백 채널의 비활성화(disable)를 알리는 단계를 더 포함하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 의한 AV 소스 기기가 AV 싱크 기기와 통신하는 방법의 일 실시예는, Wi-Fi Display 규격에 따라 상기 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계, 상기 AV 제어 세션을 이용하여, 상기 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하는 단계, 및 상기 사용자 입력 백 채널을 통하여 상기 AV 싱크 기기로부터 사용자 입력을 수신하는 단계를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력은 상기 AV 소스 기기의 제어를 위한 기능 코드, 포인팅 정보, 및 문자 데이터 중 적어도 하나를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 제어 세션은 RTSP(Real Time Streaming Protocol) 세션인 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널을 활성화하는 단계는, 상기 AV 싱크 기기로 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 질의를 송신하는 단계, 상기 AV 싱크 기기로부터 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 답변을 수신하는 단계, 상기 AV 싱크 기기로 상기 AV 싱크 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 송신하는 단계, 및 상기 AV 싱크 기기로 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 수신하는 단계를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 싱크 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널을 활성화하는 단계는, 상기 AV 싱크 기기로부터 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 질의를 수신하는 단계, 상기 AV 싱크 기기로 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 답변을 송신하는 단계, 상기 AV 싱크 기기로부터 상기 AV 소스 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 수신하는 단계, 및 상기 AV 싱크 기기로 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 송신하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 소스 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력을 수신하는 단계는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 수신하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널을 활성화하는 단계는, 상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하는 단계를 포함하며, 상기 사용자 입력을 수신하는 단계는, 상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 수신하는 단계를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력을 수신하는 단계는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 수신하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력 백 채널의 데이터 세션은 RTP 세션, 블루투쓰 세션, 지그비 세션, 및 DLNA 세션 중 어느 하나인 것을 특징으로 한다.
바람직하게는, 상기 사용자 입력을 수신하는 단계는, 상기 DLNA 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 수신하는 단계를 더 포함하는 것을 특징으로 한다.
바람직하게는, 상기 AV 싱크 기기로 사용자 입력 백 채널 비활성화 요청을 송신하는 단계, 및 상기 AV 싱크 기기로부터 상기 사용자 입력 백 채널 비활성화 요청에 대한 응답을 수신하는 단계를 더 포함하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 의한 AV 소스 기기와 통신하는 AV 싱크 기기의 일 실시예는, Wi-Fi Display 규격에 따라 상기 AV 소스 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고, 상기 AV 제어 세션을 이용하여 상기 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 제어부, 및 상기 사용자 입력 백 채널을 통하여 상기 AV 소스 기기로 상기 사용자 입력을 송신하는 통신부를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 통신부는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 송신하는 것을 특징으로 한다.
바람직하게는, 상기 제어부는, 상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하며, 상기 통신부는, 상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 송신하는 것을 특징으로 한다.
바람직하게는, 상기 통신부는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 송신하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 의한 AV 싱크 기기와 통신하는 AV 소스 기기의 일 실시예는, Wi-Fi Display 규격에 따라 상기 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고, 상기 AV 제어 세션을 이용하여 상기 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하는 제어부, 및 상기 사용자 입력 백 채널을 통하여 상기 AV 싱크 기기로부터 사용자 입력을 수신하는 통신부를 포함하는 것을 특징으로 한다.
바람직하게는, 상기 통신부는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 수신하는 것을 특징으로 한다.
바람직하게는, 상기 제어부는, 상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하며, 상기 통신부는, 상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 수신하는 것을 특징으로 한다.
바람직하게는, 상기 통신부는, 상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 수신하는 것을 특징으로 한다.
상기 기술적 과제를 해결하기 위한, 본 발명에 의한 통신 시스템의 일 실시예는, AV 데이터를 송신하는 AV 소스 기기, 및 AV 데이터를 수신하는 AV 싱크 기기를 포함하며, 상기 AV 소스 기기는 Wi-Fi Display 규격에 따라 상기 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고, 상기 AV 제어 세션을 이용하여 상기 AV 소스 기기로의 사용자 입력 백 채널을 활성화하며, 상기 AV 싱크 기기는, 상기 사용자 입력 백 채널을 통하여 상기 AV 소스 기기로 상기 사용자 입력을 송신하는 것을 특징으로 한다.
본 발명은, 본 발명의 일 실시예에 따라 AV 싱크 기기가 AV 소스 기기와 통신하는 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 포함한다.
도 1은 본 발명의 일 실시예에 의한 Wi-Fi Display 규격의 프로토콜 스택(Protocol stack)을 도시한 도면이다.
도 2는 본 발명의 일 실시예에 의한 WFD AV 세션을 생성하기 위한 흐름을 개략적으로 도시한 도면이다.
도 3은 본 발명의 일 실시예에 의한 Wi-Fi Display의 유즈 케이스(Use Case)를 도시한 도면이다.
도 4은 본 발명의 다른 실시예에 의한 Wi-Fi Display의 유즈 케이스를 도시한 도면이다.
도 5는 본 발명의 일 실시예에 의한 사용자 입력 백 채널를 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 의한 전반적인 사용자 입력 백 채널 제공 방법의 개략적인 흐름을 도시한 도면이다.
도 7은 본 발명의 일 실시예에 의한 인 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다.
도 8은 본 발명의 일 실시예에 의한 RTP를 이용한 아웃 오브 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다.
도 9 내지 도 10은 본 발명의 일 실시예에 의한 이종 프로토콜을 이용한 아웃 오브 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다.
도 11은 본 발명의 일 실시예에 의한 UIBC 능력에 대한 질의 및 응답 메시지 포맷을 도시한 도면이다.
도 12는 본 발명의 일 실시예에 의한 wfd_uibc_capability 파라미터의 정의를 도시한 도면이다.
도 13은 본 발명의 일 실시예에 의한 UIBC 활성화 요청 및 응답 메시지 포맷을 도시한 도면이다.
도 14는 본 발명의 일 실시예에 의한 wfd_uibc_setting 파라미터의 정의를 도시한 도면이다.
도 15는 본 발명의 일 실시예에 의한 IB-UIBC를 이용한 사용자 입력 데이터 메시지 포맷을 도시한 도면이다.
도 16는 본 발명의 일 실시예에 의한 wfd_uibc_user_data 파라미터의 정의를 도시한 도면이다.
도 17은 본 발명의 일 실시예에 의한 UIBC 비활성화 요청 메시지 포맷을 도시한 도면이다.
도 18은 본 발명의 일 실시예에 의한 UIBC 비활성화 통지 메시지 포맷을 도시한 도면이다.
도 19는 본 발명의 일 실시예에 의한 AV 싱크 기기가 AV 소스 기기와 통신하는 방법의 흐름을 개략적으로 도시한 흐름도이다.
도 20은 본 발명의 일 실시예에 의한 AV 소스 기기가 AV 싱크 기기와 통신하는 방법의 흐름을 개략적으로 도시한 흐름도이다.
도 21은 본 발명의 일 실시예에 의한 AV 통신 시스템의 구성을 개략적으로 도시한 블록도이다.
상술한 목적, 특징 및 장점들은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더욱 분명해 질 것이다. 다음의 설명과 도면들은 발명을 제한하는 방향으로 해석되어서는 아니되며, 다양한 자세한 설명들은 본 발명을 철저히 이해하기 위하여 제공되는 것으로서, 청구항들의 기초가 되며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 본 발명의 제작 및/또는 사용 방법을 가르쳐 주기 위한 기초가 되는 것이다.
본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성요소에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 설명의 편의를 위하여 필요한 경우에는 장치와 방법을 함께 서술하도록 한다.
도면들 중 실질적으로 동일한 기능구성을 갖는 구성요소들에 대하여는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 참조번호들 및 부호들을 부여하여 중복설명을 생략하였으며, 당해 도면에 대한 설명 시 필요한 경우 다른 도면의 구성요소를 인용할 수 있음을 미리 밝혀둔다. 또한 도면 상에서 각 구성요소의 크기는 설명의 명료성을 위하여 과장되어 있을 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 의한 바람직한 실시예를 상세하게 설명하도록 한다.
도 1은 본 발명의 일 실시예에 의한 Wi-Fi Display 규격의 프로토콜 스택(Protocol stack)을 도시한 도면이다. 도 1은 제3 계층(Layer 3; L3)인 IP 계층 이상의 프로토콜 스택을 나타내며, 제2 계층(Layer 2; L2) 이하의 프로토콜은 Wi-Fi에서 정의한 Wi-Fi P2P(Peer to Peer) 규격이나 다른 규격들이 사용될 수 있다. Wi-Fi Display의 프로토콜 스택은 크게 제어 경로(Control Path)와 데이터 경로(Data Path)로 구분된다. 일 실시예에서, 제어 경로로는 RTSP(Real Time Streaming Protocol)를 사용할 수 있으며 데이터 경로로는 RTP(Real-time Transport Protocol) 및 RTCP(RTP Control Protocol)를 사용할 수 있다. 이는 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 알려진 공지기술로서 이에 대한 구체적인 설명은 본 발명의 요지를 불필요하게 흐릴 수 있는바 상술하지 않는다.
도 2는 본 발명의 일 실시예에 의한 WFD AV 세션을 생성하기 위한 흐름을 개략적으로 도시한 도면이다. 먼저 WFD를 지원하는 소스 기기와 싱크 기기 사이에 L2 기기 발견(L2 Device Discovery) 및 서비스 발견(Service Discovery)이 이루어진다(210). 이 때 두 기기가 WFD가 지원되는 기기임이 확인된다. 이 상태에서 L2 보안 설정(L2 Secure Setup)이 실행되며(220), 이어서 상세한 기기 정보 및 서비스 정보를 주고받는 L3 WFD 발견(L3 WFD Discovery)이 이루어진다(230). 이후 L3 AV 세션(L3 AV session)이 확립된다(240). 이때 AV 제어 세션을 위하여 RTSP가 사용되고, AV 데이터 세션을 위하여 RTP가 사용되며, 컨텐츠 보호(Content Protection)를 위하여 HDCP(High-bandwidth Digital Content Protection) 2.0이 사용된다. AV 데이터는 MPEG2 TS나 H.264 등에 따라 전송 가능한 데이터 단위로 변환되어 RTP를 통해 소스 기기에서 싱크 기기로 전송된다. 에러 피드백은 RTCP를 이용하여 이루어진다. AV 데이터 전송이 완료되면 AV 세션은 종료된다.
이 때 제어 명령이나 데이터와 같은 사용자 입력이 소스 기기에 입력되면, 이는 소스 기기에 직접 반영된다. 즉, 소스 기기에서 사용자 입력이 입력되는 경우 이를 싱크 기기로 전달할 필요 없이 소스 기기에서 사용자 입력을 처리한다.
도 3은 본 발명의 일 실시예에 의한 Wi-Fi Display의 유즈 케이스(Use Case)를 도시한 도면이다. 도 3을 참조하면, 침실에 있는 퍼스널 컴퓨터(310)에서 거실에 있는 TV(320)에 AV 데이터를 전송하고, TV(320)가 이를 수신하여 출력함으로써, 사용자는 거실에서 TV(320)를 통하여 침실의 퍼스널 컴퓨터(310)에서 제공하는 AV 컨텐츠를 감상할 수 있다. 이때 AV 데이터를 송신하는 퍼스널 컴퓨터(310)가 AV 소스 기기이고, AV 데이터를 수신하는 TV(320)가 AV 싱크 기기이다.
사용자는 퍼스널 컴퓨터(310)보다 TV(320)에 가까이 있으므로, 리모컨(330), 마우스(340), 또는 키보드(350) 등 TV(320)의 입력 장치를 통하여 기기를 제어하려 할 수 있다.
도 4은 본 발명의 다른 실시예에 의한 Wi-Fi Display의 유즈 케이스를 도시한 도면이다. 도 4를 참조하면, 스마트폰 또는 MID(Moblie Internet Device) 등의 이동기기(410)가 AV 컨텐츠를 제공하는데, 이동기기(410)는 화면이 작으므로 사용자는 보다 화면이 큰 노트북 컴퓨터(420)을 통하여 AV 컨텐츠를 감상하려 할 수 있다. 이 경우 입력장치 또한 이동기기(410)의 것보다 노트북 컴퓨터(420)의 것이 더 크고 편리하므로, 사용자는 노트북 컴퓨터(420)의 입력장치를 이용하여 기기를 제어하려 할 수 있다. 이때 AV 데이터를 송신하는 이동기기(410)가 AV 소스 기기이고, AV 데이터를 수신하는 노트북 컴퓨터(420)가 AV 싱크 기기이다.
도 3 및 도 4에 도시된 유즈 케이스와 같은 경우, AV 컨텐츠는 소스 기기에서 제공하고 사용자 입력은 싱크 기기에서 이루어지므로, 싱크 기기에서 소스 기기로 사용자 입력을 전달할 필요가 있다. 이 때 사용자 입력은 리모컨의 기능 키(Function Key) 등을 통하여 발생시키는 기능 코드(Function Code) 또는 명령 메시지(Command Massage) 정보, 마우스나 터치 패널 등과 같은 포인팅 장치에서 발생시키는 포인팅 좌표(Pointing Coordinate) 정보, 또는 키보드 등에서 발생시키는 문자(Character) 또는 텍스트(Text) 정보를 포함하며, 이들은 각각의 특성에 맞게 처리된다.
도 5는 본 발명의 일 실시예에 의한 사용자 입력 백 채널를 설명하기 위한 도면이다. 싱크 기기에서 소스 기기에 사용자 입력을 전달하는 방식은 크게 인 밴드 사용자 입력 백 채널(In-Band UIBC; IB-UIBC) 방식과 아웃 오브 밴드 사용자 입력 백 채널(Out-Of-Band UIBC; OOB-UIBC) 방식으로 분류할 수 있다. IB-UIBC 방식은 기존의 RTSP에 사용자 입력을 위한 새로운 파라미터를 추가하여 기존의 SET_PARAMETER 메쏘드를 이용하여 전달하는 방식이다. OOB-UIBC 방식은 UIBC를 위한 세팅 및 제어는 RTSP에 파라미터 형태로 추가된 방식을 사용하지만 사용자 입력은 별도의 RTP 세션을 이용하거나 블루투쓰(Bluetooth), 지그비(Zigbee), 또는 DLNA (Digital Living Network Association)와 같은 이종 프로토콜을 통하여 전달하는 방식이다. 또한, 상기 하였듯이 사용자 입력을 기능 코드, 포인팅 정보, 및 문자 데이터 등으로 분류할 수 있는데, 하나의 UIBC를 통하여 여러 가지 유형의 사용자 입력을 전달할 수도 있고, 각 유형마다 서로 다른 UIBC를 정의하여 전달할 수도 있다.
도 6은 본 발명의 일 실시예에 의한 사용자 입력 백 채널 제공 방법의 개략적인 흐름을 도시한 도면이다. 소스 기기와 싱크 기기는 Wi-Fi Display 규격에 따라 AV 제어 세션 및 AV 데이터 세션을 설정한 후, AV 제어 세션을 이용하여 싱크 기기로부터 소스 기기로의 사용자 입력 백 채널을 활성화(Enable)한다(510 내지 540).
우선 소스 기기에서 싱크 기기의 사용자 입력 백 채널 능력(UIBC Capability)에 대해 질의(Query)를 한다(510). 이때 사용자 입력 백 채널 능력을 나타내는 wfd_uibc_capability라는 파라미터를 정의하고 이를 GET_PARAMETER에 의해 질의한다. 싱크 기기는 자신의 사용자 입력 백 채널 능력을 응답한다(520). 사용자 입력 백 채널 능력은 WFD에서 정의된 기기 능력(Device Capability) 또는 싱크 능력(Sink Capability)에 정보 요소(Information Element) 또는 필드(Field)로 포함될 수 있다.
소스 기기는 사용자의 선택이나 자동 선택에 따라 싱크 기기에서 제공하는 UIBC 중에서 원하는 UIBC에 대한 활성화 요청을 한다(530). 활성화 요청 메시지는 RTSP에서 SET_PARAMETER 메시지를 사용하며, 관련된 파라미터를 새로 정의한다. UIBC 활성화 요청 관련 파라미터는 wfd_uibc_setting 파라미터로서, 이를 이용하여 소스 기기에서 원하는 UIBC를 활성화 하거나 비활성화 할 수 있다. 파라미터의 정의는 뒤에서 설명한다. 활성화 요청 메시지를 받은 싱크 기기는 해당하는 UIBC를 활성화한 후 활성화 결과를 소스 기기에 응답한다(540).
이상에서 설명한 UIBC 활성화 과정은 싱크 기기의 요청에 의하여 수행될 수도 있다. 즉, 단계 510 및 530을 싱크 기기가 수행하고 단계 520 및 540을 소스 기기가 수행함으로써 싱크 기기로부터 소스 기기로의 UIBC 를 활성화할 수 있다.
UIBC가 활성화 되면 싱크 기기에서 발생한 사용자 입력이 소스 기기에 전달되며(551, 552, 553, 및 560), 이를 통하여 AV 데이터 또는 WFD 기능이 제어될 수 있다. IB-UIBC의 경우 SET_PARAMETER를 이용하여 wfd_uibc_user_data 파라미터를 소스 기기로 전달하며, OOB-UIBC의 경우 사용자 입력을 데이터 페이로드(Data Payload)를 통하여 전달할 수 있다.
소스 기기에서 UIBC 기능을 비활성화(Disable)하는 경우, 소스 기기는 Disable UIBC 요청 메시지를 싱크 기기로 보내고(570) 싱크 기기는 UIBC 기능을 비활성화한 후 응답한다(580). 싱크 기기에서 UIBC를 비활성화 하는 경우, 싱크 기기는 SET_PARAMETER를 이용하여 wfd_uibc_setting 파라미터를 소스 기기로 전달하는 방법을 이용하여 UIBC가 비활성화됨을 소스 기기에 통지할 수 있다(590).
도 7은 본 발명의 일 실시예에 의한 인 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다. 도 7을 참조하면, In-Band UIBC는 UIBC의 데이터 경로 및 제어 경로로 RTSP를 사용한다. 즉, 사용자 입력에 관한 데이터 및 제어 정보가 모두 RTSP를 통하여 전달된다. In-Band UIBC는 RTSP 메시지에 사용자 입력 전송을 위한 새로운 파라미터를 추가로 정의함으로써 구현된다. 추가된 파라미터는 SET_PARAMETER를 통해 소스 기기로 전달된다. 추가된 파라미터 wfd_uibc_user_data는 사용자 입력 유형(User Input Type)에 대한 정보를 포함하고 있으며, 해당 유형에 따른 사용자 입력 데이터 메시지(User Input Data Message)가 정의된다. 파라미터 정의는 뒤에서 설명한다. 소스 기기에서는 싱크 기기로부터 사용자 입력을 받으면 수신 여부를 응답한다.
아웃 오브 밴드 사용자 입력 백 채널은 싱크 기기에서의 사용자 입력를 기존의 RTSP를 통해 전달하는 것이 아니라, 별도의 RTP 세션을 이용하거나 블루투쓰, 지그비 또는 DLNA와 같은 별도의 경로를 통해 전달하는 방법을 사용하는 방식이다. OOB-UIBC에서도 UIBC capability나 UIBC 활성화 등을 위한 제어 경로는 IB-UIBC와 마찬가지로 RTSP를 통해 이루어질 수 있다. 다른 실시예에서는 UIBC 제어 경로도 사용자 입력과 마찬가지로 별도의 경로를 통해 이루어질 수 있다.
도 8은 본 발명의 일 실시예에 의한 RTP를 이용한 아웃 오브 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다. 도 8을 참조하면, UIBC의 데이터 경로로 별도의 RTP 세션을 이용하고, 제어 경로로는 RTSP를 이용한다. 즉, 소스 기기와 싱크 기기 간에 별도의 RTP 세션을 설정하여 사용자 입력을 전달하는 경로로 이용한다. 사용자 입력 데이터 메시지는 RTP 페이로드(Payload)에 직접 실어서 전송하거나 RTP Payload for Text Conversation(RFC4103)을 이용해 text/t140 블록으로 코딩하여 전달할 수 있다. Text/t140이란 MIME registered type으로 RTP Payload for Text Conversation (RFC4103) 에 정의된 포맷이며, UTF-8 coded이고, H.323, SIP, 3GPP 등에서 사용된다.
도 9 내지 도 10은 본 발명의 일 실시예에 의한 이종 프로토콜을 이용한 아웃 오브 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다.
도 9는 본 발명의 일 실시예에 의한 블루투쓰 또는 지그비를 이용한 아웃 오브 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다. 도 9를 참조하면, UIBC의 데이터 경로로는 블루투쓰 또는 지그비를 이용하고, 제어 경로로는 RTSP를 이용한다. 실시예에 따라 UIBC의 제어 경로로 블루투쓰 또는 지그비를 이용할 수도 있다.
이는 AV 데이터 전송과 사용자 입력 전송 간의 영향을 최소화하면서 사용자 입력을 실시간으로 전송할 수 있는 방법으로서, 포인팅 정보와 같이 사용자 입력이 저지연(Low latency)을 필요로 하는 경우, 또는 AV 데이터 스트리밍에 영향을 주지 않으면서 사용자 입력을 전달하려 하는 경우 등에 사용할 수 있다. 이 경우 소스 기기와 싱크 기기가 동일한 프로토콜을 지원해야 한다. 사용자 입력은 이종 프로토콜의 애플리케이션 데이터(Application Data)로 전달된다. 실시예에 따라, 사용자 입력 데이터 메시지를 페이로드에 직접 실어서 전송하거나, 사용자 입력 데이터만 페이로드에 실어서 전송할 수 있다.
도 10은 본 발명의 일 실시예에 의한 DLNA를 이용한 아웃 오브 밴드 사용자 입력 백 채널의 프로토콜 스택을 도시한 도면이다. 도 9를 참조하면, UIBC의 데이터 경로로는 DLNA를 이용하고, 제어 경로로는 RTSP를 이용한다. 실시예에 따라 UIBC의 제어 경로로 DLNA를 이용할 수도 있다. 사용자 데이터는 DLNA의 원격 사용자 인터페이스(Remote User Interface; RUI)로 전달할 수 있으며, 페이로드 포맷은 DLNA에서 정의된 포맷을 사용할 수 있다.
Wi-Fi display 스펙에서 제어 또는 관리(control/management)를 위해 RTSP가 설정되어 있는 상태에서 UIBC capability 교환이나 활성화가 이루어진다. 앞에서 설명한 메시지의 포맷 및 파라미터 정의를 설명하도록 한다.
도 11은 본 발명의 일 실시예에 의한 UIBC 능력에 대한 질의 및 응답 메시지 포맷을 도시한 도면이다. 도 11을 참조하면, 소스 기기에서 싱크 기기의 UIBC capability 질의를 위해 GET_PARAMETER 메쏘드를 사용하여 wfd_uibc_capability 파라미터를 요구한다. UIBC capability 질의에 대한 싱크 기기의 응답은 RTSP에 정의된 GET_PARAMETER의 응답(Response) 형태를 따른다. 도면에 도시된 실시예의 경우, 싱크 기기는 IB-UIBC 와 RTP를 이용한 OOB-UIBC를 지원하며 기능 코드는 IB-UIBC를 통해 전달할 수 있고 포인팅 정보는 IB-UIBC 또는 OOB-UIBC를 통해 전달할 수 있는 능력를 가지고 있다고 소스 기기에 응답한다.
도 12는 본 발명의 일 실시예에 의한 wfd_uibc_capability 파라미터의 정의를 도시한 도면이다. 도 12를 참조하면, wfd_uibc_capability는 ABNF(Augmented Backus-Naur Form) 포맷으로 정의될 수 있으며, UIBC의 지원 여부, 지원하는 UIBC 경로, 및 지원하는 사용자 입력 데이터 유형(User Input Data Type) 등을 포함하고 있다. 사용자 입력의 유형에 따라 지원하는 UIBC 경로가 다를 경우를 위해 uibc_detailed_capa를 정의할 수 있다.
도 13은 본 발명의 일 실시예에 의한 UIBC 활성화 요청 및 응답 메시지 포맷을 도시한 도면이다. 도 12를 참조하면, 소스 기기에서 UIBC 활성화를 요청을 할 경우 SET_PARAMETER 메쏘드을 사용하여 wfd_uibc_setting 파라미터를 설정하여 싱크 기기에 전달한다. 도면에 도시된 실시예의 경우, 소스 기기는 싱크 기기의 기능 코드 및 포인팅 정보에 대한 사용자 입력을 활성화하고 경로로는 IB_UIBC만 사용하는 것을 요청한다.
UIBC 활성화 요청에 대한 싱크 기기의 응답은 RTSP에 정의된 SET_PARAMETER의 응답 형태를 따른다. 만약 소스 기기의 요청을 처리하지 못했을 경우 에러 코드와 함께 응답한다.
도 14는 본 발명의 일 실시예에 의한 wfd_uibc_setting 파라미터의 정의를 도시한 도면이다. 도 12를 참조하면, wfd_uibc_setting은 싱크 기기에서 활성화할 UIBC 경로 및 사용자 입력 데이터 유형 등을 정의한다. 사용자 입력의 유형에 따라 지원하는 UIBC 경로가 다를 경우를 위해 detailed_setting_en을 정의할 수 있다.
도 15는 본 발명의 일 실시예에 의한 IB-UIBC를 이용한 사용자 입력 데이터 메시지 포맷을 도시한 도면이다. 도 15를 참조하면, 싱크 기기가 IB-UIBC 경로를 이용하여 사용자 입력을 소스 기기로 전달할 경우 SET_PARAMETER 메쏘드를 사용한다. 이때 사용되는 파라미터는 wfd_uibc_user_data이다.
사용자 입력에 대한에 대한 소스 기기의 응답은 RTSP에 정의된 SET_PARAMETER의 응답 형태를 따른다. 만약 싱크 기기의 요청을 처리하지 못했을 경우 에러 코드와 함께 응답한다.
도 16는 본 발명의 일 실시예에 의한 wfd_uibc_user_data 파라미터의 정의를 도시한 도면이다. 도 16를 참조하면, wfd_uibc_user_data는 싱크 기기에 입력된 사용자 입력의 유형 및 그 입력 데이터 등을 정의한다. OOB-UIBC를 통해 전달할 경우에도 파라미터는 동일하게 사용될 수 있다. 사용자 입력 데이터가 기능 코드일 경우 데이터는 옥텟(Octet)으로 정의된다. 사용자 입력 데이터가 포인팅 정보일 경우 현재 포인트의 좌표, 싱크 기기의 해상도(Resolution), 및 사용자의 행동(Action)으로 정의된다. 사용자의 행동은 사용자의 클릭(Click) 여부 및 어느 버튼을 클릭했는지 등을 나타낼 수 있다. 사용자 입력 데이터가 문자인 경우 CHAR로 입력한다.
도 17은 본 발명의 일 실시예에 의한 UIBC 비활성화 요청 메시지 포맷을 도시한 도면이다. 도 17을 참조하면, 소스 기기에서 UIBC 비활성화 요청을 할 경우 SET_PARAMETER 메쏘드을 사용하여 wfd_uibc_setting 파라미터를 disable로 설정하여 싱크 기기에 전달한다. UIBC 경로나 유형이 다중으로 활성화되어 있고 이를 수정할 필요가 있을 경우에도 wfd_uibc_setting을 사용하여 처리한다.
UIBC 비활성화 요정에 대한 싱크 기기의 응답은 RTSP에 정의된 SET_PARAMETER의 응답 형태를 따른다. 소스 기기의 요청을 처리하지 못하였을 경우 에러 코드와 함께 응답한다.
도 18은 본 발명의 일 실시예에 의한 UIBC 비활성화 통지 메시지 포맷을 도시한 도면이다. 도 18을 참조하면, 싱크 기기에서 사용자의 선택에 의하거나 다른 이유에 의해 UIBC를 비활성화하는 경우 SET_PARAMETER 메쏘드를 사용하여 wfd_uibc_setting 파라미터를 disable로 설정하여 소스 기기에 전달한다. 이에 대한 소스 기기의 응답은 없어도 상관 없다.
도 19는 본 발명의 일 실시예에 의한 AV 싱크 기기가 AV 소스 기기와 통신하는 방법의 흐름을 개략적으로 도시한 흐름도이다. 도 19를 참조하면, 본 발명의 일 실시예에 의한 AV 싱크 기기가 AV 소스 기기와 통신하는 방법은 Wi-Fi Display 규격에 따라 AV 소스 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계(1910), AV 제어 세션을 이용하여 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 단계(1920), 및 사용자 입력 백 채널을 통하여 AV 소스 기기로 사용자 입력을 송신하는 단계(1930)를 포함한다.
도 20은 본 발명의 일 실시예에 의한 AV 소스 기기가 AV 싱크 기기와 통신하는 방법의 흐름을 개략적으로 도시한 흐름도이다. 도 20을 참조하면, 본 발명의 일 실시예에 의한 AV 소스 기기가 AV 싱크 기기와 통신하는 방법은 Wi-Fi Display 규격에 따라 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계(2010), AV 제어 세션을 이용하여 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하는 단계(2020), 및 사용자 입력 백 채널을 통하여 AV 싱크 기기로부터 사용자 입력을 수신하는 단계(2030)를 포함한다.
도 21은 본 발명의 일 실시예에 의한 AV 통신 시스템의 구성을 개략적으로 도시한 블록도이다. 도 21을 참조하면, 본 발명의 일 실시예에 의한 통신 시스템 AV 소스 기기(2110) 및 AV 싱크 기기(2140)를 포함한다. AV 소스 기기(2110)는 Wi-Fi Display 규격에 따라 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고 AV 제어 세션을 이용하여 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하는 제어부(2120), 및 사용자 입력 백 채널을 통하여 AV 싱크 기기로부터 사용자 입력을 수신하는 통신부(2130)를 포함한다. AV 싱크 기기(2140)는 Wi-Fi Display 규격에 따라 AV 소스 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고 AV 제어 세션을 이용하여 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 제어부(2160) 및 사용자 입력 백 채널을 통하여 AV 소스 기기로 사용자 입력을 송신하는 통신부(20150)를 포함한다.
이상과 같이 본 발명은 WFD 규격에서 싱크 기기가 소스 기기로 사용자 입력을 전달할 수 있는 방법을 제공한다. 또한 UIBC의 데이터 경로별, 사용자 데이터 유형별 설정이 가능하게 구성하여 사용 편리성 및 확장성을 증가시킨다. 또한 기존 RTSP에 새로운 파라미터를 추가하는 방식으로 UIBC 제어를 제공함으로써 구현이 용이한 장점이 있다.
본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 알려진 바와 같이, 본 발명에 따른 상기 예시 구조들은 프로세서에 의해 실행되는 프로그램 명령들, 소프트웨어 모듈, 마이크로코드, 컴퓨터(정보 처리 기능을 갖는 장치를 모두 포함한다.)로 읽을 수 있는 기록 매체에 기록된 컴퓨터 프로그램 제품, 논리 회로들, 주문형 반도체, 또는 펌웨어 등 다양한 방식으로 구현될 수 있다. 또한, 본 발명은 하드웨어로 구현되거나, 소프트웨어로 구현되거나, 또는 하드웨어 및 소프트웨어 구성요소를 모두 포함하는 형태로 구현될 수 있다.
상기 컴퓨터로 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD, DVD, 자기 테이프, 하드 디스크, 플로피 디스크, 하드 디스크, 광데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다. 또한, 본 발명에서 사용되는 메시지의 데이터 포맷을 기록 매체에 기록하는 것이 가능하다.
지금까지 본 발명에 대하여 도면에 도시된 바람직한 실시예들을 중심으로 상세히 살펴보았다. 이러한 실시예들은 이 발명을 한정하려는 것이 아니라 예시적인 것에 불과하며, 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 비록 본 명세서에 특정한 용어들이 사용되었으나 이는 단지 본 발명의 개념을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 비록 본 명세서에 명확히 설명되거나 도시되지 않았지만 청구범위에서 청구하는 본 발명의 본질적인 기술사상에서 벗어나지 않는 범위에서 다양한 삭제, 대체, 또는 변경 등을 통하여 본 발명의 원리를 구현하는 다양한 변형 형태 및 균등한 타 실시예로 구현될 수 있음을 이해할 수 있을 것이다.
본 발명의 진정한 기술적 보호범위는 전술한 설명이 아니라 첨부된 특허청구범위의 기술적 사상에 의해서 정해져야 하며, 그와 동등한 범위 내에 있는 모든 구조적 및 기능적 균등물은 본 발명에 포함되는 것으로 해석되어야 할 것이다. 이러한 균등물은 현재 공지된 균등물뿐만 아니라 장래에 개발될 균등물 즉 구조와 무관하게 동일한 기능을 수행하도록 발명된 모든 구성요소를 포함하는 것으로 이해되어야 한다.

Claims (36)

  1. AV(Audio/Video) 싱크 기기가 AV 소스 기기와 통신하는 방법으로서,
    Wi-Fi Display(WFD) 규격에 따라 상기 AV 소스 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계;
    상기 AV 제어 세션을 이용하여, 상기 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 단계; 및
    상기 사용자 입력 백 채널을 통하여 상기 AV 소스 기기로 사용자 입력을 송신하는 단계를 포함하는 것을 특징으로 하는 통신 방법.
  2. 제1항에 있어서,
    상기 사용자 입력은 상기 AV 소스 기기의 제어를 위한 기능 코드, 포인팅 정보, 및 문자 데이터 중 적어도 하나를 포함하는 것을 특징으로 하는 통신 방법.
  3. 제1항에 있어서,
    상기 AV 제어 세션은 RTSP(Real Time Streaming Protocol) 세션인 것을 특징으로 하는 통신 방법.
  4. 제1항에 있어서,
    상기 사용자 입력 백 채널을 활성화하는 단계는,
    상기 AV 소스 기기로부터 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 질의를 수신하는 단계;
    상기 AV 소스 기기로 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 답변을 송신하는 단계;
    상기 AV 소스 기기로부터 상기 AV 싱크 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 수신하는 단계; 및
    상기 AV 소스 기기로 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 송신하는 단계를 포함하는 것을 특징으로 하는 통신 방법.
  5. 제4항에 있어서,
    상기 AV 싱크 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 하는 통신 방법.
  6. 제1항에 있어서,
    상기 사용자 입력 백 채널을 활성화하는 단계는,
    상기 AV 소스 기기로 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 질의를 송신하는 단계;
    상기 AV 소스 기기로부터 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 답변을 수신하는 단계;
    상기 AV 소스 기기로 상기 AV 소스 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 송신하는 단계; 및
    상기 AV 소스 기기로부터 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 수신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  7. 제6항에 있어서,
    상기 AV 소스 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 하는 통신 방법.
  8. 제1항에 있어서,
    상기 사용자 입력을 송신하는 단계는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 송신하는 것을 특징으로 하는 통신 방법.
  9. 제1항에 있어서,
    상기 사용자 입력 백 채널을 활성화하는 단계는,
    상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하는 단계를 포함하며,
    상기 사용자 입력을 송신하는 단계는,
    상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 송신하는 단계를 포함하는 것을 특징으로 하는 통신 방법.
  10. 제9항에 있어서,
    상기 사용자 입력을 송신하는 단계는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 송신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  11. 제9항에 있어서,
    상기 사용자 입력 백 채널의 데이터 세션은 RTP 세션, 블루투쓰 세션, 지그비 세션, 및 DLNA 세션 중 어느 하나인 것을 특징으로 하는 통신 방법.
  12. 제11항에 있어서,
    상기 사용자 입력을 송신하는 단계는,
    상기 DLNA 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 송신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  13. 제1항에 있어서,
    상기 AV 소스 기기로 상기 사용자 입력 백 채널의 비활성화(disable)를 알리는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  14. AV 소스 기기가 AV 싱크 기기와 통신하는 방법으로서,
    Wi-Fi Display 규격에 따라 상기 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하는 단계;
    상기 AV 제어 세션을 이용하여, 상기 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하는 단계; 및
    상기 사용자 입력 백 채널을 통하여 상기 AV 싱크 기기로부터 사용자 입력을 수신하는 단계를 포함하는 것을 특징으로 하는 통신 방법.
  15. 제14항에 있어서,
    상기 사용자 입력은 상기 AV 소스 기기의 제어를 위한 기능 코드, 포인팅 정보, 및 문자 데이터 중 적어도 하나를 포함하는 것을 특징으로 하는 통신 방법.
  16. 제14항에 있어서,
    상기 AV 제어 세션은 RTSP(Real Time Streaming Protocol) 세션인 것을 특징으로 하는 통신 방법.
  17. 제14항에 있어서,
    상기 사용자 입력 백 채널을 활성화하는 단계는,
    상기 AV 싱크 기기로 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 질의를 송신하는 단계;
    상기 AV 싱크 기기로부터 상기 AV 싱크 기기의 사용자 입력 백 채널 능력에 관한 답변을 수신하는 단계;
    상기 AV 싱크 기기로 상기 AV 싱크 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 송신하는 단계; 및
    상기 AV 싱크 기기로 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 수신하는 단계를 포함하는 것을 특징으로 하는 통신 방법.
  18. 제17항에 있어서,
    상기 AV 싱크 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 하는 통신 방법.
  19. 제14항에 있어서,
    상기 사용자 입력 백 채널을 활성화하는 단계는,
    상기 AV 싱크 기기로부터 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 질의를 수신하는 단계;
    상기 AV 싱크 기기로 상기 AV 소스 기기의 사용자 입력 백 채널 능력에 관한 답변을 송신하는 단계;
    상기 AV 싱크 기기로부터 상기 AV 소스 기기의 사용자 입력 백 채널 능력 중 하나에 대한 사용자 입력 백 채널 활성화 요청을 수신하는 단계; 및
    상기 AV 싱크 기기로 상기 사용자 입력 백 채널 활성화 요청에 대한 응답을 송신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  20. 제19항에 있어서,
    상기 AV 소스 기기의 사용자 입력 백 채널 능력은 RTSP, RTP, 블루투쓰, 지그비, 및 DLNA 중 적어도 하나를 포함하는 것을 특징으로 하는 통신 방법.
  21. 제14항에 있어서,
    상기 사용자 입력을 수신하는 단계는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 수신하는 것을 특징으로 하는 통신 방법.
  22. 제14항에 있어서,
    상기 사용자 입력 백 채널을 활성화하는 단계는,
    상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하는 단계를 포함하며,
    상기 사용자 입력을 수신하는 단계는,
    상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 수신하는 단계를 포함하는 것을 특징으로 하는 통신 방법.
  23. 제22항에 있어서,
    상기 사용자 입력을 수신하는 단계는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 수신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  24. 제22항에 있어서,
    상기 사용자 입력 백 채널의 데이터 세션은 RTP 세션, 블루투쓰 세션, 지그비 세션, 및 DLNA 세션 중 어느 하나인 것을 특징으로 하는 통신 방법.
  25. 제24항에 있어서,
    상기 사용자 입력을 수신하는 단계는,
    상기 DLNA 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 수신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  26. 제14항에 있어서,
    상기 AV 싱크 기기로 사용자 입력 백 채널 비활성화 요청을 송신하는 단계; 및
    상기 AV 싱크 기기로부터 상기 사용자 입력 백 채널 비활성화 요청에 대한 응답을 수신하는 단계를 더 포함하는 것을 특징으로 하는 통신 방법.
  27. AV 소스 기기와 통신하는 AV 싱크 기기로서,
    Wi-Fi Display 규격에 따라 상기 AV 소스 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고, 상기 AV 제어 세션을 이용하여 상기 AV 소스 기기로의 사용자 입력 백 채널을 활성화하는 제어부; 및
    상기 사용자 입력 백 채널을 통하여 상기 AV 소스 기기로 상기 사용자 입력을 송신하는 통신부를 포함하는 것을 특징으로 하는 AV 싱크 기기.
  28. 제27항에 있어서,
    상기 통신부는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 송신하는 것을 특징으로 하는 AV 싱크 기기.
  29. 제27항에 있어서,
    상기 제어부는,
    상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하며,
    상기 통신부는,
    상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 송신하는 것을 특징으로 하는 AV 싱크 기기.
  30. 제29항에 있어서,
    상기 통신부는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 송신하는 것을 특징으로 하는 AV 싱크 기기.
  31. AV 싱크 기기와 통신하는 AV 소스 기기로서,
    Wi-Fi Display 규격에 따라 상기 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고, 상기 AV 제어 세션을 이용하여 상기 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하는 제어부; 및
    상기 사용자 입력 백 채널을 통하여 상기 AV 싱크 기기로부터 사용자 입력을 수신하는 통신부를 포함하는 것을 특징으로 하는 AV 소스 기기.
  32. 제31항에 있어서,
    상기 통신부는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 데이터 및 제어 정보를 수신하는 것을 특징으로 하는 AV 소스 기기.
  33. 제31항에 있어서,
    상기 제어부는,
    상기 AV 제어 세션을 이용하여 사용자 입력 백 채널의 데이터 세션을 설정하며,
    상기 통신부는,
    상기 사용자 입력 백 채널의 데이터 세션을 통하여 상기 사용자 입력에 관한 데이터를 수신하는 것을 특징으로 하는 AV 소스 기기.
  34. 제33항에 있어서,
    상기 통신부는,
    상기 AV 제어 세션을 통하여 상기 사용자 입력에 관한 제어 정보를 수신하는 것을 특징으로 하는 AV 소스 기기.
  35. AV 데이터를 송신하는 AV 소스 기기; 및
    AV 데이터를 수신하는 AV 싱크 기기를 포함하며,
    상기 AV 소스 기기는,
    Wi-Fi Display 규격에 따라 상기 AV 싱크 기기와 AV 제어 세션 및 AV 데이터 세션을 설정하고, 상기 AV 제어 세션을 이용하여 상기 AV 싱크 기기로부터의 사용자 입력 백 채널을 활성화하며,
    상기 AV 싱크 기기는,
    상기 사용자 입력 백 채널을 통하여 상기 AV 소스 기기로 사용자 입력을 송신하는 것을 특징으로 하는 통신 시스템.
  36. 제1항 내지 제26항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터에서 읽을 수 있는 기록매체.
KR1020100101872A 2009-11-02 2010-10-19 Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기 KR101732057B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020100101872A KR101732057B1 (ko) 2009-11-02 2010-10-19 Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기
US12/917,684 US9264670B2 (en) 2009-11-02 2010-11-02 Method and apparatus for providing user input back channel in audio/video system
US14/801,442 US9473744B2 (en) 2009-11-02 2015-07-16 Method and apparatus for providing user input back channel in audio/video system
US15/275,920 US10440065B2 (en) 2009-11-02 2016-09-26 Method and apparatus for providing user input back channel in audio/video system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US25718609P 2009-11-02 2009-11-02
US61/257,186 2009-11-02
KR1020100101872A KR101732057B1 (ko) 2009-11-02 2010-10-19 Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기

Publications (2)

Publication Number Publication Date
KR20110048457A true KR20110048457A (ko) 2011-05-11
KR101732057B1 KR101732057B1 (ko) 2017-05-02

Family

ID=58742995

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100101872A KR101732057B1 (ko) 2009-11-02 2010-10-19 Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기

Country Status (2)

Country Link
US (3) US9264670B2 (ko)
KR (1) KR101732057B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140116919A (ko) * 2012-01-12 2014-10-06 마벨 월드 트레이드 리미티드 Wi-Fi 디스플레이(WFD) 세션 설정 시스템 및 방법
KR20140148404A (ko) * 2012-04-13 2014-12-31 소니 주식회사 무선 통신 장치, 정보 처리 장치 및 통신 방법
KR20150102747A (ko) * 2014-02-28 2015-09-07 삼성전자주식회사 무선 통신 시스템에서 어플리케이션 데이터를 디스플레이하기 위한 방법 및 장치
US11019124B2 (en) 2012-02-20 2021-05-25 Samsung Electronics Co., Ltd Screen mirroring method and apparatus thereof

Families Citing this family (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080045149A1 (en) * 2006-05-26 2008-02-21 Dinesh Dharmaraju Wireless architecture for a traditional wire-based protocol
US9198084B2 (en) 2006-05-26 2015-11-24 Qualcomm Incorporated Wireless architecture for a traditional wire-based protocol
US8667144B2 (en) * 2007-07-25 2014-03-04 Qualcomm Incorporated Wireless architecture for traditional wire based protocol
US8811294B2 (en) * 2008-04-04 2014-08-19 Qualcomm Incorporated Apparatus and methods for establishing client-host associations within a wireless network
US8601526B2 (en) 2008-06-13 2013-12-03 United Video Properties, Inc. Systems and methods for displaying media content and media guidance information
US9398089B2 (en) * 2008-12-11 2016-07-19 Qualcomm Incorporated Dynamic resource sharing among multiple wireless devices
US9264248B2 (en) * 2009-07-02 2016-02-16 Qualcomm Incorporated System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment
US9014546B2 (en) 2009-09-23 2015-04-21 Rovi Guides, Inc. Systems and methods for automatically detecting users within detection regions of media devices
US20110078731A1 (en) * 2009-09-25 2011-03-31 Rovi Technologies Corporation Systems and methods for multiple media guidance application navigation
US9582238B2 (en) 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
US9201627B2 (en) * 2010-01-05 2015-12-01 Rovi Guides, Inc. Systems and methods for transferring content between user equipment and a wireless communications device
US20110164175A1 (en) * 2010-01-05 2011-07-07 Rovi Technologies Corporation Systems and methods for providing subtitles on a wireless communications device
US10303357B2 (en) 2010-11-19 2019-05-28 TIVO SOLUTIONS lNC. Flick to send or display content
US9542203B2 (en) 2010-12-06 2017-01-10 Microsoft Technology Licensing, Llc Universal dock for context sensitive computing device
US8923770B2 (en) 2010-12-09 2014-12-30 Microsoft Corporation Cognitive use of multiple regulatory domains
US8589991B2 (en) * 2010-12-14 2013-11-19 Microsoft Corporation Direct connection with side channel control
US8792429B2 (en) 2010-12-14 2014-07-29 Microsoft Corporation Direct connection with side channel control
US8948382B2 (en) 2010-12-16 2015-02-03 Microsoft Corporation Secure protocol for peer-to-peer network
US9294545B2 (en) 2010-12-16 2016-03-22 Microsoft Technology Licensing, Llc Fast join of peer to peer group with power saving mode
US8971841B2 (en) 2010-12-17 2015-03-03 Microsoft Corporation Operating system supporting cost aware applications
EP2664994B1 (en) * 2011-01-14 2021-06-30 Samsung Electronics Co., Ltd. Method and apparatus for transmitting user input from a sink device to a source device in a wi-fi direct communication system
US9128524B2 (en) * 2011-01-18 2015-09-08 Lg Electronics Inc. Method for delivering user input, and device using same
US8677029B2 (en) 2011-01-21 2014-03-18 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US20130003624A1 (en) * 2011-01-21 2013-01-03 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) * 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US8964783B2 (en) * 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US9413803B2 (en) * 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US9065876B2 (en) 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
US20130013318A1 (en) * 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
US8674957B2 (en) 2011-02-04 2014-03-18 Qualcomm Incorporated User input device for wireless back channel
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US10108386B2 (en) * 2011-02-04 2018-10-23 Qualcomm Incorporated Content provisioning for wireless back channel
US9854318B2 (en) 2011-06-06 2017-12-26 Rovi Guides, Inc. Systems and methods for sharing interactive media guidance information
CN103765873B (zh) * 2011-09-12 2018-04-06 英特尔公司 使用共用和个人装置的个性化用户功能的协作式提供
US9106651B2 (en) * 2011-09-19 2015-08-11 Qualcomm Incorporated Sending human input device commands over internet protocol
US20130089006A1 (en) * 2011-10-05 2013-04-11 Qualcomm Incorporated Minimal cognitive mode for wireless display devices
US20130195119A1 (en) * 2011-10-14 2013-08-01 Qualcomm Incorporated Feedback channel for wireless display devices
US9218122B2 (en) 2011-12-29 2015-12-22 Rovi Guides, Inc. Systems and methods for transferring settings across devices based on user gestures
US9525998B2 (en) * 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
US8966131B2 (en) * 2012-01-06 2015-02-24 Qualcomm Incorporated System method for bi-directional tunneling via user input back channel (UIBC) for wireless displays
US8914187B2 (en) 2012-01-06 2014-12-16 Qualcomm Incorporated Vehicle dashboard wireless display system
KR102050984B1 (ko) 2012-03-11 2019-12-02 삼성전자주식회사 와이-파이 디스플레이 네트워크에서 와이-파이 디스플레이 세션을 제공하는 방법 및 장치, 그리고 그에 따른 시스템
US9087163B2 (en) * 2012-07-11 2015-07-21 Silicon Image, Inc. Transmission of multiple protocol data elements via an interface utilizing a data tunnel
WO2014051403A1 (en) 2012-09-28 2014-04-03 Samsung Electronics Co., Ltd. Method and system for streaming multimedia content in a wireless fidelity display network environment
WO2014052856A2 (en) * 2012-09-28 2014-04-03 Marvell World Trade Ltd. Enhanced user experience for miracast devices
US9144094B2 (en) * 2012-10-29 2015-09-22 Qualcomm Incorporated Establishing a wireless display session between a computing device and a vehicle head unit
US9237197B2 (en) 2013-01-15 2016-01-12 GM Global Technology Operations LLC Method and apparatus of using separate reverse channel for user input in mobile device display replication
US9652192B2 (en) * 2013-01-25 2017-05-16 Qualcomm Incorporated Connectionless transport for user input control for wireless display devices
KR102016347B1 (ko) * 2013-02-12 2019-08-30 삼성전자주식회사 클라이언트 및 서버 간 연결 방법 및 장치
JP6117562B2 (ja) 2013-02-13 2017-04-19 ソニー株式会社 情報処理装置、情報処理方法および情報処理システム
US9094191B2 (en) * 2013-03-14 2015-07-28 Qualcomm Incorporated Master key encryption functions for transmitter-receiver pairing as a countermeasure to thwart key recovery attacks
US9197680B2 (en) * 2013-05-23 2015-11-24 Qualcomm Incorporated Establishing and controlling audio and voice back channels of a Wi-Fi display connection
US9306992B2 (en) 2013-06-07 2016-04-05 Qualcomm Incorporated Method and system for using Wi-Fi display transport mechanisms to accomplish voice and data communications
EP2816761A1 (en) 2013-06-17 2014-12-24 Thomson Licensing Wifi display compatible network gateway
US20150002743A1 (en) * 2013-07-01 2015-01-01 Mediatek Inc. Video data displaying system and video data displaying method
US9674563B2 (en) 2013-11-04 2017-06-06 Rovi Guides, Inc. Systems and methods for recommending content
US9257097B2 (en) 2013-12-23 2016-02-09 Qualcomm Incorporated Remote rendering for efficient use of wireless bandwidth for wireless docking
RU2629562C1 (ru) * 2013-12-26 2017-08-30 Сейко Эпсон Корпорейшн Система передачи и отображения видео
US10425801B2 (en) * 2014-03-04 2019-09-24 Samsung Electronics Co., Ltd Method and device for providing contents in communication system
WO2015168903A1 (en) * 2014-05-08 2015-11-12 Lattice Semiconductor Corporation Caching of capabilities information of counterpart device for efficient handshaking operation
US20150350288A1 (en) * 2014-05-28 2015-12-03 Qualcomm Incorporated Media agnostic display for wi-fi display
US9558718B2 (en) * 2014-09-03 2017-01-31 Qualcomm Incorporated Streaming video data in the graphics domain
TW201610699A (zh) * 2014-09-05 2016-03-16 緯創資通股份有限公司 應用程式分享方法以及使用該方法的裝置
JP6378606B2 (ja) 2014-10-20 2018-08-22 キヤノン株式会社 通信装置、その制御方法、およびプログラム
CN105830457B (zh) 2014-11-27 2020-03-10 索尼公司 信息处理设备和信息处理方法
WO2016093623A1 (ko) * 2014-12-11 2016-06-16 엘지전자 주식회사 Wfd에서 보조 컨텐츠를 출력하는 방법 및 장치
CN105992024B (zh) * 2015-02-15 2019-06-25 中国移动通信集团公司 一种多屏互动的控制方法和装置
US10540302B2 (en) * 2015-04-17 2020-01-21 Lg Electronics Inc. Method and apparatus for switching input character in WFD
US20160350061A1 (en) * 2015-05-29 2016-12-01 Qualcomm Incorporated Remote rendering from a source device to a sink device
CN105302752B (zh) * 2015-10-20 2019-02-15 北京小鸟听听科技有限公司 一种音频设备的连接方法、音频播放装置
CN106507072A (zh) * 2016-10-11 2017-03-15 努比亚技术有限公司 一种无线投影装置、系统及方法
CN108616764A (zh) * 2016-12-09 2018-10-02 中兴通讯股份有限公司 一种控制方法及设备
CN107801065A (zh) * 2017-09-12 2018-03-13 捷开通讯(深圳)有限公司 基于WiFi Display的多媒体文件共享方法、设备以及系统
KR102509071B1 (ko) * 2018-08-29 2023-03-10 삼성전자주식회사 전자 장치 및 이의 외부 장치를 제어하는 방법
CN109862404B (zh) * 2019-02-21 2021-02-02 深圳创维－Rgb电子有限公司 一种智能电视的交互方法、存储介质及智能电视
US11483367B2 (en) * 2019-11-27 2022-10-25 Screenbeam Inc. Methods and systems for reducing latency on a collaborative platform

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7336925B2 (en) 2002-10-28 2008-02-26 Nokia Corporation Graphical indication of a proximately located device
US7171506B2 (en) * 2003-11-17 2007-01-30 Sony Corporation Plural interfaces in home network with first component having a first host bus width and second component having second bus width
KR100533001B1 (ko) 2003-12-17 2005-12-02 엘지전자 주식회사 무선 텔레비전의 제어 프로토콜 및 구조
US20050134579A1 (en) 2003-12-19 2005-06-23 Tsau-Hua Hsieh Wirelessly driven display system
KR100636147B1 (ko) 2004-06-24 2006-10-18 삼성전자주식회사 네트워크를 통한 컨텐츠의 제어 방법 및 장치, 컨텐츠제공 방법 및 장치
US7542784B2 (en) 2005-02-25 2009-06-02 Kleer Semiconductor Corporation High quality, low power, wireless audio system
US7499462B2 (en) * 2005-03-15 2009-03-03 Radiospire Networks, Inc. System, method and apparatus for wireless delivery of content from a generalized content source to a generalized content sink
CN101438256B (zh) * 2006-03-07 2011-12-21 索尼株式会社 信息处理设备、信息通信系统、信息处理方法
US20070245019A1 (en) * 2006-04-12 2007-10-18 United Video Properties, Inc. Interactive media content delivery using a backchannel communications network
US7881315B2 (en) * 2006-06-27 2011-02-01 Microsoft Corporation Local peer-to-peer digital content distribution
US9386269B2 (en) * 2006-09-07 2016-07-05 Rateze Remote Mgmt Llc Presentation of data on multiple display devices using a wireless hub
CN101155191B (zh) * 2006-09-25 2011-06-08 华为技术有限公司 支持ims终端享用现有iptv业务的系统和方法
KR20080029415A (ko) 2006-09-29 2008-04-03 엘지전자 주식회사 근거리 무선통신을 이용한 멀티미디어 데이터 재생 장치 및방법
KR20120024848A (ko) * 2009-05-26 2012-03-14 노키아 코포레이션 미디어 세션의 전달 방법 및 장치
US20100317443A1 (en) * 2009-06-11 2010-12-16 Comcast Cable Communications, Llc Distributed Network Game System
US9706241B2 (en) * 2009-09-29 2017-07-11 Verizon Patent And Licensing Inc. Systems and methods for casting a graphical user interface display of a mobile device to a display screen associated with a set-top-box device
US20110082939A1 (en) * 2009-10-02 2011-04-07 Michael Peter Montemurro Methods and apparatus to proxy discovery and negotiations between network entities to establish peer-to-peer communications

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140116919A (ko) * 2012-01-12 2014-10-06 마벨 월드 트레이드 리미티드 Wi-Fi 디스플레이(WFD) 세션 설정 시스템 및 방법
US11019124B2 (en) 2012-02-20 2021-05-25 Samsung Electronics Co., Ltd Screen mirroring method and apparatus thereof
KR20140148404A (ko) * 2012-04-13 2014-12-31 소니 주식회사 무선 통신 장치, 정보 처리 장치 및 통신 방법
US10278058B2 (en) 2012-04-13 2019-04-30 Sony Corporation Wireless communication device information processing device, and communication method
US10285127B2 (en) 2012-04-13 2019-05-07 Sony Corporation Wireless communication device, information processing device, and communication method
KR20150102747A (ko) * 2014-02-28 2015-09-07 삼성전자주식회사 무선 통신 시스템에서 어플리케이션 데이터를 디스플레이하기 위한 방법 및 장치

Also Published As

Publication number Publication date
US9264670B2 (en) 2016-02-16
US10440065B2 (en) 2019-10-08
US20170013027A1 (en) 2017-01-12
US20150326654A1 (en) 2015-11-12
US9473744B2 (en) 2016-10-18
US20110107388A1 (en) 2011-05-05
KR101732057B1 (ko) 2017-05-02

Similar Documents

Publication Publication Date Title
KR101732057B1 (ko) Ａｖ 시스템에서 사용자 입력 백 채널을 제공하는 방법 및 기기
JP6352365B2 (ja) Ｗｉ−ｆｉディスプレイ接続のオーディオおよび音声バックチャネルを確立および制御すること
US9913301B2 (en) Content sharing method and device
WO2017097088A1 (zh) 多屏投影控制方法、系统、终端设备及计算机存储介质
CN107079181B (zh) 管理服务器的方法、移动设备和可读存储介质
EP2858322B1 (en) Method and terminal for sharing media stream
US20140195587A1 (en) Method and system for providing digital content
US9357357B2 (en) Group owner selection for a peer-to-peer group
WO2016110169A1 (zh) 一种显示处理方法及装置
US20170019443A1 (en) Device and method for transferring the rendering of multimedia content
US9083996B2 (en) Remote monitoring method for smart TV, and smart TV system
KR20150124352A (ko) 무선 통신 시스템에서 디바이스들 간에 공유되는 컨텐츠를 제어하는 방법 및 장치
US10581946B2 (en) Method for controlling a multimedia application, software product and device
US9749373B2 (en) System and method for improved content streaming
US11653063B2 (en) Multi-device access, control and presentation of streaming content
US10425801B2 (en) Method and device for providing contents in communication system
US8819184B2 (en) Method and system for playing multimedia file and computer readable medium using the method
KR101236209B1 (ko) 홈 네트워크 시스템 내의 장치 발견 프로토콜을 이용한어플리케이션 이전 방법
CN106664388B (zh) 用于改变设备的模式的装置和方法
KR20120029121A (ko) 이종 단말 간 서비스 이동성 제공 장치 및 방법
WO2015118589A1 (ja) 情報処理装置、情報処理方法及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant