KR20150095768A - Ｗｉｆｉ 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 방법 및 시스템 - Google Patents
Ｗｉｆｉ 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 방법 및 시스템 Download PDFInfo
- Publication number
- KR20150095768A KR20150095768A KR1020157018201A KR20157018201A KR20150095768A KR 20150095768 A KR20150095768 A KR 20150095768A KR 1020157018201 A KR1020157018201 A KR 1020157018201A KR 20157018201 A KR20157018201 A KR 20157018201A KR 20150095768 A KR20150095768 A KR 20150095768A
- Authority
- KR
- South Korea
- Prior art keywords
- source
- sink
- mode
- sources
- group
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 78
- 230000004044 response Effects 0.000 claims description 11
- 230000000977 initiatory effect Effects 0.000 claims description 7
- 238000009877 rendering Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 229920001690 polydopamine Polymers 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/6437—Real-time Transport Protocol [RTP]
-
- H04W76/02—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W76/00—Connection management
- H04W76/10—Connection setup
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Astronomy & Astrophysics (AREA)
- General Physics & Mathematics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
싱크(sink)와의 하나 이상의
Wi-Fi 디스플레이(WFD) 세션을 설정함으로써 그룹 내의 다수의 소스들로부터 멀티미디어 콘텐츠를 동시에 스트리밍하기 위한 방법 및 시스템이 개시된다. 상기 방법은 멀티미디어 콘텐츠의 영상을 표시하기 위해, 싱크로 하여금 그룹 내의 제1 소스 및 하나 이상의 제2 소스들 간에 싱크의 디스플레이 화면 (화면)을 공유가능 하게 한다. 상기 방법은 싱크로 하여금, 그룹 내의 제1 소스 및 하나 이상의 제2 소스들 중 하나로부터 멀티미디어 콘텐츠의 오디오를 선택가능 하게 한다. 상기 방법은 그룹 내의 싱크, 제1 소스 및 하나 이상의 제2 소스들로 하여금 싱크로의 멀티미디어 콘텐츠의 스트리밍을 위한 동작 모드를 선택가능 하게 한다.
Description
본 발명은 Wi-Fi 네트워크에서 멀티미디어 콘텐츠를 스트리밍(streaming)하기 위한 방법 및 시스템에 관한 것이다.
무선 피델리티(Wireless Fidelity)(Wi-Fi)의 기술적 진보와 함께, Wi-Fi는 핵심 네트워킹 시장에서 다른 용도로 이동하여 응용 프로그램(application) 차원으로 확대되고 있다. 스마트 폰, 태블릿, 주변 장치, 텔레비전, 셋톱 박스 등과 같은 현대의 전자 기기들의 대부분은 Wi-Fi 기능을 구비한다. 최근 생겨난 Wi-Fi 기술은 케이블 없는(cable-free) 혁명을 제공하는 Wi-Fi 네트워크를 통해 시청각 콘텐츠(audio-visual content)를 포함하는 멀티미디어 콘텐츠를 전송하는 기능을 갖는 Wi-Fi 디스플레이(WFD) 메커니즘을 마련했다.
WFD 규격은 WFD 소스 디바이스(source, 소스)와 WFD 싱크 디바이스(sink, 싱크) 사이에 WFD 세션을 설정함으로써 멀티미디어 콘텐츠를 미러링(mirroring)하기 위한 메커니즘을 정의한다. 소스는 재생되고 있는 멀티미디어 콘텐츠를 캡처하고, 암호화, 패킷화한 다음 싱크로 스트리밍한다. 싱크는 멀티미디어 콘텐츠를 디패킷화하고(de-packetizes), 디코딩한 다음 싱크 또는 싱크에 연결된 디스플레이 중 어느 하나에 표시한다. WFD 세션은, 소스 및 싱크가 상호 발견하여, Wi-Fi 피어 투 피어(P2P) 또는 터널링 직접 링크 설정(TDLS: Tunneled Direct Link Setup)을 이용하여 상호 접속하고, 능력 교환(capability exchange) 및 협상을 통해 상호 능력들에 대해 아는 경우 설정된다.
기존 Wi-Fi 디스플레이 규격은 WFD 세션을 하나의 소스, 오디오-영상 기능을 갖는 하나의 주 싱크(primary sink) 및 오디오 기능에만 국한된 보조 싱크(secondary sink)로의 선택적 결합으로만 제한한다. 기존의 방법은 싱크에서 여러 소스들을 상호 운용가능 방식으로 처리하는 데 실패했다. 그러나, 멀티 플레이어 인터랙티브 게임 응용 프로그램(multiplayer interactive gaming applications) 등 다양한 다중 사용자 시나리오들은 여러 소스들로부터의 멀티미디어 콘텐츠를 하나의 싱크로 동시 스트리밍하는 것을 요구한다.
본 명세서의 실시 예들의 양태는 싱크와의 하나 이상의 Wi-Fi 디스플레이(WFD) 세션을 설정한 후에 그룹 내의 제1 소스 및 하나 이상의 제2 소스들로 하여금, 멀티미디어 콘텐츠를 싱크로 동시 스트리밍 가능하게 하는 방법 및 시스템을 제공하는 것이다.
본 발명의 다른 양태는 싱크로 하여금, 그룹 내의 제1 소스 및 하나 이상의 제2 소스들 사이에 싱크의 디스플레이 화면 (화면)을 공유가능하게 하여 멀티미디어 콘텐츠의 영상을 디스플레이하는 방법을 제공하는 것이다.
본 발명의 다른 양태는 싱크로 하여금, 그룹 내의 소스로부터 멀티미디어 콘텐츠의 오디오를 선택가능하게 하여 선택된 오디오를 렌더링(rendering)하는 방법을 제공하는 것이다.
본 발명의 또 다른 양태는 그룹 내의 싱크, 제1 소스 및 하나 이상의 제2 소스들로 하여금, 멀티미디어 콘텐츠를 싱크로 동시 스트리밍하기 위한 동작 모드를 선택 가능하게 하는 방법을 제공하는 것이다.
따라서, 본 발명은 Wi-Fi 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 방법을 제공하고, 상기 방법은, 장치 탐색(Device Discovery)(DD) 및 서비스 탐색(Service Discovery)(SD)을 수행한 후 싱크와, 제1 소스 및 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 능력 교환(capability exchange) 동안 상기 싱크에 의해 소스 연계 정보(source association information)를 탐색하는 과정을 포함한다. 상기 방법은, 상기 싱크와, 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 상기 Wi-Fi 네트워크에서 상기 멀티미디어 콘텐츠를 스트리밍을 위한 적어도 하나의 Wi-Fi 디스플레이(WFD) 세션을 설정하는 과정을 더 포함한다. 그 다음, 상기 방법은 상기 제1 소스 및 상기 적어도 하나의 제2 소스로부터 상기 멀티미디어 콘텐츠의 영상(video)을 상기 싱크에 의해 디스플레이하는 과정을 포함하고, 상기 싱크의 화면은 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나 사이에 공유된다. 또한, 상기 방법은, 상기 제1 소스, 상기 적어도 하나의 제2 소스 중 하나로부터 오디오를 선택한 후 상기 싱크에 의해 상기 멀티미디어 콘텐츠의 오디오를 렌더링하는 과정을 포함한다.
따라서, 본 발명은 Wi-Fi 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 시스템을 제공하고, 상기 시스템은 제1 소스, 적어도 하나의 제2 소스 및 싱크를 포함한다. 상기 시스템은 장치 탐색(DD) 및 서비스 탐색(SD)을 수행한 후, 상기 싱크와, 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 능력 교환을 수행함으로써 상기 싱크에 의해 소스 연계 정보를 탐색하도록 구성된다. 또한, 상기 시스템은 상기 싱크와, 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 상기 Wi-Fi 네트워크에서 상기 멀티미디어 콘텐츠를 스트리밍하기 위한 적어도 하나의 Wi-Fi 디스플레이(WFD) 세션을 설정하도록 구성된다. 또한, 상기 시스템은 상기 제1 소스 및 상기 적어도 하나의 제2 소스로부터 상기 멀티미디어 콘텐츠의 영상을 상기 싱크에 의해 디스플레이하도록 구성되고, 상기 싱크의 화면은 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나 사이에 공유된다. 또한, 상기 시스템은 상기 제1 소스, 상기 적어도 하나의 제2 소스 중 하나로부터 오디오를 선택한 후, 상기 싱크에 의해 상기 멀티미디어 콘텐츠의 오디오를 렌더링하도록 구성된다.
본 명세서의 실시 예들의 이들 및 다른 양태들은 다음의 상세한 설명 및 첨부된 도면들과 연관하여 고려될 때 좀 더 잘 이해할 것이다. 그러나 이후의 설명은 바람직한 실시 예들 및 그 다수의 특정한 세부 사항들을 지시하고 있기는 하지만 예시로 주어진 것이지 한정하려는 것은 아님을 알아야 할 것이다. 본 발명의 사상을 벗어남이 없이 그 실시 예들의 범위 내에서 많은 변경들 및 수정들이 이뤄질 수 있고, 본 발명의 실시 예들은 그러한 모든 변경들을 포함하는 것이다.
본 발명은 첨부 도면들에 도시되어 있고, 그 전반에 걸쳐 유사한 도면 부호들이 여러 도면들에서 상응하는 부분들을 지시하고 있다. 본 발명의 실시 예들은 첨부 도면들을 참조로 한 이후의 설명으로부터 보다 잘 이해하게 될 것이다. 첨부 도면들 중에서,
도 1은 개시된 실시 예들에 따라, 하나 이상의 WFD 세션들을 설정함으로써 그룹 내의 하나 이상의 소스들이 멀티미디어 콘텐츠를 싱크에 동시 스트리밍하는 예시적인 WFD 환경을 도시한다;
도 2는 개시된 실시 예들에 따라, 연관 동작 모드(associated mode of operation)에서 하나 이상의 WFD 세션들을 설정하기 위한 사전 연계 그룹(pre-association group)의 형성을 설명하는 순서도를 도시한다;
도 3은 개시된 실시 예들에 따라, 연관 동작 모드의 경우 싱크와 사전 연계 그룹 내의 하나 이상의 소스들에 의해 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시한다;
도 4a는 본 명세서에 개시된 실시 예들에 따라, 연관된 송신 모드에서 하나 이상의 WFD 세션들을 설정함으로써 멀티플레이어 게임을 위한 순서도를 도시하고, 도 4b는 싱크의 대응하는 디스플레이 화면을 도시한다;
도 5a는 본 명세서에 개시된 실시 예에 따라, 비 연관 동작 모드(unassociated mode of operation)에서 사후 그룹핑 모드(post-grouping mode)에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 5b 및 도 5c는 싱크의 대응하는 디스플레이 화면을 도시한다;
도 6a는 본 명세서에 개시된 실시 예들에 따라, 비 연관 동작 모드에서 사전 그룹핑 모드(pre-grouping mode)에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 6b 및 도 6c는 싱크의 대응하는 디스플레이 화면을 도시한다;
도 7a는 개시된 실시 예들에 따라, 부분 표시 동작 모드(part display mode of operation)에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 7b는 싱크의 대응하는 디스플레이 화면을 도시한다.
도 1은 개시된 실시 예들에 따라, 하나 이상의 WFD 세션들을 설정함으로써 그룹 내의 하나 이상의 소스들이 멀티미디어 콘텐츠를 싱크에 동시 스트리밍하는 예시적인 WFD 환경을 도시한다;
도 2는 개시된 실시 예들에 따라, 연관 동작 모드(associated mode of operation)에서 하나 이상의 WFD 세션들을 설정하기 위한 사전 연계 그룹(pre-association group)의 형성을 설명하는 순서도를 도시한다;
도 3은 개시된 실시 예들에 따라, 연관 동작 모드의 경우 싱크와 사전 연계 그룹 내의 하나 이상의 소스들에 의해 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시한다;
도 4a는 본 명세서에 개시된 실시 예들에 따라, 연관된 송신 모드에서 하나 이상의 WFD 세션들을 설정함으로써 멀티플레이어 게임을 위한 순서도를 도시하고, 도 4b는 싱크의 대응하는 디스플레이 화면을 도시한다;
도 5a는 본 명세서에 개시된 실시 예에 따라, 비 연관 동작 모드(unassociated mode of operation)에서 사후 그룹핑 모드(post-grouping mode)에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 5b 및 도 5c는 싱크의 대응하는 디스플레이 화면을 도시한다;
도 6a는 본 명세서에 개시된 실시 예들에 따라, 비 연관 동작 모드에서 사전 그룹핑 모드(pre-grouping mode)에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 6b 및 도 6c는 싱크의 대응하는 디스플레이 화면을 도시한다;
도 7a는 개시된 실시 예들에 따라, 부분 표시 동작 모드(part display mode of operation)에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 7b는 싱크의 대응하는 디스플레이 화면을 도시한다.
본 발명의 실시 예들과 그 다양한 특징들 및 유리한 세부 사항들은 첨부 도면들에 도시되고 이후의 설명에 상세히 기술된 비한정적 실시 예들을 참조하여 더욱 충분하게 설명하기로 한다. 본 발명의 실시 예들을 불필요하게 모호하게 만들지 않도록 공지의 구성 요소들 및 처리 기법들의 설명을 생략하기로 한다. 본 명세서에서 사용되는 예들은 본 발명의 실시 예들을 실시할 수 있는 방안들의 이해를 용이하게 하고 나아가 당업자들로 하여금 본 발명의 실시 예들을 실시할 수 있게 하려고 의도된 것에 지나지 않는다. 따라서 그 예들을 본 발명의 실시 예들의 범위를 한정하는 것으로 해석되어서는 안 된다.
실시 예들은 그룹 내의 복수의 소스들이, 싱크와의 하나 이상의 Wi-Fi 디스플레이(WFD) 세션들 또는 실시간 스트리밍 프로토콜(RTSP) 세션을 설정한 후 싱크로 멀티미디어 콘텐츠 동시 스트리밍을 가능하게 하는 방법 및 시스템을 달성한다. 복수의 소스 그룹은 그룹의 멤버로서 제1 소스 및 하나 이상의 제2 소스들을 포함한다. 싱크는 멀티미디어 콘텐츠의 영상을 표시하기 위해 그룹의 멤버들(구성원들) 간에 싱크의 디스플레이 화면을 공유한다. 싱크는 그룹의 멤버들로부터 수신된 오디오 의도 값(audio intent value)에 기초하여 상기 그룹의 소스로부터 멀티미디어 콘텐츠의 오디오를 선택한다. 그런 다음, 싱크는 소스로부터 선택된 오디오를 렌더링하고 디스플레이 화면에 해당 소스를 나타낸다.
일 실시 예에서, 소스는 휴대폰, 스마트 폰, 태블릿, 개인 휴대 정보 단말기(PDA), 스마트 TV 및 싱크 상에 멀티미디어 콘텐츠 스트리밍이 가능한 WFD인 유사 전자 장치일 수 있다.
일 실시 예에서, 싱크는 텔레비전, 태블릿, 랩톱 및 WFD 소스로부터 수신된 오디오 및 영상을 렌더링가능한 WFD인 임의의 전자 장치일 수 있다.
상기 방법은 그룹 내의 멤버들에 의해 멀티미디어 콘텐츠를 동시 스트리밍하기 위한 다양한 동작 모드들을 싱크로 제공한다. 일 실시 예에서, 동작 모드는 연관 모드(associated mode), 비 연관 모드(unassociated mode) 및 부분 표시 모드(part display mode)일 수 있다. 비 연관 모드는 동작의 사후 그룹핑 모드 및 사전 그룹핑 모드를 포함한다. 동작 모드는 복수의 소스들 중 제1 소스 및 하나 이상의 제2 소스들이 자신의 멀티미디어 콘텐츠를 싱크의 화면 상에 동시 스트리밍하기 위한 그룹을 형성하는 방법을 정의한다.
그룹 내에 복수의 소스들이 있을 수 있다. 싱크 상에 동시에 스트리밍하는 소스들의 개수는 싱크 및 이러한 유사한 파라미터들에 의해 지원되는 최대 개수의 소스들과 같이 하나 이상의 파라미터들에 의해 제한된다.
따라서, 상기 방법은 싱크로 하여금 복수의 소스들로부터 영상을 그리고 선택한 소스 중 하나에서 오디오를 상호 운용 가능한 방법으로 렌더링 가능하게 함으로써 멀티 플레이어 인터랙티브 게임 등의 응용 프로그램을 활성화할 수 있다.
이제 도면들, 보다 구체적으로 도 1 내지 도 7을 참조하면, 유사한 참조 부호들은 도면 전체에 걸쳐서 지속적으로 대응하는 특징들을 나타내고, 여기에 바람직한 실시 예들이 도시된다.
도 1은 개시된 실시 예들에 따라, 그룹 내의 하나 이상의 소스들이 하나 이상의 WFD 세션들을 설정함으로써 멀티미디어 콘텐츠를 싱크로 동시 스트리밍하는 예시적인 WFD 환경을 도시한다. 도면에서 소스(101a)(제1 소스) 및 소스들(101b, 101c 및 101d) (하나 이상의 보조 소스들)이 Wi-Fi 네트워크(100) 내에 각각 도시된다. 싱크(102)는 WFD 세션들이 소스들(101a, 101b, 101c) 각각에 의해 설정되는 동안 멀티미디어 콘텐츠의 오디오 및 영상을 미러링(mirroring)할 수 있는 주 싱크다. 싱크(102)는 오디오 싱크인 보조 싱크(103)에 선택적 결합을 가질 수 있다.
싱크(102)는 능력 교환을 수행함으로써, 소스(101a), 소스(101b) 및 소스(101c)로부터의 오디오 의도 값 및 동작 모드를 포함하는 소스 연계 정보를 탐색한다. 탐색된 동작 모드에 기반하여, WFD 세션들이 싱크(102)와 각각의 소스들(101a, 101b 및 101c) 사이에 각각 설정된다. 소스들(101a, 101b 및 101c)은 단일 그룹의 멤버이고 각 소스는 싱크(102)와의 WFD 세션을 설정한다. 도면에 도시된 바와 같이, 싱크(102)는 스트리밍 멀티미디어 콘텐츠를 위한 세 개의 소스들만을 지원하도록 구성되고, 싱크(102)는 멀티미디어 콘텐츠를 스트리밍하기 위한 임의의 선택된 동작 모드에서 추가의 소스(101d)가 그룹의 멤버가 되는 것을 제한한다. 멀티미디어 콘텐츠의 스트리밍을 위해 설정된 WFD 세션의 동작 모드는 연관 모드, 비 연관 모드 또는 부분 표시 모드일 수 있다. 상술한 모드들이 도 2 내지 도 7에 도시된다. 비 연관 모드는 멀티미디어 콘텐츠의 스트리밍을 위한 사전 그룹핑 모드 및 사후 그룹핑 모드를 포함한다.
동작 모드는 그룹이 형성되는 방식을 정의한다. 연관 모드에서, 복수의 소스들은 싱크와의 WFD 세션 설정 이전에 상호간에 그룹을 형성한다. 사후 그룹핑 모드에서, 그룹은 WFD 세션이 소스 중 하나와 개시한 후에 싱크에 의해 형성된다. 사전 그룹핑 모드에서, 그룹은 소스 중 어느 하나와의 WFD 세션의 개시 이전에 싱크에 의해 형성된다.
소스들(101a, 101b 및 101c)은 단일 그룹의 멤버들이고 각 소스는 싱크(102)와의 WFD 세션을 설정한다.
일 실시 예에서, 응용 프로그램에 기반하여 상기 방법은 동작 모드들 중 하나에서 동작하도록 선택할 수 있다. 예를 들어, 소스 상에서 응용 프로그램에 의한 WFD 세션 설정 지연(delay)은 그 결과 사전 그룹핑 모드로 되고, 반면 소스 상의 응용 프로그램에 의한 즉각적인 WFD 세션 설정은 사후 그룹핑(post-grouping)로 된다.
싱크, 제1 소스 및 적어도 하나의 제2 소스를 포함하는 복수의 소스들을 포함하는 싱크 그룹은, 그룹 ID라는 고유 식별자를 이용하여 식별될 수 있다. 그룹 ID는 그룹에 대한 응용 프로그램 레벨 식별자이고, 싱크는 한 번에 한 개의 그룹만이 지원받도록 할 수 있다. 따라서, 이 방법은 그룹 ID로서 싱크 ID의 사용을 가능하게 한다.
일 실시 예에서, 상기 싱크는 새로운 메시지 M20을 이용하여 Wi-Fi 네트워크(100) 내의 하나 이상의 소스들로부터 소스 연계 정보에서 동작 모드에 대한 정보를 수신한다. M20은 별도의 ModeSelect 프레임 또는 RTSP 명령일 수 있다. 예를 들어, 이 방법은 새로운 메시지 M20를 정의한다. ModeSelect 프레임은 데이터가 없거나 선택된 동작 모드에 대한 WFD 세션 관련 일부 데이터를 갖는 더미 프레임(dummy frame)이다.
일 실시 예에서, 상기 싱크는 능력 교환 중에, 선택된 동작 모드를 나타내는 동작 모드 파라미터를 송신함으로써 동작 모드를 선택하여 하나 이상의 소스들에 알려줄 수 있다. 동작 모드 파라미터는 연관 모드, 사전 그룹핑 모드 및 사후 그룹핑 모드에 대응하는 3 개의 별개의 값들(distinct values)을 가질 수 있다.
일 실시 예에서, 오디오 의도 값(audio intent value)은 싱크가 그룹의 멤버인 소스 중 하나에 활성 상태(active status)를 할당가능하게 한다.
도면에 도시된 바와 같이, 싱크(102)는 가장 높은 오디오 의도 값을 갖는 소스(101a)에 활성 상태를 할당하고 소스(101a)의 오디오 및 영상을 싱크(102)의 디스플레이 화면 상에 미러링한다(mirrors). 싱크는 그룹의 나머지 멤버들 (소스들(101b 및 101c))에 비활성 상태(passive status)를 할당하고 소스들(101b 및 101c)의 영상만을 싱크(102)의 디스플레이 화면 상에 각각 렌더링한다.
일 실시 예에서, 소스들(101a, 101b 및 101c)의 오디오 의도 값들이 각각 동일하다면, 싱크(102)는 활성 상태가 부여될 수 있는 소스를 선택하도록 구성된다. 싱크(102)는 소스를 선택하여 상기 소스와 이용가능한 리소스들, 지원된 오디오 포맷 등과 같은 다른 파라미터들에 기초하여 활성 상태를 할당한다.
오디오 의도 값은 활성 소스 상태(active source status)를 취득하기 위한 소스에 의한 표시 또는 요청일 수 있고, 싱크는 수신된 표시를 수락하거나 거절할 수 있다.
일 실시 예에서, 싱크(102)는 소스들(101a, 101b 및 101c) 영상을 각각 표시하고 오디오는 자체의 리소스들을 사용하여 활성 소스(101a)에 의해 재생된다.
일 실시 예에서, 싱크(102)는 싱크(102)에서의 응용 프로그램 레벨 로직에 기반하여 또는 싱크가 비활성 소스로부터 활성 소스 상태 할당을 위한 요청을 수신할 때 마다 각 소스의 활성 및 비활성 상태를 전환할 수 있다.
싱크(102)가 각 소스로부터 영상을 디스플레이하는 방법은 싱크(102) 상에서의 구성 설정(configuration settings)에 기반할 수 있다. 예를 들어, 싱크는 그룹에 연관되는 소스들의 수에 기반하여 또는 디스플레이될 콘텐츠 타입에 적합해 보이는 방법으로 화면을 수평 또는 수직 중 하나로 분할하도록 선택할 수 있다.
일 실시 예에서, 싱크를 위한 구성 설정은 소스로부터 싱크로 전송될 수 있다.
일 실시 예에서, 싱크(102)가 결합 싱크 모드(coupled sink mode)로 동작하는 경우, 활성 상태가 할당된 소스에 대한 오디오는 보조 싱크(103) (오디오 전용 싱크)로 전송된다. 나머지 소스들의 기존의 비활성 상태는 변경되지 않는다. 결합 싱크 모드의 일 실시 예에서, 현재의 응용 프로그램이 요구한다면, 싱크(102) (주 싱크)의 프리 오디오 리소스는 설정된 WFD 세션들에 대해 비활성 상태가 할당된 소스(101b) 또는 소스(101c)용으로 사용될 수 있다.
일 실시 예에서, 싱크는 하나의 소스로부터 전송된 다중 스트림들을 미러링한다. 싱크는 다중 스트림들 중 하나의 스트림을 활성 스트림으로서 할당하여 활성 스트림의 오디오 및 영상을 미러링한다. 나머지 스트림들은 비활성 상태로 할당되고 비활성 스트림들의 영상만이 싱크의 디스플레이 상에 표시된다.
도 2는 개시된 실시 예들에 따라, 연관 동작 모드에서 하나 이상의 WFD 세션들을 설정하기 위한 사전 연계 그룹의 형성을 설명하는 순서도를 도시한다.
연관 동작 모드의 경우, 소스들의 사전 연계 그룹은 제1 소스 및 하나 이상의 제2 소스들을 포함하는 복수의 소스들이 사전 연계 그룹의 멤버로 가입한 후 형성(생성)된다. 이로써 WFD 세션 개시 이전에 싱크와 상기 멤버들 간에 소스 연계(source association)를 생성한다. 사전 연관 그룹을 생성 또는 형성하기 위한 Wi-Fi 네트워크(100)에서 복수의 소스들 간에 소스 연계를 가능하게 하기 위해 상기 방법은 소스 연계 절차를 제공한다. 소스 연계는 Wi-Fi 네트워크(100) 내의 모든 소스들에 의해 지원될 수도 있고 지원되지 않을 수도 있다. 상기 방법은 Wi-Fi 네트워크(100) 내의 복수의 소스들로 하여금 능력 교환 메시지가 흐르는 동안 파라미터 Source_Association_Support를 사용하여 소스 연계 능력에 대한 지원을 표시 가능하게 한다. Source_Association_Support 파라미터는 소스가 복수의 소스들 간에 연관된 모드 소스 연계(associated mode source association)를 지원함을 나타내는 값 1 (참)로 설정되고 값 0 (거짓)은 소스가 소스들 간에 연관 모드 소스 연계를 지원하지 않음을 나타낸다. 상기 방법은 Wi-Fi 네트워크(100) 내에서 소스 연계 가능한 하나 이상의 소스들의 능력들에 능력 파라미터 Associated_Source를 제공한다. 소스가 적어도 하나의 다른 소스와 연관된다면 소스에 의해 Associated_Source 파라미터의 값은 1 (참)로 설정되고; 그 밖의 경우에는 값 0 (거짓)으로 설정된다.
상기 방법은 사전 연관된 그룹에서 연관된 소스들의 수의 카운트를 유지하기 위해 소스 연계 가능한 하나 이상의 소스들에 No_Of_Sources_Associated 파라미터를 제공한다. 소스가 임의의 다른 소스와 연관되지 않은 경우 No_Of_Sources_Associated의 값은 0 (거짓)으로 설정되고, 새 소스가 다른 소스 연계 가능 소스들과 연관할 때마다 하나씩 증가된다.
일 실시 예에서, 소스들은 파라미터 Max_Source_Associations을 이용하여 소스 연계 수에 제한을 설정할 수 있다. Max_Source_Associations의 값은 소스에 대한 최대 허용 소스 연계(maximum allowed source associations)를 제공한다. 예를 들어, 소스가 그 Max_Source_Associations를 2로 디스플레이하는 경우, 2 개 이상의 다른 소스와 연관될 수 없다.
소스 연계 절차는 소스가 단지 하나의 소스와만 소스 연계 절차를 실행할 수 있는 어느 시점에 순차적으로 발생한다.
도면에 도시된 바와 같이, Source_Association_Support 파라미터를 갖는 소스(101a)(제1 소스), 소스들(101b, 101c, 101d) (하나 이상의 제2 소스들)은 소스 연계를 지원하기 위한 자신들의 능력을 나타내는 값 1로 설정된다. 또한, 도면은 사전 연관 그룹을 형성하기 위해 소스 연계 절차를 수행하기 위한 메시지 교환을 도시한다. 당초, 소스들 어느 것도 서로 연결되지 않기 때문에, 모든 소스들(101a, 101b, 101c 및 101d) 각각은, 0으로 설정된 No_Of_Sources_Associated 파라미터 값을 가진다. Wi-Fi 네트워크(100)에서 소스(101a) 및 소스(101b)는 장치 탐색(DD) 및 선택적 서비스 탐색(SD)을 수행함으로써(201) 상호 탐색한다.
DD 및 SD를 수행하면, 전송 제어 프로토콜(TCP) 연결은 소스(101a)와 소스(101b) 사이에 설정된다. 또한, 개시자 소스(101a) 및 탐색된 소스(101b) 양자 모두 RTSP 메시지 M1 내지 M4를 교환함으로써 능력 교환을 수행한다(202). 일단 능력 교환 절차가 수행되면, 소스(101a) 및 소스(101b)는 Source_Association_Support의 값을 확인함으로써 각각이 소스 연계를 지원하는지 여부를 확인한다. 임의의 소스가 소스 연계 지원에 실패하면, 대응하는 소스에 대한 소스 연계 절차를 종료한다.
소스 연계가 소스(101a) 및 (101b)에 의해 지원된다면, 소스 연계 절차 단계들이 수행될 수 있다. 설명한 바와 같이, 당초 소스(101a) 및 소스(101b)가 임의의 다른 소스와 연관되지 않아, 파라미터 No_Of_Sources_Associated는 상기 소스 둘다에 의해 0으로 설정된다. 소스(101a) 또는 (101b) 중 어느 하나는 소스 연계 절차를 개시할 수 있다. 소스(101a)는 소스 연계를 수행하기 위한 요청을 개시하며 연계 프레임 요청(associate frame request) 등의 새로운 M17 RTSP 명령을 소스(101b)로 전송한다(203). 응답하여, 소스(101b)는 소스 연계가 성공적임을 나타내는 연계 응답을 갖는 새로운 M18 RTSP 응답(204)을 전송한다. 연계 요청 및 연계 응답 프레임은 데이터 없는 더미 프레임(dummy frames)이다.
일 실시 예에서, 소스 연계 절차에 관련한 데이터는 연계 요청 및 연계 응답 프레임에 포함될 수 있다.
일단 소스 연계가 성공하였다면, 소스(101a) 및 소스(101b) 양자 모두는 그들의 Associated_Source 파라미터를 1로 그리고 No_Of_Sources_Associated 파라미터를 1로 업데이트한다. 또한, 소스(101c)와의 연계는 소스(101a), 소스(101b) 또는 소스(101c) 자체에 의해 개시될 수 있다. 도면에 도시된 바와 같이, 소스(101c)는 소스(101a)와의 소스 연계를 시작한다. 소스(101c)는 DD, SD를 수행하고(205), 능력 교환 수행(206), 연계 프레임 요청을 전송하고(207), 소스(101a)에 의해 전송된(208) 연계 프레임 응답을 수신함으로써 성공적인 연계를 나타낸다. 사전 연관된 그룹의 멤버 중 하나 (소스(101a))와의 연계에 성공하면, 소스(101c)는 도 2의 소스(101b) 등 같이 사전 연관된 그룹의 전체 멤버들과 자동 연관된다.
또한, Wi-Fi 네트워크(100)의 임의의 다른 소스 예를 들어, 사전 연관된 그룹 가입에 관심 있는 소스(101d)는 소스 연계 절차를 개시하고 사전 연관된 그룹의 멤버 중 하나 (소스(101c))와 DD, SD를 수행할 수 있다(209). 소스(101b)는 두 개 이상의 장치들과 연관될 수 없음을 나타내는 2로 설정된 Max_Source_Associations 값을 갖는다. 소스(101b)는 이미 두 개의 다른 소스들(소스(101a) 및 소스(101b))에 연관되어 있다. 소스(101d)는 부 프레임 요청을 소스(101c)로 전송한다. 이 요청은 소스(101b)의 Max_Source_Associations 값이 사전 연관된 그룹의 더 이상의 확장을 제한하기 때문에 소스(101c)에 의해 거절된다. 소스(101c)는 소스(101d)으로부터 요청에 응답하여 연계 거절 메시지를 전송한다(211).
일 실시 예에서, Wi-Fi 네트워크에서 소스들은 여러 개의 사전 연계 그룹에 합류할 수 있다. 상기 방법은 소스들로 하여금 새로운 Multi_Association_Capable 파라미터를 이용하여 그 능력들에서 다중 연계 능력을 표시가능하게 한다. Multi_Association_Capable 파라미터 값은 소스가 다중 연계 가능함을 나타내는 값 1(참)로 설정되고 소스가 다중 연계 가능하지 않음을 나타내는 값 0(거짓)으로 설정된다.
일 실시 예에서, 소스(101a), 소스(101b) 및 소스(101c) 사이에 형성된 사전 연계 그룹에 의해 거절된 소스(101d)는, 이 소스들이 다중 연계 가능하다면 소스(101a) 또는 소스(101c)와의 소스 연계 절차를 시작할 수 있다. 소스(101a) 및/또는 소스(101c)의 새로운 소스 연계는, 소스(101b) 및 소스(101c)와 사전 연관된 그룹을 형성하기 위해 수행된 이전의 소스 연계와는 관계없다.
도 3은 개시된 바와 같은 실시 예들에 따라, 연계된 동작 모드를 위한 싱크를 갖는 사전 연관된 그룹에서 하나 이상의 소스들에 의한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시한다. 도면에 도시된 바와 같이, 소스들(101a, 101b 및101c)은 각각 사전 연관된 소스 그룹을 형성한다. 사전 연관된 그룹의 멤버들 중 어느 하나가 WFD 세션을 개시할 수 있다.
도면에 도시된 바와 같이, 소스(101c)는 사전 연관된 동작 모드에 대한 WFD 세션을 개시하고, 싱크(102)와 메시지를 교환함으로써 DD, SD를 수행한다(301). 또한, 능력 교환은 소스(101c)와 싱크(102) 사이에 수행된다(302).
싱크는 WFD 세션들에 대한 소스들의 특정 개수 이상을 지원할 수도 있고 지원하지 못할 수도 있다. 상기 방법은 싱크로 하여금 Max_Source_Supported 파라미터를 이용하여 상기 선택된 동작 모드를 지원하는 소스들의 개수를 싱크의 능력들 중에 나타낼 수 있게 한다.
능력 교환이 수행되는 동안, 싱크(102)는 WFD 세션을 개시하는 사전 연관된 그룹에서 소스들의 수 (멤버)를 결정한다. 소스(101c) 내에서 설정된 파라미터 No_Of_Sources_Associated는 싱크로 하여금 사전 연관된 그룹 내의 소스들의 개수 (멤버)를 알 수 있게 한다.
이 단계에서, 소스(101c)는, 소스(101c)에서 설정된 No_Of_Sources_Associated 파라미터 값이 싱크(102)의 Max_Source_Supported 파라미터보다 작거나 같은지 체크함으로써, 싱크(102)가 사전 연관된 그룹의 멤버들 수를 지원하는지 판정한다. 도면에 도시된 바와 같이, 싱크(102)는 사전 연관된 그룹의 멤버들의 수를 지원하고 그 지원은 능력 교환 수행 동안 소스(101a)로 반송된다. 사전 연관된 그룹에 대한 싱크 지원을 확인하면, 상기 방법은 소스(101c)로 하여금 새로운 별도의 SessionInitiate 프레임을 이용하여 사전 연관된 그룹의 멤버들에게 싱크 지원에 대한 알려줄 수 있게 한다. 상기 SessionInitiate 프레임은 데이터가 없는 더미 프레임이다.
일 실시 예에서, 새로운 M19 RTSP 명령은 사전 연관된 그룹에 대한 싱크 지원을 나타내는데 사용된다. 소스(101c)는 세션 개시 메시지를 소스(101b)로 전송하고(303), WFD 세션을 시작하기 위한 승인으로서 세션 응답을 보낸다(304). 또한, 소스(101c)는 세션 개시 메시지를 소스(101a)로 전송하고(305), WFD 세션 개시를 위한 승인으로서 세션 응답을 전송한다(306). 일단 사전 연관된 그룹의 모든 멤버가 세션 개시 메시지를 수신하고 그 메시지에 응답하면, 사전 연관된 그룹의 각 멤버는 DD, SD로부터 시작해서 능력 교환 및 실제 WFD 세션으로 이어지는 싱크(102)와의 WFD 세션 설정 절차의 일반적인 시퀀스를 실행한다(307, 308, 309).
멤버가 아닌 소스가 사전 연관된 그룹 가입에 관심 있는 경우, 기존의 사전 연관된 그룹은 새로운 사전 연관된 그룹을 형성하기 위해 해체되어야 한다.
도 4a는 연관된 송신 모드에서 하나 이상의 WFD 세션들을 설정함으로써 멀티 플레이어 게임을 위한 예시적인 순서도를 도시하고, 도 4b는 개시된 실시 예들에 따라, 싱크의 대응하는 디스플레이 화면을 도시한다. 도 4a에 도시된 바와 같이, 소스들(101a, 101b 및 101c)은 각각 메시지를 교환하여 도 2에 도시되어 있는 바와 같이 소스 연계 절차를 수행함으로써 사전 연관된 그룹을 생성하거나 형성한다(401). 싱크(102)는 사전 연관된 그룹의 멤버의 수를 지원하고, 도 3에 도시된 바와 같이 사전 연관된 그룹의 멤버마다(소스들(101a, 101b 및 101c) 각각) DD, SD를 수행하고(402), 싱크(102)와 능력 교환을 수행한다(403). 또한, 소스들(101a, 101b 및 101c)은 각각 싱크(102)와의 WFD 세션을 개별적으로 설정한다(405, 406, 407). 싱크(102)는 소스들(101a, 101b 및 101c) 각각에 대한 영상 WFD 세션들을 허용한다. 또한, 활성 상태가 할당된 선택된 싱크 중 하나는 영상 및 오디오 세션을 설정하도록 허용된다. 또한, 싱크는 모든 소스들(101a, 101b 및 101c) 각각의 영상과 함께 상기 선택된 싱크의 오디오를 렌더링한다.
일 실시 예에서, 싱크는 선택된 싱크로 하여금 활성 상태 소스의 오디오 리소스들을 이용하여 오디오 재생을 가능하게 하고 각 소스와의 전용 영상 WFD 세션을 설정한다.
도 4b는 디스플레이 화면을 동등하게 공유하는 싱크(102)의 디스플레이 화면을 도시한다. 도면은 소스(101c)가 선택되어 싱크(102)에 의해 활성 상태로 할당되며 소스(101c)만 오디오가 재생됨을 도시한다. 싱크(102)는 선택된 활성 소스에 대한 표시를 사용자에게 제공한다.
일 실시 예에서, 상기 표시는 선택된 활성 소스에 대응하는 공유 싱크 스크린 공간 상에 디스플레이 된 스피커 로고, 문자 'ACTIVE', 문자 'AUDIO' 등일 수 있다.
예를 들어, 소스들 간의 소스 연계는 싱크의 화면 리소스들이 소스들 간에 동등하게 공유되는 경우에 요구될 수 있다. 이것은 일반적으로 스마트 폰, 태블릿 및 PDA 등의 그/그녀 자신의 소스를 갖는 모든 플레이어가 연관된 그룹을 형성하는 멀티 플레이어 인터랙티브 게임 응용 프로그램 시나리오에 적용될 수 있다. 일단 연관 그룹이 형성되면, 이 소스들은 스마트 TV 화면 (싱크)으로 자신의 영상을 동시 스트리밍한다. 스마트 TV는 연관된 소스들 간에 화면 공간을 동등하게 분배함으로써 디스플레이 화면 상에 각각의 소스로부터의 영상을 표시한다. 스마트 TV는 게임 세션이 PDA 사용자에 대해 활성화 될 때마다 (활성 소스 상태로 할당된) PDA 등의 선택된 소스 중 하나의 오디오를 렌더링한다. PDA 사용자에 대한 게이밍 세션이 종료할 때마다, 스마트 TV는 태블릿으로 활성 소스 상태를 할당하고, 화면에 표시되고 있는 모든 연관된 소스들의 영상과 함께 태블릿으로부터 오디오를 렌더링한다.
어떤 소스가 게임을 실행하고 있는지에 대한 것과 각 소스가 게임 콘텐츠를 취득하기 위해 다른 소스와 상호 작용하는 방법에 관한 세부 사항은 멀티 플레이어 게임 또는 유사한 응용 프로그램 구현 세부 사항에 의존한다. 이 방법은 각 소스가 오디오 및 영상을 가지고 있다고 가정한다.
도 5a는 비 연관된 동작 모드에서 사후 그룹핑 모드에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 5b 및 도 5c는 개시된 바와 같이 실시 예들에 따라, 싱크의 대응하는 디스플레이 화면들을 도시한다.
도 2에 도시된 바와 같이, 소스가 Wi-Fi 네트워크 장치(100)에서의 다른 소스들 중 임의의 것과 소스 연계 절차를 수행하지 않은 경우, Wi-Fi 네트워크(100)에서 임의의 소스는 비 연관된 동작 모드(unassociated mode of operation)로 동작할 수 있다. 이러한 소스가 싱크(102)와 통신하는 경우, 싱크(102)는 비 연관 모드에서 동작한다.
비 연관 동작 모드를 위한 그룹을 형성하기 위해 가입할 수 있는 나머지 소스들은 싱크(102)에 의해 비활성 소스 상태(passive source status)로 할당된다. 비활성 상태 소스들은 그들을 위해 지원된 영상 세션만을 갖는 싱크(102)의 픽처 인 픽처(PIP: Picture in Picture) 화면 공유(screen share)만으로 구비된다. 예를 들어, PIP에 대한 영상은 아주 기본적인 형식일 수 있으며, 고화질(HD)와 같이 고 품질일 필요는 없다. 싱크에 의해 지원된 PIP 화면의 수는 제한될 수 있고, 상기 방법은 싱크로 하여금 파라미터 No_Of_PIP_Supported를 사용하여 그 능력에서 PIP 기능에 한계를 나타낼 수 있도록 한다.
일 실시 예에서, 화면 상에 디스플레이되는 멀티미디어 콘텐츠에 기반하여, 상기 방법은 화면의 주요 부분에 제공되는 선택된 활성 소스의 영상만을 디스플레이하는 동안 싱크로 하여금 화면의 PIP 부분을 할당하는 비활성 소스 상태 소스들 중 하나로부터 오디오 및 영상을 렌더링 가능하게 한다. 예를 들어, 사후 그룹핑 모드에서, 노트북 (소스)은 비활성 소스 상태로 할당되고 스크린 공간의 PIP 부분을 가질 수 있다. 이 방법은 스마트 TV (싱크)로 하여금 노트북에서 영화에 대한 오디오 및 영상을 미러링가능하게 한다. 스마트 카메라는 활성 소스 상태로 할당되고 이미지 (영상 만)를 표시하기 위해 화면의 주요 부분을 가질 수 있다. 따라서, 사용자는 PIP로 재생되고 있는 영화의 트랙을 계속하여 유지하면서 자신의 카메라로부터의 이미지 시청을 즐길 수 있다.
비 연관 모드는 두 가지 동작 모드, 사후 그룹핑 모드 및 사전 그룹핑 모드를 포함한다. 싱크 및 소스들은, WFD 세션이 Wi-Fi 네트워크(100)에서의 소스들 중 하나로 시작한 후에 싱크에 의해 그룹이 형성되는 경우 사후 그룹핑 모드로 동작한다.
사후 그룹핑 동작 모드는 특정한 미리 정의된 규칙들에 기반한다: 예를 들어, DD, SD를 수행하고, 싱크와의 기능 교환을 수행하는 제1 소스에는 기본적으로 활성 소스 상태를 할당한다. 새로운 소스들은 그들의 오디오 의도 값(audio intent value)에 관계없이 DD, SD 및 능력 교환을 시작하고, 비활성 소스들로서 취급되고 싱크에 의해 비활성 소스 상태로 할당된다. 활성 소스가 되는 것에 관심이 있는 경우 Wi-Fi 네트워크(100) 내의 임의의 소스는 싱크에 의도에 대해 명확하게 요청해야 한다.
도 5a에 도시된 바와 같이, 소스(101a)는 DD, SD를 수행하고(501), 싱크(102)와의 능력 교환을 수행한다(502). 싱크(102)는 소스(101a)와 싱크 사이의 능력 교환 중에 설정될 WFD 세션에 대한 동작 모드를 식별한다. 또한, 소스(101a)는 싱크(102)와의 WFD 세션을 개시한다(503). 싱크(102)는 싱크(101a)에 활성 소스 상태를 할당하여 소스(101a)로 하여금 오디오 및 영상 WFD 세션을 설정할 수 있게 하고, 소스(101a)로 하여금 영상 및 오디오 둘 다 싱크(102)로 전달가능하게 한다. 활성 상태가 부여된 소스(101a)는 도 5b에 도시된 바와 같이 싱크(102)의 디스플레이 화면의 주요 부분을 수신한다. 그 다음, 소스(101b)는 DD, SD 수행(504) 및 동일한 싱크(102)와 능력 교환을 수행한다(505). 또한, 싱크(102)는 소스(102)에 비활성 상태를 할당하고, 영상 WFD 세션만 설정할 수 있게 한다. 소스(102)의 영상은 도 5b에 도시된 바와 같이 싱크(102)의 디스플레이 화면 상에 PIP로서 표시된다. 소스(101b)가 비활성 상태로 할당되기 때문에 오디오 세션은 허용되지 않는다.
이후, 나중에 어떤 때라도, 소스(101b)가 활성 소스가 되는데 관심이 있다면, 소스(101b)는 활성 소스가 되기 위한 설정 세션 활성 요청을 전송함으로써 싱크(102)에 요청한다(507). 싱크(102) 그 요청을 수락 (존중) 또는 거절할 수 있다. 도 5a에 도시 된 바와 같이, 싱크는 요청을 수락하여 활성 상태를 소스(101b)에 할당하고 소스(101a)를 비활성 상태로 전환한다. 소스(101a 및 101b)의 상태가 전환되면, 영상만을 갖는 WFD 세션이 소스(101a)와 싱크(102) 사이에 설정된다(508). 소스(101b) 및 소스(10b)의 오디오를 렌더링하는 싱크(102) 사이에 오디오 및 영상을 갖는 WFD 세션이 설정된다(508). 그런 다음, 도 5c에 도시된 바와 같이, 싱크(102)는 공유 디스플레이 화면의 대부분을 새로운 활성 소스(101b)로 전환하고 새로운 비활성 소스(10a)에 대해서는 PIP로 전환한다.
도 6a는 비연관 동작 모드에서 사전 그룹핑 모드에 대한 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 6b 및 도 6c는 개시된 실시 예들에 따라, 싱크의 대응하는 디스플레이 화면을 도시한다. 사전 그룹핑 동작 모드에서, 그룹은 싱크에 의해 형성되는데, 이는 DD, SD 및 능력 교환이 Wi-Fi 네트워크(100) 내에서 상기 그룹에 가입하는 것에 관심이 있는 각 소스와 수행된 이후이나 WFD 세션이 싱크 및 소스들 중 임의의 소스 간에 설정되기 전에 이루어진다. 이 방법은 사전 그룹핑 동작 모드에 대한 몇 가지 규칙을 정의한다. 예를 들어, 싱크와는 관계없이 각 소스의 DD, SD 및 능력 교환이 발생한다. 활성 및 비활성 소스들이 싱크에 의해 선택되고, 그 상태에 대해 싱크에 의해 알려진다. WFD 세션은 싱크와 그룹 내의 각 소스 사이에 시작된다. 싱크가 더 많은 개수의 소스들을 지원할 수 있다면, 새로운 소스는 DD, SD 및 능력 교환을 행함으로써 그룹에 가입할 수 있지만, 이러한 소스들은 동작의 사전 그룹핑 모드 그룹에 합류 시 비활성 상태가 부여된다.
도 6a에 도시된 바와 같이, 소스들(101a, 101b 및 101c)은 각각 동일한 싱크(102)와 독립적으로 DD, SD를 수행한다(601).
소스들(101a, 101b 및 101c)은 각각 능력 교환을 수행하고(602) 자신들의 의도를 활성 소스가 되도록 심으면서(embedding) 오디오 의도 값을 싱크(102)에 제공한다. 싱크는 능력 교환 동안 요청을 수락하거나 거절함으로써, 형성된 그룹에 가입하기 위한 소스들(101a, 101b 및 101c) 각각에 의한 요청에 응답한다. 싱크(102)는 Max_Source_Supported 등의 파라미터들에 기반하여 그룹을 형성하기 위해 소스들을 수락하거나 거절할 수 있다.
오디오 의도 값들에 기반하여, 싱크(102)는 활성 소스로서 소스(101a)를 선택하고 비활성 소스로서 소스(101b)를 선택한다. 소스(101c)는 사전 그룹핑 모드를 위한 그룹 형성에 포함시키기 위한 싱크에 의해 무시된다. 사전 그룹핑 모드을 위해 형성된 싱크 그룹은 싱크(102), 소스(101a) 및 소스(101b)를 포함한다. 또한, 싱크(102)는 활성 소스 지시(indication)(소스(101a)가 활성 상태), 비활성 소스 지시(소스(101b)가 비활성 상태), 비 연관 모드 (현재 선택된 동작 모드) 및 상기 형성된 그룹에 대한 고유 식별자로 할당된 싱크 그룹 ID를 각각 제공하는 정보를 소스(101a 및 101b) 각각으로 송신한다(603). 또한, 싱크(102)는 싱크(102)가 싱크 그룹 내의 포함을 거절한 것에 대해 소스(101c)에 통지한다 (604). 그 후, 싱크(102)는 소스(101a)에 대한 오디오 및 영상 WFD 세션 및 소스(101b)에 대한 영상 WFD 세션을 설정할 수 있다(605).
도 6b는 활성 소스(101a)에 대해서는 화면 표시의 대부분을 갖고 소스(101b)에 대한 PIP를 갖는 싱크(102)의 디스플레이 화면을 도시한다.
또한, 다른 소스(101d)는 DD, SD를 수행하고(606), 싱크(102)와의 능력 교환을 행하여 오디오 의도 값을 제공한다(607). 기본적으로, 싱크(102)는 소스(101d)를 비활성 소스로서 선택한다. 싱크(102)는 싱크(102)에 의한 No_Of_PIP_Supported와 같은 하나 이상의 파라미터들 및 유사 파라미터들에 기초하여 소스(101d)로부터의 요청을 수락 또는 거절할 수 있다. 싱크(102)가 요청을 수락할 경우, 소스(101d)는 싱크(102)에 의해 비활성 상태로 할당된다. 그 후, 소스(101d)는 싱크(102)와의 WFD 영상 전용 세션을 설정한다(608).
도 7a는 본원의 개시된 실시 예들에 따라, 부분 동작 디스플레이 모드에 대해 하나 이상의 WFD 세션들의 설정을 설명하는 순서도를 도시하고, 도 7b는 싱크의 대응하는 디스플레이 화면을 도시한다.
부분 디스플레이 모드에서, 싱크는 WFD 세션을 이용하여 싱크의 디스플레이 화면의 일부에만 미러링(morroring)을 사용할 수 있다. 부분 디스플레이 모드는, 싱크가 활성 상태로 된 소스에 대해 어떠한 제어도 하지 않는다는 점을 제외하면, 도 5a 및 도 6a에 도시된 영상 시나리오(picture scenario) 중 서브케이스(sub case) 또는 특별한 케이스의 영상이다. 상기 방법은 부분 디스플레이 모드에 적용하는 규칙을 다음과 같이 정의한다: 싱크는 WFD 용도로 그 디스플레이 화면의 일부만을 사용하도록 선택할 수 있다. 싱크는 소스와 싱크 사이의 능력 교환 동안 WFD 세션 설정에 관심이 있는 WFD 소스에 대해 이 규칙을 나타낸다. 활성 상태가 할당된 소스는 싱크의 디폴트 동작이다. 일반적으로 어떤 방송(broadcast) 또는 로컬 콘텐츠는 활성 소스 상태로 할당된다.
도 7a에 도시된 바와 같이, 활성 소스(101a)는 이미 싱크(102)를 사용하여 정기적으로 방송 콘텐츠를 싱크(102)로 전송한다(701). 예를 들어, 정규 방송 콘텐츠는 케이블 운영자로부터의 텔레비전 채널 콘텐츠일 수 있다. 싱크(102)는 활성 (주요) 소스(101a)를 통해 제어할 수 없다. 부분 표시 모드에서 WFD 세션에 대한 싱크(102a)를 이용하는데 관심 있는 소스(101b)는 DD, SD를 수행하고(702) 및 싱크(102)와의 능력 교환을 수행한다(703).
상기 방법은, 싱크로 하여금, 능력 교환 동안 새로운 Part_Display_Support 파라미터를 이용하여 부분 표시 모드에 대한 소스(101b)의 지원을 나타내는 것을 가능하게 한다. Part_Display_Support 파라미터의 값은 싱크(102)가 부분 디스플레이 모드를 지원하는 경우에는 1 (참)으로 설정된다. 만일 싱크가 부분 디스플레이 모드를 지원하지 않을 경우, Part_Display_Support 파라미터의 값은 0 (거짓)으로 설정된다.
능력 교환을 수행할 때, 부분 디스플레이 모드에 대한 WFD 세션은 싱크(102)가 부분 디스플레이 모드를 지원할 때 설정된다(704). 소스(101b)에 할당된 상태는 항상 비활성이며, 따라서 영상 세션은 항상 PIP 화면 공간을 갖는다. 설정된 WFD 세션은 일반적으로 HD가 아니다.
도 7b는 활성 (메인 소스)로부터의 방송 콘텐츠가 싱크(102)의 대부분에 표시되고 비활성 소스(101b)로부터의 콘텐츠는 PIP 모드를 갖는 싱크(102)의 디스플레이 화면을 도시한다.
상기 실시 예들은 또한 보안 서비스(security service)에 적용될 수 있다. 예를 들어, 보안 관리자가 회사 사무실에서 여러 보안 카메라의 영상을 보안실에서 큰 화면을 통해 모니터링하는 보안 네트워크 환경을 가정하면, 모든 보안 카메라들 및 대형 스크린은 Wi-Fi 디스플레이 장치를 사용하여 구현될 수 있으며 여기서, 보안 카메라들은 소스로서 역할하고 TV 연기와 같은 대형 스크린은 싱크로서 역할한다. 보안 카메라 및 TV는 Wi-Fi 인프라 또는 Wi-Fi 다이렉트 또는 TDLS를 통해 연결된다. Wi-Fi 디스플레이 세션들은 보안 카메라들 및 대형 스크린 TV 사이에 실행한다. 이러한 상황을 감안하여 후술하는 다수의 가능한 동작 모드들(즉, 시나리오 1, 2)이 있다.
시나리오 1: 보안 카메라의 수가 적고 모든 영상이 TV에 디스플레이될 수 있다.
1) 보안 카메라는 TV를 발견하고 Wi-Fi 디스플레이 세션을 시작한다.
2) TV는 화면을 분할하고 그 영상 콘텐츠를 표시하기 위해 각 보안 카메라에 리소스들을 제공할 수 있다. 그러나 단지 하나의 소스로부터의 오디오는 TV를 통해 들을 수 있다.
3) 따라서 각 소스 장치는 싱크 디바이스 즉, TV와 공유된 오디오 의도 값을 가질 것이다.
4) 가장 높은 의도를 갖는 소스로부터의 오디오가 TV 상의 오디오 렌더링을 위해 선택된다.
5) 오디오 의도 값은 동적(dynamic)이며 소스 장치의 상태에 의존한다. 예를 들어, 소스 장치가 특정 긴급 이벤트에 통지하는 경우, 그 오디오 의도 값을 가장 높은 레벨로 증가시킬 것이며 그 값을 즉시 싱크 디바이스로 전송한다.
6) 싱크 디바이스는 이 의도 값을 이해하고 이 소스 디바이스로부터 오디오를 수용한다.
시나리오 2: 보안 카메라의 수가 많고 모든 영상들이 TV에 디스플레이될 수 없다.
1) TV가 대기업 사무실에서 모든 보안 카메라에 리소스들을 제공할 수 없으며 따라서 입구 등 사무실의 중요한 부분에 위치한 일부 카메라들에만 리소스들을 제공 할 것이다.
2) 이 중요한 보안 카메라들이 TV를 발견하고 Wi-Fi 디스플레이 세션을 시작한다.
3) 평소와 같이 단지 하나의 소스로부터의 오디오는 누구의 오디오 의도 값이 가장 높은 TV에서 재생한다.
4) 다른 영상 카메라들(비활성)이 영역을 모니터링하고 사건들을 기록한다 하더라도 콘텐츠(영상 및 오디오 양자 모두)를 TV로 스트리밍하지는 않을 것이다. TV를 통한 영상 디스플레이는 또한 이러한 비활성 영상 카메라들에 대한 최소한의 영상 의도 값에 기초하여 정해진다.
5) 영상 의도 값은 동적이며 소스 장치의 상태에 의존한다. 예를 들어, 소스 디바이스가 특정 긴급 이벤트를 통지할 경우 자신의 영상 의도를 가장 높은 값으로 증가시킬 것이다. 이로써 오디오 의도 또한 자동으로 최고 값으로 증가할 것이다. 이러한 의도 값들은 즉시 싱크 디바이스로 전송된다.
6) 싱크 디바이스는 이 의도 값이 변화함을 알고, 보안 요원의 주의를 끌기 위해 소스 디바이스의 영상을 디스플레이하고 또한 오디오를 재생한다.
7) 선택적으로, 의도 값 대신 긴급 이벤트 알림(emergency event notification)이 소스로부터 싱크 장치로 전송되는데 이 싱크 장치는 특정 소스로부터의 영상 및 오디오 둘다로 리소스들을 해석하고 제공할 것이다.
위의 시나리오 둘 다에서, 소스 장치에서의 의도 값은 일부 긴급 이벤트들의 발생 때문에 변화한다. 이벤트는 후술된 이벤트 1) 내지 4) 중 어느 하나일 수 있다:
1)
소스 장치 상에 특정 데시벨 이상으로 기록된 오디오
2)
모션 센서를 이용하여 소스 장치 상에서의 움직임 감지
3)
소스에서 녹화된 영상에서의 빠른 영상 프레임 변경
4)
운영자가 수동으로 카메라 등을 선택
개시된 실시 예들은 적어도 하나의 하드웨어 장치 상에서 실행하고 엘리먼트들을 제어하기 위한 네트워크 관리 기능을 수행하는 적어도 하나의 소프트웨어 프로그램을 통해 구현될 수 있다. 도 1, 2, 3, 4, 5, 6 및 7에 도시된 엘리먼트들은 하드웨어 장치, 또는 하드웨어 장치 및 소프트웨어 모듈의 조합 중 적어도 하나일 수 있는 블록들을 포함한다.
특정 실시 예들의 전술한 설명으로 본원 실시 예들의 일반적인 특징을 충분히 설명하였으며, 다른 사람들이 현재의 지식을 적용함으로써, 용이하게 수정 및/또는 일반적인 개념에서 벗어나지 않고 다양한 응용 프로그램에 대해 이러한 특정 실시 예들을 적용할 수 있고 따라서, 이러한 적용 및 변형은 개시된 실시 예의 등가물의 의미 및 범위 내에서 이해되도록 의도한다. 본원에서 사용되는 표현 또는 용어는 설명을 위한 것이며 제한적인 의미는 아님을 알 것이다. 따라서, 본원의 실시 예들은 바람직한 실시 예들이라는 관점에서 설명되었지만, 당업자라면 본원에 기재된 실시 예들을 개시된 사상 및 범위 내에서 변형하여 실시할 수 있음을 알 것이다.
Claims (17)
- Wi-Fi(Wirelss Fidelity) 네트워크에서 멀티미디어 콘텐츠를 스트리밍(streaming)하는 방법에 있어서, 상기 방법은,
장치 탐색(DD: Device Discovery) 및 서비스 탐색(SD: Service Discovery)을 수행한 후, 싱크(sink)와, 제1 소스 및 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 능력 교환(capability exchange) 동안 상기 싱크에 의해 소스 연계 정보(source association information)를 탐색하는(discovering) 과정;
상기 싱크와, 상기 Wi-Fi 네트워크에서 상기 멀티미디어 콘텐츠를 스트리밍하기 위한 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 적어도 하나의 Wi-Fi 디스플레이(WFD) 세션을 설정하는 과정;
상기 제1 소스 및 상기 적어도 하나의 제2 소스로부터 상기 멀티미디어 콘텐츠의 영상을 상기 싱크에 의해 디스플레이 하되, 상기 싱크의 화면은 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나 사이에 공유되는 과정; 및
상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 하나로부터 상기 오디오를 선택한 후 상기 싱크에 의해 상기 멀티미디어 콘텐츠의 오디오를 렌더링하는(rendering) 과정을 포함하는 방법.
- 제 1 항에 있어서, 상기 싱크에 의한 상기 탐색된 소스 연계 정보는 오디오 의도 값(audio intent value), 및 상기 제1 소스 및 상기 적어도 하나의 제2 소스의 동작 모드 중 적어도 하나를 더 포함하는 방법.
- 제 1 항에 있어서, 상기 적어도 하나의 WFD 세션에 대한 상기 동작 모드는 연관 모드(associated mode), 비 연관 모드(an unassociated mode) 및 상기 싱크, 상기 제1 소스 및 상기 적어도 하나의 제2 소스의 부분 디스플레이 모드(part display mode) 중 하나를 포함하는 방법.
- 제 3 항에 있어서, 상기 비 연관 모드는 동작의 사후 그룹핑 모드(post grouping mode) 및 사전 그룹핑 모드(pre-grouping mode) 중 하나를 포함하는 방법.
- 제 3 항에 있어서, 상기 방법은, 상기 탐색된 소스 연계 정보에서, 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나로부터 ModeSelect 프레임 및 실시간 스트리밍 프로토콜 (RTSP) 명령 중 하나를 사용하여, 상기 싱크에 의해 상기 동작 모드를 수신하는 과정을 더 포함하는 방법.
- 제 3 항에 있어서, 상기 방법은, 상기 능력 교환 동안 상기 선택된 동작 모드를 나타내는 동작 모드 파라미터를 전송함으로써, 상기 싱크에 의해 상기 제1 소스 및 상기 적어도 하나의 제2 소스로 상기 동작 모드를 선택하여 알리는(informing) 과정을 더 포함하는 방법.
- 제 1 항에 있어서, 상기 방법은, 상기 제1 소스 및 상기 적어도 하나의 제2 소스와 연관된 오디오 의도 값에 기반하여 렌더링될 상기 오디오를 선택하는 과정을 더 포함하는 방법.
- 제 3 항에 있어서, 상기 연관 모드는 사전 연관 그룹(pre-associated group)의 멤버로부터 상기 WFD 세션에 대한 개시 요청을 수신하는 과정을 포함하고, 상기 멤버는 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 하나인 방법.
- 제 8 항에 있어서, 상기 사전 연관 그룹 생성은,
상기 제1 소스 및 적어도 하나의 제2 소스가 상기 연관 모드를 지원하는지 여부를 결정하기 위해, 장치 탐색(DD), 서비스 탐색(SD) 및 상기 제1 소스 및 상기 적어도 하나의 제2 소스 사이에 능력 교환을 수행하되, 상기 지원은 상기 능력 교환 동안 Source_Association_Support 파라미터를 사용하여 상기 제1 소스 및 상기 적어도 하나의 제2 소스에 의해 디스플레이되는 과정;
상기 Source_Association_Support 파라미터가 참(true)이면, RTSP 명령을 사용하여 상기 사전 연관 그룹을 형성하도록, 상기 제1 소스 및 상기 제2 소스 중 하나에 의해 상기 제1 소스 및 상기 적어도 하나의 제2 소스 사이에 소스 연계 절차(source association procedure)를 시작하되, 상기 RTSP 명령은 연관 프레임 요청(associate frame request) 및 연관 프레임 응답(associate frame response)을 포함하는 과정; 및
상기 제1 소스 및 상기 적어도 하나의 제2 소스에 구성된 파라미터들에 기반하여 상기 사전 연관 그룹을 확장하되, 상기 파라미터들은 상기 사전 연관 그룹에서의 연관 소스들의 수(No_Of_Sources_Associated), 최대 허용 소스 연계(Max_Source_Associations), 및 다중 소스 그룹들을 형성하기 위한 능력(Multi_Association_Capable) 중 적어도 하나를 포함하는 과정을 더 포함하는 방법.
- 제 8 항에 있어서, 상기 방법은,
상기 싱크가 상기 사전 연관 그룹 내의 멤버들의 수를 지원하는지를 상기 멤버에 의해 결정하되, 상기 결정은 상기 No_Of_Sources_Associated를 상기 싱크에 의해 지원된 최대 멤버 수(Max_Source_Supported)와 비교하는 과정;
상기 싱크가 상기 사전 연관 그룹에서 상기 No_Of_Sources_Associated를 지원하는 경우, 상기 연관 모드에서 RTSP 세션 개시 프레임 명령을 사용하여 상기 WFD 세션을 개시하도록 상기 사전 연관 그룹의 상기 멤버들에 알리는 과정; 및
상기 싱크의 상기 화면을, 상기 사전 연관 그룹이 상기 멤버들에 의해 스트리밍된 상기 멀티미디어 콘텐츠를 미러링하도록 하는 상기 싱크의 구성 설정에 기반하여, 상기 싱크에 의해 상기 사전 연관된 그룹의 상기 멤버들에 공유하게 하는 과정에 의해 상기 개시 요청에 대해 응답하는 과정을 더 포함하는 방법.
- 제 4 항에 있어서, 상기 사후 그룹핑 모드는,
상기 제1 소스가 상기 WFD 세션을 개시한 후, 상기 싱크에 의해 상기 제1 소스와의 상기 WFD 세션을 설정하되, 상기 제1 소스는 상기 싱크에 의해 활성 소스 상태(active source status)가 할당되는 과정;
상기 적어도 하나의 제2 소스가 상기 싱크에 의해 지원된 PIP(Picture in Picture) 화면의 개수(No_Of_PIP_Supported)에 기반하는 상기 WFD 세션을 개시한 후에, 상기 싱크에 의해 상기 적어도 하나의 제2 소스와의 상기 WFD 세션을 설정하는 과정;
상기 적어도 하나의 제2 소스로 비활성 소스 상태를 할당하는 과정; 및
상기 제1 소스의 상기 영상 및 오디오 및 상기 적어도 하나의 제2 소스의 영상을 상기 싱크에 미러링하는 과정을 포함하는 방법.
- 제 11 항에 있어서, 상기 방법은,
상기 적어도 하나의 제2 소스가, 상기 활성 소스 상태를 취득할 의도로 상기 싱크에 요청하는 과정을 더 포함하고,
또한 상기 싱크는 상기 적어도 하나의 제2 소스로부터 상기 수신된 요청을 수락하거나 거절하는 것 중 하나를 수행하도록 구성되는 방법.
- 제 4 항에 있어서, 상기 사전 그룹핑 모드는,
상기 제1 소스 및 상기 적어도 하나의 제2 소스와 상기 싱크 간에 능력 교환을 수행한 후 그룹을 형성하는 과정;
상기 형성된 그룹의 멤버에 상기 활성 소스 상태를 할당하고 상기 형성된 그룹의 나머지 멤버들에 상기 비활성 소스 상태를 할당하는 과정; 및
상기 활성 소스 상태가 할당된 상기 멤버의 상기 영상 및 상기 오디오와, 상기 비활성 소스 상태가 할당된 상기 나머지 멤버들의 영상을 상기 싱크에 미러링하는 과정을 포함하는 방법.
- 제 13 항에 있어서, 상기 방법은, 상기 싱크가, 상기 형성된 그룹에 가입하기 위한 상기 적어도 하나의 제2 소스에 의한 요청에 대해, 상기 능력 교환 동안 상기 요청을 수락하거나 거절하는 것 중 하나로 응답하는 과정을 더 포함하는 방법.
- 제 3 항에 있어서, 상기 부분 디스플레이 모드는,
상기 싱크가, 상기 활성 소스 상태로 할당된 상기 제1 소스의 상기 영상을 디스플레이하고 상기 오디오를 렌더링하되, 상기 제1 소스는 상기 싱크의 주 소스인 과정;
상기 싱크가, 상기 능력 교환 동안 Part_Display_Support 파라미터를 이용하여 부분 디스플레이 지원 표시를 상기 적어도 하나의 제2 소스에 제공하되, 상기 파라미터의 값은 참 또는 거짓 중 하나인 과정;
상기 제공된 Part_Display_Support 파라미터가 참으로 설정된 경우, 상기 적어도 하나의 제2 소스 중 하나의 소스에 의해 상기 부분 디스플레이 모드를 사용할 의도로 상기 싱크를 디스플레이하는 과정;
상기 싱크가, 상기 비활성 상태를 상기 소스에 할당하는 과정; 및
상기 비활성 상태가 할당된 상기 소스의 상기 영상을 상기 화면의 일부에 표시하도록 상기 화면을 상기 싱크에 의해 공유하는 과정을 포함하는 방법.
- Wi-Fi 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 시스템에 있어서,
상기 시스템은 제1 소스, 적어도 하나의 제2 소스 및 싱크를 포함하고,
상기 시스템은,
장치 탐색 및 서비스 탐색을 수행한 후, 싱크와, 제1 소스 및 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 능력 교환을 수행하는 동안 상기 싱크에 의해 소스 연계 정보를 탐색하고;
상기 싱크와, 상기 Wi-Fi 네트워크에서 상기 멀티미디어 콘텐츠를 스트리밍하기 위한 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나와의 사이에 적어도 하나의 Wi-Fi 디스플레이(WFD) 세션을 설정하며;
상기 제1 소스 및 상기 적어도 하나의 제2 소스로부터 상기 멀티미디어 콘텐츠의 영상을 상기 싱크에 의해 디스플레이 하되, 상기 싱크의 화면은 상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 적어도 하나 사이에 공유되고; 및
상기 제1 소스 및 상기 적어도 하나의 제2 소스 중 하나로부터 상기 오디오를 선택한 후 상기 싱크에 의해 상기 멀티미디어 콘텐츠의 오디오를 렌더링하도록 구성되는 시스템.
- 제 16 항에 있어서, 제 2 항 내지 제 15 항 중 어느 한 항에 따라 동작하도록 적용된 시스템.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| IN5104CH2012 | 2012-12-07 | ||
| IN5104/CHE/2012 | 2012-12-07 | ||
| PCT/KR2013/011359 WO2014088379A1 (en) | 2012-12-07 | 2013-12-09 | Method and system for streaming multimedia contents in a wi-fi network |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20150095768A true KR20150095768A (ko) | 2015-08-21 |
| KR102238399B1 KR102238399B1 (ko) | 2021-04-09 |
Family
ID=50883727
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020157018201A KR102238399B1 (ko) | 2012-12-07 | 2013-12-09 | Ｗｉｆｉ 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 방법 및 시스템 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US20150319485A1 (ko) |
| EP (1) | EP2929694B1 (ko) |
| KR (1) | KR102238399B1 (ko) |
| CN (1) | CN104838663B (ko) |
| WO (1) | WO2014088379A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017155271A1 (ko) * | 2016-03-07 | 2017-09-14 | 엘지전자 주식회사 | 무선 통신 시스템에서 트랜스포트를 통해 스트리밍을 제공받는 방법 및 장치 |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10051673B2 (en) * | 2014-02-03 | 2018-08-14 | Lg Electronics Inc. | Method and apparatus for session initiation in wireless communication system |
| CN105812910B (zh) * | 2014-12-29 | 2017-12-22 | 中国移动通信集团公司 | 一种多对一无线同屏会话建立的方法和装置 |
| WO2016126148A1 (ko) * | 2015-02-08 | 2016-08-11 | 엘지전자 주식회사 | 와이파이 디스플레이 장치에서 세션을 설정하는 방법 및 장치 |
| US10547896B2 (en) | 2015-04-21 | 2020-01-28 | Intel Corporation | Techniques for communicating display streams |
| SE539246C2 (en) * | 2016-01-11 | 2017-05-30 | Liu Xing | Method, device and system for access control for wireless streaming of audio-visual data |
| US10405023B2 (en) * | 2016-08-16 | 2019-09-03 | At&T Intellectual Property I, L.P. | Method and apparatus for providing video content using collaborative end points |
| CN110446103B (zh) * | 2018-05-04 | 2021-08-31 | 腾讯科技（深圳）有限公司 | 一种音像测试方法、装置及存储介质 |
| KR20200084587A (ko) | 2019-01-03 | 2020-07-13 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
| CN111988653A (zh) * | 2020-08-25 | 2020-11-24 | 京东方科技集团股份有限公司 | 多视频投屏信息的交互方法、装置、设备及存储介质 |
| US11336544B2 (en) * | 2020-10-08 | 2022-05-17 | Sony Group Corporation | HDMI system speed test |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20060112192A (ko) * | 2003-12-19 | 2006-10-31 | 마이크로소프트 코포레이션 | 네트워크에서의 자원 정보 라우팅 |
| WO2012060611A2 (ko) * | 2010-11-03 | 2012-05-10 | 엘지전자 주식회사 | 장치 탐색 방법 및 그를 이용한 통신 장치 |
| US20120178368A1 (en) * | 2011-01-07 | 2012-07-12 | Microsoft Corporation | Wireless Communication Techniques |
| US20120291060A1 (en) * | 2011-05-10 | 2012-11-15 | Verizon Patent And Licensing, Inc. | Methods and Systems for Managing Media Content Sessions |
| US20120311644A1 (en) * | 2011-06-01 | 2012-12-06 | Sony Corporation | Communication apparatus, communication method, and communication system |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20050149991A1 (en) * | 2004-01-06 | 2005-07-07 | Hallberg Bryan S. | Method and apparatus for finding applications and relating icons loaded on a television |
| US20060236250A1 (en) * | 2005-04-14 | 2006-10-19 | Ullas Gargi | Data display methods, display systems, network systems, and articles of manufacture |
| US9497423B2 (en) * | 2006-02-06 | 2016-11-15 | Koninklijke Philips N.V. | USB-enabled audio-video switch |
| JP4879830B2 (ja) * | 2006-02-14 | 2012-02-22 | パナソニック株式会社 | 無線通信システム |
| KR100801002B1 (ko) * | 2006-06-05 | 2008-02-11 | 삼성전자주식회사 | 무선 네트워크 상에서 멀티미디어 데이터를 전송/재생하는방법, 및 그 방법을 이용한 무선 기기 |
| US20080061578A1 (en) * | 2006-09-07 | 2008-03-13 | Technology, Patents & Licensing, Inc. | Data presentation in multiple zones using a wireless home entertainment hub |
| KR20120015931A (ko) * | 2010-08-13 | 2012-02-22 | 삼성전자주식회사 | 휴대용 전자 장치 및 그것의 디스플레이 미러링 방법 |
| WO2013035999A1 (ko) * | 2011-08-26 | 2013-03-14 | 엘지전자 주식회사 | WFD(Wireless Fidelity Direct) P2P(Peer to Peer) 통신을 위한 이웃 발견 방법 및 이를 위한 장치 |
| JPWO2013061526A1 (ja) * | 2011-10-26 | 2015-04-02 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 放送受信装置、放送受信方法およびプログラム |
| JP5306489B2 (ja) * | 2012-01-06 | 2013-10-02 | 株式会社東芝 | 端末、プログラムおよび機器操作制御方法 |
| US20130204962A1 (en) * | 2012-02-02 | 2013-08-08 | Texas Instruments Incorporated | Network and peripheral interface circuits, systems and processes |
-
2013
- 2013-12-09 KR KR1020157018201A patent/KR102238399B1/ko active IP Right Grant
- 2013-12-09 US US14/650,420 patent/US20150319485A1/en not_active Abandoned
- 2013-12-09 CN CN201380063205.8A patent/CN104838663B/zh active Active
- 2013-12-09 EP EP13860831.0A patent/EP2929694B1/en active Active
- 2013-12-09 WO PCT/KR2013/011359 patent/WO2014088379A1/en active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20060112192A (ko) * | 2003-12-19 | 2006-10-31 | 마이크로소프트 코포레이션 | 네트워크에서의 자원 정보 라우팅 |
| WO2012060611A2 (ko) * | 2010-11-03 | 2012-05-10 | 엘지전자 주식회사 | 장치 탐색 방법 및 그를 이용한 통신 장치 |
| US20120178368A1 (en) * | 2011-01-07 | 2012-07-12 | Microsoft Corporation | Wireless Communication Techniques |
| US20120291060A1 (en) * | 2011-05-10 | 2012-11-15 | Verizon Patent And Licensing, Inc. | Methods and Systems for Managing Media Content Sessions |
| US20120311644A1 (en) * | 2011-06-01 | 2012-12-06 | Sony Corporation | Communication apparatus, communication method, and communication system |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017155271A1 (ko) * | 2016-03-07 | 2017-09-14 | 엘지전자 주식회사 | 무선 통신 시스템에서 트랜스포트를 통해 스트리밍을 제공받는 방법 및 장치 |
| US11064003B2 (en) | 2016-03-07 | 2021-07-13 | Lg Electronics Inc. | Method and apparatus for receiving streaming via transport protocol in wireless communication system |
| US11611604B2 (en) | 2016-03-07 | 2023-03-21 | Lg Electronics Inc. | Method and apparatus for receiving streaming via transport protocol in wireless communication system |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2929694A1 (en) | 2015-10-14 |
| KR102238399B1 (ko) | 2021-04-09 |
| EP2929694B1 (en) | 2019-07-17 |
| CN104838663B (zh) | 2018-09-18 |
| US20150319485A1 (en) | 2015-11-05 |
| CN104838663A (zh) | 2015-08-12 |
| EP2929694A4 (en) | 2016-08-10 |
| WO2014088379A1 (en) | 2014-06-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102238399B1 (ko) | Ｗｉｆｉ 네트워크에서 멀티미디어 콘텐츠를 스트리밍하기 위한 방법 및 시스템 | |
| KR102200304B1 (ko) | 무선 통신 시스템에서 디바이스들 간에 공유되는 컨텐츠를 제어하는 방법 및 장치 | |
| KR102050984B1 (ko) | 와이-파이 디스플레이 네트워크에서 와이-파이 디스플레이 세션을 제공하는 방법 및 장치, 그리고 그에 따른 시스템 | |
| US8880098B2 (en) | Communication server and session control method | |
| US20150365453A1 (en) | Media projection method and device, control terminal and cloud server | |
| WO2016110169A1 (zh) | 一种显示处理方法及装置 | |
| EP3996355B1 (en) | Method for transferring media stream and user equipment | |
| JP7123594B2 (ja) | 通信装置、制御方法、およびプログラム | |
| CN109660815B (zh) | 一种实现酒店多屏互动动态管理系统及其方法 | |
| WO2014051403A1 (en) | Method and system for streaming multimedia content in a wireless fidelity display network environment | |
| US10405362B2 (en) | Communication device, communication device control method, and display system | |
| US20220286731A1 (en) | Multimedia apparatus and cast method | |
| EP3065373A1 (en) | Communication system, communication method, relay device, and computer program product | |
| JP4789604B2 (ja) | コンテンツ切替判定システム及び切替指示端末、並びに、コンテンツ切替判定方法 | |
| CN105791965B (zh) | 一种屏幕共享中设备连接处理方法、系统和相关设备 | |
| US20200042281A1 (en) | Communication device, control method, and storage medium | |
| WO2017092323A1 (zh) | 一种主控设备、播放设备，及其数据传输方法 | |
| CN115379279B (zh) | 多屏联动的交互方法及装置、系统、存储介质、电子设备 | |
| KR102603548B1 (ko) | 협력적 컨텐츠 렌더링을 위한 방법 및 장치 | |
| CN105653219A (zh) | 一种屏幕传输控制方法、装置、系统和相关设备 | |
| CN105722037B (zh) | 一种wlan设备与wfd设备交互的方法和装置 | |
| KR101476281B1 (ko) | N-스크린 서비스를 위한 멀티미디어 스트림의 이기종 디바이스 간 핸드오버 시스템 및 그 방법 | |
| KR20130027305A (ko) | 서비스 관리 장치 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E90F | Notification of reason for final refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |