KR20140004194A - 뷰 스위칭을 위한 방법 및 디바이스 - Google Patents

뷰 스위칭을 위한 방법 및 디바이스 Download PDF

Info

Publication number
KR20140004194A
KR20140004194A KR1020137022629A KR20137022629A KR20140004194A KR 20140004194 A KR20140004194 A KR 20140004194A KR 1020137022629 A KR1020137022629 A KR 1020137022629A KR 20137022629 A KR20137022629 A KR 20137022629A KR 20140004194 A KR20140004194 A KR 20140004194A
Authority
KR
South Korea
Prior art keywords
format
multimedia content
data
video
transcoder
Prior art date
Application number
KR1020137022629A
Other languages
English (en)
Inventor
지강 장
린시앙 쳉
시아오준 마
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20140004194A publication Critical patent/KR20140004194A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4113—PC
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

제1 디바이스와 제2 디바이스 사이에서의 뷰 스위칭을 위한 방법이 제공된다. 제1 디바이스 및 제2 디바이스는 연관성이 있는 제1 멀티미디어 콘텐츠 및 제2 멀티미디어 콘텐츠를 각각 표시하기 위해 이용되고, 제1 디바이스에 의해, 제1 멀티미디어 콘텐츠의 데이터를 수신하고 표시하는 단계; 뷰 스위칭 지시에 응답하여, 제1 멀티미디어 콘텐츠의 데이터를 제2 디바이스로 전송하고 제2 디바이스로부터 제2 멀티미디어 콘텐츠의 데이터를 수신하는 단계; 및 수신된 제2 멀티미디어 콘텐츠의 데이터를 표시하는 단계를 포함한다.

Description

뷰 스위칭을 위한 방법 및 디바이스{METHOD AND DEVICE FOR VIEW SWITCHING}
본 발명은 멀티미디어에 관한 것으로, 특히, 뷰 스위칭을 위한 방법 및 디바이스에 관한 것이다.
많이 알려진 기술은 제1 디바이스에서 제2 디바이스로의 콘텐츠 재생의 핸드오버에 대해 설명한다. 예를 들어, 특허 출원 US2008/0177822는 콘텐츠 재생 방법에 대해 설명한다. 그 방법은 다음과 같은 단계들을 포함한다. 제1 재생 디바이스는, 콘텐츠 재생이 진행 중인 동안 동기화된 재생 명령을 수신하면, 재생 콘텐츠와 관계가 있는 정보 및 콘텐츠에 대해 경과된 재생 시간에 미리 결정된 추가 시간을 더하여 얻은 동기화된 재생 시작 시간을 제2 재생 디바이스로 전송한다. 제2 재생 디바이스는 서버로부터 동기화된 재생 시작 시간에 시작하는 콘텐츠 데이터를 수신하기 시작한다. 메모리에 기억된 데이터가 지정된 크기(volume)에 도달한 후, 제2 재생 디바이스는 제1 재생 디바이스에게 재생 준비 완료 통지를 전송한다. 콘텐츠에 대해 경과된 재생 시간이 동기화된 재생 시작 시간에 도달하면, 제1 재생 디바이스는 제2 재생 디바이스에게 재생 시작 명령을 전송한다. 이러한 명령을 수신하면, 제2 재생 디바이스는 동기화된 재생 시작 시간에 시작하는 콘텐츠 데이터의 재생을 시작한다.
본 발명의 일 측면에 따르면, 제1 디바이스와 제2 디바이스 사이에서의 뷰 스위칭(view switching)을 위한 방법이 제공된다. 제1 디바이스와 제2 디바이스는 연관성이 있는 제1 멀티미디어 콘텐츠와 제2 멀티미디어 콘텐츠를 각각 표시하는데 사용되며, 제1 디바이스에 의해, 제1 멀티미디어 콘텐츠의 데이터를 수신 및 표시하는 단계; 뷰 스위칭 지시에 응답하여, 제1 멀티미디어 콘텐츠의 데이터를 제2 디바이스로 전송하고 제2 디바이스로부터 제2 멀티미디어 콘텐츠의 데이터를 수신하는 단계; 및 수신된 제2 멀티미디어 콘텐츠의 데이터를 표시하는 단계를 포함한다.
본 발명의 또 다른 측면에 따르면, 제1 디바이스와 제2 디바이스 사이에서의 뷰 변경(view change)을 위한 제1 디바이스가 제공되고, 여기서, 제1 디바이스와 제2 디바이스는 연관성이 있는 제1 멀티미디어 콘텐츠와 제2 멀티미디어 콘텐츠를 표시하는데 사용되며, 데이터를 전송 및 수신하도록 구성된 스트리밍 센터; 및 표시하기 위해 제1 멀티미디어 콘텐츠의 데이터를 디코딩하도록 구성된 트랜스코더를 포함하고, 여기서, 뷰 스위칭 지시에 응답하여, 트랜스코더는 제1 멀티미디어 콘텐츠의 데이터를 스트리밍 센터에 제공하여 제2 디바이스로 전송하고, 제2 디바이스로부터 스트리밍 센터를 통해 제2 멀티미디어 콘텐츠의 데이터를 수신한다.
본 발명의 측면에 따르면, 두 개의 디바이스 사이에서의 뷰 변경을 허용한다.
본 발명의 다음의 상세한 설명에서 본 발명에 대한 더 많은 측면들 및 장점들이 발견될 것임을 이해해야 한다.
추가 이해를 제공하기 위해 포함되는 첨부된 도면은 본 발명의 원리를 설명하는 역할을 하는 기술(description)과 함께 본 발명의 실시예들을 도시한다. 따라서, 본 발명은 실시예들로 제한되지 않는다. 도면에 있어서:
도 1은 본 발명의 일 실시예에 따른 시스템 아키텍처의 일례를 나타내는 블록도이고;
도 2는 본 실시예에 따른 TV 스크린 상의 제어 인터페이스의 일례를 나타내는 도면이고;
도 3은 본 실시예에 따른 뷰 스위칭을 위한 방법을 나타내는 흐름도이다.
이제, 도면과 함께 본 발명의 실시예가 상세히 기술될 것이다. 다음의 기술에서, 알려진 기능 및 구성에 대한 일부 상세한 기술은 명확성 및 간결성을 위해 생략될 수 있다.
멀티미디어는 텍스트, 오디오, 스틸 이미지, 애니메이션, 비디오, 및 상호 작용 콘텐츠 형태를 포함하는 서로 다른 콘텐츠 형태의 조합을 사용하는 미디어 또는 콘텐츠이다. 요즘, 점점 더 많은 가정이, TV(일부는 셋톱 박스에 접속할 필요가 있을 수 있음) 및 태블릿과 같은, 두 개 이상의 공동의 표시 디바이스(collaborative display devices)를 가질 것이다. 태블릿은 적어도 프로세서, 표시 스크린, 입력 디바이스(예컨대, 터치 스크린), 및 유선 및/또는 무선 네트워크 인터페이스를 포함한다. STB 및 태블릿은 홈 네트워크에 접속된다. 연관성이 있는 콘텐츠의 두 가지 부분(piece), 예컨대, TV 프로그램 및 그의 대응 정보가 각각 TV와 태블릿에 표시될 수 있다. 대응 정보는 텍스트 형태, 이미지 형태, 비디오 형태 또는 이들의 혼합으로 TV 프로그램에서 제품의 광고를 포함한다.
또한, STB 및 태블릿은 임의의 두 가지 뷰의 멀티-뷰 콘텐츠를 재생하는데 사용될 수 있다. 멀티-뷰 콘텐츠는 동일한 장면에 연관되는 둘 이상의 뷰를 포함한다. 이러한 뷰들은 일반적으로 동일한 장면을 향해 서로 다른 위치에 배치된 동일한 수의 카메라에 의해 캡처된다. 이러한 카메라들로 캡처된 뷰들은 보통 솔리드 뷰(solid views)라 불린다. 때때로, 솔리드 뷰로부터 가상 뷰(virtual views)가 도출될 수 있다. 예를 들어, TV는 축구 경기의 전체 뷰를 표시하고, 태블릿은 특정한 축구 선수의 줌-인 뷰를 표시한다.
본 발명은 양측 디바이스에서의 콘텐츠 재생 동안 두 개의 디바이스 사이에서의 뷰 변경을 허용하는 방법을 제공한다.
도 1은 본 발명의 일 실시예에 따른 시스템 아키텍처의 일례를 나타내는 블록도이다. 이러한 예의 시스템은 STB(101) 및 태블릿(102)을 포함한다. STB(101)는 트랜스코더(1012), 스트리밍 센터(1013) 및 제어 센터(1011)를 포함한다. 태블릿(102)은 스트리밍 센터(1021)와 트랜스코더(1022)를 포함한다.
STB(101)에서, 모듈은 다음과 같이 기능한다.
--- 트랜스코더(1012)는, 케이블 네트워크를 통해 TV 비디오 서버로부터 수신되는, 케이블 TV 비디오의 콘텐츠 데이터를 디코딩하고, 렌더링 또는 표시하기 위해 디코딩된 데이터를 TV에 제공하도록 구성된다. 또한, 트랜스코더(1012)는 하나의 비디오 포맷으로부터 다른 것으로 비디오 콘텐츠를 코드변환(transcode)할 수 있다. 이러한 예에서, 트랜스코더(1012)는 태블릿에 렌더링하기에 적합한 포맷으로 케이블 TV 비디오의 콘텐츠를 코드변환하고, 태블릿으로부터 수신된 비디오의 콘텐츠를 TV에 렌더링하기에 적합한 포맷으로 코드변환하는데 사용된다. 포맷은 코덱과 해상도를 포함한다.
--- 스트리밍 센터(1013)는 스트리밍 서버와 클라이언트 둘 다의 기능을 포함하고, 데이터를 스트리밍하고, 스트리밍된 데이터를 전송 및 수신하도록 구성된다. 태블릿(102)에서 스트리밍 센터(1013)의 상대(counterpart)는 스트리밍 센터(1021)이다.
--- 제어 센터(1011)는 STB(101)의 트랜스코더(1012)와 스트리밍 센터(1013) 및 태블릿(102)의 스트리밍 센터(1021)와 트랜스코더(1022)에게 제어 메시지를 제공하도록 구성된다. 그것은 사용자가 STB(101)와 태블릿(102) 사이에서 뷰를 변경하는 것을 허용하기 위해 TV 스크린 상에 제어 인터페이스를 렌더링한다. 도 2로 나타낸 바와 같이, 제어 인터페이스는 TV 스크린의 우측 하단에 있는 중첩 윈도우(overlapping window)일 수 있다. 중첩 윈도우는 또한 다른 위치에 또는 다른 형태로 배치될 수 있다는 것에 주목해야 한다. 중첩 윈도우는 사용자가 리모콘에서 뷰 변경 버튼을 누르는 것에 응답하여 등장한다. 변형에 따르면, TV에 등장하는 중첩 윈도우가 없다. 양측 디바이스에서의 뷰는 사용자가 리모콘에서 뷰 변경 버튼을 누른 후에 즉시 교환된다. 또한, 제어 센터(1011)는 STB(101)와 태블릿(102) 둘 다의 포맷 요구사항(코덱 및 스크린 해상도에 관한 정보를 포함)을 획득할 수 있다. 포맷 요구사항은 다음의 방식 중 하나로 획득된다: 제어 센터(1011)가 사전에 STB(101)와 태블릿(102) 둘 다의 포맷 요구사항을 저장하거나, 그들의 포맷 요구사항을 각각 저장하고 있는 STB와 태블릿에게 필요할 때 그러한 요구사항에 대해 문의한다. 뷰 변경의 명령시, 제어 센터(1011)는 메시지를 1) STB(101)의 트랜스코더(1012)로 전송하여, 스트리밍 센터(1013)로부터의 데이터를 디코딩하고 케이블 TV 비디오의 콘텐츠를 태블릿에 렌더링하기에 적합한 포맷으로 코드변환하고, 2) 스트리밍 센터(1013)로 전송하여, 트랜스코더(1012)에 의해 코드변환된 데이터를 그의 상대 스트리밍 센터(1021)로 전송하고 스트리밍 센터(1021)로부터 데이터를 수신하고, 3) 태블릿(102)의 트랜스코더(1022)로 전송하여, 스트리밍 센터(1021)로부터의 데이터를 디코딩하고, 4) 스트리밍 센터(1021)로 전송하여, 데이터를 그의 상대(1013)로 전송하고 그로부터 데이터를 수신한다.
태블릿(102)에서, 모듈은 다음과 같이 기능한다.
--- 트랜스코더(1022)는 케이블 TV 비디오에 연관성이 있는 비디오의 콘텐츠를 디코딩하도록 구성된다. 예를 들어, 케이블 TV 비디오에 연관성이 있는 비디오는 케이블 TV 비디오가 속하는 멀티-뷰 콘텐츠의 또 다른 뷰이거나, 케이블 TV 비디오에 연관성이 있는 광고 비디오이다. 케이블 TV 비디오에 연관성이 있는 비디오는 로컬 저장소로부터 또는 IP 네트워크를 통해 인터넷으로부터 검색될 수 있다.
--- 스트리밍 센터(1022)는 스트리밍 서버와 클라이언트 둘 다의 기능을 포함하고, 데이터를 스트리밍하고, 스트리밍된 데이터를 전송 및 수신하도록 구성된다.
위의 예에서, 본 발명은 제어 센터를 STB 측에 두는데, 그 이유는 STB가 태블릿에 비해 강력한 처리 능력을 갖기 때문이다. 그러나, 태블릿의 처리 능력이 충분한 경우, 제어 센터의 기능을 태블릿 측으로 이동하는 것이 가능하다. 또한, TV가 렌더링하기에 적합하게 하기 위한 비디오 콘텐츠의 코드변환은 STB(101)의 트랜스코더(1012)로부터 태블릿(102)의 트랜스코더(1022)로 이동될 수 있다. 또한, 본 실시예의 변형에 따르면, 제어 센터는 STB와 태블릿 이외의 전용 디바이스로 이동될 수 있다.
도 3은 본 발명의 실시예에 따른 뷰 스위칭을 위한 방법을 도시하는 흐름도이다. 이 방법은 다음과 같은 단계들을 포함한다.
단계 301에서, STB는 제1 서버로부터 제1 포맷으로 제1 뷰 또는 제1 비디오의 데이터를, 예컨대, 케이블 네트워크를 통해 TV 서버로부터 비디오 프로그램을, 수신한다. 그리고, 한편, 태블릿은 제2 서버로부터 제2 포맷으로 제2 뷰 또는 제2 비디오의 데이터를, 예컨대, IP 네트워크를 통해 인터넷으로부터 또 다른 비디오를, 수신한다. 제1 비디오와 제2 비디오는 콘텐츠의 측면에서 연관성이 있는데, 예컨대, 그들은 멀티-뷰 콘텐츠의 두 가지 뷰이다. 여기서, 제1 포맷과 제2 포맷은 각각 TV와 태블릿에서 렌더링하기에 적합하다.
단계 302에서, 사용자는 리모콘의 버튼을 눌러 뷰 스위칭 지시를 전송한다. 뷰 스위칭 지시에 응답하여, STB는 제2 포맷의 제1 비디오의 데이터를 태블릿으로 전송하고, 태블릿으로부터 제2 포맷의 제2 비디오의 데이터를 수신한다. 한편, 태블릿은 STB로부터 제2 포맷의 제1 비디오의 데이터를 수신하고, 제2 포맷의 제2 비디오의 데이터를 STB로 전송한다. 여기서, STB가 제1 비디오의 데이터를 전송하기 전에, 제1 비디오의 데이터를 제1 포맷에서 제2 포맷으로 변환(convert) 또는 코드변환(transcode)할 필요가 있다. 포맷 변환에 대한 상세한 단계들은, 제어 센터(1011)가 태블릿에 적합한 포맷, 즉, 제2 포맷을 결정하고, 제어 센터(1011)가 제2 포맷에 관한 정보를 포함하는 제어 메시지를 전송하여 변환될 포맷을 트랜스코더(1012)에게 알리고, 트랜스코더(1012)가 제1 포맷에서 제2 포맷으로의 변환을 수행하는 것을 포함한다. 제1 비디오의 데이터의 전송에 관하여, STB의 스트리밍 센터(1013)는 스트리밍 서버로서 기능하고, 태블릿의 스트리밍 센터(1021)는 스트리밍 클라이언트로서 기능한다. 처음에, 스트리밍 서버는 태블릿에서 클라이언트에게 메시지를 전송하여, 클라이언트에게 스트리밍을 시작할 것인지를 묻는다. STB에서 태블릿으로 향하는 스트리밍에 대해, 케이블 TV 채널로부터 실시간으로 제1 비디오의 데이터를 받기 때문에, 스트리밍 프로세스는 동기식(synchronous)이다, 즉, 스트리밍 프로세스는 렌더링 프로세스와 동시에 수행된다. STB에서 실시간 스트리밍을 수신할 때, 태블릿은 실시간으로 제1 비디오의 데이터를 표시할 것이다. STB에서 태블릿으로의 포맷의 변환과 데이터 전송은 시간이 걸리기 때문에, 제1 비디오가 STB에서도 렌더링되었던 경우에, 태블릿에서의 제1 비디오의 재생은 STB에서보다 더 늦다(later). 제2 비디오의 데이터의 전송에 관하여, 제2 비디오 또한 실시간 비디오이기 때문에, STB의 스트리밍 센터 및 태블릿의 스트리밍 센터는 유사한 방식으로 동작한다. 그러나, 변형에 따라, 제2 비디오는 로컬 저장소에 저장되어 있는 파일이다. 제어 센터(1011)는, TV가 렌더링하기에 적합한 제2 비디오의 비디오 버전이 존재하는지 여부, 즉, 제1 포맷의 제2 비디오가 로컬 저장소에서 사용가능한지를 결정한다. 만약 그렇다면, 태블릿의 스트리밍 센터는 제1 포맷의 제2 비디오를 STB로 스트리밍한다. 그렇지 않으면, 태블릿의 스트리밍 센터는 제2 포맷의 제2 비디오를 STB로 스트리밍하고, 제어 센터는 제2 비디오를 제2 포맷에서 제1 포맷으로 코드변환하도록 STB에게 지시한다. 태블릿으로부터 STB으로 향하는 스트리밍에 대해, 스트리밍 프로세스는 비동기식(asynchronous)이다, 즉, 네트워크 조건이 허가하는 경우, 파일이 STB에 저장되어 있기 때문에, 스트리밍 프로세스는 렌더링 프로세스보다 앞설(ahead) 수 있다.
단계 303에서, STB는 수신된 제2 비디오의 데이터를 TV에서 렌더링한다. 여기서, 수신된 제2 비디오의 포맷이 제2 포맷인 경우, TV에서 렌더링하기 전에, 제2 비디오의 데이터를 제2 포맷으로부터 제1 포맷으로 변환할 필요가 있다.
변형에 따르면, 태블릿은 포맷 변환의 기능을 갖는다. 뷰 스위칭 지시시, 제어 센터는 태블릿의 트랜스코더(1022)에게 제2 비디오를 제2 포맷으로부터 제1 포맷으로 변환하도록 지시한다. 위의 단계 302에서, STB의 트랜스코더가 제2 비디오를 제2 포맷으로부터 제1 포맷으로 변환할 필요가 없다.
다수의 구현이 기술되어 있다. 그럼에도 불구하고, 다양한 수정이 이루어질 수 있다는 것을 이해할 것이다. 예를 들어, 서로 다른 구현의 요소들이 결합되거나, 보완되거나, 수정되거나, 제거되어 다른 구현들을 생산할 수 있다. 추가로, 당업자는 개시된 것들을 다른 구조와 프로세스로 대체할 수 있고, 그 결과로 얻은 구현들은 적어도 실질적으로 동일한 기능(들)을 적어도 실질적으로 동일한 방식(들)으로 수행하여, 개시된 구현들과 적어도 실질적으로 동일한 결과(들)를 달성할 것임을 이해할 것이다. 그에 따라, 이들 및 다른 구현들은 본 발명의 범위에 속한다.

Claims (11)

  1. 제1 디바이스와 제2 디바이스 사이에서의 뷰 스위칭을 위한 방법으로서 - 상기 제1 디바이스 및 상기 제2 디바이스는 상호 연관되어 있는 제1 멀티미디어 콘텐츠 및 제2 멀티미디어 콘텐츠를 각각 표시하는 데 이용됨 - ,
    상기 제1 디바이스에 의해, 상기 제1 멀티미디어 콘텐츠의 데이터를 수신하고 표시하는 단계;
    뷰 스위칭 지시에 응답하여, 상기 제1 멀티미디어 콘텐츠의 데이터를 상기 제2 디바이스로 전송하고 상기 제2 디바이스로부터 상기 제2 멀티미디어 콘텐츠의 데이터를 수신하는 단계; 및
    수신된 상기 제2 멀티미디어 콘텐츠의 데이터를 표시하는 단계
    를 포함하는 뷰 스위칭 방법.
  2. 제1항에 있어서,
    상기 제1 멀티미디어 콘텐츠 및 상기 제2 멀티미디어 콘텐츠는 상기 제1 디바이스 및 상기 제2 디바이스가 표시하기에 적합한 제1 포맷 및 제2 포맷으로 각각 구성되는(organized) 뷰 스위칭 방법.
  3. 제2항에 있어서,
    상기 제1 멀티미디어 콘텐츠의 데이터를 전송하기 전에, 상기 제1 멀티미디어 콘텐츠를 상기 제1 포맷으로부터 상기 제2 포맷으로 변환하는 단계를 더 포함하는 뷰 스위칭 방법.
  4. 제2항에 있어서,
    상기 수신된 제2 멀티미디어 콘텐츠는 상기 제2 포맷으로 구성되고,
    상기 제2 멀티미디어 콘텐츠의 데이터를 수신한 후에 상기 제2 멀티미디어 콘텐츠를 상기 제2 포맷으로부터 상기 제1 포맷으로 변환하는 단계를 더 포함하는 뷰 스위칭 방법.
  5. 제2항에 있어서,
    상기 수신된 제2 멀티미디어 콘텐츠는 상기 제1 포맷으로 구성되며, 상기 제1 포맷은 상기 제2 디바이스에 의해 상기 제2 포맷으로부터 제1 포맷으로 변환된 것인 뷰 스위칭 방법.
  6. 제2항에 있어서,
    상기 제2 멀티미디어 콘텐츠의 서로 다른 포맷을 갖는 적어도 두 가지 버전이 로컬 저장소에 저장되고, 상기 뷰 스위칭 지시에 응답하여, 상기 제1 디바이스가 표시하기에 적합한 포맷을 갖는 하나의 버전이 검색되고, 만약 존재하는 경우에는 상기 제1 디바이스로 전송되는 뷰 스위칭 방법.
  7. 제6항에 있어서,
    상기 제1 디바이스가 표시하기에 적합한 포맷을 갖는 하나의 버전이 존재하지 않는 경우, 상기 제2 디바이스에 의해 사용된 현재 버전이 상기 제1 포맷으로 변환되어 상기 제1 디바이스로 전송되는 뷰 스위칭 방법.
  8. 제1 디바이스와 제2 디바이스 사이에서의 뷰 변경(viewing change)을 위한 제1 디바이스로서 - 상기 제1 디바이스 및 상기 제2 디바이스는 상호 연관되어 있는 제1 멀티미디어 콘텐츠 및 제2 멀티미디어 콘텐츠를 표시하는 데 이용됨 - ,
    데이터를 전송하고 수신하도록 구성된 스트리밍 센터; 및
    표시를 위해 상기 제1 멀티미디어 콘텐츠의 데이터를 디코딩하도록 구성된 트랜스코더
    를 포함하고,
    뷰 스위칭 지시에 응답하여, 상기 트랜스코더는 상기 제1 멀티미디어 콘텐츠의 데이터를 상기 스트리밍 센터에 제공하여 상기 제2 디바이스로 전송하고, 상기 제2 디바이스로부터 상기 스트리밍 센터를 통해 상기 제2 멀티미디어 콘텐츠의 데이터를 수신하는 제1 디바이스.
  9. 제8항에 있어서,
    상기 트랜스코더는 상기 콘텐츠를 하나의 포맷에서 다른 포맷으로 변환하도록 더 구성되는 제1 디바이스.
  10. 제9항에 있어서,
    상기 제1 멀티미디어 콘텐츠의 데이터를 상기 스트리밍 센터에 제공하기 전에, 상기 트랜스코더는 상기 제1 멀티미디어 콘텐츠를, 상기 제1 멀티미디어 콘텐츠가 상기 트랜스코더에 의해 수신되는 포맷인 제1 포맷으로부터 상기 제2 디바이스가 표시하기에 적합한 제2 포맷으로 변환하는 제1 디바이스.
  11. 제9항에 있어서,
    상기 수신된 제2 멀티미디어 콘텐츠의 데이터는 제2 포맷으로 구성되고, 상기 제2 멀티미디어 콘텐츠의 데이터를 수신한 후에, 상기 트랜스코더는 상기 제2 멀티미디어 콘텐츠를 상기 제2 포맷으로부터 상기 제1 디바이스가 표시하기에 적합한 제1 포맷으로 변환하는 제1 디바이스.
KR1020137022629A 2011-02-28 2011-02-28 뷰 스위칭을 위한 방법 및 디바이스 KR20140004194A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2011/000317 WO2012116465A1 (en) 2011-02-28 2011-02-28 Method and device for view switching

Publications (1)

Publication Number Publication Date
KR20140004194A true KR20140004194A (ko) 2014-01-10

Family

ID=46757337

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137022629A KR20140004194A (ko) 2011-02-28 2011-02-28 뷰 스위칭을 위한 방법 및 디바이스

Country Status (6)

Country Link
US (1) US20130326576A1 (ko)
EP (1) EP2681911A4 (ko)
JP (1) JP2014511621A (ko)
KR (1) KR20140004194A (ko)
CN (1) CN103404160A (ko)
WO (1) WO2012116465A1 (ko)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US9412330B2 (en) * 2011-03-15 2016-08-09 Lattice Semiconductor Corporation Conversion of multimedia data streams for use by connected devices
US9588652B2 (en) 2011-12-12 2017-03-07 International Business Machines Corporation Providing feedback for screen sharing
US9852432B2 (en) 2011-12-12 2017-12-26 International Business Machines Corporation Customizing a presentation based on preferences of an audience
US20130151624A1 (en) 2011-12-12 2013-06-13 International Business Machines Corporation Context-Sensitive Collaboration Channels
WO2013089430A1 (en) * 2011-12-12 2013-06-20 Samsung Electronics Co., Ltd. Method and apparatus for experiencing a multimedia service
US9141264B2 (en) 2011-12-14 2015-09-22 International Business Machines Corporation Variable refresh rates for portions of shared screens
US9124657B2 (en) 2011-12-14 2015-09-01 International Business Machines Corporation Dynamic screen sharing for optimal performance
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9628829B2 (en) 2012-06-26 2017-04-18 Google Technology Holdings LLC Identifying media on a mobile device
US8903768B2 (en) * 2012-11-04 2014-12-02 International Business Machines Corporation Method and system for synchronization and management of system activities with locally installed applications
US9171090B2 (en) 2012-11-08 2015-10-27 At&T Intellectual Property I, Lp Method and apparatus for sharing media content
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
EP3937002A1 (en) 2013-06-09 2022-01-12 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
WO2017033198A2 (en) * 2015-08-27 2017-03-02 Elastic Media Ltd Selectable media content system and method
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11895171B2 (en) 2021-10-01 2024-02-06 Comcast Cable Communications, Llc Method and apparatus for mobile device as temporary content origin

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06141198A (ja) * 1992-10-26 1994-05-20 Hitachi Ltd リモートコントロールシステム、それを構成するテレビジョン受信機及び記録再生装置
JP4230487B2 (ja) * 1997-10-07 2009-02-25 雅信 鯨田 Ｗｅｂページ連動型の複数連携型表示システム
US6097441A (en) * 1997-12-31 2000-08-01 Eremote, Inc. System for dual-display interaction with integrated television and internet content
JP3992570B2 (ja) * 2002-08-30 2007-10-17 株式会社日立製作所 映像情報システム
JP4332707B2 (ja) * 2003-05-12 2009-09-16 ソニー株式会社 操作入力受付装置、操作入力受付方法および遠隔操作システム
JP4344994B2 (ja) * 2003-07-14 2009-10-14 ソニー株式会社 表示操作端末装置、画像表示装置および表示操作システム並びに表示操作方法
KR100754196B1 (ko) * 2005-12-10 2007-09-03 삼성전자주식회사 스트리밍 재생 중에 컨텐트 재생 장치를 변경하는 방법 및이를 위한 장치
US7627890B2 (en) * 2006-02-21 2009-12-01 At&T Intellectual Property, I,L.P. Methods, systems, and computer program products for providing content synchronization or control among one or more devices
US8955030B2 (en) * 2007-03-23 2015-02-10 Wi-Lan, Inc. System and method for personal content access
US8291445B2 (en) * 2007-05-25 2012-10-16 Verizon Patent And Licensing Inc. Expanded media content access systems and methods
JP4344811B2 (ja) * 2007-09-18 2009-10-14 シャープ株式会社 Ａｖサーバ装置、ａｖサーバ内蔵ｔｖ受信機およびａｖサーバ内蔵パソコン
JP5194673B2 (ja) * 2007-09-26 2013-05-08 株式会社日立製作所 携帯端末、及び情報の送受信方法
US20090163139A1 (en) * 2007-12-19 2009-06-25 General Instrument Corporation Apparatus and Method of Mobile Media Presentation Docking Station for Portable Electronic Device
JP2010041160A (ja) * 2008-08-01 2010-02-18 Hitachi Ltd 記録再生装置

Also Published As

Publication number Publication date
US20130326576A1 (en) 2013-12-05
EP2681911A4 (en) 2014-09-17
EP2681911A1 (en) 2014-01-08
CN103404160A (zh) 2013-11-20
WO2012116465A1 (en) 2012-09-07
JP2014511621A (ja) 2014-05-15

Similar Documents

Publication Publication Date Title
KR20140004194A (ko) 뷰 스위칭을 위한 방법 및 디바이스
US11073969B2 (en) Multiple-mode system and method for providing user selectable video content
US11240552B2 (en) Multi-stream placeshifting
KR101965806B1 (ko) 콘텐츠 재생장치, 콘텐츠 재생방법, 콘텐츠 재생프로그램 및 콘텐츠 제공시스템
US20130135179A1 (en) Control method and device thereof
KR20130138263A (ko) 케이블 텔레비전 시스템을 이용하는 비디오 장치들 간의 디지털 비디오의 스트리밍
US12075111B2 (en) Methods and apparatus for responding to inoperative commands
CN116233490A (zh) 视频合成方法、系统、装置、电子设备及存储介质
US20150032900A1 (en) System for seamlessly switching between a cloud-rendered application and a full-screen video sourced from a content server
JP5466633B2 (ja) ストリーム切替方法およびデジタル放送送出システム
JP4421666B1 (ja) コンテンツ受信装置及びコンテンツ再生方法
JP2008252752A (ja) 映像情報再生装置及び方法、映像情報再生システム、並びに映像情報再生システムの制御方法
CN117641024A (zh) 一种显示设备及媒资数据显示方法
CN115604496A (zh) 一种显示设备、直播切台方法及存储介质
Bassbouss Concepts and models for creating distributed multimedia applications and content in a multiscreen environment
JP6412794B2 (ja) 電子機器、及び録画方法
KR101659623B1 (ko) 입체영상 재생 장치 및 데이터 처리 방법
CN115174991A (zh) 一种显示设备及视频播放方法
CN117651186A (zh) 显示设备、视频无缝切换方法、及存储介质
CN117812330A (zh) 一种显示设备及广播节目播放方法
JP2010109993A (ja) コンテンツ受信装置及びコンテンツ再生方法
CN111200580A (zh) 一种播放器及播放方法
JP2010219712A (ja) テレビ受像機および再生装置
JP2011142418A (ja) クライアントサーバシステム、サーバ装置、及びクライアント装置
EP2974322A1 (en) A multiple-mode system and method for providing user selectable video content

Legal Events

Date Code Title Description
WITB Written withdrawal of application