KR101703759B1

KR101703759B1 - 검색된 멀티미디어 콘텐츠의 원격 사용자 인터페이스 래퍼를 갖는 홈 네트워크 제어기

Info

Publication number: KR101703759B1
Application number: KR1020157008501A
Authority: KR
Inventors: 그레이엄 크리프트
Original assignee: 소니 주식회사
Priority date: 2012-10-03
Filing date: 2013-10-01
Publication date: 2017-02-07
Also published as: CN104769521B; EP2891035A4; JP6090459B2; JP2016502692A; EP2891035A2; US8984053B2; US20140095585A1; KR20150052232A; WO2014055517A3; WO2014055517A2; CN104769521A; EP2891035B1

Abstract

홈 네트워크 제어 장치는, 콘텐츠를 재생하는 기능을 갖지만 원격 사용자 인터페이스를 제공할 것을 요구하는 클라이언트 장치를 활성화하기 위해 원격 사용자 인터페이스 내에 랩핑된 콘텐츠를 다시 서비스함으로써 멀티미디어 콘텐츠를 공유하는 장치들 간의 상호 운용성을 향상시키기 위해 검색 및 제어 서비스를 활용한다.

Description

검색된 멀티미디어 콘텐츠의 원격 사용자 인터페이스 래퍼를 갖는 홈 네트워크 제어기{HOME NETWORK CONTROLLER WITH REMOTE USER INTERFACE WRAPPER OF DISCOVERED MULTIMEDIA CONTENT}

본 출원은, 검색된 멀티미디어 콘텐츠의 원격 사용자 인터페이스 래퍼를 갖는 홈 네트워크 제어기에 일반적으로 관련되어 있다.

홈 네트워크 검색 및 제어는, 제로콘프(Zeroconf), 범용 플러그 앤 플레이(universal plug-n-play: UPnP) 및 에어플레이(Airplay) 등의 다양한 표준으로 캡슐화된다. UPnP는, 집 안에서 원격 사용자 인터페이스와 멀티미디어를 공유하는 장치들의 연결성을 관리하기 위한 매우 유연한 아키텍처를 제공하는 기술의 한 예이다. 디지털 리빙 네트워크 아키텍처(DLNA)는, 이를, 기본적인 UPnP 장치에 미디어 포맷과 특정 전송 프로토콜을 부가함으로써 표준화한다. 그러나, 본원에서 알 수 있는 바와 같이, 다음의 2가지 대립하는 시나리오를 결합하려고 할 때, 복잡성이 발생한다. 그 한가지는, 콘텐츠 서버가, 멀티미디어 재생 기능과 함께 클라이언트에 제공되는 원격 사용자 인터페이스의 일부가 될 콘텐츠 선택을 예상하는 경우이다. 이 경우, 클라이언트는, 콘텐츠를 사용할 수 있게 만들기 위해서는, 단지 원격 사용자 인터페이스 서비스를 검색하고 이에 연결하기만 하면 된다. 반면에, 그 자신의 사용자 인터페이스를 갖는 애플리케이션이, 홈 네트워크에서 이용 가능한 서비스로부터 이용 가능한 콘텐츠의 선택을 검색하여 이를 사용자에게 제공하는 클라이언트에 상주하는 상황이 발생할 수 있다. 콘텐츠 서버가 원격 사용자 인터페이스와 함께 번들된 콘텐츠의 일부를 전달하고, 그 일부가 클라이언트에 의해 독립적으로 검색될 것으로 예상될 때 복잡성이 발생한다. 결과적으로, 클라이언트 장치의 사용자는 잠재적으로는, 그들의 집 안에 있는 다른 콘텐츠 소스를 서치 및 재생하도록 애플리케이션을 전환하기 위해 그들의 장치 메뉴 시스템을 통해 탐색하게 된다. 또한, 각각의 멀티미디어 지원 애플리케이션은, 한 방법으로, 예를 들어, 원격 사용자 인터페이스를 통해 재생되는 콘텐츠가, 다른 방법으로는, 예를 들어, 독립적인 미디어 플레이어 애플리케이션을 통해 재생될 때는 작동하지 않을 경우 좌절로 이어지는 다양한 역량을 가질 수 있다. 한편, 본 발명의 배경기술로는 미국공개특허 제2010/0198860호가 있다.

본 원리는, 이상적으로는, 클라이언트 사용자 경험이 하나의 접근 방식을 통해 통합되어야 함을 인식하고 있다.

따라서, 제어기는, 프로세서와, 이 프로세서가 액세스할 수 있고 프로세서에 의해 실행 가능한 명령을 보유하는 컴퓨터 판독 가능 저장 매체를 포함하고, 상기 명령을 실행하는 프로세서는, 원격 사용자 인터페이스(UI) 없이 초기에 제공된 재생용 콘텐츠도 수신할 수 있게 네트워크 상의 클라이언트 장치를 투명하게 활성화하기 위해 제어기에 의해 클라이언트 장치에 제공된 단일 사용자 인터페이스(UI)를 통해 상이한 콘텐츠 소스들을 클라이언트 장치에 적응시키도록 구성된다.

제어기는, 상기 클라이언트 장치에 의해 구체화될 수 있거나 클라이언트 장치로부터 물리적으로 분리될 수 있다. 제어기 프로세서는, 멀티미디어 콘텐츠가 원격 UI에 내장되도록 상기 원격 UI 내에 랩핑되는 콘텐츠로 멀티미디어 콘텐츠를 변환할 수도 있다. 제어기는, 원격 UI의 일부로서 제공된 멀티미디어 콘텐츠만을 처리하는 클라이언트 서비스 애플리케이션을 통해 멀티미디어 콘텐츠의 재생이 달성되도록, 멀티미디어 콘텐츠를 검색하기 위한 검색 기능을 원격 UI 서빙 장치 기능과 결합한다. 예시적인 구현 예에서, 상기 원격 UI는, 오디오 비디오(AV) 재생되는 검색 가능한 웹 브라우저이다. 한 예에서, 서버는 원격 UI를 제공할 수 있고, 반면에, 다른 예에서, 서버는 원격 UI를 제공하지 않고 AV 콘텐츠만을 제공하며, 제어기는 원격 UI를 저장하고, 서버 상에서 AV 콘텐츠를 검색하며, 클라이언트 장치에 원격 UI를 제공하기 이전에 원격 UI 내에 콘텐츠를 나타내는 콘텐츠 리스트를 랩핑한다. 콘텐츠 리스트는, 제어기에 의해 서버 상에서 검색된 콘텐츠로부터 제어기에 의해 구해질 수 있다.

또 다른 측면에서, 제어기는, 프로세서와, 상기 프로세서가 액세스 가능한 컴퓨터 판독 가능 저장 매체를 포함하고, 컴퓨터 판독 가능 저장 매체에 액세스하는 프로세서는, 오디오 비디오(AV) 콘텐츠의 서버 및 AV 콘텐츠를 재생하도록 구성된 클라이언트 장치의 검색을 수행하도록 구성된다. 서버는, 클라이언트 장치에 원격 사용자 인터페이스(UI)를 소싱하지 않는다. 제어기 프로세서는, 서버 상에서 AV 콘텐츠를 검색한 다음, 제어기에서의 원격 UI 내에, 서버 상의 AV 콘텐츠의 목록을 제공한다. 제어기는, 내부에 콘텐츠 리스트가 랩핑되어 있는 원격 UI를 클라이언트 장치에 제공한다.

본 발명의 세부 사항은, 그 구조 및 동작 둘 다에 대해서, 동일한 참조 번호가 동일한 부분을 지칭하는 첨부 도면을 참조하여 가장 잘 이해될 수 있다:

도 1은, 예시적 클라이언트 장치 및 예시적 서버의 단순화한 블록도이고;
도 2는, 제1 아키텍처에서의 메시지 흐름을 나타내는 메시지 흐름도이며;
도 3은, 제2 아키텍처에서의 메시지 흐름을 나타내는 메시지 흐름도이다.

도 1을 초기에 참조하면, 예를 들어, DLNA를 사용하는 홈 네트워크 등의 로컬 네트워크에서, 디스크 플레이어, 개인용 비디오 레코더 등의 임의의 적절한 서빙 장치에 의해 구성될 수 있는, TV 등 하나 이상의 클라이언트 장치(14)와 하나 이상의 멀티미디어 서버(16)와 통신하는 본 원리에 따른 제어기(12)를 포함하는 시스템은, 일반적으로 부호(10)로 지정되어 도시된다.

제어기(12)는, 디스크 기반 또는 솔리드 스테이트 스토리지 등, 하나 이상의 컴퓨터 판독 가능한 저장 매체(20)를 액세스하는 하나 이상의 프로세서(18)를 포함하여, 프로세서(18)가 본원에 기재된 로직을 실행하게 한다. 제어기(12)는 또한, 장치들 간의 네트워크에서의 통신을 지원하기 위해 유선 또는 무선 모뎀, 이더넷 포트, 범용 직렬 버스(USB) 포트, 블루투스 송수신기 등, 하나 이상의 네트워크 인터페이스(22)를 포함한다.

서버(16)는, 디스크 기반 또는 솔리드 스테이트 스토리지 등, 하나 이상의 컴퓨터 판독 가능한 저장 매체(26)를 액세스하는 하나 이상의 프로세서(24)를 포함하여, 프로세서(24)가 본원에 기재된 로직을 실행하게 한다. 서버(16)는 또한, 장치들 간의 네트워크에서의 통신을 지원하기 위해 유선 또는 무선 모뎀, 이더넷 포트, 범용 직렬 버스(USB) 포트, 블루투스 송수신기 등, 하나 이상의 네트워크 인터페이스(28)를 포함한다.

클라이언트 장치(14)는, 디스크 기반 또는 솔리드 스테이트 스토리지 등, 하나 이상의 컴퓨터 판독 가능한 저장 매체(32)를 액세스하는 하나 이상의 프로세서(30)를 포함하여, 프로세서(30)가 본원에 기재된 로직을 실행하게 한다. 클라이언트 장치(14)는 또한, 장치들 간의 네트워크에서의 통신을 지원하기 위해 유선 또는 무선 모뎀, 이더넷 포트, 범용 직렬 버스(USB) 포트, 블루투스 송수신기 등, 하나 이상의 네트워크 인터페이스(34)를 포함한다. 전형적으로, 클라이언트 장치(14)는, 디스플레이(36)를 통해 비디오를 출력하고 스피커(38)를 통해 오디오를 출력한다. 클라이언트 장치는, 일반적으로, 서버(16) 등의 HDMI 소스로부터 수신된 고화질 멀티미디어 인터페이스(HDMI) 콘텐츠를 재생하기 위한 "싱크(sink)"를 구성하는 TV, 게임 콘솔, 랩톱 또는 슬레이트 컴퓨터, 홈 씨어터 시스템 또는 다른 클라이언트 장치일 수 있다. 본 명세서의 도면이 별도의 클라이언트 장치(14), 제어기(12) 및 서버(16)를 도시하는 반면, 일부 실시 형태에서의 제어기(12)는 클라이언트 장치(14) 또는 서버(16)에 내장될 수 있다는 점에 유의해야 한다.

본 원리에 따라, 제어기(12)는, 원격 사용자 인터페이스 없이 초기에 제공된 재생용 콘텐츠도 수신할 수 있게 원격 사용자 인터페이스 기능을 가진 클라이언트를 투명하게 활성화할 특정 목적을 가지고 상이한 콘텐츠 소스들을 네트워크 상의 서비스들 및 장치들(14)에 적응시키고, 이들을, 제어기에 의해 제공된 단일 사용자 인터페이스를 통해 관리한다. 제어기는, 태블릿 컴퓨터 또는 스마트 폰 등의 원격 장치 내에 내장될 수 있고, 또는 상술한 바와 같이, 클라이언트 장치(14)의 일부일 수 있다.

본 원리에 따라, 오디오-비디오 콘텐츠 등의 멀티미디어는, 제어기(12)에 의해, 원격 사용자 인터페이스(UI) 내에 랩핑되는 콘텐츠로 변환된다. 즉, 멀티미디어 콘텐츠는 원격 UI 내에 포함된다. 그렇게 함으로써, 멀티미디어 콘텐츠를 검색하기 위한, UPnP 제어 포인트 등의, 제어 포인트에 의해 제공된 기능은, 원격 UI 서빙 장치에 의해 제공된 기능과 일의적으로 결합되어, 원격 UI의 일부로 제공된 멀티미디어 콘텐츠만을 처리하는 고객 서비스 애플리케이션을 통해 재생이 달성될 수 있다.

한 예는, 오디오 비디오(AV) 재생되는 검색 가능한 웹 브라우저이다. 이런 경우에, AV는, 서비스되는 원격 UI 서비스(예를 들어, 브라우저 애플리케이션)의 요소를 통해 브라우저에서 사용할 수 있게 된다.

도 2는, 서버(16)가 원격 UI는 갖지 않고, 단계(1)에서 제어기(12)에 의해 검색되는, 검색 가능한 AV만을 갖는, 예를 들어 UPnP를 사용하여 디바이스 검색이 실행되는 경우를 도시한다. 따라서, 제어기(12)는, 콘텐츠 리스트가 랩핑된 다음, 클라이언트에 전달되는 원격 UI의 소스로서 작용한다(단계 2). 콘텐츠 리스트는, 단계(3)에서, 클라이언트 장치에서의 원격 UI 내에 제공된다. AV는, 단계(4)에서, 서버(16)로부터 클라이언트(14)에 의해 불러들여진다. 제어기 애플리케이션은 선택적으로, 사용자 입력을 위한 장치 원격 제어로서 작용할 수도 있으며, 이 경우 제어는 네트워크를 통해(예를 들어, UPnP processInput 동작을 사용), 또는 적외선, 블루투스 및 다른 무선 기술을 통해 이루어진다.

일부 예에서, 이의 실시 형태는 홈 네트워크에 연결된 TV 사용의 경우이다. 이는, 홈 네트워크를 통해 전달될 미래의 TV 콘텐츠와 서비스에 대한 트렌드가, 클라이언트들에서 HTML5 사용자 에이전트(예를 들어, 브라우저)를 지원하는 유비쿼터스 및 환경 설정(ubiquity and preference)을 활용하는 것이라는 것을 인식하여, 장치 및 서비스의 DLNA 생태계의 상호 운용성을 포함하지만, 이에 한정되지는 않는다. HTML5 사용자 에이전트는, 실행되는 애플리케이션에 의해 할성화되는 HTML 비디오 요소를 통해 비디오 재생을 제공한다.

상기 제어기(12)는, 클라이언트(14) 상의 HTML5 사용자 에이전트가 DLNA 콘텐츠의 재생을 포함하도록 표준화될 수 있는 경우, 및 모든 콘텐츠가 원격 사용자 인터페이스를 통해 제공될 수 있는 경우에, 클라이언트가 하나의 애플리케이션을 지원할 필요가 있으므로, 홈의 모든 콘텐츠에 액세스하도록 단일의 끊김 없는(seamless) 사용자 경험을 제공한다는 사실을 활용함으로써 복잡도 문제를 해결한다. 또한, HTML, CSS 및 JavaScript는 매니폴드 웹 개발 커뮤니티의 친숙한 도구이기 때문에, 콘텐츠를 랩핑하는 원격 사용자 인터페이스가 HTML5에 기반할 때 사용자 경험이 진화하고 신속하게 개선되게 하는 많은 상이한 스킨 및 프리젠테이션 기술이 가능하다.

특정한, 검색된 멀티미디어 콘텐츠의 원격 사용자 인터페이스 래퍼를 갖는 홈 네트워크 제어기(HOME NETWORK CONTROLLER WITH REMOTE USER INTERFACE WRAPPER OF DISCOVERED MULTIMEDIA CONTENT)가 본원에 도시되고 상세하게 설명되지만, 본 발명에 포함되는 주제는 청구 범위에 의해서만 제한된다는 것을 이해해야 한다.

Claims

제어기로서,
프로세서; 및
적어도 하나의 프로세서에 의해 실행 가능한 명령들을 갖는 적어도 하나의 컴퓨터 사용 가능 메모리를 포함하며,
상기 명령들은, 상기 명령들을 실행하는 상기 프로세서가,
원격 사용자 인터페이스(UI) 없이 초기에 제공된 재생용 콘텐츠를 네트워크 상의 클라이언트 장치가 수신할 수 있도록 활성화하기 위해 상기 제어기에 의해 상기 클라이언트 장치에 제공되는 단일의 UI를 통해 상이한 콘텐츠 소스들을 상기 클라이언트 장치에 적응시키고 - 적어도 제1 콘텐츠 소스는 원격 UI를 제공하지 않고 오디오 비디오 (AV) 콘텐츠를 제공함 -,
상기 AV 콘텐츠에 상기 원격 UI를 제공하고,
상기 제1 콘텐츠 소스 상에서 상기 AV 콘텐츠를 검색하고,
상기 클라이언트 장치에 상기 원격 UI와 그 안에 랩핑되고 상기 콘텐츠를 나타내는 콘텐츠 리스트를 제공하기 이전에, 적어도 상기 원격 UI 내에 상기 콘텐츠 리스트를 랩핑하도록 구성하는, 제어기.
제1항에 있어서, 상기 제어기는 상기 클라이언트 장치에 의해 구현되는, 제어기.
제1항에 있어서, 상기 제어기는 상기 클라이언트 장치로부터 물리적으로 분리되어 있는, 제어기.
제1항에 있어서, 상기 명령들은 상기 프로세서에 의해 실행될 때 상기 프로세서가,
멀티미디어 콘텐츠가 상기 원격 UI 내에 포함되도록, 상기 멀티미디어 콘텐츠를 상기 원격 UI 내에 랩핑되는 콘텐츠로 변환하도록 구성하는, 제어기.
제1항에 있어서,
상기 명령들은 상기 프로세서에 의해 실행될 때 상기 제어기가, 멀티미디어 콘텐츠의 재생이 원격 UI의 일부로서 제공된 멀티미디어 콘텐츠만을 처리하는 클라이언트 서비스 애플리케이션들을 통해 달성되게끔, 상기 멀티미디어 콘텐츠를 검색하기 위한 검색 기능을 원격 UI 서빙 장치 기능과 결합하도록 구성하는, 제어기.
제1항에 있어서, 상기 원격 UI는 오디오 비디오(AV) 재생되는 검색 가능한 웹 브라우저인, 제어기.
제1항에 있어서, 상기 명령들은 상기 프로세서에 의해 실행될 때 상기 프로세서가, 상기 콘텐츠 소스로부터 상기 원격 UI를 수신하도록 구성하는, 제어기.
제1항에 있어서,
상기 적어도 하나의 프로세서를 더 포함하는, 제어기.
삭제
삭제
삭제
삭제
삭제