KR20110029444A - 장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 방법 및 장치 - Google Patents

Abstract

본 발명은 장면 간의 링크(link)를 이용한 멀티미디어 컨텐츠(contents) 재생 방법에 있어서, 미디어 렌더러(Media renderer)가 미디어 서버(Media server)로부터 각 세그먼트(segment) 간의 연관 관계에 따라 링크 정보가 설정된 멀티미디어 컨텐츠를 수신하는 과정과, 상기 미디어 렌더러에서 상기 멀티미디어 컨텐츠를 재생하는 과정과, 상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하는 과정과, 사용자에 의해 링크가 선택된 경우, 상기 링크가 연결된 세그먼트를 재생하는 과정을 포함한다.

UPnP(Universal Plug and Play), 장면(Scene), Interactive, 재생(Playback), 이동

Description

장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 방법 및 장치{METHOD AND APPARATUS FOR PLAYING MULTYMEDIA CONTENTS USING LINK BETWEEN SCENES}

본 발명은 UPnP(Universal Plug and Play)를 이용한 멀티미디어 컨텐츠 재생에 관한 것으로서, 특히 멀티미디어 컨텐츠 재생 시, 장면(scene) 간의 관계를 기반으로 사용자가 원하는 장면으로 이동하여 재생하기 위한 방법 및 장치에 관한 것이다.

일반적으로 홈 네트워크는 인터넷 프로토콜(IP, Internet Protocol) 기반의 사설 망(Private network)으로 이루어지며, 가정 내에서 사용되는 모든 형태의 개인 컴퓨터(PC, personal computer)와 지능형 제품, 무선 장치 등의 다양한 기기들을 미들웨어(middleware)라 불리우는 공통의 가상 컴퓨팅 환경을 통해 하나의 네트워크로 연결하여 통제하는 것이다.

미들웨어란 다양한 디지털 기기들을 피어-투-피어(Peer-to-Peer) 방식으로 연결하여 기기들 간의 통신이 가능하도록 하는 것으로, HAVI(Home AV Interoperability), UPnP(Universal Plug and Play), Jini(Java Intelligent Network Infra-structure), HWW(Home Wide Web)등이 현재까지 제안되어 있다.

이 중 UPnP 미들웨어를 통해 구축되는 컴퓨팅 환경에서 각 기기들은 동적 호스트 구성 규약(Dynamic Host Configuration Protocol; DHCP)에 따라 서버로부터 할당받거나 자동 IP 지정 기능(Auto IP)에 의해 선택되는 주소를 할당받고, 이를 통해 각 기기들 간의 통신 및 네트워크 상에서의 검색/조회를 수행한다.

UPnP 네트워크는 현재 가장 많이 활용되고 있는 홈 네트워크 기술로서, UPnP 디바이스와 UPnP 서비스(service)를 정의하고 이들 간의 프로토콜을 정의한다.

UPnP 네트워크는 IP 기반의 홈 네트워크에 연결되어 제어를 받는 홈 네트워크 기기인 피제어 장치(Controlled Device: CD)와, 이들 피제어 장치를 제어하기 위한 기기인 제어 포인트(Control Point: CP)로 구성된다. 상기 제어 포인트는 피제어 장치에 대한 제어를 수행하는 장치로서, 이벤트를 요청하고 이벤트를 수신하는 구성 요소이다. 상기 피제어 장치는 상기 제어 포인트의 요청에 따라 정해진 기능을 수행하는 장치로서, 피제어 장치의 상태(state)가 변경되면 이벤트를 요청한 제어 포인트에게 상기 이벤트를 보내는 구성 요소이다.

종래의 UPnP 네트워크의 기기간의 각 단계별 동작 과정은 애드버타이즈먼트(Advertisement) 과정, 디스커버리(Discovery) 과정, 디스크립션(Description) 과정, 제어(Control) 과정, 및 이벤팅(Eventing) 과정으로 이루어진다.

애드버타이즈먼트(Advertisement) 과정은 새로운 피제어 장치가 홈 네트워크에 연결되어 홈 네트워크 상의 다른 디바이스들에게 자신을 알리는 과정이며, 디스커버리(Discovery) 과정은 새로운 제어 포인트가 홈 네트워크에 연결되어 홈 네트워크 상에서 동작하는 피제어 장치들을 검색(search)하는 과정이다.

디스크립션(Description) 과정은 제어 포인트가 피제어 장치를 제어하기 위해, 상기 디스커버리 과정에서 얻어진 피제어 장치의 IP 주소를 통해 서비스 디스크립션(service description) XML(Extensible Markup Language) 파일 또는 디바이스 디스크립션(device description) XML 파일을 파싱(Parsing)하여 새로 추가된 디바이스의 기능을 상세히 파악하는 과정이다.

제어(Control) 과정은 제어 포인트가 피제어 장치를 통해 특정 서비스를 제공하고자 하는 경우, UPnP 디바이스 아키텍쳐에 따라 SOAP를 이용해 소정의 서비스를 요청하는 제어 메시지(action request)를 해당 피제어 장치로 전송하고, 이에 대한 응답 메시지(result, variable value)를 수신하는 과정이다. 이벤팅(Eventing) 과정은 제어 포인트로부터 전송되는 제어 명령에 의해 소정의 서비스를 제공한 피제어 장치의 정보 변경 상태를 확인하는 과정이다.

상기와 같은 UPnP 기술을 바탕으로 오디오(Audio)/비디오(Video) 등과 같은 멀티미디어 컨텐츠를 즐길 수 있는 UPnP AV 기술이 UPnP AV Spec.에 기술된다. 상기 UPnP Spec.에 따르면, UPnP AV 아키텍쳐는 CDS(Content Directory Service)를 통해 멀티미디어 파일을 제공하는 미디어 서버(Media Server), 상기 제공되는 멀티미디어 파일을 재생하는 미디어 렌더러(Media Renderer), 및 상기 미디어 서버와 상기 미디어 렌더러가 상호 동작할 수 있도록 이들을 제어하는 제어 포인트(control point)로 구성된다.

상기 CDS는 미디어 서버에 내장되어 있는 서비스로서, 홈 네트워크 내외에 존재하거나 상기 미디어 서버에 저장되어 있는 컨텐츠의 메타데이터를 상기 제어 포인트에게 제공하며, 상기 제어 포인트는 상기 CDS로부터 메타데이터를 확인하여 상기 미디어 재생기에게 재생을 요청한다.

한편, 기존에 멀티미디어 컨텐츠를 재생할 경우에는, 사용자가 원하는 장면을 찾기 위하여, 빠른 재생 혹은 빨리 감기 또는 되감기 등의 방법을 사용하여 사용자가 일일히 화면을 확인하여 원하는 장면을 찾아야 했다. 그러나 이러한 방법을 이용하여 원하는 장면을 찾기 위해서는 사용자가 원하는 장면이 화면에 표시될 때까지 화면을 확인해야 하는 불편함이 있으며, 자칫하면 원하는 장면을 지나치게 되거나, 정확하게 원하는 시점에서 재생을 시작하기 어려운 문제점이 있다. 장면 기반 검색을 사용할 경우 이러한 문제를 일부 해소할 수 있으나, 장면의 수가 많아지게 될 경우 여전히 원하는 장면을 찾기 힘든 문제점이 있다.

본 발명은 UPnP를 이용한 홈 네트워크 환경에서 AV(Audio/Video) 컨텐츠를 재생 시, 장면 세그먼트(segment) 간의 관계를 기반으로 사용자에게 현재 재생중인 장면과 관련된 장면을 표시하며, 사용자가 원하는 장면으로 이동하여 끊김없이 재생하도록 하며, 현재 재생중인 컨텐츠 이외의 다른 컨텐츠의 관련된 장면도 표시 및 이동하여 재생이 가능하도록 하기 위한 방법 및 장치를 제공하고자 한다.

이를 달성하기 위한 본 발명의 일 형태에 따르면, 장면 간의 링크(link)를 이용한 멀티미디어 컨텐츠(contents) 재생 방법에 있어서, 미디어 렌더러(Media renderer)가 미디어 서버(Media server)로부터 각 세그먼트(segment) 간의 연관 관계에 따라 링크 정보가 설정된 멀티미디어 컨텐츠를 수신하는 과정과, 상기 미디어 렌더러에서 상기 멀티미디어 컨텐츠를 재생하는 과정과, 상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하는 과정과, 사용자에 의해 링크가 선택된 경우, 상기 링크가 연결된 세그먼트를 재생하는 과정을 포함함을 특징으로 한다.

본 발명의 다른 형태에 따르면, 장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 장치에 있어서, 상기 멀티미디어 컨텐츠를 저장한 미디어 서버와의 통신을 위한 네트워크 연결 모듈과, 상기 네트워크 연결 모듈을 통해 상기 미디어 서버로부터 각 세그먼트 간의 연관 관계에 따라 링크 정보가 설정된 멀티미디어 컨텐츠를 수신하며, 상기 멀티미디어 컨텐츠를 재생하며, 상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하며, 사용자에 의해 링크가 선택된 경우 상기 링크가 연결된 세그먼트를 재생하는 재생 제어부를 포함함을 특징으로 한다.

본 발명은 AV 컨텐츠 재생 시 각 장면 간의 연관성을 바탕으로 현재 재생중인 장면과 관련된 장면의 링크를 제공할 수 있는 효과가 있다.

이에 따라 사용자는 웹 페이지에서 링크를 따라 이동하는 것처럼 멀티미디어 컨텐츠의 각 장면을 이동할 수 있는 수단을 제공받으며, 이를 이용하여 컨텐츠 내에서 현재 보고 있는 장면과 유사하거나 관련이 있는 장면으로 신속하게 이동하여 재생하는 것을 가능하게 한다.

또한, 사용자는 컨텐츠 시청 중 이야기 전개 상 무의미한 내용을 건너뛰거나, 복수의 이야기 전개 중 하나의 이야기를 선택하여 재생하도록 할 수 있으며, 컨텐츠 제공자는 이러한 동작을 단순히 컨텐츠 데이터의 메타데이터 수정만으로 사용자에게 제공할 수 있다.

또한, 본 발명에 따라 복잡한 영상 편집 툴을 사용하여 새로운 컨텐츠를 생성할 필요 없이 다양한 장면을 참조하는 링크만을 포함하는 컨텐츠를 생성할 수 있다.

또한, 사용자가 컨텐츠를 시청 중 현재 보고 있는 장면과 관련이 있는 장면을 검색하고자 할 때, 장면 간의 관계의 종류 별로 사용자에게 링크된 장면을 제공할 수 있다. 장면 간의 관계는 재생 순서에 따른 관계, 동일 배우가 나오는 장면, 인과 관계에 따른 관계, 동일 카테고리의 장면 등 다양한 종류가 존재할 수 있으며, 이러한 관계의 정보는 링크와 함께 제공될 수 있다.

또한, 본 발명은 동일한 컨텐츠 내에서도 이러한 링크를 제공할 수 있으나, 다른 컨텐츠에 존재하는 장면에도 링크를 제공하여, 복수의 컨텐츠 간에도 장면의 이동을 제공할 수 있다.

이하 첨부된 도면을 참조하여 본 발명을 구성하는 장치 및 동작 방법을 본 발명의 실시 예를 참조하여 상세히 설명한다. 하기 설명에서는 구체적인 구성 소자 등과 같은 특정 사항들이 나타나고 있는데 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐 이러한 특정 사항들이 본 발명의 범위 내에서 소정의 변형이나 혹은 변경이 이루어질 수 있음은 이 기술분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다.

본 발명은 UPnP를 이용한 홈 네트워크에 관련된 기술로서, 홈 네트워크 환경에서 AV(Audio/Video) 컨텐츠를 재생 시, 컨텐츠의 각 장면 간의 연관성을 기반으로 장면을 구성하는 세그먼트의 링크를 설정하여, 링크를 기반으로 재생 중인 장면과 관련된 장면을 사용자에게 제공하며, 사용자에 의해 링크가 선택되면 연결된 장면으로 이동하여 해당 세그먼트를 재생하는 컨텐츠 재생 방법 및 장치를 제안한다. 또한 하나의 컨텐츠 내에서 뿐만 아니라 다른 컨텐츠 내의 관련된 장면도 링크로 연결할 수 있으며 그러한 링크에 의해 다른 컨텐츠로 이동하여 재생하는 것도 가능하다.

먼저 도 1을 참조하여 본 발명이 적용되는 UPnP를 이용한 멀티미디어 컨텐츠 재생 시스템을 살펴보기로 한다. 도 1은 UPnP 프로토콜을 이용하여 AV 컨텐츠를 재생하는 시스템의 블록 구성도이다. UPnP를 이용한 멀티미디어 컨텐츠 재생 시스템은 AV 컨텐츠를 저장한 미디어 서버(Media server)(120)와, AV 컨텐츠를 재생하는 미디어 렌더러(Media renderer)(130)와, 사용자의 명령에 따라 미디어 서버 및 미디어 렌더러를 제어하는 제어 포인트(control point)(110)를 포함한다.

상기 미디어 서버(120)는 각종 이미지(image), 오디오(audio), 비디오(video) 컨텐츠 파일을 저장한다. 미디어 서버는 HDD(Hard Disk Driver), 플래시메모리(flash memory), DVD/CD와 같은 저장 수단을 보유한 퍼스널컴퓨터, 셋탑박스, DVD 플레이어, MP3P(MP3 Player), DSC(Digital Still Camera) 등으로 구현될 수 있다. 미디어 서버(120)는 제어 포인트(110)의 제어에 의해 컨텐츠 재생을 위해 저장된 컨텐츠를 미디어 렌더러(130)로 전달한다.

상기 미디어 렌더러(130)는 사용자가 AV 컨텐츠를 감상할 수 있는 장치이다. 미디어 렌더러는 휴대 단말, DTV(Digital TV), HiFi Audio, 모니터 등과 같은 표시부 및/또는 스피커를 장착한 장치로 구현될 수 있다.

제어 포인트(110)는 사용자의 명령을 수행하기 위해 미디어 서버(120), 미디어 렌더러(130)에게 컨텐츠 재생에 필요한 다양한 UPnP 액션을 호출한다. 제어 포인트(110)는 리모콘 등과 같은 사용자 입력 장치에서 구현될 수 있으며, 미디어 서 버(120) 또는 미디어 렌더러(130)에서 구현될 수 있다.

도 2는 본 발명의 일 실시 예에 따른 장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 시스템의 블록 구성도이다. 도 2를 참조하면 본 발명의 일 실시 예에 따른 장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 시스템은 네트워크 연결 모듈(221)과 저장매체(222)를 포함한 미디어 서버(220)와, 재생 제어부(232)와 네트워크 연결 모듈(231)과 사용자 인터페이스(233)를 포함한 미디어 렌더러(230)를 포함한다. 상기 미디어 렌더러(230)는 복수의 미디어 서버(220)로부터 컨텐츠 데이터를 제공받을 수 있다. 이 경우 미디어 렌더러(230)가 UPnP 제어 포인트의 역할을 수행할 수 있다.

상기 미디어 렌더러(230)의 재생 제어부(232)는 사용자가 선택한 컨텐츠의 장면을 재생하는 컨텐츠 재생 모듈(2321)과, 현재 재생중인 컨텐츠가 저장된 서버와 다른 서버에 저장된 컨텐츠에 링크가 연결된 경우, 다른 서버에 저장된 컨텐츠에 링크가 연결된 장면의 세그먼트 데이터를 미리 읽어와서 버퍼링을 수행하는 세션 이동 모듈(2322)과, 미디어 서버(220)로부터 제공받은 컨텐츠의 장면 정보를 해석하는 장면 정보 해석 모듈(2324)과, 장면 정보 해석 모듈(2324)로부터 받은 장면 정보에 따라 사용자 인터페이스를 구성하는 UI 생성 모듈(2323)과, 사용자가 생성한 장면 정보를 컨텐츠 데이터에 업데이트 하기 위한 장면 정보 생성 모듈(2325)을 포함한다.

상기 미디어 렌더러(230)의 사용자 인터페이스(233)는 UI 생성 모듈(2323)에서 생성된 사용자 인터페이스를 표시부(미도시)를 통해 사용자에게 제공한다. 이 경우 제어 포인트가 미디어 렌더러(230)와 다른 장치에 구현된 경우 UI는 제어 포인트(미도시)에 따로 표시될 수도 있다.

상기 미디어 서버(220) 및 미디어 렌더러(230)의 네트워크 연결 모듈(221, 231)은 A/V 컨텐츠의 스트림(stream), 장면 간의 링크 데이터, 컨텐츠 재생을 위한 제어 신호를 송수신 하기 위한 네트워크를 구성한다. 이러한 네트워크는 기존에 여러 통신 방식이 사용될 수 있으며 물리계층에서 응용계층까지의 네트워크 계층을 포함한다. 또한 UPnP와 같이 장치 발견 및 제어를 위한 미들웨어도 포함될 수 있다.

미디어 서버(220)의 저장 매체(222)에는 멀티미디어 컨텐츠 데이터(2221)가 저장되며, 본 발명의 일 실시 예에서는 본 발명의 특징에 따라 저장 매체(222)에 각 컨텐츠 데이터의 장면 링크 정보(2222)가 저장된다.

각 컨텐츠(2221)는 각 컨텐츠 별로 장면 정보가 존재하며 이는 미디어 서버(220)에 미리 저장된다. 또한 각 컨텐츠(2221)는 장면 링크 정보(2222)와 함께 미디어 서버(220)에 저장된다. 장면 정보는 각 장면의 특성을 표현한 메타데이터를 의미하며, 장면 링크 정보(2222)는 그 장면과 관련이 있는 장면의 정보 및 관계의 특성, 관계의 우선순위 등에 대한 정보를 포함한다.

미디어 렌더러(230)는 이러한 장면 정보를 활용하여, 적절한 사용자 인터페이스(UI)를 구성하여 사용자에게 제공한다. 사용자는 이러한 사용자 인터페이스를 이용하여 현재 재생 중인 장면과 관련 있는 장면의 대한 정보를 제공받으며, 재생하고자 하는 장면을 선택하여 이동할 수 있다.

이러한 장면 링크 정보(2222)는 기본적으로 컨텐츠 제공자에 의하여 컨텐츠와 같이 제공되거나, 미디어 서버(220)에서 컨텐츠 제공자가 제공하는 정보를 바탕으로 생성하거나 재구성될 수 있다. 또한 사용자의 입력에 의해 새로운 장면 링크 정보가 생성되거나 기존의 장면 링크 정보가 재구성될 수도 있다.

미디어 렌더러(230)는 각 미디어 서버(220)에서 제공하는 멀티미디어 컨텐츠의 리스트를 해석하여 재생할 컨텐츠를 결정한다. 이 경우 미디어 렌더러(230)는 장면 정보 해석 모듈(2324)에서 네트워크 연결 모듈(221)을 통해 제공받은 멀티미디어 컨텐츠의 장면 정보를 해석하고 해석한 장면 정보를 UI 생성 모듈(2323)에서 사용자 인터페이스를 구성하여 사용자에게 제공한다. 사용자가 UI를 통해 재생할 컨텐츠의 장면을 선택하면 컨텐츠 재생 모듈(2321)에서 선택한 장면을 재생한다.

미디어 렌더러(230)의 장면 정보 생성모듈(2325)은 사용자가 제공된 UI를 이용하여 현재 재생중인 장면과 원하는 장면 간의 임의의 관계를 새로 설정할 경우에 사용된다. 이렇게 사용자에 의해 새로 생성될 장면 링크 정보는 네트워크 모듈(231, 221)을 통해 미디어 서버(220)로 전달되어 해당 컨텐츠에 업데이트된다.

현재 재생되고 있는 장면과 관련된 장면, 즉 링크가 연결된 세그먼트가 사용자에 의해 선택된 경우, 새로 재생할 장면이 저장된 컨텐츠가 현재 재생 중인 컨텐츠가 저장된 미디어 서버가 아닌 다른 미디어 서버에 저장된 경우에는, 미디어 렌더러(230)는 새로운 미디어 서버와 새로운 세션(Session)을 설정하고 컨텐츠를 스트리밍하여 장면을 재생해야 한다. 이러한 경우에는 두 개의 장면을 연속적으로 재생함에 있어 약간의 시간 공백이 생길 수 있다.

도 3은 이러한 시간 공백을 없애기 위한 장면 이동의 동작을 나타낸 도면이다. 도 3은 본 발명의 일 실시 예에 따른 장면 간의 링크를 이용하여 장면 전환 동작의 흐름도이다.

도 3을 참조하면, 먼저 310단계에서 미디어 렌더러(230)는 미디어 서버(220)로부터 컨텐츠 관련 정보를 수신하고, 320단계에서 사용자의 입력에 의해 컨텐츠를 재생한다.

다음 330단계에서는 현재 재생되는 장면의 관련 장면을 표시한다. 340단계에서는 관련 장면이 현재 재생되는 컨텐츠가 저장된 미디어 서버와 다른 미디어 서버에 존재하는지 판단한다. 340단계에서 판단 결과 관련 장면이 다른 미디어 서버에 존재하지 않으면, 350단계로 진행한다. 350단계에서 관련 장면이 선택되면 370단계로 진행하여 선택된 관련 장면을 연속 재생한다.

상기 340단계에서 판단 결과, 관련 장면이 다른 미디어 서버에 존재하는 경우에는 360단계로 진행하여 세션 이동 모듈(2322)에서 버퍼링을 위해 관련 장면에 해당하는 세그먼트 데이터를 미리 수신하여 저장한다. 다음 380단계로 진행하여 관련 장면이 선택되면 370단계로 진행하여 관련 장면을 연속해서 재생한다.

상기 설명과 같이 사용자는 원하는 장면을 시청하다가 이와 관련이 있는 다른 컨텐츠를 시청하기 위하여 관련 장면 리스트를 볼 수 있다. 이 때 관련 장면을 즉시 재생할 수 있는지 여부에 따라서 세션 이동 모듈을 사용하여 버퍼링하기 위해 미리 수신하여 저장할 것인지 여부를 판단할 수 있다.

관련 장면이 지금 시청하고 있는 컨텐츠와 동일한 미디어 서버(220)에 존재 하지 않아서 새로운 세션을 생성해야 할 경우에는 세션 이동 모듈에서 사용자가 관련 장면리스트에서 특정 장면을 선택하기 전에 미리 관련 장면을 버퍼링해 둔다. 이 경우 링크 정보를 표시할 때 버퍼링 여부 및 버퍼링 완료 여부를 사용자에게 제공할 수도 있다. 이러한 과정을 통하여 장면 이동간에 발생할 수 있는 공백을 줄일 수 있다.

도 4는 본 발명의 일 실시 예에 따른 두 세그먼트로 분할된 AV 컨텐츠를 XML(Extensible Markup Language)로 표현한 도면이다. 두 개의 세그먼트로 분할되었다고 하더라도 실제 컨텐츠에는 변화가 없으며, 단지 각 컨텐츠를 참조하는 자료구조의 객체에 세그먼트(Segment) 정보를 추가하고, 세그먼트 객체(object)를 생성하여 컨텐츠의 세그먼트를 나타낸다.

베이스 컨텐츠(Base content)는 장면들로 나누어지게 될 기반 컨텐츠를 의미하며, 자료 구조 상에는 아이템 엘리먼트(Item element)로 표현된다. 자신을 나타내는 객체 아이디(object ID)를 가지고 있으며, 분할된 각각의 세그먼트 아이템의 객체 아이디를 포함한다.

세그먼트 아이템은 분할된 장면의 메타데이터(metadata)를 가지고 있으며, 각 세그먼트를 구별할 수 있도록 세그먼트 아이디(ID)를 가진다. 상기 도 4에는 세그먼트 1의 메타데이터만을 표시하였으나, 나머지 세그먼트 2의 메타데이터도 동일한 형태로 존재한다.

도 4에 도시된 세그먼트를 나타내는 자료 구조에서는 각 장면 간의 연관성에 대해서는 표현되지 않는다. 도 4의 자료 구조는 컨텐츠를 각각의 세그먼트로 분할 한 형태를 도시하며, 각각의 장면은 독립적으로 존재한다. 기존의 장면기반 재생에서는 위와 같은 장면의 메타데이터를 사용하여 각 장면들을 검색하고 재생하여, 특정한 속성을 가진 장면을 선별적으로 재생하는 것이 가능하다.

장면 기반의 재생을 지원하는 미디어 렌더러에서는 컨텐츠를 전송 받아 재생하는 역할 이외에도 위와 같은 메타데이터를 받아서 해석한 후 재생에 필요한 정보를 얻은 후, 이에 따라 특정 장면을 건너뛰거나 반복 재생하는 등의 기능을 수행할 수 있다.

도 5는 본 발명의 일 실시 예에 따라 컨텐츠의 각 세그먼트와 링크 상태를 나타낸 도면이다. 도 5는 각 장면간의 관계를 표시한다. 도 5에 도시한 바와 같이 세그먼트 1은 세그먼트 2, 세그먼트 3, 세그먼트 4와 관련이 있다. 즉 링크가 연결되어 있다. 예를 들면, 세그먼트 1(장면 1)에 등장하는 배우가 세그먼트 2, 세그먼트 3, 세그먼트 4에 동일하게 등장하는 경우 해당 배우에 관련된 장면 간에 링크를 연결하여 설정될 수 있다. 즉 세그먼트 1, 세그먼트 2, 세그먼트 3, 세그먼트 4는 동일한 배우가 등장한다는 관계로 인하여 링크를 연결할 수 있다.

이 때 세그먼트 1의 메타데이터에는 세그먼트 2, 세그먼트 3, 세그먼트 4의 세그먼트 아이디가 포함된다. 유사한 방식으로 컨텐츠의 다른 세그먼트들도 관련 있는 장면의 세그먼트 아이디를 저장한다.

도 6은 본 발명의 일 실시 예에 따라 상기 도 5에 표시된 세그먼트 2를 XML로 표현한 도면이다. 도 6에 도시한 바와 같이, <upnp:segmentRelationship> 엘리먼트는 관련있는 장면의 세그먼트 아이디를 값으로 갖는다. 또한 'Type' 속성은 연 관성의 종류를 나타낸다. 예컨대 세그먼트 3은 세그먼트 2의 바로 다음 장면('next')이며, 이런 관계가 자료구조에 'Type' 속성으로 표현된다. 또한 세그먼트 6에는 세그먼트 3의 내용이 원인이 되어 발생된 결과가 등장하며, 이 역시 'Type' 속성에 'result' 값으로 표현된다. 'Type' 속성은 장면 간의 관계에 대한 정보를 제공하고 사용자는 이 정보를 바탕으로 원하는 장면으로 이동할 수 있다.

한편 동일한 'Type' 속성을 가진 장면이라 하더라도 연관성의 중요도에 따라서 우선 순위를 부여할 수 있다. 예를 들어 세그먼트 3은 세그먼트 2의 이후에 재생되는 다음 장면이다. 또한 세그먼트 4도 세그먼트 2에 비하여 나중에 재생되는 장면이지만 세그먼트 3 보다는 나중에 재생된다. 따라서 같은 다음 장면이라는 동일한 관계를 가지고 있다고 할지라도 우선 순위의 차이를 둘 수 있다. 이와 같은 차이는 'Priority' 속성에 의해서 표현할 수 있다.

도 7은 뉴스 컨텐츠의 각 세그먼트 간의 다양한 관계의 예를 보여주는 예시도이다. 도 7에 도시된 하나의 원은 하나의 세그먼트, 즉 장면을 나타내며, 화살표는 각 장면이 링크로 연결되어 있음을 나타낸다. 사용자는 핸드볼 동메달에 관련된 뉴스 장면을 시청하다가, 해당 장면과 관련이 있는 장면을 보고 싶은 경우에 특정 버튼을 누르는 등의 입력동작을 수행하여 관련된 장면을 선택할 수 있다. 상위 범주에 있는 베이징 올림픽 관련 뉴스를 시청하다가, 다시 버튼을 누르면 올림픽 장면과 관련이 있는 각종 스포츠 장면들을 선택할 수 있다.

각 장면들 간의 다양한 관계는 컨텐츠 별로 다를 수 있다. 예컨대 뉴스의 경우 유사 카테고리(category), 인과 관계, 동일 사건 등이 관계가 될 수 있으며, 도 6에서 언급하였듯이 발생하는 빈도 또는 중요도에 따라서 관계의 우선 순위를 설정할 수도 있다.

상기와 같은 장면 선택은 기존의 검색(Search)과는 사용자 경험 측면에서 차별화된다. 예를 들어 사용자가 경제 관련 뉴스를 보고 싶은 경우에 사용자는 검색, 카테고리 선정, 장면 선택 등의 상호작용(Interaction)을 거치게 된다. 사용자는 컨텐츠를 시청하는 시점에 상관없이 동일한 검색 트리를 사용하여 장면을 검색하게 된다.

그러나 위와 같이 관계를 기반으로 검색을 하게 될 경우 사용자는 컨텐츠를 시청하다가, 현재 보고 있는 컨텐츠와 관계가 있는 장면 목록을 제공받을 수 있고, 다양한 관계에 따라, 장면 사이를 자유롭게 이동할 수 있다. 즉 현재 사용자가 보고있는 장면과 가장 관련성이 높은 장면으로 이동할 수 있게 된다. 동영상의 장면들 간에 관계를 부여함으로서, 현재 웹서핑을 하는 것과 유사한 방식으로 장면간을 이동할 수 있다.

또한 링크 제공자의 의도를 반영할 수 있다. 링크 제공자는 이를 통하여 특정 컨텐츠 및 장면에 대한 사용자의 접근성을 증가시킬 수 있으며, 이를 사용하여 광고 및 기타 수익을 올릴 수 있다.

이러한 장면 간의 관계의 종류는 각 컨텐츠 별로 다를 수 있다. 뉴스의 경우 동일 배우 또는 동일 인물이란 관계가 컨텐츠 내에 나타나는 빈도가 드라마에 비하여 현저하게 적다. 그러나, 동일 범주라는 관계로 컨텐츠 간의 관계를 엮을 경우 다양한 장면 간에 관련이 있을 수 있다. 각 관계들 간의 우선 순위 역시 다르다. 뉴스에서 동일 범주 관계는 인과 관계에 비해 빈도수가 높으므로 상대적으로 높은 우선 순위를 갖을 수 있다. 이 때의 우선 순위는 관계(링크) 간의 우선 순위를 말한다. 각 관계들의 우선 순위는 컨텐츠 별로 다를 수 있으며, 컨텐츠 별로 어떤 관계의 우선순위가 높을 것인지는 사용자의 사용 패턴을 조사한 결과에 따라 다를 수 있다. 이러한 우선 순위를 결정하는 것은 구현상의 문제이다.

동일 관계 내에서 우선 순위가 다를 경우에는 정의된 자료구조의 'segmentRelationship' 엘리먼트의 'priority' 속성을 따른다. 예를 들어 드라마를 시청하던 중 관계 있는 장면을 검색하고자 할 때 동일 인물이 등장하는 장면이 여러 개가 있을 경우에 각 장면의 우선 순위를 'priority' 속성을 참조하여 사용자에게 보여줄 수 있게 된다.

도 8은 본 발명의 일 실시 예에 따라 두 개의 컨텐츠 간의 세그먼트의 링크 관계를 나타낸 도면이다. 도 8에 도시한 바와 같이 본 발명의 일 실시 예에 따르면 하나의 컨텐츠 내에서 장면 간 링크 외에 다른 컨텐츠의 장면에도 링크가 연결될 수 있다. 도 8을 참조하면 오브젝트 아이디가 'base-content-1'인 컨텐츠 1이 'base-content-2'의 컨텐츠 2에 링크가 연결된 것을 도시한다. 또한 링크를 갖는 세그먼트는 링크 정보로 객체의 아이디 정보를 포함한다. 뉴스와 같은 컨텐츠는 어제와 오늘의 뉴스에서 동일한 내용을 다룰 수 있다. 이런 경우에 자료구조 내에 다른 컨텐츠의 오브젝트 아이디와 세그먼트 아이디를 기술하여, 현재 사용자가 보고 있는 장면과 관련 있는 장면을 설정할 수 있다.

도 9는 본 발명의 일 실시 예에 따른 상기 도 8의 표시된 컨텐츠 1의 세그먼 트 2를 XML로 표현한 도면이다. 도 9는 도 7의 링크 관계를 나타낸 자료구조의 예를 나타낸다. 도 9를 참조하면, 다른 컨텐츠의 세그먼트 간의 링크 관계를 나타낸 자료구조는 동일 컨텐츠의 세그먼트 간의 관계를 나타낸 자료구조와 유사하나, 추가적으로 다른 베이스 컨텐츠를 나타내는 'baseObjectID'를 더 포함한다.

위와 같은 장면 간의 관계를 나타내는 정보는 서비스 제공자가 VOD 서비스 또는 IPTV 서비스를 제공할 때 제공되는 EPG 리스트 또는 컨텐츠 리스트와 함께 제공될 수 있다. 또는 사용자가 임의로 각 장면간에 관계를 설정하고 링크를 제공할 수도 있다.

도 10은 본 발명의 일 실시 예에 따른 장면 선택을 위한 사용자 인터페이스를 나타낸 예시도이다. 도 10에 도시된 UI에서 세로축(1010)은 동일 컨텐츠 내에서 현재 사용자가 보고 있는 장면과 링크가 연결된 장면을 표시하며, 가로축(1020)은 다른 컨텐츠 내에서 사용자가 보고 있는 장면과 링크가 연결된 장면을 도시한다. 이 경우 다른 컨텐츠가 반드시 현재 보고 있는 컨텐츠와 동일한 장르, 동일한 프로그램일 필요는 없으며, 현재 보고 있는 장면과 관련 있는 장면을 가지고 있는 어떠한 컨텐츠도 링크로 연결이 가능하다. 예를 들어 사용자가 8월 16일자 '개그콘서트'의 '달인'이라는 코너를 시청하다가 관련 장면을 보고 싶은 경우에, 제공될 수 있는 장면은 같은 컨텐츠 내에서 동일한 배우가 등장하는 장면, 유사한 수준의 인기를 누리는 코너의 시작 장면이 될 수 있다. 동일 컨텐츠가 아닌 경우에는 8월 23일자 '개그콘서트'의 동일한 코너의 시작장면을 제공할 수 있으며, 다른 프로그램에서 달인에 등장하는 배우가 출연한 장면을 제공할 수 있다. 이러한 링크 정보들 은 서비스 제공자가 제공하는 EPG, 또는 컨텐츠 리스트와 함께 제공되며, 사용자는 이를 활용하여 장면간 이동을 수행할 수 있다.

도 11은 본 발명의 일 실시 예에 따라 사용자의 선택에 따라 다른 스토리를 재생하는 복수의 스토리 라인을 가진 컨텐츠를 나타낸 도면이다. 사용자는 컨텐츠 감상하던 특정 시점에서 다음 장면을 선택하여 이동할 수 있다. 따라서 사용자의 결정에 따라서 동일 컨텐츠에서 서로 다른 스토리를 감상할 수 있다.

도 12는 본 발명의 일 실시 예에 따라 새로운 컨텐츠 생성 예를 나타낸 도면이다. 도 12의 (a)에 도시한 바와 같이 뉴스 컨텐츠는 다양한 분야의 뉴스꼭지가 하나의 컨텐츠 안에 합쳐져 있다. 이에 뉴스 컨텐츠 자체는 변경하지 않고 장면 정보만으로 새로운 컨텐츠를 구성할 수 있다. 이에 뉴스 컨텐츠의 각 꼭지들을 장면으로 나누어 장면 정보로 구성하고, 각 꼭지의 일부분을 독립된 장면정보로 구성한다. 이렇게 독립된 주요 장면만을 재생하다가 사용자가 보다 자세한 장면을 보고 싶을 경우에는 링크를 선택하여 원본 컨텐츠의 뉴스 꼭지 장면으로 이동할 수 있다.

주요 장면을 재생할 경우에는 도 12의 (b)에 도시한 바와 같이 가상의 베이스 컨텐츠 정보와 장면 정보들을 생성하여, 도 12의 (a)의 뉴스 주요 장면들의 링크를 연결해 놓는 방법이다. 이렇게 만들어진 가상 컨텐츠 정보는 실제 특정한 컨텐츠에 대한 정보를 가지고 있지 않으며, 다른 컨텐츠에 대한 링크만을 포함한다. 렌더러는 이 가상 컨텐츠를 재생할 때 링크된 장면들을 모두 재생할 수 있으며, 이런 경우 메타데이터를 검색하지 않고도 주요 장면 만을 재생할 수 있다. 사용자가 아무런 입력을 주지 않을 경우에 각 장면들은 주요 장면들만을 재생하며, 이러한 주요 장면들의 순서는 가상 컨텐츠에 기록되어 있다. 즉 링크만을 모아서 주요 컨텐츠를 재생하고, 주요 컨텐츠에 삽입되어 있는 링크를 통해 본 방송을 시청할 수 있다.

또한, 도 12의 (c)에 도시한 바와 같이 렌더러가 도 12의 (a)에서 생성된 주요 장면만을 재생할 수 있다. 이럴 경우에는 재생장치가 장면정보를 인식하고 주요 장면이라는 메타데이터를 인식하여, 주요 장면을 보여줄 수 있다. 이때 주요 장면을 보다가 링크를 선택하여 본 뉴스를 볼 수 있다.

위와 같은 방법을 사용할 경우 사용자는 포탈 컨텐츠 만을 시청하고 관심이 있는 컨텐츠에 대해서만 UI를 이용하여 상세 정보를 얻는 것이 가능하다.

상기와 같이 본 발명의 일 실시예에 따른 장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 방법 및 시스템의 구성 및 동작이 이루어질 수 있으며, 한편 상기한 본 발명의 설명에서는 구체적인 실시예에 관해 설명하였으나 여러 가지 변형이 본 발명의 범위를 벗어나지 않고 실시될 수 있다.

도 1은 UPnP를 이용한 멀티미디어 컨텐츠 재생 시스템의 블록 구성도

도 2는 본 발명의 일 실시 예에 따른 장면 간의 링크를 이용한 멀티미디어 컨텐츠 재생 시스템의 블록 구성도

도 3은 본 발명의 일 실시 예에 따른 장면 간의 링크를 이용하여 장면 전환 동작의 흐름도

도 4는 본 발명의 일 실시 예에 따른 두 세그먼트로 분할된 AV 컨텐츠를 XML로 표현한 도면

도 5는 본 발명의 일 실시 예에 따라 컨텐츠의 각 세그먼트와 그 세그먼트에 연결된 세그먼트를 표시한 예시도

도 6은 본 발명의 일 실시 예에 따라 상기 도 5에 표시된 세그먼트 2를 XML로 표현한 도면

도 7은 뉴스 컨텐츠의 각 세그먼트 간의 다양한 관계의 예를 보여주는 예시도

도 8은 본 발명의 일 실시 예에 따라 두 개의 컨텐츠 간의 세그먼트의 링크 관계를 나타낸 도면

도 9는 본 발명의 일 실시 예에 따른 상기 도 8의 표시된 베이스 컨텐츠 1의 세그먼트 2를 XML로 표현한 도면

도 10은 본 발명의 일 실시 예에 따른 장면 선택을 위한 사용자 인터페이스를 나타낸 예시도

도 11은 본 발명의 일 실시 예에 따라 사용자의 선택에 따라 다른 스토리를 재생하는 복수의 스토리 라인을 가진 컨텐츠를 나타낸 도면

도 12는 본 발명의 일 실시 예에 따라 새로운 컨텐츠 생성 예를 나타낸 도면

Claims (18)

1. 장면 간의 링크(link)를 이용한 멀티미디어 컨텐츠(contents) 재생 방법에 있어서,

   미디어 렌더러(Media renderer)가 미디어 서버(Media server)로부터 각 세그먼트(segment) 간의 연관 관계에 따라 링크 정보가 설정된 멀티미디어 컨텐츠를 수신하는 과정과,

   상기 미디어 렌더러에서 상기 멀티미디어 컨텐츠를 재생하는 과정과,

   상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하는 과정과,

   사용자에 의해 상기 표시된 링크 정보 중 하나가 선택된 경우, 상기 선택된 링크 정보에 따라 연결된 세그먼트를 재생하는 과정을 포함함을 특징으로 하는 컨텐츠 재생 방법.
2. 제 1항에 있어서, 상기 멀티미디어 컨텐츠의 각 세그먼트는 XML(Extensible Markup Language)로 표현한 자료 구조의 객체(object)로 표현하며, 상기 세그먼트를 표현한 자료 구조의 객체는 링크가 연결된 다른 세그먼트의 객체 아이디(ID)를 포함함을 특징으로 하는 컨텐츠 재생 방법.
3. 제 2항에 있어서, 상기 세그먼트를 표현한 자료 구조의 객체는 링크가 연결 된 세그먼트가 포함된 멀티미디어 컨텐츠의 객체 아이디를 더 포함함을 특징으로 하는 컨텐츠 재생 방법.
4. 제 2항에 있어서, 상기 세그먼트를 표현한 자료 구조의 객체는 링크가 연결된 세그먼트와의 연관 관계의 종류(type)를 나타내는 정보를 더 포함함을 특징으로 하는 컨텐츠 재생 방법.
5. 제 2항에 있어서, 상기 세그먼트를 표현한 자료 구조의 객체는 상기 링크 정보들 간의 우선 순위(priority)를 나타내는 정보를 더 포함함을 특징으로 하는 컨텐츠 재생 방법.
6. 제 1항에 있어서, 상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하는 과정은,

   상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하는 과정과,

   상기 표시된 세그먼트의 링크 정보 중, 현재 재생되는 컨텐츠가 저장된 미디어 서버와 다른 미디어 서버에 저장된 세그먼트가 있는지 판단하는 과정과,

   상기 다른 미디어 서버에 저장된 세그먼트가 링크된 경우, 상기 다른 미디어 서버에 저장된 세그먼트를 수신하여 미리 저장하는 과정을 포함함을 특징으로 하는 컨텐츠 재생 방법.
7. 제 1항에 있어서, 상기 멀티미디어 컨텐츠의 각 세그먼트 간의 연관 관계에 따라 설정된 링크 정보는 컨텐츠 제공자에 의해 설정된 것임을 특징으로 하는 컨텐츠 재생 방법.
8. 제 1항에 있어서, 사용자의 입력에 의해 상기 멀티미디어 컨텐츠의 각 세그먼트 간의 링크 정보를 설정하는 과정을 더 포함함을 특징으로 하는 컨텐츠 재생 방법.
9. 제 1항에 있어서, 상기 멀티미디어 컨텐츠는, 다른 컨텐츠의 세그먼트의 링크 정보만으로 구성된 가상 컨텐츠임을 특징으로 하는 컨텐츠 재생 방법.
10. 장면 간의 링크(link)를 이용한 멀티미디어 컨텐츠(content) 재생 장치에 있어서,

    상기 멀티미디어 컨텐츠를 저장한 미디어 서버(Media server)와의 통신을 위한 네트워크 연결 모듈과,

    상기 네트워크 연결 모듈을 통해 상기 미디어 서버로부터 각 세그먼트(segment) 간의 연관 관계에 따라 링크 정보가 설정된 멀티미디어 컨텐츠를 수신하며, 상기 멀티미디어 컨텐츠를 재생하며, 상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하며, 사용자에 의해 상기 표시된 링크 정보 중 하 나가 선택된 경우 상기 선택된 링크 정보에 따라 연결된 세그먼트를 재생하는 재생 제어부를 포함함을 특징으로 하는 컨텐츠 재생 장치.
11. 제 10항에 있어서, 상기 멀티미디어 컨텐츠의 각 세그먼트는 XML(Extensible Markup Language)로 표현한 자료 구조의 객체(object)로 표현하며, 상기 세그먼트를 표현한 자료 구조의 객체는 링크가 연결된 세그먼트의 객체 아이디(ID)를 포함함을 특징으로 하는 컨텐츠 재생 장치.
12. 제 11항에 있어서, 상기 세그먼트를 표현한 자료 구조의 객체는 링크가 연결된 세그먼트가 포함된 멀티미디어 컨텐츠의 객체 아이디를 더 포함함을 특징으로 하는 컨텐츠 재생 장치.
13. 제 11항에 있어서, 상기 세그먼트를 표현한 자료 구조의 객체는 링크가 연결된 세그먼트와의 연관 관계의 종류(type)를 나타내는 정보를 더 포함함을 특징으로 하는 컨텐츠 재생 장치.
14. 제 11항에 있어서, 상기 세그먼트를 표현한 자료 구조의 객체는 상기 링크 정보들 간의 우선 순위(priority)를 나타내는 정보를 더 포함함을 특징으로 하는 컨텐츠 재생 장치.
15. 제 10항에 있어서, 상기 재생 제어부는,

    상기 멀티미디어 컨텐츠의 현재 재생중인 세그먼트의 링크 정보를 표시하며, 상기 표시된 세그먼트의 링크 정보 중 현재 재생되는 컨텐츠가 저장된 미디어 서버와 다른 미디어 서버에 저장된 세그먼트가 있는지 판단하며, 상기 다른 미디어 서버에 저장된 세그먼트가 링크된 경우, 상기 다른 미디어 서버에 저장된 세그먼트를 수신하여 미리 저장하는 것을 특징으로 하는 컨텐츠 재생 장치.
16. 제 10항에 있어서, 상기 멀티미디어 컨텐츠의 각 세그먼트 간의 연관 관계에 따라 설정된 링크 정보는 컨텐츠 제공자에 의해 설정된 것임을 특징으로 하는 컨텐츠 재생 장치.
17. 제 10항에 있어서, 상기 멀티미디어 컨텐츠는, 다른 컨텐츠의 세그먼트의 링크 정보만으로 구성된 가상 컨텐츠임을 특징으로 하는 컨텐츠 재생 장치.
18. 제 10항에 있어서, 상기 재생 제어부는

    사용자의 입력에 의해 선택된 컨텐츠의 세그먼트를 재생하는 컨텐츠 재생 모듈과,

    현재 재생중인 세그먼트에 링크된 다른 컨텐츠의 세그먼트를 미리 수신하여 저장하기 위한 세션 이동 모듈과,

    상기 미디어 서버로부터 제공받은 컨텐츠의 세그먼트 정보를 해석하는 장면 정보 해석 모듈과,

    상기 장면 정보 해석 모듈로부터 받은 세그먼트 정보에 따라 사용자 인터페이스를 구성하는 UI(User interface) 생성 모듈과,

    사용자가 생성한 장면 정보를 구성하여 컨텐츠 데이터에 업데이트 하기 위한 장면 정보 생성 모듈을 포함함을 특징으로 하는 컨텐츠 재생 장치.

Images