KR20100098434A

KR20100098434A - 적어도 하나의 미디어 신호의 기록에 주석 달기

Info

Publication number: KR20100098434A
Application number: KR1020107015092A
Authority: KR
Inventors: 빌헬무스 에프. 예. 폰틴; 알렉산더 시니친; 스테번 베. 라위트옌스
Original assignee: 코닌클리케 필립스 일렉트로닉스 엔.브이.
Priority date: 2007-12-11
Filing date: 2008-12-08
Publication date: 2010-09-06
Also published as: WO2009074940A9; JP2011507379A; EP2235645A2; WO2009074940A2; US20100257187A1; CN101896903A

Abstract

적어도 하나의 미디어 신호(22, 23)의 기록에 주석을 다는 방법에서, 기록은 대응하는 물리적인 신호들이 캡처된 동안의 적어도 하나의 시간 간격에 관련된다. 이 방법은 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 파라미터의 값들을 나타내는 데이터(14 내지 16)에 기초하여 적어도 하나의 미디어 신호(22, 23)를 정보(17)로 증대시키는 단계; 및 적어도 하나의 시간 간격을 벗어난 시점들에 적어도 부분적으로 속하는 단계를 포함한다.

Description

적어도 하나의 미디어 신호의 기록에 주석을 다는 방법{METHOD OF ANNOTATING A RECORDING OF AT LEAST ONE MEDIA SIGNAL}

본 발명은 적어도 하나의 미디어 신호의 기록에 주석을 다는 방법에 관한 것이고,

기록은 대응하는 물리적인 신호들이 캡처(capture)된 동안의 적어도 하나의 시간 간격에 관련되고,

방법은 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 나타내는 데이터에 기초하여 적어도 하나의 미디어 신호를 정보로 증대시키는(augment) 단계를 포함한다.

본 발명은 또한, 적어도 하나의 미디어 신호의 기록에 주석을 달기 위한 시스템에 관한 것이고, 기록은 대응하는 물리적인 신호들이 캡처된 동안의 적어도 하나의 시간 간격에 관련되고, 시스템은:

적어도 하나의 미디어 신호를 정보로 증대시키기 위한 신호 처리 시스템; 및

기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터를 측정하기 위한 적어도 하나의 센서에 대한 인터페이스(interface)를 포함한다.

본 발명은 또한 컴퓨터 프로그램에 관한 것이다.

US 2006/0149781호는 미디어 파일 또는 심지어 텍스트 파일에서의 위치가 센서 정보에 관련될 수 있는 임의의 애플리케이션에서 이용될 수 있는 메타데이터 텍스트 파일들(metadata text files)을 개시한다. 이 지점은 센서들로부터의 온도 및 습도 판독들이 요리를 가르치는 비디오에서 위치들을 찾는데 이용되는 일례에서 예시된다. 주방장은 물주전자들이 액체로 채워져 있는지를 감지하는 물주전자들 장비, 프라이팬들의 온도를 감지하는 프라이팬들, 쿠키-커터들이 찍히고 있을 때를 감지하는 쿠키-커터들과 같은 특별한 주방용구들을 이용하여 식사를 준비한다. 모든 이들 주방용구들은 비디오 카메라에 센서값들을 송신하며, 판독들은 메타데이터 텍스트 파일로 기록된다. 메타데이터 텍스트 파일은 센서 판독들을 비디오와 동기화시킨다. 이 쇼가 상업적으로 패키징되면, 메타데이터 텍스트 파일은 쇼를 위해 비디오와 함께 포함된다.

알려진 방법의 문제는 비디오와 함께 제공될 모든 관련 센서 정보에 대해, 비디오 기록 자체가 매우 길어야 한다는 점이다. 실제로 기록된 비디오 세그먼트들 동안 캡처된 센서 데이터만이 비디오와 함께 패키징된다면, 비디오가 촬영된 위치에서 주요한 상태들을 결정하기 위해 이용자에 관련될 수 있는 정보를 놓칠 것이다.

본 발명의 목적은 비교적 정확하고 효율적인 방식으로 주석이 달린 기록의 생성 환경들에 관련된 정보를 전달하기에 적당한, 적어도 하나의 미디어 신호의 기록에 주석을 다는 방법, 적어도 하나의 미디어 신호의 기록에 주석을 달기 위한 시스템, 및 컴퓨터 프로그램을 제공하는 것이다.

이 목적은 본 발명에 따라 적어도 하나의 미디어 신호의 기록에 주석을 다는 방법에 의해 달성되며, 상기 방법은 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 나타내는 데이터에 기초하여 적어도 하나의 미디어 신호를 정보로 증대시키는 단계, 및 적어도 하나의 시간 간격을 벗어난 시점들에 적어도 부분적으로 속하는 단계를 포함한다.

기록이 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 나타내는 데이터에 기초하여 정보로 증대되기 때문에, 주석이 달린 기록의 생성 환경들에 관련된 정보가 제공될 수 있다. 실제로, 그 정보에 기초하여 적어도 근사적으로 이들 환경들을 재-생성하는 것이 가능하다. 이것은 미디어 신호들의 더욱 매력적인 재생을 제공한다. 정보가 적어도 하나의 시간 간격을 벗어난 시점들에 적어도 부분적으로 속하는 파라미터 값들에 기초하기 때문에, 이 정보는 더욱 정확하다. 또한, 이것은 미디어 신호에 의해 커버(cover)되지 않는 기간들, 예를 들면 미디어 신호를 벗어나 편집된 간격들 또는 미디어 신호가 캡처되기 직전 또는 직후의 기간들을 커버한다. 따라서, 주석을 다는 정보를 생성하기 위해 미디어 신호의 캡처 및 센서 데이터의 캡처가 분리된다.

본 방법의 일 실시예는 파라미터 값들을 적어도 하나의 미디어 신호가 증대되는데 이용된 정보로 변환하기 위해 파라미터 값들을 해석하는 단계를 포함한다.

주석을 다는 정보의 추가에 앞서 파라미터 값들의 해석은 정보의 감소를 허용한다. 주석을 더욱 효율적으로 만드는 효과가 있다.

본 방법의 일 실시예는 파라미터 값들의 적어도 하나의 스트림을 수신하는 단계 및 파라미터 값들의 적어도 하나의 스트림을 파라미터 값들의 적어도 하나의 스트림보다 낮은 데이터 레이트를 가지는 데이터 스트림으로 변환하는 단계를 포함한다.

파라미터 값들이 속하는 시간 간격들보다 긴 시간 간격들을 커버하는 값들을 유발하는 해석의 형태를 제공하는 효과가 있다. 이 실시예는 미디어 신호들에 대응하는 물리적인 신호들이 캡처되거나 렌더링(rendering)된 위치에서의 분위기를 특징짓는데 적합하며, 이것은 일반적으로 주변 상황들이 미디어 신호들과 동일한 단기 시간 비율에 변하지 않기 때문이다.

또 다른 변형은 파라미터 값들의 복수의 시퀀스들을 적어도 하나의 미디어 신호가 증대되는데 이용된 정보에 포함된 단일 데이터 시퀀스로 변환하는 단계를 포함한다.

주석을 다는 정보를 더욱 정확하게 할 뿐 아니라 주석을 다는 정보량을 수용할 수 있는 레벨로 유지하는 효과가 있다.

기록에 주석을 다는 방법의 일 실시예는 적어도 하나의 미디어 신호에 대응하는 물리적인 신호들이 캡처되는 물리적인 위치에서의 환경에서 물리적인 파라미터를 측정함으로써 센서 데이터를 획득하는 단계, 및 이렇게 획득된 센서 데이터에 적어도 부분적으로 기초하여 적어도 하나의 미디어 신호를 정보로 증대시키는 단계를 포함한다.

기록의 위치에서의 주변 상태들을 기술하는 정보를 제공하는 효과가 있다. 따라서, 이러한 정보는 미디어 신호에 의해 전달된 주변 상태들의 임프레션(impression)과 조화된다. 주석이 달린 기록은 주변 상태들을 재-생성하는데 적합하거나, 기록된 미디어 신호 또는 미디어 신호들의 재생시 주변 상태들의 임프레션을 적어도 보강하는데 적당하다.

일 실시예에서, 파라미터 값들은 대응하는 물리적인 신호들이 캡처되는 동안의 적어도 하나의 시간 간격을 포함하는 시간 간격의 적어도 일부 내의 시점들에 속한다.

대응하는 주변 신호들이 캡처된 동안의 적어도 하나의 시간 간격에 관련되는 정보로 미디어 신호들이 주석이 달리는 것을 보장하는 효과가 있다. 그럼에도 불구하고, 정보가 그 적어도 하나의 시간 간격을 벗어나는 시점들에 적어도 부분적으로 속하는 파라미터 값들에 기초하기 때문에, 추가 중복 정보의 위험은 비교적 낮다.

본 방법의 일 실시예는 적어도 하나의 미디어 신호에 대응하는 물리적인 신호들에 의해 표현된 양과 상이한 물리적인 양을 나타내는 적어도 하나의 물리적인 파라미터를 측정함으로써 센서 데이터를 획득하는 단계를 포함한다.

비교적 적절한 데이터로 기록을 증대시키는 효과가 있다. 적어도 하나의 미디어 신호에 대응하는 물리적인 신호들에 의해 표현된 양과 상이한 물리적인 양을 나타내는 물리적인 파라미터들에 기초하여, 정보는 적어도 하나의 미디어 신호로부터 쉽게 도출될 수 없다.

또 다른 양태에 따라, 적어도 하나의 미디어 신호의 기록에 주석을 달기 위한 본 발명에 따른 시스템은:

기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 결정하기 위한 적어도 하나의 디바이스에 대한 인터페이스를 포함하고,

시스템은 적어도 하나의 시간 간격을 벗어난 적어도 하나의 디바이스로부터 파라미터 값들을 나타내는 데이터를 획득할 수 있고, 이들 데이터에 적어도 부분적으로 기초하여 적어도 하나의 미디어 신호를 정보로 증대시킬 수 있다.

시스템이 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 결정하기 위한 적어도 하나의 디바이스에 대한 인터페이스를 포함하기 때문에, 시스템은 주석이 달린 기록이 생성되는 시간의 주변 상태들을 나타내는 데이터를 캡처할 수 있다. 이들 상태들의 적어도 하나의 임프레션은 주석이 달린 기록이 재생될 때 적합한 시스템에 의해 주어질 수 있다. 시스템이 적어도 하나의 시간 간격을 벗어난 물리적인 파라미터 값들을 나타내는 데이터를 획득할 수 있고 그 데이터에 적어도 부분적으로 기초하여 기록을 정보로 증대할 수 있기 때문에, 포괄적인 정보가 비교적 효율적으로 제공된다.

일 실시예에서, 시스템은 본 발명에 따른 적어도 하나의 미디어 신호의 기록에 주석을 다는 방법을 실행하도록 구성된다.

이 실시예에서, 시스템은 적어도 하나의 미디어 신호가 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 나타내는 데이터에 기초하여 정보로 증대되고 적어도 하나의 시간 간격을 벗어난 시점들에 적어도 부분적으로 속하는 것을 보장하도록 자동으로 구성된다.

본 발명의 또 다른 양태에 따라, 기계-판독가능한 매체에 통합될 때, 정보 처리 능력들을 가지는 시스템이 본 발명에 따른 방법을 실행할 수 있게 하는 명령들의 세트를 포함하는 컴퓨터 프로그램이 제공된다.

본 발명은 첨부 도면들을 참조하여 더욱 상세히 설명될 것이다.

도 1은 기록 시스템의 개략도.
도 2는 도 1의 기록 시스템을 이용하여 실행된 기록 처리의 상태도.
도 3은 홈 엔터테인먼트 시스템의 개략도.

도 1을 참조하면, 하나 이상의 미디어 신호들의 주석이 달린 기록을 생성하기 위해 물리적인 신호들을 캡처하기 위한 기록 시스템(1)의 일례가 도시된다. 기록 시스템(1)은 비디오 카메라(2), 마이크로폰(3) 및 제 1, 제 2 및 제 3 센서들(4 내지 6)을 포함한다.

예시된 실시예에서, 비디오 카메라(2)는 광 강도 값들을 디지털 비디오 데이터 스트림으로 변환하기 위한 감광 센서 어레이(light-sensitive sensor array)(7)를 포함한다. 일반적으로, 디지털 비디오 데이터 스트림은 인코딩 및 압축되고, 디지털 오디오 데이터 스트림으로 동기화되고, 디지털 오디오 데이터 스트림과 함께 기록 디바이스(8)의 기록 매체에 기록된다. 미디어 신호들은 기록 위치에서의 환경에서 적어도 하나의 물리적인 파라미터들의 값들을 나타내는 데이터에 기초하여 주석 정보와 함께 증대된다. 이러한 콘텍스트(context)에서, 물리적인 파라미터는 어떤 물리적인 양, 즉 자연의 힘들에 관한 양의 값이다.

비디오 카메라(2)는 터치 스크린 인터페이스(9) 형태의 이용자 인터페이스를 포함한다. 이것은 비디오 및 오디오 신호들의 캡처를 시작 및 중단하기 위한 제 1 이용자 제어부(10)를 포함한다. 이것은 기록 위치에서 적어도 하나의 물리적인 파라미터를 나타내는 데이터에 기초하여, 주석 정보의 캡처를 시작 및 중단하기 위한 제 2 이용자 제어부(11)를 추가로 포함한다.

예시된 실시예에서, 센서들(4 내지 6) 중 적어도 하나는 디지털 오디오 및 비디오 신호들에 대응하는 물리적인 신호들에 의해 표현된 것과 상이한 물리적인 양을 나타내는 적어도 하나의 물리적인 파라미터를 측정하기 위해 제공된다. 따라서, 비디오 및 오디오 신호들이 광 강도 및 음향 에너지를 나타내기 때문에, 예를 들면, 제 1 센서(4)는 온도를 측정할 수 있고, 제 2 센서(5)는 습도를 측정할 수 있고, 제 3 센서(6)는 진동을 측정할 수 있다. 다른 실시예들에서, 센서들(4 내지 6)이 거의 존재하지 않고, 주석이 달린 정보는 예를 들면, 마이크로폰(3)으로부터의 신호에 기초한다. 또 다른 실시예에서, 센서들(4 내지 6) 중 적어도 하나는 디지털 오디오 및 비디오 신호들에 의해 캡처된 것들과 유사한 양을 나타내는 물리적인 파라미터를 측정한다. 예를 들면, 센서들(4 내지 6) 중 하나는 주변 광 강도를 측정할 수 있다.

또 다른 실시예에서, 값들은 주변 상태들, 예를 들면, 배경 조명 레벨을 조정하도록 구성된 디바이스들을 조절하기 위한 시스템으로부터 획득된다. 따라서, 이들 실시예들에서, 주변 상태들의 이러한 양태는 직접 측정되지 않는다. 예를 들면, 센서가 풍속을 측정하고 투광 조명(floodlighting)을 조절하기 위한 설정들이 또한 수집되는 경우에, 센서 데이터와의 조합이 있을 수 있다.

기록 시스템(1)의 일부 상태들은 도 2에 도시되어 있다. 통상적으로, 오퍼레이터는 기록의 장면에서 주변의 캡처 및 기록을 시작하기 위해(상태 12) 제 2 이용자 제어부(11)를 이용할 것이다. 비디오 카메라(2)는 그 인터페이스를 통해 3개의 센서들(4 내지 6)로 수신된 파라미터 값들의 스트림들(14 내지 16)을 계속 캡처한다(상태 13). 데이터 값들의 이들 3개의 스트림들(14 내지 16)은 주변 데이터 값들의 단일 세트(17)로 감소된다. 감소는 기록 매체에 주변 정보를 기록하기 전에(상태 20), 파라미터 값들의 스트림들을 해석하는 단계(상태 18) 및 타이밍 정보를 부가하는 단계(상태 19)를 포함한다. 나중 상태(20)는 텍스트 포맷으로, 예를 들면, 파일의 확장용 마크-업 언어(eXtensible Markup Language; xML) 포맷으로 주변 정보를 기록하는 단계를 포함한다.

일 실시예에서, 파라미터 값들의 3개의 스트림들(14 내지 16)은 주변 값들의 스트림으로 감소되고, 각 값은 대응하는 시점에서의 주변을 나타낸다. 시점에 대한 각각의 주변 값에 관련된 타이밍 정보가 부가된다. 또 다른 실시예에서, 타이밍 정보는 주변이 결정된 시간 간격을 식별하는 역할을 하여, 주변 정보는 상태(12)의 전체 지속구간에 관련된다. 또 다른 실시예에서, 제 1 및 제 2 스트림들(14, 15)은 주변 값들의 타임-스탬프 시퀀스로 감소되고, 제 1, 제 2 및 제 3 스트림(16)은 주변을 캡처하는 상태(12)의 지속구간에 걸쳐 주변의 또 다른 양태를 특징짓는 데이터의 세트에 도달하도록 해석된다.

일련의 타임-스탬프 주변 값들이 생성되는 경우에도, 데이터 레이트는 여전히 파라미터 값들의 스트림들(14 내지 16)의 것보다 일반적으로 더 낮으며, 그것은 주변 값들은 파라미터 값들보다 더 긴 시간 간격들에 속하는 것을 의미한다.

도 2는 또한, 미디어 신호들만 기록되는 상태(21)를 보여준다. 오디오 스트림(22) 및 비디오 스트림(23)이 캡처된다(상태 24). 그들은 타이밍 정보를 이용하여 동기화되고(상태 25), 기록 디바이스(8)에서의 기록 매체 상에 기록된다(상태 26).

주변 데이터를 캡처하는 상태(12)로부터 및 그로의 일반적인 진행은 기록 위치에서의 주변에 대한 더욱 신뢰할 수 있는 정보를 비교적 간단한 방식으로 제공하는 역할을 한다. 이용자가 비디오 세그먼트들을 기록하도록 제 1 이용자 제어부(10)를 작동시킬 때, 정규 진행은 주변의 캡처 및 기록의 상태(12)로부터 오디오 비디오 신호들 및 주변 둘 모두를 캡처 및 기록하는 상태(27)로 가고, 다시 주변을 캡처 및 기록하는 상태(12)로 돌아간다. 주변 데이터는 또한, 기록 전의 시간 간격 내의 시점들 뿐만 아니라, 개재하는 시간 간격들 내의 시점들에 속하는 파라미터 값들에도 기초한다. 일 실시예에서, 이것은 비디오 카메라(2)의 적절한 프로그래밍에 의해 자동화된다.

또 다른 실시예에서, 주변 정보의 세트(17)는 마이크로폰(3)으로부터의 신호 값들에 기초하고, 센서들(4 내지 6)은 이용되지 않는다. 주변 정보가 오디오 신호를 기록하는 시간 간격들 외의 시점들에 속하는 마이크로폰 신호의 값들에 기초하기 때문에, 주석이 달린 기록의 전체 정보 콘텐트(content)는 여전히 향상된다. 더욱이, 마이크로폰 신호는 주변을 나타내는 정보를 얻도록(음향 에너지와 반대로) 해석된다. 예를 들면, 주변 정보는 기록된 오디오 및 비디오 신호들이 캡처되는 동안의 시간 간격들을 포함하는 시간 간격에 걸쳐 평균 배경 잡음 레벨의 결정으로부터 유발될 수 있다.

도 3은 홈 시어터(29), 텔레비전 세트(30) 및 스피커들(31, 32)을 포함하는 홈 엔터테인먼트 시스템(28)을 도시한다. 홈 시어터(29)는 주 메모리(37)에 유지된 데이터를 조작하기 위한 데이터 처리 유닛(36)에 의해 제어된다.

비디오 출력 단계(38)는 텔레비전 세트(30)에 디코딩된 비디오 신호를 제공한다. 오디오 출력 단계(39)는 스피커들(31, 32)에 아날로그 오디오 신호들을 제공한다.

홈 시어터(29)는 홈 엔터테인먼트 시스템(28)의 환경에서 물리적인 상태들을 조정하기 위한 제 1 및 제 2 주변 디바이스들(34, 35)에 대한 인터페이스(33)를 추가로 포함한다. 이들 주변 디바이스들(34, 35)은 색상 및 강도를 변경하는 광을 방출시키는 광들; 기류를 제공하는 팬들(fans); 강도 및 색상이 변하는 백-라이팅(back-lighting)을 제공하기 위한 와셔 광 유닛들(washer light units); 및 이용자가 이동 및 진동을 경험하게 하는 럼블러 디바이스들(rumbler devices)을 포함하는 디바이스들의 등급을 나타낸다. 냄새와 같은 다른 감각들이 또한 제공될 수 있다. 데이터 처리 유닛(36)은 스크립트들(scripts), 예를 들면 전용(독점) 마크-업 언어의 스크립트들로 인코딩된 명령들을 실행함으로써 인터페이스(33)를 통해 주변 디바이스들(34, 35)의 출력을 제어한다. 스크립트들은 주변 디바이스들(34, 35)의 설정들을 나타내는 정보 및 타이밍 정보를 포함한다.

미디어 신호들은 기록 매체, 예를 들면 광 디스크로부터 데이터를 판독하기 위해 내부 대량 저장 디바이스(40)로부터 또는 판독 유닛(41)으로부터 홈 시어터(29)에 의해 액세스된다. 홈 시어터(29)는 또한 네트워크 인터페이스(42)를 통해 미디어 신호들의 기록의 카피들(copies)을 수신할 수 있다.

홈 시어터(29)는 또한, 본질적으로 알려진 방식으로 주변 디바이스들(34, 35)에 대한 설정들을 나타내는 스크립트들로 주석이 달린 미디어 신호들을 획득할 수 있다. 그러나, 홈 시어터(29)는 도 2에 도시된 방법을 이용하여 생성된 형태의 정보로 주석이 달린 미디어 신호들을 획득할 수 있다. 그 경우, 홈 시어터(29)는 적어도 하나의 타겟 주변을 결정하기 위해 특정 규칙들에 따라 미디어 신호에 주석을 다는 정보를 해석하고, 타겟 주변 또는 주변들을 주변 디바이스들(34, 35)에 대한 설정들로 변환하고, 선택적으로 오디오 출력 단계(39), 스피커들(31, 32), 또는 오디오비주얼 신호들을 렌더링하기 위한 시스템의 다른 구성요소들에 대한 설정들로 변환함으로써 스스로 스크립트를 획득한다.

예를 들면, 주석이 달린 기록은 비행장에서 획득된 것이 될 수 있다. 이륙 또는 착륙하는 비행기의 피트 수가 없는 경우에도, 주석을 다는 정보는 여전히 잡음 주변을 나타낼 것이다. 이것은 주변 데이터가 기록의 시간 간격을 벗어나는 시점들에 적어도 부분적으로 속하는 적어도 하나의 물리적인 파라미터(잡음 레벨과 같은)의 값들에 기초하기 때문이다. 홈 시어터(29)는 주변을 재-생성하기 위해, 예를 들면 진동 감각을 생성하고 미디어 신호들에 포함된 오디오 트랙에 비행기들의 소리를 추가하기 위해 주변 디바이스들(34, 35)을 조절하기 위한 스크립트로 잡음 주변을 나타내는 정보를 변환한다.

홈 시어터(29)는 미디어 신호들의 특성들에 의존하여 설정들을 생성하기 위한 알고리즘들(algorithms)에서 특정 설정들 및/또는 특정 파라미터 값들에 대한 특정 주변들에 관련하는 데이터베이스를 이용한다.

일 실시예에서, 홈 엔터테인먼트 시스템(28)은 도 2에 도시된 방법을 실행하도록 구성된다. 특히, 시스템에 의해 처리되고 미디어 신호들이 렌더링되는 위치에 대응하는 미디어 신호들의 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 나타내는 데이터에 기초하여 미디어 신호들을 정보로 증대시킬 수 있다. 매우 명백하게, 이러한 파라미터 값들은 원래 미디어 신호들을 기록하는 시간 간격들을 벗어난 시점들에 속한다. 홈 시어터(29)는 도 1의 기록 시스템(1)의 센서들(4 내지 6)과 유사한 센서(44)에 대한 인터페이스(43)를 포함한다. 따라서, 이 실시예에서, 미디어 신호들의 기록은 먼저 미디어 신호들을 렌더링하는 시간에 주변을 나타내는 주석을 다는 정보로 증대될 수 있어서, 주변은 나중에 재생성될 수 있다.

상기 상세히 논의된 실시예들은 적어도 하나의 미디어 신호의 기록에 주석을 다는 방법의 속성들을 설명한다. 이들 속성들은 또한, 방법의 다른 실시예들(도시되지 않음)도 또한 특징짓는다. 예를 들면, 모바일 폰은 마이크로폰 뿐만 아니라, 디지털 이미지 형태의 미디어 신호를 획득하기 위한 카메라에 맞춰지는 기록 시스템으로 동작할 수 있다. 음성 정보는 기록되지 않지만, 이미지가 캡처된 시점을 포함하는 간격에 걸쳐 음성 신호는 주변을 결정하기 위해 분석될 수 있다. 예를 들면, 디지털 이미지가 풋볼 매치에서 캡처되고, 음성 신호가 군중의 분위기를 자동으로 결정하기 위해 분석될 수 있다.

또 다른 실시예에서, 분산된 기록 시스템이 이용된다. 도시에서 값들을 나타내는 데이터가 획득되지만, 디지털 이미지들은 도시에 관해 분산된 네트워크화된 센서들로의 무선 통신들을 이용하여 캡처된다. 디지털 이미지들이 캡처된 동안의 시간 간격 중에 듣고 있던 음악을 나타내는 데이터가 또한 분석된다. 데이터의 총계는 디지털 이미지들이 캡처될 때 이용자의 기분을 나타내는 정보 및/또는 도시의 분위기를 얻도록 분석된다.

이들 실시예들 각각은 미디어 신호들 자체로부터 직접 얻을 수 없는 파라미터 값들에 기초하여 미디어 신호들이 정보로 증대되게 한다. 이들 실시예들 각각은 센서들로부터의 부가의 신호들을 기록하기보다는, 주변 또는 분위기를 추론하기 위해 파라미터 값들을 해석함으로써 효율적인 방식으로 이를 달성한다. 이들 실시예들 각각의 경우, 주변 또는 분위기를 나타내는 정보는 기록 간격들을 벗어난 시점들에 속하는 파라미터 값들에 적어도 부분적으로 기초하여, 주석을 다는 정보의 신뢰도가 향상된다.

상술된 실시예들은 예시적일 뿐 제한적인 것이 아니고, 당업자들은 첨부된 특허청구범위의 범위를 벗어나지 않고 많은 대안적인 실시예들을 설계할 수 있을 것임을 유념한다. 특허청구범위에서, 괄호 사이에 놓인 임의의 참조 번호들은 청구항을 제한하는 것으로 해석되어서는 안 된다. 동사 "포함하다(comprise)" 및 그 어형변화들의 이용은 청구항에 언급된 요소들 또는 단계들 이외의 것들의 존재를 배제하지 않는다. 요소 앞의 부정관사("a" 또는 "an")는 이러한 요소들의 복수의 존재를 배제하지 않는다. 본 발명은 여러 별개의 요소들을 포함하는 하드웨어에 의해, 및 적당히 프로그래밍된 컴퓨터에 의해 구현될 수 있다. 여러 수단들을 나열하는 디바이스 청구항에서, 이들 수단들 중 여러 개는 하드웨어의 하나 및 동일한 항목에 의해 구현될 수 있다. 특정 메저들(measures)이 서로 상이한 종속 청구항들에서 청구되고 있다는 단순한 사실은 이들 메저들의 조합이 유리하게 이용될 수 없다는 것을 나타내지 않는다.

물리적인 디스크 상에 미디어 신호들을 기록하고 적어도 하나의 미디어 신호를 렌더링하기 위한 시스템에 물리적인 디스크 또는 그의 카피들을 제공하는 대신에, 미디어 신호 및 주석을 다는 정보는 메모리 디바이스, 예를 들면 고체-상태 메모리 디바이스 또는 하드 디스크 유닛에 일시적으로 기록된 후, 네트워크를 통해 통신될 수 있다.

'수단(Means)'은 당업자에게 명백한 바와 같이, 단독으로 또는 다른 기능들과 함께, 고립하여 또는 다른 요소들과 협동하여, 동작으로 실행하거나, 특정 기능을 실행하도록 설계되는 임의의 하드웨어(개별 회로 또는 집적 회로 또는 전자 요소들과 같은) 또는 소프트웨어(프로그램들 또는 프로그램들의 부분들과 같은)를 포함하도록 한다. '컴퓨터 프로그램(Computer programme)'은 인터넷과 같은, 네트워크를 통해 다운로드가능하거나 임의의 다른 방식으로 시장화가능한 광 디스크와 같은, 컴퓨터-판독가능한 매체 상에 저장된 임의의 소프트웨어 제품을 의미하는 것으로 이해한다.

1: 기록 시스템 2: 비디오 카메라
3: 마이크로폰 4, 5, 6: 센서
7: 감광 센서 어레이 8: 기록 디바이스
9: 터치 스크린 인터페이스 10: 이용자 제어부
14, 15, 16: 스트림 22: 오디오 스트림
23: 비디오 스트림
28: 홈 엔터테인먼트 시스템 29: 홈 시어터
30: 텔레비전 세트 31, 32: 스피커
33: 인터페이스 34, 35: 주변 디바이스
36: 데이터 처리 유닛 37: 주 메모리
40: 내부 대량 저장 디바이스 41: 판독 유닛
42: 네트워크 인터페이스

Claims

적어도 하나의 미디어 신호(22, 23)의 기록에 주석을 다는(annotate) 방법에 있어서,
상기 기록은 대응하는 물리적인 신호들이 캡처(capture)된 동안의 적어도 하나의 시간 간격에 관련되고,
상기 방법은 상기 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 나타내는 데이터(14 내지 16)에 기초하여 상기 적어도 하나의 미디어 신호(22, 23)를 정보(17)로 증대시키는(augment) 단계, 및 상기 적어도 하나의 시간 간격을 벗어난 시점들에 적어도 부분적으로 속하는 단계를 포함하는, 주석을 다는 방법.
제 1 항에 있어서,
상기 파라미터 값들(14 내지 16)을 상기 적어도 하나의 미디어 신호(22, 23)가 증대되는데 이용된 상기 정보(17)로 변환하기 위해 상기 파라미터 값들(14 내지 16)을 해석하는 단계를 포함하는, 주석을 다는 방법.
제 2 항에 있어서,
파라미터 값들의 적어도 하나의 스트림(14 내지 16)을 수신하는 단계, 및 상기 파라미터 값들의 적어도 하나의 스트림(14 내지 16)을 상기 파라미터 값들의 적어도 하나의 스트림보다 낮은 데이터 레이트(data rate)를 가지는 데이터 스트림(17)으로 변환하는 단계를 포함하는, 주석을 다는 방법.
제 2 항 또는 제 3 항에 있어서,
파라미터 값들의 복수의 시퀀스들(14 내지 16)을 상기 적어도 하나의 미디어 신호(22, 23)가 증대되는데 이용된 상기 정보(17)에 포함된 단일 데이터 시퀀스로 변환하는 단계를 포함하는, 주석을 다는 방법.
제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
상기 적어도 하나의 미디어 신호에 대응하는 상기 물리적인 신호들이 캡처되는 물리적인 위치에서의 환경에서 물리적인 파라미터를 측정함으로써 센서 데이터를 획득하는 단계, 및 이렇게 획득된 센서 데이터에 적어도 부분적으로 기초하여 상기 적어도 하나의 미디어 신호(22, 23)를 정보(17)로 증대시키는 단계를 포함하는, 주석을 다는 방법.
제 1 항 내지 제 5 항 중 어느 한 항에 있어서,
상기 파라미터 값들(14 내지 16)은 상기 대응하는 물리적인 신호들이 캡처되는 동안의 상기 적어도 하나의 시간 간격을 포함하는 시간 간격의 적어도 일부 내의 시점들에 속하는, 주석을 다는 방법.
제 1 항 내지 제 6 항 중 어느 한 항에 있어서,
상기 적어도 하나의 미디어 신호에 대응하는 상기 물리적인 신호들에 의해 표현된 양과 상이한 물리적인 양을 나타내는 적어도 하나의 물리적인 파라미터를 측정함으로써 센서 데이터를 획득하는 단계를 포함하는, 주석을 다는 방법.
적어도 하나의 미디어 신호(22, 23)의 기록에 주석을 달기 위한 시스템으로서, 상기 기록은 대응하는 물리적인 신호들이 캡처된 동안의 적어도 하나의 시간 간격에 관련되는, 상기 시스템에 있어서:
상기 적어도 하나의 미디어 신호(22, 23)를 정보(17)로 증대시키기 위한 신호 처리 시스템(2; 29); 및
상기 기록과 연관된 물리적인 위치에서의 환경에서 적어도 하나의 물리적인 파라미터의 값들을 결정하기 위한 적어도 하나의 디바이스(4 내지 6; 44)에 대한 인터페이스(33)를 포함하고,
상기 시스템은 상기 적어도 하나의 시간 간격을 벗어난 상기 적어도 하나의 디바이스(4 내지 6; 44)로부터 파라미터 값들을 나타내는 데이터(14 내지 16)를 획득할 수 있고, 상기 데이터(14 내지 16)에 적어도 부분적으로 기초하여 상기 적어도 하나의 미디어 신호(22, 23)를 정보(17)로 증대시킬 수 있는, 주석을 달기 위한 시스템.
제 8 항에 있어서,
제 1 항 내지 제 7 항 중 어느 한 항에 따른 방법을 실행하도록 구성되는, 주석을 달기 위한 시스템.
컴퓨터 프로그램에 있어서,
기계-판독가능한 매체에 통합될 때, 정보 처리 능력들을 가지는 시스템이 제 1 항 내지 제 7 항 중 어느 한 항에 따른 방법을 실행할 수 있게 하는 명령들의 세트를 포함하는, 컴퓨터 프로그램.