KR102389040B1 - 콘텐츠 재생 프로그램, 콘텐츠 재생 방법 및 콘텐츠 재생 시스템 - Google Patents

Abstract

콘텐츠에 삽입된 워터마크 데이터의 삽입 타이밍으로 한정되지 않고, 또, 해당 콘텐츠의 진행 시간이 변동해 버리는 것이더라도, 임의의 타이밍에서 다른 콘텐츠를 재생한다. 콘텐츠 재생 프로그램은, 컴퓨터에, 워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 동기 포인트의 예정 타이밍을 대응지어 격납하는 제1 테이블과, 동기 기준 타이밍을 기준으로 한 제1 서브 콘텐츠의 개시 예정 타이밍을 격납하는 제2 테이블과, 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 워터마크 데이터로서 삽입되어 있는 동기 포인트 ID를 검출하는 검출 기능과, 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 동기 포인트의 예정 타이밍을 취득하고, 해당 취득한 동기 포인트의 예정 타이밍과 동기 기준 타이밍을 기준으로 한 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 취득 기능과, 취득된 차분과 제2 테이블에 기초하여, 제1 서브 콘텐츠의 개시 타이밍을 판정하는 판정 기능과, 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠의 재생을 제어하는 제어 기능을 실현시킨다.

Description

콘텐츠 재생 프로그램, 콘텐츠 재생 방법 및 콘텐츠 재생 시스템

본 발명은 콘텐츠 재생 프로그램, 콘텐츠 재생 방법 및 콘텐츠 재생 시스템에 관한 것이다.

근래, 영상이나 음악 등의 복수의 콘텐츠를 복수의 기기에서 재생시키고, 이벤트 등을 종합적으로 연출하는 서비스가 많이 존재한다. 이와 같은 서비스에 있어서는, 해당 복수의 콘텐츠의 진행을, 해당 복수의 기기 사이에서 동기시킬 필요가 있다. 해당 동기시에는, 예를 들면, 연출의 메인이 되는 콘텐츠(이하, 「메인 콘텐츠」라고 함)의 진행에 맞춰서, 그 외의 서브가 되는 콘텐츠(이하, 「서브 콘텐츠」라고 함)의 재생 타이밍을 미리 기기 등에 설정하고, 해당 설정된 타이밍에서 각 서브 콘텐츠를 재생시키는 방법을 생각할 수 있다.

그렇지만, 배우나 가수가 무대에서 극을 연기하거나 노래하거나 하는 실연(實演) 등에 있어서는, 상기와 같은 방법에서는, 실연 등의 진행 시간이 본 공연에 변동하기 때문에, 실연 등의 메인 콘텐츠의 진행에 맞춰서, BGM 등의 서브 콘텐츠의 재생 타이밍을 미리 설정하는 것이 어렵다고 하는 과제가 있다.

해당 과제에 대해서, 특허 문헌 1에는, 음성을 수반한 영상을 메인 콘텐츠로 하고, 또한, 해당 영상에 대한 세컨드 스크린 정보(예를 들면, 자막 등)를 서브 콘텐츠로 하여, 세컨드 스크린 정보를 영상의 진행에 따라 휴대 디바이스에 출력시키는 방법이 개시되어 있다.

구체적으로는, 해당 개시된 방법에서는, 전자 워터마크 기술을 이용하여, 각 영상 씬에 대응지어진 세컨드 스크린 정보의 식별 정보를, 영상의 음성 중에 워터마크 데이터로서 삽입하여, 해당 영상의 음성과 함께 출력시킨다. 한편, 휴대 디바이스에는, 세컨드 스크린 정보의 데이터와 해당 식별 정보가 대응지어져 격납되어 있어, 휴대 디바이스에 해당 영상의 음성이 입력되면, 해당 워터마크 데이터가 검출되어, 영상 씬에 동기시켜 세컨드 스크린 정보를 출력시킬 수 있다. 여기서 「전자 워터마크 기술」이란 영상이나 음악 등의 콘텐츠에, 워터마크 데이터로서 특정의 정보를 해당 콘텐츠의 소리 등에 삽입하는 기술을 말한다.

이와 같은 방법을 이용하면, 예를 들면, 배우나 가수가 무대에서 극을 연기하거나 노래하거나 하는 실연 등의 진행 시간이 변동하는 메인 콘텐츠에 대해서도, 실연에 맞춰 흘리는 BGM 등의 서브 콘텐츠에 워터마크 데이터를 삽입하여, 해당 서브 콘텐츠에 맞춰 해당 워터마크 데이터가 입력되어, 메인 콘텐츠의 진행에 따라 다른 서브 콘텐츠인 세컨드 스크린 정보 등을 출력시킬 수 있다.

특허 문헌 1: 일본 특허공개공보 2015－61112호

그렇지만, 특허 문헌 1에 개시되어 있는 방법에서는, 각 영상 씬에 삽입된 워터마크 데이터와, 세컨드 스크린 정보의 식별 정보가 1대 1로 대응지어져 있기 때문에, 각 영상 씬에 워터마크 데이터가 삽입된 타이밍에서만 세컨드 스크린 정보를 출력시킬 수 있다. 이 때문에, 워터마크 데이터의 삽입 타이밍과 관계없이, 각 영상 씬의 개시, 도중 또는 종료와 같은 다양한 타이밍에서 자막 등의 세컨드 스크린 정보를 출력시킬 수 없다고 하는 문제가 있다.

이에, 본 발명은 진행 시간이 변동해 버리는 콘텐츠에 있어서도, 콘텐츠의 워터마크 데이터의 삽입 타이밍으로 한정되지 않고 임의의 타이밍에서, 다른 콘텐츠의 재생을 제어하는 콘텐츠 재생 프로그램, 콘텐츠 재생 시스템을 제공하는 것을 목적으로 한다.

본 발명의 일 앙태에 따른 콘텐츠 재생 프로그램은, 컴퓨터에, 워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 동기 포인트의 예정 타이밍을 대응지어 격납하는 제1 테이블과, 동기 기준 타이밍을 기준으로 한 제1 서브 콘텐츠의 개시 예정 타이밍을 격납하는 제2 테이블과, 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 워터마크 데이터로서 삽입되어 있는 동기 포인트 ID를 검출하는 검출 기능과, 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 동기 포인트의 예정 타이밍을 취득하고, 해당 취득한 동기 포인트의 예정 타이밍과 동기 기준 타이밍을 기준으로 한 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 취득 기능과, 취득된 차분과 제2 테이블에 기초하여, 제1 서브 콘텐츠의 개시 타이밍을 판정하는 판정 기능과, 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠의 재생을 제어하는 제어 기능을 실현시킨다.

본 발명의 일 앙태에 따른 콘텐츠 재생 방법은, 컴퓨터가, 워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 동기 포인트의 예정 타이밍을 대응지어 제1 테이블에 격납하는 스텝과, 동기 기준 타이밍을 기준으로 한 제1 서브 콘텐츠의 개시 예정 타이밍을 제2 테이블에 격납하는 스텝과, 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 워터마크 데이터로서 삽입되어 있는 동기 포인트 ID를 검출하는 스텝과, 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 동기 포인트의 예정 타이밍을 취득하고, 해당 취득한 동기 포인트의 예정 타이밍과 동기 기준 타이밍을 기준으로 한 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 스텝과, 취득된 차분과 제2 테이블에 기초하여, 제1 서브 콘텐츠의 개시 타이밍을 판정하는 스텝과, 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠의 재생을 제어하는 스텝을 포함한다.

본 발명의 일 앙태에 따른 콘텐츠 재생 시스템은, 유저 단말과, 오퍼레이터 단말을 포함하는 콘텐츠 재생 시스템으로서, 유저 단말은 워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 동기 포인트의 예정 타이밍을 대응지어 격납하는 제1 테이블과, 동기 기준 타이밍을 기준으로 한 제1 서브 콘텐츠의 개시 예정 타이밍을 격납하는 제2 테이블과, 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 워터마크 데이터로서 삽입되어 있는 동기 포인트 ID를 검출하는 검출부와, 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 동기 포인트의 예정 타이밍을 취득하고, 해당 취득한 동기 포인트의 예정 타이밍과 동기 기준 타이밍을 기준으로 한 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 취득부와, 취득된 차분과 제2 테이블에 기초하여, 제1 서브 콘텐츠의 개시 타이밍을 판정하는 판정부와, 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠의 재생을 제어하는 제어부를 구비하고, 오퍼레이터 단말은 오퍼레이터로부터의 제2 서브 콘텐츠의 재생에 관한 입력을 접수하는 입력부와, 접수한 입력 내용에 기초하여, 제2 서브 콘텐츠의 재생을 제어하는 제어부를 구비한다.

덧붙여, 본 발명에 있어서, 「부(部)」란 단순히 물리적 수단을 의미하는 것이 아니라, 그 「부」가 가지는 기능을 소프트웨어에 의해서 실현하는 경우도 포함한다. 또, 1개의 「부」나 장치가 가지는 기능이 2개 이상의 물리적 수단이나 장치에 의해 실현되어도, 2개 이상의 「부」나 장치의 기능이 1개의 물리적 수단이나 장치에 의해 실현되어도 된다.

본 발명에 의하면, 진행 시간이 변동해 버리는 콘텐츠에 있어서도, 콘텐츠의 워터마크 데이터의 삽입 타이밍으로 한정되지 않고 임의의 타이밍에서, 다른 콘텐츠의 재생을 제어하는 콘텐츠 재생 프로그램, 콘텐츠 재생 방법 및 콘텐츠 재생 시스템을 제공할 수 있다.

도 1은 본 발명의 일 실시 형태인 콘텐츠 재생 시스템의 구성을 나타내는 도면이다.
도 2는 유저 단말(200) 및 오퍼레이터 단말(100)의 하드웨어 구성의 일례를 나타내는 도면이다.
도 3은 오퍼레이터 단말(100)의 기능 구성의 일례를 나타내는 도면이다.
도 4는 유저 단말(200)의 기능 구성의 일례를 나타내는 도면이다.
도 5는 콘텐츠 재생 시스템에 있어서의 콘텐츠 재생 처리의 개요를 나타내는 도면이다.
도 6은 콘텐츠 재생 시스템에 있어서의 콘텐츠 재생 처리의 개요를 나타내는 도면이다.
도 7은 콘텐츠 재생 시스템에 있어서의 테이블 구성의 일례를 나타내는 도면이다.
도 8은 유저 단말(200)에 있어서의 콘텐츠 재생 처리의 일례를 나타내는 순서도이다.
도 9는 콘텐츠 재생에 있어서의 사상(事象)의 일례의 개요를 나타내는 도면이다.
도 10은 도 9의 사상에 대한 콘텐츠 재생 시스템에 있어서의 콘텐츠 재생 제어의 개요를 나타내는 도면이다.
도 11은 유저 단말(200)에 있어서의 콘텐츠 재생 제어 처리의 일례를 나타내는 순서도이다.
도 12는 콘텐츠 재생 시스템에 있어서의 콘텐츠 재생 제어의 개요를 나타내는 도면이다.

첨부 도면을 참조하여, 본 발명의 적합한 실시 형태에 대해 설명한다. 덧붙여, 각 도면에 있어서, 동일한 부호를 부여한 것은, 동일 또는 같은 구성을 가진다. 또, 설명에 있어서, 각 타이밍에서 있어서의 시각을 기재하는 경우, hh:mm:ss 형식(시=hh, 분=mm, 초=ss)으로 기재한다. 덧붙여, 각 타이밍을 나타내는 형식은, 해당 시각 정보로 한정되지 않고, 예를 들면, 고정 사이클로 인크리먼트되는 타이머값 등을 이용해도 된다.

본 실시 형태에서는, 본 실시 형태에 따른 콘텐츠 재생 시스템(이하, 간단하게 「콘텐츠 재생 시스템」이라고 함)을 무대에서 행해지는 실연을 포함하는 콘텐츠에 적용했을 경우를 예로 설명했지만, 이것으로 한정하는 취지는 아니다.

＜1. 시스템 개요＞

도 1은 콘텐츠 재생 시스템의 개략 구성을 나타내는 도면이다. 콘텐츠 재생 시스템은, 도 1에 나타내는 것처럼, 오퍼레이터 단말(100), 유저 단말(200a, 200b 및 200c)(콘텐츠 재생 장치)(이하, 특별히 구별할 필요가 없는 경우, 총칭하여 「유저 단말(200)」이라고 함), 및 스피커(300a, 300b)(이하, 특별히 구별할 필요가 없는 경우, 총칭하여 「스피커(300)」라고 함)를 구비한다.

스피커(300)는 극장이나 구장 등의 실연의 본 공연이 행해지는 시설에 설치되고, 오퍼레이터 단말(100)은 스피커(300)로부터 출력되는 BGM 등의 콘텐츠에 대한 사람(오퍼레이터)의 조작(예를 들면, BGM 등의 재생 조작 등)에 이용된다. 유저 단말(200)에서는, 해당 콘텐츠의 재생에 연동하여, 자막이나 음성 가이드 등의 다른 콘텐츠가 재생된다. 이후, 무대 위에서 실연을 행하는 공연자나 오퍼레이터 단말(100) 또는 스피커(300) 등의 시설에 설치되어 있는 기기 등을 총칭하여 「무대측」이라고 한다.

무대에서 행해지는 실연을 포함하는 콘텐츠에 적용했을 경우의 본 예에서는, 예를 들면, 무대 상에서는 메인이 되는 콘텐츠(메인 콘텐츠)인 실연이 행해지고, BGM 등의 서브 콘텐츠(제2 서브 콘텐츠)가 해당 실연의 진행에 맞춰 오퍼레이터 단말(100)에 있어서의 오퍼레이터의 조작으로 재생된다. 유저 단말(200)에서는, 실연의 진행에 맞추어 BGM과 함께, 실연의 진행의 변동에 의한 어긋남을 반영하기 위한 2개의 테이블을 이용하여, 자막 등의 다른 서브 콘텐츠(제1 서브 콘텐츠)가 자동으로 재생된다. 본 예에 있어서의 콘텐츠 재생 시스템의 개요를 다음의 (1)~(3)에서 설명한다. 덧붙여, 콘텐츠 재생 시스템에 포함되는 콘텐츠는, 전술대로, 「메인 콘텐츠」와, 「제1 서브 콘텐츠」와, 「제2 서브 콘텐츠」로 크게 나뉘어 구성되지만, 각 콘텐츠의 자세한 것은 후술한다.

(1) 콘텐츠 재생 시스템이 적용되는 실연에서는, 본 공연 전에, 무대측에 있어서, 먼저, 메인 콘텐츠인 실연이 예정대로 진행됐을 경우의 BGM나 자막의 재생 스케줄이 설정된다. 다음에, BGM이 재생되는 구간 중에 동기 포인트가 설정된다. 구체적으로는, 실연의 개시 시각 등의 동기 기준 타이밍을 기준으로 한 BGM 재생 구간 중의 임의의 재생 타이밍에, 워터마크 데이터로서 동기 포인트 ID를 삽입한다. 덧붙여, 해당 스케줄 및 동기 포인트의 설정은, 오퍼레이터 단말(100) 등에 해당 설정의 정보를 등록하고, 오퍼레이터의 조작 등에 의해서 적당히 편집되어도 된다.

여기서, 「동기 포인트」란 메인 콘텐츠의 진행에 대해서, 서브 콘텐츠의 진행의 동기를 도모하는 포인트를 말한다. 또 「동기 포인트 ID」란 동기 포인트를 특정하기 위한 식별 정보이다. 또, 「동기 기준 타이밍」이란 예를 들면, 메인 콘텐츠의 개시 시각이나 장면이 전환되는 씬의 개시 시각 등의 타이밍이다. 이후의 설명에서는, 동기 기준 타이밍으로서 메인 콘텐츠의 개시 시각 「00:00:00」을 채용했을 경우에 대해 설명한다.

(2) 콘텐츠 재생 시스템에서 이용되는 유저 단말(200)에는, 동기 포인트 ID와, 동기 기준 타이밍을 기준으로 한 동기 포인트의 예정 타이밍을 대응지어 격납한 제1 테이블과, 동기 기준 타이밍을 기준으로 하여 실연의 진행에 맞춰 재생하는 자막 등의 제1 서브 콘텐츠의 개시 예정 타이밍을 격납하는 제2 테이블이 미리 기억된다(또는, 액세스 가능하게 설정된다).

(3) 실연의 본 공연 당일에 있어서, 무대측에서 오퍼레이터는, 메인 콘텐츠인 실연이 개시되면, 해당 메인 콘텐츠의 진행을 모니터하여, 지연 등이 발생했을 경우는, 그것을 고려하여 BGM의 재생 타이밍을 수정하여 재생 제어한다. 이 결과, 메인 콘텐츠의 실제의 진행에 따른 타이밍에서 BGM이 재생되어, 해당 BGM의 재생과 함께 동기 포인트 ID가 출력된다. 유저 단말(200)에 있어서, 해당 BGM이 마이크 등으로 집음되면, 해당 BGM에 삽입되어 있는 동기 포인트 ID를 검출하고, 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 해당하는 동기 포인트의 예정 타이밍을 취득한다. 콘텐츠 재생 시스템은 해당 취득된 동기 포인트의 예정 타이밍과, 해당 동기 포인트 ID가 검출된 타이밍의 차분(진행의 지연 등에 의한 예정과의 어긋남)을 취득하고, 해당 차분과 제2 테이블에 기초하여, 실연의 진행 예정과의 어긋남을 반영시켜, 자막을 실제로 개시시키는 타이밍을 판정한다. 콘텐츠 재생 시스템은 해당 판정한 개시 타이밍에 기초하여, 유저 단말(200)에 있어서 자막을 재생시킨다.

상기 구성에 의하면, 진행 시간이 변동해 버리는 실연 등의 메인 콘텐츠에 있어서도, BGM 등의 제2 서브 콘텐츠의 워터마크 데이터의 삽입 타이밍으로 한정되지 않고, 임의의 타이밍에서, 제1 서브 콘텐츠의 재생을 제어할 수 있다.

또, 상기 구성에 의하면, 오퍼레이터가 붙어 무대의 진행에 맞춰 자막의 재생 조작을 행하지 않아도, 적은 오차로, 무대 상의 진행과 유저 단말(200)의 자막의 재생 진행을 동기시킬 수도 있다.

＜2. 하드웨어 구성＞

도 2는 오퍼레이터 단말(100) 및 유저 단말(200)(이하, 「유저 단말(200) 등 」이라고 함)의 하드웨어 구성의 일례를 나타내는 도면이다. 유저 단말(200) 등은, 제1 서브 콘텐츠를 재생 가능한 단말이면 충분하며, 예를 들면, 스마트 폰, 태블릿 단말, 랩탑 단말, 데스크탑 단말 또는 안경형이나 손목 밴드형 등의 웨어러블 단말 등의 정보 단말이어도 된다. 도 2에 나타내는 것처럼, 유저 단말(200) 등은 프로세서(110), 기억 장치(115), 통신 인터페이스(I/F)(120), 음성 입력 장치(125), 음성 출력 장치(130), 조작 입력 장치(135) 및 표시 출력 장치(140)를 구비한다.

프로세서(110)는 데이터의 연산, 가공 및 전송 및 프로그램의 실행이나 다른 장치의 제어 등을 담당하는 처리 장치이다. 프로세서(110)는 기억 장치(115)에 격납되어 있는 프로그램을 실행함으로써, 유저 단말(200)에 있어서의 다양한 기능을 실현할 수 있다.

기억 장치(115)는 주 기억 장치(예를 들면, 휘발성 메모리, RAM 등), 보조 기억 장치(예를 들면, 불휘발성 메모리 등) 또는 외부 기억 장치 등의 프로그램이나 데이터를 기억하는 장치이다.

통신 인터페이스(120)는 외부 장치와의 사이에서 프로그램이나 데이터의 송수신을 행하기 위한 인터페이스 장치이다. 통신 인터페이스(120)는 예를 들면, 휴대 전화의 통신망용의 인터페이스나, 무선 LAN(Local Area Network)용 인터페이스를 포함한다. 통신 인터페이스(120)는 유선의 인터페이스를 포함해도 된다.

음성 입력 장치(125)는 주위의 소리를 검출하기 위한 입력 장치이다. 음성 입력 장치(125)는 예를 들면, 마이크 등이다. 음성 입력 장치(125)는 가청 대역의 소리로 한정하지 않고, 비 가청 대역의 소리도 검출할 수 있다. 음성 입력 장치(125)는 유저 단말(200) 등의 외부에 마련되어 있어도 된다.

음성 출력 장치(130)는 소리를 출력하기 위한 출력 장치이다. 음성 출력 장치(130)는 예를 들면, 스피커 등이다. 또, 음성 출력 장치(130)는 이어폰으로 소리를 출력하기 위한 장치여도 된다. 제1 서브 콘텐츠가 소리(예를 들면 음성 가이드나 더빙 음성)를 포함하는 경우, 해당 소리는 음성 출력 장치(130)로부터 출력된다.

조작 입력 장치(135)는 유저나 오퍼레이터로부터의 조작 입력을 접수하기 위한 장치이다. 조작 입력 장치(135)는, 예를 들면, 표시 출력 장치(140)와 일체적으로 형성된 터치 패널이어도 된다. 조작 입력 장치(135)는 유저 단말(200) 등의 외부에 마련되어도 되고, 예를 들면, 키보드나 마우스 패드 등이어도 된다.

표시 출력 장치(140)는 화상(정지 화면 또는 동영상)을 표시하기 위한 출력 장치이다. 표시 출력 장치(140), 예를 들면, 액정 디스플레이나 유기 EL(Electroluminescence) 디스플레이이다. 표시 출력 장치(140)는 유저 단말(200) 등의 외부에 마련도어 있어도 된다. 제1 서브 콘텐츠가 화상(예를 들면 자막)을 포함하는 경우, 해당 화상은 유저 단말(200)의 표시 출력 장치(140)에 표시된다.

＜3. 기능 구성＞

＜3. 1 오퍼레이터 단말(100)의 기능 구성＞

도 3은 오퍼레이터 단말(100)의 기능 구성의 일례를 나타내는 도면이다. 오퍼레이터 단말(100)은 입력부(150)와, 출력부(155)와, 제어부(160)와, 기억부(165)를 구비한다. 도 3에 나타내는 각부는, 예를 들면, 기억 장치(115)의 기억 영역을 이용하거나, 기억 장치(115)에 격납된 프로그램(콘텐츠 재생 프로그램)을 프로세서(110)가 실행하거나 함으로써 실현할 수 있다.

입력부(150)는 오퍼레이터 단말(100)에 있어서 각종 정보의 입력을 접수한다. 입력부(150)는, 예를 들면, 오퍼레이터로부터의 제2 서브 콘텐츠의 재생에 관한 입력을 접수해도 된다. 입력부(150)는 오퍼레이터 단말(100)에 접속된 키보드로의 조작 입력을 접수하거나, 오퍼레이터 단말(100)에 내장된 마이크를 이용하여 음성 입력하는 등, 다양한 입력 양태를 포함한다.

출력부(155)는 오퍼레이터 단말(100)에 있어서 각종 정보를 출력한다. 출력부(155)는 오퍼레이터 단말(100)의 화면에 표시하거나, 오퍼레이터 단말(100)에 내장된 스피커를 이용하여 음성 출력하는 등, 다양한 출력 양태를 포함한다. 또, 출력부(155)는, 예를 들면, 제2 서브 콘텐츠를 출력해도 된다.

제어부(160)는 입력부(150)가 접수한 입력 내용에 기초하여, 제2 서브 콘텐츠의 재생을 제어한다.

기억부(165)는, 예를 들면, 제2 서브 콘텐츠를 기억해도 된다. 또, 기억부(165)는, 예를 들면, 오퍼레이터로부터의 조작 내용을 나타내는 조작 데이터를 기억해도 된다.

＜3.2 유저 단말(200)의 기능 구성 및 재생 제어의 구조＞

처음에, 도 5~6을 이용하여, 콘텐츠 재생 시스템의 재생 제어의 구조에 대해 설명한다. 도 5~6은 무대측에 있어서, 메인 콘텐츠로서 실연이 행해지고, 해당 실연에 맞춘 제2 서브 콘텐츠로서 「BGM1」~「BGM2」가 재생되는 상황과, 유저 단말(200)에 있어서, 해당 실연에 맞춰 BGM과 함께, 제1 서브 콘텐츠로서 「자막 1」~「자막 2」가 재생되는 상황을 나타내고 있다.

여기서, 「메인 콘텐츠」란 진행 시간이 변동하는 콘텐츠이다. 이와 같은 메인 콘텐츠로서는, 예를 들면, 사람에 의한 연극, 댄스 혹은 퍼포먼스 또는 동물을 이용한 쇼 등의 생물에 의한 실연 등의 콘텐츠를 생각할 수 있다. 또, 메인 콘텐츠는 각 서브 콘텐츠의 재생 제어에 있어서 기준이 되는 콘텐츠이기도 하다. 메인 콘텐츠는, 구체적으로는, 각 서브 콘텐츠의 재생을 동기시키기 위한 기준으로 하는 타이밍을 나타내는 동기 기준 타이밍이 설정되어 있다.

또, 「제1 서브 콘텐츠」란 메인 콘텐츠의 진행에 따라 유저 단말(200) 등에서 재생되는 콘텐츠이다. 이와 같은 서브 콘텐츠로서는, 예를 들면, 텍스트 정보(예를 들면, 자막이나 가이드 등), 소리(예를 들면, 음악 또는 음성 가이드 등), 화상(예를 들면, 수화 화상 또는 설명 화상 등), 빛이나 진동 등에 의한 연출(예를 들면, 단말에 내장되는 램프의 점멸, 휴대폰의 바이브레이션 또는 단말에 접속된 펜 라이트에 의한 발광 등) 등의 콘텐츠를 생각할 수 있다. 제1 서브 콘텐츠는, 예를 들면, 메인 콘텐츠가 실연의 경우, 해당 실연에 연동하여 재생되는 자막 등의 텍스트 정보여도 된다.

또, 「제2 서브 콘텐츠」란 제1 서브 콘텐츠와 함께 메인 콘텐츠의 진행에 따라 재생되는 콘텐츠이다. 제2 서브 콘텐츠는, 예를 들면, 오퍼레이터 단말(100)에 있어서의 오퍼레이터의 조작 등에 기초하여, 스피커(300) 등의 극장 등의 시설에 설치되는 기기에 의해서 재생된다. 이와 같은 서브 콘텐츠로서는, 예를 들면, 소리(예를 들면, BGM 또는 효과음 등), 화상(예를 들면, 라이브 영상 또는 스크린 영상 등), 빛에 의한 연출(예를 들면, 스포트라이트나 형광봉 등에 의한 발광) 등의 콘텐츠를 생각할 수 있다. 제2 서브 콘텐츠에는, 제1 서브 콘텐츠의 재생을 제어하기 위한 워터마크 데이터가 삽입되어 있어, 제2 서브 콘텐츠의 재생에 의해서, 제1 서브 콘텐츠의 재생을 제어할 수 있다. 여기서 「워터마크 데이터」란 임의의 전자 워터마크 기술을 이용하여, 화상이나 음악 등의 콘텐츠에 삽입되는, 특정의 정보(본 예의 경우, 「동기 포인트 ID」)를 나타내는 데이터이다.

도 5는 미리 설정된 콘텐츠 재생의 스케줄을 나타내고 있다. 도 5에 나타내는 예에서는, 무대측에서는 동기 기준 타이밍인 실연 개시 시각 「00:00:00」을 기준으로 하여, 「BGM1」은 「00:05:00」, 「BGM2」는 「00:30:00」의 개시 예정 타이밍에서 재생되는 것이 스케줄링되어 있다.

한편, 유저 단말(200)에서는, 「자막 1」은 「00:12:00」, 「자막 2」는 「00:43:00」의 개시 예정 타이밍에서 재생되는 것이 스케줄링되어 있다. 또, 도 5에 있어서, 실연에 있어서의 「자막 2」를 개시시키고 싶은 포인트에 대해서, P의 동그라미 마크(이하, 「포인트 P」라고 함)를 부여한다. 해당 스케줄에 있어서는, 포인트 P의 타이밍과 「자막 2」의 개시 예정 타이밍이 맞도록 스케줄링되어 있다.

도 6의 무대측에 있어서는, 실연의 본 공연 당일에 있어서, 실연의 진행이, 실연자의 연기가 길어지는 등 하여 예정보다 지연되어 있는(본 예에서는, 1초 지연되어 있는 것으로 하는) 상황을 나타내고 있다. 지연의 발생 이후의 BGM의 재생은, 오퍼레이터가 지연을 고려하여 재생 타이밍을 수정하는 결과, 예정보다 5분씩 늦게 재생된다. 도 6에서는, 지연 이후에 재생되는 BGM의 재생 타이밍이 예정되어 있던 「00:30:00」보다 5분 지연되어 「00:35:00」에 재생되는 모습이 도시되어 있다.

한편, 도 6의 유저 단말(200)에 있어서는, 콘텐츠 재생 시스템이 해당 지연에 의한 진행의 어긋남을 흡수하여, 실연의 진행에 「자막 2」의 진행을 동기시키고 있는 상황을 나타내고 있다. 구체적으로는, 「BGM2」에 삽입된 워터마크 데이터로서 동기 포인트 ID 「ID:002」가 「BGM2」와 함께 출력되면, 유저 단말(200)에 있어서, (1) 해당 동기 포인트 ID를 검출하고, (2) 해당 검출된 동기 포인트 ID와 동기 포인트 ID와 해당 동기 포인트의 예정 타이밍을 대응지어 격납한 제1 테이블에 기초하여, 동기 포인트 ID 「ID:002」의 예정 타이밍 「00:30:00」을 취득하고, 해당 취득된 예정 타이밍과 해당 동기 포인트 ID가 검출된 타이밍 「00:35:00」의 차분(지연에 의한 어긋남 5분)을 취득하고, (3) 유저 단말(200)은 「자막 2」의 개시 타이밍을, 미리 설정된 개시 예정 타이밍 「00:43:00」에 대해서 해당 차분을 반영시킴으로써 「00:48:00」으로 판정하여, 해당 개시 타이밍에서 「자막 2」의 재생을 개시시킨다.

상기 구성에 의하면, 무대측의 실연 등의 메인 콘텐츠에 있어서 지연이 발생하여, 예정으로부터 진행 시간이 변동해도, 실연 등의 메인 콘텐츠의 지연이 발생한 진행에 맞춘 적절한 타이밍에서, 자막 등의 제1 서브 콘텐츠의 재생을 개시시킬 수 있다.

도 4는 유저 단말(200)의 기능 구성의 일례를 나타내는 도면이다. 유저 단말(200)은 검출부(210)과, 취득부(215)와, 판정부(220)와, 제어부(225)와, 기억부(230)를 구비한다. 도 4에 나타내는 각부는, 예를 들면, 기억 장치(115)의 기억 영역을 이용하거나, 기억 장치(115)에 격납된 프로그램(콘텐츠 재생 프로그램)을 프로세서(110)가 실행하거나 함으로써 실현할 수 있다.

검출부(210)는 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 워터마크 데이터로서 삽입되어 있는 동기 포인트 ID를 검출한다.

취득부(215)는 검출부(210)에서 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 동기 포인트의 타이밍을 취득한다. 취득부(215)는 해당 취득한 동기 포인트의 타이밍과 동기 기준 타이밍을 기준으로 한 동기 포인트 ID의 검출 타이밍의 차분을 취득한다.

판정부(220)는 취득부(215)에서 취득된 차분과 제2 테이블에 기초하여, 제1 서브 콘텐츠의 개시 타이밍을 판정한다.

제어부(225)는 판정부(220)에서 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠의 재생을 제어한다.

기억부(230)는 제1 테이블과 제2 테이블을 기억한다. 기억부(230)는, 예를 들면, 후술하는 제3 테이블을 기억해도 된다. 덧붙여, 기억부(230)는 각 테이블을 기억할 때는, RDB나 NoSQL 등의 데이터베이스 시스템을 이용해도 되고, 파일 시스템을 이용해도 된다. 기억부(230)는 예를 들면, 콘텐츠 재생 프로그램을 기억해도 된다.

＜테이블 구성＞

여기서, 도 7을 이용하여, 제1 테이블(410)과 제2 테이블(420)에 대해서 상세하게 설명한다. 덧붙여, 각 테이블은 이해를 용이하게 하기 위하여, 각 정보를 직접적으로 대응지어 하나의 테이블에서 격납하도록 표현하고 있지만, 이것으로 한정하지 않고, 복수의 테이블에 걸쳐 간접적으로 대응지어 격납하도록 해도 된다.

도 7에 나타내는 것처럼, 제1 테이블(410)은 동기 포인트 ID(412)와, 동기 예정 타이밍(414)을 대응지어 격납한다. 제1 테이블(410)은, 예를 들면, 동기 포인트 ID(412) 「001」과 해당 동기 포인트 ID가 특정하는 동기 예정 타이밍(414) 「00:05:00」을 대응지어 격납한다. 덧붙여, 동기 예정 타이밍(414)은 동기 기준 타이밍을 기준으로 하여, 예를 들면, 메인 콘텐츠에 대한 제1 서브 콘텐츠의 편성 또는 연출 등에 따라 임의의 타이밍 등을 설정하면 된다. 동기 예정 타이밍(414)은 구체적으로는, 동기 기준 타이밍으로부터 5초, 10초, 1분 등의 등간격으로 설정해도 되고, 각 BGM이 재생 개시가 되는 타이밍에서 설정해도 된다.

제2 테이블(420)은 동기 기준 타이밍을 기준으로 한 제1 서브 콘텐츠의 개시 예정 타이밍(422)을 격납한다. 제2 테이블(420)은 예를 들면, 개시 예정 타이밍(422)과 제1 서브 콘텐츠를 나타내는 정보(이하, 「제1 서브 콘텐츠 정보」라고 함)(424)를 대응지어 격납해도 된다. 제1 서브 콘텐츠 정보는, 예를 들면, 제1 서브 콘텐츠를 특정하기 위한 식별 정보 등이다. 제1 서브 콘텐츠 정보는, 예를 들면, 제1 서브 콘텐츠 ID, 제1 서브 콘텐츠의 타이틀명, 제1 서브 콘텐츠가 실장된 파일명, 파일 패스 등을 포함하여 구성해도 된다. 제2 테이블(420)은, 예를 들면, 제1 서브 콘텐츠의 개시 예정 타이밍(422) 「00:45:00」과 해당 개시 예정의 제1 서브 콘텐츠 정보 「영상 1」을 대응지어 격납해도 된다.

유저 단말(200)은 상기의 각부 외에, 콘텐츠 취득부(도시하지 않음)를 마련해도 된다. 콘텐츠 취득부는, 예를 들면, 유저 단말(200)에서 재생 제어되는 제1 서브 콘텐츠나 유저 단말(200)에서 실행되는 콘텐츠 재생 프로그램을, 예를 들면 인터넷이나 외부 매체를 통해서 취득하여, 기억부(230)에 격납해도 된다. 덧붙여, 제1 서브 콘텐츠는, 유저 단말(200)에 있어서, 반드시, 콘텐츠 취득부에 의해서 취득되어, 기억부(230)에 격납 등 되지 않아도 된다. 유저 단말(200)은 예를 들면, 다른 단말에 기억되어 있는 제1 서브 콘텐츠를, 유저 단말(200)로부터의 재생 제어 메시지의 송신에 의해서, 재생시켜도 된다.

＜4. 처리의 흐름＞

도 8은 유저 단말(200)에 있어서의 콘텐츠 재생 처리의 일례를 나타내는 순서도이다. 도 8에 나타내는 처리는, 예를 들면, 유저에 의한 콘텐츠 재생 프로그램이 실장된 애플리케이션에 대한 인스톨 리퀘스트 또는 해당 애플리케이션을 기동한 것을 트리거에 의해 개시된다. 덧붙여, 이하에 나타내는 처리의 순서는 일례이며, 적당히, 변경되어도 된다.

도 8에 나타내는 것처럼, 유저 단말(200)은 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 워터마크 데이터로서 삽입되어 있는 동기 포인트 ID를 검출한다(S701).

유저 단말(200)은 해당 검출된 동기 포인트 ID와 제1 테이블에 기초하여, 동기 포인트의 타이밍을 취득한다(S702). 유저 단말(200)은 해당 취득한 동기 포인트의 예정 타이밍과 동기 기준 타이밍을 기준으로 한 동기 포인트 ID의 검출 타이밍의 차분을 취득한다(S703). 유저 단말(200)은 해당 취득된 차분과 제2 테이블에 기초하여, 제1 서브 콘텐츠의 개시 타이밍을 판정한다(S704).

유저 단말(200)은 해당 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여 제1 서브 콘텐츠의 재생을 제어한다(S705).

이상 설명한 실시 형태는, 본 발명의 이해를 용이하게 하기 위한 것이며, 본 발명을 한정하여 해석하기 위한 것은 아니다. 실시 형태가 구비하는 각 요소 및 그것의 배치, 재료, 조건, 형상 및 사이즈 등은, 예시한 것으로 한정되는 것은 아니고 적당히 변경할 수 있다. 또, 상이한 실시 형태에서 나타낸 구성끼리를 부분적으로 치환하거나 또는 조합하는 것이 가능하다.

(변형예)

덧붙여, 본 발명을 상기 실시 형태에 기초하여 설명해 왔지만, 본 발명은 상기 실시 형태로 한정되지 않는다. 이하와 같은 경우도 본 발명에 포함된다.

(1) 상기 실시 형태에서는, 메인 콘텐츠로서 진행 시간이 변동하는 실연 등을 예로 했지만, 본 발명은 예를 들면, 진행 시간이 실질적으로 변동하지 않는 영화나 라이브 영상 등의 콘텐츠에 있어서도 적용하는 것이 가능하다. 예를 들면, 메인 콘텐츠가 영화인 경우, 제1 서브 콘텐츠는 영화의 자막 등으로 해도 된다. 메인 콘텐츠가 진행 시간이 변동하지 않는 콘텐츠여도, 메인 콘텐츠를 재생시키는 기기와, 오퍼레이터 단말(100)과, 유저 단말(200)의 사이에서 시스템 시각의 어긋남을 발생시키는 경우가 있고, 본 발명을 이용함으로써, 각 콘텐츠 간의 이와 같은 어긋남을 실질적으로 해소할 수 있다. 덧붙여, 본 발명을 이용할 때에는, 유저 단말(200)의 시스템 시각을 이용하여, 해당 시스템 시각부터 취득한 동기 포인트 ID의 검출 타이밍과, 제1 테이블(410)에 해당 동기 포인트 ID에 대응지어져 있는 동기 포인트의 예정 타이밍의 차분을 이용하여 제1 서브 콘텐츠를 재생 제어한다.

(2) 상기 실시 형태에서는, 제어부(225)는 판정부(220)에서 판정된 개시 타이밍에서 제1 서브 콘텐츠를 재생 제어하지만, 예를 들면, 제1 서브 콘텐츠에 대해서 재생의 전제가 되는 적어도 하나의 제2 서브 콘텐츠가 설정되어 있는 경우, 전제가 되는 제2 서브 콘텐츠에 삽입된 동기 포인트 ID가 검출된 것을 조건으로, 해당 제1 서브 콘텐츠를 재생하도록 제어해도 된다.

여기서, 도 9와 도 10을 이용하여, 제어부(225)의 상기 구성에 대해 설명한다. 도 9는 콘텐츠 재생 제어에 있어서의 사상의 일례의 개요를 나타내는 모식도이다. 도 10은 도 9의 사상에 대한 콘텐츠 재생 시스템에 있어서의 콘텐츠 재생 제어의 개요를 나타내는 모식도이다.

도 9에 나타내는 것처럼, 제1 서브 콘텐츠에 있어서의 「자막 1」과「자막 2」에 대해서, 「자막 1」에 이어서, 실연의 포인트 P의 타이밍 및 제2 서브 콘텐츠의 「BGM2」에 맞춰 「자막 2」를 재생시키도록 자동진행(自走)시키고 있었다고 한다. 해당 자동진행 동안, 메인 콘텐츠의 실연에 있어서 어떠한 지연(본 예에서의 지연은 3분으로 함)이 발생했을 경우, 유저 단말(200)에 있어서 제2 서브 콘텐츠 「BGM2」의 동기 포인트 ID가 검출되기 전에 「자막 2」가 실연에 대해서 「00:20:00」에 먼저 출력되어 버린다. 그 후, 「BGM2」가 검출되면, 해당 검출 타이밍에 있어서 지연 발생에 의한 차분을 취득하여, 개시 타이밍을 판정하기 때문에, 재차, 「00:23:00」에 「자막 2」가 출력되어 버리는 사상을 생각할 수 있다. 덧붙여, 여기서 「자동진행」이란 유저 단말(200) 등에 있어서, 외부로부터의 송신 메시지 등의 트리거없이, 자(自) 단말 내에서 각 처리를 개시하여, 실행시켜 가는 것을 말하며, 예를 들면, 스케쥴러에 미리 제1 서브 콘텐츠의 재생 스케줄을 등록하고, 해당 등록된 재생 스케줄에 기초하여, 제1 서브 콘텐츠를 차례로 재생시켜 가는 것을 말한다.

해당 사상에 대해, 도 10에 나타내는 것처럼, 제어부(225)는 제1 서브 콘텐츠 「자막 2」에 대해서 재생의 전제가 되는 제2 서브 콘텐츠로서 「BGM2」를 미리 설정하고, 해당 전제가 되는 「BGM2」의 동기 포인트 「ID:001」이 검출부(210)에서 검출된 것을 조건으로, 「자막 2」를 재생하도록 제어한다. 해당 제어에 의해서, 실연의 진행이 지연되어 버려도, 「자막 2」의 재생을 대기시키고, 「BGM2」의 동기 포인트 ID가 검출되고 처음으로 「자막 2」를 재생시킬 수 있다. 이와 같은 양태에 의하면, 제1 서브 콘텐츠의 재생을 자동진행시키고 있는 동안에 있어서, 메인 콘텐츠의 재생에서 지연이 생겨도, 메인 콘텐츠의 진행에 따른 제2 서브 콘텐츠의 진행에 맞춰 제1 서브 콘텐츠를 재생할 수 있다. 이 때문에, 유저에게 있어서 사용성이 높은 콘텐츠 재생 시스템을 제공할 수 있다.

또, 도 11을 이용하여, 제어부(225)의 상기 구성에 있어서의 재생 제어 처리의 일례에 대해 설명한다. 도 11에 나타내는 것처럼, 이벤트 드리븐(event driven) 또는 고정 사이클로, 유저 단말(200)은 현재 시각(예를 들면, 유저 단말(200)의 시스템 시각 등)을 취득하고, 해당 취득한 현재 시각에 있어서 개시 타이밍으로 되어 있는 제1 서브 콘텐츠가 존재하는지 판정한다(S711). 해당 개시 타이밍으로 되어 있는 제1 서브 콘텐츠가 존재하지 않는 경우(S711의 NO), 처리를 종료한다.

유저 단말(200)은 해당 개시 타이밍으로 되어 있는 제1 서브 콘텐츠가 존재하는 경우(S711의 YES), 해당 제1 서브 콘텐츠에 대해서 재생의 전제가 되는 제2 서브 콘텐츠가 설정되어 있는지 판정한다(S712). 해당 전제가 되는 제2 서브 콘텐츠가 설정되어 있는 경우(S712의 YES), 해당 전제가 되는 제2 서브 콘텐츠에 삽입된 동기 포인트 ID가 검출되었는지 판정한다(S713). 유저 단말(200)은 해당 동기 포인트 ID가 검출되어 있다고 판정했을 경우(S713의 YES), 상기 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠를 재생한다(S714). 한편, 해당 동기 포인트 ID가 검출되어 있지 않다고 판정했을 경우(S713의 NO), 처리를 종료한다.

유저 단말(200)은 해당 제1 서브 콘텐츠에 대해서 재생의 전제가 되는 제2 서브 콘텐츠가 설정되어 있지 않은 경우(S712의 NO), 상기 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 제1 서브 콘텐츠를 재생한다(S714).

(3) 상기 실시 형태에서는, 검출부(210)가 검출하는 워터마크 데이터는, 예를 들면, 비가청 영역의 소리에 삽입된 데이터를 포함해도 된다. 이와 같은 양태에 의하면, BGM 등의 제2 서브 콘텐츠가 배치되어 있지 않은 구간에 있어서도, 해당 비가청 음역의 소리이면 유저가 알아채는 일 없이, 해당 소리에 삽입된 동기 포인트 ID의 워터마크 데이터를 출력시킬 수도 있다.

(4) 상기 실시 형태에서는, 제1 테이블과 제2 테이블을 이용하여 제어부(225)에서 콘텐츠의 재생 제어를 하는 예를 했지만, 본 발명은, 예를 들면, 동기 포인트 ID와 제1 서브 콘텐츠 정보를 대응지어 격납하는 제3 테이블을 추가로 구비하고, 해당 검출된 동기 포인트 ID와 제3 테이블에 기초하여, 해당 동기 포인트 ID에 대응지어진 제1 서브 콘텐츠 정보가 나타내는 제1 서브 콘텐츠의 재생을 제어하는 제2 제어부를 구비해도 된다. 제2 제어부는, 예를 들면, 제2 테이블에, 해당 검출된 동기 포인트 ID가 격납되어 있지 않고, 제3 테이블에 해당 검출된 동기 포인트 ID가 격납되어 있는 경우에, 해당 검출된 동기 포인트 ID와 제3 테이블에 기초하여, 해당 동기 포인트 ID에 대응지어진 제1 서브 콘텐츠의 재생을 제어해도 된다.

상기 구성에 의하면, 예를 들면, (1) 종래 기술과 같이, 제1 서브 콘텐츠를 자동진행시키고 싶은 구간에 있어서는, 제1 테이블(410) 및 제2 테이블(420)을 이용하고, 또한, (2) 제1 서브 콘텐츠를 제2 서브 콘텐츠의 재생 타이밍(워터마크 데이터의 삽입 타이밍 등)에 맞춰 개시시키고 싶은 구간에 있어서는, 제1 테이블(410) 및 제3 테이블을 이용함으로써, 두 개의 종류의 제1 서브 콘텐츠의 재생 제어를 실현할 수 있다. 이와 같은 구성에 의하면, 다양한 배리에이션의 콘텐츠 재생 제어를, 유저의 조작 입력없이 실현할 수 있다.

(5) 상기 변형예(4)에서는, 제3 테이블은 제1 테이블(410)과는 별도로 하나의 테이블로서 구성하고 있지만, 예를 들면, 제1 테이블(410)과 통합하여 하나의 테이블을 구성해도 된다. 제3 테이블은, 구체적으로는, 제1 테이블(410)과 통합하고, 제1 동기 포인트 ID를 주키로 하고, 동기 예정 타이밍과, 제1 서브 콘텐츠 정보의 3개의 컬럼으로 구성해도 되고, 동기 예정 타이밍과 제1 서브 콘텐츠 정보를 하나의 컬럼으로 공유하도록 구성해도 된다. 이와 같은 구성에 의하면, 참조처의 테이블수를 줄일 수 있어, 처리 효율이 좋은 콘텐츠 재생 시스템을 제공할 수 있다.

(6) 상기 실시 형태에서는, 제1 서브 콘텐츠(자막)를 직렬로 재생하는 예에 대해 설명하고 있지만, 도 12에서 나타내는 것처럼, 제1 서브 콘텐츠를 제1 서브 콘텐츠 1과 제1 서브 콘텐츠 2로 크게 나누고, 예를 들면, 하나의 유저 단말(200)에 있어서 병렬로 복수의 제1 서브 콘텐츠를 동시에 재생하도록 제어해도 된다. 또, 다른 예로서, 복수의 유저 단말(200)의 사이에서, 유저 단말(200a)에서는 제1 서브 콘텐츠 1을 재생하도록, 또, 다른 쪽의 유저 단말(200b)에서는 제1 서브 콘텐츠 2를 재생하도록, 단말마다 제어해도 된다. 또, 도 12에서 나타내는 것처럼, 무대측에 있어서, 덧붙여, 「BGM1」에는 동기 포인트 ID 「ID:001」 및 「ID:002」가 설정되고, 「BGM2」에는 동기 포인트 ID 「ID:003」이 설정되어 있도록, 제2 서브 콘텐츠의 단위와, 설정되어 있는 동기 포인트의 수는 1대 1로 한정하지 않고, 1대 다(多)여도, 다 대 1이어도, 다 대 다여도 어느 것이어도 된다.

상기 구성에 의하면, 하나의 워터마크 데이터에 대해서, 유저 단말(200)측에서 다양하게, 또한, 유연하게, 제1 서브 콘텐츠를 재생할 수 있으므로, 확장성이 높은 콘텐츠 재생 시스템을 제공할 수 있다.

(7) 상기 실시 형태에서는 나타내고 있지 않지만, 유저 단말(200)은, 예를 들면, 스마트 폰의 알림 램프나 LED 램프 등의 발광 장치를 구비해도 된다. 발광 장치는, 예를 들면, 제1 서브 콘텐츠가 빛에 의한 연출을 포함하는 경우, 해당 연출을 위한 빛은, 해당 발광 장치에 의해서 발광되어도 된다. 이러한 구성에 의하면, 유저 단말(200)을 이용하여 메인 콘텐츠의 진행에 맞춰, 유저에게 있어서 취향성이 높은, 또한, 공연장(會場) 전체에서 다양한 연출을 실현할 수 있는 콘텐츠 재생 시스템을 제공할 수 있다.

(8) 상기 실시 형태에서는, 전자 워터마크 기술을 이용하여 동기 포인트 ID를 검출시키는 예를 설명했지만, 음성 핑거프린트 기술을 이용해도 된다. 「음성 핑거프린트 기술」이란 오리지널이 되는 디지털 음원으로부터 음성 파형의 특징을 전자적으로 추출하고, 오리지널의 음원보다도 작은 데이터(핑거프린트)로서 해당 추출된 특징을 취급하는 디지털 음성 신호 처리 기술을 말한다. 콘텐츠 재생 시스템은, 예를 들면, 음성 입력 장치(125)가 접수한 소리의 파형 등의 특징량을 추출하고, 기억 장치(115)에 미리 기억시킨 소리의 파형의 교사 데이터와 대조함으로써, 동기 포인트 ID를 판정하여, 검출해도 된다.

상기 구성에 의하면, 제2 서브 콘텐츠의 오리지널로부터 얻어지는 식별성 있는 특징을 이용할 수 있기 때문에, 제2 서브 콘텐츠에 워터마크 데이터를 삽입하지 않고, 동기 포인트를 검출할 수 있다. 이것에 의해, 범용성이 높은 콘텐츠 재생 시스템을 제공할 수 있다.

100…오퍼레이터 단말 110…프로세서
115…기억 장치 120…통신 인터페이스
125…음성 입력 장치 130…음성 출력 장치
135…조작 입력 장치 140…표시 출력 장치
150…입력부 155…출력부
160…제어부 165…기억부
200, 200a, 200b, 200c…유저 단말 210…검출부
215…취득부 220…판정부
225…제어부 230…기억부
300, 300a, 300b…스피커 410…제1 테이블
420…제2 테이블

Claims (7)

1. 컴퓨터에,
   워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 제1 타이밍을 대응지어 격납하는 제1 테이블과,
   제1 서브 콘텐츠와, 상기 동기 기준 타이밍을 기준으로 한 제2 타이밍을 대응지어 격납하는 제2 테이블로서, 상기 제2 타이밍은 상기 제1 타이밍과 독립적으로 설정되는 상기 제2 테이블과,
   상기 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 상기 워터마크 데이터로서 삽입되어 있는 상기 동기 포인트 ID를 검출하는 검출 기능과,
   상기 검출된 동기 포인트 ID와 상기 제1 테이블에 기초하여, 상기 검출된 동기 포인트 ID에 대응하는 상기 제1 타이밍을 취득하고, 해당 취득한 제1 타이밍과 상기 동기 기준 타이밍을 기준으로 한 상기 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 취득 기능과,
   상기 제1 서브 콘텐츠에 대해, 상기 취득된 차분과, 상기 제2 테이블에 있어서 상기 제1 서브 콘텐츠에 대응하는 상기 제2 타이밍에 기초하여, 개시 타이밍을 판정하는 판정 기능과,
   상기 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 상기 제1 서브 콘텐츠의 재생을 제어하는 제어 기능을 실현시키기 위한,
   기록 매체에 저장된 콘텐츠 재생 프로그램.
2. 청구항 1에 있어서,
   상기 제어 기능은, 상기 제1 서브 콘텐츠에 대해서 재생의 전제가 되는 적어도 하나의 상기 제2 서브 콘텐츠가 설정되어 있는 경우, 상기 전제가 되는 제2 서브 콘텐츠에 삽입된 상기 동기 포인트 ID가 검출된 것을 조건으로, 상기 제1 서브 콘텐츠를 재생하도록 제어하는
   기록 매체에 저장된 콘텐츠 재생 프로그램.
3. 청구항 1 또는 청구항 2에 있어서,
   상기 워터마크 데이터는 비가청 영역의 소리에 삽입된 데이터를 포함하는, 기록 매체에 저장된 콘텐츠 재생 프로그램.
4. 청구항 3에 있어서,
   상기 메인 콘텐츠는 생물에 의한 실연(實演)을 포함하고, 상기 제1 서브 콘텐츠는 상기 제2 서브 콘텐츠와 함께 상기 메인 콘텐츠의 진행에 따라 재생되는 텍스트 정보이고, 상기 제2 서브 콘텐츠는 상기 메인 콘텐츠의 진행에 따라 재생되는 음악인, 기록 매체에 저장된 콘텐츠 재생 프로그램.
5. 청구항 3에 있어서,
   상기 동기 포인트 ID와, 상기 제1 서브 콘텐츠를 나타내는 정보를 대응지어 격납하는 제3 테이블과,
   상기 동기 포인트 ID가 상기 검출 기능으로 검출되었을 경우, 상기 검출된 동기 포인트 ID와 상기 제3 테이블에 기초하여, 상기 동기 포인트 ID에 대응지어진 상기 정보가 나타내는 상기 제1 서브 콘텐츠의 재생을 제어하는 제2 제어 기능을 실현시키기 위한, 기록 매체에 저장된 콘텐츠 재생 프로그램.
6. 컴퓨터가,
   워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 제1 타이밍을 대응지어 제1 테이블에 격납하는 스텝과,
   제1 서브 콘텐츠와, 상기 동기 기준 타이밍을 기준으로 한 제2 타이밍을 대응지어 제2 테이블에 격납하는 스텝으로서, 상기 제2 타이밍은 상기 제1 타이밍과 독립적으로 설정되는 스텝과,
   상기 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 상기 워터마크 데이터로서 삽입되어 있는 상기 동기 포인트 ID를 검출하는 스텝과,
   상기 검출된 동기 포인트 ID와 상기 제1 테이블에 기초하여, 상기 검출된 동기 포인트 ID에 대응하는 상기 제1 타이밍을 취득하고, 해당 취득한 제1 타이밍과 상기 동기 기준 타이밍을 기준으로 한 상기 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 스텝과,
   상기 제1 서브 콘텐츠에 대해, 상기 취득된 차분과, 상기 제2 테이블에 있어서 상기 제1 서브 콘텐츠에 대응하는 상기 제2 타이밍에 기초하여, 개시 타이밍을 판정하는 스텝과,
   상기 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 상기 제1 서브 콘텐츠의 재생을 제어하는 스텝을 포함하는, 콘텐츠 재생 방법.
7. 유저 단말과, 오퍼레이터 단말을 포함하는 콘텐츠 재생 시스템으로서,
   상기 유저 단말은
   워터마크 데이터로서 삽입된 동기 포인트 ID와, 메인 콘텐츠의 동기 기준 타이밍을 기준으로 한 제1 타이밍을 대응지어 격납하는 제1 테이블과,
   제1 서브 콘텐츠와, 상기 동기 기준 타이밍을 기준으로 한 제2 타이밍을 대응지어 격납하는 제2 테이블로서, 상기 제2 타이밍은 상기 제1 타이밍과 독립적으로 설정되는 상기 제2 테이블과,
   상기 메인 콘텐츠의 진행에 따라 재생되는 제2 서브 콘텐츠로부터, 상기 워터마크 데이터로서 삽입되어 있는 상기 동기 포인트 ID를 검출하는 검출부와,
   상기 검출된 동기 포인트 ID와 상기 제1 테이블에 기초하여, 상기 검출된 동기 포인트 ID에 대응하는 상기 제1 타이밍을 취득하고, 해당 취득한 제1 타이밍과 상기 동기 기준 타이밍을 기준으로 한 상기 동기 포인트 ID의 검출 타이밍의 차분을 취득하는 취득부와,
   상기 제1 서브 콘텐츠에 대해, 상기 취득된 차분과 상기 제2 테이블에 있어서 상기 제1 서브 콘텐츠에 대응하는 상기 제2 타이밍에 기초하여, 개시 타이밍을 판정하는 판정부와,
   상기 판정된 제1 서브 콘텐츠의 개시 타이밍에 기초하여, 상기 제1 서브 콘텐츠의 재생을 제어하는 제어부를 구비하고,
   상기 오퍼레이터 단말은
   오퍼레이터로부터의 제2 서브 콘텐츠의 재생에 관한 입력을 접수하는 입력부와,
   상기 접수한 입력 내용에 기초하여, 제2 서브 콘텐츠의 재생을 제어하는 제어부를 구비하는, 콘텐츠 재생 시스템.

Images