WO2006134883A1

WO2006134883A1 - コンテンツタグ付け支援装置およびコンテンツタグ付け支援方法

Info

Publication number: WO2006134883A1
Application number: PCT/JP2006/311773
Authority: WO
Inventors: Mitsuru Endo; Hiroyasu Kuwano; Akira Ishida
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2005-06-13
Filing date: 2006-06-12
Publication date: 2006-12-21
Also published as: US20090103901A1; JP2007025648A; JP4659681B2; EP1892717A1

Abstract

　一人でタグ付け作業とタグ修正作業を行うことができ、かつ、作業時間の増加を抑制することができるコンテンツタグ付け支援装置。この装置において、音声認識手段(104)は、入力された音声を認識処理する。タグ生成手段(103)は、音声認識処理で得られたデータを、コンテンツ再生手段(101)が再生するコンテンツにタグとして付与する。タグ修正手段(108)は、タグ修正情報をタグ生成手段(103)へ送るとともに、タグ修正開始終了通知情報をコンテンツ再生制御手段(109)へ送る。コンテンツ再生制御手段(109)は、タグ修正作業の開始と同期してコンテンツの再生を一時停止し、タグ修正作業の終了と同期してコンテンツの再生の再開を行うように、コンテンツ再生手段(101)を制御する。

Description

明細書

コンテンツタグ付け支援装置およびコンテンツタグ付け支援方法技術分野

[0001] 本発明は、コンテンツにタグ付けを行うコンテンツタグ付け支援装置およびコンテンッタグ付け支援方法に関する。

背景技術

[0002] 映像データや音声データなどの時間軸を有するディジタルコンテンツ（以下単に「コンテンッ」という）に対して、時間軸に対応付けた情報を付加する技術が、従来より存在している。「タグ付け」と呼ばれるこのような技術は、コンテンツの二次利用の利便性を向上させることから、近年、注目されている。従来のコンテンツタグ付け支援装置としては、音声認識を利用して、発声によるタグ付け作業を行うものがある（例えば、特許文献 1参照)。

[0003] また、図 1は、従来のコンテンツタグ付け支援装置の一例を示すブロック図である。

[0004] 図 1に示す従来のコンテンツタグ付け支援装置 10において、コンテンツ再生手段 1 1は、コンテンツをデコードし、再生信号をモニタ手段 12に送って表示するとともに、コンテンツの時間軸を示すタイムコードをタグ生成手段 13に送る。音声認識手段 14 は、マイクなどの入力手段 16から入力された音声を認識し、音声認識結果をタグ生成手段 13に送る。タグ生成手段 13では、音声認識結果とタイムコードとを結びつけ、モニタ手段 12に送ってタグを付与した映像を表示する（タグ付け作業)。

[0005] タグ修正手段 15は、モニタ手段 12に表示されたタグに修正の必要がある場合に、作業者がキーボードやマウスなどの入力手段 17から入力されたタグ修正情報に基づき、タグの修正をタグ生成手段 13に指示する（タグ修正作業)。

[0006] ところで、近年、ハードディスクや DVD— RAM (Digital Video Disc - Random Acce ss Memory)などのメディアに録画'再生する巿販製品には、いわゆる「追つかけ再生」という機能が搭載されている。この機能によれば、映像を録画しながら、録画中のコンテンッを、遅れて頭力も再生したり、録画済の時間内で早送りするなど、様々な再生制御を行うことができる。 [0007] このようなコンテンツのタグ（またはメタデータと呼ぶ）については、スポーツ中継などの場合、試合後すぐにタグが欲し、と、う要求がある。

[0008] 従来のコンテンツタグ付け支援装置においては、発声によるタグ付け作業において、誤認識などの不都合が生じた場合に、タグ修正作業が必要となる。

特許文献 1：特開 2004— 86124号公報 (第 0012段落〜第 0015段落、図 1 ) 発明の開示

発明が解決しょうとする課題

[0009] し力しながら、図 1に示す従来のコンテンツタグ付け支援装置においては、タグ付け作業とタグ修正作業を一人で同時に行うことが困難であるため、両作業をタグ発声者とタグ修正者の二人体制で行う必要があった。

[0010] もし、それらの作業を一人で行おうとすると、コンテンツ再生およびタグ付け作業が終了した後に、タグ修正作業を行うことになる。ところが、この場合、タグが正確かを確認し、間違っている場合には正解を思い出して修正するという時間が必要になる。または、コンテンツ再生およびタグ付け作業の途中で、タグ修正作業を行うことも考えられる。ところが、この場合には、タグ修正作業中にコンテンツ再生位置が先に進んでしまわないように、タグ付け作業に合わせてコンテンツを一時停止しておく必要がある。すると、各種の操作ボタンの間を、マウスなどを移動させては、何度も操作するという時間と、修正そのもののための作業時間が別途必要になる。

[0011] 本発明の目的は、前記従来の課題を解決するためになされたもので、一人の作業者でタグ付け作業とタグ修正作業を行うことができ、かつ、タグ修正のための作業時間の増加を抑制することができるコンテンツタグ付け支援装置およびコンテンツタグ付け支援方法を提供することである。

課題を解決するための手段

[0012] 本発明のコンテンツタグ付け支援装置は、コンテンツのタグ付け作業を支援するコンテンッタグ付け支援装置において、音声を入力する音声入力手段と、入力された音声を認識処理する音声認識手段と、コンテンツを再生するコンテンツ再生手段と、入力された音声を認識処理して得られたデータを、当該音声が入力された時のコンテンッの再生位置に関連付けて、コンテンツのタグとして出力するタグ生成手段と、コンテンッに付与されたタグを修正するためのタグ修正情報を、前記タグ生成手段に出力するタグ修正手段と、コンテンツの再生を制御するための再生制御情報を、前記コンテンツ再生手段に出力するコンテンツ再生制御手段と、を有し、前記タグ修正手段は、前記タグ修正情報に基づくタグ修正作業の開始および終了を通知するタグ修正開始終了通知情報を、前記コンテンツ再生制御手段に出力し、前記コンテンツ再生制御手段は、前記タグ修正手段によって出力されるタグ修正開始終了通知情報に基づいて、タグ修正作業の開始と同期してコンテンツの再生を一時停止し、タグ修正作業の終了と同期してコンテンツの再生を再開するように前記コンテンツ再生手段を制御する構成を採る。

[0013] 本発明のコンテンツタグ付け支援方法は、コンテンツのタグ付け作業を支援するコンテンッタグ付け支援方法にぉ、て、再生が開始されたコンテンツに付与されるタグを修正するためのタグ修正作業の開始を監視するタグ修正開始監視ステップと、前記タグ修正開始監視ステップでタグ修正作業の開始が検出されると、コンテンツの再生を一時停止させるコンテンツ再生一時停止ステップと、前記コンテンツ再生一時停止ステップでコンテンツの再生が一時停止されると、前記タグ修正作業の終了を監視するタグ修正終了監視ステップと、前記タグ修正終了監視ステップでタグ修正作業の終了が検出されると、コンテンツの再生を再開するコンテンツ再生再開ステップと、を有するようにした。

発明の効果

[0014] 本発明によれば、一人の作業者で、タグ付け作業とタグ修正作業を行っても、タグ修正作業の付カ卩による作業時間の増加を抑制することができる。

図面の簡単な説明

[0015] [図 1]従来のコンテンツタグ付け支援装置の構成の一例を示すブロック図

[図 2]本発明の一実施の形態に係るコンテンツタグ付け支援装置の構成を示すブロック図

[図 3]本実施の形態におけるコンテンツタグ付け支援装置のタグ付け画面の一例を示す図

[図 4]本実施の形態におけるコンテンツタグ付け支援装置のタグ確認画面の一例を示す図

[図 5]本実施の形態におけるコンテンツタグ付け支援装置のタグ修正画面の一例を示す図

[図 6]本実施の形態におけるコンテンツタグ付け支援装置のタグ付け作業の手順を示すフローチャート

[図 7]図 6のタグ修正作業の手順を示すフローチャート

[図 8]本実施の形態におけるコンテンツタグ付け支援装置の再生速度設定画面の一例を示す図

発明を実施するための最良の形態

[0016] 以下、本発明の実施の形態について、図面を参照しながら説明する。

[0017] 図 2は、本発明の一実施の形態に係るコンテンツタグ付け支援装置の構成を示すブロック図である

[0018] 図 2に示すように、本実施の形態におけるコンテンツタグ付け支援装置 100は、コンテンッ再生手段 101と、モニタ手段 102と、タグ生成手段 103と、音声認識手段 104 と、入力手段 106、 107と、タグ修正手段 108と、コンテンツ再生制御手段 109とを備える。

[0019] コンテンツ再生手段 101は、コンテンツをデコードし、再生信号をモニタ手段 102に送って表示するとともに、タイムコードをタグ生成手段 103に送る。

[0020] 音声認識手段 104は、マイクなど、音を入力するための入力手段 106から入力された音声を認識し、音声認識結果をタグ生成手段 103に送る。具体的には、認識した音声を逐次テキストイ匕して、テキストデータをタグ生成手段 103へ出力する。

[0021] タグ生成手段 103は、音声認識結果とタイムコードとを結びつけ、モニタ手段 102 に送ってタグを付与した映像を表示する。すなわち、タグ生成手段 103は、音声をテキストイ匕した情報と、そのテキストデータに関連するコンテンツのタイムコードとを結びつけ、これらテキストデータとタイムコードとの組を、タグとしてコンテンツに付与する。例えば、モニタ手段 102に映った物体の名前が発声された場合、その物体が映っている時刻が、タイムコードとなる。また、このタイムコードと、発生された名前の音声を示すテキストデータとが、タグとしてコンテンツに付加されるとともに、モニタ手段 102 に表示される。なお、タグ生成手段 103は、音声が入力手段 106に入力されてから対応するテキストデータがタグ生成手段 103に入力されるまでに要する時間を考慮して、タグとして出力するタイムコードを、所定時間分だけ戻すようにしてもよい。

[0022] モニタ手段 102に表示されたタグに修正の必要がある場合には、作業者によって、キーボードやマウスなどの入力手段 107を介して修正内容が入力される。

[0023] タグ修正手段 108は、入力手段 107からの入力情報に基づき、タグを修正する内容を有するタグ修正情報をタグ生成手段 103に送る。さらに、タグ修正手段 108は、タグ修正の開始と終了などを通知する情報であるタグ修正開始終了通知情報を出力する。

[0024] コンテンツ再生制御手段 109は、タグ修正手段 108から出力されるタグ修正開始終了通知情報に基づ、て、コンテンツの再生および再生速度を制御する再生制御情報をコンテンツ再生手段 101に送る。再生制御情報は、タグ修正の開始と同期してコンテンッの再生を一時停止し、タグ修正の終了と同期してコンテンツの再生の再開を自動的に行うように制御するための情報である。

[0025] モニタ手段 102は、コンテンツ再生手段 101から入力される再生信号およびタグ生成手段 103から入力されるタグに基づいて、タグ付け作業を行うためのタグ付け画面を構成する。また、タグ修正の必要の有無を作業者に対して確認させるためのタグ確認画面を構成し、タグ付け画面と共に表示する。さらに、モニタ手段 102は、タグ修正が必要となった際に、タグを修正するためのタグ修正画面を構成し、表示する。

[0026] コンテンツタグ付け支援装置 100は、図示しな!、が、 CPU (Central Processing Unit )、 CPUが実行する制御プログラムを格納した ROM (Read Only Memory)、および C PUの作業用メモリとして機能する RAM (Random Access Memory)を備えている。すなわち、図 2に示すコンテンツタグ付け支援装置 100の各部の機能は、 CPUが制御プログラムを実行することにより実現される。

[0027] まず、モニタ手段 102に表示される各画面について説明する。

[0028] 図 3は、モニタ手段 102に設けられたユーザーインターフェースとしてのタグ付け画面の一例を示す図である。

[0029] 図 3に示すタグ付け画面 200には、コンテンツ表示画面 201、タグ表示画面 202、録画開始ボタン 203、録画時間表示バー 204、再生時間表示バー 205、音声認識開始ボタン 206、前方スキップボタン 207、停止ボタン 208、一時停止ボタン 209、再生開始ボタン 210、高速再生ボタン 211、および後方スキップボタン 212が配置されている。

[0030] コンテンツ表示画面 201は、再生されるコンテンツを表示し、タグ表示画面 202は、再生されるコンテンツに付加されたタグのうち最新のものを表示する。表示されるタグは、上記したように、タイムコードとテキストデータにより構成される。

[0031] 録画開始ボタン 203は、録画を開始および終了するためのものであり、音声認識開始ボタン 206は、音声認識を開始および終了するためのものである。録画時間表示バー 204は、コンテンツの生成の対象となる映像の録画時間を表示し、再生時間表示バー 205は、録画された映像の再生（以下単に「再生」と!、う）の時間を表示する。前方スキップボタン 207は、前方への再生のスキップを行うためのものであり、後方スキップボタン 212は、後方への再生のスキップを行うためのものである。また、高速再生ボタン 211は、再生を高速に行うためのものである。

[0032] なお、図 3に示す各種のボタンとバーは、 GUI (Graphical User Interface)が採用されている。したがって、ボタン操作による動作開始などは、マウスなどを用いてマウスポインタ 220を移動させて所定のボタンをクリックすることで行われることになる。以降、「クリックする」ことを「押す」と便宜上表現することにする。

[0033] 図 4は、モニタ手段 102に設けられたタグ確認画面の一例を示す図である。

[0034] 図 4に示すタグ確認画面 300には、タグ履歴画面 301とタグ修正ボタン 302が設けられている。タグ履歴画面 301は、コンテンツに付加されたタグの履歴を表示する。また、タグ修正ボタン 302は、タグ履歴画面 301に表示されたタグのいずれを修正するかを選択するためのものである。なお、タグ確認画面 300も、コンテンツ表示画面 20 1と同様の GUIが採用されて、る。

[0035] 図 5は、モニタ手段 102に設けられたタグ修正画面の一例を示す図である。

[0036] 図 5に示すタグ修正画面 400には、タグ修正前画面 401、タグ修正後画面 402、および終了ボタン 403が設けられている。タグ修正前画面 401は、タグ確認画面 300で修正することが選択されたタグの内容を表示する。タグ修正後画面 402は、タグ修正前画面 401と同じタグをコピーして表示し、表示内容に対する修正を受け付ける。終了ボタン 403は、タグ修正後画面 402の修正後の表示内容でタグを修正することを決定するためのものである。なお、タグ修正画面 400も、コンテンツ表示画面 201およびタグ確認画面 300と同様の GUIが採用されている。

[0037] 次に、上記コンテンツタグ付け支援装置 100を用いたタグ付け作業およびタグ修正作業の各手順について、図 6および図 7に示すフローチャートを用いて説明する。

[0038] まず、タグ付け作業の手順について、図 6を用いて説明する。

[0039] はじめに、映像信号が撮影カメラ（図示せず)など力も入力され、その映像がコンテンッ表示画面 201に表示される。作業者は、コンテンツ表示画面 201を見ながら、録画開始ボタン 203を押す。コンテンツタグ付け支援装置 100の録画手段（図示せず）は、録画開始ボタン 203が押されると、コンテンツ録画を開始する（ステップ S1100)

[0040] 続いて、コンテンツ再生手段 101は、再生開始ボタン 210が押されると、コンテンツ再生を開始する (ステップ S1200)。具体的には、前記した再生信号を出力することにより、モニタ手段 102に対して、図 3に示すタグ付け画面 200を表示させる。

[0041] 続いて、音声認識手段 104は、音声認識開始ボタン 206が押されると、音声認識を開始する（ステップ S 1300)。

[0042] 次に、作業者は、コンテンツ表示画面 201に表示された再生映像を見ながら、付けたいタグを発声し、作業を終了するまで、タグを生成するための発声を繰り返す。すなわち、音声認識手段 104は、このような発声による音声が入力されるのを監視する (ステップ S 1400)。

[0043] 例えば、テニスの試合の映像であれば、作業者は、「サーブ」、「バックハンド」、「ボレー」、「フォアハンド」、「スマッシュ」などの、タグを生成するための単語を発声する。音声認識手段 104は、入力手段 106を介して音声が入力されると (ステップ S 1400 : YES)、入力された音声のそれぞれに対して、音声認識手段 104により音声認識処理を行い、テキストイ匕する（ステップ S1500)。

[0044] タグ生成手段 103は、認識結果であるテキストデータと発声時刻のタイムコードとを結びつけてタグを生成し、生成したタグをモニタ手段 102へ出力する (ステップ S160 0)。発声時刻は、発声開始時刻であることが望ましい。タイムコードは、コンテンツ再生手段 101から受け取る。

[0045] モニタ手段 102は、図 3に示すタグ付け画面 200のタグ表示画面 202の表示内容を更新するとともに、図 4に示すタグ確認画面 300を表示して、入力されたタグを表示する（ステップ S1700)。すでにタグ確認画面 300を表示している場合には、入力されたタグを追加表示する。

[0046] なお、上記タグ付け作業の手順にぉ、て、ステップ S1100〜ステップ S 1300の開始手順は、連動させて、一つのボタンを押すことで実行するようにすれば、作業の簡素化が図れ、操作時間の無駄を省くことができる。

[0047] 図 4に示すように、タグ確認画面 300のタグ履歴画面 301には、生成されたタグの履歴が表示されるので、作業者は、タグ付けのための発声の合間に確認することができる。作業者は、音声認識の誤りによるタグの誤りを見つけた場合、タグ確認画面 3 00の右側に付いているタグ修正ボタン 302を押す。この例では、 2行目の「バックハンド」を「バックボレー」に修正する場合として、その右側に位置するタグ修正ボタン 3 02力押されたとする。

[0048] タグ修正手段 108は、ステップ S1700でタグが表示されると、タグ修正ボタン 302が押されるのを監視する (ステップ S1800)。なお、音声が入力されない場合も (ステツプ S1400 :NO)、コンテンツタグ付け支援装置 100の処理は、このステップ S1800 へ進む。タグ修正ボタン 302が押されると（ステップ S1800 : YES)、コンテンツタグ付け支援装置 100は、タグ修正処理を実行する (ステップ S1900)。

[0049] ここで、タグ修正作業の手順にっ、て、図 7を用いて説明する。

[0050] 作業者は、タグの修正を行うのに先立って、一時停止ボタン 209を押す。コンテンツ再生制御手段 109は、一時停止ボタン 209が押されると、コンテンツ再生を一時停止させる（ステップ S 1910)。

[0051] タグ修正画面 400には、前述のように、タグ修正前画面 401とタグ修正後画面 402 があり、修正後タグとして、予め修正前タグをコピーしてある。したがって、作業者は、修正前タグをマウスとキーボードなどの入力手段 107を使って修正することができる。このようにして、タグの修正が行われる（ステップ S 1920)。図 5の例では、「バックハンド」を「バックボレー」に修正した場合を示して、る。

[0052] 作業者は、その修正結果を確認した後、終了ボタン 403を押す。タグ修正手段 108 は、終了ボタン 403が押されると (ステップ S1930 : YES)、コンテンツ再生制御手段 109に対してその旨を通知する。コンテンツ再生制御手段 109は、この通知を受けて、コンテンツ再生の設定を行う（ステップ S1940)。具体的には、コンテンツの再生速度を、標準の速度よりも高く設定する。この再生速度の設定については、後に詳しく説明する。

[0053] 次に、作業者は、再生開始ボタン 210を押す。タグ修正手段 108は、再生開始ボタン 210が押されると、タグ修正作業の終了をコンテンツ再生制御手段 109に通知する。コンテンツ再生制御手段 109は、この通知を受けて、ステップ S 1940で設定された再生速度で、一時停止された場所力もコンテンツ再生を再開させ (ステップ S1950) 、図 6の処理へ戻る。

[0054] なお、上記手順において、図 6のステップ S1800と図 7のステップ S1910は連動させて、一つのボタンで実行させることにより、作業の簡素化が図れ、マウスの移動やボタンの確認等に要する操作時間の無駄を省くことができる。具体的には、たとえば、タグ修正手段 108は、タグ修正ボタン 302が押されたことを検出すると、タグ修正の開始をコンテンツ再生制御手段 109へ通知し、コンテンツ再生制御手段 109は、この通知を受けたときに、コンテンツ再生手段 101に対してコンテンツの再生の一時停止を指示するようにすればよい。また、図 7のステップ S1930〜ステップ S1950も同様に連動させることで、同様の効果が得られる。具体的には、たとえば、タグ修正手段 1 08は、終了ボタン 403が押されたときをタグ修正作業の終了とし、コンテンツ再生制御手段 109は、コンテンツ再生の設定を完了したときにコンテンツの再生を再開させるようにすればよい。

[0055] 図 6に戻って説明を続ける。タグ付けおよびタグ修正がまだ終了していない場合には（ステップ S2000： NO)、ステップ S 1400へ戻る。

[0056] 以降、ステップ S 1400〜ステップ S2000を繰り返し、タグ付けおよびタグ修正がすベて終了すると (ステップ S2000 : YES)、音声認識手段 104は、音声認識を終了する（ステップ S2100)。次いで、コンテンツ再生手段 101は、コンテンツ再生を終了し（ステップ S2200)、録画手段は、コンテンツ録画を終了する（ステップ S2300)。これにより、コンテンツタグ付け支援装置 100は、一連の処理を終了する。また、同様に、ステップ S2000〜ステップ S2300の終了手順も、連動させて、一つのボタンを押すことで実行するようにすれば、作業の簡素化が図れ、操作時間の無駄を省くことができる。例えば、録画開始ボタン 203が再度押された場合に録画を終了し、録画されたコンテンッが全て再生されたときに、コンテンツの再生と音声認識を終了するようにすればよい。

[0057] ところで、音声認識の誤りは、発声と認識結果が異なる置換誤りと、発声していないのに認識結果が出力される挿入誤りと、発声しても認識結果が出力されない削除誤りとの 3通りに分類される。

[0058] 図 6のステップ S1800において、それぞれの誤りが発見されて修正ボタンが押された後、図 7のステップ S1920における修正の内容は異なる。すなわち、置換誤りにおいては、音声認識結果部分を修正する。この場合、音声認識結果の 1位候補の結果だけでなぐ下位の候補結果を表示し、その中から選択させることで、キーボードで入力するよりも高速な修正が可能となる。キーボードでの入力は、候補内に正解が無い場合のみでよい。または、部分的に合っている候補がある場合には、その候補を選択した後に、合っていない部分を、キーボードを使って修正すればよい。

[0059] また、挿入誤りの場合には、タグ全体を消去することで修正が行える。この場合には、消去ボタンを用意しておけば、一瞬で修正が行える。さらに、削除誤りの場合には、図 6のステップ S1800の後に、認識結果が出力されるまで、発声し直す必要がある。必要に応じて、図 7のステップ S1920において、タグの時間情報部分を修正する（言い直しによる遅れに相当する時間を差し引く）。

[0060] 以上の手順により、タグ修正作業中には、コンテンツの再生を一時停止するので、タグ修正作業中に先へと進んでしまったコンテンツの再生位置を戻すと、つた作業が不要となる。したがって、このような作業による時間増加を抑制して、一人でのタグ付け作業が可能になる。しかし、コンテンツの再生を止めている間の時間は、タグ付け作業である再生時間にカ卩えて必要になる。そこで、図 7のステップ S1940で、再開後のコンテンツの再生速度を、コンテンツの再生の一時停止前の再生速度の 1倍よりも早く設定しておき、図 7のステップ S1950でコンテンツの再生を再開する。これにより、録画中の映像からの遅れに追いつくまでは高速に再生し、追いついたら 1倍の速度で再生し、その再生映像に沿って、タグ作業を行うことが可能となる。

[0061] 前記再開後のコンテンツの再生速度の設定は、具体的には、例えば、以下のようにして行う。

[0062] 図 8は、このような再生速度を設定するための再生速度設定画面 701を示している。再生速度設定画面 701は、モニタ手段 102に設けられており、例えば、コンテンツ録画に先立って表示される。作業者は、この画面で空欄になっている、 1分当りの修正回数と 1回当りの修正時間とを入力し、計算ボタン 702を押す。コンテンツタグ付け支援装置 100に設けられた演算装置 (図示せず)は、推奨する再生速度を、例えば、一例として、単位時間 Z{単位時間（単位時間当りの修正回数） X (1回当りの修正時間（sec) ) }なる式より算出して、表示する。そして、ここに表示される数値を、別途用意したシステム設定機能 (図示せず)により、再生再開後の再生速度 (以下「再開後再生速度」 t 、う）としてコンテンツ再生制御手段 109へ入力する。

[0063] 以上の、単位時間（1分）当りの修正回数や、 1回当りの修正時間は、経験から把握してもよいし、実際に、短時間のサンプルでタグ入力、タグ修正を行ってみて、実測してもよい。また、単位時間（1分）当りの修正回数は、単位時間（1分）当りの発声回数 (発生頻度）に音声認識の誤認識確率 (誤認識頻度)を掛け算することにより求めることがでさる。

[0064] コンテンツ再生制御手段 109は、このようにして入力された再開後再生速度を、図 7 のステップ S1940で、コンテンツ再生速度に設定する。そして、例えば、コンテンツ再生制御手段 109で、再生映像が録画映像に追いつくのを監視し、追いついた時点でコンテンツ再生速度を標準速度に戻すようにする。これにより、タグ修正による再生映像の録画映像に対する遅れを取り戻すことができ、タグ付け作業時間の増大を抑 ff¾することができる。

[0065] なお、コンテンツ再生速度の設定にっ、て、上記以外の各種手法を適用することも可能である。

[0066] 例えば、コンテンツの総再生時間が予め分力つている場合には、コンテンツを一時停止せずに再生した場合の本来の再生残り時間と、タグ修正で発生した遅れ時間の累積との関係で、タグ修正が終了するたびに動的に再開後再生速度を決定するようにしてもよい。

[0067] また、野球ならば 2倍速、バスケットボールならば 1.2倍速など、スポーツの種類などのコンテンツ内容に応じて再開後再生速度を設定するようにしてもよい。具体的には

、例えば、コンテンツ再生制御手段 109で、コンテンツ種類に対応付けて再開後再生速度の設定値を記述したテーブルを用意しておき、再生されるコンテンツの種類を判別または選択して、テーブルで該当する再開後再生速度を採用する。これにより、コンテンツの種類ごとにタグ付け作業が可能な再生速度が異なる場合に、適切な範囲で再開後再生速度を設定することができる。

[0068] コンテンツ内容の種類を判別するには、たとえば、コンテンツの種類ごとに専門用語や選手名などを記述したテーブルをさらに用意しておき、コンテンッの最初の所定区間で音声認識を行、、抽出された言葉をこのテーブルで検索するようにすればよい。

[0069] また、コンテンツの再生内容の盛り上がりの度合いを検出する盛り上がり検出手段を動力しておき、盛り上がっていないところはより高速に再生するなど、盛り上がり度に応じてコンテンツの再生速度を制御するようにしてもよい。具体的には、例えば、コンテンッ再生制御手段 109に、コンテンツの音量がしきい値を超える力否かを監視する盛り上がり検出部を設け、コンテンツ再生制御手段 109で、しきい値を超えることが検出された区間を盛り上がり区間に設定する。このような技術の詳細については、例えば、特許第 2960939号公報に記載されているため、ここでの説明を省略する。そして、タグ修正後にコンテンツ再生を再開した際には、盛り上がり区間は標準の速度で再生させ、他の区間は標準速度よりも高い速度で再生させる。

[0070] スポーツの試合などでは、通常、見どころの場面で観客の声が大きくなる。このような場面では、タグ付けが頻繁に行われる場合が多い。したがって、このように盛り上がり度に対応して再生速度を設定することにより、タグ付けの頻度に応じて再生速度を変化させることができ、タグ付けの作業性を損なうことなぐタグ付け作業時間の増大を抑制することが可能となる。 [0071] また、コンテンツ再生を設定する際に、再生を開始する場所を設定するようにしてもよい。

[0072] 例えば、タグ修正画面 400に、一時停止された場所ではなぐ 10秒など、予め設定した時間だけ戻るためのボタンを用意する。そして、コンテンツ再生制御手段 109は、このボタンが押された場合には、一時停止された場所力も設定された時間だけ戻つたところ力も再生を開始させ、タグ付けを続行させる。これにより、例えば、タグ修正ボタン 302を押すタイミングが遅れた場合や、再生再開時に直前の再生内容を確認する必要があるような場合でも、少し前力コンテンツ再生が開始されるため、作業者は高速再生時においても安心してタグ付け作業を行うことができる。

[0073] また、コンテンツ再生を設定する際に、コンテンツ再生速度を設定するのではなぐ再生を開始する場所のみを設定するようにしてもょヽ。

[0074] 例えば、コンテンツ再生制御手段 109は、一時停止された場所から現在の録画時刻に対応する場所までが、タグ付けが不要な区間であることを、判別または選択する。そして、タグ付けが不要な区間をスキップして、現在の録画時刻から再生を開始させる。これにより、例えば、現在録画中のコンテンツを再生している場合であって、スポーッ中継で、タイムアウトの途中などタグ付け不要の場合に、現在の録画時刻までスキップすることができる。したがって、タグ付けの作業性を損なうことなぐタグ付け作業時間の増大を抑制することができる。

[0075] また、スキップする時刻は、録画の現在時刻だけでなぐコンテンツの場面の切り替わりを検出するシーンチェンジ検出手段を動かしておき、コンテンツ再生制御手段 1 09が、シーンチェンジ時刻の静止画一覧をスキップ先候補として提示し、作業者にいずれかを選択させるようにしてもよい。これにより、作業者がより適切なスキップ先を指定することができる。シーンチェンジ検出手段は、例えば、画像のヒストグラムを間欠的に算出し、ヒストグラムが大きく変化したタイミングをシーンチェンジ時刻と判別するようにすればよい。このような技術の詳細については、例えば、特許第 3175632号公報に記載されているため、ここでの説明を省略する。

[0076] 以上説明したように、本実施の形態のコンテンツタグ付け支援装置 100によれば、コンテンツ再生制御手段 109を備えることにより、タグ修正の開始と同期してコンテンッの再生を一時停止し、タグ修正の終了と同期してコンテンツの再生を再開するように、修正作業と連動した再生制御が可能となる。その結果、タグ付けとタグ修正の両作業を一人で行うことができ、かつ、作業時間の増加を抑制することができる。したがつて、コンテンツの二次利用を容易にするタグをコンテンツに付加させる作業を、より低コストで実現することができ、コンテンツ配信サービスの向上を図ることができる。

[0077] なお、本実施の形態にお!、て、タグ修正作業時の入力手段として、キーボードやマウスを使用する例を説明したが、マイクなどを使用してもよい。

[0078] また、本実施の形態にお!、ては、映像を録画しながら再生し、タグ付けを行う例について説明した力予め録画した映像を再生しながらタグ付けを行うことも同じ枠組みで可能である。その際、タグ付け終了の目標時間を設定して、上記したように高速再生の再生速度を動的に設定することができる。

[0079] 要するに、本発明のコンテンツタグ付け支援装置は、音声をテキストイ匕してコンテンッのタグとして出力するコンテンッタグ付け支援装置であって、前記コンテンッを再生するコンテンツ再生手段と、前記タグを生成するタグ生成手段と、前記コンテンツに付与されたタグを修正するようにタグ修正情報を前記タグ生成手段に送るタグ修正手段と、前記タグ修正手段からのタグ修正の開始と終了を通知するタグ修正開始終了通知情報に基づき、前記コンテンツの再生を制御するコンテンツ再生制御手段とを備え、前記コンテンツ再生制御手段は、前記タグ修正の開始と同期して前記コンテンッの再生を一時停止し、前記タグ修正の終了と同期して前記コンテンツの再生の再開を行うように制御する再生制御情報を前記コンテンツ再生手段に送る構成を有する。

[0080] この構成により、一人でタグ付け作業とタグ修正作業を行っても、タグ修正作業の付加に伴う作業時間の増加を抑制することができる。

[0081] 本発明のコンテンツタグ付け支援装置は、前記コンテンツ再生制御手段が、前記コンテンッの再生を一時停止後に再開する場合に、前記コンテンツの再生の一時停止前の再生速度の 1倍より早い高速再生速度で再生するように前記コンテンツ再生手段を制御する構成を有する。

[0082] この構成により、一人でタグ付け作業とタグ修正作業を行っても、タグ修正作業の付加に伴う作業時間の増加分を減少することができる。

[0083] 本発明のコンテンツタグ付け支援装置は、前記コンテンツ再生制御手段が、前記 1 倍より早い高速再生速度を、単位時間 Z (単位時間単位時間当りの修正回数 X 1 回当りの修正時間)なる式力も算出した値に設定する構成を有する。

[0084] この構成により、一人でタグ付け作業とタグ修正作業を行っても、コンテンツの時間長とほぼ同じ作業時間でタグ付けおよびタグ修正作業を終了することが可能となる。

[0085] 本発明のコンテンツタグ付け支援装置は、前記コンテンツ再生制御手段が、上記 1 倍以上の再生速度を、スポーツの競技の種類などディジタルコンテンツ内容に応じて予め設定する構成を有する。

[0086] この構成により、ディジタルコンテンツ内容に応じて、コンテンツの再生を一時停止後に再開する場合の再生速度を変えることができる。

[0087] 本発明のコンテンツタグ付け支援装置は、上記コンテンツ再生制御手段が、予め設定された時間だけ前に戻ってコンテンツ再生を再開させる構成を有する。

[0088] この構成により、一時停止させるタイミングが遅れた場合や、再生再開時に直前の再生内容を確認する必要があるような場合でも、少し前力コンテンツ再生を開始できるため、作業者は高速再生時においても安心してタグ付け作業を行うことができる

[0089] 本発明のコンテンツタグ付け支援装置は、さらに盛り上がり検出手段を含み、上記コンテンツ再生制御手段力前記ディジタルコンテンツ再生を停止して再開する際に、盛り上がりに応じた再生速度になるように再生速度を制御する構成を有する。

[0090] この構成により、タグ付けの頻度がコンテンツの盛り上がりに応じて変化する場合に、タグ付けの頻度に対応して再生速度を変化させることができ、タグ付けの作業性を損なうことなぐタグ付け作業時間の増大を抑制することができる。

[0091] 本発明のコンテンツタグ付け支援装置は、上記コンテンツタグ付け支援装置はさらに録画手段を含み、上記コンテンツ再生制御手段力前記ディジタルコンテンツ再生を停止して再開する際に、現在の録画時刻までスキップできる構成を有する。

[0092] この構成により、コンテンツの一時停止された場所力も現在の録画時刻までの区間でタグ付けが不要な場合に、この区間の再生をスキップすることができ、タグ付けの作業性を損なうことなぐタグ付け作業時間の増大を抑制することができる。

[0093] 本発明のコンテンツタグ付け支援装置は、上記コンテンツ再生制御手段が、前記ディジタルコンテンツ再生を停止して再開する際に、 1つまたはそれ以上のスキップ先候補を提示する構成を有する。

[0094] この構成により、コンテンツにタグ付けが不要な区間が含まれる場合に、この区間の再生をスキップすることができ、タグ付けの作業性を損なうことなぐタグ付け作業時間の増大を抑制することができる。また、作業者がより適切なスキップ先を指定することがでさる。

[0095] 本発明のコンテンツタグ付け支援方法は、音声認識を利用し、コンテンツを再生して、前記コンテンツにタグを付与するコンテンツタグ付け支援方法であって、前記コンテンッに付与されたタグを修正するタグ修正の開始と同期して前記コンテンツの再生を一時停止して、タグの修正を行い、前記タグ修正の終了と同期して前記コンテンツの再生を再開する構成を有する。

[0096] この構成により、一人でタグ付け作業とタグ修正作業を行っても、タグ修正作業の付加に伴う作業時間の増加を抑制することができる。

[0097] 本発明のコンテンツタグ付け支援方法は、前記コンテンツの再生再開後の前記コンテンッの再生速度を、前記コンテンツの再生の一時停止前の再生速度より早く設定した構成を有する。

[0098] この構成により、一人でタグ付け作業とタグ修正作業を行っても、タグ修正作業の付加に伴う作業時間の増加分を減少することができる。

[0099] 本明細書は、 2005年 6月 13日出願の特願 2005— 172001及び 2006年 6月 8日出願の特願 2006— 160310に基づく。この内容はすべてここに含めておく。

産業上の利用可能性

[0100] 本発明に係るコンテンツタグ付け支援装置およびコンテンツタグ付け支援方法は、タグ付きのコンテンツを制作し、コンテンツの資産価値を増大させるので、業務用システムの一部として有用である。また、ホームムービーや家庭用ビデオサーバー等の用途にも応用できる。

Claims

請求の範囲

[1] コンテンツのタグ付け作業を支援するコンテンツタグ付け支援装置にぉ、て、

音声を入力する音声入力手段と、

入力された音声を認識処理する音声認識手段と、

コンテンツを再生するコンテンツ再生手段と、

入力された音声を認識処理して得られたデータを、当該音声が入力された時のコンテンッの再生位置に関連付けて、コンテンツのタグとして出力するタグ生成手段と、コンテンツに付与されたタグを修正するためのタグ修正情報を、前記タグ生成手段に出力するタグ修正手段と、

コンテンツの再生を制御するための再生制御情報を、前記コンテンツ再生手段に出力するコンテンツ再生制御手段と、を有し、

前記タグ修正手段は、

前記タグ修正情報に基づくタグ修正作業の開始および終了を通知するタグ修正開始終了通知情報を、前記コンテンツ再生制御手段に出力し、

前記コンテンツ再生制御手段は、

前記タグ修正手段によって出力されるタグ修正開始終了通知情報に基づいて、タグ修正作業の開始と同期してコンテンツの再生を一時停止し、タグ修正作業の終了と同期してコンテンツの再生を再開するように前記コンテンツ再生手段を制御する、コンテンツタグ付け支援装置。

[2] 前記コンテンツ再生制御手段は、

コンテンツの再生を一時停止後に再開するときの再生速度としての再開後再生速度を、コンテンツの再生の一時停止前の再生速度の 1倍よりも高く設定する、請求項 1記載のコンテンツタグ付け支援装置。

[3] 前記コンテンツ再生制御手段は、

前記再開後再生速度を、単位時間 Z (単位時間単位時間当りの修正回数 X 1回当りの修正時間)なる式力算出した値に設定する、

請求項 2記載のコンテンツタグ付け支援装置。

[4] 前記コンテンツ再生制御手段は、前記再開後再生速度を、前記コンテンツ再生手段が再生するコンテンツの種類に応じて変更する、

請求項 2記載のコンテンツタグ付け支援装置。

[5] 前記コンテンツ再生制御手段は、

コンテンツの再生を一時停止後に再開するときに、予め設定された時間だけ前にコンテンッの再生位置を前に戻す、

請求項 2記載のコンテンツタグ付け支援装置。

[6] 前記コンテンツ再生手段が再生するコンテンツの再生内容の盛り上がりの度合いを検出する盛り上がり検出手段をさらに有し、

前記コンテンツ再生制御手段は、

前記盛り上がり検出手段による検出結果に応じて前記コンテンツ再生手段によるコンテンッの再生速度を変化させる、

請求項 2記載のコンテンツタグ付け支援装置。

[7] 映像を録画しながらコンテンッを生成する録画手段をさらに有し、

前記コンテンツ再生制御手段は、

前記録画手段が生成するコンテンツの再生を一時停止後に再開するときに、最も後の再生可能位置までスキップする、

請求項 1記載のコンテンツタグ付け装置。

[8] 前記コンテンツ再生制御手段は、

コンテンツの再生を一時停止後に再開するとき、 1つまたはそれ以上の再生位置を選択肢として提示し、選択された再生可能位置までスキップする、

請求項 1記載のコンテンツタグ付け支援装置。

[9] コンテンツのタグ付け作業を支援するコンテンツタグ付け支援方法にぉ、て、再生が開始されたコンテンッに付与されるタグを修正するためのタグ修正作業の開始を監視するタグ修正開始監視ステップと、

前記タグ修正開始監視ステップでタグ修正作業の開始が検出されると、コンテンツの再生を一時停止させるコンテンツ再生一時停止ステップと、

前記コンテンッ再生一時停止ステップでコンテンッの再生が一時停止されると、前記タグ修正作業の終了を監視するタグ修正終了監視ステップと、

前記タグ修正終了監視ステップでタグ修正作業の終了が検出されると、コンテンッの再生を再開するコンテンツ再生再開ステップと、

を有するコンテンツタグ付け支援方法。

前記コンテンツ再生再開ステップは、

コンテンツの再生の一時停止前の再生速度の 1倍よりも高い再生速度で、コンテンッの再生を再開する、

請求項 9記載のコンテンツタグ付け支援方法。