JP2007288697A - 録画再生装置 - Google Patents
録画再生装置 Download PDFInfo
- Publication number
- JP2007288697A JP2007288697A JP2006116213A JP2006116213A JP2007288697A JP 2007288697 A JP2007288697 A JP 2007288697A JP 2006116213 A JP2006116213 A JP 2006116213A JP 2006116213 A JP2006116213 A JP 2006116213A JP 2007288697 A JP2007288697 A JP 2007288697A
- Authority
- JP
- Japan
- Prior art keywords
- character
- recording
- playback
- information
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
Abstract
【課題】映像にスーパーインポーズされている文字の文字認識を行い、認識された文字の変化に基づいてダイジェスト再生を行うことができる録画再生装置を提供する。
【解決手段】記録装置7によって受信放送の映像が録画される。文字認識部9は、前記映像にスーパーインポーズされている文字に対する文字認識を行い、文字のキャラクタコードをCPU11に与える。CPU11は、認識された文字の変化を判断し、文字変化時点を特定して再生するのに必要な再生制御情報を生成して記録する。CPU11は、ダイジェスト再生指示を受けたときに、前記再生制御情報を用いて文字変化時点又は当該文字変化時点を含む或る区間の映像を再生装置8に再生させる。
【選択図】図1
【解決手段】記録装置7によって受信放送の映像が録画される。文字認識部9は、前記映像にスーパーインポーズされている文字に対する文字認識を行い、文字のキャラクタコードをCPU11に与える。CPU11は、認識された文字の変化を判断し、文字変化時点を特定して再生するのに必要な再生制御情報を生成して記録する。CPU11は、ダイジェスト再生指示を受けたときに、前記再生制御情報を用いて文字変化時点又は当該文字変化時点を含む或る区間の映像を再生装置8に再生させる。
【選択図】図1
Description
この発明は、録画再生装置に関する。
スポーツ番組の画面中央付近の得点表示によって得点シーンを検出すること、スポーツ番組などの音声信号の特定周波数領域のレベルによって観客の歓声を検出すること、レース番組などの物体・背景の動きベクトル量により、レース中のトラブル発生シーンを検出すること、等を実行して、ハイライトシーン判定を行うことが提案されている(特許文献1参照)。また、インターネットを介して所定のサイトが配信する野球中継データ中の得点表示の数字が変化したときに、得点シーンとして検出し、得点シーンの情報抽出結果を用いてダイジェスト記録をすることも提案されている(特許文献2参照)。
特開平11−55613号公報
特開2003−174609号公報
しかしながら、上記従来の技術は、映像にスーパーインポーズされている文字を認識してその変化を判断するものではなく、スーパーインポーズされている文字の変化に基づいてダイジェスト再生を行うことはできない。
この発明は、上記の事情に鑑み、映像にスーパーインポーズされている文字の文字認識を行い、認識された文字の変化に基づいてダイジェスト再生を行うことができる録画再生装置を提供することを目的とする。
この発明の録画再生装置は、上記課題を解決するために、入力された映像に基づく映像データを記録媒体に記録するとともに前記記録媒体から映像データを再生して出力する録画再生装置において、前記映像にスーパーインポーズされている文字に対する文字認識を行う手段と、前記スーパーインポーズされている文字が他の文字に変化したかどうかを判断する手段と、少なくとも文字変化時点を特定して再生するのに必要な再生制御情報を生成して記録する手段と、ダイジェスト再生指示を受けたときに、前記再生制御情報を用いて文字変化時点又は当該文字変化時点を含む或る区間の映像を再生する手段と、を備えたことを特徴とする(以下、この項において、第1構成という)。
上記の構成であれば、映像にスーパーインポーズされている文字の文字認識を行い、少なくとも文字変化時点を特定して再生するのに必要な再生制御情報を生成して記録し、ダイジェスト再生時には、前記再生制御情報を用いて文字変化時点又は当該文字変化時点を含む或る区間の映像が再生される。
第1構成において、録画する映像のスポーツ種を、ユーザ入力情報、又は映像がディジタルテレビ放送受信で得られるのであれば放送波から分離した情報、又は文字認識できた文字情報、に基づいて判断する手段と、スポーツ種ごとに文字としてどのようなことを意味する文字が存在するかを示す情報が格納されたデータベースと、を備えてもよい(以下、この項において第2構成という)。
第2構成において、変化した文字が得点を示す文字である場合には、前記再生制御情報として得点の変化であることを示す情報を含めてもよい。かかる構成であれば、得点時のダイジェスト再生が可能となる。上記構成において、前記得点を示す文字の隣の文字は対戦チームを示す文字であると認識し、前記再生制御情報としてどのチームの得点であるかを示す情報を含めることとしてもよい。かかる構成であれば、例えば、特定チームに関してだけの得点時のダイジェスト再生が可能となる。
第2構成において、変化した文字が回又はホール番号を示す文字である場合には、前記再生制御情報として回又はホール番号の変化であることを示す情報を含めることとしてもよい。かかる構成であれば、特定の回又はホールのダイジェスト再生が可能となる。
第2構成において、変化した文字が試合経過時間を示す文字である場合には、前記再生制御情報として試合経過時間の変化であることを示す情報を含めることとしてもよい。かかる構成であれば、特定の試合経過時間を指定したかたちでのダイジェスト再生が可能となる。
第2構成において、変化した文字が表又は裏の文字である場合には、前記再生制御情報として表又は裏の変化であることを示す情報を含めることとしてもよい。かかる構成であれば、例えば、表だけ又は裏だけといったダイジェスト再生が可能となる。
これら構成の録画再生装置において、文字のスーパーインポーズ箇所を自動判断するための文字領域判断手段を備えてもよい。かかる構成において、前記文字領域判断手段は、画面の隅に相当する領域に対して文字領域判断処理を行うこととしてもよい。
或いは、これら構成の録画再生装置において、文字のスーパーインポーズ箇所がユーザ操作によって指定されるように構成されていてもよい。
これら構成の録画再生装置において、音声に基づくハイライトシーンを判断する手段を備え、再生制御情報として、前記ハイライトシーンを再生するのに必要な情報を含めることとしてもよい。かかる構成であれば、音声に基づくハイライトシーンと判断されたなかで例えば得点が得られたときのシーンをダイジェスト再生するといったことが可能になる。
この発明によれば、映像にスーパーインポーズされている文字の文字認識を行い、認識された文字の変化に基づいてダイジェスト再生を行うことができるという効果を奏する。
以下、この発明の実施形態の録画再生装置を図1乃至図4に基づいて説明する。
図1は一例として衛星ディジタル放送を受信して放送を録画することができる放送受信録画再生装置を示している。アンテナ1は、屋外において所定の方向に向けて配置されており、衛星から送られてくるディジタル放送信号を受信する。このアンテナ1は、一般に周波数変換器を備え、受信/周波数変換した信号をチューナ2に与える。
チューナ2は、映像・音声データを含む高周波ディジタル変調信号のうちから特定周波数の信号を取り出す。すなわち、ディジタル放送の複数のトランスポンダのなかから一つを選択する処理を行う。また、チューナ2は、復調回路、逆インタリーブ回路、誤り訂正回路などを備えることにより、選択したディジタル変調信号を復調してトランスポートストリームを出力する。
デマルチプレクサ(DEMUX)3は、前記トランスポートストリームを、MPEG2(Moving Picture Experts Group2)のビデオストリーム、オーディオストリーム、及びPSI/SI(Program Specific Information/Service Information)などに分離する。デマルチプレクサ3は、ビデオストリームとオーディオストリームをMPEGデコーダ4に供給し、PSI/SI等をCPU13に供給する。SIには、番組情報(タイトル、サブタイトル、ジャンル情報、番組開始時刻、番組継続時間等)が存在している。
MPEGデコーダ4は、ビデオストリームに対してデコードを行う映像デコーダ4a、及びオーディオストリームに対してデコードを行う音声デコーダ4bを備える。映像デコーダ4aは、入力された符号化信号を量子化係数を元に逆量子化し、逆DCT変換と動きベクトルとにより映像データを生成する。音声デコーダ4bは、入力された符号化信号を復号して音声データを生成する。デコードにより生成された映像データはビデオエンコーダ5に出力され、音声データは音声処理部6に出力される。
音声処理部6は、音声デコーダ4bから出力された音声データを受け取ってD/A変換を行い、例えば右(R)音のアナログ信号及び左(L)音のアナログ信号を生成する。ビデオエンコーダ5は、文字認識部9を介して映像デコーダ4aからの映像データを受け取ってD/A変換を行い、例えばコンポジット映像信号に変換する。また、ビデオエンコーダ5は、OSD回路11aから指示されたOSD文字・画像を前記映像データに重畳した上でコンポジット映像信号を生成するが、録画のための映像データには前記OSD文字・画像は重畳しない。
記録装置7は、ビデオエンコーダ5から出力される映像信号及び音声信号をディジタル信号(例えば、MPEGデータ)に変換し、このディジタル信号を記録メディア(ハードディスク等)40に記録する。なお、記録装置7は、MPEGデコーダ4からのディジタル映像音声データ、或いはデコード前のエレメンタリストリームを入力して記録する構成になっていてもよい。
再生装置8は、記録メディア40からディジタル信号を読み出し、D/A変換等を行って映像信号及び音声信号を出力する。なお、再生装置8は、記録装置7がMPEGデータを記録する場合、再生信号をMPEGデコーダ4に供給することとしてもよい。
文字認識部9は、スーパーインポーズ領域判定処理、及びスーパーインポーズされた文字の認識処理を行う。すなわち、文字認識部9は、OSD文字重畳前の映像データ(放送局側でスーパーインポーズされた文字挿入映像)上での文字領域判定及び文字認識処理を実行することとしている。これら処理を以下に具体的に述べていく。通常、放送局側では文字(例えば、野球放送における得点、回、表/裏等)を画像の左上、左下、右上、或いは右下といった隅領域に挿入する(画像の中央領域に挿入することは殆どない)。また、文字の輝度は一般に高いという性質がある。
ここで、文字認識部9が、映像全体についての例えば10フレーム分の画像データをバッファリングするフレームバッファメモリを備えてもよいが、これでは、そのメモリ容量は膨大になる。また、映像全体を対象としてスーパーインポーズ領域判定処理を行うと時間がかかる。そこで、この実施形態では、画像の4隅の所定領域(四角領域とする)について例えば10フレーム分の画像データをバッファリングするようにしている。前記所定領域は、野球などの得点表示に関しては比較的小さな領域となるが、ゴルフの何ホール目かを示す表示などは比較的大きな領域を占めて表示されることがある。各種の番組におけるスーパーインポーズに対応すべく、比較的大きな領域を前記所定領域としておくのが望ましい。
スーパーインポーズ領域判定処理では、各画像データについて前記四隅の所定領域において、ドット間の輝度差や一定輝度以上のドットの集まり具合などを検出する。文字が存在する場合には、ドット間で大きな輝度差を生じる箇所が多くなり、また、一定輝度以上のドットは、分散的ではなく、隣接して存在することが多くなると考えられる。そして、このような文字存在を示す傾向が例えば10フレーム連続で同じ位置で検出されれば、概ね文字が存在していると推定することができる。
文字認識部9は、文字が存在すると推定された所定領域の画像データを例えば別メモリに転送し、この別メモリ上で光学的文字認識処理を行う。この文字認識処理自体については、既存のアルゴリズムを用いればよい。文字認識部9は、認識できた文字列のテキストコード群をCPU11に与える。前記所定領域に対する文字認識は以後の新たな受信画像に対しても順次に実行され(例えば、0.5秒間隔、或いは1秒間隔等で前記所定領域の画像データの前記別メモリへの転送を実行する)、文字認識で得られたテキストコード群は順次にCPU11に与えられる。なお、文字認識は前記所定領域内で上から下の順で且つ左から右の順で行われる。従って、図2(a)に示すごとく所定領域内に文字がスーパーインポーズされているときには、「7回表T1−G0」の文字列(テキストコード群)がCPU11に与えられ、図2(b)のごとく所定領域内に文字がスーパーインポーズされているときには、「28:05A1−B0」の文字列(テキストコード群)がCPU11に与えられる。なお、上記文字列においては、空白や改行は記載されていないが、空白や改行を含む文字列とするのが望ましい。
CPU11は、文字認識部9から送られた文字列(テキストコード群)をメモリに保持し、当該文字列内の文字の変化を判断して文字変化時点を抽出する。なお、文字変化時点の全てを編集対象シーンとすることもできるが、ここでは、CPU11は以下のような判定ルール例が格納されたデータベースによって文字の変化の意味を判断し、特定の意味の文字の変化が生じたときに編集対象シーンが生じたと判断する。
[ルール1] 「回」の文字の左側の文字はイニング数を表す。イニング数の変化は編集対象シーンである。
[ルール2] 「表」が「裏」に変化したとき及び「裏」が「表」に変化したときは編集対象シーンである。「表」と「裏」の文字が検出できたときには当該番組で放送されているスポーツ種は野球又はソフトボールである。
[ルール3] 左から順に、「アルファベット文字」、「数字」、不定又は「−」、「数字」、「アルファベット文字」の文字が並ぶとき、「アルファベット文字」はチームイニシャルであり、その隣の「数字」はチームイニシャルで示されるチームの得点である。得点の変化は編集対象シーンである。或いは、左から順に、「漢字1文字」、「数字」、不定又は「−」、「数字」、「漢字1文字」の文字が並ぶとき、「漢字1文字」はチーム名の先頭漢字であり、その隣の「数字」は前記先頭漢字で示されるチームの得点である。
[ルール4] 「:」の文字の両隣の二桁の数字は、試合経過時間である。試合経過時間の変化を編集対象シーンとすることを許容する。
[ルール2] 「表」が「裏」に変化したとき及び「裏」が「表」に変化したときは編集対象シーンである。「表」と「裏」の文字が検出できたときには当該番組で放送されているスポーツ種は野球又はソフトボールである。
[ルール3] 左から順に、「アルファベット文字」、「数字」、不定又は「−」、「数字」、「アルファベット文字」の文字が並ぶとき、「アルファベット文字」はチームイニシャルであり、その隣の「数字」はチームイニシャルで示されるチームの得点である。得点の変化は編集対象シーンである。或いは、左から順に、「漢字1文字」、「数字」、不定又は「−」、「数字」、「漢字1文字」の文字が並ぶとき、「漢字1文字」はチーム名の先頭漢字であり、その隣の「数字」は前記先頭漢字で示されるチームの得点である。
[ルール4] 「:」の文字の両隣の二桁の数字は、試合経過時間である。試合経過時間の変化を編集対象シーンとすることを許容する。
例えば、野球放送であれば、「T0−G0」の表示が、「T1−G0」の表示に変わったとき、CPU11は、編集対象シーンが生じたと判断し、そのときの録画経過時間をメモリに記録する。編集対象シーンが生じたことによる録画経過時間群(時間情報)を示すと、以下のようになる。ダイジェスト記録再生におけるシーンとその記録箇所との対応付けの技術自体は、公知の技術を用いれば足りる。
時間: 分: 秒
00:05:03
00:08:23
00:10:00
00:15:44
00:17:53
00:05:03
00:08:23
00:10:00
00:15:44
00:17:53
更に、編集対象シーンが生じたと判断したときの原因(文字)を付記すると、以下のごとく録画経過時間群が前記メモリに記録される。
00:05:23(T1)
00:08:33(T2)
00:10:00(2回裏)
00:15:44(G1)
00:17:53(3回表)
00:08:33(T2)
00:10:00(2回裏)
00:15:44(G1)
00:17:53(3回表)
図3は、上記処理の内容を簡潔に示したフローチャートである。すなわち、映像を入力し(ステップS1)、文字領域の判別を行い(ステップS2)、文字認識を実行し(ステップS3)、文字に変化があれば、編集対象シーンが発生したとして、録画経過時間(時間情報)及び文字情報の記録を行い(ステップS5)、ステップS3に進む。
CPU11は、上記の録画経過時間群に基づいて再生区間情報を生成することとしてもよい。再生区間は例えば、得点時には、編集対象シーン発生時点前20秒〜編集対象シーン発生時点後5秒の区間、回や表裏の変わり時には、編集対象シーン発生時点前2秒〜編集対象シーン発生時点後5秒の区間、のごとく発生原因によって異ならせることとしてもよい。例えば、以下のごとく再生区間情報が生成される。
00:05:03〜00:05:28(T1)
00:08:13〜00:08:38(T2)
00:09:58〜00:10:05(2回裏)
00:15:24〜00:15:49(G1)
00:17:51〜00:17:58(3回表)
00:08:13〜00:08:38(T2)
00:09:58〜00:10:05(2回裏)
00:15:24〜00:15:49(G1)
00:17:51〜00:17:58(3回表)
なお、野球に関しては、バッターがバッターボックスにたつときには、得点表示が消されることがある。得点表示有りの状態から得点表示無しの状態となったときの録画経過時間を記録しておこととしてもよい。例えば、上記「00:05:23(T1)」と「00:08:33(T2)」の間において、「00:08:05(得点表示無し)」といった時間情報が記録されるとする。この場合、「00:08:05〜00:08:33を再生区間とすることで、バッターがバッターボックスにたつときから得点されるまでの間がダイジェスト再生されうることになる。
記録装置7は受信放送の録画を行うときにはコンテンツファイルを作成し、CPU11は当該ファイルのコンテンツIDでファイル管理を行う。また、CPU11は、ダイジェスト再生制御ファイルを前記コンテンツIDに対応付けて作成する。このダイジェスト再生制御ファイルは、上記の録画経過時間群(更には、発生原因の情報が含められる場合もある)から成る。
前記ダイジェスト再生制御ファイルは、コンテンツファイル再生時の再生箇所を規定する指令群となる。CPU11は、ダイジェスト再生をユーザから要求されたときには、再生対象となるコンテンツファイルに付属されているダイジェスト再生制御ファイルを開いて録画経過時間群を取得し、この録画経過時間群に従って再生装置8にダイジェスト再生指令を与える。例えば、CPU11がダイジェスト再生制御ファイルを開いて得られた最初の録画経過時間を再生装置8に与えて再生を指令すると、例えば、上述した00:05:03〜00:05:28の区間に相当する映像が再生されることになる。なお、CPU11は、通常の再生を要求されたときには、対象コンテンツファイルに付属するダイジェスト再生制御ファイルは参照しない。
(応用処理1)
再生メニュー画面において、例えば、「特定チームが点を入れたときのダイジェスト再生を行う」といった項目を用意しておく。ユーザがこの項目を選択すると、CPU11は、ダイジェスト再生制御ファイルの記述に基づいて、例えば、「T」と「G」のどちらを選択しますか」といったメッセージを表示する。ユーザは「T」又は「G」のどちらかにカーソルを載せて決定キーを押下する。例えば、ユーザが「T」を選択した場合、CPU11は、前記ダイジェスト再生制御ファイル内の(T)のラベルが付記された再生区間情報だけを採用する。この場合、再生装置8は、先述の例でいえば、「00:05:03〜00:05:28(T1)」と「00:08:13〜00:08:38(T2)」の区間だけを再生することになる。
再生メニュー画面において、例えば、「特定チームが点を入れたときのダイジェスト再生を行う」といった項目を用意しておく。ユーザがこの項目を選択すると、CPU11は、ダイジェスト再生制御ファイルの記述に基づいて、例えば、「T」と「G」のどちらを選択しますか」といったメッセージを表示する。ユーザは「T」又は「G」のどちらかにカーソルを載せて決定キーを押下する。例えば、ユーザが「T」を選択した場合、CPU11は、前記ダイジェスト再生制御ファイル内の(T)のラベルが付記された再生区間情報だけを採用する。この場合、再生装置8は、先述の例でいえば、「00:05:03〜00:05:28(T1)」と「00:08:13〜00:08:38(T2)」の区間だけを再生することになる。
同様の処理を行うことにより、「特定のイニング指定で再生を行う」といった処理を行うことができる。なお、この場合、「7イニング目を再生」ということになったなら、CPU11は、「7回」が付記された録画経過時間からその終了時間(「8回」が付記された時間情報の時間まで)を再生区間とするように処理する。また、「各イニングの表だけ(或いは、裏だけ)再生」といった処理を行うことができる。この場合、「表」が指定されたのなら、最初の「裏」の文字が付記された録画経過時間までを再生し、その後は、「表」が付記された再生区間情報の開始時間から次の「裏」が付記された再生区間情報の開始時間までを順次に再生していく。「裏」が指定された場合も同様である。得点表示文字が無くなったと判断されたときにもその時点の録画経過時間をダイジェスト再生制御ファイルに記録していくようにしてもよい。野球放送では、攻守が入れ代わるときにコマーシャルが挿入されることが多い。コマーシャルになると得点表示文字は無くなる。従って、例えば、「表」の文字が認識できている状態から得点表示文字が無くなったと判断され、次に得点表示文字を認識できてそのときに「裏」の文字を判断できたときには、その区間はコマーシャルであることが推測される。従って、このような文字無し変化もダイジェスト再生制御ファイルに記録し、再生時にこのダイジェスト再生制御ファイル基づいて当該区間を再生対象から外すようにしてもよく、これによれば、結果的にコマーシャルスキップ再生が実行されることになる。
同様の処理を行うことにより、「特定のホール指定で再生を行う」といった処理を行うことができる。ゴルフ放送では、どのホールの映像であるかを示すべくホール番号をスーパーインポーズしている。CPU11は、ホール番号が変化したと判断する毎に、その時点の録画経過時間をメモリに保持する。例えば、以下のごとく録画経過時間群が得られる。
00:05:03(3ホール目)
00:08:23(10ホール目)
00:10:00(3ホール目)
00:15:44(18ホール目)
00:17:53(3ホール目)
00:22:11(4ホール目)
00:08:23(10ホール目)
00:10:00(3ホール目)
00:15:44(18ホール目)
00:17:53(3ホール目)
00:22:11(4ホール目)
なお、この場合、「3ホール目を再生」ということになったなら、該当ホールの時間からホール番号が異なることとなった時間までを再生区間とすればよい。例えば、上記の時間例であれば、「00:05:03〜00:08:23」、「00:10:00〜00:15:44」、「00:17:53〜00:22:11」となる。また、ゴルフ放送においても、コマーシャルになるとホール表示文字は無くなる。「3ホール目の放送」→「CM」→「3ホール目の放送」となる場合には、再生区間内にCMが入ることになる。ホール表示文字が無くなった時点及び再びホール表示文字が表示された時点についても、録画経過時間を記録するようにすれば、ホール表示文字が無くなった時点から再びホール表示文字が表示された時点までを再生対象外するといったことも可能になる。
イニングやホール指定のために、例えば、再生メニュー決定後の次の画面上の枠内に数字を表示し、この表示数字を、リモコン送信機の上下キーを用いて変化させる制御を行うのがよい。また、「1,2,…,9」のごとく、画面に数字を並べて表記しておき、カーソルをリモコン送信機の左右キーで移動させ、数字上にカーソルが載せられた状態で決定キーが押下された数字(一つ又は複数)を、指定イニングであると判断する処理を行ってもよい。または、リモコン送信機の該当する数字キーでイニング等を指定できるように構成してもよい。
(応用処理2)
再生メニュー画面において、例えば、「試合時間指定で再生を行う」といった項目を用意しておく。サッカー放送であれば、試合経過時間がスーパーインポーズされており、その文字認識を行うことにより、試合経過時間を判断することができる。なお、試合経過時間の記録は、その秒数として、例えば、「00」「10」「20」「30」「40」「50」の文字が認識できたときに行うこととしてもよい。例えば、下記の括弧内で示すごとく、試合経過時間が記録される。なお、下記の(A1)は、チームAが0点の状態から1点を入れた時点を示している。
再生メニュー画面において、例えば、「試合時間指定で再生を行う」といった項目を用意しておく。サッカー放送であれば、試合経過時間がスーパーインポーズされており、その文字認識を行うことにより、試合経過時間を判断することができる。なお、試合経過時間の記録は、その秒数として、例えば、「00」「10」「20」「30」「40」「50」の文字が認識できたときに行うこととしてもよい。例えば、下記の括弧内で示すごとく、試合経過時間が記録される。なお、下記の(A1)は、チームAが0点の状態から1点を入れた時点を示している。
00:02:05(00:00)
00:02:15(00:10)
00:02:25(00:20)
・
・
00:12:25(10:20)(A1)
00:02:15(00:10)
00:02:25(00:20)
・
・
00:12:25(10:20)(A1)
ダイジェスト再生制御ファイルには、上記の文字認識した試合経過時間が録画経過時間に対応付けられて作成される。前記の「試合時間指定で再生を行う」といった項目がユーザによって選択されると、開始時間入力枠と終了時間入力枠とが表示される。ユーザは画面上の開始時間入力枠内に表示されている数字(時間)を、リモコン送信機の上下キーを用いて変化させる。また、分から秒或いは秒から分の枠にカーソルを移動させるときには、リモコン送信機の左右キーを用いる。決定キーが押下されると、カーソルは、開始時間入力枠から終了時間入力枠に移動するので、ユーザは同様の入力処理を行うことができる。なお、秒数の指定は、「00」「10」「20」「30」「40」「50」に限って行えることとしてもよい。CPU11は、前記入力された時間が、例えば、00:00〜10:20であれば、「00:00〜10:20」の試合時間だけ再生させる。または、リモコン送信機の数字キーで分秒を順に指定できる構成としてもよい。この場合にユーザによって「00」「10」「20」「30」「40」「50」以外の秒数が指定されたときには、指定秒数に最も近い秒数を上記秒数から選んで再生することとしてもよい。
(応用処理3)
再生メニュー画面において、例えば、「大量得点が入った場面のダイジェスト再生を行う」といった項目を用意しておく。野球であれば、満塁ホームランによって、得点が0から一気に4点になる。また、スリーランであれば、得点が3点増加する。認識した文字(数字)の変化の差を算出することで、「1」、「2」、「3」、「4」といった差分が得られる。これら差分を示す数値も録画経過時間に付記しておく。或いは、大量得点を「3」と「4」と定義すれば、「3」、「4」といった差分が得られたときに、大量得点を示すマークを付記することとしてもよい。CPU11は、例えば、大量得点を示すマークが付記された録画経過時間だけを採用して再生装置8の再生を制御する。
再生メニュー画面において、例えば、「大量得点が入った場面のダイジェスト再生を行う」といった項目を用意しておく。野球であれば、満塁ホームランによって、得点が0から一気に4点になる。また、スリーランであれば、得点が3点増加する。認識した文字(数字)の変化の差を算出することで、「1」、「2」、「3」、「4」といった差分が得られる。これら差分を示す数値も録画経過時間に付記しておく。或いは、大量得点を「3」と「4」と定義すれば、「3」、「4」といった差分が得られたときに、大量得点を示すマークを付記することとしてもよい。CPU11は、例えば、大量得点を示すマークが付記された録画経過時間だけを採用して再生装置8の再生を制御する。
放送録画に際して、例えば、画面上に「野球」、「サッカー」、「ゴルフ」のごとく、具体的なスポーツ種を表示し、ユーザに録画しようとする番組のスポーツ種をリモコン操作で入力させるようにしてもよい。例えば、ユーザはリモコン送信機の左右キーを操作してカーソルを「野球」の箇所に位置させ、決定キーを押下する。このような処理が行われることにより、CPU11は、録画しようとする番組が「野球」であると認識することができる。アナログテレビ放送を録画する場合に有意である。勿論、ディジタルテレビ放送であれば、PSI/SIに記載されているジャンルコードや番組名によってスポーツ種を知得することが可能である。録画対象となる放送のスポーツ種を知ることで、文字認識の精度、ダイジェスト再生に関する処理が的確になる。また、ダイジェスト再生制御ファイルの作成の仕方も異ならせることができる。
野球には野球のオーソドックスな得点表示パターン(回、表裏、得点の配置)があり、サッカーにはサッカーのオーソドックスな得点表示パターン(試合経過時間、得点の配置)がある。各スポーツの得点表示パターンにおいてどの配置の文字がどの意味を持つかを示す情報をデータベースとして持つことにより、そして、録画対象となる放送のスポーツ種を知ることにより、文字認識の精度を向上させることができる。具体的には、或る配置の文字が得点であるのなら、採り得る文字の種類は数字であるから、文字認識は数字に絞って処理できる。また、録画対象となる放送のスポーツ種を知ることにより、そのダイジェスト再生においては、例えば、スポーツ種がサッカーである場合に、「大量得点が入った場面のダイジェスト再生を行う」といった項目を消去する(或いは、表示していても採用不能(スキップされる)にする(この場合、色を薄くする))といった処理が可能となる。
上述した例では、文字認識の所定領域を画面の4隅としたが、録画に際してユーザ操作で所定領域を指定させることとしてもよい。例えば、録画開始ボタンが操作されたときに、4隅のうちの一ヶ所に四角枠をOSD表示するとともに、「得点が表示されている箇所に四角枠を移動させ、移動させたら決定キーを押して下さい」といったメッセージを表示する。ユーザはリモコンの方向キーを押下して四角枠を移動させる。CPU11は、方向キーの押下信号を受け取ると四角枠の表示位置を変える。決定キーの押下を検出したら、そのときの四角枠内を文字認識のための所定領域とする。なお、上記四角枠が表示されている状態で音量アップ/ダウンキーが押下されたことをCPU11が検出したときに、四角枠の大きさを変化させるようにしてもよい。
スポーツ種とチャンネル(放送局)とをキーとして得点が表示されている箇所の情報をデータベース化してもよい。例えば、10チャンネル(或るネットワークID)で放送されるサッカー放送では、得点が画面左上隅に表示されるのであれば、「画面左上隅」といった情報をデータベースに保持する。この情報はメーカ側で調べて予め保存しておいてもよいし、ユーザ操作で入力できるようにしてもよい。ユーザ操作の場合、その設定画面上にはチャンネル番号入力枠とスポーツ種指定のための選択領域と、「画面左上隅」「画面左下隅」「画面右上隅」「画面右下隅」の選択領域とを表示する。ユーザはリモコン送信機のカーソル操作と決定キーの操作で各内容を指定することができる。このようなデータベースを保持して文字認識の所定領域(四角枠)の初期位置を決定することにより、その後のユーザによる枠移動操作をほぼ無くすことが可能になる。勿論、四角枠の大きさもデータベースで保持することとしてもよい。
装置自身が文字認識のための所定領域を画像上から探す処理を行う場合、或いは、上記のごとくユーザが所定領域を指定する場合、録画開始からしばらくは文字認識できない状況が生じる。CPU11は、放送録画が完了した後、録画開始から文字認識が実行できるようなるまでの期間(例えば、ダイジェスト再生制御ファイルにおける最初に記載の録画経過時間まで)を、録画終了後のアイドル時間などを利用して、再生し(映像等をディスプレイに出力するわけではない)、再生開始後に時間計測を行うとともに、この再生画像を文字認識部9に与えることで文字認識を実行させ、認識された文字において編集対象シーンとなる文字変化があれば、ダイジェスト再生制御ファイル内に、再生開始経過時間を録画経過時間として追記する。
また、スポーツ種ごとに、更なるデータベースを備えておいてもよい。例えば、野球に関し、「T」の文字は「阪神」、「G」の文字は「巨人」といった情報をデータベース化しておいてもよい。また、例えば、野球に関し、12球団を表すローマ字や漢字だけを文字認識の対象文字としておくことにより、文字認識の精度を高めることが可能になる。
また、編集対象シーンの発生判定においては、音声の変化を利用することとしてもよい。この処理においては、例えば先述した特許文献1記載の技術を用いることができる。図4のフローチャートに音声処理部6の処理内容を示す。音声を入力し(ステップS11)、シーン変化判別のための音声処理を実行する(ステップS12)。この音声処理は、放送受信音声の周波数変換と各周波数ごとのレベル大小判定、及び音声レベル判定からなる)。この音声処理結果に基づいてシーン判別を行い(ステップS13)、シーン変化点の録画経過時間、及びシーン情報を記録し(ステップS14)、ダイジェスト再生制御ファイルを作成する。
例えば、先述した文字認識による文字変化に基づく記録内容と上記音声に基づく記録内容とのアンドをとることにより、より確実なダイジェストシーン判定が行える。また、ダイジェスト再生例として、上記音声に基づいて選ばれたダイジェストシーンと得点変化時のシーンとが一致するシーンだけを選択して再生するといったことも可能となる。また、上記音声に基づいて選ばれたダイジェストシーンと得点変化時のシーンの両方を再生することも可能である。
7 記録装置
8 再生装置
9 文字認識部
11 CPU
40 記録メディア
8 再生装置
9 文字認識部
11 CPU
40 記録メディア
Claims (11)
- 入力された映像に基づく映像データを記録媒体に記録するとともに前記記録媒体から映像データを再生して出力する録画再生装置において、前記映像にスーパーインポーズされている文字に対する文字認識を行う手段と、前記スーパーインポーズされている文字が他の文字に変化したかどうかを判断する手段と、少なくとも文字変化時点を特定して再生するのに必要な再生制御情報を生成して記録する手段と、ダイジェスト再生指示を受けたときに、前記再生制御情報を用いて文字変化時点又は当該文字変化時点を含む或る区間の映像を再生する手段と、を備えたことを特徴とする録画再生装置。
- 請求項1に記載の録画再生装置において、録画する映像のスポーツ種を、ユーザ入力情報、又は映像がディジタルテレビ放送受信で得られるのであれば放送波から分離した情報、又は文字認識できた文字情報、に基づいて判断する手段と、スポーツ種ごとに文字としてどのようなことを意味する文字が存在するかを示す情報が格納されたデータベースと、を備えことを特徴とする録画再生装置。
- 請求項2に記載の録画再生装置において、変化した文字が得点を示す文字である場合には、前記再生制御情報として得点の変化であることを示す情報を含めることを特徴とする録画再生装置。
- 請求項3に記載の録画再生装置において、前記得点を示す文字の隣の文字は対戦チームを示す文字であると認識し、前記再生制御情報としてどのチームの得点であるかを示す情報を含めることを特徴とする録画再生装置。
- 請求項2に記載の録画再生装置において、変化した文字が回又はホール番号を示す文字である場合には、前記再生制御情報として回又はホール番号の変化であることを示す情報を含めることを特徴とする録画再生装置。
- 請求項2に記載の録画再生装置において、変化した文字が試合経過時間を示す文字である場合には、前記再生制御情報として試合経過時間の変化であることを示す情報を含めることを特徴とする録画再生装置。
- 請求項2に記載の録画再生装置において、変化した文字が表又は裏の文字である場合には、前記再生制御情報として表又は裏の変化であることを示す情報を含めることを特徴とする録画再生装置。
- 請求項1乃至7のいずれかに記載の録画再生装置において、文字のスーパーインポーズ箇所を自動判断するための文字領域判断手段を備えたことを特徴とする録画再生装置。
- 請求項8に記載の録画再生装置において、前記文字領域判断手段は、画面の隅に相当する領域に対して文字領域判断処理を行うことを特徴とする録画再生装置。
- 請求項1乃至7のいずれかに記載の録画再生装置において、文字のスーパーインポーズ箇所がユーザ操作によって指定されるように構成されたことを特徴とする録画再生装置。
- 請求項1乃至10のいずれかに記載の録画再生装置において、音声に基づくハイライトシーンを判断する手段を備え、再生制御情報として、前記ハイライトシーンを再生するのに必要な情報を含めることを特徴とする録画再生装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006116213A JP2007288697A (ja) | 2006-04-19 | 2006-04-19 | 録画再生装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006116213A JP2007288697A (ja) | 2006-04-19 | 2006-04-19 | 録画再生装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007288697A true JP2007288697A (ja) | 2007-11-01 |
Family
ID=38760021
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006116213A Pending JP2007288697A (ja) | 2006-04-19 | 2006-04-19 | 録画再生装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007288697A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2141836A2 (en) | 2008-07-01 | 2010-01-06 | Sony Corporation | Information processing apparatus and information processing method |
CN104871245A (zh) * | 2012-12-18 | 2015-08-26 | 汤姆逊许可公司 | 基于时间信息为内容编索引的方法、装置和系统 |
WO2016103457A1 (ja) * | 2014-12-26 | 2016-06-30 | Necディスプレイソリューションズ株式会社 | 映像記録作成装置、映像記録作成方法およびプログラム |
JP2017517995A (ja) * | 2014-04-11 | 2017-06-29 | サムスン エレクトロニクス カンパニー リミテッド | 要約コンテンツサービスのための放送受信装置及び方法 |
-
2006
- 2006-04-19 JP JP2006116213A patent/JP2007288697A/ja active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2141836A2 (en) | 2008-07-01 | 2010-01-06 | Sony Corporation | Information processing apparatus and information processing method |
CN104871245A (zh) * | 2012-12-18 | 2015-08-26 | 汤姆逊许可公司 | 基于时间信息为内容编索引的方法、装置和系统 |
JP2016506150A (ja) * | 2012-12-18 | 2016-02-25 | トムソン ライセンシングThomson Licensing | 時間情報に基づきコンテンツを索引付けする方法、装置及びシステム |
US9959298B2 (en) | 2012-12-18 | 2018-05-01 | Thomson Licensing | Method, apparatus and system for indexing content based on time information |
JP2017517995A (ja) * | 2014-04-11 | 2017-06-29 | サムスン エレクトロニクス カンパニー リミテッド | 要約コンテンツサービスのための放送受信装置及び方法 |
WO2016103457A1 (ja) * | 2014-12-26 | 2016-06-30 | Necディスプレイソリューションズ株式会社 | 映像記録作成装置、映像記録作成方法およびプログラム |
JPWO2016103457A1 (ja) * | 2014-12-26 | 2017-09-28 | Necディスプレイソリューションズ株式会社 | 映像記録作成装置、映像記録作成方法およびプログラム |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101878643B (zh) | 电子设备和再现方法 | |
JP4692775B2 (ja) | 映像コンテンツ再生支援方法、映像コンテンツ再生支援システム、及び情報配信プログラム | |
US20070006263A1 (en) | Electronic device, image-processing device, and image-processing method | |
US7480445B2 (en) | Video recording/reproducing apparatus having commercial view control function | |
JP4767216B2 (ja) | ダイジェスト生成装置、方法及びプログラム | |
JP5135024B2 (ja) | コンテンツのシーン出現を通知する装置、方法およびプログラム | |
JP2008167018A (ja) | 録画再生装置 | |
CN1984291A (zh) | 执行时移功能的方法及使用该方法的电视接收机 | |
JP2006245907A (ja) | 放送記録再生装置 | |
JP2009118168A (ja) | 番組録画再生装置、および、番組録画再生方法 | |
JP2009004872A (ja) | ワンセグ放送受信装置、ワンセグ放送受信方法、およびワンセグ放送受信プログラムを記録した媒体 | |
JP2007288697A (ja) | 録画再生装置 | |
JP2008048297A (ja) | コンテンツ提供方法、コンテンツ提供方法のプログラム、コンテンツ提供方法のプログラムを記録した記録媒体及びコンテンツ提供装置 | |
JP4276042B2 (ja) | 索引データ生成装置、索引データ生成方法、索引データ生成プログラムおよびそれを記録した情報記録媒体、並びに、コンテンツデータ再生装置、コンテンツデータ再生方法、コンテンツデータ再生プログラムおよびそれを記録した情報記録媒体 | |
KR101396964B1 (ko) | 녹화물 재생방법 및 장치 | |
KR100816917B1 (ko) | 타임 시프트 기능을 가지는 영상표시기기 및 그 제어 방법 | |
JP2006014091A (ja) | 画像音声ストリーム処理装置 | |
JP2011078029A (ja) | 電子機器、コンテンツ再生方法及びプログラム | |
JP2009152756A (ja) | 映像表示装置 | |
KR20080053984A (ko) | 영상표시기기의 북마크 설정 장치 및 방법 | |
JP2007201988A (ja) | 録画再生装置 | |
KR100818401B1 (ko) | 디지털 방송 수신기에서 녹화물 재생 방법 | |
JP2010003383A (ja) | 放送番組記録再生装置 | |
JP4233982B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラムおよびそれを記録した情報記録媒体 | |
JP2011065405A (ja) | 表示装置及び表示方法 |