JP4929368B2

JP4929368B2 - 映像送出装置及び字幕差替え方法

Info

Publication number: JP4929368B2
Application number: JP2010054916A
Authority: JP
Inventors: 健志駄竹
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2010-03-11
Filing date: 2010-03-11
Publication date: 2012-05-09
Anticipated expiration: 2030-03-11
Also published as: US20110221958A1; KR20110102820A; KR101188950B1; JP2011193043A; US8615783B2

Description

この発明は、デジタル放送の素材データを出力する映像送出装置及びこの装置に用いられる字幕差替え方法に関する。

デジタル放送の放送局では、映像情報、音声情報及びアンシラリデータが多重されたＭＸＦファイルの字幕データを他の字幕データに差し替えるため、ＭＸＦファイルを保存するコンテンツサーバと、ＭＸＦファイルを受け取ってＳＤＩ信号を出力する映像送出装置との間に、字幕差替えサーバが設置されている。字幕差替えサーバは、コンテンツサーバからのＭＸＦファイルと、差替え字幕データとを受信し、ＭＸＦファイルにおける字幕データを、差替え字幕データに差し替える。そして、字幕差替えサーバは、字幕部分を差し替えたＭＸＦファイルを映像送出装置へ出力する。

しかしながら、従来の構成では、字幕差替えサーバで字幕データを差し替えた後でないと、映像送出装置へＭＸＦファイルが出力されることはない。つまり、字幕データの差し替えが完了するまで、映像送出装置は、ＭＸＦファイルに対する処理を開始することができないため、ＳＤＩ信号の送出までに時間がかかるという問題がある。また、字幕データの差し替えをするには、字幕差替えサーバを設置しなければならず、システムの高コスト化及び大型化の要因となっている。

なお、特許文献１では、１台の装置で複数の字幕データの形式に対応可能な字幕送出装置が提案されている（例えば、特許文献１参照）。

特開２００６−２０３３８４号公報

以上のように、従来の映像送出装置は、字幕差替えサーバにおける字幕データの差し替えが完了した後でないと、ＭＸＦファイルに対する処理を開始することができず、ＳＤＩ信号の送出までに時間がかかっている。また、字幕の差し替えをするには、字幕差替えサーバが必須であり、システムの高コスト化及び大型化の要因となっている。

この発明は上記事情によりなされたもので、その目的は、ＭＸＦファイルにおける字幕データの差し替えが可能な映像送出装置を提供することにある。

上記目的を達成するため、本発明に係る映像送出装置は、複数のフレームから成り前記フレームには映像音声情報及び補助情報が含まれるＭＸＦ（Material eXchange Format）データを蓄積する素材サーバと、字幕データを編集して差替え字幕データを生成する字幕編集端末とに接続する映像送出装置において、前記素材サーバから出力される前記ＭＸＦデータに対して予め設定された数のフレーム単位で識別子を付与して内部素材データを生成し、前記フレームと前記字幕編集部からの前記差替え字幕データとが対応する場合には、前記差替え字幕データに前記フレームを含む内部素材データと同一の識別子を付与して内部字幕データを生成する入力処理部と、前記入力処理部からの内部素材データと内部字幕データとを記録し、出力制御に応じて前記内部素材データと前記内部字幕データとを出力するメモリであって、前記内部字幕データを同一の識別氏が付与された内部素材データと同期して出力するメモリと、前記メモリからの内部素材データを前記映像音声情報と前記補助情報とに分離する分離部と、前記分離部からの前記補助情報と、前記メモリからの前記内部字幕データとを同期して受信した場合、前記補助情報に含まれる字幕データを、前記内部字幕データにより差し替え、差替え補助情報を生成する字幕差替え部と、前記分離部からの映像音声情報と、前記字幕差替え部からの前記差替え補助情報とを多重する多重部とを具備する。

また、本発明に係る字幕差替え方法は、複数のフレームから成り前記フレームには映像音声情報及び補助情報が含まれるＭＸＦ（Material eXchange Format）データを蓄積する素材サーバと、字幕データを編集して差替え字幕データを生成する字幕編集端末とに接続する映像送出装置で用いられる字幕差替え方法において、入力処理部が、前記素材サーバから出力される前記ＭＸＦデータに対して予め設定された数のフレーム単位で識別子を付与して内部素材データを生成し、前記入力処理部が、前記フレームと前記字幕編集部からの前記差替え字幕データとが対応する場合には、前記差替え字幕データに前記フレームを含む内部素材データと同一の識別子を付与して内部字幕データを生成し、メモリが、前記入力処理部からの内部素材データと内部字幕データとを記録し、前記メモリが、出力制御に応じて前記内部素材データを出力すると共に、前記内部字幕データを同一の識別子が付与された内部素材データと同期して出力し、分離部が、前記メモリからの内部素材データを前記映像音声情報と前記補助情報とに分離し、字幕差替え部が、前記分離部からの前記補助情報と、前記メモリからの前記内部字幕データとを同期して受信した場合、前記補助情報に含まれる字幕データを、前記内部字幕データにより差し替え、差替え補助情報を生成し、多重部が、前記分離部からの映像音声情報と、前記字幕差替え部からの前記差替え補助情報とを多重することを特徴とする。

上記構成による映像送出装置及び字幕差替え方法では、内部素材データと内部字幕データとを関連付けてメモリに蓄積する。内部素材データと関連付けられた内部字幕データは、その内部素材データと同期してメモリから出力される。そして、字幕差替え部は、内部素材データの補助情報と、メモリからの内部字幕データとを同時に受信した場合、補助情報に含まれる字幕データを内部字幕データにおける差替え字幕データで差し替えるようにしている。これにより、コンテンツサーバからのＭＸＦデータに含まれた字幕データを差し替えることが可能となる。

この発明によれば、ＭＸＦファイルにおける字幕データの差し替えが可能な映像送出装置を提供することができる。

本発明の一実施形態に係る映像送出装置の機能構成を示すブロック図である。図１のコンテンツサーバからのＭＸＦファイルを示す図である。図１の字幕編集端末からの差替え字幕データを示す図である。図１のメモリに蓄積される内部素材データを示す図である。図１のメモリに蓄積される内部字幕データを示す図である。

以下、図面を参照しながら本発明に係る映像送出装置の実施の形態について詳細に説明する。

図１は、本発明の一実施形態に係る映像送出装置１０の機能構成を示すブロック図である。図１における映像送出装置は、コンテンツサーバ２０、字幕編集部３０及び出力制御部４０と接続されている。

コンテンツサーバ２０は、素材データをＭＸＦ（Material eXchange Format）に準じたＭＸＦファイルとして蓄積する。コンテンツサーバ２０は、ＭＸＦファイルを映像送出装置１０へ出力する。ＭＸＦファイルは、メタデータ及び複数フレーム分の実データから成る。メタデータには、実データのフレーム数等の、ファイルを管理する上での各種管理情報が含まれている。

実データにおける各フレームは、映像データ、音声データ及びアンシラリ（ＡＮＣ）データが多重されて成る。ここで、ＡＮＣデータには、字幕データ及び先頭フレームからのタイムコード等が含まれている。なお、タイムコードは、ＡＮＣデータではなく、メタデータに含まれていても構わない。

字幕編集端末３０は、ユーザからの操作を受けて字幕データを編集し、差替え字幕データを作成する。字幕編集部３０は、差替え字幕データを映像送出装置１０へ出力する。このとき、差替え字幕データは、ＭＸＦファイルに変換されて出力されても良いし、ＡＮＣデータとして出力されても構わない。

ＭＸＦファイルとして出力される場合、ＭＸＦファイルには、メタデータとＡＮＣデータとが含まれる。ＡＮＣデータには、差替え字幕データと、この差替え字幕データを差替えるタイムコードとが含まれる。なお、タイムコードは、メタデータに含まれるようにしても構わない。ＡＮＣデータとして出力される場合、このＡＮＣデータには、差替え字幕データと、この差替え字幕データを差替えるタイムコードとが含まれる。

出力制御部４０は、局内時計等に基づいて、映像送出装置１０に対して出力制御を与える。

映像送出装置１０は、入力処理部１１、メモリ１２、分離部１３、字幕差替え部１４及び多重部１５を具備する。

入力処理部１１は、コンテンツサーバ２０からのＭＸＦファイルと、字幕編集部３０からの差替え字幕データとを別々のタイミングで受信し、ＭＸＦファイル及び差替え字幕データそれぞれに対して入力処理を行う。すなわち、入力処理部１１は、コンテンツサーバ２０からのＭＸＦファイルを受信し、メタデータを参照してフレーム単位で分割する。そして、入力処理部１１は、分割したデータそれぞれに対し、タイムコードに応じたフレーム番号を記載したヘッダを付与する。以下では、フレーム単位でヘッダが付与されたデータを内部素材データと称する。

また、入力処理部１１は、ＭＸＦファイルのタイムコードと、差替え字幕データのタイムコードとを比較する。そして、入力処理部１１は、差替え字幕データのタイムコードと、ＭＸＦファイルの実データのいずれかのフレームのタイムコードとが同一である場合、差替え字幕データに所定のフレーム番号が記載されたヘッダを付与する。ここで、このフレーム番号は、同一のタイムコードを有するフレームが含まれる内部素材データのヘッダに記載されたフレーム番号と同一のフレーム番号である。以下では、ヘッダが付与された差替え字幕データを内部字幕データと称する。これにより、内部字幕データと、差し替える必要のある字幕データを有する内部素材データとが関連付けられる。

メモリ１２は、入力処理部１１からの内部素材データ及び内部字幕データを蓄積する。

また、メモリ１２は、出力制御部４０からの出力制御に応じ、蓄積している内部素材データを分離部１３へ出力する。ここで、メモリ１２は、内部素材データのヘッダに記載されたフレーム番号と同一のフレーム番号がヘッダに記載された内部字幕データがある場合は、内部素材データに同期させてその内部字幕データを字幕差替え部１４へ出力する。なお、メモリ１２は、同一のフレーム番号が記載されたヘッダの内部字幕データが無い場合は、内部素材データのみを分離部１３へ出力する。

分離部１３は、メモリ１２からの内部素材データを、映像・音声データと、ＡＮＣデータとに分離し、映像・音声データを多重部１５へ出力し、ＡＮＣデータを字幕差替え部１４へ出力する。

字幕差替え部１４は、メモリ１２からの内部字幕データと、分離部１３からのＡＮＣデータとを同時に受け取った場合、分離部１３からのＡＮＣデータの字幕データを、メモリ１２からの内部字幕データにおける差替え字幕データに差し替える。字幕差替え部１４は、字幕データを差し替えたＡＮＣデータを多重部１５へ出力する。

また、字幕差替え部１４は、分離部１３からのＡＮＣデータのみを受信した場合、つまり、メモリ１２からの内部字幕データと、分離部１３からのＡＮＣデータとが同時に受信されない場合には、分離部１３からのＡＮＣデータをそのまま多重部１５へ出力する。

多重部１５は、分離部１３からの映像・音声データと、字幕差替え部１４からのＡＮＣデータとを多重して、ＳＤＩ信号として出力する。

次に、以上のように構成された映像送出装置１０による字幕差替え動作を、具体的に説明する。

図２乃至図５は、本発明の一実施形態に係る映像送出装置１０で処理されるデータの例を示す模式図である。

図２は、コンテンツサーバ２０からのＭＸＦファイルＡを示す模式図である。コンテンツサーバ２０からのＭＸＦファイルＡは、メタデータと、フレームＦ１〜Ｆｎの実データとから成り、フレームＦ１〜Ｆｎはそれぞれ映像データ、音声データ及びＡＮＣデータを多重して成る。ＡＮＣデータには、字幕データＣ１〜Ｃｎ及びタイムコードＴ１〜Ｔｎがそれぞれ含まれる。

図３は、字幕編集端末３０からの差替え字幕データを示す模式図である。字幕編集端末３０は、差替え字幕データをＭＸＦファイルＢとして出力する。ＭＸＦファイルＢは、メタデータと、ＡＮＣデータとから成り、ＡＮＣデータには、差替え字幕データＣ２’と、タイムコードＴ２とが含まれる。

入力処理部１１は、コンテンツサーバ２０からのＭＸＦファイルＡをフレーム単位で分割し、図４に示す内部素材データＤ１〜Ｄｎに変換する。このとき、フレームＦ１はフレーム番号「１」が記載されたヘッダが付与されて内部素材データＤ１に変換され、フレームＦ２はフレーム番号「２」が記載されたヘッダが付与されて内部素材データＤ２に変換され、…、フレームＦｎはフレーム番号「ｎ」が記載されたヘッダが付与されて内部素材データＤｎに変換される。

また、入力処理部１１は、字幕編集端末３０からの差替え字幕データを、図５に示す内部字幕データＩＣ１に変換する。このとき、入力処理部１１は、ＭＸＦファイルＢのＡＮＣデータに含まれるタイムコードＴ２と、ＭＸＦファイルＡのフレームＦ１〜ＦｎのタイムコードＴ１〜Ｔｎとを比較する。入力処理部１１は、フレームＦ２のタイムコードＴ２と、ＭＸＦファイルＢのＡＮＣデータに含まれるタイムコードＴ２とが同一であるため、差替え字幕データＣ２’にフレーム番号「２」が記載されたヘッダを付与する。

メモリ１２は、内部素材データＤ１〜Ｄｎ及び内部字幕データＩＣ１を蓄積する。メモリ１２は、出力制御部４０からの出力制御に従い、内部素材データＤ１〜Ｄｎを分離部１３へ順次出力する。このとき、メモリ１２は、ヘッダにフレーム番号「２」が記載された内部字幕データＩＣ１を、内部素材データＤ２と同期させて字幕差替え部１４へ出力する。

分離部１３は、メモリ１２からの内部素材データＤ１〜Ｄｎを、映像・音声データ及びＡＮＣデータに分離し、映像・音声データを多重部１５へ出力し、ＡＮＣデータを字幕差替え部１４へ出力する。

字幕差替え部１４は、内部素材データＤ１のＡＮＣデータを分離部１３から受信し、受信したＡＮＣデータをそのまま多重部１５へ出力する。続いて、字幕差替え部１４は、分離部１３からの内部素材データＤ２のＡＮＣデータと、メモリ１２からの内部字幕データＩＣ１とを、ほぼ同時に受信する。字幕差替え部１４は、内部素材データＤ２のＡＮＣデータに含まれる字幕データを、内部字幕データＩＣ１の差替え字幕データに差し替える。字幕差替え部１４は、字幕データを差し替えたＡＮＣデータを多重部１５へ出力する。さらに、内部字幕データＩＣ１がない場合、字幕差替え部１４は、分離部１３から出力された内部素材データＤ３〜ＤｎのＡＮＣデータを順次受信し、受信したＡＮＣデータをそのまま多重部１５へ出力する。

多重部１５は、分離部１３からの映像・音声データと、字幕差替え部１４からのＡＮＣデータとを多重し、ＳＤＩ信号として出力する。

以上のように、上記一実施形態では、ＭＸＦファイルを内部素材データに変換し、差替え字幕データを内部字幕データに変換する際、内部素材データと内部字幕データとを関連付けてメモリ１２に蓄積する。メモリ１２は、内部素材データと、この内部素材データに関連付けられた内部字幕データとを同期して出力する。字幕差替え部１４は、分離部１３からの内部素材データのＡＮＣデータと、メモリ１２からの内部字幕データとが同時に供給された場合、ＡＮＣデータに含まれる字幕データを内部字幕データにおける差替え字幕データで差し替える。そして、多重部１５は、分離部１３からの映像・音声データに字幕差替え部１４からのＡＮＣデータを多重し、ＳＤＩ信号を出力する。これにより、映像送出装置１０は、字幕データを差し替えることが可能となる。

したがって、本実施形態に係る映像送出装置１０によれば、自装置のみでＭＸＦファイルにおける字幕データを差し替えることができる。これにより、コンテンツサーバ２０からのＭＸＦファイルをＳＤＩ信号へ変換するのと同時に字幕データの差し替えが可能となるため、ＳＤＩ信号を送出するまでにかかる時間を短縮することができる。また、従来必要であった字幕差替えサーバが不要となるため、放送局内のシステムの高コスト化及び大型化を抑制することができる。

なお、この発明は上記実施形態に限定されるものではない。例えば上記実施形態では、入力処理部１１がコンテンツサーバ２０からのＭＸＦファイルをフレーム単位で分割し、分割したデータそれぞれに対し、タイムコードに応じたフレーム番号を記載したヘッダを付与する場合を例に説明した。しかし、入力処理部１１は、コンテンツサーバ２０からのＭＸＦファイルを、ＧＯＰ（Group Of Picture）単位で分割し、分割したデータそれぞれに対し、タイムコードに応じたＧＯＰ番号を記載したヘッダを付与するようにしても構わない。このときは、ＧＯＰ単位でヘッダが付与されたデータを内部素材データと称する。

また、入力処理部１１は、差替え字幕データのタイムコードと、ＭＸＦファイルにおける複数フレームのタイムコードとを比較する。そして、入力処理部１１は、差替え字幕データのタイムコードと、ＭＸＦファイルにおけるいずれかのフレームのタイムコードとが同一である場合、差替え字幕データに所定のＧＯＰ番号が記載されたヘッダを付与する。ここで、このＧＯＰ番号は、同一のタイムコードを有するフレームが含まれる内部素材データのヘッダに記載されたＧＯＰ番号と同一である。これにより、内部字幕データと、差し替える必要のある字幕データを有する内部素材データとが関連付けられる。

また、上記実施形態に係る映像送出装置１０は、分離部１３と多重部１５との間に、デコーダを具備していても構わない。これにより、分離部１３からＭＰＥＧ．２に準拠した映像・音声データが出力された場合、このデータをデコードして多重部１５へ供給することが可能となる。

さらに、この発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。

１０…映像送出装置
１１…入力処理部
１２…メモリ
１３…分離部
１４…字幕差替え部
１５…多重部
２０…コンテンツサーバ
３０…字幕編集端末
４０…出力制御部
Ａ，Ｂ…ＭＸＦファイル
Ｃ１〜Ｃｎ…字幕データ
Ｃ２’…差替え字幕データ
Ｄ１〜Ｄｎ…内部素材データ
Ｆ１〜Ｆｎ…フレーム
Ｔ１〜Ｔｎ…タイムコード
ＩＣ１…内部字幕データ

Claims

複数のフレームから成り前記フレームには映像音声情報及び補助情報が含まれるＭＸＦ（Material eXchange Format）データを蓄積する素材サーバと、字幕データを編集して差替え字幕データを生成する字幕編集端末とに接続する映像送出装置において、
前記素材サーバから出力される前記ＭＸＦデータに対して予め設定された数のフレーム単位で識別子を付与して内部素材データを生成し、前記フレームと前記字幕編集部からの前記差替え字幕データとが対応する場合には、前記差替え字幕データに前記フレームを含む内部素材データと同一の識別子を付与して内部字幕データを生成する入力処理部と、
前記入力処理部からの内部素材データと内部字幕データとを記録し、出力制御に応じて前記内部素材データと前記内部字幕データとを出力するメモリであって、前記内部字幕データを同一の識別子が付与された内部素材データと同期して出力するメモリと、
前記メモリからの内部素材データを前記映像音声情報と前記補助情報とに分離する分離部と、
前記分離部からの前記補助情報と、前記メモリからの前記内部字幕データとを同期して受信した場合、前記補助情報に含まれる字幕データを、前記内部字幕データにより差し替え、差替え補助情報を生成する字幕差替え部と、
前記分離部からの映像音声情報と、前記字幕差替え部からの前記差替え補助情報とを多重する多重部と
を具備することを特徴とする映像送出装置。
前記入力処理部は、前記ＭＸＦデータに対してＧＯＰ単位で識別子を付与することを特徴とする請求項１記載の映像送出装置。
前記入力処理部は、前記ＭＸＦデータに対してフレーム単位で識別子を付与することを特徴とする請求項１記載の映像送出装置。
複数のフレームから成り前記フレームには映像音声情報及び補助情報が含まれるＭＸＦ（Material eXchange Format）データを蓄積する素材サーバと、字幕データを編集して差替え字幕データを生成する字幕編集端末とに接続する映像送出装置で用いられる字幕差替え方法において、
入力処理部が、前記素材サーバから出力される前記ＭＸＦデータに対して予め設定された数のフレーム単位で識別子を付与して内部素材データを生成し、
前記入力処理部が、前記フレームと前記字幕編集部からの前記差替え字幕データとが対応する場合には、前記差替え字幕データに前記フレームを含む内部素材データと同一の識別子を付与して内部字幕データを生成し、
メモリが、前記入力処理部からの内部素材データと内部字幕データとを記録し、
前記メモリが、出力制御に応じて前記内部素材データを出力すると共に、前記内部字幕データを同一の識別子が付与された内部素材データと同期して出力し、
分離部が、前記メモリからの内部素材データを前記映像音声情報と前記補助情報とに分離し、
字幕差替え部が、前記分離部からの前記補助情報と、前記メモリからの前記内部字幕データとを同期して受信した場合、前記補助情報に含まれる字幕データを、前記内部字幕データにより差し替え、差替え補助情報を生成し、
多重部が、前記分離部からの映像音声情報と、前記字幕差替え部からの前記差替え補助情報とを多重することを特徴とする字幕差替え方法。