JP2022047016A - プレビュー装置、プレビュープログラム - Google Patents

Abstract

【課題】専用のハードウェアや事前のエンコード処理をすることなく放送用素材のプレビューを可能とするプレビュー装置を提供すること。【解決手段】実施形態によれば、プレビュー装置は、記録部、素材解析部、デコード部、映像合成部を有する。プレビュー装置は、放送用素材のデータを放送局用のフォーマットにより保存するファイル、及び前記放送用素材の再生を制御するための再生情報を格納する。素材解析部は、プレビューの対象とする放送用素材の再生情報をもとに前記放送用素材を解析して、プレビューに必要な放送用素材のデータを抽出する。デコード部は、前記素材解析部により抽出された放送用素材のデータをデコードする。映像合成部は、前記デコード部によりデコードされた放送用素材のデコード結果をブラウザで再生可能な形式に合成する。【選択図】図１

Description

本発明は、プレビュー装置、プレビュープログラムに関する。

放送に送出する放送用素材については、放送前に事前確認するためにプレビュー装置が用いられる。従来のプレビュー装置では、例えば特許文献１に記載されているように、番組オンエアの情報に基づき、サーバ制御によってビデオサーバやデコーダ、スイッチャーなどのハードウェアを制御してモニタに素材を表示するプレビューする第１の方法がある。

また、特許文献２に記載するように、ハードウェアを制御してプレビューするのではなく、放送用素材のデータに対して、事前にＷｅｂブラウザで再生可能な形式に変換（エンコード）してＷｅｂプレビュー用のメディアファイルを生成し、このメディアファイルをサーバに蓄積しておくことで、メディアファイルをもとにＷｅｂ素材をプレビューする第２の方法がある。

特開２００５－２４４７１３号公報 特開２０１０－１８３２６４号公報

しかしながら、特許文献１に記載された第１の方法では、プレビューのための専用のハードウェアを用意する必要があるため、設備投資のコスト増加が必要であり、またプレビューに専用のハードウェアが設置された場所でしかプレビューを行うことができないといった課題があった。

また、特許文献２に記載された第２の方法では、Ｗｅｂ上でのプレビューを行う方法であるため、ネットワークを介して接続された端末で再生可能であるものの、放送用素材のデータに対して事前にエンコードしてメディアファイルを生成し、サーバに蓄積しておく必要があるため手間がかかってしまう。また、放送用素材のデータに対してエンコードした場合、放送用素材のデータとは異なるフォーマットのメディアファイルに変換されているため、メディアファイルに基づくプレビューが放送用素材のデータに対するプレビューと同一であるとはいえなかった。

本発明が解決しようとする課題は、専用のハードウェアや事前のエンコード処理をすることなく放送用素材のプレビューを可能とするプレビュー装置、プレビュープログラムを提供することである。

実施形態によれば、プレビュー装置は、記録部、素材解析部、デコード部、映像合成部を有する。プレビュー装置は、放送用素材のデータを放送局用のフォーマットにより保存するファイル、及び前記放送用素材の再生を制御するための再生情報を格納する。素材解析部は、プレビューの対象とする放送用素材の再生情報をもとに前記放送用素材を解析して、プレビューに必要な放送用素材のデータを抽出する。デコード部は、前記素材解析部により抽出された放送用素材のデータをデコードする。映像合成部は、前記デコード部によりデコードされた放送用素材のデコード結果をブラウザで再生可能な形式に合成ブラウザで再生可能な形式に合成する。

本実施形態におけるＷｅｂプレビュー装置の構成を示すブロック図。 本実施形態における映像合成部の構成を示すブロック図。 放送用素材のベース映像のデータを保存するＭＸＦファイルのデータ形式を示す図。 再生情報の一例を示す図。 本実施形態における端末の動作を示すフローチャート。 本実施形態におけるサーバの動作を示すフローチャート。 本実施形態におけるプレビュー設定画面の一例を示す図。 本実施形態における端末の別の機能構成を示す図。

以下、実施形態について図面を参照して説明する。

本実施形態におけるＷｅｂプレビュー装置１は、サーバ１１に記憶された放送用素材を端末２１でデコードし、映像合成することによりプレビューを行うものである。端末１２は、サーバ１１に対して放送用素材の取得を要求し、サーバ１１で放送用素材や放送用素材の再生を制御するための再生情報からプレビューに必要なデータのみを抽出・生成する。端末１２は、サーバ１１で生成された放送用素材のデータについてデコードを行い、デコード結果を合成して出力する。

これにより、従来の手法では必要だった、放送用素材に対する事前のエンコード処理を行わずに、プレビューすることを可能にする。

［Ｗｅｂプレビュー装置１の構成］
図１は、本実施形態におけるＷｅｂプレビュー装置１の構成を示すブロック図である。本実施形態におけるＷｅｂプレビュー装置１は、サーバ１１と、ネットワーク３０を介して接続される端末２１を備える。図１では、１つの端末２１を示しているが、複数の端末２１が設けられていても良い。

サーバ１１は、プロセッサ、メモリ及び記憶装置を含むコンピュータの構成を有しており、プロセッサによりメモリに記憶されたプログラムを実行することで各種の機能を実現する。

サーバ１１は、ファイルサーバ１１１、データベース（ＤＢ）１１２、素材解析部１１３、Ｗｅｂサーバ部１１４を有している。

ファイルサーバ１１１は、放送用素材のデータを放送局用のフォーマットにより保存するファイルを格納する。放送局用のフォーマットとして、例えばＭＸＦ（Material eXchange Format）が用いられる（図３参照）。ＭＸＦファイルは、放送用素材などをファイル化したうえで、例えば放送局間でネットワークを通じて伝送するのに好適なコンテナフォーマットである。放送用素材には、例えばベース映像、字幕、提供表示などが含まれる。

ＤＢ１１２は、ファイルサーバ１１１に格納された放送用素材の再生を制御するための再生情報を格納する（図４参照）。

素材解析部１１３は、ＤＢ１１２に格納された再生情報をもとに、ファイルサーバ１１１に格納されたＭＸＦファイルからプレビューに必要な映像・音声データ、字幕、提供表示のデータを解析し、抽出する。

Ｗｅｂサーバ部１１４は、端末２１のインタフェース部２１４との通信を行う。

端末２１は、プロセッサ、メモリ及び記憶装置を含むコンピュータの構成を有しており、プロセッサによりメモリに記憶されたプログラムを実行することで各種の機能を実現する。端末２１は、例えばプロセッサによりプレビュープログラムを実行することで、サーバ１１に格納された放送用素材についてプレビューするための機能を実現する。プレビュープログラムには、例えば、Ｗｅｂブラウザプログラム、ブラウザ上で実行されるＪａｖａＳｃｒｉｐｔ（登録商標）によるプログラムなどを含む。

端末２１は、プレビュープログラムにより、デコード部２１１、映像合成部２１２、メイン部２１３、インタフェース部２１４の機能を実現する。

デコード部２１１は、サーバ１１の素材解析部１１３で抽出された放送用素材（例えば、ベース映像、字幕、提供表示など）のデータに対するデコード処理を行う。

映像合成部２１２は、デコード部２１１によりデコードされた放送用素材のデコード結果を、メイン部２１３（ブラウザ）により再生可能に合成する。映像合成部２１２は、例えばＨＴＭＬ（Hyper Text Markup Language）（ＨＴＭＬ５）のＣａｎｖａｓの技術仕様に従い、例えば、ベース映像、字幕、提供表示などの映像の描画内容を指定する。

メイン部２１３は、例えばＷｅｂブラウザにより実現されるもので、デコード部２１１、映像合成部２１２、インタフェース部２１４への処理要求の割り振りを行う。メイン部２１３は、プレビュー対象とする素材の指定、及び放送用素材に含まれる映像、字幕、提供表示の少なくとも１つをプレビューの対象とする指定を入力するためのプレビュー設定画面をディスプレイに表示させる。メイン部２１３は、デコード部２１１により合成された放送用素材のデコード結果に応じてプレビューをディスプレイに表示させる。

インタフェース部２１４は、Ｗｅｂサーバ部１１４との通信を行う。

次に、本実施形態における映像合成部２１２の機能について説明する。図２は、本実施形態における映像合成部２１２の構成を示すブロック図である。

映像合成部２１２は、例えば、ベース映像Ｃａｎｖａｓ２１２ａ、提供Ｃａｎｖａｓ２１２ｂ、字幕Ｃａｎｖａｓ２１２ｃ、出力Ｃａｎｖａｓ２１２ｄを備える。

ベース映像Ｃａｎｖａｓ２１２ａ及び提供Ｃａｎｖａｓ２１２ｂは、デコード部２１１によりデコードされた映像（ベース映像、提供表示の映像）の描画を行う。字幕Ｃａｎｖａｓ２１２ｃは、素材解析部１１３で解析された字幕情報を描画する。出力Ｃａｎｖａｓ２１２ｄは、ベース映像Ｃａｎｖａｓ２１２ａ、提供Ｃａｎｖａｓ２１２ｂ、字幕Ｃａｎｖａｓ２１２ｃを順次合成し、出力映像を生成する。

また、映像合成部２１２（出力Ｃａｎｖａｓ２１２ｄ）は、メイン部２１３により表示されたプレビュー設定画面を通じて入力された指定に応じて、プレビューの表示対象とする放送用素材（ベース映像、字幕、提供表示）に応じて、ベース映像Ｃａｎｖａｓ２１２ａ、提供Ｃａｎｖａｓ２１２ｂ、字幕Ｃａｎｖａｓ２１２ｃの何れかを選択して合成することができる。

図３は、サーバ１１のファイルサーバ１１１に格納される放送用素材のベース映像のデータを保存するＭＸＦファイルのデータ形式を示す図である。

ＭＸＦファイルはコンテナフォーマットであるため、様々な方式の映像のエンコード方式を用いることができる。本実施形態では、例えばＭＰＥＧ（Moving Picture Experts Group）－２、ＬｏｎｇＧＯＰを用いるものとする。なお、ＭＰＥＧ－２、 ＬｏｎｇＧＯＰに限定するものではない。

図３に示すように、ベース映像のＭＸＦファイル３１では、１フレーム毎に映像データと音声データ１～８、及び字幕データが含まれている。

ＭＸＦファイルは、ＫＬＶ（Key-length-value）と呼ばれるデータ要素の集まりからなるファイルフォーマットである。素材解析部１１３は、プレビューの対象とする放送用素材の再生情報に応じて、ＭＸＦファイルのＫｅｙ値をもとに映像及び字幕のデータの抽出を行う。素材解析部１１３により抽出された映像及び字幕のデータは、いくつかのフレーム数分をまとめて（例えば１５フレーム分）端末２１に送信される。

なお、ファイルサーバ１１１には、提供表示のデータが保存されたＭＸＦファイルが、図３に示すＭＸＦファイル３１と同様のフォーマットにより格納されている。この場合、字幕は、例えば提供元の会社名を表示するためのデータとなる。データ形式が同一であるので提供表示のデータが保存されたＭＸＦファイルの図示を省略する。

図４は、ＤＢ１１２に格納される再生情報の一例を示す図である。

図４は、例えば素材Ｘ（例えば、放送番組Ｘ）に対する再生情報を示すもので、再生開始時刻、再生終了時刻、提供表示に関する提供情報が含まれる。提供情報には、素材Ｘ（番組）の放送中に提供情報が表示される回数分（図４では２回）の情報が含まれる。提供情報には、開始時刻、終了時刻、素材ＩＤが含まれる。素材ＩＤは、提供表示に使用される映像のファイルを指定するデータである。

素材解析部１１３は、再生情報に応じて、プレビューの対象として指定された素材を表示するためのデータを、ファイルサーバ１１１に格納されたＭＸＦファイルから抽出する。

［Ｗｅｂプレビュー装置１の動作］
図５は、本実施形態における端末２１の動作を示すフローチャートである。図６は、本実施形態におけるサーバ１１の動作を示すフローチャートである。

端末２１のメイン部２１３は、サーバ１１に格納された放送用素材からプレビュー対象を指定させるためのプレビュー設定画面をディスプレイに表示させる（ステップＡ１）。

図７は、本実施形態におけるプレビュー設定画面の一例を示す図である。図７に示すプレビュー設定画面では、プレビューの対象とする素材の指定を入力するための素材指定エリア４１、再生対象とする放送用素材のベース映像、字幕、提供表示のそれぞれについて、各映像の合成有無を指定するためのベース映像ボタン４２１，字幕ボタン４２２，提供表示ボタン４２３が設けられている。また、設定完了を指示すためのＯＫボタン４３と設定中止を指示するためのＮＧボタン４４が設けられている。

素材指定エリア４１では、例えばサーバ１１（ファイルサーバ１１１）に格納された素材の一覧が表示され、その一覧からプレビューの対象を指定することができる。図４では「素材Ｘ」がプレビュー対象として指定された状態を示している。

また、図７では、再生対象として、ベース映像ボタン４２１と字幕ボタン４２２が選択状態にあり、提供表示を除いたベース映像と字幕の映像を合成したプレビューを表示することを指定したことを示している。

メイン部２１３は、ＯＫボタン４３が指示されことによりプレビュー対象とする素材の設定完了が指示されると、プレビュー設定画面における指定された内容を入力し、インタフェース部２１４に素材の取得を要求する（ステップＡ２）。すなわち、プレビューの対象とする素材（図４に示す設定では「素材Ｘ」）の取得を要求する。

インタフェース部２１４は、Ｗｅｂサーバ部１１４に素材の取得を要求する（ステップＡ３）。

サーバ１１のＷｅｂサーバ部１１４は、端末２１から素材の取得の要求を受信すると（図６、ステップＢ１）、素材解析部１１３に端末２１からプレビューの対象として要求された素材の解析を要求する（ステップＢ２）。

素材解析部１１３は、ファイルサーバ１１１からプレビューの対象とする素材のデータを取得し、またＤＢ１１２からプレビューの対象とする放送用素材に対応する再生情報を取得する（ステップＢ３）。

素材解析部１１３は、取得したプレビューの対象とする放送用素材の再生情報をもとに放送用素材を解析し、端末２１において指定された素材についてプレビューの映像を表示するために必要なデータをＭＸＦファイルから抽出する（ステップＢ４）。

Ｗｅｂサーバ部１１４は、素材解析部１１３による解析により抽出されたデータを、端末２１のインタフェース部２１４に送信する（ステップＢ５）。

端末２１のインタフェース部２１４は、Ｗｅｂサーバ部１１４を経由して、素材解析部１１３から解析結果データを取得する（図５、ステップＡ４）。

メイン部２１３は、インタフェース部２１４から放送用素材のデータを受け取り、デコード部２１１に対してデコード要求を行う（ステップＡ５）。

デコード部２１１は、デコード要求に従い、サーバ１１から受信された放送用素材のベース映像及び提供映像のデータに対してデコードを行う（ステップＡ６）。デコード部２１１によるデコードは、放送用素材のデータに対してエンコードする場合と異なるため、本来の放送用素材の内容を変更しない。

メイン部２１３は、デコード部２１１によるデコード結果を映像合成部２１２に渡してデコード結果の合成を要求する（ステップＡ７）。

映像合成部２１２は、メイン部２１３からの要求に従い、デコード部２１１によるデコード結果を合成する（ステップＡ８）。ここで、映像合成部２１２は、プレビュー設定画面において指定されている、プレビューの表示対象とする放送用素材（ベース映像、字幕、提供表示）について合成する。例えば、図７に示すプレビュー設定画面のように、映像と字幕が指定されている場合、映像合成部２１２の出力Ｃａｎｖａｓ２１２ｄは、ベース映像Ｃａｎｖａｓ２１２ａと字幕Ｃａｎｖａｓ２１２ｃとを合成して出力映像を生成する。

メイン部２１３は、映像合成部２１２により合成された出力映像をブラウザ画面において表示させる（ステップＡ９）。メイン部２１３により表示されるプレビューでは、事前にプレビュー設定画面において指定した対象（ベース映像、字幕、提供表示）が合成されて表示されるので、プレビューの目的にあった映像の確認ができる。

このようにして、本実施形態におけるＷｅｂプレビュー装置１では、放送用素材を解析して抽出されたプレビュー対象とするデータに対するデコード処理を行うことにより、専用のハードウェアを用いずに、かつ事前のエンコード処理を行わずに放送用素材のプレビューが可能となる。

従って、プレビューのための専用のハードウェアが不要であるので設備投資のコストの増加を招かなくて済み、また専用のハードウェアが設置された場所に限らず、サーバ１１とネットワーク３０を介して接続された、任意の場所に設置された端末２１においてプレビューを閲覧することができる。

さらに、プレビューを表示させるために事前のエンコード処理などを行う必要がなくなるため、プレビューを表示するための手間を省き時間の短縮が可能となる。

なお、端末２１の機能構成を図１とは異なる図８に示すようにしても良い。

放送用素材は、多くの場合、３０ｆｐｓ（２９．９７ｆｐｓ）のフレームレートであるため、１秒間に３０枚のフレームを描画する必要がある。図８に示す構成では、複数のデコード部２１１－１～２１１－ｎ、複数の映像合成部２１２－１～２１２－ｎ、複数のインタフェース部２１４－１～２１４－ｎを設ける。すなわち、各処理部を例えばＷｅｂＷｏｋｅｒ（登録商標）を用いてスレッド化し、複数のフレームについて並列処理を行うことができるようにする。これにより、スムーズなプレビューの表示を可能にすることができる。

また、前述した説明では、Ｗｅｂプレビュー装置１は、サーバ１１と端末２１により構成しているが、前述したサーバ１１と端末２１の機能を一体化した装置として実現することも可能である。

また、上記の各実施形態に記載した手法は、コンピュータに実行させることのできるプログラムとして、磁気ディスク（フレキシブルディスク、ハードディスクなど）、光ディスク（ＣＤ－ＲＯＭ、ＤＶＤなど）、光磁気ディスク（ＭＯ）、半導体メモリなどの記憶媒体に格納して頒布すること
もできる。

また、この記憶媒体としては、プログラムを記憶でき、かつコンピュータが読み取り可能な記憶媒体であれば、その記憶形式は何れの形態であっても良い。

また、記憶媒体からコンピュータにインストールされたプログラムの指示に基づきコンピュータ上で稼働しているＯＳ（オペレーティングシステム）や、データベース管理ソフト、ネットワークソフト等のＭＷ（ミドルウェア）等が上記実施形態を実現するための各処理の一部を実行しても良い。

さらに、各実施形態における記憶媒体は、コンピュータと独立した媒体に限らず、ＬＡＮやインターネット等により伝送されたプログラムをダウンロードして記憶または一時記憶した記憶媒体も含まれる。

また、記憶媒体は１つに限らず、複数の媒体から上記の各実施形態における処理が実行される場合も本発明における記憶媒体に含まれ、媒体構成は何れの構成であっても良い。

なお、各実施形態におけるコンピュータは、記憶媒体に記憶されたプログラムに基づき、上記の各実施形態における各処理を実行するものであって、パーソナルコンピュータ等の１つからなる装置、複数の装置がネットワーク接続されたシステム等の何れの構成であっても良い。

また、各実施形態におけるコンピュータとは、情報処理機器に含まれる演算処理装置、マイコン等も含み、プログラムによって本発明の機能を実現することが可能な機器、装置を総称している。

なお、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１…Ｗｅｂプレビュー装置、１１…サーバ、１１１…ファイルサーバ、１１２…データベース（ＤＢ）、１１３…素材解析部、１１４…Ｗｅｂサーバ部、２１…端末、２１１，２１１－１，…，２１１－ｎ…デコード部、２１２，２１２－１，…，２１２－ｎ…映像合成部、２１３…メイン部、２１４，２１４－１，…，２１４－ｎ…インタフェース部、３０…ネットワーク、２１２ａ…ベース映像Ｃａｎｖａｓ、２１２ｂ…提供Ｃａｎｖａｓ、２１２ｃ…字幕Ｃａｎｖａｓ、２１２ｄ…出力Ｃａｎｖａｓ。

Claims (5)

1. 放送用素材のデータを放送局用のフォーマットにより保存するファイル、及び前記放送用素材の再生を制御するための再生情報を格納する記録部と、
   プレビューの対象とする放送用素材の再生情報をもとに前記放送用素材を解析して、プレビューに必要な放送用素材のデータを抽出する素材解析部と、
   前記素材解析部により抽出された放送用素材のデータをデコードするデコード部と、
   前記デコード部によりデコードされた放送用素材のデコード結果をブラウザで再生可能な形式に合成する映像合成部とを有するプレビュー装置。
2. 前記放送用素材に含まれる映像、字幕、提供表示から少なくとも１つをプレビューの対象とする指定を入力する入力部をさらに有し、
   前記映像合成部は、入力された指定に対応する映像、字幕、提供表示の少なくとも１つをブラウザで再生可能な形式に合成する請求項１記載のプレビュー装置。
3. 前記デコード部と前記映像合成部とをそれぞれ複数設けて、複数のフレームについて並列処理する請求項１記載のプレビュー装置。
4. サーバと、ネットワークを介して接続された端末とを有するプレビュー装置であって、
   前記サーバは、
   放送用素材のデータを放送局用のフォーマットにより保存するファイル、及び前記放送用素材を再生するための再生情報を格納する記録部と、
   前記端末からの要求に応じて、プレビューの対象とする放送用素材の再生情報をもとに前記放送用素材を解析して、プレビューに必要な放送用素材のデータを抽出する素材解析部とを有し、
   前記端末は、
   前記素材解析部により抽出された放送用素材のデータをデコードするデコード部と、
   前記デコード部によりデコードされた放送用素材のデコード結果をブラウザで再生可能な形式に合成する映像合成部とを有するプレビュー装置。
5. コンピュータを、
   サーバの記録部に記録された放送用素材からプレビューの対象を指定させる画面を表示させる表示部と、
   前記画面を通じて指定されたプレビューの対象に応じて、放送用素材のデータを放送局用のフォーマットにより保存するファイルからプレビューの対象とする放送用素材の再生情報をもとに前記放送用素材を解析して抽出された、プレビューに必要な放送用素材のデータを前記サーバから受信するインタフェース部と、
   前記インタフェース部により受信された放送用素材のデータをデコードするデコード部と、
   前記デコード部によりデコードされた放送用素材のデコード結果をブラウザで再生可能な形式に合成する映像合成部として機能させるためのプレビュープログラム。

Images