JP2017098947A - モバイルデバイスを利用した中継放送を支援するための方法、そのデバイス、及び非一時的なコンピュータ可読記録媒体 - Google Patents

Abstract

【課題】 モバイルデバイスを利用した中継放送を支援するための方法、そのデバイス、及び非一時的なコンピュータ可読記録媒体を提供する。【解決手段】 モバイルデバイスを利用した中継放送を支援するための方法、そのデバイス、及び非一時的なコンピュータ可読記録媒体に係り、中継放送コンテンツを制作するのに所要する演算負担を複数の撮影者デバイスに分散させ、リピータデバイスの演算負担を減らし、結果として、中継放送に参加することができる撮影者デバイスの範囲を広げることができる。【選択図】図２

Description

本発明は、モバイルデバイスを利用した中継放送を支援するための方法、そのデバイス、及び非一時的なコンピュータ可読記録媒体に関する。

基本的に、映像（ビデオ）（video）信号や音響（オーディオ）（audio）信号の処理には多くのハードウェア資源（例えば、ＣＰＵ（central processing unit）、メモリなど）が必要となるために、多くのチャネルを介して入力されるビデオ信号及びオーディオ信号を、リアルタイムで処理及び編集し、中継放送信号を制作するためには、相当に高い仕様を備えた高価の装備が要求される。最近、放送通信技術の発達により、装備の性能が高くなって大衆化はされてはいるが、それら装備が処理しなければならないビデオ信号及びオーディオ信号も、その解像度及び品質が高くなったために、依然として高い仕様を備えた高価の装備を利用せずしては、複数のビデオ信号及びオーディオ信号を処理して編集し難いというのが実情である。

特に、一般ユーザは、スマートフォンやタブレットＰＣ（personal computer）のようなモバイルデバイスに具備されたカメラやマイクを利用して、自分だけのビデオやオーディオを生成することができるにもかかわらず、モバイルデバイスが有する性能の限界により、自分が生成したビデオ信号やオーディオ信号を、単にアップロードしたりダウンロードしたりする程度の処理だけを行えるだけであり、多くのビデオ信号及びオーディオ信号が結合された中継放送コンテンツの制作は、困難であり、それにより、モバイルデバイスを利用して生成することができるビデオ及びオーディオを、さらに多様な形態に活用するところに限界があった。

本発明は、前述の問題点をいずれも解決することをその目的とする。

また、本発明は、第１撮影者デバイスで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイスで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信し、前述の受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つをリピータデバイスを介してリピータに提供し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つに対する編集入力を参照し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを含む中継放送コンテンツに係わる編集についての編集データを生成し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも１つの品質が前述の編集入力に基づいて適応的に決定されるようにすることにより、複数のモバイルデバイスから受信されたビデオデータまたはオーディオデータに係わる中継放送コンテンツを制作するのに所要する演算負担を分散させることを他の目的とする。

前記目的を達成するための本発明の代表的な構成は、次の通りである。

本発明の一実施形態による、モバイルデバイスを利用した中継放送を支援するための方法は、リピータデバイスが、第１撮影者デバイスで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイスで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信する段階と、前記リピータデバイスが、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを、前記リピータデバイス上に提供する段階と、前記リピータデバイスが、前記提供される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つに対するリピータの編集入力を参照し、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを含む中継放送コンテンツに係わる編集についての編集データを生成する段階と、を含み、前記第１撮影者デバイスまたは前記第２撮影者デバイスから伝送され、前記リピータデバイスで受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも１つの品質は、前記編集入力に基づいて適応的に決定され、前記品質を適応的に決定することに係わる制御信号が、前記リピータデバイスから、前記第１撮影者デバイスまたは前記第２撮影者デバイスに伝送され、前記編集の対象になるデータの品質が、前記編集の対象にならないデータの品質より高く決定され、前記編集の対象になっている特定データの品質が、前記編集の対象になる前または後の前記特定データの品質より高く決定される。

本発明の他の実施形態によれば、モバイルデバイスを利用した中継放送を支援するためのデバイスは、第１撮影者デバイスで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイスで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信するデータ受信部と、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つをリピータデバイス上に提供し、前記提供される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つに対するリピータの編集入力を参照し、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを含む中継放送コンテンツに係わる編集についての編集データを生成する中継放送コンテンツ編集部と、を含み、前記第１撮影者デバイスまたは前記第２撮影者デバイスから伝送され、前記リピータデバイスで受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも１つの品質は、前記編集入力に基づいて適応的に決定され、前記品質を適応的に決定することに係わる制御信号が、前記リピータデバイスから、前記第１撮影者デバイスまたは前記第２撮影者デバイスに伝送され、前記編集の対象になるデータの品質が、前記編集の対象にならないデータの品質より高く決定され、前記編集の対象になっている特定データの品質が、前記編集の対象になる前または後の前記特定データの品質より高く決定される。

それ以外にも、本発明を具現するための他の方法、そのデバイス、及び前記方法を実行するためのコンピュータプログラムを記録するためのコンピュータ可読記録媒体がさらに提供される。

本発明によれば、ビデオデータまたはオーディオデータに対して、多くの演算資源が必要となる処理を行わずに、中継放送コンテンツを制作することができるので、一般的な無線通信網（例えば、３Ｇ（３rd generation）やＬＴＥのような移動通信網、Ｗｉ−Ｆｉ（wireless fidelity）、Ｗｉ−Ｆｉ direct、ＬＴＥダイレクト（ＬＴＥ direct）のような近距離通信網など）に接続することができるモバイルデバイスのみを有している一般ユーザが、手軽に中継放送コンテンツを制作することができる。

また、本発明によれば、ユーザが、装備の性能に大きく影響を受けずにも、多様な編集効果を出すことができる。

また、本発明によれば、複数の撮影者デバイスで生成されるビデオデータ及びオーディオデータが、当該撮影者デバイスにおいて、直接サンプリング及び同期化され、サンプリングデータの品質（例えば、サンプリングレート、解像度、データサイズなど）が当該サンプリングデータが編集の対象になるか否かということに基づいて、適応的に決定されるので、中継放送コンテンツを制作するのに所要する演算負担を、複数の撮影者デバイスに分散させ、リピータデバイスの演算負担を減らすことができ、結果として、中継放送に参加することができる撮影者デバイスの範囲を広げることができる。

本発明を具現するための全体システムの構成を例示的に示す図面である。 本発明の一実施形態によるリピータデバイスの内部構成を例示的に示す図面である。 本発明の一実施形態による、撮影者デバイスからビデオデータ及びオーディオデータがサンプリングされる構成を例示的に示す図面である。 本発明の一実施形態による、複数の撮影者デバイスから受信されるサンプリングビデオデータ及びサンプリングオーディオデータを利用して、中継放送コンテンツを制作する構成を例示的に示す図面である。 本発明の一実施形態による、１つのデバイス内に具備される複数の撮影手段または録音手段によって生成されるビデオデータまたはオーディオデータを利用して、中継放送コンテンツを制作する構成を例示的に示す図面である。 本発明の一実施形態による、タッチ基盤の編集入力によって編集が行われる構成を例示的に示す図面である。 本発明の一実施形態による、タッチ基盤の編集入力によって編集が行われる構成を例示的に示す図面である。

以下の本発明に係わる詳細な説明は、本発明が実施される特定実施形態を例示として図示する添付図面を参照する。それら実施形態は、当業者が本発明を実施することができるところに十分になるように詳細に説明する。本発明の多様な実施形態は、互いに異なるが、相互排他的である必要はないということが理解されなければならない。例えば、ここに記載されている特定形状、構造及び属性は、一実施形態について、本発明の精神及び範囲を外れずに、他の実施形態に具現されるのである。また、それぞれの開示された実施形態内の個別構成要素の位置または配置は、本発明の精神及び範囲を外れずに、変更されるということが理解されなければならない。従って、後述する詳細な説明は、限定的な意味として捉えるものではなく、本発明の範囲は、適切に説明されるのであるならば、その特許請求の範囲が主張するところと均等な全ての範囲と共に、特許請求の範囲によってのみ限定される。図面において、類似した参照符号は、多くの側面にわたって同一であるか、あるいは類似した機能を指す。

以下では、本発明が属する技術分野で当業者が、本発明を容易に実施することができるようにするために、本発明の望ましい実施形態について、添付された図面を参照して詳細に説明する。

全体システムの構成
図１は、本発明を具現するための全体システムの構成を例示的に示す図面である。

図１に図示されているように、本発明の一実施形態による全体システムは、通信網１００、リピータデバイス２００、撮影者デバイス３００及び視聴者デバイス４００を含んでもよい。

まず、本発明の一実施形態による通信網１００は、有線通信や無線通信のような通信様態を分けずに構成され、近距離通信網（ＬＡＮ：local area network）、都市圏通信網（ＭＡＮ：metropolitan area network）、広域通信網（ＷＡＮ：wide area network）のような多様な通信網で構成される。望ましくは、本明細書でいうところの通信網１００は、Ｗｉ−Ｆｉ（wireless fidelity）、Ｗｉ−Ｆｉ direct、ＬＴＥダイレクト（ＬＴＥ direct）、ブルートゥース(登録商標)（Bluetooth(登録商標)）のような公知の近距離無線通信網を含んでもよい。しかし、通信網１００は、あえてそれに限る必要はなく、公知の有無線データ通信網、公知の電話網、または公知の有無線テレビ通信網を、その少なくとも一部において含んでもよい。

次に、本発明の一実施形態によるリピータデバイス２００は、第１撮影者デバイス３００Ａで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイス３００Ｂで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信し、前述の受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを、リピータデバイス２００を介してリピータに提供し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つに係わる編集入力を参照し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを含む中継放送コンテンツに係わる編集についての編集データを生成し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも１つの品質が、前述の編集入力に基づいて適応的に決定されるようにすることにより、複数のモバイルデバイスから受信されたビデオデータまたはオーディオデータに係わる中継放送コンテンツを制作するのに所要する演算負担を分散させるようにする機能を遂行することができる。

本発明の一実施形態によれば、スマートフォンＰＣ（personal computer）、タブレット、デスクトップコンピュータ、ノート型パソコン、ワークステーション、ＰＤＡ（personal digital assistant）、ウェブパッド、移動電話機のように、メモリ手段を具備してマイクロプロセッサを搭載し、演算能を備えたデジタル機器であるならば、いくらでも本発明によるリピータデバイス２００として採択される。

本発明によるリピータデバイス２００の構成及び機能については、以下の詳細な説明を介して詳細に述べる。

次に、本発明の一実施形態によれば、撮影者デバイス３００は、撮影者が撮影したビデオデータまたは録音したオーディオデータを、リピータデバイス２００に伝送する機能を含むデジタル機器であり、スマートフォン、タブレットＰＣ、デスクトップコンピュータ、ノート型パソコン、ワークステーション、ＰＤＡ、ウェブパッド、移動電話機のようにメモリ手段を具備し、マイクロプロセッサを搭載し、演算能を備えたデジタル機器であるならば、いくらでも本発明による撮影者デバイス３００として採択される。

次に、本発明の一実施形態によれば、視聴者デバイス４００は、リピータデバイス２００から伝送される中継放送コンテンツに含まれたビデオデータ、オーディオデータ及び編集データを受信し、それを利用して、中継放送コンテンツを再生する機能を含むデジタル機器であり、スマートフォン、タブレットＰＣ、デスクトップコンピュータ、ノート型パソコン、ワークステーション、ＰＤＡ、ウェブパッド、移動電話機のようにメモリ手段を具備し、マイクロプロセッサを搭載し、演算能を備えたデジタル機器であるならば、いくらでも本発明による視聴者デバイス４００として採択される。

特に、リピータデバイス２００、撮影者デバイス３００及び視聴者デバイス４００は、中継放送コンテンツを制作するように支援する専用アプリケーション（図示せず）を含んでもよい。かようなアプリケーションは、外部のサービス提供サーバ（図示せず）からダウンロードされたものでもある。

一方、本明細書には、リピータデバイス２００、撮影者デバイス３００及び視聴者デバイス４００が、それぞれ遂行することができる固有の機能について重点的に説明されているが、リピータデバイス２００、撮影者デバイス３００及び視聴者デバイス４００は、必ずしもそれぞれの固有の機能のみを遂行するものではないということを明らかにしておく。すなわち、同じモバイルデバイスであるとしても、それがいかなる用途に利用されるということにより、リピータデバイス２００、撮影者デバイス３００及び視聴者デバイス４００のうちいずれにもなる。例えば、ユーザが、自分のモバイルデバイスを利用して、撮影したり録音したりする場合、当該モバイルデバイスは、撮影者デバイス３００にもなり、ユーザが自分のモバイルデバイスを利用して中継を行う場合、当該モバイルデイスは、リピータデバイス２００にもなり、ユーザが自分のモバイルデバイスを利用して視聴を行う場合、当該モバイルデバイスは、視聴者デバイス４００にもなる。

リピータデバイスの構成
以下では、本発明の具現のために重要な機能を遂行するリピータデバイス２００の内部構成及び各構成要素の機能について述べる。

図２は、本発明の一実施形態によるリピータデバイス２００の内部構成を例示的に示す図面である。

図２を参照すれば、本発明の一実施形態によるリピータデバイス２００は、データ受信部２１０、中継放送コンテンツ編集部２２０、中継放送コンテンツ伝送部２３０、通信部２４０及び制御部２５０を含んでもよい。本発明の一実施形態によれば、データ受信部２１０、中継放送コンテンツ編集部２２０、中継放送コンテンツ伝送部２３０、通信部２４０及び制御部２５０は、そのうち少なくとも一部が、リピータデバイス２００と通信するプログラムモジュールでもある。かようなプログラムモジュールは、運用システム、応用プログラムモジュール及びその他プログラムモジュールの形態で、リピータデバイス２００に含まれ、物理的には、さまざまな公知の記憶装置上に保存される。また、かようなプログラムモジュールは、リピータデバイス２００と通信可能な遠隔記憶装置に保存されてもよい。一方、かようなプログラムモジュールは、本発明によって後述する特定業務を遂行するか、あるいは特定抽象データ類型を実行するルーチン、サブルーチン、プログラム、オブジェクト、コンポーネント、データ構造などを包括するが、それらに制限されるものではない。

まず、本発明の一実施形態によれば、データ受信部２１０は、リピータデバイス２００と通信することができる少なくとも１つの撮影者デバイス３００から、ビデオデータ及びオーディオデータを受信することができる。具体的には、本発明の一実施形態によれば、第１撮影者デバイス３００Ａで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイス３００Ｂで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信する機能を遂行することができる。

さらに具体的には、本発明の一実施形態によれば、第１サンプリングオーディオデータには、第１オーディオデータから分けられる複数の第１オーディオフレームが含まれ、第１サンプリングビデオデータには、第１ビデオデータからサンプリングされ、複数の第１オーディオフレームにそれぞれ同期化される複数の第１ビデオフレームが含まれる。また、本発明の一実施形態によれば、第２サンプリングオーディオデータには、第２オーディオデータから分けられる複数の第２オーディオフレームが含まれ、第２サンプリングビデオデータには、第２ビデオデータからサンプリングされ、複数の第２オーディオフレームにそれぞれ同期化される複数の第２ビデオフレームが含まれる。

図３は、本発明の一実施形態による、撮影者デバイスからビデオデータ及びオーディオデータがサンプリングされる構成を例示的に示す図面である。

図３を参照すれば、撮影者デバイス３００に具備されたマイクによって録音されたオーディオデータが、所定のサンプリングレート（sampling rate）によって、複数の区間（以下、「オーディオフレーム」とする）３１１ないし３１４に分けられ、サンプリングオーディオデータを構成することができ、撮影者デバイス３００に具備されたカメラによって撮影されたビデオデータから、前述のところと同一のサンプリングレートによってキャプチャされる複数のビデオフレーム３２１ないし３２４が、サンプリングビデオデータを構成することができ、かように生成される複数のオーディオフレームと、複数のビデオフレームは、互いに同期化されて対応する。

続けて、図３を参照すれば、ビデオデータ及びオーディオデータが、１秒間にＮ回サンプリングされる場合、１秒間に、Ｎ個のビデオフレームと、Ｎ個のオーディオフレームとが互いに同期化されて対応する状態で、それぞれサンプリングビデオデータ及びサンプリングオーディオデータに含まれる。

一方、撮影者デバイス３００の演算性能が十分ではないか、あるいは通信網１００のトラフィックが多くなることにより、撮影者デバイス３００がビデオデータを定められたサンプリングレートに合わせ、リアルタイムでサンプリング（すなわち、キャプチャ）することが困難である場合、本発明の一実施形態による撮影者デバイス３００は、サンプリングビデオデータに含まれる少なくとも２つのビデオフレームが、互いに重複させる（例えば、Ｎ番目ビデオフレームのためのビデオデータを別途にキャプチャせず、すでにキャプチャされた（Ｎ−１）番目ビデオフレームをＮ番目ビデオフレームとして使用する）ことにより、サンプリングに必要となる演算資源を節約することができる。

また、本発明の一実施形態によれば、サンプリングビデオデータを構成する複数のビデオフレームそれぞれは、原本ビデオデータからキャプチャされたイメージを、所定の圧縮方式によって圧縮した結果として生成される圧縮イメージでもある。本発明の一実施形態によれば、前述のような圧縮過程は、撮影者デバイス３００によって遂行される。従って、本発明によれば、サンプリングビデオデータの大きさを小さくすることにより、通信網の負荷を軽減させることができ、イメージを圧縮するのに所要する演算負担を、各撮影者デバイス３００に受け渡すことにより、リピータデバイス４００の演算資源を、リアルタイム編集の遂行に集中させることができるという効果が達成される。

次に、本発明の一実施形態によれば、中継放送コンテンツ編集部２２０は、前述の受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータを、リピータデバイス２００を介して、リピータに提供する機能を遂行することができる。従って、本発明の一実施形態によれば、リピータデバイス２００を利用して、編集を遂行するリピータは、前述のところのように、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータを、プレビュー画面の形式で提供されることにより、第１撮影者デバイス３００Ａ及び第２撮影者デバイス３００Ｂそれぞれで撮影または録音されているビデオまたはオーディオを、リアルタイムで確認することができ、前述のようにプレビューされるビデオまたはオーディオを基準にし、所定の編集入力を入力することにより、中継放送コンテンツを編集することができる。

また、本発明の一実施形態によれば、中継放送コンテンツ編集部２２０は、リピータデバイス２００を介して入力されるリピータ（すなわち、エディタ）の編集入力に基づいて、第１撮影者デバイス３００Ａから受信される第１サンプリングビデオデータ及び第２サンプリングオーディオデータと、第２撮影者デバイス３００Ｂから受信される第２サンプリングビデオデータ及び第２サンプリングオーディオデータとのうち少なくとも１つの品質が適応的に決定されるようにする機能を遂行することができる。ここで、本発明の一実施形態によれば、各データの品質には、各データのサンプリングレート、解像度、データ大きさなどが含まれる。

例えば、本発明の一実施形態によれば、リピータが行っている編集の対象になる第１サンプリングビデオデータのサンプリングレートが、編集の対象にならない第２サンプリングビデオデータのサンプリングレートより高く決定される。他の例を挙げれば、本発明の一実施形態によれば、リピータが行っている編集の対象になっている第１サンプリングビデオデータの解像度が、編集の対象になる前または後の第１サンプリングビデオデータの解像度より高く決定される。

従って、本発明の一実施形態によれば、複数の撮影者デバイス３００から受信される複数のビデオデータ及びオーディオデータのうち、リピータが行う編集の対象になる特定ビデオデータまたは特定オーディオデータだけが、編集の対象にならない他のビデオデータまたは他のオーディオデータに比べ、相対的に高い品質で、リピータデバイス２００に伝送され、それによって、十分に高い品質の中継放送コンテンツを制作することを可能にしながらも、複数の撮影者デバイス３００とリピータデバイス２００とのデータ伝送負荷を画期的に低くすることができるという効果が達成される。

一方、本発明の一実施形態によれば、サンプリングビデオデータまたはサンプリングオーディオデータの品質を適応的に決定することに係わる制御信号は、リピータデバイス２００から、第１撮影者デバイス３００Ａまたは第２撮影者デバイス３００Ｂに伝送される。

次に、本発明の一実施形態によれば、中継放送コンテンツ編集部２２０は、リピータからの編集入力に基づいて、第１撮影者デバイス３００Ａまたは第２撮影者デバイス３００Ｂから受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータまたは第２サンプリングオーディオデータを含む中継放送コンテンツを編集する機能を遂行することができる。

具体的には、本発明の一実施形態によれば、中継放送コンテンツ編集部２２０は、ユーザ（すなわち、リピータ）からの編集入力を参照し、第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータまたは第２サンプリングオーディオデータを含む中継放送コンテンツに係わる編集についての編集データを生成する機能を遂行することができる。例えば、編集データには、第１サンプリングビデオデータ及び第２サンプリングビデオデータの転換に係わる情報、第１サンプリングビデオデータ及び第２サンプリングビデオデータのうち少なくとも一つと、第１サンプリングオーディオデータ及び第２サンプリングオーディオデータのうち少なくとも１つとの結合に係わる情報、第１サンプリングビデオデータまたは第２サンプリングビデオデータに結合される字幕に係わる情報、第１サンプリングビデオデータまたは第２サンプリングビデオデータの特定領域に結合されるグラフィック要素に係わる情報、第１サンプリングオーディオデータまたは第２サンプリングオーディオデータに結合される効果音またはリピータ音声に係わる情報などが含まれる。

また、本発明の一実施形態によれば、中継放送コンテンツに係わる編集についての編集データには、ＸＭＬ、ＪＳＯＮなどの形式を有するテキスト基盤のデータが含まれる。

次に、本発明の一実施形態によれば、中継放送コンテンツ伝送部２３０は、複数の撮影者デバイス３００Ａ，３００Ｂから受信された第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち、中継放送コンテンツに含まれるデータと、それらデータに係わる編集データとを視聴者デバイス４００または保存所（図示せず）に伝送する機能を遂行することができる。

一方、本発明の一実施形態によれば、中継放送コンテンツに含まれるサンプリングビデオデータまたはサンプリングオーディオデータと、編集についての編集データとを伝送された視聴者デバイス４００は、前述の専用アプリケーションを利用して、中継放送コンテンツに含まれるサンプリングビデオデータまたはサンプリングオーディオデータを、編集についての編集データを参照して再生することができ、それによって、リピータデバイス２００によって意図された中継放送コンテンツが視聴者に提供される。

図４は、本発明の一実施形態による、複数の撮影者デバイスから受信されるサンプリングビデオデータ及びサンプリングオーディオデータを利用して、中継放送コンテンツを制作する構成を例示的に示す図面である。

図４を参照すれば、リピータデバイス２００で行われる編集の対象になるデータが、第１サンプリングビデオデータ及び第２サンプリングオーディオデータである場合を仮定する。かような場合、本発明の一実施形態によれば、編集入力に基づいた制御信号を伝送された第１撮影者デバイス３００Ａが、第１ビデオデータ（すなわち、中継放送コンテンツに含まれるビデオデータ）に係わるサンプリングレートを高くすることができ、それによって、第１撮影者デバイス３００Ａから受信される第１サンプリングビデオデータ４１０Ａの品質が、原本データと類似したレベル（例えば、７０％ないし１００％）に高くなる。一方、本発明の一実施形態によれば、編集入力に基づいた制御信号を伝送された残りの第２撮影者デバイス３００Ｂないし第Ｎ撮影者デバイス３００Ｎは、それぞれ第２ビデオデータないし第Ｎビデオデータ（すなわち、中継放送コンテンツに含まれないビデオデータ）に係わるサンプリングレートを低いレベルに維持することができ、それによって、第２デバイス３００Ｂないし第Ｎ撮影者デバイス３００Ｎからそれぞれ受信される第２ビデオデータ４１０Ｂないし第Ｎサンプリングビデオデータ４１０Ｎの品質が、原本データよりはるかに低いレベル（例えば、５％）に維持される。

続けて、図４を参照すれば、編集入力によって特定される編集についての編集データ４２０が、第１サンプリングビデオデータ４１０Ａ及び第２サンプリングオーディオデータ４１０Ｂと共に、中継放送コンテンツを構成することができ、かように制作される中継放送コンテンツは、視聴者デバイス４００に伝送されるか、あるいは所定の保存所（図示せず）に保存される。

一方、本発明の一実施形態によれば、複数の撮影者デバイスが、必ずしも別個のデバイスとしてそれぞれ存在しなければならないものではなく、物理的に１つのデバイス内に具備される複数の撮影手段または録音手段が、それぞれ本発明でいうところの撮影者デバイスになる場合も、いくらでも想定することができる。

図５は、本発明の一実施形態による、１つのデバイス内に具備される複数の撮影手段または録音手段によって生成されるビデオデータまたはオーディオデータを利用して、中継放送コンテンツを制作する構成を例示的に示す図面である。

図５を参照すれば、１つの撮影者デバイス４００（または、１つのリピータデバイス２００）に具備された前面カメラ５１０Ａ及び背面カメラ５１０Ｂによって、それぞれ第１ビデオデータ及び第２ビデオデータが生成されるが、図４の実施形態と同様に、編集の対象になる第１サンプリングビデオデータ５２０Ａのサンプリングレートが、編集の対象にならない第２サンプリングビデオデータ５２０Ｂのサンプリングレートより高い。

一方、本発明の一実施形態によれば、中継放送コンテンツに係わる編集についての編集データは、リピータデバイス２００を介してリアルタイムに入力されるタッチ基盤の編集入力によっても特定される。例えば、編集中のサンプリングビデオデータが再生されている画面の特定領域に、リアルタイムに入力されるタッチ入力によって、当該サンプリングビデオデータの特定領域に、イメージ、字幕、視覚効果などの多様なグラフィック要素が付加されもする。他の例を挙げれば、リピータデバイス２００の画面において、背面カメラからのビデオがプレビューされている状態で、左右方向または上下方向のスライディングタッチ操作が入力されれば、背面リピータデバイス２００の画面に、前面カメラからのビデオがプレビューされるように、その表示状態を転換することができる。

図６Ａ及び図６Ｂは、本発明の一実施形態によるタッチ基盤の編集入力によって編集が行われる構成を例示的に示す図面である。

図６Ａ及び図６Ｂを参照すれば、エディタが、サンプリングビデオデータが再生されている画面に、タッチ操作６１０を入力することにより、そのタッチ操作が入力された位置に、多様なグラフィック要素６２１，６２２，６２３を付加することができる。

一方、本発明の一実施形態によれば、通信部２４０は、リピータデバイス２００が撮影者デバイス３００や視聴者デバイス４００のような外部システムと通信することができるようにする機能を遂行する。

最後に、本発明の一実施形態によれば、制御部２５０は、データ受信部２１０、中継放送コンテンツ編集部２２０、中継放送コンテンツ伝送部２３０及び通信部２４０の間のデータの流れを制御する機能を遂行する。すなわち、制御部２５０は、外部へ／外部からのデータの流れ、またはリピータデバイス２００の各構成要素間のデータの流れを制御することにより、データ受信部２１０、中継放送コンテンツ編集部２２０、中継放送コンテンツ伝送部２３０及び通信部２４０において、それぞれ固有の機能を遂行するように制御する。

以上で説明した本発明による実施形態は、多様なコンピュータ構成要素を介して遂行されるプログラム命令語の形態に具現され、コンピュータ可読記録媒体に記録される。前記コンピュータ可読記録媒体は、プログラム命令語、データファイル、データ構造などを、単独でまたは組み合わせて含んでもよい。前記コンピュータ可読記録媒体に記録されるプログラム命令語は、本発明のために特別に設計されて構成されたものであってもよく、コンピュータソフトウェア分野の当業者に公知されて使用可能なものであってもよい。コンピュータ可読記録媒体の例としては、ハードディスク、プロッピィーディスク及び磁気テープのような磁気媒体；ＣＤ−ＲＯＭ（compact disc read only memory）、ＤＶＤ（digital versatile disc）のような光記録媒体；フロプティカルディスク（floptical disk）のような磁気・光媒体（magneto-optical media）；及びＲＯＭ（read only memory）、ＲＡＭ（random access memory）、フラッシュメモリのようなプログラム命令語を保存して遂行するように、特別に構成されたハードウェア装置が含まれる。プログラム命令語の例としては、コンパイラによって作われるような機械語コードだけではなく、インタープリタなどを使用して、コンピュータによって実行される高級言語コードも含まれる。前記ハードウェア装置は、本発明による処理を行うために、１以上のソフトウェアモジュールとして作動するように構成されもし、その逆も同様である。

以上、本発明について、具体的な構成要素のような特定事項、限定された実施形態及び図面によって説明したが、それらは、本発明のさらに全般的な理解の一助とするために提供されたものであるのみ、本発明は、前記実施形態に限定されるものではなく、本発明が属する技術分野で一般的な知識を持った者であるならば、かような記載から、多様な修正及び変形を図ることができるであろう。

従って、本発明の思想は、前述の実施形態に限って決められるものではなく、特許請求の範囲だけではなく、該特許請求の範囲と均等的または等価的に変形された全てのものは、本発明の思想の範疇に属するものとするのである。

本発明の、モバイルデバイスを利用した中継放送を支援するための方法、そのデバイス、及び非一時的なコンピュータ可読記録媒体は、例えば、中継放送関連の技術分野に効果的に適用可能である。

１００ 通信網
２００ リピータデバイス
２１０ データ受信部
２２０ 中継放送コンテンツ編集部
２３０ 中継放送コンテンツ伝送部
２４０ 通信部
２５０ 制御部
３００ 撮影者デバイス
３００Ａ 第１撮影者デバイス
３００Ｂ 第２撮影者デバイス
４００ 視聴者デバイス

Claims (9)

1. モバイルデバイスを利用した中継放送を支援するための方法であって、
   リピータデバイスが、第１撮影者デバイスで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイスで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信する段階と、
   前記リピータデバイスが、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを、プレビュー形式で提供する段階と、
   前記リピータデバイスが、前記提供される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つに対するリピータの編集入力を参照し、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを含む中継放送コンテンツに係わる編集についての編集データを生成する段階と、を含み、
   前記第１撮影者デバイスまたは前記第２撮影者デバイスから伝送され、前記リピータデバイスで受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも１つの品質は、前記編集入力に基づいて適応的に決定され、
   前記品質を適応的に決定することに係わる制御信号が、前記リピータデバイスから、前記第１撮影者デバイスまたは前記第２撮影者デバイスに伝送され、
   前記編集の対象になるデータの品質が、前記編集の対象にならないデータの品質より高く決定され、
   前記編集の対象になっている特定データの品質が、前記編集の対象になる前または後の前記特定データの品質より高く決定されることを特徴とするモバイルデバイスを利用した中継放送を支援するための方法。
2. 前記第１撮影者デバイス及び前記第２撮影者デバイスは、物理的に１つのデバイス内に具備されることを特徴とする請求項１に記載のモバイルデバイスを利用した中継放送を支援するための方法。
3. 前記第１サンプリングオーディオデータには、前記第１オーディオデータから分けられる複数の第１オーディオフレームが含まれ、前記第１サンプリングビデオデータには、前記第１ビデオデータからサンプリングされ、前記複数の第１オーディオフレームにそれぞれ同期化される複数の第１ビデオフレームが含まれ、
   前記第２サンプリングオーディオデータには、前記第２オーディオデータから分けられる複数の第２オーディオフレームが含まれ、前記第２サンプリングビデオデータには、前記第２ビデオデータからサンプリングされ、前記複数の第２オーディオフレームにそれぞれ同期化される複数の第２ビデオフレームが含まれることを特徴とする請求項１に記載のモバイルデバイスを利用した中継放送を支援するための方法。
4. 前記品質には、サンプリングレート、解像度及びデータ大きさのうち少なくとも一つが含まれることを特徴とする請求項１に記載のモバイルデバイスを利用した中継放送を支援するための方法。
5. 前記編集データは、前記第１サンプリングビデオデータ及び前記第２サンプリングビデオデータの転換に係わる情報、前記第１サンプリングビデオデータ及び前記第２サンプリングビデオデータのうち少なくとも一つと、前記第１サンプリングオーディオデータ及び前記第２サンプリングオーディオデータのうち少なくとも１つとの結合に係わる情報、前記第１サンプリングビデオデータまたは前記第２サンプリングビデオデータに結合される字幕に係わる情報、前記第１サンプリングビデオデータまたは前記第２サンプリングビデオデータの特定領域に結合されるグラフィック要素に係わる情報、並びに前記第１サンプリングオーディオデータまたは前記第２サンプリングオーディオデータに結合される効果音またはリピータ音声に係わる情報のうち少なくとも一つを含むことを特徴とする請求項１に記載のモバイルデバイスを利用した中継放送を支援するための方法。
6. 前記編集データは、前記リピータデバイスを介して、リアルタイムに入力されるタッチ基盤の編集入力によって特定されることを特徴とする請求項５に記載のモバイルデバイスを利用した中継放送を支援するための方法。
7. 前記第１サンプリングビデオデータ、前記第１サンプリングオーディオデータ、前記第２サンプリングビデオデータ及び前記第２サンプリングオーディオデータのうち、前記中継放送コンテンツに含まれるデータと、前記編集データとを視聴者デバイスまたは保存所に伝送する段階をさらに含むことを特徴とする請求項１に記載のモバイルデバイスを利用した中継放送を支援するための方法。
8. 請求項１ないし７のうちいずれか１項に記載の方法を実行するための非一時的なコンピュータプログラムを記録したコンピュータ可読記録媒体。
9. モバイルデバイスを利用した中継放送を支援するためのデバイスであって、
   第１撮影者デバイスで生成される第１ビデオデータ及び第１オーディオデータそれぞれに係わる第１サンプリングビデオデータ及び第１サンプリングオーディオデータを受信し、第２撮影者デバイスで生成される第２ビデオデータ及び第２オーディオデータそれぞれに係わる第２サンプリングビデオデータ及び第２サンプリングオーディオデータを受信するデータ受信部と、
   前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つをプレビュー形式で提供し、前記提供される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つに対するリピータの編集入力を参照し、前記受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも一つを含む中継放送コンテンツに係わる編集についての編集データを生成する中継放送コンテンツ編集部と、を含み、
   前記第１撮影者デバイスまたは前記第２撮影者デバイスから伝送され、前記リピータデバイスで受信される第１サンプリングビデオデータ、第１サンプリングオーディオデータ、第２サンプリングビデオデータ及び第２サンプリングオーディオデータのうち少なくとも１つの品質は、前記編集入力に基づいて適応的に決定され、
   前記品質を適応的に決定することに係わる制御信号が、前記リピータデバイスから、前記第１撮影者デバイスまたは前記第２撮影者デバイスに伝送され、
   前記編集の対象になるデータの品質が、前記編集の対象にならないデータの品質より高く決定され、
   前記編集の対象になっている特定データの品質が、前記編集の対象になる前または後の前記特定データの品質より高く決定されることを特徴とするモバイルデバイスを利用した中継放送を支援するためのデバイス。

Images