JP2011528879A - テレビジョンシーケンスを提供するための装置および方法 - Google Patents

テレビジョンシーケンスを提供するための装置および方法 Download PDF

Info

Publication number
JP2011528879A
JP2011528879A JP2011519058A JP2011519058A JP2011528879A JP 2011528879 A JP2011528879 A JP 2011528879A JP 2011519058 A JP2011519058 A JP 2011519058A JP 2011519058 A JP2011519058 A JP 2011519058A JP 2011528879 A JP2011528879 A JP 2011528879A
Authority
JP
Japan
Prior art keywords
content
television
image
audio content
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011519058A
Other languages
English (en)
Inventor
ペーター ドゥンカー
ウーヴェ クエヒルト
アンドレーアス ハオプト
クリスティアン ディットマー
ホルガー グロスマン
Original Assignee
フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ filed Critical フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
Publication of JP2011528879A publication Critical patent/JP2011528879A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • G06F16/4387Presentation of query results by the use of playlists
    • G06F16/4393Multimedia presentations, e.g. slide shows, multimedia albums
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234336Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by media transcoding, e.g. video is transformed into a slideshow of still pictures or audio is converted into text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368Multiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/26616Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel for merging a unicast channel into a multicast channel, e.g. in a VOD application, when a client served by unicast channel catches up a multicast channel to save bandwidth
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2665Gathering content from different sources, e.g. Internet and satellite
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Astronomy & Astrophysics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

テレビジョンシーケンス104を提供するための装置100。データベースインタフェース110は、検索要求113を使用して、少なくとも1つのデータベース200にアクセスする。検索要求受信器130は、データベースインタフェース110を制御して、検索要求113に対して、データベースインタフェース110を介して、データベース200から、別々の少なくとも音声内容122および画像内容124を収集する。テレビジョンシーケンス表現モジュール140は、別々の音声内容122と画像内容124とを結合して、音声内容122および画像内容124に基づいたテレビジョンシーケンス104を生成する。出力インタフェース150は、テレビジョンシーケンス104を、テレビジョンシーケンス分配器300に出力する。
【選択図】図1

Description

本発明は、テレビジョンシーケンスを提供するための装置および方法、特に、アナログテレビジョン、デジタルテレビジョン、および、インターネットを介したテレビジョン(IPTV=インターネットプロトコルテレビジョン)のためのサービスと放送シーケンスの自動生成に関する。
現在、様々な相互作用型(双方向)テレビジョンサービスが利用可能である。応用の種類は、様々な分類学によって分類される:回帰チャンネルを有さない局所的に個人的な相互作用型応用(情報サービス)、回帰チャンネルを有する完全に個人的な相互作用型応用(ホームショッピング)、または、大規模相互作用型応用(投票の応用)。例えば、代わりの分類は以下の通りである:テレビジョン放送に属する応用(テレビジョンのクイズ番組と平行したクイズ応用)、テレビジョン放送とは独立した応用(テレビジョン操作サービスのポータルサイト(入り口))、または、テレビジョン放送送信応用(チャット応用などの携帯メッセージ送信応用)。
特に興味深いことは、ノルウェーのテレビジョンのテレビ番組「混乱TV」などのような、相互作用型放送製作サービスに関する携帯メッセージ送信サービスである。テレビ番組「混乱TV」は、番組主催者と通信するために、携帯電話を通して直接に皆のテレビ画面に送られた、または、送られているSMSメッセージまたはMMSメッセージを組み込んでいる。SMSは短いメッセージサービスの略であり、MMSはマルチメディアメッセージサービスの略である。さらに、MMSメッセージは、テレビ番組の視聴者を、より強く夢中にするために、テレビ画面に表示される。SMS通信およびMMS通信に基づいた、別の相互作用型テレビジョン放送も認められる。
したがって、相互作用型テレビジョンサービスの新しい高度な(機能アップした)戦略が必要である。それは、共同かつ内容に基づいたフィルタ方法を有する携帯メッセージ送信を利用するものである。
WO2002/032144 US2008/155624 JP2007/209023 JP2007/142729 GB2444284
しかしながら、前述のように、従来技術において、いくつかの取り組みが存在するけれども、この要求を部分的にしか正当に扱わない。特許文献1は、画像およびビデオ内容の、内容に基づいた自動生成でない装置および方法が実行されている。特許文献2、特許文献3、特許文献4、および、特許文献5の装置および方法は、内容に基づいた方法を適用しない。むしろ、焦点は、放送内容のシーケンス(順番、並び、配列)を決定する編集者に、内容の推薦を提供することにある。手動修正が可能なシーケンスの自動生成は、仮に必要ならば、実行されない。または、追加の番組情報は、高度な(機能アップした)電子番組ガイド(EPG)を使用者に提供するために分析される。その結果、使用者は自分たちで番組を編集する。
それゆえに、本発明の主たる目的は、テレビジョンシーケンス(順番、並び、配列)の自動供給が可能で、かつ、内容に基づいた、テレビジョンシーケンスを提供するための装置および方法を提供することである。
本発明の目的は、請求項1に記載の装置、請求項22に記載の方法、および請求項23に記載のコンピュータプログラムによって達成される。
本発明は、テレビジョンシーケンス(順番、並び、配列)の自動供給が、検索用語、メディアサンプル、または、より一般には検索要求(検索用語とメディアサンプルは検索要求の例である)を使用して、少なくとも1つのデータベースにアクセスするデータベースインタフェースによって可能であるという発見に基づいている。さらに、検索要求受信器は、データベースインタフェースを制御するように形成される。データベースから別々に分離された、少なくとも音声内容および画像内容は、データベースインタフェースを介して、検索用語またはメディアサンプルのために収集される。音声内容は、テレビジョンシーケンス表現モジュールの中で、画像内容と結合され、テレビジョンシーケンスを生成する。テレビジョンシーケンスは、音声内容および画像内容に基づいており、出力インタフェースを介して、テレビジョンシーケンス分配器に出力される。
本発明では、例えば、マルチメディアデータを予定表化することによって、簡単な検索用語またはキーワードに基づいたテレビ番組を生成する相互作用型(双方向)テレビジョンサービスについて説明する。マルチメディアデータの予定表化は、語義インデックス化によってキーワードを使用して、質問または収集される。例えば、予定表化は、時間的に個々の内容を接合することに関連する。その結果、テレビジョンシーケンスが得られる。このサービスのプロセスは、以下の3つのステップに細分される。
第1のステップ:相互作用型(双方向)サービスの制御
第2のステップ:マルチメディアデータ収集
第3のステップ:テレビ番組生成
サービスを開始すること(初期開始)は、テレビジョンサービスの管理者によって選択された1連の特別なキーワードを通して引き起こされる。相互作用型(双方向)サービスの制御は、SMS、携帯電話、他の可能な回帰チャンネルを通して、テレビの視聴者によって作成される、絶え間なく更新されるキーワード一覧表を使用することによって、可能にされる。さらに、MMSを通して受信された画像、または、通話、または、受信された視聴者の音声内容は、別のステップに使用される。
キーワードは、主題(テーマ)番組の構成の中の、マルチメディアデータベース(収集システム)の中の要求として使用される。対応する要求は、キーワードに基づいたマルチメディアデータの収集をもたらす。したがって、主題番組は、主題に合致しているマルチメディア材料(画像材料と音声材料)を自動的に編集する。
例えば、データベースまたはデータ源は、内容に基づいた語義記述で高度化(機能アップ)された、音楽、画像またはビデオの内容データベースを含む。内容に基づいた語義記述は、自動分類演算法または自動標語演算法によって得られる。さらに、「フリッカー(Flickr)」のような共同写真サイトや、共同知識データベース「ウィキペディア」が、言及されたキーワードについて質問され、画像や文字情報を得る。スピーチから文字への認識システムを適用するとき、新しいキーワードが、話された音声内容に依存して発生される。さらに、視聴者の画像内容と音声内容が使用され、内容に基づいた画像および音声の検索システムの中の追加マルチメディア要素を得る。
第3のステップ(テレビ番組生成)は、最も複雑なものであり、テレビジョンサービスの生成に焦点を当てる。テレビジョンサービスの生成は、内容の表現(準備)だけでなく、マルチメディアデータの予定表化も含む。表現手段確立化、例えば、視覚および聴覚の変遷、もしくは、文字のための設計は、追加情報と共に上書きする。予定表化のための入力材料は、個々のマルチメディア内容に対して責任がある使用者(例えば、彼らはキーワードを提供するからである。)の可能な視聴者識別を有する、画像、ビデオ、音楽または他の音声内容、文字情報、および、メタデータ(保存形式などのデータ本体に関する情報)から成る。内容の可能な表現に対して、初めに、例えば文字情報の文字からスピーチへの転換が要求される。
音楽、ビデオおよび画像の予定表化のために、最初のキーワードが、同時に、同様のキーワードを有するメディア要素を示すために使用される。より多くを要求する取り組みは、全てのマルチメディアデータに対する環境のように、特別な語義概念の、内容に基づいた分類である。個々の要素は、それらの環境分類に従って配置される。さらに、内容に基づいた自動音楽区分化演算法は、歌の繰り返し句部分とスタンザ部分(一定の韻律をもった4行以上からなる詩の単位)を見つけるために使用される。この情報は、歌の個々の区分の中の環境確率を分析するために使用され、適した画像の、より良い適用のためだけでなく、歌の構造を正確に再生する。また、区分情報は、音楽の各繰り返し句の中で、同じ画像を繰り返すために使用される。メディア要素のシーケンスは、説明した手順に基づいて編集される。
次のステップは、正確な予定表化の準備と変遷効果とに焦点が当てられる。大規模な予定表化に対して、ビート(巡回区分)検出のための音声分析演算法が使われ、特定の時間瞬間での画像変遷を位置決めするために、個々のビート回数を見つける。画像変遷効果の種類は、事前に定義された環境輪郭に沿って取り扱われる。穏やかで憂うつな環境領域の変遷は、通常、相互フェード(ゆっくりとしたフェードインおよびフェードアウト)される。攻撃的で幸福な環境領域の変遷は、厳しい遮断(迅速なフェードインおよびフェードアウト)が使用される。内容の表現は、プライバシーを保護するために、画像の中の人間の顔を検出して、事前に定義された方法で、これらの画像を処理する(例えば、そのような画像を取り除く、または、顔の領域を霧で覆う)工程を含む。対照的に、顔の領域が動画の中に明確に出現したり、捕獲物(顔の領域)が拡大されたりする。
番組の表現における最後のステップは、例えば、作動文字情報をビデオの中に入れる。作動文字情報は、例えば、ウィキペディアからの追加情報、または、所有者(例えば、創造的共通免許(CreativeCommonsライセンス)および属性状態に関する)から得られたマルチメディア要素の使用者名、または、広告を含む。
また、本発明の種々な面が以下のように説明される。
本発明は、放送シーケンスの、自動化されたおよび一部自動化された生成と、テレビジョンおよびIPTVの内容の、自動化された画像的および聴覚的表現と、を許す方法および装置を含む。
本発明で利用される写真、ビデオ、音声および文字の内容は、例えば、利用可能な情報源の画像/音声/ビデオのサンプルに基づいた、内容に基づいた検索を通して編集される。さらに、写真、ビデオ、音声および文字の内容は、利用可能な情報源(データベース)の中の、検索要求を利用するような見出し語に基づいた検索を通して、編集することが可能である。見出し語に基づいた検索は、例えば、音声材料またはビデオ材料の、内容に基づいた分析化および自動語義インデックス化を含む。
さらに、本発明は、視聴者内容または使用者内容に基づいた特別な音声/ビデオ内容の生成だけでなく、放送シーケンスの適用のための動的制御情報として、(例えば、視聴者または使用者によって、)動的に利用可能にされた内容の使用を含む。使用者または視聴者との相互作用を高めるために、特に、本発明は、使用者の自動登録および自動管理(例えば、以前に言及したように、誰が認められ、何時内容が利用可能になるか)を含む。
上記の、視聴者または使用者によって利用可能にされた内容を介して生成される動的制御情報は別として、例えば、静的制御情報も利用される。例えば、静的制御情報は、初期メディアデータ(音声、画像、ビデオおよび文字情報)、データ源、見出し語、もしくは、登録使用者または登録視聴者の選択された使用者、視聴者、グループを含む。したがって、全ての保存された情報は、(データベースの登録された使用者または名前であるけれども、)静的制御情報として使用される。特定の初期静的制御情報は、さらに、そのほかに、所定のサービスに関連する。その結果、個々の放送特性が創造される。例えば、固定されたラジオ番組は音声材料として定義される。画像内容は、音声材料に対して自動的に編集される。または、定義された画像収集品からの画像だけが使用される。
本発明は、さらに、伝播の全ての形態(例えば、ケーブルまたは衛星を介したデジタルTV、もしくは、インターネットを介したIPTV)におけるデジタルテレビジョンのための、そして、実況の形態、および/または、事前に作製された形態における連続したビデオストリーム(ビデオデータストリーム)のためのテレビジョンシーケンスの使用を含む。したがって、本発明は、テレビジョンシーケンスからの合致している組み合わせだけでなく、音声、写真およびビデオシーケンスを創造する可能性も提供する。さらに、合致している組み合わせは、内容に基づいた音声、画像およびビデオの、自動化された分類および検索の方法によって作成される。
さらに、本発明は、ビデオ材料および音声材料の、内容に基づいた時間的区分、並びに、シーケンスを表現すること(例えば、相互メディア配列における変遷を表現すること)のためのこの情報の利用を含む。一例として、特定の音楽(例えば、静かな音楽、または、憂うつな音楽)に対応する画像材料が、利用可能とされる、ということに言及されるべきである。音楽における変化は、画像材料における変化を伴う。
さらに、本発明は、音楽劇の画像内容およびビデオ内容の、内容に基づいた自動配列(この自動配列は、音楽劇の音声ストリーム化内容の、内容に基づいた時間的区分からの情報を使用している)だけでなく、音楽劇の音声内容の、内容に基づいた自動配列(この自動配列は、音楽劇の画像ストリーム化内容の、内容に基づいた時間的区分からの情報を使用している)も含む。
さらに、本発明は、メディアシーケンスの自動化された視覚表現および聴覚表現を含む。メディアシーケンスは、特に、(個々の要素の間の)変遷と相互メディア配列との表現に関連して実行される。
さらに、本発明は、提案された、かつ、生成された放送シーケンスの、後からでもできる手動修正を含む。
さらに、送信シーケンスの作製は、公共的または商業的に利用可能であるだけでなく、局所的に利用可能で、共同的に生成されたデータ源(フリッカー(FLICKR.COM)または百科事典ウィキペディアなど)を使用して、そのような情報だけでなく、ストリーム化に基づいた音声、画像、ビデオおよび文字情報も使用して、視聴者または使用者によって動的に利用可能とされる。
さらに、本発明では、写真、ビデオおよび音声内容が、制御情報の助けで(例えば、特定の領域または国を指定する検索用語によって)検索される、または、編集される。必要ならば、地図イラストに関する送信シーケンスに統合される。
インターネットまたはウィキペディア百科事典から得られた文字内容を、放送内容に統合するために、例えば、文字からスピーチへの生成が実行され、文字情報を音声内容に変換する。対応する文字情報源は、一般的なデータベースまたはインターネットである。
また、既に言及したように、本発明は検索用語の使用を含む。検索用語は、話された、または、歌われた音声内容から自動的に収集され、検索用語に関連した別のメディアデータを、データベースから質問するために利用される。例えば、ラジオのリポーターまたは主催者の音声内容が調べられる。その結果、その音声内容は、画像源または画像データによって対応して補足される。
検索用語は、さらに、語義内容またはメタデータの分類を通して、もしくは、音声認識(スピーチから文字へのモジュール)によって、音声、画像およびビデオ内容から収集される。音声、画像およびビデオ内容は、内容データを含むけれども、分類に利用される。
本発明は、文脈に依存する追加情報をフェードイン、または、演奏することを含む。追加情報は、例えば、広告のフェードインまたは文字情報を含む。土地情報の上記の例に関して、対応する広告情報は、例えば、旅行業者によって、それぞれの領域に送信される。例えば、文字情報は、番組の都市、領域または他の内容に関する事実である。
本発明では、画像内容または動画内容は、合致する方法で、音声内容と共に、配列される、または、結合される。その結果、それらは、同一または同様の環境または類型のような共通特性を有する。これは、視覚内容および聴覚内容(例えば、対応する憂うつな音を伴う日没または日の出の環境)の、内容に基づいた自動分類を通して成される。その結果、連続またはストリーム音声内容に関する画像内容、および/または、ビデオ内容の配列が、自動的かつ内容に基づいた方法で成される。
本発明は、音声内容を、連続する画像内容またはビデオ内容に配列するときの利用を確保して、写真集からの、または、個別または複数のビデオからの写真/ビデオ要約の、内容に基づいた、および、メタデータに基づいた自動用法によって、連続する画像およびビデオストリームの生成を含む。同様に、音声内容を、連続またはストリーム画像内容またはビデオ内容に配列することが、自動的かつ内容に基づいた方法で成される。
例えば、連続した音声ストリームと画像内容の多様性とが、多数の画像内容を、連続する音声ストリームの中にフェードイン(徐々に現出)することによってテレビジョンシーケンスを得るために、収集される。または、逆に、画像シーケンスと音声内容の多様性とが、音声内容の多様性を画像シーケンスにフェードインすることによってテレビジョンシーケンスを得るために、収集される。
さらに、本発明は、文字情報を有する主題(テーマ)番組サービスの生成を含む。例えば、主題は、使用者または視聴者による動的制御情報として、または、静的制御情報の形態で得られた検索用語によって定義される。このようにして設計された主題は、映像データベースから画像を収集するために役立つ。画像は、次に、自動的配列によって音声内容に編集され、音声内容をシーケンスに合致させて配列される。任意に、メディアシーケンスの視覚的および聴覚的表現(特に、相互メディア配列の中の変遷の表現を含む)が実行される。
さらに、本発明は、既に言及したように、画像上の顔および個人を検出するための技法の使用を含み、目標の方法(プライバシーの保護)において、これらの内容を選択する、または、無視する。あるいは、顔の領域を強調する、または、顔の領域を歪める。
したがって、本発明は、ものの上に共通に焦点を当てた状態で示された機能アップ戦略とサービス概念とが、テレビジョン放送を生成するために、最低限の製作と保守努力を要求するという点で、有利である。これは大きなコスト削減をもたらす。
この発明の上述の目的,その他の目的,特徴および利点は、図面を参照して行う以下の発明を実施するための形態の説明から一層明らかとなろう。
テレビジョンシーケンスを提供するための装置を示す概略図である。 テレビジョンシーケンスを提供するための別の装置を示す概略ブロック図である。 放送シーケンス(テレビジョンシーケンス)の自動生成のためのフローチャートである。 視覚的に同様の画像を伴う、内容に基づいた画像質問のための例示的結果を示す写真図である。 歌の構造区分の演算法の例示的結果を示す模式図である。 相互作用型(双方向)テレビジョンを機能アップするためのサーバー構成を示す概略ブロック図である。 演奏一覧表の相互作用型生成を示す概略ブロック図である。 主題の音声/画像生成器のためのフローチャートである。
図面に基づいて以下でさらに詳細に本発明について説明する前に、図面の中の同じ要素には、同じまたは同様の符号が提供され、これらの要素の繰り返しの記述を省略するということが、指摘される。
図1はテレビジョンシーケンス104を提供するための装置100の第1の実施形態を示す。装置100は、検索用語またはメディアサンプル113(または、属検索要求またはBAVT検索用語)を使用して、少なくとも1つのデータベース200にアクセスするためのデータベースインタフェース110を含む。さらに、装置100は、データベースインタフェース110を制御するために形成された検索要求受信器130を含む。検索要求受信器130は、要求121によって、データベース200から、検索用語113に対して、データベースインタフェース110を通して、少なくとも音声内容122および音声内容122から分離した画像内容124を収集する。すなわち、検索用語113とは別に、特別な画像材料または音声材料などのメディアサンプルが、要求として、データベース200に送られる。データベース200は、応答として、同種材料(例えば、同じ類型の中の画像材料と音声材料)を戻す。さらに、装置100は、別々の音声内容122と画像内容124とを結合して、音声内容122および画像内容124に基づいたテレビジョンシーケンス104を生成するためのテレビジョンシーケンス表現モジュール140を含む。最後に、装置100は、テレビジョンシーケンス104をテレビジョンシーケンス分配器300に出力するための出力インタフェース150を含む。
検索要求受信器130は、任意に、静的制御情報と動的制御情報との両方を含んでいる検索用語を受信するために、数個の入力を含む。さらに、データベース200は、互いに分離した数個の部品またはデータベースを含む。その結果、音声データ122および画像データ124は、異なるデータベースから質問(要求)される。したがって、データベースインタフェース110は、異なるデータベース200に質問(要求)121を送る。データベースインタフェース110の端末は、例えば、インターネットまたは電話網(携帯電話網または固定電話網)とのインタフェースを含む。
図2は、別の任意要素を含んでいる実施形態を示す。データベース200は、任意に3個のデータ源を含む。第1のデータ源210は、公共的および商業的に利用可能な画像/音声/ビデオ/文字データ源(BAVTデータ源)である。第2のデータ源220は、さらに任意に、音声/ビデオストリーム源を表現する。第3のデータ源230は、局所BAVTデータ源である。要求121は、ここでは、例えば、特別なBAVT情報の検索用語を含む。第1のデータ源210の応答は、仮に利用可能であるならば、要求されたBAVTデータを含む。
図2の実施形態では、検索用語113は静的制御情報113aと動的制御情報113bとに細分される。静的制御情報113aは、例えば、初期内容または上演情報を含む。動的制御情報113bは、例えば、視聴者または使用者によって入力され、BAVT情報(材料)を含み、任意に、MMS/SMS/電子メール/ウェブ形式によって装置100に提供される。テレビジョンシーケンス分配器300は、図2の実施形態においては、最初に、手動修正手段310を含む。手動修正手段310は、テレビジョンシーケンス104を修正テレビジョンシーケンス105に変換する。修正テレビジョンシーケンス105は、変遷および動画表現手段320に順に入力され、そこから放送シーケンス106を最終的に生成する。
装置100は、その結果、自動的にシーケンスおよび表現を生成し、そして、音声、画像およびビデオ内容の分類および検索だけでなく、任意に、内容に基づいた特徴抽出の方法を利用する。
図3は放送シーケンス(テレビジョンシーケンス104)の自動生成のための実施形態を示す。その方法は3つの構成要素を含む。第1の構成要素は相互作用型制御である(図1の検索要求受信器130がその部分である)。例えば、相互作用型制御の初期状態は、特別な検索用語113を入力することによって、管理者によって設定される。次に、最初に管理者によって設定された検索用語113は、視聴者または使用者によって、例えば、絶えず変更され、または、拡大される。使用者は、SMS、携帯電話、ウェブ形式などで、別の検索用語を、相互作用型制御130に供給する。任意に、追加BAVT材料が、例えば、使用者または視聴者によって、相互作用型制御130に提供されることも可能である。
次に、相互作用型制御130は、データ収集またはデータ収集モジュール(例えば、図1のデータベースインタフェース)110を制御する。相互作用型制御130は、例えば、要求を、検索用語113を使用してデータベース200に送る。検索用語113は、管理者の特定の検索用語と、使用者によって生成された検索用語との両方を含む。要求に対する回答として、データベース200はBAVT材料を提供する。BAVT材料は、例えば、初めに、データ収集モジュール110によって中間的に保存される。データ収集モジュール110は、スピーチに基づいた検索用語を、スピーチから文字へのモジュール114に転送する。スピーチに基づいた検索用語は、例えば、携帯電話を通して使用者によって相互作用型制御130に供給される。スピーチから文字へのモジュール114は、スピーチに基づいた検索用語を使用して、文字メッセージの形式で追加検索用語を生成し、追加検索用語をデータベース200に転送する。データベース200は、順に、これらの追加検索用語に基づいて、追加BAVT材料をデータ収集モジュール110に送り返す。
例えば、BAVT材料は、音楽、画像、ビデオ、または、文字情報を含む。BAVT材料は、例えば、内容に関して分類を提供するメタデータによって、順に高度化(機能アップ)される。データベース200の例は、フリッカー(FLICKR)などの、画像に基づいたデータベース、または、ウィキペディア百科事典などの、文字に基づいたデータベースである。
データ収集に続いて、テレビ番組の生成が、テレビジョンシーケンス表現モジュール140の中で実行される。それは、一方では、個々の内容を結合させ、他方では、内容の前処理を実行する。例えば、テレビジョンシーケンス表現モジュール140は、異なる画像シーケンスまたは異なる音声シーケンスの間の変遷を確立する。任意に、(ウィキペディア百科事典からのような)文字に基づいたデータのデータ収集は、初めに、文字からスピーチへのモジュール112に送信されることも、可能である。文字からスピーチへのモジュール112は、文字に基づいたデータ内容から、音声信号を生成する。音声信号は、順に、テレビジョンシーケンス表現モジュール140に転送される。
BAVT材料が、テレビジョンシーケンス表現モジュール140の中で結合されるとき、例えば、同様の検索用語のために発見されたBAVTの材料が、時間内に分類されて、連続的に出力される。任意に、メタデータを介して可能である分類を利用して、例えば、所定の内容または環境に従って、BAVT材料を分類することも可能である。音楽の場合、コーラスと詩の分割(区分)が、合致する方法において、画像材料で(コーラスの反復の場合には、画像材料の反復によって)、実行され、機能アップされる。画像内容と音声内容のこの結合は、さらに洗練される。その結果、音声分析が、例えば、回数またはリズムを検出するために、区分の中で実行される。これは、回数またはリズムに対応している画像をフェードインまたはフェードアウトすることを可能にする。
異なるBAVTデータの間の変遷が、環境プロフィール(輪郭)に対応するために実行される。その結果、円滑な変遷(画像の遅いフェードインとフェードアウト)が、静かな環境の場合に選択され、厳しい変遷が、攻撃的環境の場合に選択される。最終的に、テレビジョンシーケンス表現モジュール140は、例えば、人間の顔を認知できなくするために、人間の顔の処理を実行する。その結果、プライバシーが保護されたままで残る。最終段階として、文字情報は任意にビデオに合わされる。例えば、文字情報は、対応する材料の所有者の名前、または、広告材料、または、(例えば、ウィキペディアからの)別の情報材料を含む。
データ源は2つのグループに細分される。データ源の第1のグループは、現在の番組を制御するために視聴者によって提供されたマルチメディアデータである。この情報は、画像、文字メッセージ、携帯電話を通して送られた音声メッセージ、または、利用可能な代替の帰路チャンネルである。マルチメディア要素は、テレビ番組の一部として、または、以下で説明された類似の検索手順の中の種子メディア項目として、直接に使用される。データ源の第2のグループは、フリッカー、ウィキペディアまたはブリップテレビ(blip.tv)のような、インターネットプラットホーム(基礎構成)からの使用者が生成したデータを統合し、公的にアクセス可能なマルチメディア情報の巨大な帯域幅を提供することを意味する。
例えば、共同的フィルタ方法は、使用者の多様性の相互作用型フィードバックを通して、テレビの内容推薦を機能アップするために適用される。この理由のため、仮に、相互作用型テレビジョンサービスの使用者が監視されるならば、例えば、テレビジョンサービスへの入力の種類に関して、有利である。その結果、使用者プロフィール(輪郭)が確立される。現在の相互作用型テレビジョンサービスに参加している使用者プロフィールが、最も関連しているものを取り除くために比較される。
画像分析の分野では、2つの基礎的取り組みが関連する。第1の取り組みは、内容に基づいた画像検索(CBIR)である。画像サンプルは、画像データベースに対する要求として使用される。従って、同様の画像が、基本的特徴(色ヒストグラムまたは空間的周波数情報など)に基づいて戻される。
図4aは、サンプル画像(例えば、124a)を使用した、データベースの中の、内容に基づいた画像質問のためのCBIR演算法の典型的な結果を示す。結果として、例えば、データベース200は、5つの画像124a,124b,124c,124d,124e、すなわち、視覚的に同様の動機(様々な日没)を示している画像124を提供する。従って、視覚的に同様の画像が、対応する音楽環境(静か、または、憂うつな)に視覚的に添えられるために使用される。音楽がむしろ静かであるか、または、攻撃的であるかが、例えば、(区分の一部として、)時間/リズムの試験に基づいて発見される。
第2の取り組みは画像内容の分類に基づいている。この取り組みは、様々なパターン認識と分類技法(例えば、自然の情景分類または対象物認識)とを結合する。結果は、全体の画像、例えば、風景、都市、人々、画像の部分の記述(例えば、草原、森林、海辺、海洋、コンクリート対象物についての特定の意見、車、馬、または、エッフェル塔)の語義記述から成る。
語義音声分析は、高度データベース検索または別の処理を許す、記述的メタデータ印付けを有するデジタル化された音声録音の高度化(機能アップ)について言及する。近年、音声のメタデータ記述は、カタログ指向の分類によって殆んど与えられる。都合が悪いことに、事前に定義された種類に従うこの印付けは、煩雑で、手間がかかる。内容に基づいたメタデータの自動生成は、費用効率が良く、スケーラブルな(負荷の増大に応じて機能を柔軟に向上できる)印付けを約束し、現実に近い応用のために、強健で効率の良い結果を提供する。キーワード検索に基づいた音声再生に関して、音楽の一部門の類型と環境は、最も興味ある特性である。使用者調査において決定された、最も認められた音楽スタイルと環境特性とは、データ再生および統計方法を使用して、監視されたパターン認識システムの中で、自動的に分類される。速度、時間およびビート体系などの他の役に立つ特性は、信頼できる方法で決定される。時間に関連した情報の分析のための演算法が、付随する音楽に沿って、画像シーケンスの自動生成のために使用される。さらに、歌の構造区分は、歌の中の類型または環境の変化を考慮するための重要な前提条件を表す。
図4bは、歌の構造区分の結果を示す。仮に、区域が繰り返し句(コーラス)として特定されるならば、区域は符号Cを担持する。要するに、9個の区域122a〜122iが図4bに示されている。2番目の区域122b、4番目の区域122d、および、8番目の区域122hが、繰り返し句として特定されている。すなわち、残っている区域、1番目の区域122a、3番目の区域122c、5番目〜7番目の区域122e〜122g、および、9番目の区域122iは繰り返し句を含まない。しかしながら、これらの区域は、リズムに対応して別の分類を含む。例えば、リズムに関する上記の分類が、区域の長さを分析することによって行われる。例えば、より長い部分は、かなり静かな音楽を示す。
どんな語義印付けも利用可能でないという場合、ストリーム(テレビジョンシーケンス104)の中に追加音楽内容を埋め込む効率の良い方法は、同様の音楽のための、内容に基づいた音楽要求である。要求された歌と、より大きい歌のカタログと、の間の類似関係の決定は、関連演奏一覧表を提供する。システムが、関連性に関するフィードバック(関連フィードバック)の使用者の選択および統合をモデル化することを通して拡張される間、推薦の品質は大きく向上する。例えば、フィードバックは、そのような演奏一覧表を連続して適用するために使用される。
通話(例えば、携帯電話の通話)を介した、内容に基づいた音楽識別の応用は、例えば、相互作用の別の可能性を申し出る。携帯電話はスピーカの近くに保持される。
また、単なる画像分析または単なる音声分析に加えて、マルチモード分析が実行される。マルチモード分析、または、包括的モード分析の工程は、聴覚メディアおよび視覚メディアを含む。典型的なマルチモード分析応用は、視覚化のために写真を使用している音楽演奏家である。モードの組み合わせ局面は、音楽および画像環境または感情的効果である。また、音楽の視覚化は使用者試験で評価され、利用者の知覚を測定する。感情に基づいた音楽と写真の組み合わせは、従来のメディアプレーヤー、および/または、無作為の写真を有するスライド番組による視覚化と比較される。使用者試験は、環境に基づいた音楽と写真の組み合わせの、強烈な使用者経験と、より強い承認と、を明らかにする。この理由のため、テレビジョン番組の製作に関するマルチメディア要素の包括的モード応用が適用されるべきである。包括的モード応用は、個別に音声および画像データを処理する代わりに、試験使用者経験を伴う。
相互作用型(双方向)テレビジョンサービスの高度化(機能アップ)は、デジタルテレビジョン再生環境の中のサーバ構成要素を発展させることによって実現される。構造物の核は、コアモジュール(例えば、MPEG−2伝送ストリーム回線多重化装置(マルチプレクサ)、画像符号器、および、対象物回転式(コンベア)生成手段)の間のストリーム化指向のデータ交換である。さらに、内容、予定表化および管理サーバは、全体のシステムと構成要素間の相互作用とを制御する。
図5は、例えば、検索要求受信器130が4個のモジュールを含み、テレビジョンシーケンス表現モジュール140が2個の副モジュールを含む、別の実施形態を示す。検索要求受信器130は、メッセージ入力モジュール132、使用者管理モジュール134、登録使用者のためのフィルタモジュール136、および、メディア収集モジュール138を含む。テレビジョンシーケンス表現モジュール140は、副モジュールとして、初めに、内容に基づいたメディア分析モジュール142と、メディア配列および準備モジュール(または、メディア処理モジュール)144と、を含む。例えば、メディア処理は、予定表化(時間計画化または結合化)および前処理化を含む。さらに、テレビジョンシーケンス分配器300は、デジタルTVビデオ符号器330とデジタルTVマルチプレクサ340とを含む。
したがって、使用者は、メッセージ入力モジュール132を介して、装置100にメッセージを送ることができる。メッセージは、例えば、SMS、MMS、電子メール、または、ウェブ形式の手段によって送られる。例えば、メッセージは検索用語113を含む。次に、メッセージは、メディア収集モジュール138に送られる。同時に、使用者管理モジュール134は、送付者に関して入力メッセージを分析し、例えば、メッセージが登録使用者から発生したか否かを決定する。任意に、フィルタモジュール136は、メッセージの使用者または送付者が、登録使用者であるか否かに従って、メッセージを重み付けする。例えば、検索用語113は、メディア収集モジュール138によって、メディアデータの収集を実行するために、直接に登録使用者のために使用される。例えば、メディア収集のために検索用語113が受け入れられるまで、最低数の使用者が、未登録使用者に対して要求される。あるいはまた、未登録使用者は、投票に参加するだけであり、未登録使用者自身の検索用語113を生成しない。
メディアデータが、メディア収集モジュール138によってデータベースから質問(要求)された後(図5に図示せず)、メディアデータの内容に関する上記試験が、内容に基づいたメディア分析モジュール142の中で行われる。メディアデータは、画像内容124と音声内容122との両方を含む。放送シーケンスを生成するためのモジュール(メディア処理モジュール)144において、音声データと画像データの両方に対応する適用、特に、様々なデータの間の対応する変遷の表現が行われる。その結果、その時得られたテレビジョンシーケンス104は、デジタルTV符号器330に入力される。デジタルTV符号器330は、相互作用型(双方向)テレビジョン番組を生成する。次に、相互作用型テレビジョン番組は、デジタルTVマルチプレクサ340に入力される。このようにして得られた相互作用型テレビジョン番組は、他のソース(例えば、テレビジョン番組1〜n)からの他のテレビジョン番組に結合して、例えば、デジタルTV網(例えば、ケーブル)に伝送される。
したがって、以下にまとめられるように、メディア収集、マルチメディア分析、および、共同フィルタリングのための特別なモジュールが、テレビジョン番組またはテレビジョンサービスの高度化のために統合される。表現された処理の鎖は、携帯電話、または、電子メールのような他の帰路チャンネルを介して伝えられた使用者メッセージの取り扱いを含む相互作用型テレビジョン生成サービスのための抽象的な手順を示す。メッセージは、上で説明したように、フィルターにかけられる。その結果、登録使用者は、共同フィルタモジュールを始動する、および/または、影響を及ぼす。共同フィルタモジュールは、他の登録使用者に関する包括的興味を検索する。次のステップでは、仮に、メディア収集が、選択されたサービスのために必要であるならば、メディア収集が実行される。その後、内容に基づいたメディア分析モジュール142は、語義インデックスリストおよび類似性に関して、音声、画像およびビデオデータを処理する。高度化鎖の最後のモジュールは、内容に基づいた分析法を使用して、マルチメディア要素の予定表化と処理を実行する。手順は、応用の種類によって異なる。
相互作用型テレビジョンサービスのための高度化(機能アップ)戦略は、以下の通り説明される。事前に定義されたシステム構造と、内容に基づいた共同フィルタ方法とに基づいて、相互作用サービスを高度化する(テレビジョンシーケンス104を生成する)ための多くの戦略が可能である。
例えば、使用者からの文字メッセージは、キーワードごとに分析され、マルチメディアデータベースの中の合致するマルチメディア要素を発見する。合致するマルチメディア要素は、この内容を放送に統合するために、自動的に生成された意見、または、使用者が生成した意見と共に提供される。
また、使用者からのマルチメディアメッセージは、テレビジョンシーケンスのための同様のマルチメディア要素を得るために、要求として、内容検索システム(質問システム、または、いわゆる情報検索システム)の中で使用される。
さらに、使用者からの音声内容またはスピーチが、キーワード、または、合致する音楽分野のために分析される。例えば、キーワードと曲名は、マルチメディア要素について質問するために使用される。
例えば、使用者グループは、遠隔制御された方法の中で知的演奏一覧表を生成して、制御された方法の中で、関連性に関する使用者フィードバックに基づいて、ビデオクリップまたは音楽を制御する。
このようにして集められたメディア(BAVT材料)は、使用者/視聴者に最適な経験を提供するために、包括的なモード方法で自動的に予定表化され、表現される。
以下に説明された高度化戦略に従って、いくつかの具体的なサービスシナリオが可能である。例によって、サービス:知的演奏一覧表生成器(IPG)および主題放送生成器(TBG)が、詳細に説明される。
図6aは演奏一覧表とその適用を生成するためのフローチャートを示す。最初のステップ610では、初めに、歌(例えば演奏一覧表620における開始値を代表する)が、使用者(例えば、登録使用者)によってファイルされる、または、提供される。この歌に基づいて、装置が、例えば、同様の曲名の演奏一覧表を確立する。次に、演奏一覧表は演奏される。別のステップ630では、他の使用者によるフィードバックが存在する。他の使用者は、例えば、投票を通して、音響に対応して曲名を評定し、演奏一覧表における順位を製作する。最も悪いと評定された曲名を絶えず置き換えることによって、演奏一覧表は連続して改良され、適合される。
IPGサービスは、音楽の例における動的な演奏一覧表生成のための相互作用(双方向)サービスについて説明する。また、基本概念は、スライド番組サービス、または、組み合わせにおける音楽/スライド番組サービスとして、画像分野にも適用される。
図式的に示されたIPGサービスの概念は、以下のより具体的用語に翻訳される。サービスを始めるために、サービスの使用者または管理者は、いわゆる種子の歌を設定する。種子の歌は、音楽収集演算法によって使用される。音楽収集演算法は、音楽データベースを検索し、同様の歌の最初の演奏一覧表を得る。サービスの更なる工程では、演奏一覧表は、より長くなり、変化する。そのような歌の提供(提案)は、文字メッセージ、または、携帯電話音楽識別を介して、曲名に基づいて取り扱われる。特定された歌はIPGに提供される。サービスの初期化に続いて、使用者は現在演奏されている歌についてフィードバックする(例えば、投票する)。関連フィードバック演算法は、連続した使用者フィードバックから利益を得て、演奏一覧表を適用する。大量拒絶の最悪の場合、現在演奏されている歌は停止され、代りの歌が選択される。投票の結果は、使用者経験を拡げるために画面に表示される。投票の取り組みとは別に、追加歌が、数個の種子の歌と演奏一覧表集約演算法とに基づいて、IPGの、より直接的な制御の目的のために提出される。この方法は、複数人競技ゲームに類似しているサービス:「IPGが貴方の類型を演奏するまで、特別な音楽類型の様々な歌を見つけて、提出する」サービスに広げられる。それに代わるものとして、共同フィルタモジュールは、登録使用者の既存の音楽の好みを含むことを可能にする。
このサービスの音楽/スライド番組バージョンに関して、音声内容と視覚内容とを合併するための加算技術が、例えば、環境分類に適用される。さらに、音声ビート分析が、正確に音楽ビートで画像を変えるために適用される。歌の構造の区分は、歌の各繰り返し句の中で同じ画像を繰り返すために適用される。
原則として、投票の取り組みは大規模相互作用に対して想像できる。一方、提案取り組み(すなわち、各使用者が自分たちで材料を提供する)は、限られた数の使用者に使用されるべきである。
図6bは、番組を自動的に生成する主題(テーマ)AV生成器(TBG)のためのフローチャートを示す。使用者は、第1のステップ710で、例えば、検索用語を提出する。第2のステップ720で、検索用語が、データベースに質問するために使用される。マルチメディアデータが、第3のステップ730で収集される。知識に基づいたデータベースは、第4のステップ740で、任意に質問される。その結果、知識に基づいたデータベース質問は、文字を提供する。文字は、第6のステップ760で、スピーチに変換され、メディア的に結合するために利用可能である。第5のステップ750で、一方では、マルチメディアデータがスピーチに変換された文字情報に結合され、一緒になる。変遷は、第7のステップ770で、対応して適用される。第8のステップ780で、マルチメディアデータは、関連使用者情報データと共に提供される。このようにして得られた材料は、最終的に、最後のステップ790で出力される、および/または、テレビジョンシーケンス分配器300に利用可能とされる。
その結果、TBGサービスは、相互作用型(双方向)テレビジョンサービスを説明する。双方向テレビジョンサービスは、キーワード探索に基づいて編集された、または、構成された利用可能なマルチメディア内容に基づいたテレビジョン番組に基づく。双方向テレビジョンサービスは、以下の通り詳細に説明される。初めは、特別な話題、例えば、「ニュージーランド」のキーワードが提供される。初期のキーワードは、文字メッセージを通して、事前登録使用者またはサービス管理者によって設定される。これらのキーワードの包含を通して、マルチメディア検索が、TBGのための初期内容を収集するために、様々なマルチメディアプラットホーム(例えば、「Flickr.com」)上で実行される。マルチメディア内容は別として、ウィキペディアなどの知識データベースは、文字内容のために検索される文字内容は、文字から音声への合成を有する音声内容として使用される。追加音楽内容は、例えば、質問された画像の環境分類と、印付けされた、または、語義の示された音楽データベースの中の環境に基づいた検索と、に基づいて選択される。
質問されて生成されたマルチメディアデータを、結合して予定表化することによって、主題放送は、可能な実施料を除いて、製作費なしで生成される。最終段階は、画像の間などの変遷効果を工夫することに焦点が当てられる。この理由のため、事前に定義された変遷と同様に、上で説明された環境分類が、円滑な相互フェード(例えば、静かで憂うつ)に適した環境プロファイルの中で用いられる。
初期質問内容が送られている間、使用者は、「ニュージーランド」の例に対して、主題に合致している追加キーワードを有する文字メッセージ、例えば、「ミルフォードサウンド、クイーンズ町、アベル・タスマン」を送る。相互作用的に提供されたこれらのキーワードは、動的に統合される追加マルチメディア内容と共に、元の主題放送を高度化(機能アップ)する。使用者がTBGサービスに参加するよう奨励するために、使用者のあだ名または画像が、使用者が責任を有する内容と一緒に、番組の中に示される。
その結果、本発明に係る実施形態は、特に、地元TV番組を提供する地元TVケーブル網またはケーブル主局で使用されるTV放送内容の自動生成に、適用可能である。様々な範囲のテレビジョンの提供が、短時間内に限られた財源で利用可能にされるべきであるけれども、内容維持のための財源が殆んど利用できない分野の応用は、ここでは特別の関心がある。提供されたテレビジョン番組は、例えば、娯楽のために使用されるけれども、情報目的にも使用される。
地元TVの提供のために、実施形態は、地元の興味があって使用者生成内容である内容で、未使用の放送時間を満たす可能性を開ける。例えば、地元の出来事の写真捕獲、および、地元の演奏家による音楽、または、地方の放送局の音楽に合致している画像材料が、自動化方法によって、環境に対応して配列される。
別の応用は、携帯テレビジョンのために内容を作製するとき、結果として生じる。例えば、現在のところ、ラジオ番組もテレビジョンとして放送される。単に、CDカバーの画像はビデオ画像で表示される。ここで、仮に必要ならば、画像貯蔵庫(リズムおよび環境に合致しているデータベース)からの画像が、音楽に伴って自動的に表示される。内容の変化と自動選択とを通して、大きな価値の増加が、殆んど努力しないで達成される。実施形態は、以前に言及した手段の助けによって、地元の共同体を助成する可能性を含む。
例えば、この領域への編入は、携帯テレビジョンの、いわゆる再生の内容管理システムを開発してファイルするモジュールとして、実現される。
実施形態は、視聴者が必ずしもビデオストリームの生成に影響を与えなくても(相互作用的でなくても)、ビデオストリームを生成すること、および、多数の使用者/視聴者にビデオストリームの伝送を保障すること、を含む。例えば、これは、限られた領域(例えば、都市またはケーブルTV業者の適用領域)のために成される。
最も成功した相互作用型TV応用は、SMSチャットなどの携帯メッセージサービスを利用するテレビジョンサービスを含む。さらに、実施形態は、共同的かつ内容に基づいたフィルタ方法を使用して、携帯メッセージサービスの機能アップのための新しい取り組みを提供する。一例として、相互作用型TVサービスをデジタルTV網に統合するために使用される内容と再生サーバが開示される。さらに、低いサービス作製費で新しいサービスの機会を提供するだけでなく、携帯メッセージサービスの使用者経験も機能アップできる、発展した内容に基づいた分析演算法が説明される。新しい取り組みは、知的な内容予定表化および表現だけでなく、マルチメディア内容の自動収集にも焦点を当てられる。
まとめると、本実施形態は、以下のように特徴付けられる。本実施形態は、共同的かつ内容に基づいたフィルタ方法を有する、相互作用型テレビジョンサービスを機能アップすることを含む。共同的かつ内容に基づいたフィルタ方法を含む携帯メッセージサービスを機能アップするための取り組みが説明される。内容と再生システム構造物が説明される。内容に基づいた分析演算法と、機能アップ構成要素の中の前記分析演算法の潜在的採用が開示される。2つのサービス概念が、相互作用型テレビ番組の生成プロセスにおいて、内容に基づいた演算法の適用を説明するために詳細に記載される。結果をまとめると、実現されたことは、模範的な相互作用型サービスの基本体系である。
したがって、実施形態は、特に、相互作用型テレビジョンサービスを機能アップするだけでなく、共同的かつ内容に基づいたフィルタリングについても説明する。
特に、条件に依存して、本発明に従った体系は、ソフトウェアにおいても実行される、ということが指摘される。実行は、追加記憶媒体、特に、プログラム可能なコンピュータシステムと協働できる、電子的に読み取り可能な制御信号を有するディスクまたはCD上でなされる。その結果、対応する方法が実行される。一般に、本発明は、コンピュータプログラム製品がコンピュータ上で実行されるとき、本発明に従って方法を実行するための、機械的に読み取り可能な担持体上に保存されたプログラムコードを有するコンピュータプログラム製品から成る。言い換えれば、本発明は、コンピュータプログラムがコンピュータ上で実行されるとき、本発明に係る方法を実行するためのプログラムコードを有するコンピュータプログラムとして実現される。

Claims (23)

  1. テレビジョンシーケンス(104)を提供するための装置(100)であって、
    検索要求(113)を使用して、少なくとも1つのデータベース(200)にアクセスするためのデータベースインタフェース(110)と、
    前記データベースインタフェース(110)を制御して、前記検索要求(113)に対して、前記データベースインタフェース(110)を介して、前記データベース(200)から、少なくとも音声内容(122)および画像内容(124)を別々に収集するように形成された検索要求受信器(130)と、
    別々の前記音声内容(122)と前記画像内容(124)とを結合して、前記音声内容(122)および前記画像内容(124)に基づいた前記テレビジョンシーケンス(104)を生成するためのテレビジョンシーケンス表現モジュール(140)と、
    前記テレビジョンシーケンス(104)を、テレビジョンシーケンス分配器(300)に出力するための出力インタフェース(150)と、
    を備えたこと、を特徴とする、装置。
  2. 前記データベース(200)は、互いに空間的に分離された第1のデータ源および第2のデータ源を含み、前記データベースインタフェース(110)は、前記第1のデータ源から前記音声内容(122)について質問し、かつ、前記第2のデータ源から前記画像内容(124)について質問するように形成されていること、を特徴とする、請求項1に記載の装置。
  3. 前記データベースインタフェース(110)は、さらに文字に基づいたデータベースにアクセスして、前記検索要求(113)に応答した文字情報について質問するように形成されていること、を特徴とする、請求項1または請求項2に記載の装置。
  4. 前記文字情報を追加音声内容に変換して、前記追加音声内容を前記テレビジョンシーケンス表現モジュール(140)に転送するように形成されている、文字からスピーチへのモジュール(112)を備えていること、を特徴とする、請求項3に記載の装置。
  5. 前記データベースインタフェース(110)は、前記音声内容(122)から別の検索用語を決定するように形成されていること、を特徴とする、請求項1〜請求項4のいずれかに記載の装置。
  6. 前記検索要求受信器(130)は、前記データベースインタフェース(110)を介して別の音声内容および別の画像内容を収集するように形成され、テレビジョンシーケンス表現モジュール(140)は、前記音声内容(122)、前記画像内容(124)、前記別の音声内容、および、前記別の画像内容を、前記テレビジョンシーケンス(104)に結合するように形成されていること、を特徴とする、請求項1〜請求項5のいずれかに記載の装置。
  7. 前記テレビジョンシーケンス表現モジュール(140)は、前記テレビジョンシーケンス(104)を生成するように形成され、その結果、前記音声内容(122)から前記別の音声内容への変化が、前記画像内容(124)から前記別の画像内容への変化に、一時的に合致すること、を特徴とする、請求項6に記載の装置。
  8. 前記音声内容(122)は、小節、もしくは、始めと終わりとを有する繰り返し句を含み、前記テレビジョンシーケンス表現モジュール(140)は、前記画像内容(124)から、前記小節、もしくは、前記繰り返し句の前記始めまたは前記終わりを有する前記別の画像内容への変化に、合致するように形成されていること、を特徴とする、請求項6または請求項7に記載の装置。
  9. 前記音声内容(122)および前記画像内容(124)は、前記音声内容(122)および前記画像内容(124)の内容に関して分類され、前記検索要求受信器(130)は、前記分類に依存して、前記別の音声内容および前記別の画像内容について質問するように形成されていること、を特徴とする、請求項6〜請求項8のいずれかに記載の装置。
  10. 前記検索要求(113)は静的制御情報(113a)もしくは動的制御情報(113b)を含み、前記動的制御情報(113b)は前記テレビジョンシーケンス(104)に依存していること、を特徴とする、請求項1〜請求項9のいずれかに記載の装置。
  11. 前記テレビジョンシーケンス分配器(300)は、テレビジョンシーケンス(104)を使用者に伝送するように形成され、前記検索要求受信器(130)は、使用者からのメッセージ形式の動的制御情報(113b)を得るように形成されていること、を特徴とする、請求項10に記載の装置。
  12. 使用者管理モジュール(134)をさらに備え、前記使用者管理モジュール(134)は、特定の使用者を登録するように形成され、前記検索要求受信器(130)は、前記特定の使用者からの動的制御情報(113b)を、前記使用者からの動的制御情報(113b)と異なって処理するように形成されていること、を特徴とする、請求項10または請求項11に記載の装置。
  13. 前記検索要求受信器(130)は、連続した音声ストリームと画像内容の多様性とを収集するように形成され、前記テレビジョンシーケンス表現モジュール(140)は、前記画像内容の多様性を前記連続した音声ストリームの中にフェードインすることによって、前記テレビジョンシーケンス(104)を得るように形成されていること、を特徴とする、請求項1〜請求項12のいずれかに記載の装置。
  14. 前記検索要求受信器(130)は、画像シーケンスと音声内容の多様性とを収集するように形成され、前記テレビジョンシーケンス表現モジュール(140)は、前記音声内容の多様性を前記画像シーケンスの中にフェードインすることによって、前記テレビジョンシーケンス(104)を得るように形成されていること、を特徴とする、請求項1〜請求項12のいずれかに記載の装置。
  15. 音声内容または画像内容の手動修正手段(310)、もしくは、音声内容と画像内容との間の表現変遷手段(320)をさらに備えていること、を特徴とする、請求項6〜請求項14のいずれかに記載の装置。
  16. 前記音声内容(122)もしくは前記画像内容(124)は内容データを含み、
    前記音声内容(122)もしくは前記画像内容(124)を保存し、かつ、前記内容データに対応して、前記音声内容(122)もしくは前記画像内容(124)を分類するための記憶部をさらに備えていること、
    を特徴とする、請求項1〜請求項15のいずれかに記載の装置。
  17. 前記画像内容(124)の前記音声内容(122)は、内容データを含み、前記テレビジョンシーケンス表現モジュール(140)は、前記内容データに基づいた文字情報によって、前記音声内容(122)もしくは前記画像内容(124)を機能アップするように形成されていること、を特徴とする、請求項1〜請求項16のいずれかに記載の装置。
  18. 前記内容データは、前記音声内容(122)もしくは前記画像内容(124)の類型を指定し、前記テレビジョンシーケンス表現モジュール(140)は、前記類型に対応して、前記音声内容(122)と前記画像内容(124)の結合を実行するように形成されていること、を特徴とする、請求項16または請求項17に記載の装置。
  19. 前記テレビジョンシーケンス表現モジュール(140)は、類型に依存して、前記画像内容(124)をフェードインもしくはフェードアウトするように形成されていること、を特徴とする、請求項18に記載の装置。
  20. 前記テレビジョンシーケンス表現モジュール(140)は、文脈に依存する追加情報を、前記テレビジョンシーケンス(104)の中にフェードインするように形成されていること、を特徴とする、請求項1〜請求項19のいずれかに記載の装置。
  21. 前記テレビジョンシーケンス表現モジュール(140)は、前記画像内容(124)から人間の顔を認識して、認識された人間の顔を歪めるように形成されていること、を特徴とする、請求項1〜請求項20のいずれかに記載の装置。
  22. テレビジョンシーケンス(104)を提供するための方法であって、
    検索要求(113)を使用して、データベースインタフェース(110)によってデータベース(200)にアクセスするステップと、
    検索要求受信器(130)によって前記データベースインタフェース(110)を制御し、前記検索要求(113)に対して、前記データベースインタフェース(110)を介して、前記データベース(200)から、少なくとも音声内容(122)および画像内容(124)を別々に収集するステップと、
    テレビジョンシーケンス表現モジュール(140)によって、別々の前記音声内容(122)と前記画像内容(124)とを結合して、前記音声内容(122)および前記画像内容(124)に基づいた前記テレビジョンシーケンス(104)を生成するステップと、
    出力インタフェース(150)によって、前記テレビジョンシーケンス(104)を、テレビジョンシーケンス分配器(300)に出力するステップと、
    を備えたこと、を特徴とする、方法。
  23. コンピュータが稼動するとき、請求項22に記載の方法を実行すること、を特徴とする、コンピュータプログラム。
JP2011519058A 2008-07-22 2009-07-08 テレビジョンシーケンスを提供するための装置および方法 Pending JP2011528879A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US8277308P 2008-07-22 2008-07-22
US61/082,773 2008-07-22
DE102008044635A DE102008044635A1 (de) 2008-07-22 2008-08-27 Vorrichtung und Verfahren zum Bereitstellen einer Fernsehsequenz
DE102008044635.1 2008-08-27
PCT/EP2009/004948 WO2010009812A2 (en) 2008-07-22 2009-07-08 Device and method for providing a television sequence

Publications (1)

Publication Number Publication Date
JP2011528879A true JP2011528879A (ja) 2011-11-24

Family

ID=41461771

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011519058A Pending JP2011528879A (ja) 2008-07-22 2009-07-08 テレビジョンシーケンスを提供するための装置および方法

Country Status (6)

Country Link
US (1) US8566880B2 (ja)
EP (1) EP2304951A2 (ja)
JP (1) JP2011528879A (ja)
KR (1) KR101326897B1 (ja)
DE (1) DE102008044635A1 (ja)
WO (1) WO2010009812A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013225731A (ja) * 2012-04-19 2013-10-31 Nippon Hoso Kyokai <Nhk> 画像処理装置及びプログラム
CN103747277A (zh) * 2014-01-10 2014-04-23 北京酷云互动科技有限公司 一种多媒体节目识别方法和装置

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9558501B2 (en) * 2008-09-05 2017-01-31 Sony Corporation Content recommendation system, content recommendation method, content recommendation apparatus, program, and information storage medium
US9443147B2 (en) * 2010-04-26 2016-09-13 Microsoft Technology Licensing, Llc Enriching online videos by content detection, searching, and information aggregation
US20120177345A1 (en) * 2011-01-09 2012-07-12 Matthew Joe Trainer Automated Video Creation Techniques
KR101462253B1 (ko) * 2012-03-08 2014-11-17 주식회사 케이티 동적으로 메뉴를 생성하는 메뉴 데이터 생성 서버 및 방법, 그리고 메뉴 데이터를 표시하는 단말
US10395642B1 (en) * 2012-11-19 2019-08-27 Cox Communications, Inc. Caption data fishing
US10542305B2 (en) * 2012-12-03 2020-01-21 Nbcuniversal Media, Llc Flexible broadcast system and method
US10349140B2 (en) 2013-11-18 2019-07-09 Tagboard, Inc. Systems and methods for creating and navigating broadcast-ready social content items in a live produced video
FR3043521A1 (fr) * 2015-11-06 2017-05-12 Orange Generation automatique de contenu audiovisuel
US11205103B2 (en) 2016-12-09 2021-12-21 The Research Foundation for the State University Semisupervised autoencoder for sentiment analysis
JP6219548B1 (ja) * 2017-03-31 2017-10-25 株式会社ドワンゴ 仮想処理サーバ、仮想処理サーバの制御方法、コンテンツ配信システム、および端末装置のアプリケーションプログラム
US10963841B2 (en) 2019-03-27 2021-03-30 On Time Staffing Inc. Employment candidate empathy scoring system
US10728443B1 (en) 2019-03-27 2020-07-28 On Time Staffing Inc. Automatic camera angle switching to create combined audiovisual file
US11127232B2 (en) 2019-11-26 2021-09-21 On Time Staffing Inc. Multi-camera, multi-sensor panel data extraction system and method
US11023735B1 (en) 2020-04-02 2021-06-01 On Time Staffing, Inc. Automatic versioning of video presentations
US11144882B1 (en) 2020-09-18 2021-10-12 On Time Staffing Inc. Systems and methods for evaluating actions over a computer network and establishing live network connections
US11727040B2 (en) 2021-08-06 2023-08-15 On Time Staffing, Inc. Monitoring third-party forum contributions to improve searching through time-to-live data assignments
US11423071B1 (en) 2021-08-31 2022-08-23 On Time Staffing, Inc. Candidate data ranking method using previously selected candidate data
US11907652B2 (en) 2022-06-02 2024-02-20 On Time Staffing, Inc. User interface and systems for document creation

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000067033A (ja) * 1998-05-27 2000-03-03 Sony France Sa シ―ケンス情報生成方法及びシ―ケンス情報生成装置
JP2001084743A (ja) * 1999-09-09 2001-03-30 Mega Chips Corp 画像・音響対応方法、音響対応方法、画像対応方法
JP2004080307A (ja) * 2002-08-15 2004-03-11 Nippon Hoso Kyokai <Nhk> 番組制作方法、番組制作装置、番組制作プログラム
JP2006293246A (ja) * 2005-04-15 2006-10-26 Sony Corp 情報処理装置および方法、並びにプログラム

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5233438A (en) * 1990-03-02 1993-08-03 Brother Kogyo Kabushiki Kaisha Entertainment apparatus for producing orchestral music accompaniment and a selected background video
US5253275A (en) * 1991-01-07 1993-10-12 H. Lee Browne Audio and video transmission and receiving system
US7079176B1 (en) * 1991-11-25 2006-07-18 Actv, Inc. Digital interactive system for providing full interactivity with live programming events
US6850252B1 (en) * 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US5835667A (en) * 1994-10-14 1998-11-10 Carnegie Mellon University Method and apparatus for creating a searchable digital video library and a system and method of using such a library
US6321383B1 (en) * 1995-07-31 2001-11-20 Brother Kogyo Kabushiki Kaisha Information supplying device that can store multiple types of information and supplies composite information in response to a request
US6463444B1 (en) * 1997-08-14 2002-10-08 Virage, Inc. Video cataloger system with extensibility
US20050028194A1 (en) * 1998-01-13 2005-02-03 Elenbaas Jan Hermanus Personalized news retrieval system
US6133912A (en) * 1998-05-04 2000-10-17 Montero; Frank J. Method of delivering information over a communication network
US6230162B1 (en) * 1998-06-20 2001-05-08 International Business Machines Corporation Progressive interleaved delivery of interactive descriptions and renderers for electronic publishing of merchandise
US6144375A (en) * 1998-08-14 2000-11-07 Praja Inc. Multi-perspective viewer for content-based interactivity
US8589975B2 (en) * 1998-08-21 2013-11-19 United Video Properties, Inc. Electronic program guide with advance notification
DE19841683A1 (de) 1998-09-11 2000-05-11 Hans Kull Vorrichtung und Verfahren zur digitalen Sprachbearbeitung
WO2002008948A2 (en) * 2000-07-24 2002-01-31 Vivcom, Inc. System and method for indexing, searching, identifying, and editing portions of electronic multimedia files
FR2813682B1 (fr) * 2000-09-07 2003-01-17 France Telecom Procede de recherche de programmes ou de contenus audiovisuels sur un flux audiovisuel comportant des tables d'evenements distribue par une base de donnees
EP1191460A1 (de) 2000-09-21 2002-03-27 Swisscom AG Verfahren und System für die Klassifizierung von digitalen Audio- und Videodateien
US7224837B2 (en) 2000-10-11 2007-05-29 Screenpeaks Ltd. Digital video broadcasting
WO2004080071A1 (ja) * 2003-03-06 2004-09-16 Matsushita Electric Industrial Co., Ltd. データ処理装置
US20040197088A1 (en) * 2003-03-31 2004-10-07 Ferman Ahmet Mufit System for presenting audio-video content
EP1631962A1 (en) * 2003-05-26 2006-03-08 Koninklijke Philips Electronics N.V. System and method for generating audio-visual summaries for audio-visual program content
US7613613B2 (en) * 2004-12-10 2009-11-03 Microsoft Corporation Method and system for converting text to lip-synchronized speech in real time
CN101138244B (zh) * 2005-01-07 2010-05-19 韩国电子通信研究院 利用使用环境描述的分类方案提供自适应广播服务的装置和方法
US20070028278A1 (en) * 2005-07-27 2007-02-01 Sigmon Robert B Jr System and method for providing pre-encoded audio content to a television in a communications network
JP4731288B2 (ja) 2005-11-17 2011-07-20 シャープ株式会社 番組推薦装置、番組推薦方法、番組推薦プログラム、および番組推薦プログラムを記録した記録媒体
US20080065695A1 (en) * 2006-09-11 2008-03-13 Pivi Unlimited Llc System and method for nondeterministic media playback selected from a plurality of distributed media libraries
GB2444284A (en) 2006-09-18 2008-06-04 Yann Emmanuel Motte Method and apparatus for selection of information and web page generation
JP4492627B2 (ja) 2007-03-20 2010-06-30 パナソニック株式会社 番組選択支援装置とその方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000067033A (ja) * 1998-05-27 2000-03-03 Sony France Sa シ―ケンス情報生成方法及びシ―ケンス情報生成装置
JP2001084743A (ja) * 1999-09-09 2001-03-30 Mega Chips Corp 画像・音響対応方法、音響対応方法、画像対応方法
JP2004080307A (ja) * 2002-08-15 2004-03-11 Nippon Hoso Kyokai <Nhk> 番組制作方法、番組制作装置、番組制作プログラム
JP2006293246A (ja) * 2005-04-15 2006-10-26 Sony Corp 情報処理装置および方法、並びにプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013225731A (ja) * 2012-04-19 2013-10-31 Nippon Hoso Kyokai <Nhk> 画像処理装置及びプログラム
CN103747277A (zh) * 2014-01-10 2014-04-23 北京酷云互动科技有限公司 一种多媒体节目识别方法和装置

Also Published As

Publication number Publication date
KR20110033844A (ko) 2011-03-31
WO2010009812A3 (en) 2010-07-01
KR101326897B1 (ko) 2013-11-11
DE102008044635A1 (de) 2010-02-04
US20110179452A1 (en) 2011-07-21
US8566880B2 (en) 2013-10-22
WO2010009812A2 (en) 2010-01-28
EP2304951A2 (en) 2011-04-06

Similar Documents

Publication Publication Date Title
JP2011528879A (ja) テレビジョンシーケンスを提供するための装置および方法
CN110351578B (zh) 用于根据脚本自动制作视频节目的方法和系统
Amato et al. AI in the media and creative industries
Berry ‘Just Because You Play a Guitar and Are from Nashville Doesn’t Mean You Are a Country Singer’: The Emergence of Medium Identities in Podcasting
Schedl et al. Music recommender systems
CN101556617B (zh) 用于将元数据与媒体相关联的系统和方法
US20230273766A1 (en) Computerized systems and methods for hosting and dynamically generating and providing customized media and media experiences
US20100251094A1 (en) Method and apparatus for providing comments during content rendering
US11775580B2 (en) Playlist preview
CN101517550A (zh) 大众传媒的社会性和交互式应用
WO2014208581A1 (ja) シナリオ生成システム、シナリオ生成方法およびシナリオ生成プログラム
US20160381433A1 (en) Information distribution device, information distribution method, and program
CN109565618A (zh) 媒体环境驱动的内容分发平台
CN112883209A (zh) 多媒体数据的推荐方法和处理方法、装置、设备及可读介质
US20220147558A1 (en) Methods and systems for automatically matching audio content with visual input
KR20200051172A (ko) 인공지능 스피커를 이용한 감성 기반의 사용자 맞춤형 뉴스 추천 시스템
Tsagkias et al. Podcred: A framework for analyzing podcast preference
Bailer et al. Multimedia Analytics Challenges and Opportunities for Creating Interactive Radio Content
CN117395475B (zh) 一种高可用低重复的探店视频生产方法和系统
Deldjoo Video recommendation by exploiting the multimedia content
WO2021195112A1 (en) Computerized systems and methods for hosting and dynamically generating and providing customized media and media experiences
Güven Thinking on the Changing Representation of Music on Cyberspace
AU2021250903A1 (en) Methods and systems for automatically matching audio content with visual input
Dunker et al. Enrichment of interactive tv services with collaborative and content-based filtering methods
JP4836084B2 (ja) 番組制作システムと制作プログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121024

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121030

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130123

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130130

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130430

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20131203