JP2004045776A - Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data - Google Patents

Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data Download PDF

Info

Publication number
JP2004045776A
JP2004045776A JP2002203323A JP2002203323A JP2004045776A JP 2004045776 A JP2004045776 A JP 2004045776A JP 2002203323 A JP2002203323 A JP 2002203323A JP 2002203323 A JP2002203323 A JP 2002203323A JP 2004045776 A JP2004045776 A JP 2004045776A
Authority
JP
Japan
Prior art keywords
time
data file
data
audio data
display area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002203323A
Other languages
Japanese (ja)
Inventor
Takuo Konno
今野 拓郎
Tetsuya Karasuma
烏丸 哲也
Kenichi Hirata
平田 賢一
Hitoshi Kubo
久保 仁
Fumihiko Umeya
梅屋 文彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Softbank Media & Marketing Cor
SB Media Holdings Corp
Original Assignee
Softbank Media & Marketing Cor
SoftBank Media and Marketing Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Softbank Media & Marketing Cor, SoftBank Media and Marketing Corp filed Critical Softbank Media & Marketing Cor
Priority to JP2002203323A priority Critical patent/JP2004045776A/en
Publication of JP2004045776A publication Critical patent/JP2004045776A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a system capable of freely constituting or preparing audio data synchronously with contents to be displayed and distributing the audio data. <P>SOLUTION: The system performs processing for encoding prepared or edited audio data to a data format which can can be distributed on the Web, processing for inserting a script command for specifying time series data files displayed in accordance with a time base into the audio data in relation with a prescribed time base range on an audio data time line, and processing for storing a display area data file including a display area and a reproduction control area of the time series data files displayed in accordance with the time base in a specified storage place. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、配信音声データの作成方法、配信音声データの作成システム、音声データの配信システム、および音声データの配信方法に関する。
【0002】
【従来の技術】
従来、音声データや動画データなどのインターネットを通じた配信、再生をしながら配信を行うストリーミング配信などの技術が開発されている。これに伴い、様々なコンテンツの開発や、配信方法の開発が求められている。
殊に、音声データについては、音楽配信などが盛んに試みられるようになっており、ブロードバンド等が普及して配信速度などの環境が整えば、インターネットを介してブラウザにより番組を視聴可能になることも想定されている。
【0003】
【発明が解決しようとする課題】
従来の音声データ配信においても、すでに音声データを配信する方法や、ブラウザのプラグインソフトなどにより再生をする方法が開発されている。
ところで、音声、映像、画像、文字などの様々なデータ形式を扱い、再生することのできるコンピュータを用いた通信においては、単に音声データのみではインフラを十二分に活用したことにはならず、ユーザーの興味も魅きにくい。
また、従来のテレビ番組のような番組形式のような配信方法がされる場合などを想定すれば、広告スポンサーなどが番組提供をすることが、経済的には好ましいが、そのためには広告を出したくなるような表現方法と、ユーザーの関心や利用者数などを集めやすい、表現豊かな配信形式を開発することが求められる。
さらに、音声データは音楽に限られず、講演、セミナー、講義、教材、その他の様々な利用方法が考えられるが、これらにあっても音声のみでなく、画像、映像、その他のコンテンツを含めた表現形式であることが望ましい。
【0004】
従来、音声データと画像や映像などの他の形式のデータを組み合わせたデータとしては、動画像データやプレゼンテーションデータ、スライドショーデータなどが知られており、特に動画像(ムービー)データは映画や番組、音楽でもプロモーションビデオやライブ映像などにおいて従来のビデオや、デジタル映像などにおいても利用されている。
たとえば、特開平11−161663「動画再生制御方法およびその方法が適用される画像表示装置」においては、DVDビデオタイトルとインターネットで提供されるHTMLファイルとを融合させた技術が提案されている。
DVDビデオの再生中にリモコンのWebボタンが押されると、現在再生されているビデオオブジェクトユニットのナビパックからURLを取り出し、そのURLを、WWWブラウザに表示したいインターネットアドレスとして渡す。これにより、そのURLに対応するHTMLコンテンツが外部サーバから取得されて、画面表示され、再生中のシーンの動画映像ごとに、それに対応するHTMLコンテンツを順次インターネットを通じて取得してそれを再生中のシーンに連動して表示するというものである。
しかしながら、この方式においては、単に映像を格納したDVDという記憶媒体に、URLが記憶されていてそのWEBページへ飛ぶために、通信速度がはやくなったとしても、動画映像とそれに対応するHTMLコンテンツとは、時間的に同期しているものではない。同期していないものを、同時に表示させるのでは、ビデオを見ながら別のテレビ番組を見ているということでしかない。
【0005】
一方、音声データと映像その他のコンテンツの同期した再生としては、従来のアナログビデオや、デジタル映像などにおいても利用されている。前記の音楽のプロモーションビデオやライブ映像などがその一例である。
しかしながら、これらはあらかじめ制作者が音声入り映像等として制作したものであり、制作費が膨大な金額になるほか、権利関係などの処理が複雑である。インターネット等を用いて簡単な設備等で配信が可能な場合には、配信者の創意工夫により音声と映像とを組み合わせて構成したり、簡単な処理と安価な費用により構成し直したりできることが望まれる。
また、音声入りデジタル映像などは配信条件によってはデータサイズが大きすぎたりすることが多いが、音声と共に表示されるコンテンツとして、HTMLファイル、その他のデータ量の少ないコンテンツや、様々なデータ形式、データ内容のコンテンツを自由に組み合わせて構成することができれば、上記の様々な課題を解決することが可能になる。また、このようにしてあらゆるコンテンツを利用可能な、音声と他のデータとの同期再生が可能になれば、今後普及が見込まれるデータ配信、インターネットを通じた番組配信においても、配信するコンテンツの不足や、コンテンツ制作の期間、費用、人材などに悩まされることも少なくなる。
【0006】
【課題を解決するための手段】
上記課題を解決するため、請求項1に記載の発明においては、
入力手段、制御手段、表示手段、出力手段、記憶手段等を備えるコンピュータ等の端末において操作により行われるデータ処理方法であって、
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入する処理と、
前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイル、および前記時系列データファイルを表示させる表示エリアと、表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアとを含む表示エリアデータファイルを、指定された格納場所に記憶する処理と、
を少なくとも経る、配信音声データの作成方法であることを特徴としている。
【0007】
また、上記課題を解決するため、請求項2に記載の発明においては、
入力手段、制御手段、表示手段、出力手段、記憶手段等を備え、インターネットに代表される通信手段に接続されて備えられたサーバーにアクセス可能なコンピュータ等の端末において、操作により行われるデータ処理方法であって、
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入する処理と、
前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイル、および前記時系列データファイルを表示させる表示エリアと、表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアとを含む表示エリアデータファイルを、指定された格納場所に記憶する処理と、
前記の処理により作成された音声データ、時間軸に従い表示される時系列データファイル、および表示エリアを含む表示エリアデータファイルを、サーバーの所定場所に格納する処理と、を少なくとも経る、配信音声データの作成方法であることを特徴としている。
【0008】
また、上記課題を解決するため、請求項3に記載の発明においては、
請求項1または2に記載の発明において、
時間軸に従い表示される時系列データファイルは、HTMLなどのハイパーテキストデータ、テキストデータ、画像データ、動画像データ、アニメーションデータ、のいずれかを少なくとも含む、配信音声データの作成方法であることを特徴としている。
【0009】
また、上記課題を解決するため、請求項4に記載の発明においては、
請求項1〜3に記載の発明において、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルは、HTMLなどのハイパーテキストデータであって、スクリプトコマンドを含む音声データを指定する記述、および表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアと、
時系列データファイルが表示される表示エリアと、を少なくとも含み構成される、配信音声データの作成方法であることを特徴としている。
【0010】
また、上記課題を解決するため、請求項5に記載の発明においては、
請求項1〜4に記載の発明において、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドは、音声データのタイムライン上の時間と、スクリプトコマンドの種類と、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータとを含む、配信音声データの作成方法であることを特徴としている。
【0011】
また、上記課題を解決するため、請求項6に記載の発明においては、
入力手段、制御手段、表示手段、出力手段、記憶手段等を備えるコンピュータ等の端末において操作により行われるデータ処理システムであって、
作成または編集された音声データ素材を記憶する音声データ素材記憶手段と、
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする音声データエンコード手段と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入し、前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う、スクリプトコマンド作成挿入手段と、
スクリプトコマンドが挿入された音声データを記憶する音声データ記憶手段と、音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段と、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段と、
を少なくとも備える、配信音声データの作成システムであることを特徴としている。
【0012】
また、上記課題を解決するため、請求項7に記載の発明においては、
インターネットに代表される通信手段に接続されて備えられたサーバーシステムであって、
WEB上で配信可能なデータ形式にエンコードされた音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、表示される時系列データファイルごとに必要に応じ挿入した音声データを記憶する、音声データ記憶手段と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段と、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段と、
サーバーシステムにアクセスし、音声データの配信要求を行ったユーザー端末に対し、配信要求に従い、表示エリアデータファイルと、ユーザーがユーザー端末からの選択・指定により配信要求した音声データファイルとを配信するデータ配信手段と、
配信され再生される音声データに挿入された、スクリプトコマンドを解釈し、タイムライン上における所定の時間軸の範囲に関連付けられた時系列データファイルを抽出するスクリプトコマンド解釈手段と、
抽出された時系列データファイルをユーザー端末に送信し、所定の表示エリアに表示させるデータファイル表示制御手段と、
を少なくとも備える、音声データの配信システムであることを特徴としている。
【0013】
また、上記課題を解決するため、請求項8に記載の発明においては、
請求項7に記載の発明において、
時間軸に従い表示される時系列データファイルは、HTMLなどのハイパーテキストデータ、テキストデータ、画像データ、動画像データ、アニメーションデータ、のいずれかを少なくとも含む、音声データの配信システムであることを特徴としている。
【0014】
また、上記課題を解決するため、請求項9に記載の発明においては、
請求項7または8に記載の発明において、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルは、HTMLなどのハイパーテキストデータであって、スクリプトコマンドを含む音声データを指定する記述、および表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアと、
時系列データファイルが表示される表示エリアと、を少なくとも含み構成される、音声データの配信システムであることを特徴としている。
【0015】
また、上記課題を解決するため、請求項10に記載の発明においては、
請求項7〜9に記載の発明において、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される広告等データファイルを記憶する広告等データファイル記憶手段が備えられ、
時間軸に従い表示される時系列データファイルの少なくともいずれかが、配信音声データのスポンサーが提供する広告等データファイルであるように、前記のスクリプトコマンドにおいて指定された、音声データの配信システムであることを特徴としている。
【0016】
また、上記課題を解決するため、請求項11に記載の発明においては、
請求項7〜10に記載の発明において、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドは、音声データのタイムライン上の時間と、スクリプトコマンドの種類と、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータとを含む、音声データの配信システムであることを特徴としている。
【0017】
また、上記課題を解決するため、請求項12に記載の発明においては、
請求項7〜11に記載の発明において、
前記の時系列データファイル、または表示エリアデータファイルには、他のデータファイルへのハイパーリンク情報が記述されている、音声データの配信システムであることを特徴としている。
【0018】
また、上記課題を解決するため、請求項13に記載の発明においては、
請求項7〜12に記載の発明において、
前記の時系列データファイル、または表示エリアデータファイルには、再生、停止、一時停止、スキップ、等の再生制御コマンド情報が記述された、音声データの配信システムであることを特徴としている。
【0019】
また、上記課題を解決するため、請求項14に記載の発明においては、
請求項13に記載の発明において、
前記の再生制御コマンドにより制御される時系列データファイルは、動画像データなどの時間軸に従い再生される時系列データファイルであって、
音声データのタイムラインと、再生され表示される時系列データファイルのタイムラインとを同期させるための時間計測・制御手段が備えられた、音声データの配信システムであることを特徴としている。
【0020】
また、上記課題を解決するため、請求項15に記載の発明においては、
インターネットに代表される通信手段に接続されて備えられ、
WEB上で配信可能なデータ形式にエンコードされた音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、表示される時系列データファイルごとに必要に応じ挿入した音声データを記憶する、音声データ記憶手段と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段と、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段と、
を少なくとも備えるサーバーシステムを用いて、
サーバーシステムにアクセスし、音声データの配信要求を行ったユーザー端末に対し、配信要求に従い、表示エリアデータファイルと、ユーザーがユーザー端末からの選択・指定により配信要求した音声データファイルとを配信する処理と、配信され再生される音声データに挿入された、スクリプトコマンドを解釈し、タイムライン上における所定の時間軸の範囲に関連付けられた時系列データファイルを抽出する処理と、
抽出された時系列データファイルをユーザー端末に送信し、所定の表示エリアに表示させる処理と、
を少なくとも経る、音声データの配信方法であることを特徴としている。
【0021】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
(実施の形態1)
本発明の第一の実施形態は、入力手段、制御手段、表示手段、出力手段、記憶手段等を備えるコンピュータ等の端末において操作によりデータ処理を行う、配信音声データの作成方法、およびこの方法を実施するための配信音声データの作成システムである。
【0022】
図1は、本発明の第一の実施形態の基本的な構成の一例を示すブロック図である。
本発明の第一の実施形態のシステムとしては、入力手段、制御手段、表示手段、出力手段、記憶手段等を備えるコンピュータ等の端末において実現され、通常、パーソナルコンピュータやワークステーション、サーバー装置などのコンピュータ端末が用いられる。
コンピュータ端末は、制御手段、記憶手段、入力手段、出力手段、表示手段などを備える。またインターネットに代表されるコンピュータネットワークに接続詞、データの送受信を行う機能を備え、ブラウザや電子メールソフトウェア、ワードプロセッサなどのアプリケーションプログラムや、オペレーティングシステム(OS)を備えることが通常の形態である。
【0023】
図1において、記憶手段は、メモリやハードディスク、CD−ROM、MO、DVD、各種メモリカード、その他の情報記憶媒体や、コンピュータ端末とケーブルやLANなどで接続された外付けのハードディスクや、サーバー装置などを含む。
入力手段はキーボードやマウス、タブレット、タッチパネル、マイクロフォン、入力端子、その他を含むことができ、表示手段はディスプレイなどである。また制御手段はメモリやハードディスクなどの記憶手段に記憶されたオペレーティングシステムその他のプログラムと、データを伝送するバスなどの伝送路等により、ハードウェアやソフトウェアの制御を行う。出力手段は出力端子を関してのデータ出力や、外部記憶装置、情報記憶媒体等へのデータ出力、音声出力などを行うものである。ネットワーク通信手段は、インターネットやLANに代表される通信手段を介してデータの送受信や通信制御を行うものである。これらの各手段の構成は、コンピュータ装置において各種の携帯が知られており、その構成も様々な形態を採用することができるので、特にこれらの構成には限定されない。
【0024】
本発明のシステムは、作成または編集された音声データ素材を記憶する音声データ素材記憶手段を備えている。
本発明のシステムにおいては、音声データ中にスクリプトコマンドを挿入するなどして、データ処理を行い、配信される形態の音声データを作成するものであり、ここで音声データ素材は、配信される音声データの元になる素材としてのデータである。
ここで利用することのできる音声データは、データ形式としてはたとえばWaveファイル、AVIファイル、MPEGファイル、その他の各種の音声フォーマットによるデータファイルを利用することができる。また、音声データの内容には特に限定されず、音楽などのデータや、講演、講義、プレゼンテーション、効果音、自然の音声、各種の音素材を編集した組み合わせ、その他の様々な内容のデータを用いることができる。
【0025】
図2は、音素材である音声データ素材から、スクリプトコマンドを音声データに挿入し、音声データを配信可能な形式に変換し、音声の時間軸に従い各種のデータファイル(時間軸データファイルという、以下同じ)を表示させることの可能な音声データを製作する処理の基本的な流れを概念図で示したものである。
完成されるデータファイルは、音声データと、音声データの再生に同期して表示される時系列データファイル、たとえばデザインされたHTMLファイルその他のデータファイルであり、またそれらが時間軸に沿って連携してインターネットで配信可能な番組とするために、ブラウザ内に表示エリアや操作エリア等を含むデータファイル(以下、表示エリアデータファイルという)が作成される。
音声データ素材は、新規に各種ソフトウェア等を用いて作成し、あるいは収録してもよく、また既存の音声データを利用したり、これらを編集したりして利用することができる。
【0026】
次に本発明のシステムは、作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする音声データエンコード手段を備えている。音声データエンコード手段は、音声データをWEB上にアップロードするために、ストリーミング形式のファイルに変換する。変換後のデータ形式は、WMAファイル、WMVファイル、ASFファイルなどの形式である。
エンコード手段としては、データ変換を行うプログラムが開発されており、たとえば音声データ素材を直接「Windows(登録商標)Mediaエンコーダ」などのプログラムでエンコードすることができる。
【0027】
また、本発明のシステムは、スクリプトコマンドが挿入された音声データを記憶する音声データ記憶手段を備えている。
音声データ記憶手段は、エンコード後の、WEB上で配信可能なデータ形式にされた音声データファイルを記憶するものである。
【0028】
また、本発明のシステムは、音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段を備えている。
時間軸に従い表示される時系列データファイルは、HTMLなどのハイパーテキストデータ、テキストデータ、画像データ、動画像データ、アニメーションデータ、のいずれかを少なくとも含む、配信音声データの作成方法である。
図3は、本発明の音声ファイルを再生する際のタイムラインを横軸の矢印で示したものであり、音声ファイルに挿入されたスクリプトコマンドにより、指定された時間軸上のタイミングにおいて、指定された時系列データファイルを、指定された表示エリアに表示させるタイムラインの概念を示している。時間軸に従い表示される時系列データファイルとして、HTMLファイルを用いる例を示している。
また図4は、表示エリアBを含む表示エリアデータファイルAがウェブサイトにおいてフレーム表示を構成するファイルであり、表示エリアと、表示・再生の制御を行う記述を含む再生制御エリアとを含み構成される画面の概要を示している。
【0029】
また、本発明のシステムは、前記時系列データファイルを表示させる表示エリアBを含む表示エリアデータファイルAを記憶する表示エリアデータファイル記憶手段を備えている。
系列データファイルを表示させる表示エリアを含む表示エリアデータファイルは、HTMLなどのハイパーテキストデータであって、スクリプトコマンドを含む音声データを指定する記述、および表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアと、時系列データファイルが表示される表示エリアと、を少なくとも含み構成される。また、操作ボタンや、各種のデータファイル等へのハイパーリンク、その他の構成を含むことができる。
【0030】
以下、本発明の第一の実施形態の基本的な処理の流れについて説明する。なお、ここに示される処理に流れは一例であって、これに限定されるものではなく、様々な応用や変形が可能である。
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする処理を行う。
音声データエンコード手段を起動し、WEB上で配信可能な、例えばASF形式などのデータファイルに変換する。ストリーム形式を選択し、入力ソースのデータ形式を選択し、またエンコードするデータファイルと、変換後のファイルの出力先を指定して、エンコードを行う。エンコードが完了すると、指定したディレクトリに指定したデータ形式のファイルができ、ブラウザのプラグイン・ソフトウェアなどにより再生をすることができる。
【0031】
次に、音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するが、時間軸に従い表示エリアに表示されるHTMLなどのハイパーテキストデータ、テキストデータ、画像データ、その他の時系列データファイルは、タイムラインに合わせた見せ方、デザイン、構成、タイミングや動きなどを取り入れることができるので、構成をあらかじめ設定しておくことが望まれる。
【0032】
次に本発明のシステムは、音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入し、前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う、スクリプトコマンド作成挿入手段を備えている。
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドは、音声データのタイムライン上の時間と、スクリプトコマンドの種類と、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータとを含む。
【0033】
図5は、エンコードされた音声データにスクリプトコマンドを挿入するタイムラインの構成の例を示すものである。スクリプトコマンドの要素として、図5に示す例では、音声データのタイムライン上の時間であるscript timeと、スクリプトコマンドの種類であるscript typeと、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータであるscript parameterが含まれている。
script timeは、音データからスクリプトコマンドが送られる時間を指定する。
script typeは、スクリプトコマンドの種類(vnetcmd オリジナルコマンド)を指定する。
script parameterは、上記コマンドに付随して送られるパラメータであり、表示させるデータファイルを指定する。
完成した上記の音声データが再生されると、script
timeで指定される時間に従って、スクリプトコマンドが、再生制御データが埋め込まれたページ(HTML)に対して送られる。
【0034】
図2を再度参照し、スクリプトコマンドを、音声データに挿入する処理は、音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定する。すなわち前記の要素を含むスクリプトコマンドを音声データに挿入する。
コマンド挿入位置は、タイムライン(時間軸)上を指定することにより挿入可能なことが望ましい。スクリプトコマンドの種類は、表示される時系列データファイルのデータ形式や、データ内容、その他により様々に設定することができる。図12に示す例を説明すると、「vnetcmd 1」「vnetcmd 2」「vnetcmd 3」「vnetcmd n」はそれぞれ音楽などの音声に合わせて表示されるコンテンツデータを想定したものであり、また「cm 1」「cm 2」は、挿入される広告(CM)などを想定したものであるが、コンテンツの内容は様々に構成することができるので、それらの内容には特に限定されない。
【0035】
次に、図4を再度参照すると、フレームページの例である表示エリアデータファイルAの表示時に、表示エリアB、再生制御エリアCをそれぞれ指定の場所、大きさで表示する。
Bは初期ページを表示し、音声データの再生と共に時系列データファイルが再生されるエリアである。
Cには再生制御データがソースとして指定されている。
Cに記述されたJava(登録商標)scriptなどのプログラム(スクリプト)により、デザインされたHTMLページを所定の場所(B:表示エリア)に読み込む。上記HTML等のハイパーテキストデータファイルは同一サーバーまたは外部サーバーに備えられる。HTML等のファイルは埋め込みFLASH、Windows(登録商標)メディアプレーヤー等の再生制御データ、画像、テキストデータなどの、HTML等のハイパーテキストで実現できる全てのものを含むことができる。
【0036】
次に図6を参照して、再生制御データの記述について説明する。
再生制御エリアCに記述されたJava(登録商標)scriptなどのプログラム(スクリプト)は、音声データ最盛時に、前記のスクリプトコマンドから音声データのタイムライン上の時間と、スクリプトコマンドの種類と、表示させる時系列データファイルを識別するパラメータとをスクリプトコマンドから渡されて、再生を制御する。
再生制御エリアCに記述されているスクリプトの一例を下記に示す。
【0037】

Figure 2004045776
【0038】
スクリプトの説明:
「vnetcmd」という文字列を受け取った場合に、まずターゲットファイル名を生成する。
ターゲットファイル名は、「pages/d」から始まり、スクリプトと共に送られてきたパラメータ値を挿入し、HTMLの拡張子をつける。
「pages/d」は「pages/」という下位ディレクトリ内に表示されるHTMLファイルが格納されている。ファイル名に「d」とあるのは任意に設定が可能である。任意のスクリプトタイプにより任意の動作をプログラムすることができる。
【0039】
上記スクリプトは常に再生制御エリアCに埋め込まれた再生制御データ、たとえばWindows(登録商標)メディアプレーヤーの例で説明すればWMPオブジェクトと通信している。
図7を参照してスクリプトコマンドの流れと動作について説明する。
「WMP」から送信されたスクリプトコマンドが同一ページ内にあるスクリプト(Java(登録商標)script)に送られる(図7の▲1▼)。
Java(登録商標)scriptでは受け取ったスクリプトコマンドを判別し、そのコマンドに適した記述どおりの動作を実行する。
上記の実行では、受け取ったパラメータを元にファイルパス、ファイル名(HTML)を生成して、そのHTMLファイルを表示エリアに表示させる(図7の▲2▼)。上記と同様にWWWブラウザを外部起動させることも可能である(図7の▲2▼’)。
なお、Java(登録商標)scriptの記述方法により、あるHTML(ローカル/インターネット上)を表示エリア内、またはWWWブラウザ(外部起動)に表示させることができる。
また、表示されるHTMLはフレームも利用可能であり、表示エリアに1つのHTML表示には限定されない。
【0040】
次に、前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う。
図8から図11は、音声データの時間軸に従い、様々な時系列データファイルが表示エリアに表示されるように設定する、タイムラインの構成のパターンの一例を示している。
図8は、時間軸に沿って、表示されるHTMLファイルが変更される例を示す。図9は、表示されるフレーム画面のHTMLファイルが時間軸に沿って変更される形態である。
図10および図11は、表示されるHTMLファイルが時間軸に沿って変更されると共に、CMなどの広告等データファイルが挿入されて表示される例を示している。広告等データファイルは動画像などを用いることもでき、操作ボタン等により、再生、一時停止、などの操作が可能なことが好ましい。図10はCMムービーの時間(長さ)があらかじめ設定されて、音声データのタイムライン内に組み込まれている例である。一方図11の例では、CMムービーの時間(長さ)はユーザーの操作に依存し、操作内容によって変動するので、その間の経過時間を計測し、CMムービーからHTMLファイルの表示に戻る際に、計測された時間経過後のタイムラインの地点に戻り、HTMLファイルの再生表示を行う。すなわち、動画像データなどの時間軸に従った再生に際して、音声データのタイムラインと、再生され表示される時系列データファイルのタイムラインとを同期させるための時間計測・制御手段により再生の制御を行う。
【0041】
以上のようにして作成された、音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルと、時系列データファイルを表示させる表示エリアを含む表示エリアデータファイルを、指定された格納場所に記憶する。
【0042】
また、請求項2に記載の発明によれば、さらに前記の処理により作成された音声データ、時間軸に従い表示される時系列データファイル、および表示エリアを含む表示エリアデータファイルを、サーバーの所定場所に格納する処理を経ることにより、WEBサーバーへアップロードして配信可能にする。
【0043】
(第二の実施形態)
次に、本発明の第二の実施形態について説明する。
本発明の第二の実施形態は、これまでに説明したデータのWEB上での配信に関するものである。
入力手段、制御手段、表示手段、出力手段、記憶手段等を備え、インターネットに代表される通信手段に接続されて備えられたサーバーにアクセス可能なコンピュータ等の端末において、操作により行われるデータ処理方法であって、前記の処理により作成された音声データ、時間軸に従い表示される時系列データファイル、および表示エリアを含む表示エリアデータファイルを、サーバーの所定場所に格納する処理と、を少なくとも経る、配信音声データの作成方法である。
【0044】
図12は、本発明の第二の実施形態における基本的なシステム構成の一例を示すブロック図である。
本発明の第二の実施形態は、インターネットに代表される通信手段に接続されて備えられたサーバーシステムであって、音声データの配信を行うWEBサーバー等により構成されるシステムである。
【0045】
本発明のサーバーシステムに接続するためのユーザー端末としては、通常、パーソナルコンピュータやワークステーションなどのコンピュータ端末が用いられる。この他、利用者端末には、インターネット等に接続可能なブラウザ機能を搭載した携帯電話をはじめとする無線通信端末、携帯情報端末や、インターネットTV、ゲーム機器、テレビ会議システム、その他のネットワーク接続機能を備えた家電製品などの機器を広く含む。
コンピュータ端末は、制御手段、記憶手段、入力手段、出力手段、表示手段などを備える。またインターネットに代表されるコンピュータネットワークに接続詞、データの送受信を行う機能を備え、ブラウザや電子メールソフトウェア、ワードプロセッサなどのアプリケーションプログラムや、オペレーティングシステム(OS)を備えることが通常の形態である。
【0046】
サーバーシステムは、インターネットに代表されるネットワークに接続されて備えられ、コンピュータネットワークに接続するユーザー端末からアクセスされる。
ここでネットワークには、インターネットをはじめとして、専用線により接続されたネットワーク形態や、企業内LAN、企業間LAN、WANなどの形態を広く含む。またここで用いられる通信回線の形態には、有線通信、無線通信の形態を広く含み、衛星通信や、Bluetoothなどを用いた形態を含む。
【0047】
次に、本発明のサーバーシステムは、通常は、アプリケーションサーバー、データベースサーバー、認証サーバー、WEBサーバー、その他必要に応じメールサーバー、その他の各種装置により構成することができる。
これらの各サーバーは、物理的に同一の装置に設けられる形態や、物理的に複数の装置からなる形態、あるいはネットワークを介して接続される物理的に複数の装置からなる形態などを含み、機能的に同様の機能が実現されるならば、様々な形態を含む。
【0048】
サーバーシステムは、WEB上で配信可能なデータ形式にエンコードされた音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、表示される時系列データファイルごとに必要に応じ挿入した音声データを記憶する、音声データ記憶手段を備えている。
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドは、音声データのタイムライン上の時間と、スクリプトコマンドの種類と、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータとを含む。
【0049】
次に、サーバーシステムは、音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段を備えている。
時間軸に従い表示される時系列データファイルは、HTMLなどのハイパーテキストデータ、テキストデータ、画像データ、動画像データ、アニメーションデータ、その他のデータ形式を用いることができる。
【0050】
サーバーシステムは、時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段を備えている。
時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルは、HTMLなどのハイパーテキストデータであって、スクリプトコマンドを含む音声データを指定する記述、および表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアと、時系列データファイルが表示される表示エリアと、を少なくとも含み構成される。
【0051】
これらの各データファイルは、サーバーシステムにおいては、ユーザー端末からアクセスするためのコンテンツデータ及びプログラム等を記憶するWEBサーバーに通常記憶されている。
コンテンツデータには、HTMLファイル、XMLファイルなどのWEB上に表示されるデータファイルや、C−HTMLファイルなどのWEBサイトにアクセス可能な携帯電話等に表示されるデータファイルなどが含まれる。
また、これらのファイルに挿入されるなどして表示又は出力される、文字データファイル、音声データファイル、画像データファイル、動画像データファイル、アニメーションデータファイル,その他の様々なコンテンツデータを記憶することができる。
プログラムは、顧客端末からの検索要求に応答してコンテンツ記憶手段等に記憶された動画コンテンツデータを検索・抽出するプログラムや、抽出された動画コンテンツを配信するプログラム、その他のプログラムを含むことができる。
【0052】
以下、本発明の基本的な処理の流れについて説明する。
図13及び図14は、本発明の基本的な処理の流れの一例を示すフローチャートである。
また、図15から図28は、ユーザー端末に表示される、表示エリアを含むデータファイルの画面例である。図15から図20は、表示エリアにHTMLファイルが時間軸に従い表示される例であり、図21から図26は、表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される例である。
図27及び図28は、より具体的な画面イメージと機能の例を示す。
【0053】
サーバーシステムは、アクセスして音声データの配信要求を行ったユーザー端末に対し、配信要求に従い、表示エリアデータファイルと、ユーザーがユーザー端末からの選択・指定により配信要求した音声データファイルとを配信するデータ配信手段を備えている。
【0054】
ユーザーがウェブサイトの閲覧等により、音声データを選択・指定して、すトリミング配信などの配信を要求した場合には、図14に示すように、音声データが再生され、再生制御エリアCのHTML等のハイパーテキスト・コンテンツ内に記述されたスクリプト(Java(登録商標)script)が、スクリプトコマンドの有無を監視し判定する。
スクリプトコマンドが音声データに挿入されていた場合には、スクリプトコマンドとそれに含まれるパラメータを再生制御エリアCのHTML等のハイパーテキスト・コンテンツ内に記述されたスクリプト(Java(登録商標)script)に送る。音声データの再生が続く間、スクリプトコマンドの有無を監視し判定する。
【0055】
一方、スクリプトコマンドがあった場合の表示処理は、図15に示すような処理である。
配信され再生される音声データに挿入された、スクリプトコマンドを解釈し、タイムライン上における所定の時間軸の範囲に関連付けられた時系列データファイルを抽出するスクリプトコマンド解釈手段(Java(登録商標)script等)が、スクリプトコマンドを検知し受け取ると、それが有効か否かを判定し、有効であれば、パラメータを利用して表示エリアに表示するHTMLファイルへのパスを生成する。
次いで、抽出された時系列データファイルをユーザー端末に送信し、所定の表示エリアに表示させるデータファイル表示制御手段により、生成されたパスに存在するHTMLファイルを表示エリアに表示させる。
【0056】
図15から図20を参照して、表示エリアにHTMLファイルが時間軸に従い表示される例について説明する。
図15において初期画面が表示され、いくつもの音声データメニューなどのチャンネルがある例であり、チャンネルへのハイパーリンクがチャンネル内容の紹介等である場合には、図16のような紹介画面に進む。ユーザーがチャンネルを選択すると図17に進み、表示エリアにおいて、音声再生に従い時系列データファイルの再生が行われる。
表示されるHTMLファイルなどの時系列データファイルは、番組(音データ)にスクリプトコマンドが挿入されることで一体化・依存しており、番組内での時間軸に従い表示されるデータファイルが変わり、また次の番組(音声データ)が再生されると、その音声データの時間軸に従い表示が行われる(図18から図20)。
図21から図26は、表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される例であり、表示処理の流れ自体は上記と同様である。
【0057】
また、前記の通り、本発明の実施形態としては様々なデータファイルを用いて様々な番組構成を採用することができる。音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される広告等データファイルを記憶する広告等データファイル記憶手段が備えられ、時間軸に従い表示される時系列データファイルの少なくともいずれかが、配信音声データのスポンサーが提供する広告等データファイルであるようにすることにより、データ配信のスポンサー企業等によるデータ提供をすることができる。
さらに、本発明の実施形態としては様々なデータファイルを用いて様々なページ構成を採用することができる。図27および図28にも一例を示すように、時系列データファイル、または表示エリアデータファイルには、他のデータファイルへのハイパーリンク情報が記述され、他のページへ飛んだり、あるいは電子メールや電子掲示板等を起動したりすることができる。
【0058】
【発明の効果】
以上詳細に説明したように、本発明によれば、音声データと画像や映像などの他の形式のデータを組み合わせ、自由に構成して、しかもこれらを同期させたコンテンツの制作と、配信を行うことが可能になる。
また、音声と共に表示されるコンテンツとして、HTMLファイル、その他のデータ量の少ないコンテンツや、様々なデータ形式、データ内容のコンテンツを自由に組み合わせて構成することができ、音声と他のデータとの同期再生が可能になる。今後普及が見込まれるデータ配信、インターネットを通じた番組配信においても、配信するコンテンツの不足や、コンテンツ制作の期間、費用、人材などに悩まされることも少なくなる。
さらに本発明によれば、音声、映像、画像、文字などの様々なデータ形式を扱い、再生することのできるコンピュータを用いた通信によって、ユーザーの興味を魅く様々な表現が可能になる。また番組形式のような配信方法において、広告スポンサーなどが広告を出したくなるような表現方法と、ユーザーの関心や利用者数などを集めやすい、表現豊かな配信形式を開発することができる。
さらに、音声データは音楽に限られず、講演、セミナー、講義、教材、その他の様々な分野において利用可能な表現形式を提供することができる。
【図面の簡単な説明】
【図1】本発明の第一の実施形態の基本的な構成の一例を示すブロック図である。
【図2】音素材である音声データ素材から、スクリプトコマンドを音声データに挿入し、音声データを配信可能な形式に変換し、音声の時間軸に従い各種のデータファイルを表示させることの可能な音声データを製作する処理の基本的な流れを示す図である。
【図3】指定された時系列データファイルを、指定された表示エリアに表示させるタイムラインの概念を示す図である。
【図4】表示エリアBを含む表示エリアデータファイルAがウェブサイトにおいてフレーム表示を構成するファイルであり、表示エリアと、表示・再生の制御を行う記述を含む再生制御エリアとを含み構成される画面の概要を示す図である。
【図5】エンコードされた音声データにスクリプトコマンドを挿入するタイムラインの構成の例を示す図である。
【図6】再生制御データの記述についての説明図である。
【図7】スクリプトコマンドの流れと動作についての説明図である。
【図8】音声データの時間軸に従い、様々な時系列データファイルが表示エリアに表示されるように設定する、タイムラインの構成のパターンの一例を示す図である。
【図9】音声データの時間軸に従い、様々な時系列データファイルが表示エリアに表示されるように設定する、タイムラインの構成のパターンの一例を示す図である。
【図10】音声データの時間軸に従い、様々な時系列データファイルが表示エリアに表示されるように設定する、タイムラインの構成のパターンの一例を示す図である。
【図11】音声データの時間軸に従い、様々な時系列データファイルが表示エリアに表示されるように設定する、タイムラインの構成のパターンの一例を示す図である。
【図12】本発明の第二の実施形態における基本的なシステム構成の一例を示すブロック図である。
【図13】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図14】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図15】表示エリアにHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図16】表示エリアにHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図17】表示エリアにHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図18】表示エリアにHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図19】表示エリアにHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図20】表示エリアにHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図21】表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図22】表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図23】表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図24】表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図25】表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図26】表示エリアにフレーム画面のHTMLファイルが時間軸に従い表示される画面イメージ図である。
【図27】具体的な画面イメージと機能の一例を示す図である。
【図28】具体的な画面イメージと機能の一例を示す図である。[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a distribution audio data creation method, a distribution audio data creation system, an audio data distribution system, and an audio data distribution method.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, technologies such as streaming distribution for distributing audio data and moving image data through the Internet and distributing them while reproducing them have been developed. Accordingly, development of various contents and development of a distribution method are required.
In particular, for audio data, music distribution and the like are being actively attempted, and if broadband and other services become widespread and the environment such as distribution speed is adjusted, it will be possible to view programs via a browser via the Internet. Is also assumed.
[0003]
[Problems to be solved by the invention]
Also in the conventional audio data distribution, a method of distributing audio data and a method of reproducing by using plug-in software of a browser have already been developed.
By the way, in communication using a computer that can handle and reproduce various data formats such as audio, video, images, characters, etc., simply using audio data alone does not fully utilize the infrastructure, It is difficult to attract users' interest.
In addition, if it is assumed that a distribution method such as a program format like a conventional television program is used, it is economically preferable that an advertisement sponsor or the like provides the program. There is a need to develop expressive delivery methods that make it easy to gather user interest and the number of users.
In addition, audio data is not limited to music, and lectures, seminars, lectures, teaching materials, and various other methods of use are conceivable, but even in these cases, expressions that include not only audio but also images, videos, and other contents It is desirable that it be in the form.
[0004]
Conventionally, as data combining audio data with data in other formats such as images and videos, moving image data, presentation data, slide show data, and the like are known. In particular, moving image (movie) data includes movies, programs, Music is also used in conventional videos and digital images in promotion videos and live images.
For example, in Japanese Patent Application Laid-Open No. 11-161663, "moving image reproduction control method and image display apparatus to which the method is applied", a technique in which a DVD video title is combined with an HTML file provided on the Internet has been proposed.
When the Web button on the remote controller is pressed during the reproduction of the DVD video, the URL is taken out of the navigation pack of the currently reproduced video object unit, and the URL is passed as the Internet address to be displayed on the WWW browser. As a result, the HTML content corresponding to the URL is acquired from the external server, displayed on the screen, and for each moving image of the scene being reproduced, the HTML content corresponding to the moving image is sequentially acquired via the Internet, and the scene being reproduced is reproduced. Is displayed in conjunction with the.
However, in this method, even if the communication speed is increased because the URL is stored in a storage medium called a DVD in which the video is simply stored and the Web page is jumped, even if the communication speed is increased, the moving image and the corresponding HTML content can be stored. Are not synchronized in time. Displaying things that are not synchronized at the same time means that you are watching another TV program while watching the video.
[0005]
On the other hand, as synchronized playback of audio data and video and other contents, it is also used in conventional analog video and digital video. The above-mentioned music promotion videos and live images are examples.
However, these are produced in advance by the producer as a video with sound or the like, and the production cost is enormous, and the processing of rights and the like is complicated. If distribution is possible with simple equipment using the Internet, etc., it is desirable to be able to combine audio and video by the ingenuity of the distributor, or to reconfigure with simple processing and low cost. It is.
In addition, the data size of digital video with audio, etc., is often too large depending on distribution conditions. However, as content displayed together with audio, HTML files, other content with a small amount of data, various data formats, data If the contents can be freely combined and configured, the various problems described above can be solved. In addition, if synchronized playback of audio and other data is possible, which can be used for all contents in this way, shortage of contents to be distributed will occur even in data distribution, which is expected to spread in the future, and program distribution through the Internet. In addition, less trouble is caused by the content production period, cost, and human resources.
[0006]
[Means for Solving the Problems]
In order to solve the above problem, in the invention according to claim 1,
A data processing method performed by operation on a terminal such as a computer including an input unit, a control unit, a display unit, an output unit, and a storage unit,
A process of encoding the created or edited audio data into a data format that can be distributed on the web;
Processing for inserting a script command specifying a time-series data file displayed according to the time axis into the audio data in association with a predetermined time axis range on the time line of the audio data;
Processing for inserting the script command as needed for each displayed time-series data file; and
A time-series data file displayed according to the time axis specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data, and a display area for displaying the time-series data file, Storing a display area data file including a playback control area including a description for displaying the time-series data file in the display area in a designated storage location;
This is a method for creating distribution audio data that goes through at least
[0007]
In order to solve the above-mentioned problem, in the invention according to claim 2,
A data processing method performed by an operation on a terminal such as a computer having input means, control means, display means, output means, storage means, etc., and capable of accessing a server connected to communication means represented by the Internet. And
A process of encoding the created or edited audio data into a data format that can be distributed on the web;
Processing for inserting a script command specifying a time-series data file displayed according to the time axis into the audio data in association with a predetermined time axis range on the time line of the audio data;
Processing for inserting the script command as needed for each displayed time-series data file; and
A time-series data file displayed according to the time axis specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data, and a display area for displaying the time-series data file, Storing a display area data file including a playback control area including a description for displaying the time-series data file in the display area in a designated storage location;
Storing the audio data created by the above processing, a time-series data file displayed according to a time axis, and a display area data file including a display area in a predetermined location of a server, It is characterized by the creation method.
[0008]
In order to solve the above-mentioned problem, in the invention according to claim 3,
In the invention according to claim 1 or 2,
The time-series data file displayed according to the time axis is a method of creating distribution audio data including at least one of hypertext data such as HTML, text data, image data, moving image data, and animation data. And
[0009]
Further, in order to solve the above-mentioned problem, in the invention according to claim 4,
In the invention according to claims 1 to 3,
A display area data file including a display area for displaying the time-series data file and a reproduction control area is hypertext data such as HTML, and a description for specifying audio data including a script command, and a time-series A playback control area including a description for displaying the data file;
And a display area in which the time-series data file is displayed.
[0010]
In order to solve the above-mentioned problem, in the invention according to claim 5,
In the invention according to claims 1 to 4,
The script command inserted in association with the predetermined time axis range on the timeline of the audio data is passed to the display area data file from the time on the timeline of the audio data, the type of the script command, and the script command. The method is characterized in that it is a method for creating distribution audio data including a parameter for identifying a time-series data file to be displayed in the display area.
[0011]
In order to solve the above-mentioned problem, in the invention according to claim 6,
Input means, control means, display means, output means, a data processing system performed by operation in a terminal such as a computer having a storage means and the like,
Audio data material storage means for storing the created or edited audio data material;
Audio data encoding means for encoding the created or edited audio data into a data format that can be distributed on the web;
A script command for specifying a time-series data file to be displayed according to the time axis is inserted into the audio data in association with a predetermined time axis range on the time line of the audio data, and the script command insertion processing is displayed. Script command creation and insertion means for performing as necessary for each time-series data file to be executed,
When audio data is stored according to a time axis specified by a script command inserted in association with a predetermined time axis range on the time line of the audio data, and audio data storage means for storing the audio data in which the script command is inserted. Time-series data file storage means for storing a series data file;
Display area data file storage means for storing a display area data file including a display area for displaying the time-series data file and a reproduction control area,
Characterized in that it is a system for creating distribution audio data, at least comprising:
[0012]
In order to solve the above-mentioned problem, in the invention according to claim 7,
A server system provided by being connected to communication means represented by the Internet,
When a script command for specifying a time-series data file to be displayed according to the time axis is displayed in association with a predetermined time axis range on the time line of the audio data encoded in a data format that can be distributed on the WEB. Voice data storage means for storing voice data inserted as needed for each sequence data file;
Time-series data file storage means for storing a time-series data file displayed according to the time axis, specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data,
Display area data file storage means for storing a display area data file including a display area for displaying the time-series data file and a reproduction control area,
Data for distributing the display area data file and the audio data file requested by the user to select and specify from the user terminal according to the distribution request to the user terminal that has accessed the server system and has requested the audio data distribution. Distribution means,
Script command interpreting means for interpreting the script command inserted in the audio data to be distributed and played, and extracting a time-series data file associated with a predetermined time axis range on the timeline,
Data file display control means for transmitting the extracted time-series data file to the user terminal and displaying the extracted time-series data file in a predetermined display area;
Characterized in that it is a voice data distribution system having at least
[0013]
In order to solve the above-mentioned problem, in the invention according to claim 8,
In the invention according to claim 7,
The time-series data file displayed according to the time axis is a sound data distribution system including at least one of hypertext data such as HTML, text data, image data, moving image data, and animation data. I have.
[0014]
Further, in order to solve the above problem, in the invention according to claim 9,
In the invention according to claim 7 or 8,
A display area data file including a display area for displaying the time-series data file and a reproduction control area is hypertext data such as HTML, and a description for specifying audio data including a script command, and a time-series A playback control area including a description for displaying the data file;
And a display area in which a time-series data file is displayed.
[0015]
In order to solve the above-mentioned problem, in the invention according to claim 10,
In the invention according to claims 7 to 9,
Advertisement data file storage means for storing an advertisement data file displayed according to the time axis specified by a script command inserted in association with a predetermined time axis range on the timeline of the audio data,
The audio data distribution system specified in the script command so that at least one of the time-series data files displayed according to the time axis is an advertisement data file provided by the sponsor of the distribution audio data. It is characterized by.
[0016]
Further, in order to solve the above problem, in the invention according to claim 11,
In the invention according to claims 7 to 10,
The script command inserted in association with the predetermined time axis range on the timeline of the audio data is passed to the display area data file from the time on the timeline of the audio data, the type of the script command, and the script command. The audio data distribution system includes a parameter for identifying a time-series data file to be displayed in a display area.
[0017]
Further, in order to solve the above problem, in the invention according to claim 12,
In the invention according to claims 7 to 11,
The time-series data file or the display area data file is a voice data distribution system in which hyperlink information to another data file is described.
[0018]
In order to solve the above-mentioned problem, in the invention according to claim 13,
In the invention according to claims 7 to 12,
The time-series data file or the display area data file is a sound data distribution system in which reproduction control command information such as reproduction, stop, pause, and skip is described.
[0019]
Further, in order to solve the above problem, in the invention according to claim 14,
In the invention according to claim 13,
The time-series data file controlled by the reproduction control command is a time-series data file reproduced according to a time axis such as moving image data,
The present invention is characterized by an audio data distribution system provided with a time measurement / control means for synchronizing a time line of audio data with a time line of a time-series data file to be reproduced and displayed.
[0020]
Further, in order to solve the above problem, in the invention according to claim 15,
Provided by being connected to communication means represented by the Internet,
When a script command for specifying a time-series data file to be displayed according to the time axis is displayed in association with a predetermined time axis range on the time line of the audio data encoded in a data format that can be distributed on the WEB. Voice data storage means for storing voice data inserted as needed for each sequence data file;
Time-series data file storage means for storing a time-series data file displayed according to the time axis, specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data,
Display area data file storage means for storing a display area data file including a display area for displaying the time-series data file and a reproduction control area,
Using a server system having at least
Processing for distributing the display area data file and the audio data file requested by the user to select and specify from the user terminal according to the distribution request to the user terminal that has accessed the server system and has requested the audio data distribution And interpreting the script command inserted in the audio data to be distributed and played, and extracting a time-series data file associated with a predetermined time axis range on the timeline;
A process of transmitting the extracted time-series data file to the user terminal and displaying the extracted time-series data file in a predetermined display area;
, Which is a method of distributing audio data at least.
[0021]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
(Embodiment 1)
A first embodiment of the present invention relates to a method for creating distribution audio data, which performs data processing by operation in a terminal such as a computer including an input unit, a control unit, a display unit, an output unit, and a storage unit. This is a system for creating distribution audio data to be implemented.
[0022]
FIG. 1 is a block diagram showing an example of a basic configuration of the first embodiment of the present invention.
The system according to the first embodiment of the present invention is realized in a terminal such as a computer including an input unit, a control unit, a display unit, an output unit, and a storage unit, and is generally implemented by a personal computer, a workstation, a server device, or the like. A computer terminal is used.
The computer terminal includes a control unit, a storage unit, an input unit, an output unit, a display unit, and the like. In a typical mode, a computer network represented by the Internet is provided with a function of transmitting and receiving a connection word and data, and is provided with an application program such as a browser, e-mail software, and a word processor, and an operating system (OS).
[0023]
In FIG. 1, the storage means is a memory, a hard disk, a CD-ROM, an MO, a DVD, various memory cards, other information storage media, an external hard disk connected to a computer terminal by a cable or a LAN, a server device, or the like. Including.
The input means can include a keyboard, a mouse, a tablet, a touch panel, a microphone, an input terminal, and the like, and the display means is a display or the like. The control unit controls hardware and software by using an operating system and other programs stored in a storage unit such as a memory and a hard disk, and a transmission path such as a bus for transmitting data. The output means performs data output with respect to an output terminal, data output to an external storage device, an information storage medium, and the like, audio output, and the like. The network communication means performs data transmission / reception and communication control via communication means represented by the Internet or a LAN. The configuration of each of these means is not particularly limited to these configurations, since various types of mobile devices are known in computer devices, and the configurations can adopt various forms.
[0024]
The system of the present invention includes audio data material storage means for storing created or edited audio data materials.
In the system of the present invention, data processing is performed by, for example, inserting a script command into audio data to create audio data in a distributed form, where the audio data material is the audio to be distributed. This is data as a source of data.
As audio data that can be used here, as a data format, for example, a Wave file, an AVI file, an MPEG file, and other data files in various audio formats can be used. In addition, the content of the audio data is not particularly limited, and data such as music, lectures, lectures, presentations, sound effects, natural sounds, combinations of various sound materials edited, and data of various other contents are used. be able to.
[0025]
FIG. 2 shows that a script command is inserted into audio data from an audio data material, which is a sound material, the audio data is converted into a format that can be distributed, and various data files (time axis data files, hereinafter referred to as time axis data files) FIG. 3 is a conceptual diagram showing a basic flow of a process of producing audio data capable of displaying the same.
The completed data files are audio data and time-series data files displayed in synchronization with the reproduction of the audio data, for example, designed HTML files and other data files, and they are linked along the time axis. A data file (hereinafter, referred to as a display area data file) including a display area, an operation area, and the like is created in the browser so that the program can be distributed on the Internet.
The audio data material may be newly created or recorded using various kinds of software or the like, or existing audio data may be used or these may be edited and used.
[0026]
Next, the system of the present invention includes audio data encoding means for encoding the created or edited audio data into a data format that can be distributed on the web. The audio data encoding means converts the audio data into a streaming file in order to upload the audio data on the WEB. The data format after the conversion is a format such as a WMA file, a WMV file, and an ASF file.
As an encoding means, a program for performing data conversion has been developed. For example, audio data material can be directly encoded by a program such as “Windows (registered trademark) Media encoder”.
[0027]
In addition, the system of the present invention includes audio data storage means for storing audio data into which the script command has been inserted.
The audio data storage means stores the encoded audio data file in a data format that can be distributed on the WEB.
[0028]
Further, the system of the present invention includes a time-series data storing a time-series data file displayed according to the time axis specified by a script command inserted in association with a predetermined time-axis range on the time line of the audio data. It has file storage means.
The time-series data file displayed according to the time axis is a method of creating distribution audio data including at least one of hypertext data such as HTML, text data, image data, moving image data, and animation data.
FIG. 3 shows a timeline when the audio file of the present invention is reproduced by an arrow on the horizontal axis, and is specified by a script command inserted into the audio file at a timing on the specified time axis. A timeline for displaying a time-series data file in a designated display area is shown. An example is shown in which an HTML file is used as a time-series data file displayed according to the time axis.
FIG. 4 shows a display area data file A including a display area B, which constitutes a frame display on a website, and includes a display area and a reproduction control area including a description for controlling display / reproduction. Shows an overview of the screen.
[0029]
Further, the system of the present invention includes a display area data file storage means for storing a display area data file A including a display area B for displaying the time-series data file.
A display area data file including a display area for displaying a series data file is hypertext data such as HTML, and includes a description for specifying voice data including a script command and a description for displaying a time series data file in the display area. And a display area in which a time-series data file is displayed. Further, it may include operation buttons, hyperlinks to various data files, and the like.
[0030]
Hereinafter, a basic processing flow of the first embodiment of the present invention will be described. Note that the flow of the processing shown here is an example, and the present invention is not limited to this, and various applications and modifications are possible.
A process of encoding the created or edited audio data into a data format that can be distributed on the WEB is performed.
Activate the audio data encoding means and convert it to a data file in, for example, ASF format that can be distributed on the WEB. Encoding is performed by selecting the stream format, selecting the data format of the input source, and specifying the data file to be encoded and the output destination of the converted file. When the encoding is completed, a file of the specified data format is created in the specified directory, and the file can be played back by plug-in software of the browser.
[0031]
Next, a time-series data file to be displayed according to the time axis is specified in association with a predetermined time-axis range on the time line of the audio data, but hypertext data such as HTML displayed in the display area according to the time axis is specified. The text data, image data, and other time-series data files can incorporate the appearance, design, configuration, timing, movement, and the like according to the timeline. Therefore, it is desirable to set the configuration in advance.
[0032]
Next, the system of the present invention inserts a script command specifying a time-series data file displayed according to the time axis into the audio data in association with a predetermined time axis range on the time line of the audio data, A script command creation / insertion unit is provided for performing script command insertion processing as needed for each displayed time-series data file.
The script command inserted in association with the predetermined time axis range on the timeline of the audio data is passed to the display area data file from the time on the timeline of the audio data, the type of the script command, and the script command. And a parameter for identifying a time-series data file to be displayed in the display area.
[0033]
FIG. 5 shows an example of the configuration of a timeline for inserting a script command into encoded audio data. In the example shown in FIG. 5, script time, which is the time on the timeline of the audio data, script type, which is the type of the script command, and the script command are passed as elements of the script command to the display area data file. Includes a script parameter which is a parameter for identifying a time-series data file to be displayed.
The script time designates a time at which a script command is sent from sound data.
The script type specifies the type of the script command (vnetcmd original command).
The “script parameter” is a parameter that is sent along with the command, and specifies a data file to be displayed.
When the completed audio data is reproduced, the script
A script command is sent to a page (HTML) in which playback control data is embedded according to the time specified by time.
[0034]
Referring again to FIG. 2, the process of inserting the script command into the audio data specifies a time-series data file to be displayed according to the time axis in association with a predetermined time axis range on the time line of the audio data. That is, a script command including the above element is inserted into the audio data.
It is desirable that the command insertion position can be inserted by designating it on the timeline (time axis). The type of the script command can be variously set according to the data format of the displayed time-series data file, the data content, and the like. To explain the example shown in FIG. 12, “vnetcmd 1”, “vnetcmd 2”, “vnetcmd 3”, and “vnetcmd n” are assumed to be content data displayed in accordance with audio such as music, respectively, and “cm 1 “Cm 2” is assumed to be an inserted advertisement (CM) or the like. However, since the content can be variously configured, the content is not particularly limited.
[0035]
Next, referring to FIG. 4 again, when the display area data file A, which is an example of the frame page, is displayed, the display area B and the reproduction control area C are displayed at designated locations and sizes, respectively.
B is an area in which an initial page is displayed and a time-series data file is reproduced together with reproduction of audio data.
In C, the reproduction control data is specified as the source.
The designed HTML page is read into a predetermined location (B: display area) by a program (script) such as Java (registered trademark) script described in C. The hypertext data file such as HTML is provided on the same server or an external server. Files such as HTML can include everything that can be realized with hypertext such as HTML, such as embedded FLASH, playback control data for Windows (registered trademark) media player, etc., images, text data, and the like.
[0036]
Next, the description of the reproduction control data will be described with reference to FIG.
A program (script) such as Java (registered trademark) written in the reproduction control area C displays the time on the timeline of the audio data from the script command, the type of the script command, and the type of the script command when the audio data is at its peak. A parameter for identifying the time-series data file is passed from the script command to control the reproduction.
An example of the script described in the reproduction control area C is shown below.
[0037]
Figure 2004045776
[0038]
Script description:
When a character string “vnetcmd” is received, a target file name is generated first.
The target file name starts with “pages / d”, inserts the parameter value sent with the script, and attaches an HTML extension.
In “pages / d”, an HTML file displayed in a lower directory “pages /” is stored. "D" in the file name can be arbitrarily set. Any operation can be programmed with any script type.
[0039]
The script is always in communication with playback control data embedded in the playback control area C, for example, a WMP object in the case of a Windows (registered trademark) media player.
The flow and operation of the script command will be described with reference to FIG.
The script command transmitted from “WMP” is transmitted to a script (Java (registered trademark) script) in the same page ((1) in FIG. 7).
In the Java (registered trademark) script, the received script command is determined, and an operation according to a description suitable for the command is executed.
In the above execution, a file path and a file name (HTML) are generated based on the received parameters, and the HTML file is displayed in the display area ((2) in FIG. 7). It is also possible to externally activate the WWW browser in the same manner as described above ((2) 'in FIG. 7).
Note that a certain HTML (local / on the Internet) can be displayed in a display area or on a WWW browser (externally activated) by a description method of Java (registered trademark) script.
Further, the displayed HTML can use a frame, and is not limited to one HTML display in the display area.
[0040]
Next, the above-described script command insertion processing is performed as needed for each displayed time-series data file.
FIGS. 8 to 11 show an example of a pattern of a timeline configuration in which various time-series data files are set to be displayed in the display area in accordance with the time axis of audio data.
FIG. 8 shows an example in which the displayed HTML file is changed along the time axis. FIG. 9 shows a form in which the HTML file of the displayed frame screen is changed along the time axis.
FIGS. 10 and 11 show an example in which the displayed HTML file is changed along the time axis and a data file such as an advertisement such as a commercial is inserted and displayed. A data file such as an advertisement can also use a moving image and the like, and it is preferable that operations such as reproduction and pause can be performed using operation buttons and the like. FIG. 10 shows an example in which the time (length) of the CM movie is set in advance and is incorporated in the timeline of the audio data. On the other hand, in the example of FIG. 11, the time (length) of the CM movie depends on the operation of the user and fluctuates according to the content of the operation. Therefore, when the elapsed time is measured and the display returns to the HTML file from the CM movie, Return to the point on the timeline after the measured time has elapsed, and play back and display the HTML file. In other words, at the time of reproducing the moving image data according to the time axis, the reproduction control is performed by the time measurement / control means for synchronizing the time line of the audio data with the time line of the time-series data file to be reproduced and displayed. Do.
[0041]
A time-series data file and a time-series data, which are displayed according to the time axis specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data created as described above, A display area data file including a display area for displaying the file is stored in the designated storage location.
[0042]
According to the second aspect of the present invention, the audio data created by the above processing, a time-series data file displayed according to a time axis, and a display area data file including a display area are further stored in a predetermined location on the server. Is uploaded to the web server and distributed.
[0043]
(Second embodiment)
Next, a second embodiment of the present invention will be described.
The second embodiment of the present invention relates to the distribution of data described above on the Web.
A data processing method performed by an operation on a terminal such as a computer having input means, control means, display means, output means, storage means, etc., and capable of accessing a server connected to communication means represented by the Internet. And storing the sound data created by the above-described processing, a time-series data file displayed according to the time axis, and a display area data file including a display area in a predetermined location of the server. This is a method for creating distribution audio data.
[0044]
FIG. 12 is a block diagram showing an example of a basic system configuration according to the second embodiment of the present invention.
The second embodiment of the present invention is a server system connected to communication means typified by the Internet, and is a system including a WEB server for distributing audio data.
[0045]
As a user terminal for connecting to the server system of the present invention, a computer terminal such as a personal computer or a workstation is usually used. In addition, the user terminal includes a wireless communication terminal such as a mobile phone equipped with a browser function connectable to the Internet, a portable information terminal, an Internet TV, a game machine, a video conference system, and other network connection functions. Includes a wide range of appliances such as home appliances equipped with.
The computer terminal includes a control unit, a storage unit, an input unit, an output unit, a display unit, and the like. In a typical mode, a computer network represented by the Internet is provided with a function of transmitting and receiving a connection word and data, and is provided with an application program such as a browser, e-mail software, and a word processor, and an operating system (OS).
[0046]
The server system is provided connected to a network represented by the Internet, and is accessed from a user terminal connected to a computer network.
Here, the network widely includes a network form connected by a dedicated line, a corporate LAN, a corporate LAN, a WAN, etc., including the Internet. Further, the form of the communication line used here broadly includes a form of wired communication and wireless communication, and includes a form using satellite communication, Bluetooth and the like.
[0047]
Next, the server system of the present invention can usually be constituted by an application server, a database server, an authentication server, a WEB server, and, if necessary, a mail server and other various devices.
Each of these servers includes a form that is physically provided on the same device, a form that is physically composed of a plurality of devices, and a form that is physically composed of a plurality of devices connected via a network. If various similar functions are realized, various forms are included.
[0048]
The server system associates a script command for specifying a time-series data file to be displayed according to the time axis in association with a predetermined time-axis range on the time line of the audio data encoded in a data format that can be distributed on the WEB. An audio data storage unit is provided for storing audio data inserted as needed for each displayed time-series data file.
The script command inserted in association with the predetermined time axis range on the timeline of the audio data is passed to the display area data file from the time on the timeline of the audio data, the type of the script command, and the script command. And a parameter for identifying a time-series data file to be displayed in the display area.
[0049]
Next, the server system stores the time-series data file that is displayed according to the time axis specified by the script command inserted in association with the predetermined time-axis range on the time line of the audio data. It has storage means.
The time-series data file displayed according to the time axis can use hypertext data such as HTML, text data, image data, moving image data, animation data, and other data formats.
[0050]
The server system includes a display area data file storage unit that stores a display area data file including a display area for displaying a time-series data file and a reproduction control area.
The display area data file including the display area for displaying the time-series data file and the reproduction control area is hypertext data such as HTML, and a description for specifying audio data including a script command, and the time-series data in the display area. It is configured to include at least a reproduction control area including a description for displaying a file and a display area for displaying a time-series data file.
[0051]
In a server system, each of these data files is usually stored in a web server that stores content data and programs to be accessed from a user terminal.
The content data includes a data file displayed on the web such as an HTML file and an XML file, and a data file displayed on a mobile phone that can access a web site such as a C-HTML file, such as a C-HTML file.
Also, it can store character data files, audio data files, image data files, moving image data files, animation data files, and other various content data that are displayed or output by being inserted into these files. it can.
The program may include a program for searching and extracting video content data stored in content storage means or the like in response to a search request from a customer terminal, a program for distributing the extracted video content, and other programs. .
[0052]
Hereinafter, a basic processing flow of the present invention will be described.
FIG. 13 and FIG. 14 are flowcharts showing an example of the basic processing flow of the present invention.
FIGS. 15 to 28 are examples of data file screens including a display area displayed on the user terminal. FIGS. 15 to 20 show examples in which the HTML file is displayed in the display area according to the time axis, and FIGS. 21 to 26 show examples in which the HTML file of the frame screen is displayed in the display area in accordance with the time axis.
27 and 28 show more specific examples of screen images and functions.
[0053]
The server system distributes the display area data file and the audio data file requested by the user to select and specify from the user terminal in accordance with the distribution request to the user terminal that has accessed and requested the audio data distribution. It has data distribution means.
[0054]
When the user selects and designates audio data by browsing a website or the like and requests distribution such as trimming distribution, the audio data is reproduced as shown in FIG. And the like (Java (registered trademark) script) described in hypertext content such as, for example, monitors and determines the presence or absence of a script command.
If the script command has been inserted into the audio data, the script command and the parameters included in the script command are sent to a script (Java (registered trademark) script) described in hypertext content such as HTML in the reproduction control area C. . While the reproduction of the audio data continues, the presence or absence of a script command is monitored and determined.
[0055]
On the other hand, the display processing when there is a script command is processing as shown in FIG.
Script command interpreting means (Java (registered trademark) script) for interpreting a script command inserted into audio data to be distributed and reproduced and extracting a time-series data file associated with a predetermined time axis range on a timeline. Etc.) detects and receives the script command, determines whether or not it is valid, and if valid, generates a path to the HTML file to be displayed in the display area using the parameter.
Next, the extracted time-series data file is transmitted to the user terminal, and the HTML file existing in the generated path is displayed in the display area by the data file display control means for displaying the extracted time-series data file in a predetermined display area.
[0056]
An example in which the HTML file is displayed in the display area according to the time axis will be described with reference to FIGS.
FIG. 15 shows an example in which an initial screen is displayed and there are a number of channels such as audio data menus. If the hyperlink to the channel is an introduction of the contents of the channel, the process proceeds to an introduction screen as shown in FIG. When the user selects a channel, the process proceeds to FIG. 17, and in the display area, the time-series data file is reproduced according to the audio reproduction.
The displayed time-series data file such as an HTML file is integrated and depends on the insertion of a script command into the program (sound data), and the displayed data file changes according to the time axis in the program. When the next program (audio data) is reproduced, display is performed according to the time axis of the audio data (FIGS. 18 to 20).
FIGS. 21 to 26 show examples in which the HTML file of the frame screen is displayed in the display area according to the time axis, and the flow of the display processing itself is the same as described above.
[0057]
Further, as described above, in the embodiment of the present invention, various program configurations can be adopted using various data files. An advertisement or other data file storage means for storing an advertisement or other data file displayed according to the time axis specified by a script command inserted in association with a predetermined time axis range on the time line of the audio data; By making at least one of the time-series data files displayed according to the axis a data file such as an advertisement provided by a sponsor of the distribution audio data, data can be provided by a sponsor company of the data distribution.
Furthermore, various embodiments of the present invention can employ various page configurations using various data files. As shown in FIGS. 27 and 28, in the time-series data file or the display area data file, hyperlink information to another data file is described. An electronic bulletin board or the like can be activated.
[0058]
【The invention's effect】
As described above in detail, according to the present invention, audio data and other types of data such as images and videos are combined, freely configured, and the production and distribution of contents in which these are synchronized are performed. It becomes possible.
In addition, as the content displayed together with the audio, an HTML file, other content having a small amount of data, and various data formats and data contents can be freely combined and configured. Playback becomes possible. In the data distribution, which is expected to spread in the future, and the program distribution through the Internet, the shortage of the content to be distributed and the trouble of the content production period, cost, human resources, etc. are less likely to occur.
Further, according to the present invention, various expressions that appeal to the user's interest can be realized by communication using a computer capable of handling and reproducing various data formats such as voice, video, image, and character. Further, in a distribution method such as a program format, it is possible to develop an expression method in which an advertisement sponsor or the like wants to place an advertisement, and a distribution method in which the interest of users, the number of users, and the like are easily collected, and the expression is rich.
Furthermore, the audio data is not limited to music, and can provide an expression format that can be used in lectures, seminars, lectures, teaching materials, and various other fields.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating an example of a basic configuration of a first embodiment of the present invention.
FIG. 2 shows a sound that can be used to insert a script command into sound data from sound data, which is a sound material, convert the sound data into a form that can be distributed, and display various data files according to the time axis of the sound. It is a figure showing the basic flow of the processing which produces data.
FIG. 3 is a diagram illustrating a concept of a timeline for displaying a designated time-series data file in a designated display area.
FIG. 4 shows a display area data file A including a display area B, which is a file constituting a frame display on a website, including a display area and a reproduction control area including a description for controlling display / reproduction. It is a figure showing the outline of a screen.
FIG. 5 is a diagram showing an example of the configuration of a timeline for inserting a script command into encoded audio data.
FIG. 6 is an explanatory diagram of a description of reproduction control data.
FIG. 7 is an explanatory diagram of the flow and operation of a script command.
FIG. 8 is a diagram showing an example of a pattern of a timeline configuration in which various time-series data files are set to be displayed in a display area according to a time axis of audio data.
FIG. 9 is a diagram showing an example of a pattern of a timeline configuration in which various time-series data files are set to be displayed in a display area according to a time axis of audio data.
FIG. 10 is a diagram showing an example of a pattern of a timeline configuration in which various time-series data files are set to be displayed in a display area in accordance with a time axis of audio data.
FIG. 11 is a diagram showing an example of a pattern of a timeline configuration in which various time-series data files are set to be displayed in a display area in accordance with a time axis of audio data.
FIG. 12 is a block diagram illustrating an example of a basic system configuration according to a second embodiment of the present invention.
FIG. 13 is a flowchart showing an example of a basic processing flow of the present invention.
FIG. 14 is a flowchart showing an example of a basic processing flow of the present invention.
FIG. 15 is a screen image diagram in which an HTML file is displayed in a display area according to a time axis.
FIG. 16 is a screen image diagram in which an HTML file is displayed in a display area according to a time axis.
FIG. 17 is a screen image diagram in which an HTML file is displayed in a display area according to a time axis.
FIG. 18 is a screen image diagram in which an HTML file is displayed in a display area according to a time axis.
FIG. 19 is a screen image diagram in which an HTML file is displayed in a display area according to a time axis.
FIG. 20 is a screen image diagram in which an HTML file is displayed in a display area according to a time axis.
FIG. 21 is a screen image diagram in which an HTML file of a frame screen is displayed in a display area according to a time axis.
FIG. 22 is a screen image diagram in which an HTML file of a frame screen is displayed in a display area according to a time axis.
FIG. 23 is a screen image diagram in which an HTML file of a frame screen is displayed in a display area according to a time axis.
FIG. 24 is a screen image diagram in which an HTML file of a frame screen is displayed in a display area according to a time axis.
FIG. 25 is a screen image diagram in which an HTML file of a frame screen is displayed in a display area according to a time axis.
FIG. 26 is a screen image diagram in which an HTML file of a frame screen is displayed in a display area according to a time axis.
FIG. 27 is a diagram showing an example of a specific screen image and functions.
FIG. 28 is a diagram showing an example of a specific screen image and functions.

Claims (15)

入力手段、制御手段、表示手段、出力手段、記憶手段等を備えるコンピュータ等の端末において操作により行われるデータ処理方法であって、
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入する処理と、
前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイル、および前記時系列データファイルを表示させる表示エリアと、表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアとを含む表示エリアデータファイルを、指定された格納場所に記憶する処理と、
を少なくとも経ることを特徴とする、配信音声データの作成方法。
A data processing method performed by operation on a terminal such as a computer including an input unit, a control unit, a display unit, an output unit, and a storage unit,
A process of encoding the created or edited audio data into a data format that can be distributed on the web;
Processing for inserting a script command specifying a time-series data file displayed according to the time axis into the audio data in association with a predetermined time axis range on the time line of the audio data;
Processing for inserting the script command as needed for each displayed time-series data file; and
A time-series data file displayed according to the time axis specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data, and a display area for displaying the time-series data file, Storing a display area data file including a playback control area including a description for displaying the time-series data file in the display area in a designated storage location;
A method for creating distribution audio data.
入力手段、制御手段、表示手段、出力手段、記憶手段等を備え、インターネットに代表される通信手段に接続されて備えられたサーバーにアクセス可能なコンピュータ等の端末において、操作により行われるデータ処理方法であって、
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入する処理と、
前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う処理と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイル、および前記時系列データファイルを表示させる表示エリアと、表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアとを含む表示エリアデータファイルを、指定された格納場所に記憶する処理と、
前記の処理により作成された音声データ、時間軸に従い表示される時系列データファイル、および表示エリアと再生制御エリアとを含む表示エリアデータファイルを、サーバーの所定場所に格納する処理と、を少なくとも経ることを特徴とする、配信音声データの作成方法。
A data processing method performed by an operation on a terminal such as a computer having input means, control means, display means, output means, storage means, etc., and capable of accessing a server connected to communication means represented by the Internet. And
A process of encoding the created or edited audio data into a data format that can be distributed on the web;
Processing for inserting a script command specifying a time-series data file displayed according to the time axis into the audio data in association with a predetermined time axis range on the time line of the audio data;
Processing for inserting the script command as needed for each displayed time-series data file; and
A time-series data file displayed according to the time axis specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data, and a display area for displaying the time-series data file, Storing a display area data file including a playback control area including a description for displaying the time-series data file in the display area in a designated storage location;
At least a process of storing the audio data created by the above process, a time-series data file displayed according to the time axis, and a display area data file including a display area and a playback control area in a predetermined location of the server. A method for creating distribution audio data, characterized in that:
請求項1または2に記載の発明において、
時間軸に従い表示される時系列データファイルは、HTMLなどのハイパーテキストデータ、テキストデータ、画像データ、動画像データ、アニメーションデータ、のいずれかを少なくとも含むことを特徴とする、配信音声データの作成方法。
In the invention according to claim 1 or 2,
A method for creating distribution audio data, characterized in that the time-series data file displayed according to the time axis includes at least one of hypertext data such as HTML, text data, image data, moving image data, and animation data. .
請求項1〜3に記載の発明において、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルは、HTMLなどのハイパーテキストデータであって、スクリプトコマンドを含む音声データを指定する記述、および表示エリアにデータファイルを表示させる記述を含む再生制御エリアと、
時系列データファイルが表示される表示エリアと、を少なくとも含み構成されることを特徴とする、配信音声データの作成方法。
In the invention according to claims 1 to 3,
A display area data file including a display area for displaying the time-series data file and a reproduction control area is hypertext data such as HTML, a description for specifying audio data including a script command, and a data file for the display area. A playback control area including a description for displaying
And a display area for displaying a time-series data file.
請求項1〜4に記載の発明において、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドは、音声データのタイムライン上の時間と、スクリプトコマンドの種類と、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータとを含むことを特徴とする、配信音声データの作成方法。
In the invention according to claims 1 to 4,
The script command inserted in association with the predetermined time axis range on the timeline of the audio data is passed to the display area data file from the time on the timeline of the audio data, the type of the script command, and the script command. A parameter for identifying a time-series data file to be displayed in a display area.
入力手段、制御手段、表示手段、出力手段、記憶手段等を備えるコンピュータ等の端末において操作により行われるデータ処理システムであって、
作成または編集された音声データ素材を記憶する音声データ素材記憶手段と、
作成または編集された音声データを、WEB上で配信可能なデータ形式にエンコードする音声データエンコード手段と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、音声データに挿入し、前記のスクリプトコマンドの挿入処理を、表示される時系列データファイルごとに必要に応じ行う、スクリプトコマンド作成挿入手段と、
スクリプトコマンドが挿入された音声データを記憶する音声データ記憶手段と、音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段と、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段と、
を少なくとも備えることを特徴とする、配信音声データの作成システム。
Input means, control means, display means, output means, a data processing system performed by operation in a terminal such as a computer having a storage means and the like,
Audio data material storage means for storing the created or edited audio data material;
Audio data encoding means for encoding the created or edited audio data into a data format that can be distributed on the web;
A script command for specifying a time-series data file to be displayed according to the time axis is inserted into the audio data in association with a predetermined time axis range on the time line of the audio data, and the script command insertion processing is displayed. Script command creation and insertion means for performing as necessary for each time-series data file to be executed,
When audio data is stored according to a time axis specified by a script command inserted in association with a predetermined time axis range on the time line of the audio data, and audio data storage means for storing the audio data in which the script command is inserted. Time-series data file storage means for storing a series data file;
Display area data file storage means for storing a display area data file including a display area for displaying the time-series data file and a reproduction control area,
A system for creating distribution audio data, comprising at least:
インターネットに代表される通信手段に接続されて備えられたサーバーシステムであって、
WEB上で配信可能なデータ形式にエンコードされた音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、表示される時系列データファイルごとに必要に応じ挿入した音声データを記憶する、音声データ記憶手段と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段と、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段と、
サーバーシステムにアクセスし、音声データの配信要求を行ったユーザー端末に対し、配信要求に従い、表示エリアデータファイルと、ユーザーがユーザー端末からの選択・指定により配信要求した音声データファイルとを配信するデータ配信手段と、
配信され再生される音声データに挿入された、スクリプトコマンドを解釈し、タイムライン上における所定の時間軸の範囲に関連付けられた時系列データファイルを抽出するスクリプトコマンド解釈手段と、
抽出された時系列データファイルをユーザー端末に送信し、所定の表示エリアに表示させるデータファイル表示制御手段と、
を少なくとも備えることを特徴とする、音声データの配信システム。
A server system provided by being connected to communication means represented by the Internet,
When a script command for specifying a time-series data file to be displayed according to the time axis is displayed in association with a predetermined time axis range on the time line of the audio data encoded in a data format that can be distributed on the WEB. Voice data storage means for storing voice data inserted as needed for each sequence data file;
Time-series data file storage means for storing a time-series data file displayed according to the time axis, specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data,
Display area data file storage means for storing a display area data file including a display area for displaying the time-series data file and a reproduction control area,
Data for distributing the display area data file and the audio data file requested by the user to select and specify from the user terminal according to the distribution request to the user terminal that has accessed the server system and has requested the audio data distribution. Distribution means,
Script command interpreting means for interpreting the script command inserted in the audio data to be distributed and played, and extracting a time-series data file associated with a predetermined time axis range on the timeline,
Data file display control means for transmitting the extracted time-series data file to the user terminal and displaying the extracted time-series data file in a predetermined display area;
A distribution system for audio data, comprising at least:
請求項7に記載の発明において、
時間軸に従い表示される時系列データファイルは、HTMLなどのハイパーテキストデータ、テキストデータ、画像データ、動画像データ、アニメーションデータ、のいずれかを少なくとも含むことを特徴とする、音声データの配信システム。
In the invention according to claim 7,
A time-series data file displayed according to a time axis includes at least one of hypertext data such as HTML, text data, image data, moving image data, and animation data, and is a sound data distribution system.
請求項7または8に記載の発明において、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルは、HTMLなどのハイパーテキストデータであって、スクリプトコマンドを含む音声データを指定する記述、および表示エリアに時系列データファイルを表示させる記述を含む再生制御エリアと、
時系列データファイルが表示される表示エリアと、を少なくとも含み構成されることを特徴とする、音声データの配信システム。
In the invention according to claim 7 or 8,
A display area data file including a display area for displaying the time-series data file and a reproduction control area is hypertext data such as HTML, and a description for specifying audio data including a script command, and a time-series A playback control area including a description for displaying the data file;
And a display area in which a time-series data file is displayed.
請求項7〜9に記載の発明において、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される広告等データファイルを記憶する広告等データファイル記憶手段が備えられ、
時間軸に従い表示される時系列データファイルの少なくともいずれかが、配信音声データのスポンサーが提供する広告等データファイルであるように、前記のスクリプトコマンドにおいて指定されたことを特徴とする、音声データの配信システム。
In the invention according to claims 7 to 9,
Advertisement data file storage means for storing an advertisement data file displayed according to the time axis specified by a script command inserted in association with a predetermined time axis range on the timeline of the audio data,
At least one of the time-series data files displayed according to the time axis is specified in the script command so that it is a data file such as an advertisement provided by the sponsor of the distributed audio data, Delivery system.
請求項7〜10に記載の発明において、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドは、音声データのタイムライン上の時間と、スクリプトコマンドの種類と、スクリプトコマンドから表示エリアデータファイルに渡されて表示エリアに表示させる時系列データファイルを識別するパラメータとを含むことを特徴とする、音声データの配信システム。
In the invention according to claims 7 to 10,
The script command inserted in association with the predetermined time axis range on the timeline of the audio data is passed to the display area data file from the time on the timeline of the audio data, the type of the script command, and the script command. A parameter for identifying a time-series data file to be displayed in a display area.
請求項7〜11に記載の発明において、
前記の時系列データファイル、または表示エリアデータファイルには、他のデータファイルへのハイパーリンク情報が記述されていることを特徴とする、音声データの配信システム。
In the invention according to claims 7 to 11,
A sound data distribution system, wherein hyperlink information to another data file is described in the time-series data file or the display area data file.
請求項7〜12に記載の発明において、
前記の時系列データファイル、または表示エリアデータファイルには、再生、停止、一時停止、スキップ、等の再生制御コマンド情報が記述されたことを特徴とする、音声データの配信システム。
In the invention according to claims 7 to 12,
An audio data distribution system, wherein reproduction control command information such as reproduction, stop, pause, skip, etc., is described in the time-series data file or the display area data file.
請求項13に記載の発明において、
前記の再生制御コマンドにより制御される時系列データファイルは、動画像データなどの時間軸に従い再生される時系列データファイルであって、
音声データのタイムラインと、再生され表示される時系列データファイルのタイムラインとを同期させるための時間計測・制御手段が備えられたことを特徴とする、音声データの配信システム。
In the invention according to claim 13,
The time-series data file controlled by the reproduction control command is a time-series data file reproduced according to a time axis such as moving image data,
An audio data distribution system, comprising: a time measurement / control unit for synchronizing a time line of audio data with a time line of a time-series data file to be reproduced and displayed.
インターネットに代表される通信手段に接続されて備えられ、
WEB上で配信可能なデータ形式にエンコードされた音声データのタイムライン上における所定の時間軸の範囲に関連付けて、時間軸に従い表示される時系列データファイルを指定するスクリプトコマンドを、表示される時系列データファイルごとに必要に応じ挿入した音声データを記憶する、音声データ記憶手段と、
音声データのタイムライン上における所定の時間軸の範囲に関連付けて挿入されたスクリプトコマンドにより指定された、時間軸に従い表示される時系列データファイルを記憶する時系列データファイル記憶手段と、
前記時系列データファイルを表示させる表示エリアと再生制御エリアとを含む表示エリアデータファイルを記憶する表示エリアデータファイル記憶手段と、
を少なくとも備えるサーバーシステムを用いて、
サーバーシステムにアクセスし、音声データの配信要求を行ったユーザー端末に対し、配信要求に従い、表示エリアデータファイルと、ユーザーがユーザー端末からの選択・指定により配信要求した音声データファイルとを配信する処理と、配信され再生される音声データに挿入された、スクリプトコマンドを解釈し、タイムライン上における所定の時間軸の範囲に関連付けられた時系列データファイルを抽出する処理と、
抽出された時系列データファイルをユーザー端末に送信し、所定の表示エリアに表示させる処理と、
を少なくとも経ることを特徴とする、音声データの配信方法。
Provided by being connected to communication means represented by the Internet,
When a script command for specifying a time-series data file to be displayed according to the time axis is displayed in association with a predetermined time axis range on the time line of the audio data encoded in a data format that can be distributed on the WEB. Voice data storage means for storing voice data inserted as needed for each sequence data file;
Time-series data file storage means for storing a time-series data file displayed according to the time axis, specified by a script command inserted in association with a predetermined time-axis range on the timeline of the audio data,
Display area data file storage means for storing a display area data file including a display area for displaying the time-series data file and a reproduction control area,
Using a server system having at least
Processing for distributing the display area data file and the audio data file requested by the user to select and specify from the user terminal according to the distribution request to the user terminal that has accessed the server system and has requested the audio data distribution And interpreting the script command inserted in the audio data to be distributed and played, and extracting a time-series data file associated with a predetermined time axis range on the timeline;
A process of transmitting the extracted time-series data file to the user terminal and displaying the extracted time-series data file in a predetermined display area;
, At least.
JP2002203323A 2002-07-11 2002-07-11 Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data Pending JP2004045776A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002203323A JP2004045776A (en) 2002-07-11 2002-07-11 Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002203323A JP2004045776A (en) 2002-07-11 2002-07-11 Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data

Publications (1)

Publication Number Publication Date
JP2004045776A true JP2004045776A (en) 2004-02-12

Family

ID=31709213

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002203323A Pending JP2004045776A (en) 2002-07-11 2002-07-11 Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data

Country Status (1)

Country Link
JP (1) JP2004045776A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010128284A (en) * 2008-11-28 2010-06-10 Kazuo Kishida Learning system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010128284A (en) * 2008-11-28 2010-06-10 Kazuo Kishida Learning system

Similar Documents

Publication Publication Date Title
US20140052770A1 (en) System and method for managing media content using a dynamic playlist
US9235576B2 (en) Methods and systems for selection of multimedia presentations
US9338506B2 (en) Inserting ad elements
US9794617B2 (en) Inserting ad elements
US8392834B2 (en) Systems and methods of authoring a multimedia file
CN102483742B (en) For managing the system and method for internet media content
US20110191684A1 (en) Method of Internet Video Access and Management
US20050154679A1 (en) System for inserting interactive media within a presentation
US20030115598A1 (en) System and method for interactively producing a web-based multimedia presentation
US20090327100A1 (en) Method of Internet Video Access and Management
KR100803580B1 (en) Electronic music distribution service system and method using synchronous multimedia integration language format
JP2004287595A (en) Device and method for converting composite media contents and its program
JP2009239479A (en) Information display apparatus, information display method, and program
JP2008293219A (en) Content management system, information processor in content management system, link information generation system in information processor, link information generation program in information processor, and recording medium with link information generation program recorded thereon
JP4796377B2 (en) Content providing server and content providing program
TW425520B (en) System and method for programmatic generation of continuous media presentations
JP5150350B2 (en) Program management system, program management server, program viewing terminal, program management program, and program viewing program
KR100908144B1 (en) Multimedia editing / playback system and its operation method
JP2008072396A (en) Information presentation system, server equipment, terminal device, information presenting method, etc.
KR20030038933A (en) Method for reproducing some multimedia files being associated with time and space and apparatus thereof
JP2008048091A (en) Motion picture tagging program, motion picture tag system, and motion picture distributing method
KR100886149B1 (en) Method for forming moving image by inserting image into original image and recording media
JP2004072530A (en) Electronic equipment and program generation method
JP2004045776A (en) Method for preparing distribution audio data, system for preparing distribution audio data, audio data distribution system, and method for distributing audio data
JP5324108B2 (en) Computer system, moving image editing method, program, moving image editing terminal