JP5816085B2 - サウンドトラックを作成してプレイする方法及びシステム - Google Patents

サウンドトラックを作成してプレイする方法及びシステム Download PDF

Info

Publication number
JP5816085B2
JP5816085B2 JP2011516195A JP2011516195A JP5816085B2 JP 5816085 B2 JP5816085 B2 JP 5816085B2 JP 2011516195 A JP2011516195 A JP 2011516195A JP 2011516195 A JP2011516195 A JP 2011516195A JP 5816085 B2 JP5816085 B2 JP 5816085B2
Authority
JP
Japan
Prior art keywords
soundtrack
audio
sound
playback
reading speed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011516195A
Other languages
English (en)
Other versions
JP2011527022A (ja
JP2011527022A5 (ja
Inventor
ポール チャールズ キャメロン
ポール チャールズ キャメロン
マーク スティーブン キャメロン
マーク スティーブン キャメロン
Original Assignee
ブックトラック ホールディングス リミテッド
ブックトラック ホールディングス リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ブックトラック ホールディングス リミテッド, ブックトラック ホールディングス リミテッド filed Critical ブックトラック ホールディングス リミテッド
Publication of JP2011527022A publication Critical patent/JP2011527022A/ja
Publication of JP2011527022A5 publication Critical patent/JP2011527022A5/ja
Application granted granted Critical
Publication of JP5816085B2 publication Critical patent/JP5816085B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00Systems controlled by a computer
    • G05B15/02Systems controlled by a computer electric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results
    • G06F16/4387Presentation of query results by the use of playlists
    • G06F16/4393Multimedia presentations, e.g. slide shows, multimedia albums
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/638Presentation of query results
    • G06F16/639Presentation of query results using playlists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/951Indexing; Web crawling techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/36Monitoring, i.e. supervising the progress of recording or reproducing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/04Electrically-operated educational appliances with audible presentation of the material to be studied

Description

本発明は、サウンドトラックを作成してプレイする方法及びシステムに関する。特に、サウンドトラックは、テキストソース、例えば、本(書籍)、電子ブック、雑誌、携帯電話テキスト、レポート、コミックブック、フィルムスクリプト等のためのものであるが、これらに限られるわけではない。
本及びテキストの他のブロックは、通常、黙読されるが、テキストの難解さ及び読者の通常の読み速度に応じて種々の読み速度で読まれる。
発行者の中には、あらかじめ記録されたオーディオカセット、コンパクトディスク又はその本の完全な又は要約したナレーションを提供するインターネットダウンロードの形態でオーディオブックを提供しているものがある。これらオーディオブックは、読書の代替手段であり、これらは、オーディオブックを聴くことにより目の見えない人により用いられ或いは読むよりも聴くほうが好みの人によって用いられる。
本又は他のソーステキストのサウンドトラックは、これらが示唆されたバックグラウンドミュージックを提供するが、ページ上のテキストには同期されず、したがって読みの経験にほとんど追加されるものがないので、成功裏には終わっていない。
特許文献、他の外国特許文献又は他の情報源を参照する本明細書においては、これは、一般に、本発明の特徴を説明する技術背景を提供する目的のためである。別段の指定がなければ、このような外国特許文献を参照することは、このような文献又は他の情報源が管轄区域内において、先行技術であり又は通常の知識の一部をなすという承認として解されるべきではない。
本発明の目的は、テキストソースのためのサウンドトラックを作成すると共に/或いはプレイする方法及び/又はテキストソースのための改良型サウンドトラックを提供し、或いは、少なくとも公衆に有益な選択肢を提供することにある。
第1の態様では、本発明の要旨は、広義には、テキストソースを読みながらユーザがプレイすべき複合可変持続時間型サウンドトラックであって、サウンドトラック持続時間がサウンドトラック時系列により定められ、サウンドトラックは、サウンドトラック時系列にわたり同時にプレイするよう構成された多数のサウンド層を有し、各サウンド層は、サウンドトラック時系列中のプリセット開始時刻でプレイするよう構成された1つ又は2つ以上の音声特徴から成る配列体を有し、少なくとも1つのサウンド層は、その音声特徴のプリセット開始時刻を変更して読み速度入力に基づいてユーザの読み速度にマッチさせるようになっていることを特徴とする複合可変持続時間型サウンドトラックにある。
好ましくは、各音声特徴は、この音声特徴がサウンドトラック時系列中でプレイするのを停止する時期を定めるプリセット停止時刻を更に有し、少なくとも1つのサウンド層は、その音声特徴のプリセット開始及び停止時刻を変更して読み速度入力に基づいてユーザの読み速度にマッチさせるようになっている。
好ましくは、少なくとも1つのサウンド層は、その音声特徴のプリセット開始及び停止時刻を変更して元の音声特徴のサウンド品質、ピッチ又はテンポが変更されないように読み速度入力に基づいてユーザの読み速度にマッチさせるようになっている。
好ましくは、サウンドトラック時系列は、テキストソースの一連のテキストチャンクに対応した一連のタイムスロットセグメントに分割され、各タイムスロットセグメントは、タイムスロットセグメント期間を有し、サウンド層の音声特徴は、所定のタイムスロットセグメントで開始するよう構成されている。
好ましくは、サウンド層は、音声特徴のプリセット開始時刻が読み速度入力とは独立した固定読み速度サウンド層と、音声特徴のプリセット開始及び停止時刻が読み速度入力に依存して音声特徴のプリセット開始及び停止時刻をユーザの読み時間にマッチさせることができるようにする可変読み速度サウンド層との混合体を有する。
好ましくは、可変読み速度サウンド層は、タイムスロットセグメント期間の百分率として定められているプリセット開始及び停止時刻を備えた音声特徴を有し、タイムスロットセグメント期間は、音声特徴の開始及び停止時刻を変更してこれらをユーザの読み速度にマッチさせることができるよう読み速度入力に基づいている。
好ましくは、各音声特徴は、音声特徴のプレイバックと関連した1つ又は2つ以上のプレイバック効果を定める関連の音声プロパティを有する。より好ましくは、プレイバック効果は、以下のもの、即ち、フェードイン/フェードアウト効果、ルーピング効果、移行効果の任意の1つ又は2つ以上を含む。
好ましくは、各音声特徴の音声プロパティは、ユーザがサウンドトラック時系列中の1つのタイムスロットセグメントから別のタイムスロットセグメントへの移行を開始したときに音声特徴がプレイしている場合、音声特徴と関連した移行効果を定める設定値を含み、移行効果は、音声特徴の残りの部分のプレイバックを定める。
好ましくは、各音声特徴の音声プロパティは、サウンドトラック時系列中のタイムスロットセグメントの終わりの間に音声特徴がプレイしている場合、音声特徴と関連した移行効果を定める設定値を含み、移行効果は、音声特徴の残りの部分のプレイバックを定める。
好ましくは、移行効果は、次のもの、即ち、プレイの続行、プレイの停止、フェードアウト又はループの任意の1つを含む。より好ましくは、移行効果は、読みプロセスが妨害されないようにタイムスロットセグメント移行相互間のギャップレスサウンドトラックプレイバックを生じさせるよう構成されている。
好ましくは、各テキストチャンクは、サウンドトラック時系列中の各タイムスロットセグメントがテキストソース中のテキストのページに対応するようテキストソース中のテキストのページに対応している。
好ましくは、サウンドトラックプレイバックは、移行入力に応答して一連のテキストチャンク中の1つのタイムスロットセグメントから次のタイムスロットセグメントの開始に移行するよう構成されている。一形態では、移行入力は、ユーザにより動作可能な遠隔装置によって生じる。別の形態では、移行入力は、サウンドトラックがプレイされるオーディオプレーヤのユーザによる作動によって生じる。
第2の態様では、本発明の要旨は、広義には、テキストソースを読みながらユーザがプレイすべき複合サウンドトラックを作成する方法であって、サウンドトラックの長さは、サウンドトラック時系列によって定められ、この方法は、(a)サウンドトラック時系列中に同時にプレイするよう配置された多数のサウンド層を作るステップを有し、(b)1つ又は2つ以上の音声特徴の配列体を各サウンド層中に挿入してサウンドトラック時系列中のプリセット開示時間でプレイするようにするステップを有し、少なくとも1つのサウンド層の音声特徴のプリセット開始時刻は、これらが読み速度入力に基づくユーザの読み速度に応じるよう構成されるように可変であり、(c)サウンド層及び音声特徴を、読み速度入力に基づくユーザの読み速度にマッチするよう適合可能なサウンドトラック中にコンパイルするステップを有することを特徴とする方法にある。
好ましくは、この方法は、サウンドトラック時系列をテキストソースの一連のテキストチャンクに対応した一連のタイムスロットセグメントに分割するステップを更に有し、各タイムスロットセグメントは、タイムスロットセグメント期間を有し、ステップ(b)は、各音声特徴をコンフィグレーションして所定のタイムスロットセグメントで開始するようにするステップを含む。
好ましくは、ステップ(a)は、音声特徴のプリセット開始時刻が読み速度入力とは独立した固定読み速度サウンド層と、音声特徴のプリセット開始及び停止時刻が読み速度入力に依存して音声特徴のプリセット開始及び停止時刻をユーザの読み時間にマッチさせることができるようにする可変読み速度サウンド層との混合体を作るステップを含む。
好ましくは、ステップ(b)は、タイムスロットセグメント期間の百分率として定められているプリセット開始及び停止時刻を定めるステップを含み、タイムスロットセグメント期間は、音声特徴の開始及び停止時刻をユーザの読み速度にマッチさせることができるよう読み速度入力に基づいている。
好ましくは、この方法は、サウンドトラックをコンパイルした後、サウンド層の1つ又は2つ以上の音声特徴を変更するステップを更に有する。好ましくは、サウンド層の1つ又は2つ以上の音声特徴を変更するステップは、ユーザが新たな音声特徴を挿入すると共に/或いはサウンドトラック時系列中の音声特徴を置換することができるようにするステップを含む。より好ましくは、新たな音声特徴は、ユーザ自身のミュージックライブラリからの歌又はミュージックを含む。
第3の態様では、本発明の要旨は、広義には、テキストソースのためのサウンドトラックを作成する方法であって、サウンドトラックは、多数のサウンド層を有し、各サウンド層は、1つ又は2つ以上の音声特徴を有し、この方法は、テキストソースのためのサウンドトラックの所要のサウンド層を記録するステップと、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、サウンドトラック及び音声特徴移行を制御するソフトウェアファイルを作成するステップと、テキストソースの読者に利用可能なサウンドトラック及びソフトウェアファイルを作成するステップとを有し、サウンド層の少なくとも1つの音声特徴の開始及び停止時刻位置を顧客の読み速度にマッチするよう変化させることができることを特徴とする方法にある。
第4の態様では、本発明の要旨は、広義には、特に本、電子ブック又は他のテキストソースのための可変持続時間型複合サウンドトラックを作成する方法であって、サウンドトラックは、サウンド層中にコンパイルされる多数の音声特徴を有し、この方法は、テキストソースのためのサウンドトラックの所要のサウンド層を記録するステップと、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、サウンドトラック及び音声特徴移行を制御するソフトウェアファイルを作成するステップと、テキストソースの読者に利用可能なサウンドトラック及びソフトウェアファイルを作成するステップとを有し、サウンドトラック中の各音声特徴の開始及び停止時刻を変更することにより読者の読み速度にマッチするようサウンド層の少なくとも1つのプレイバックを変化させることができることを特徴とする方法にある。
第5の態様では、本発明の要旨は、広義には、特に本、電子ブック又は他のテキストソースのための可変持続時間型複合サウンドトラックを提供する方法であって、サウンドトラックは、チャンクに分割される多数のサウンド層を有し、各チャンクは、1つ又は2つ以上の個々の音声特徴を有すると共にテキストソース中のテキストの長さに対応しており、この方法は、少なくとも1つのサウンド層が、サウンドトラック中の位置が代表的な読者の読み速度にマッチするよう変化可能である音声特徴を有するようテキストソースのためのサウンドトラックの所要の層を記録するステップと、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、ソフトウェアファイルを音声特徴のチャンク相互間のサウンドトラック移行を制御するソフトウェアファイルを作成するステップと、サウンドトラック及びソフトウェアファイルを読者に利用可能にするステップとを有することを特徴とする方法にある。
第6の態様では、本発明の要旨は、広義には、本又は他のテキストソースのためのサウンドトラックを販売する方法であって、サウンドトラックは、多数のサウンド層を有し、各サウンド層は、1つ又は2つ以上の音声特徴を有し、サウンド層の少なくとも1つのプレイバックは、サウンド層中の各音声特徴の開始及び停止時刻を変更し、顧客の読み速度を測定し、顧客の読み速度に実質的にマッチしたサウンドトラックのバージョンを配信することにより顧客の読み速度にマッチさせることができるよう可変であることを特徴とする方法にある。
好ましくは、可変サウンド層は、テキスト中に記載されたイベントを読んでいるときにこれらイベントと一致するようタイミングが取られた音声特徴を有し、音声特徴のタイミングは、顧客の測定読み速度に一致する。
第7の態様では、本発明の要旨は、広義には、本、電子ブック、携帯電話テキストメッセージ又は他のテキストソースのためのサウンドトラックであって、サウンドトラックは、テキストソース中に記載されたイベントと一致するようタイミングが取られたサウンド効果を含む少なくとも1つの層を含む多数のサウンド層を有し、タイミングは、読者の予想読み速度に関連しており、サウンドトラックは、バックグラウンド又はシーンミュージックを含む少なくとも1つの他のサウンド層を更に有することを特徴とするサウンドトラックにある。
第8の態様では、本発明の要旨は、広義には、テキストソースのための可変持続時間型サウンドトラックを作成する方法であって、サウンドトラックは、多数のサウンド層を有し、サウンド層の少なくとも1つのプレイバックは、サウンドトラックを構成するオーディオファイル及び音声特徴の開始及び停止時刻を調節することによって読者の読み速度に調節可能であり、この方法は、サウンド層の少なくとも1つのプレイバックを調節可能にすることができるようにするテキストソースのためのサウンドトラックの所要層を記録するステップと、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、サウンドトラック移行を制御するためのソフトウェアファイルを作成するステップと、サウンドトラック及びソフトウェアファイルを読者に利用可能にするステップとを有することを特徴とする方法にある。
別の態様は、本発明の要旨は、広義には、特に本、電子ブック、携帯電話テキストメッセージ又は他のテキストソースのためのサウンドトラックを作成する方法であって、前記サウンドトラックは、多数のサウンド層を有し、各サウンド層は、1つ又は2つ以上の音声特徴を有し、この方法は、テキストソースのためのサウンドトラックの所要の層を記録するすると共にミキシングするステップと、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、音声特徴移行を制御するソフトウェアファイルを作成するステップと、サウンドトラック及びソフトウェアファイルを読者に利用できるようにするステップとを有し、サウンド層の少なくとも1つの音声特徴の開始時刻位置を読者の読み速度にマッチするよう変化させることができることを特徴とする方法にある。
別の態様では、本発明の要旨は、広義には、特に本又は電子ブックのためのサウンドトラックを提供する方法であって、サウンドトラックがチャンクに分割された多数のサウンド層を有し、各チャンクは、多数の個々の音声特徴を有し、各チャンクは、テキストの長さ(典型的には、長さがページ)に対応し、この方法は、本のためのサウンドトラックの所要の層を記憶すると共にミキシングするステップを有し、各チャンクの長さは、各チャンク中の音声特徴の開始時刻を変更することにより代表的な読者の読み速度にマッチするよう変化可能であり、この方法は、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、サウンドトラックチャンク移行を制御するためのソフトウェアファイルを作成するステップと、サウンドトラック及びソフトウェアファイルを読者に利用できるようにするステップとを有することを特徴とする方法にある。
好ましくは、多数の個々の音声特徴は、互いに同時にランするが、個々の可変速度、持続時間及び移行プロパティを保持する。
好ましくは、サウンド層の1つ又は2つ以上は、サウンド効果、ミュージック及びシーン関連サウンドを表す音声特徴を含み、各このような音声特徴は、チャンク中の各有意のサウンド効果又はシーン変化相互間の測定比に基づく開始位置を有し、したがって、サウンド効果及びシーン変化を代表的な読者の読み速度にマッチするよう開始させたり停止させたりすることができるようになっている。
好ましくは、読者は、オーディオプレーヤ又は電子ブック上で自分の読み速度を選択することができ、各チャンク中のサウンド効果及びシーン関連音声特徴の開始位置は、読み速度の変化にマッチするよう設定された比によって調節可能である。
好ましくは、サウンド層は、少なくとも1つの可変持続時間型サウンド層を有し、このような層の音声特徴のプリセット開始及び停止時刻は、読者の読み速度を表す読み速度入力に依存しており、したがって、このようなサウンド層中の音声特徴のプレイバックタイミングをユーザの読み速度にマッチさせることができるようになっている。より好ましくは、各音声特徴は、サウンドトラックのチャンク相互間のギャップレス移行を生じさせるよう音声特徴相互間の移行を制御する関連のプロパティを有する。例えば、これらプロパティは、フェードイン/フェードアウト又はサウンドトラックの一チャンクから次のチャンクへの移行時にプレイする音声特徴相互間の突然の停止/開始移行を含むのが良い。各音声特徴の移行プロパティは、ページ又はテキストチャンクの終わりに達した場合又は選択した場合、例えばフェードアウトし又はこれが続行する場合、どのオーディオファイルがプレイされているかに関する規則を含むのが良い。
好ましくは、サウンドトラックは、読者が、どの歌(以下、「ソング」という場合がある)が置換されるべきかを選択することにより或いは選択基準、例えば歌の人気若しくはジャンル又はミュージック特性、例えばビート、テンポ又はピッチに基づいて歌に自動的に取って代わるサウンドトラックソフトウェアを選択するかによって幾つかの層の幾つかの音声特徴を読者の既存のミュージックライブラリからの歌を含むオーディオ特徴で置き換えることができるにするよう構成されるのが良い。好ましくは、読者がサウンドトラックを自分のミュージックライブラリからの自分自身のミュージックで再構成しようと決めた場合、これにより、新たなサウンドトラックが作られ、ユーザは、異なるミュージックテイスト又はランゲージに応える別のサウンドトラックとしてアップロードして再販売するオプションを得ることになる。
好ましくは、購入時において、読者の平均読み速度が定められ、読者は、自分の平均読み速度にほぼマッチした自分の選択された本のためのサウンドトラックのバージョンを手に入れる。
好ましくは、外部リモートコントローラオーディオプレーヤ又は電子ブックを用いると、テキストソースのページからページへのサウンドトラックの移行を制御することができる。
好ましくは、オーディオプレーヤ、リモートコントローラ又は電子ブックをページをめくったときにトリガすることができ、それにより、開始するのに先に設定された読み速度によってあらかじめ定められている速度及びタイミングでそのページに関連している種々の音声特徴のきっかけが与えられる。
別の態様では、本発明の要旨は、広義には、本、電子ブック又は他のテキストソースのためのサウンドトラックを販売する方法であって、サウンドトラックが多数のサウンド層を有し、サウンド層の少なくとも1つのサウンドトラックオーディオファイルの開始及び停止時刻を顧客の読み速度にマッチさせることができ、この方法が顧客の読み取り時間を測定し、顧客の読み速度にほぼマッチしたサウンドトラックのバージョンを配信するステップとを有することを特徴とする方法にある。
好ましくは、「少なくとも1つのサウンド層」という表現は、本又は他のテキストソースに記載されたイベントと一致するようタイミングが取られたサウンド効果又は周囲のサウンドを含み、タイミングは、顧客の測定読み速度に関連している。
好ましくは、サウンドトラック又は少なくとも「少なくとも1つのサウンド層」という表現は、種々の予想読み取り時間にマッチする1つ又は2つ以上の変形例の状態で作られ、販売のために選択されたバージョンは、できるだけ近い状態で顧客の測定読み速度にマッチされる。
別の態様では、本発明の要旨は、広義には、本又は他のテキストソースのためのサウンドトラックであって、サウンドトラックが本又は他のテキストソース中に記載されたイベントと一致するようタイミングが取られたサウンド効果を含む少なくとも1つの層を備えた多数のサウンド層を有し、タイミングは、顧客の予想読み取り時間に関連しており、サウンドトラックは、バックグラウンドミュージックを含む少なくとも1つの他のサウンド層を更に有することを特徴とするサウンドトラックにある。
別の態様では、本発明の要旨は、広義には、本又は他のテキストソース及びこの本又は他のテキストソースのためのマッチするサウンドトラックであって、サウンドトラックが本又は他のテキストソース中に記載されたイベントと一致するようタイミングが取られたサウンド効果を含む少なくとも1つの層を備えた多数のサウンド層を有し、タイミングは、顧客の予想を読み速度に関連しており、サウンドトラックは、更に/或いは、バックグラウンドミュージックを含む少なくとも1つの他のサウンド層を有することを特徴とするサウンドトラックにある。
別の態様では、本発明の別の要旨は、広義には、特に本のためのサウンドトラックを作成する方法であって、サウンドトラックが、多数のサウンド層を有し、サウンド層の少なくとも1つのサウンドトラックオーディオファイルのプレイバック開始及び停止時刻が読者の読み速度に合わせて調節可能であり、この方法が、サウンド層の少なくとも1つのサウンドトラックを構成する個々のオーディオファイルの各々のプレイバック開始及び停止時刻が調節可能であるようにすることができる本のためのサウンドトラックの所要層を記録するステップと、サウンドトラックを選択されたオーディオフォーマットで作成するステップと、サウンドトラック移行を制御するためのソフトウェアファイルを作成するステップと、サウンドトラック及びソフトウェアファイルを読者に利用できるようにするステップとを有する方法にある。
好ましくは、サウンドトラックは、オーディオプレーヤ又は電子ブックによりプレイ可能であると共に遠隔装置、電子ブック又はオーディオプレーヤによって制御可能である。
好ましくは、オーディオプレーヤ又は電子ブックは、直接に又はワイヤレスで接続された遠隔装置及び/又はコンピュータとインターフェイス可能である。
好ましくは、遠隔装置は、サウンドトラックを本のページに同期させることができる。
好ましくは、選択されたオーディオフォーマットは、ディジタルオーディオフォーマット、例えばmp3、wma、aac及び他の公知のディジタルオーディオフォーマットである。
好ましくは、サウンドトラックは、多数のサウンドトラックファイルを含む。
好ましくは、サウンドトラックは、単一のサウンドトラックファイル及び関連のデータファイルを含む。
好ましくは、サウンドトラックは、オーディオプレーヤ又はコンピュータ上に存在するミュージックライブラリからの歌を含むのが良い。
好ましくは、歌は、ビート、テンポ又はピッチにより本のチャプタ又はページにマッチ可能である。
本明細書及び特許請求の範囲で用いられている「テキストソース」という用語は、別段の指定がなければ、読み物がハードコピー印刷形態であるにせよ電子コピーであるにせよいずれにせよ任意形態の読み物を意味し、このような電子コピーとしては、本、電子ブック、携帯電話テキストメッセージ、雑誌、レポート、コミックブック、フィルムスクリプト等が挙げられるが、これらには限られない。
本明細書及び特許請求の範囲で用いられている「テキストチャンク」という用語は、テキストソース中の既定長さのテキストを意味し、テキストソースは、実施形態において種々の仕方で定め得る所定長さの一連のテキストチャンクに分割され又はセグメント化され、このような種々の仕方としては、一例を挙げるに過ぎないが、テキストのページ、ページのグループ、チャプタ、携帯電話テキストのページ、既定数の単語又は特定のテキストソースに適したテキスト長さの任意他の尺度が挙げられる。
本明細書及び特許請求の範囲で用いられている「オーディオプレーヤ」という用語は、サウンドを生じさせるディジタルオーディオファイル又はサウンドトラックをプレイすることができる携帯可能又はそうではないあらゆる装置及びシステムを意味し、このような装置及びシステムとしては、例えば、パーソナルコンピュータ、PDA、MP3プレーヤ、携帯電話、i‐Podのような装置及び電子ブックシステム又は任意他のオーディオシステムが挙げられる。
本明細書及び特許請求の範囲で用いられている「音声特徴」という用語は、サウンドトラックのためのサウンドを構成するディジタルオーディオファイル又は記録から成るオーディオサウンドを含む。
原文明細書及び原文特許請求の範囲で用いられている、「〜を有する」、「〜を備えている」は、「少なくとも一部は〜から成る」を意味している。「〜を有する」、「〜を備えている」という用語を含む本明細書及び特許請求の範囲における各記載を解釈する場合、この用語の後に位置する特徴以外の特徴も又存在する場合がある。例えば「〜を有し」、「〜を備え」のような関連用語は、同様に解釈されるべきである。
原文明細書及び原文特許請求の範囲で用いられる「及び/又は」という用語は、「及び」または「又は」、「及び」および「又は」の両方を意味している。
原文明細書及び原文特許請求の範囲で用いられている名詞の後に続く“(s)”は、名詞の複数形及び/又は単数形を意味している。
本明細書の内容は、上記記載から成り、更に、以下に例示として与えられる構成例を含む。
次に、添付の図面を参照して本発明の好ましい実施形態を説明するが、これらは例示に過ぎない。
本発明の第1の好ましい実施形態に従ってサウンドトラックを形成するステップを示すフローチャートである。 本発明の第1の実施形態に従ってサウンドトラックが顧客にどのように配信されるかを示すフローチャートである。 本発明の第1の実施形態に従ってサウンドトラックをコンピュータからオーディオプレーヤにロードするハードウェアセットアップの略図である。 本発明の第1の実施形態に従って作成されたサウンドトラックをプレイするハードウェアセットアップの略図である。 本発明の第2の実施形態の複合サウンドトラックのサウンド層を示す図である。 複合サウンドトラックのサウンドトラック時系列及び関連のテキストソースの対応の読み取り時系列の表を示す図である。 低速読み速度と高速読み速度との間のサウンドトラック時系列の設計変更例を示す図である。 複合サウンドトラックファイルパッケージフォーマットを示すブロック図である。 本発明の第2の好ましい実施形態に従ってサウンドトラック作成システムのハードウェアシステム及びソフトウェアモジュールを示すブロック図である。 サウンドトラック作成システムソフトウェアのグラフィカルユーザインターフェイス(GUI)を表すスクリーンショットを示す図である。 サウンドトラック作成システムソフトウェアのファイルメニューを表すスクリーンショットを示す図である。 サウンドトラック作成システムソフトウェアのサウンドトラックプロパティインフォメーションボックスを表すスクリーンショットを示す図である。 サウンドトラック作成システムソフトウェアのサウンドトラックチャプタメニューを表すスクリーンショットを示す図である。 サウンドトラック作成システムソフトウェアのページメニューを表すスクリーンショットを示す図である。 サウンドトラック作成システムソフトウェアのオーディオプロパティメニューを表すスクリーンショットを示す図である。 図15のオーディオプロパティメニュー中の開始効果オプションを表すスクリーンショットを示す図である。 図15のオーディオプロパティメニュー中の停止効果オプションを表すスクリーンショットを示す図である。 図15のオーディオプロパティメニュー中のページスキップ効果オプションを表すスクリーンショットを示す図である。 本発明の第2の好ましい実施形態に従ってサウンドトラックプレイバックシステムのハードウェアシステム及びソフトウェアモジュールを示すブロック図である。 第2の好ましい実施形態に従ってサウンドトラックシステムの読み速度マッチング機能のフローチャートである。
本発明は、テキストソース、例えば本、電子ブック、携帯電話テキストブック又は任意他の形式の読み物のための複合サウンドトラック並びに複合サウンドトラックを作成してプレイする関連の方法及びシステムに関する。特に、ユーザがテキストソースを読んでいるときにサウンドトラックがユーザによってプレイされるのが良く、それにより読書の喜びが大きくなる。サウンドトラックは、特定のテキストソースに合わせてカスタマイズされているが、サウンドトラックをユーザの読み速度及びミュージックに対する嗜好にマッチするようカスタマイズできる。
図1〜図4を参照して、複合サウンドトラック、方法及びシステムの第1の好ましい実施形態及び変形例について説明する。その後に、複合サウンドトラック、方法及びシステムの第2の好ましい実施形態について図5〜図20を参照して説明する。第1の好ましい形態としての複合サウンドトラック、システム及び方法の観点及び特徴を第2の好ましい形態に採用して利用することができ、又その逆の関係が成り立つことが理解できる。
第1の好ましい実施形態
図1は、サウンドトラックを作成するために書籍出版社との契約を得た時点から始まってサウンドトラックを読者に利用できるようにする時点まで本の形態のテキストソースのコンテキスト中にサウンドトラックを作成する方法を示している。ステップの記載順序は、非限定的な例に過ぎず、これらステップは、任意の順番で実施できる。また、幾つかのステップを作成したサウンドトラックの用い方及び具体化に応じて省くことができることは注目されるべきである。以下の段落は、各ステップ及び各ステップに役立つ種々のオプションを説明している。
図1のステップ1に示されているように、本のためのサウンドトラックを作成する前に、書籍出版社にサウンドトラックを書籍(本)と共にプロモートするための契約に至ることができるようアプローチするのが良い。書籍出版社が単一のサウンドトラックが発行されるあらゆる書籍バージョンについて有効であることができるようにするために同一のテキストコンテンツ及び同一のページ番号付けで書籍の全てのバージョン(版)を発行するのに同意すれば有利である。
第1の好ましい実施形態では、サウンドトラックは、好ましくは、本の各ページについて別々のサウンドトラックファイルを有する状態で作成される。ただし、オプションとして、別々のサウンドトラックファイルが本の各チャプタ又はひとまとまりのページにマッチしても良い(ステップ2)。サウンドトラックは、好ましくは多くのサウンド層から成る複合サウンドトラックであり、各サウンド層は、1つ又は2つ以上の音声特徴、例えばサウンド効果(例えば、発砲の際の音、ドアがバタンと閉まる音、電話が鳴る音)、バックグラウンドミュージック(例えば、オーケストラミュージック、バンドソング)及び雰囲気ノイズ又は周りのノイズ(例えば、天候に関する音)を有する。サウンド層は、互いに異なる層からの多数の音声特徴が一緒に同時にプレイすることができるよう互いに同時にプレイする。音声特徴は、読者がテキストを読んでいるときに本の中で起こる出来事にマッチするようこれらそれぞれの層内に巧妙に配置される。次に、これら層を全て互いに結合して単一のサウンドトラックを形成する。音声特徴の正確な位置決め及びタイミングは、本のテキストへのサウンドトラックの適正なマッチングにとって重要である。好ましくは、プロフェッショナル用オーディオ機器、例えばミキシング及びダビング機器をこのステップについて利用するのが良い。
サウンドトラックをいったん調製すると、サウンドトラックは、様々な読者によって必要とされる1つ又は2つ以上の好ましいオーディオフォーマット、例えば、mp3、wma、aac及び他の公知のディジタルオーディオフォーマット(これらは例示に過ぎない)にコード化される(ステップ3)。第1の好ましい実施形態では、サウンドトラックのバリエーションは、多種多様な読み速度でランするよう作成される。単純化していえば、3通りの速度、即ち、読むのが遅い(低速)読者、読むのが中程度の(中速)読者及び読むのが速い(高速)読者(これらは例示に過ぎない)が本明細書において説明されている。しかしながら、実際には、顧客の予想読み速度に基づいて各サウンドトラックについて無限の数の変形例を作成できることは理解できる。
これを達成するため、サウンドトラック中のサウンド層の1つ又は2つ以上の中への音声特徴の配置場所を種々の読み速度の必要に応じて一ページ内で変化させても良い。第1の好ましい実施形態では、これら「可変読み速度層」の1つは、シーンの変化が起こる場合にサウンドトラックのサウンド効果層又は他の層である場合がある。したがって、遅い読み速度サウンドトラックのサウンド効果層中の音声特徴は、速い読み速度サウンドトラックの音声特徴よりも広がりが極めて大きい。しかしながら、種々の読み速度サウンドトラックの音声特徴相互間の時間の比は、互いに等しい。この方法により、サウンド効果は、読者が本のページ上の適当なテキストを読んでいるときにプレイするよう正確にタイミングが取られる。サウンドトラックの他の層、例えば、ページの始まりからランする或る特定のバックグラウンドミュージック及びシーンノイズを含む層中の音声特徴の位置は、種々の読み速度について作成されたサウンドトラック中で同一であっても良く、これは、「一定読み速度層」と呼ばれる。第1の好ましい実施形態では、バックグラウンドミュージック及びシーンノイズ層は、一ページを読むのに要する時間が長いことを考慮に入れて速い読み速度サウンドトラックよりも遅い読み速度サウンドトラックの方が長い時間にわたってプレイするよう構成されている。
次のステップは、サウンド層のページ、チャプタ、セクション及び音声特徴相互間のサウンドトラックの移行を制御するソフトウェアファイルを作成することである(ステップ4)。このソフトウェアは、複合サウンドトラックのサウンド層の音声特徴相互間の移行を制御することができ、したがって、ページ相互間のギャップレス移行、フェードイン/フェードアウト又は音声特徴相互間の急な停止/開始移行が存在するようになる。ソフトウェアファイルは、本の関連テキストチャンク、例えばチャプタの持続時間全体を通じて連続サウンド出力を提供するよう構成されている。さらに、ソフトウェア回路は、読者がサウンドトラックの幾つかの層又は1つの層の特定の音声特徴を自分自身のミュージックライブラリからのサウンド層又は音声特徴で置き換えることができるよう構成されているのが良い。例えば、ソフトウェアファイルは、読者がサウンドトラックのバックミュージック層全体又はその層内の特定の音声特徴を読者の既存のミュージックライブラリからの歌で置き換えることができるよう構成されているのが良い。読者は、どの歌が置き換えられるべきであるかを選択することができ又はソフトウェアファイルは、選択基準、例えば歌の人気若しくはジャンル又はミュージック特性、例えばビート、テンポ又はピッチに基づいて歌に自動的に取って代わることができる。この機能により、読者は、サウンドトラック内に正に自分自身の個々の又はカスタマイズされたソング層を作成することができ、次に、このソング層をウェブサイトにアップロードして後述するように再販することができる。
次のステップでは、サウンドトラック及びソフトウェアファイルを顧客に配信する(ステップ5)。サウンドトラックは、インターネットを通じて直接的に若しくはワイヤレスで又は店舗から販売される。サウンドトラックがインターネットを通じて販売される場合、サウンドトラック及びソフトウェアファイルは、インターネットにより直接又はワイヤレスでダウンロードされるのが良く、店舗から販売される場合には、全てのサウンドトラックファイルは、記憶媒体に格納され又は店舗でダウンロードされることになる。
サウンドトラック及びソフトウェアファイルがいったん作成されて読者に販売されると(ステップ6)、サウンドトラック及びソフトウェアファイルは、図3に示されているように、コンピュータ10から直接又はワイヤレスでオーディオプレーヤ11にダウンロードされても良く、或いは、本又は電子ブックを読みながらコンピュータから直接聴き取っても良い。オーディオプレーヤ11は、読者にサウンドトラックから可聴音を提供することができる任意市販のオーディオプレーヤ11であって良い。好ましくは、オーディオプレーヤ11は、利用可能なディジタルオーディオフォーマット、例えば、mp3、wma又はaacをプレイすることができると共に例えばサウンド及びページ移行効果を含むサウンドトラックのプレイバックを制御するサウンドトラックのために作成されたソフトウェアファイルを実行することができる。オーディオプレーヤにロードされたソフトウェアファイルは、好ましくは、バックグラウンドミュージック層のためのサウンドトラックのデフォルトソングを用いるというオプションを読者に提供し又はバリエーションセクションの例5で後で説明するようにオーディオプレーヤのミュージックライブラリ中の既存の歌を用いる(ステップ7)。
図4は、オプションとしてオーディオプレーヤからプレイされたサウンドトラックファイルを制御するために使用可能なリモート又は遠隔装置13を示している(ステップ8)。遠隔装置13は、好ましくは、手持ち型装置であり、或いは、変形例として、これを例えばクリップ又はフックによって本12に取り付け可能である。第1の好ましい実施形態では、遠隔装置13は、読者が本12の次のページを読むことを決めたときに押すことができるボタンを有し、このボタンは、ソフトウェアファイルをトリガしてそのページに対応したサウンドトラックファイルを選択してプレイし又はそのページに関連したサウンドトラックの対応の部分にスキップする。変形例として、遠隔装置13は、ページをページめくりセンサによりめくった時点を自動的に検出することができる機能を有するのが良い。遠隔装置は、プレイ、ポーズ、次ページ、前ページボタン及び読まれているページ番号を表示するLCDディスプレイを更に有するのが良い。幾つかのソフトウェアデータファイルも又遠隔装置13上にロードしてサウンドトラックファイルの移行を制御し又はサウンドトラックを通じた移行を行なうのが良い。遠隔装置13は、オーディオプレーヤ11からの短い長さのサウンドをバッファすることができる内蔵型オーディオバッファメモリを更に有するのが良く、したがって、次のサウンドトラックファイルがプレイのために選択された場合、この次のサウンドトラックファイルは、サウンドトラックファイル相互間でクロスフェーディングを行なうことができるようになっている。遠隔装置は、先のサウンドトラックファイルを次のサウンドトラックファイルとシームレスでミックスし、フェードし又はマージすることができる。オーディオプレーヤ11は、このオプションが実行可能である場合、サウンドトラックファイルのクロスフェーディングを実行することが必要とされてはいない。
ステップ9では、オーディオプレーヤ11上にロードされたソフトウェアファイルは、本12のページ、チャプタ及び/又はセクション中のサウンドトラックの移行を含むサウンドトラックのサウンド層の音声特徴相互間の移行を用意し、その結果、本12を読んでいる間にサウンドトラックをプレイする場合に移行がシームレスで実行されるようになっている。理解されるように、サウンドは、遠隔装置13から一対のヘッドヘッドホン14又は別個の1組のスピーカを通して読者に伝達される。
図2は、サウンドトラックを読者に配信する際に実施されるプロセスの一例を示している。読者は、用いられる個々の販売方法に応じて、これらステップの全てを完了する必要はない。
図2のステップ1では、読者は、テキストソース、例えば本、電子ブック、オンラインテキスト、可聴ブック又は任意他のテキスト付きの刊行物を購入する。読者は、選択した本のためのサウンドトラックがその本に含まれている広告を探すことにより利用可能であるかどうかをインターネット又は他の広告媒体でチェックすることができる(ステップ2)。次に、読者は、ウェブサイト又はどこかほかの場所に掲載されている書面による又は聴くことができる指令に従うことにより自分の読み速度を評価することが迫られる(ステップ3)。これは、ウェブサイト上にタイミングが取られた段落を読むことによって実施されるのが良い。読者は、サウンドトラック及び自分の読み速度に対応した任意の関連のソフトウェアデータファイルをインターネットオンラインストア又は店舗からダウンロードすることができる(ステップ4)。読者は、必要なサウンドトラックファイルの全て及び関連のソフトウェアを自分のオーディオプレーヤにロードすることができる(ステップ5)。次に、サウンドトラックと関連したソフトウェアにより、読者は、オーディオプレーヤのミュージックライブラリに含まれている歌をサウンドトラックの歌の代用物として使用することができるようサウンドトラックを変更するオプションを得ることができる(ステップ6)。読者がミュージックライブラリに含まれている歌を用いる方が好みである場合、読者は、自分のミュージックライブラリのどの歌をサウンドトラックで用いるかを選択することができ又は最近のプレイリスト、聴いたうちで最も人気のある歌、歌のジャンル、歌のビート又はこれら要因の組み合わせに基づいて歌の選択項目を自動的に選択するソフトウェアファイルを有することができる。ステップ7において、読者は、オーディオプレーヤ11を遠隔装置13に接続するのが良く、この遠隔装置は、図3に示されているように本12に取り付けられる。サウンドトラック及びソフトウェアファイルがコンピュータ10からいったんオーディオプレーヤ上にロードされると、読者は、自分の読み速度を選択し、サウンドトラックをオーディオプレーヤでプレイし、読書を開始する。読者は、ページをいったん読むと、読者は、ページをめくって次のページに移る際にオーディオプレーヤ11又は遠隔装置13のボタンを押すことにより次のサウンドトラックファイルを選択することができる(ステップ8)。ステップ9では、ソフトウェアファイルは、各サウンドトラックファイルが本について読まれているテキストに応じてプレイされているときにサウンドトラックファイル相互間の移行を制御する。このような移行は、シームレスサウンドトラックを読者に提供し、ついには、読者は、本の最後のページを読み終えるようになる。読者がステップ6においてサウンドトラックのサウンドについて自分自身のサウンドを用いることを選択した場合、読者は、ステップ10で説明するように、サウンドトラックを自分自身の歌と共にウェブサイトにアップロードするオプションを得る。
サウンドトラックは、いったんアップロードされると、様々なミュージック嗜好又は言語を提供するよう本の元のサウンドトラックの代替物として再販できる。
第1の好ましい実施形態の変形例
以下の実施例は、上述の第1の好ましい実施形態としてのサウンドトラック、方法及びシステムの考えられる変形例に関する。
実施例1
この実施例では、サウンドトラックファイルは、上述したように本、例えば小説の各ページについて作成される。各ページサウンドトラックファイルは、ページのムードと環境にマッチするミュージック及びバックグラウンドのサウンドの層とページ上で起こっているときに本の中のイベントにマッチするサウンド効果の層の組み合わせである。様々な読み速度にマッチするよう作成された多数のバージョンが存在し、したがって、サウンド効果及びシーンサウンドは、読者がページを読んでいるときに本中で起こるイベントにマッチするようになる。
読者は、タイミングが取られた段落を読むことによって自分の読み速度をウェブサイト上で評価する。すると、ソフトウェアファイル及び所要の読み速度のためのサウンドトラックファイルを含むサウンドトラック一式をオンラインミュージック小売業ウェブサイトから購入してこれらをダウンロードすることができる。
本のためのダウンロードされたサウンドトラックファイル全ては、オーディオプレーヤ上にロードされる。読者は、読者が本に取り付け可能なオーディオプレーヤ又は遠隔装置上でページにマッチするトラックを選択することによって、各ページの読みを開始した場合にプレイされる各ページサウンドトラックファイルを選択する。
サウンドトラックと関連したソフトウェアファイルは、これらを選択したときにページサウンドトラックファイルを自動的にクロスフェードすることができる。これにより、次のトラックのボリュームがゆっくりと大きくされているときに先のトラックのボリュームがフェードアウトされ、その結果、ページサウンドトラックファイル相互間のオーディオギャップが存在しないようになる。というのは、これは、本中のシーンのムードを壊す場合があるからである。
実施例2
この実施例では、単一サウンドトラックファイルがこれ又関連のデータファイルを有する本全体について作成される。データファイルは、オーディオプレーヤがサウンドトラックファイルをどのようにして本の各ページについて分割するかを定めることができるようにする詳細を含む。このファイルは、オーディオプレーヤ上にロードされてサウンドトラックファイルを索引付けして、そのセグメントをユーザによって選択されたときに本の各ページについて表示できるようにする。読者は、遠隔装置を用いて又は実施例1において説明したのと同一の仕方でオーディオプレーヤ上で直接本の各ページに対応したサウンドトラックのオーディオセグメントを選択する。この実施例の他の全ての観点は、上述した観点と同一である。
実施例3
この実施例について作成されたサウンドトラックは、サウンド効果及びバックグラウンドミュージックを層状に重ねたベーストラックを含み、この場合、ベーストラックは、本を読んでいる間に適当な箇所、例えば、チャプタの終わり又は新たなシーンの開始のところで変わる。ベーストラックを多くのグループをなすテキスト又はページにわたってプレイすることができる。オーディオプレーヤ及び遠隔装置は、読者が遠隔装置上の次ページボタン又はオーディオプレーヤ上に設けられているボタンをクリックすると本の各頁についてサウンド効果を同期させる。サウンドトラックと関連していて、所要のグループをなすテキスト又はページについて適当なベーストラックをプレイするようオーディオプレーヤに指令を出すデータファイルをロードすることによってこの特徴に対応し、ベーストラックの上部で各ページ及びミュージックのサウンド効果を同期させるソフトウェアファイルが作成される。この実施例の他の全ての観点は、上述した観点と同一である。
実施例4
この実施例では、サウンドトラックについて作成されたソフトウェアファイルは、読者が本の次のページにページめくりするのに要する時間に基づいて読者の読み速度を自動的に計算する能力を備えている。この時間は、読者がサウンドトラックファイルをプレイするのに選択した時点から読者が次のサウンドトラックファイルを選択した時点までの時間を計ることによりオーディオプレーヤ又は遠隔装置から測定される。この時間は、次に、次のサウンドトラックファイルの少なくとも1つのサウンド層、好ましくはサウンド効果層のタイミングを自動的に調節し、その結果、これが全ページを読むのに要した時間にマッチするようにする。次ページのサウンド効果のタイミングは、前ページを読むのに要した時間に従ってソフトウェアにより自動的に調節され、その結果、サウンド効果が次ページで起こるイベントにほぼマッチするようにする。他の層、例えばバックグラウンドミュージック及びシーンノイズの開始時刻も又、前ページを読むのに要した時間の長さにマッチするよう伸縮される。この実施例は、本を読んでいる間に読者の読み速度の変化を可能にすると共に最後のページが読まれるまで連続方式で読者の読み速度にマッチする。この実施例の他の全ての観点は、上述した観点と同一である。
実施例5
この実施例は、ソフトウェアファイルにより、読者がサウンドトラックの幾つかの層、例えばバックグラウンドミュージック層をオーディオプレーヤ又はコンピュータ内の既存のパーソナルミュージックライブラリからの歌で置き換えることができる上述の実施例の任意のものと関連して利用できる。読者は、自分がソフトウェアファイルの使用により好みの歌をプレイするのを望むサウンドトラックの特定の場所を選択するオプションを得る。変形例として、歌は、歌のカテゴリ、例えば人気、ジャンル、ビート又は他の尺度に基づいて、ソフトウェアファイルによって自動的に選択されても良い。ソフトウェアファイルは又、特定のサウンドトラックファイルに対応したシーンで生じるムード又は行動の形式を示唆することができ、それにより、読者は、サウンドトラックファイルのバックグラウンドミュージック層に追加されるべき適当なミュージックをより正確に取り上げることができる。
さらに、サウンドトラックファイルをバックグラウンドミュージック層又はソング層中に意図的なギャップを備えた状態で作成でき、その結果、これらサウンドトラックファイルには、読者が自分のオーディオプレーヤ上にロードした歌を自動的にファイルすることができるようになる。オーディオプレーヤ上にロードされたソフトウェアファイルは、選択基準、例えば歌の人気又はジャンルに基づいてサウンドトラックのギャップ中に配置可能な歌の選択項目を定める。また、ソフトウェアファイルは、歌のビート、テンポ又はピッチに基づいてオーディオプレーヤから歌を自動的に選択することが可能である。この実施例の他の全ての観点は、上述した観点と同一である。
さらに、読者は、読者が自分自身のミュージック選択項目からサウンドトラックのユーザ生成ミュージックサウンド層中に導入していて、ユーザ生成「サウンドトラックソング」について指定された本中の時点でプレイする個別化ミュージックを除き、サウンドトラック中の他の全てのサウンド層をプレイすることから選択解除するオプションを得る。これは、ユーザの選択の「サウンドトラックソング」から恩恵を受けるテキストの強調表示された重要な又は感動をもたらす一片のある本の一部であるのが良い。これにより、読者は、上述したように自分のオーディオプレーヤに耳を傾けることができるが、読者が何ら背景又はシーンオーディオサウンド層がプレイされない状態で、本又はテキストの最も重要な又は感動的な部分を読んでいるときに自分の選択した又は好みの歌をプレイさせることができる。
ユーザがミュージックを変えようと決めた場合、ユーザは、自分自身のサウンドトラックを作成し、ユーザにはこれを再販売のためにウェブサイドにアップロードして戻すオプションが与えられる。
実施例6
この実施形態は、読者がウェブサイトを利用して読み速度を含む自分の個別化サウンドトラック選択項目を作成し、サウンドトラックの幾つかの層、例えばバックグラウンドミュージック層をウェブサイトへのアップロードを介して自分自身の既存のミュージックライブラリ又はウェブサイト上のオプションの選択項目、例えば作者の選択、最も人気のあるもの、カントリーミュージックテーマ等からの歌で置き換えることを除き、上述の実施形態の任意ものと関連して利用できる。必要な歌の形式のリスト、例えば悲哀、アクション、恐怖もの等を提供することができ、これらから、読者は、自分がサウンドトラック中の各スポットにどの歌をファイルするかを決定することができる。読者が全ての選択項目をいったん作ると、サウンドトラックは、ウェブサイトにより作成され、そして読者がダウンロードできるようにされる。このサウンドトラックは、上述の実施例において説明したように単一のサウンドトラックでも良く、多数の層を有しても良い。読者は、料金を課すことができるようこのサウンドトラックを第三者のアップロードのために利用できるようにするオプションを得る。
実施例7
この実施形態は、上述の実施例の任意のものと関連して利用でき、ここでは、サウンドトラックは、電子ブック又は電子印刷媒体のテキストのために特別に作成される。好ましくは、サウンドトラックをダウンロードするオプションは、電子ブック又は電子印刷媒体の購入時点で利用可能である。サウンドトラックファイルのプレイバックは、ソフトウェアファイルの使用によりコンピュータディスプレイ上に表示される電子ブックのテキストに合わせて較正可能である。ソフトウェアファイルは、各サウンドトラックファイルのプレイバックを読者が電子ブックのページを選択する速度にマッチさせることができる。サウンドトラックファイルは、電子ブックを読むために用いられるコンピュータから又はオーディオプレーヤを操作する別個の遠隔装置によりプレイできる。遠隔装置は、読者が電子ブックのページをめくるときに電子ブックを読むために用いられるコンピュータからキュー信号を接続ケーブルにより又はワイヤレスで受信することができる。これは、読者が実施例1において遠隔装置の次ページボタンをクリックして次のサウンドトラックファイルをプレイするようにする仕方とほぼ同じである。この実施例の他の全ての観点は、上述の観点と同一であるのが良い。
実施例8
この実施例も又、上述の実施例の任意ものと関連して利用でき、この場合、サウンドトラックは、オーディオブックの場合のように本の音読を含む追加のボイス層を含む。ソフトウェアファイルは、オーディオプレーヤの使用によりサウンドトラックのボイス層をオンオフにする選択肢を読者に提供する。これにより、サウンドトラックを聴きながらテキストを読み又はこれ又サウンドトラックを聴きながら本を読んで読者に聴かせる選択肢が読者に与えられる。この実施例の他の全ての観点は、上述した観点と同じである。好ましくは、サウンドトラックの各バージョン(顧客の予想読み速度に合わせて較正されている)は、音読層を同一速度に設定し又は音読速度に合わせて調節することができる。
実施例9
この実施例は、上述の実施例の任意のものに組み込み可能な追加の特徴を備えており、この場合、サウンドトラックは、プレイし又はミュートするよう選択可能な作者又は別の人からの注釈又は説明上の解説を含む追加のサウンド層を有する。これは、教育目的で又は読者に本の性格又は物語上のプロットに対する洞察を与える上で有用である。この実施例の他の全ての観点は、上述した観点と同一であるのが良い。
実施例10
この実施例では、作成されたサウンドトラックは、子供又は第二言語を習得した人への読書を教えるのを助けるために使用できる。本の音読を含むボイス層を備えたサウンドトラックが作成され、このようなサウンドトラックは、読書しながら読者を助けて音声が大声で始まり、次に読者が本のページを進むにつれて経時的にボリュームが減少するようにする。実施例4に記載のサウンドトラック層用自動可変読み速度コンポーネントを利用すると、サウンドトラックを仮想補助器具として機能させることができ、困難が生じる恐れのある箇所を予測し、本のページを読むのに要する時間で判断してページを読むのに要する時間が所定値よりも長い場合、読者を援助する。読者に与えられる援助は、難しい言葉との妥当な実際の音との関連付け(例えば雌牛の場合「モー」という鳴き声)、各単語音の分解を助けるボイスオーバー音声(例えばbecause(ビコーズ)、be-cause(ビー・コーズ))、読み上げていきながら徐々に減衰し、その後は注意を要する言葉についてのみ援助するボイスオーバー音声を含んでもよく、リーディングスコアは、遠隔装置を通じて読者が入力することができ、サウンドトラックは、読者がどのくらい援助を受けるかを自動的に調整する。この実施例の他の全ての観点は、上述した観点と同一であるのが良い。
第2の好ましい実施形態
図5〜図20を参照して、好ましい形態の複合サウンドトラック並びにサウンドトラックを作成すると共にプレイする方法及びシステムの第2の好ましい実施形態について説明する。第2の好ましい実施形態は、複合ディジタルサウンドトラックファイルフォーマット並びにサウンドトラックを作成してプレイする関連の方法及びシステムに関する。
複合サウンドトラック概要
図5を参照すると、好ましい形態のサウンドトラック20の略図が示されている。複合サウンドトラック20は、多層のものであり、この複合サウンドトラックは、サウンドトラックのプレイ中に同時にランする2つ又は3つ以上のサウンド層を有している。一例を挙げると、3つのサウンド層22,24,26が示されているが、任意個数の層を複合サウンドトラックの他の形態で利用できることは理解できる。好ましい形態のサウンドトラック20では、ミュージック層22は、バックグラウンドソングのために設けられ、バックグラウンド層24は、雰囲気ノイズのために設けられ、効果層26は、テキストソース中で起こるイベントとタイミングが取られたサウンド効果のために設けられている。例えば、ミュージック層22は、所望のバックグラウンドミュージック、例えばオーケストラミュージック又はバンドソングから成るのが良く、バックグラウンド層24は、天候に関する音、シーンノイズ等から成るのが良く、効果層26は、テキストソース中に起こるイベントと同期するようタイミングが取られたサウンド効果、例えば発砲の際の音、ドアがバタンと閉まる音、稲妻等を含む。
好ましい形態では、サウンドトラック時系列中のサウンド層22,24,26は、一連のタイムスロットセグメント30a,30b,30cにセグメント化されている。同様に、関連のテキストソースは、一連のテキストチャンクに分割され又はセグメント化されている。サウンドトラック中の各タイムスロットセグメント30a,30b,30cは、テキストソース中のテキストチャンクに対応している。図5では、例示として3つのタイムスロットセグメント30a,30b,30cが示されている。ただし、一連のタイムチャンク中のタイムスロットセグメントの数は、サウンドトラック及びその関連のテキストソースの長さで決まり、サウンドトラック時系列は、任意所望の長さのものであって良いことは理解できる。説明の便宜上、テキストソースは、1冊の本であり、各テキストチャンクは、その本の1ページに対応している。しかしながら、理解されるように、テキストチャンクセグメント化は、テキストソースの種々の形式及び要件に合うよう様々であって良い。例えば、テキストソースは、連続ページ、チャプタ、語数に基づくテキストの長さのグループから成るテキストチャンク又は任意他の適当なセグメント化方式にセグメント化されるのが良い。好ましい形態では、各テキストチャンクの長さは、実質的に等しい。ただし、テキストソースのセグメント化は、他の形態において必ずしも等しくある必要はない。
好ましい形態では、各タイムスロットセグメント30a,30b,30cの持続時間又は長さは、テキストソースに関するユーザの読み速度に対応するよう構成される。例えば、タイムスロットセグメントが1ページの長さを持つテキストソース中のテキストチャンクに対応すると共に読者が1ページを読むのに30秒このようなとした場合、各タイムスロットセグメントの長さは、30秒に設定される。事実、一連のタイムスロットセグメントから成るサウンドトラック時系列は、一連のテキストチャンクから成るテキストソースについてユーザの読み時系列に実質的に等しい。
タイムスロットセグメントは、時間マーカT1,T2,T3,T4によって互いに区切られており、これらタイムマーカは、サウンドトラック時系列の長さに沿って互いに間隔を置いたインタバルで位置している。各々の対をなす隣り合うタイムマーカは、サウンド層22,24,26を横切って延びる対応のタイムスロットセグメントを定める。一連のタイムスロットセグメント、タイムマーカ及び対応のテキストチャンク相互間のこの関係は、図6の表に示されている。図示のように、各タイムスロットセグメント30a,30b,30cは、この例では1ページであるテキストソースの関連のテキストチャンクに対応している。タイムスロットセグメント期間と呼ばれるタイムスロットセグメントの持続時間は、各タイムスロットセグメントに対応したタイムマーカの位置によって設定される。例えば、タイムスロットセグメント30aは、開始時刻マーカT1及び停止時刻マーカT2によって区切られる。同様に、タイムスロットセグメント30bは、開始時刻マーカT2及び停止時刻マーカT3によって区切られ、一連のタイムスロットセグメント中の残りのタイムスロットセグメントについても同様である。
図5に戻ってこれを参照すると、各サウンド層22,24,26は、1つ又は2つ以上の音声特徴を有する。音声特徴は、サウンドトラックの時系列中に特定の選択された時点でプレイするよう構成されたオーディオファイルである。サウンド層の単一のタイムスロットセグメント内に多数の音声特徴が存在する場合があり又は所与の音声特徴が多数のタイムスロットセグメントにわたって延びる場合がある。
一例を挙げると、ミュージック層22は、タイムスロットセグメント30a中で開始し、タイムスロットセグメント30b中で終了する単一の音声特徴32、例えば歌を備えた状態で示されている。バックグラウンド層24は、タイムスロットセグメント30a中のプレイで始まり、タイムスロットセグメント30b,30c全体を通じてプレイを続行する音声特徴34、例えば雰囲気ノイズ又はシーンノイズを有する。ミュージックサウンド層22及びバックグラウンドサウンド層24の性状は、これらの音声特徴が本の多数の連続ページにわたって、及び多数の連続したタイムスロットセグメントにわたって連続してプレイする可能性が多分にあるようなものである。これとは対照的に、効果層26は、各タイムスロットセグメント内に多数の音声特徴を有する傾向がある。というのは、多数のイベントが1ページ内で起こる傾向があるからである。
好ましい形態では、サウンドトラックの種々の層中の音声特徴の各々は、サウンドトラック時系列中に所定の又は指定された開始位置を有する。図5のサウンドトラック20中の音声特徴の開始位置は、サウンドトラック時系列中に符号S32,S34,S36,S38,S40,S42,S44,S46として示されている。音声特徴の端位置は、音声特徴と関連したオーディオファイルの長さで決まり、音声特徴は、オプションとして、読み速度につれて変化する場合のあるあらかじめ設定された停止位置を備えるのが良い。
サウンドトラック20は、サウンド層の1つ又は2つ以上をユーザの読み速度にマッチさせることができるよう構成されている。具体的に説明すると、サウンドトラックの層は、「一定読み速度サウンド層」か「可変読み速度サウンド層」かのいずれかとして定められる場合があり、幾つかの形態では、サウンドトラックは、一定読み速度サウンド層と可変読み速度サウンド層の組み合わせを有する場合がある。他の形態では、サウンドトラックは、全てが「可変読み速度サウンド層」型のものであるサウンド層から成る。サウンド層のタイプは、その層の音声特徴の開始/停止位置がどういうものであるかを定める。一例を挙げると、一定読み速度サウンド層は、ユーザの読み速度とは独立したサウンドトラック中のあらかじめ設定された位置でこれらの音声特徴をプレイし、これに対し、可変読み速度サウンド層は、テキストソース中で起こるイベントとタイミングが取られたオーディオ効果のために用いられ、したがって、このような層中の音声特徴のタイミング又は位置は、ユーザの読み速度にマッチされると共にこれに依存する。
一定読み速度サウンド層に関し、各音声特徴は、音声特徴がユーザの読み速度又はタイムスロットセグメント期間とは無関係に、サウンドトラック時系列内の又は特定のタイムスロットセグメント内の所定の時間で開始するよう絶対開始位置を有する。例えば、ミュージックサウンド層22及びバックグラウンドサウンド層24は、音声特徴がサウンドトラック時系列中又はユーザの読み速度とは独立した特定のタイムスロットセグメント内の所定の時間で開始するようそれぞれの音声特徴32,34が絶対開始位置を有するよう一定読み速度サウンド層であるのが良い。同じことは、これらが音声特徴について設定されている場合にもオプションとしての停止位置に当てはまる。
可変読み速度サウンド層の場合、各音声特徴は、タイムスロットセグメントのタイムスロット期間(このタイムスロット期間内において、音声特徴のプレイが始まる)に基づく可変開始位置を有する。この点に関し、サウンドトラック時系列のタイムスロットセグメントは、ユーザの読み速度に基づいて設定される調節可能な又は可変タイムスロットセグメント期間を有する。この点に関し、複合サウンドトラックは、ユーザの読み速度に依存した可変全持続時間を有するものと考えることができる。好ましい形態では、可変開始位置は、音声特徴が開始するタイムスロットのタイムスロットセグメント期間に基づいて定められる百分率又は比開始位置であるのが良い。例えば、音声特徴、例えばサウンド効果がページの中間で生じるイベントに応じてプレイされるべき場合、タイムスロットセグメント期間の50%の可変開始位置が設定されることになる。図5を参照すると、効果層26は、ユーザの読み速度にマッチされた可変読み速度層であるのが良い。効果層26の音声特徴36,38,40,42,44,46の各々は、これらのタイミングを説明されるべき読み速度マッチング関数に応じてユーザの読み速度に従って変更できるよう可変開始位置を有するのが良い。同様に、可変読み速度サウンド層の各音声特徴は、ユーザの読み速度に依存した可変停止位置を有するのが良く、但し、このようなオプションとしての停止位置が音声特徴について設定されていることを条件とする。
図7を参照して、サウンドトラックと関連した読み速度マッチング機能について説明する。作用を説明すると、読み速度マッチング機能は、可変読み速度サウンド層中の音声特徴の絶対開始位置をこれらの百分率又は比開始位置及びユーザの読み速度にマッチするよう変更することができるタイムスロットセグメント期間に基づいて計算するよう構成されている。一例を挙げると、図7は、ユーザの読み速度が1ページ当たり30秒である場合に効果層26を全体として50aとして示しており、この読み速度は、30秒のタイムスロットセグメント期間に変換される。タイムスロットセグメント30aは、各々がタイムスロットセグメント期間の15%、50%及び75%のところにそれぞれの百分率開始位置を備えた3つの音声特徴36,38,40を有するものとして示されている。したがって、読み速度マッチング機能は、次の公式(1)、即ち、絶対開始位置=タイムスロットセグメントの開始時刻マーカ+(百分率開始位置×タイムスロットセグメント期間)を用いて各タイムスロットセグメント中の音声特徴の開始位置を計算する。
一例を挙げると、音声特徴36は、時刻T1+0.15×(T2−T1)で始まり、音声特徴38は、時刻T1+0.5×(T2−T1)で始まり、音声特徴40は、時刻T1+0.75×(T2−T1)で始まり、これは、それぞれ、タイムスロットセグメント30aの開始時刻マーカT1以後4.5秒、15秒及び22.5秒の開始時刻に変換される。これよりも遅い読者は、サウンドトラックを用い、読者の読み速度が1ページ当たり60秒である場合、タイムスロットセグメント期間は、60秒に変更されるのが良く、そして、上述の公式(1)は、符号50bで示されている修正効果層で示されているように音声特徴36,38,40の絶対開始位置を9秒、30秒、45秒として再計算するよう読み速度マッチング機能によって用いられる。
サウンドトラックファイルフォーマットに関して以下に更に説明するように、各音声特徴は、関連のオーディオプロパティを有する。プロパティとしては、少なくとも、可変であるにせよ一定であるにせよいずれにせよ、サウンドトラック時系列内の開始位置が含まれると共にプレイされるべき関連のオーディオファイルへのリンク又はファイル経路が挙げられる。さらに、オーディオプロパティは、可変又は一定終了位置、開始効果、停止効果、例えばフェードイン、フェードアウト、タイミングが取られたフェードアウト、ボリューム、ルーピング及びユーザインタラクション、例えば次ページ入力、ユーザによるページスキッピング又は次ページがユーザによって選択されなかった場合においてページの終わりに達したときにどのようなアクションが取られるかに応じたプレイステータスを含むのが良い。以上要約すると、これらオーディオプロパティは、個々の音声特徴のオーディオファイルのそれぞれのオーディオファイルがサウンドトラック時系列中にどのように始まったり停止したり移行するか、例えば、フェードインし、ルーピングし、テキストソースのテキストチャンク相互間の連続且つギャップレスサウンドトラックを達成するのに必要な場合のある移行、停止及び他の特性を通じて続行するかを制御するために個々の音声特徴に割り当てられる。
サウンドトラックファイルフォーマット
複合サウンドトラックは、対応のオーディオソフトウェアがオーディオプレーヤ上でランすることにより解釈及びプレイを行なうための種々のファイルフォーマット及び配列にパッケージ化されることが良いことは理解できる。一例を挙げるに過ぎないが、好ましい形態のサウンドトラックファイルフォーマットを対応の好ましい形態のサウンドトラック作成及びプレイシステムと共に説明する。ただし、これらファイルフォーマット及び配列は、種々のフォーマット及びオーディオソフトウェア要件に合うよう変更可能である。
図8を参照すると、好ましい形態のサウンドトラックは、ファイルのパッケージを有している。このファイルパッケージは、好ましくは、メインデータファイル52、サウンドトラックのサウンド層の各々に対応した1つ又は2つ以上の層データファイル54及びオプションとしてサウンドトラックの種々の音声特徴に対応した1組のオーディオファイル56を有している。理解されるように、サウンドトラックは、変形例として、データファイル52,54だけを有しても良く、又、オーディオファイル56をサウンドトラックのプレイ中、データベース又はメモリから取り出すことができ、このような形態では、データファイルは、オーディオファイルをメモリ、データベースから又はネットワークにより取り出すためのリンキング又はファイル経路情報を含むのが良い。
好ましい形態では、メインデータファイル52は、好ましくは、一般的なサウンドトラックデータ、例えばサウンドトラックの名称、サウンドトラックの長さ又は持続時間、関連のテキストソース名称及び任意他の識別情報又は必要なオーディオ情報若しくはサウンドトラック情報を含む。さらに、メインデータファイルは、サウンドトラック中のサウンド層の数及びサウンド層の名称に関する情報を含む層データを有する。層データは、ファイルネーム、ファイル経路又はサウンド層の各々の対応の層データファイル54へのリンクを更に有するのが良く、これらについては次に説明する。メインデータファイルは、好ましくは、読み速度データを更に含み、この読み速度データは、好ましい形態では、サウンドトラック時系列に関連したタイムスロットセグメント情報を含み、例えば、タイムスロットセグメントの数、タイムスロットセグメント期間及びサウンドトラック時系列中の時刻マーカ配置場所を含む。作用にあたり、メインデータファイルは、種々のサウンド層及びサウンドトラック時系列セグメントを含むサウンドトラックのフレームワークを設定する情報を含む。次に、特定の音声特徴及び各サウンド層中におけるこれら音声特徴の位置を層データファイル54中の対応の情報に応じてサウンドトラック上に配置する。
好ましい形態では、サウンドトラックパッケージは、サウンドトラック中のそれぞれのサウンド層の各々に関する層データファイル54を含む。各層データファイル54は、層タイプデータを含み、このような層タイプデータは、サウンド層が一定読み速度サウンド層か可変読み速度サウンド層かを指定する。上述したように、可変読み速度サウンド層は、読み速度マッチング機能により計算されたタイムスロットセグメント期間の百分率又は比に基づく関連の可変開始位置を備えた音声特徴を含む。一定読み速度サウンド層の場合、関連の音声特徴は、サウンドトラック時系列に沿う絶対又は一定開始位置を備える。
各層データファイル54は、音声特徴データを更に含む。この音声特徴データは、サウンド層と関連した特定の音声特徴に関する情報を提供する。サウンド層の各音声特徴は、その音声特徴に関するオーディオプロパティを含んだ関連の音声特徴データセットを有する。一例を挙げると、効果層26の音声特徴36,38,40に関する音声特徴データセットが示されている。好ましい形態では、各音声特徴データセットは、音声特徴の一定又は可変開始位置、音声特徴が始まるサウンドトラック時系列中の関連のタイムスロットセグメント、関連のオーディオファイルへのリンク又はファイル経路及びオプションとして、他の音声特徴プロパティを含み、このような他の音声特徴プロパティとしては、例えば、開始及び停止効果、例えばフェードイン、フェードアウト、タイミングが取られたフェードアウト、ボリューム、ルーピング及びユーザインタラクション、例えば次ページ入力、ユーザによるページスキッピング又は次ページがユーザによって選択されなかった場合においてページの終わりに達したときにどのようなアクションが取られるかに応じたプレイステータスを含むのが良い。
サウンドトラック並びにそのサウンド層及び各サウンド層の音声特徴に関するデータ及び情報を種々のファイルフォーマット及びデータファイル構成で配列することができ、上述のことは、一例として与えられているに過ぎないことが理解できる。
サウンドトラックシステム
好ましい形態では、サウンドトラックは、対応のサウンドトラックシステムにより作成されてプレイされる。一般に、サウンドトラックシステムは、ハードウェアシステム上でランするソフトウェアを有する。一例を挙げると、サウンドトラックシステムは、サウンドトラックをコンパイルするためのサウンドトラック作成システム及びサウンドトラックをプレイするためのサウンドトラックプレイバックシステムを有する。分かりやすくするために、作成システムとプレイバックシステムの両方を別々に説明するが、両方のシステムは、所望ならば全体的サウンドトラックシステムに組み込み可能であることが理解できる。
サウンドトラックシステム用ソフトウェアは、任意適当なハードウェアシステム又はプラットホーム上でランするよう構成されているのが良い。一例を挙げるに過ぎないが、ハードウェアシステムは、デスクトップ型であれラップトップ型であれ或いはPDA型であれいずれにせよ汎用コンピュータ、携帯電話、電子ブック、携帯型オーディオプレーヤ、例えばi‐Pod又はmp3プレーヤ又はスタンドアロン型ハードウェアシステムであるのが良い。要するに、ハードウェアシステムは、ソフトウェアをランさせるプロセッサ、メモリ、好ましくは出力ディスプレイ、出力リスニング装置又はオーディオ出力、例えばスピーカ又はヘッドホン、ユーザインターフェイス及び他の外部装置と接続可能な入力/出力インターフェイスを必要とする。ハードウェアシステムは、オプションとして、オーディオファイルをダウンロードすることができ又はこれにアクセスすることができるデータベース又は他のネットワークへのアクセスを有するのが良い。また、サウンドトラックシステムは、ウェブサイト上でランするソフトウェアアプリケーションの状態で提供されても良いことは理解できる。さらに、全体的ハードウェアシステムは、互いに通信するネットワーク上の1つ又は2つ以上の装置間で分散して配置されても良い。
サウンドトラック作成システム
図9を参照すると、好ましい形態のサウンドトラック作成システム60が示されている。上述したように、サウンドトラックシステム60は、ハードウェアシステム62上でランするソフトウェアの形態をしている。上述したように、ハードウェアシステムは、汎用コンピュータ、携帯電話、電子ブック、携帯型オーディオプレーヤ、携帯手持ち式コンピュータ型装置を含む種々の形態で提供できる。要約すると、ハードウェアシステムは、ソフトウェアをランさせるプロセッサ64、メモリ66、ユーザがソフトウェアと対話することができるようにするユーザインターフェイス68、ユーザインターフェイスの一部をなす場合のある出力ディスプレイ70及びサウンドトラックファイルをダウンロードしたりアップロードしたりするための外部装置に接続可能な入力/出力インターフェイス72を有する。ハードウェアシステムは、ネットワーク76、例えばインターネットに接続可能な関連のデータベース74から成り又はこれを有するのが良い。スピーカ又はヘッドホンの形態をしたオーディオ出力65も又、サウンドトラックオーディオ出力信号を可聴音に変換するために設けられる。
次に、一例を挙げると、サウンドトラック作成システム60の主要モジュール及び機能について説明する。サウンドトラック作成システムは、出力ディスプレイ上でユーザインターフェイスとして働くよう構成されたグラフィカルユーザインターフェイス(GUI)80を有する。ユーザがサウンドトラックデータ、例えばタイトル、関連のテキストソース、持続時間等を設定することができるようにするためのサウンドトラック一般的設定値モジュール82が設けられている。好ましい形態では、設定値は、ユーザの読み速度設定値を更に含み、このようなユーザの読み速度設定値は、速い読み速度から遅い読み速度までのインデックス目盛からの読み速度選択又は読み速度指標の任意他の形態、例えば1ページを読むのに要する時間を含むのが良い。直接的に又は間接的に、読み速度設定値は、タイムスロットセグメント期間を定める場合がある。上述したように、各タイムスロットセグメントは、関連のテキストソースのユーザにより特定されたテキストチャンクに対応する。好ましい形態では、テキストチャンクは、テキストソースの1ページであるのが良く、したがって、タイムスロットセグメント期間は、ユーザがテキストの1ページを読むのに要する時間の長さに対応している。また、一般的設定値により、ユーザは、タイムスロットセグメントの数及び期間を含む一般的サウンドトラック時系列をコンフィグレーションすることができ、テキストチャンクのタイプは各々、例えば1ページに対応している。この情報をコンフィグレーションすると、サウンドトラック時系列をページ及び例えばチャプタを形成するページのグループに区分し又はセグメント化することができる。
ユーザがサウンドトラック中のサウンド層の数をコンフィグレーションすることができるようにするためのサウンド層コンフィグレーションモジュール84が設けられ、このようなコンフィグレーションとしては、サウンド層の追加及び削除並びにサウンド層設定値の設定、例えば、サウンド層が一定読み速度サウンド層であるか可変読み速度サウンド層であるかの設定が挙げられる。
音声特徴コンフィグレーションモジュール86は、ユーザがサウンドトラック時系列にわたりサウンド層の各々の各タイムスロットセグメント内における所望の開始位置にオーディオ効果を配置することができるようにするよう構成されている。ユーザが新たな音声特徴サウンド層中に挿入すると、ユーザは、その音声特徴でプレイされる関連のオーディオファイルを選択し、サウンド層の所望のタイムスロットセグメント中のその音声特徴の一定又は可変開始位置を設定すると共に他の音声特徴プロパティ、例えば開始及び停止効果を設定することができ、これらについては後で詳細に説明する。
最後に、サウンドトラック作成システムは、サウンドトラックコンパイラ88を有し、このサウンドトラックコンパイラは、サウンドトラック時系列コンフィグレーション、サウンド層コンフィグレーション及びユーザにより上述した所要のサウンドトラックデータファイル中に設定されてこれらファイルをサウンドトラックパッケージ50の状態で出力する音声特徴に関連したデータ及び情報をコンパイルするよう構成されている。
一例を挙げると、サウンドトラック作成システムのための好ましい形態としてのGUI100が図10に示されている。GUI100は、サウンド層102を備えた複合サウンドトラックを示している。各サウンド層102は、タイムスロットセグメント106を示す一連の等間隔を置いて位置する時刻マーカ104を備えている。陰影付きの種々のブロック108は、サウンド層の各々の中のプレイするよう設定された音声特徴を表している。上述したように、ユーザは、サウンド層コンフィグレーションモジュール84を用いて層の数及び層の名称をコンフィグレーションすることができる。好ましい形態のGUI100では、各タイムスロットセグメント106は、関連のテキストソースの1ページのテキストチャンクを表すよう設定されている。したがって、各時刻マーカ104は、新たなページの開始を表している。便宜上、一連の連続したタイムスロットセグメントをページのチャプタにグループ分けすることができ、その結果、サウンドトラック時系列の特定のチャプタ内の音声特徴を容易にナビゲートすることができるようになっている。一例を挙げると、チャプタ選択能力は、パネル110に示されている。サウンドトラックをプレイしたときのサウンドトラックの進捗状況バー112も又設けられている。特に、進捗状況バー112は、サウンドトラック時系列を横切って左から右に動いてサウンドトラックがサウンドトラック時系列中でプレイしている場所を示す。ユーザが作成中のサウンドトラックを試験するときに必要に応じてサウンドトラックのプレイバックをプレイし、早送りし、巻き戻し、ゆっくりと巻き戻し、停止させ、一時停止させることができるようにするためのプレイバック制御部114が設けられている。「次ページ」ボタン116も又設けられており、これにより、ユーザは、プレイバックを次のタイムスロットセグメントの開始点にジャンプさせることができ、これは、ユーザが次ページを選択する状況にそっくりである。
図11は、ユーザが新たなサウンドトラックを作成し、既存のサウンドトラックを開き、サウンドトラックをメモリ、例えばハードドライブに保存することができるようにするGUI100のファイルプロパティメニューを示す図である。
図12は、サウンドトラックプロパティのためのインフォメーションボックスを示しており、このインフォメーションボックスにより、ユーザは、サウンドトラックタイトル、著者、カテゴリ及びサウンドトラックが作られた関連のテキストソースのタイトルを含む場合のある説明をエンターすることができる。また、読み速度目盛入力118が設けられており、これは、タイムスロットセグメント期間を設定してユーザの読み速度に対応させるサウンドトラック一般的設定値モジュール82によって用いられる。理解されるように読み速度入力は、必ずしも、インデックス目盛の形態で提供する必要はなく、所望ならば期間としてエンターすることができる。一例を挙げると、好ましい形態の読み速度目盛入力は、1ページを読むのに30秒必要であることを示し、整数当たり30秒刻みで増える最も速い読み速度5から1ページを読むのに150秒このようなことを表す最も遅い読み速度1までの範囲にわたる。この目盛は、連続しているのが良く、必ずしも整数の目盛で提供される必要のないことは理解できる。作用を説明すると、読み速度目盛入力118は、ユーザの読み速度にマッチするよう変更可能であり、これにより、読み速度マッチング機能は、サウンドトラック時系列及び可変読み速度サウンド層、例えば効果層の音声特徴開始位置を修正する。特に、サウンドトラック時系列中の時刻マーカ104及びタイムスロットセグメント106の期間は、新たな読み速度を反映するよう変更され、可変読み速度サウンド層中の音声特徴の絶対位置は、これらの百分率開始位置に従って再計算されると共に再位置決めされる。図13及び図14は、サウンド層コンフィグレーションモジュール84に従ってページ及びチャプタセグメントをサウンドトラック時系列に追加し、編集し及び削除するためのチャプタ及びページメニューを示している。
図15を参照すると、サウンド装置の各音声特徴のためのオーディオプロパティメニューがアクセス可能である。好ましい形態では、オーディオプロパティメニュー100は、ユーザが自分の新たな音声特徴を開始させたいと思う位置でサウンド層をクリックしたときに現われる。サウンド層中の開始位置がいったん選択されると、オーディオプロパティメニュー120が現われ、音声特徴の開始位置が自動的に記録される。開始位置の種類は、例えば、これが絶対であるにせよ可変であるにせよいずれにせよ、サウンド層が一定読み速度タイプのものであるか可変読み速度タイプのものであるかで決まる。例えば、ユーザが可変読み速度サウンド層中のタイムスロットセグメントの途中で開始位置を選択した場合、50%の可変開始位置が音声特徴に対して記録される。
すると、ユーザは、オーディオプロパティメニューを用いて、ファイルエクスプローラボタン122にアクセスしてオーディオファイルのこれらデータベースをナビゲートすることによってその位置でプレイされるべきオーディオファイルを選択することができる。
次に、ユーザは、次に更に説明するように、その音声特徴124に関連した種々のプロパティを設定することができる。図16を参照すると、開始効果選択126は、オーディオファイルが始まるときにオーディオファイルに適用される何らかの効果が存在するかどうかを判定する。「デフォルト」選択は、通常の開始に従ってオーディオファイルを開始させる。「フェードイン」選択は、所定のフェード期間、例えば5秒でオーディオファイルをサウンドトラック中に次第にフェードインさせるが、これは調節可能である。
図17を参照すると、停止効果選択128は、オーディオファイルが停止する際にオーディオファイルに適用される効果があるかどうかを判定する。音声特徴は、これがオーディオファイルの終わりに達した場合又は次のページが選択された場合に停止可能であり、読者は、オーディオファイルを聴いているさなかにある。「デフォルト」選択は、オーディオファイルを即座に終了させる。「フェードアウト」選択は、所定のフェード期間、例えば5秒でオーディオファイルをフェードアウトさせるが、これは調節可能である。「タイミングが取られたフェードアウト」選択は、ファイルのプレイ開始時点から定められた調節可能な「停止時刻」がいったん経過すると、所定の調節可能なフェード期間でオーディオファイルをフェードアウトする。他のオーディオプロパティ特徴、例えばページ、チャプタ又は設定時間の終了までのオーディオファイルのルーピングも又、システムの変形形態で提供できる。
図18を参照すると、ページスキップ効果選択130は、ユーザが「次ページ」ボタンをクリックしたときにオーディオファイルがプレイしている場合にオーディオファイルに何が起こったかを判定する。「デフォルト」選択は、オーディオファイルのプレイを即座に停止させる。「続行」選択は、オーディオファイルが終了するまで(又は、ページの終わりに達するまで)プレイし続けるようオーディオファイルを設定する。「フェードアウト」選択は、ユーザが「次ページ」を選択したときにオーディオファイルを所定のフェード期間で、例えば、5秒でフェードアウトするよう設定する。図16を参照すると、「停止時刻」選択132は、オーディオファイルがプレイする持続時間を定めるよう設定可能である。オーディオファイルのためのボリューム設定値選択134も又設けられている。
サウンドトラックプレイバックシステム
図19を参照すると、サウンドトラック50は、サウンドトラック音声出力信号を可聴音に変換するためのスピーカ又はヘッドホンの形態をしたオーディオ出力145を備えるオーディオプレーヤとして動作可能なハードウェアシステム又はプラットホームの任意の形態上でプレイ可能である。ハードウェアシステム140は、好ましくは、サウンドトラックプレイバックシステムソフトウェアをランさせるプロセッサ142、サウンドトラック及びソフトウェアファイルのための関連のメモリ144、出力ディスプレイ146、ユーザがオーディオプレーヤを操作してサウンドトラックナビゲートすると共に修正することができるようにするためのユーザインターフェイス148及びオーディオプレーヤを外部装置、例えばリモートコントロール装置152、ネットワーク、例えばインターネット154又は記憶データベース156に接続することができるようにする入力/出力インターフェイス150を有している。一例を挙げると、ハードウェアシステムは、汎用コンピュータ、携帯型オーディオプレーヤ、例えばmp3プレーヤ又はi‐Pod、携帯電話、電子ブック又はソフトウェアアプリケーションをランすることができる任意他の携帯型装置であるのが良い。
次に、サウンドトラックプレイバックシステムソフトウェア160の主要モジュールについて説明する。このソフトウェアは、好ましくは、出力ディスプレイ上でランするGUI162の形態をしたユーザインターフェイスを有し、このGUIは、特定のオーディオプレーヤに合うよう種々の形態で提供可能である。例えば、GUIは、トラック又はページ番号を含むサウンドトラック進捗状況の単純なディスプレイであっても良く、又は、図10に示されているのと同じ、より複雑なグラフィカルディスプレイであっても良い。理解されるように、サウンドトラックプレイバックシステムは、必ずしも、GUIを有する必要はなく、ユーザインターフェイスは、制御パネル又は動作可能なボタンの形態をしていても良い。
ユーザが搭載型メモリ、接続状態にあるデータベースに記憶され又はワイヤレスで接続され又はハードワイヤード接続のネットワークからダウンロードされるサウンドトラック50をロードすることができるようにするサウンドトラックセットアップモジュール164が設けられている。サウンドトラックセットアップモジュール164は、サウンドトラックファイルを検索し、データファイルをサウンドトラックのプレイバック可能に解釈するよう構成されている。特に、サウンドトラックのデータファイルは、サウンドトラック時系列中の所望の開始位置でサウンドトラックのサウンド層中の種々の音声特徴を呼び出してこれらをプレイするために用いられる。効果的には、データファイルは、多数のサウンド層中の音声特徴の並行プレイバックを協調させるための情報を含む。オーディオファイルは、サウンドトラックデータファイルと共にメモリに記憶されるのが良く又はネットワークデータベース又は他の記憶媒体からバッファされても良い。好ましい形態では、サウンドトラックの各音声特徴と関連したオーディオファイルの少なくとも幾つかは、サウンドトラックファイルのパッケージと共に提供される。
ユーザが対応のテキストソース、例えば本の中の適当な位置までサウンドトラック時系列をナビゲートするためにプレイ、ポーズ、早送り、早巻き戻し、ページスキップ、ページ後方機能又は他のボタンを利用することができるようにするナビゲーションモジュール166が設けられている。例えば、ユーザがページ4を読んでいる場合、ユーザは、サウンドトラック中のそのページに関連した対応の4番目のタイムスロットセグメントにスキップすることができる。
上述したように、ナビゲーションモジュール166は、2つのタイムスロットセグメント相互間のサウンドトラックプレイバックの移行を制御してユーザが読んでいる次のページに対応させるよう構成されている。デフォルトモードでは、サウンドトラック層は、次ページ(タイムスロットセグメント)の始まりで一時停止し、そのタイムスロットセグメント内の音声特徴のオーディオプロパティの影響を受け、「次ページ」入力が続行するのを待つ。ページ移行がユーザによりそのページに関するタイムスロットセグメントの終了に先立って「次ページ」入力によって開始される場合、サウンドトラックは、次のタイムスロットセグメントの開始点にジャンプする。この状況では、音声特徴の幾つかは、上述のオーディオプロパティの影響下においてプレイを続行することができる。「次ページ」ボタンにより、ユーザは、サウンドトラックのプレイバックをその本の読書と同期することができる。
上述したように、ページ移行信号をソフトウェアGUI162上の「次ページ」ボタンの操作によって生じさせることができ又は変形例として、制御パネル上の割り当てボタン、例えば大抵の携帯型オーディオプレーヤ上に設けられている「次トラック」ボタンを用いて生じさせても良い。ページ移行信号をハードウェアシステム又はプラットホームにより提供されるユーザインターフェイスに応じて種々の仕方で生じさせることができるということは理解できる。幾つかの形態では、ワイヤレスで又はケーブルを介してハードウェアシステム140に接続された遠隔装置は、ユーザによる遠隔装置上の「次ページ」ボタンの操作に応答してページ移行信号を出力するよう構成されているのが良い。追加的に又は代替的に、遠隔装置は、本に取り付け可能であっても良く、この遠隔装置は、ページめくりに応答してページ以降信号を自動的に出力するページめくりセンサを備えるのが良い。本との関連において、電子ブック読書ソフトウェアは、ユーザが次ページにスクロールしたときにページ移行信号を自動的に発生させるよう構成されていても良く、或いは、ソフトウェアアプリケーションが電子作品の形態をしたテキストソースのためのページナビゲーションを検出するよう設けられても良い。好ましい形態では、遠隔装置は、サウンドトラック時系列中でプレイされているタイムスロットセグメントに対応した現在のページ番号を表示する出力ディスプレイ、例えばLCDスクリーンを有するのが良い。
サウンドトラックプレイバックシステムは、好ましくは、読み速度マッチングモジュール168を更に有する。読み速度マッチングモジュールは、ユーザから読み速度入力を受け取るよう構成され、そして、ユーザによって設定された読み速度にマッチするようサウンドトラックの可変読み速度サウンド層中の音声特徴の位置を修正する。上述したように、読み速度入力は、インデックス目盛上に又はテキストチャンクのための読み速度、例えばテキストの1ページを読むのに必要な時間を表示する任意他のシステム上に設定されるのが良い。これは、ユーザが例えばユーザインターフェイスを用いることによって調節可能である。
図20を参照して、読み速度マッチングモジュールについて詳細に説明する。読み速度マッチング機能は、読み速度入力170を受け取り、サウンドトラック時系列のための新たなタイムスロットセグメント期間を直接的又は間接的に導き出す。読み速度マッチング機能168は、新たな読み速度入力の開始時に、可変サウンド層172に関連した音声特徴データセットを検索する。上述したように、可変読み速度サウンド層の音声特徴データセットは、音声特徴が始まるタイムスロットセグメント期間の百分率に基づく可変開始位置を含む。読み速度マッチング機能は、新たなタイムスロットセグメント期間に従ってサウンドトラック時系列を短くし又は長くし、次に、これらの百分率開始位置に基づいて音声特徴の絶対開始位置を変更するよう構成されている。次に、読み速度マッチング機能は、全てのサウンド層に関して修正されたサウンドトラック時系列を新たな音声特徴開始位置174と共に生じさせる。次に、修正されたサウンドトラックをユーザによってプレイすることができる。理解されるように、読み速度マッチング機能は、所望ならばサウンドトラック時系列の幾つかの部分、例えば、読み速度がプレイバック中に変更される場合、残りのサウンドトラックの非プレイ部分を変更するよう構成されても良い。
プレイパックシステムの一形態では、動的又は自動読み速度入力を提供することができる。自動読み速度入力は、読み速度が計算され、サウンドトラック時系列が読者の読み速度に磨きをかけるよう多数のページにわたって利用される平均値及び重み付けで新たなページ移行の各々の際に動的にアップデートされると共に修正されるようユーザからの「次ページ」信号相互間の平均時間に基づいて計算される。
プレイパックシステムの幾つかの形態では、サウンドトラック修正モジュール180が図19に示されるように提供される。このモジュールにより、ユーザは、サウンド層及びサウンド層の音声特徴を修正することができる。サウンドトラック修正モジュール180は、好ましくは、上述したサウンドトラック作成システムの能力全体又はその機能の減少バージョンを有するのが良い。例えば、ユーザは、ユーザが特定のサウンド層、例えばミュージック層中の或る特定の音声特徴を自分のミュージックライブラリ又はデータベースからの既存のオーディオファイルで置き換えることができるよう歌置き換え機能を有することができるのが良い。さらに、或る特定のオーディオファイルをユーザのミュージックライブラリ又はデータベースからの好みの歌で置き換える自動機能が設けられても良い。
ユーザは又、サウンド層を選択解除してこれらがサウンドトラック中でプレイされず又はミュートされるようにすることができるのが良い。
複合サウンドトラック及びシステムの利点及び利益
複合サウンドトラックにより、本の読者は、新規且つ新たな仕方で読書の経験を楽しむことができる。サウンド効果、雰囲気ノイズ及びバックグラウンドミュージックを含む複合サウンドトラックは、本の読み持続時間全体を通じてプレイし、これら層の幾つかの中の音声特徴のタイミングは、ユーザの読み速度にマッチするよう調節可能であり、したがって、イベントを読んでいるときにサウンドトラックがイベントに厳密にマッチするようになる。複合サウンドトラックにより、各サウンド層は、互いに同時にランするが、これらの独立したオーディオプロパティ、例えば開始/停止位置及び移行効果を失わないでランすることができる。複合サウンドトラックは、サウンドトラック全体を通じて音声特徴のプレイバックを支配する組み込みプロパティを含み、これにより、読書プロセスを中断しないようにサウンドトラックを一定の流れで配信することができる。好ましい形態では、サウンドトラックフォーマットにより、サウンドトラックを元の音声特徴の音質、ピッチ又はテンポを変えないでユーザの読み速度にマッチするよう構成できる。例えば、サウンドトラック時系列中の音声特徴の配列又は位置を、個々の音声特徴の音質、ピッチ又はテンポを変えないでユーザの読み速度にマッチさせることができる。
サウンドトラック及びシステムの幾つかの形態では、読者は、自分のミュージックライブラリからの歌を本のサウンドトラックに追加することによりサウンドトラックを個別化することができる。これは、各読者がミュージック又は別の言語で独特の嗜好を持つのでその読者にとっては有利な場合があり、1つのサウンドトラックは、あらゆる年齢の読者の嗜好に合うように適してはいないであろう。
複合サウンドトラックは、種々の用途を有する。これは、読者の楽しみを促進するためのテキストソースアクセサリであるが、小さな子供又は目の見ない人にとって読書補助手段としても使用できる。サウンドトラックは、オーディオブックの場合のように本の音読を含む余分の可変読み速度サウンド層を有するのが良い。小さな子供は、自分達が読書することを学ぶと共に大人の居なくても読書しようとする気持ちになるので非常に有用であることに気づくであろう。
上記説明は、本発明を好ましい実施形態により説明したものである。本発明は、これら好ましい実施形態には何ら限定されない。というのは、これら実施形態は、純粋に本発明を例示しているに過ぎないからである。特許請求の範囲に記載された本発明の範囲から逸脱することなく、これら実施形態の変形例及び改造例を想到できる。

Claims (30)

  1. サウンドトラックプレイバックシステムであって、
    1又は2以上のサウンドトラックデータファイルであって、テキストソースをユーザが読む間にユーザのためにプレイするデジタル複合可変持続時間型連続サウンドトラックを有し、前記サウンドトラックはサウンドトラック時系列と前記ユーザの読み速度を示す読み速度入力に依存する持続時間を有し、前記サウンドトラックは、
    前記サウンドトラック時系列にわたり同時にプレイするよう構成された複数のサウンド層であって、各サウンド層は、音声特徴が前記サウンドトラック時系列の各々のプリセット開始位置でプレイするように構成された1つ又は2つ以上の音声特徴からなる配列体を有するサウンド層を有し、
    少なくとも1つのサウンド層は、前記読み速度入力に依存した可変プリセット開始位置を提供することによって、テキストソースが読まれる際に前記テキストソース中で起こるイベントに同期するようにそのプレイバックが時間合わせされている音声特徴を有し、前記ユーザの前記読み速度にそのような音声特徴のプレイバックタイミングがマッチさせられ、前記サウンド層は前記サウンド層の前記音声特徴のプレイバックプロパティを定めるコンフィグレーション可能な各サウンド層設定を介して独立してコンフィグレーション可能であり、
    前記サウンドトラックは更に、前記テキストソースのテキストチャンクにそれぞれ対応したタイムスロットセグメントを有し、各タイムスロットセグメントは、前記タイムスロットセグメントに関連した前記テキストチャンクに対応する開始マーカ及び停止マーカにより定められ、各タイムスロットセグメントの前記持続時間は、前記読み速度入力に基づいた前記対応テキストチャンクの予想読み時間に対応し、前記サウンド層の音声特徴はそれぞれの所定のタイムスロットセグメント中でプレイバックするように構成され、各音声特徴は前記音声特徴の前記プレイバックと関連した1つ又は2つ以上のプレイバック効果を定める関連の音声プロパティを備え、前記音声特徴の前記音声プロパティは、前記テキストソースのテキストチャンク間の移行中に連続かつギャップレスのサウンドトラックプレイバックを生じさせるよう構成されている、デジタル複合可変持続時間型連続サウンドトラックを備えたサウンドトラックデータファイルと、
    前記サウンドトラックを備えた1又は2以上のサウンドトラックデータファイルを処理するように構成され、前記サウンドトラックの前記音声特徴のプレイバックを整合させ、サウンドトラックオーディオ出力信号を生成するように構成されたプロセッサと、
    前記サウンドトラックオーディオ出力信号を受け取り、可聴音に変換するように構成されたオーディオ出力システムと、
    前記プロセッサによりアクセス可能であり、前記1又は2以上のサウンドトラックデータファイルを記憶するように構成されたメモリと、
    前記プロセッサにより操作される出力ディスプレイと、
    前記出力ディスプレイ上に表示される操作可能なグラフィカルユーザインターフェイスを備えたユーザインターフェイスであって、前記システムのモジュールと対話するようにユーザが操作可能なユーザインターフェイスと、
    読み速度入力を受け取るように構成され、前記受け取った読み速度入力に基づいて、可変プリセット開始位置を有する前記サウンドトラックの音声特徴のプレイバックタイミングを修正し、そのような音声特徴の前記プレイバックタイミングが前記ユーザの前記読み速度にマッチするようにするとともに、可変プリセット開始位置を有する前記サウンドトラックの前記音声特徴のサウンド品質、ピッチ及び/又はテンポは、前記読み速度の変化にも関わらず前記プロセッサによって維持されるようにする、読み速度マッチングモジュールと、
    前記サウンドトラックプレイバックをカスタマイズするため、所望のサウンド層の前記音声特徴のプレイバックプロパティを修正するために、いずれかの前記サウンド層の前記コンフィグレーション可能なサウンド層設定を修正するようにユーザにより操作可能なサウンドトラック修正モジュールを備える、サウンドトラックプレイバックシステム。
  2. 前記サウンドトラックの1つ又は2つ以上の音声特徴がさらに、前記音声特徴が前記サウンドトラック時系列中でのプレイを停止する時を定めるそれぞれのプリセット停止時刻を有し、少なくとも1つのサウンド層は、前記読み速度入力に依存した可変プリセット開始及び/又は停止位置を備えた音声特徴を有し、このような音声特徴のプレイバックタイミングが、前記テキストソースが読まれる際に前記テキストソース中で起こるイベントに同期するように、前記ユーザの前記読み速度にマッチさせられる、
    請求項1記載のサウンドトラックプレイバックシステム。
  3. 前記サウンドトラックの音声特徴の前記可変プリセット開始及び/又は停止位置は、前記音声特徴がその中でプレイバックする前記それぞれの所定のタイムスロットセグメントの持続時間に依存する、
    請求項1又は2に記載のサウンドトラックプレイバックシステム。
  4. 各テキストチャンクは、前記テキストソース中のテキストの長さによって定められる、 請求項1ないし3のいずれか1項に記載のサウンドトラックプレイバックシステム。
  5. タイムスロットセグメントを有し、異なる長さのテキストチャンクに対応する、
    請求項1ないし4のいずれか1項に記載のサウンドトラックプレイバックシステム。
  6. 前記サウンドトラックのタイムスロットセグメントの各音声特徴は、前記タイムスロットセグメント中のプレイバックのための関連する音声ファイルを有する、
    請求項1ないし5のいずれか1項に記載のサウンドトラックプレイバックシステム。
  7. 前記サウンドトラックは、前記サウンドトラック時系列中で重なり合うプレイバック持続時間を有する音声特徴を有する、
    請求項1ないし6のいずれか1項に記載のサウンドトラックプレイバックシステム。
  8. 前記サウンドトラックの前記サウンド層は、前記音声特徴のプリセット開始及び/又は停止位置が前記読み速度入力とは独立した固定読み速度サウンド層と、前記コンフィグレーション可能なサウンド層設定により定められたように、前記音声特徴のプリセット開始及び/又は停止位置が前記読み速度入力に依存した可変読み速度サウンド層との混合体を有する、
    請求項2ないし7のいずれか1項に記載のサウンドトラックプレイバックシステム。
  9. 前記サウンドトラックの各音声特徴の前記音声プロパティは、音量、フェードイン/フェードアウト効果、ルーピング効果、移行効果の任意の1つ又は2つ以上を含む、1つ又は2つ以上のプレイバック効果を定める、
    請求項1ないし8のいずれか1項に記載のサウンドトラックプレイバックシステム。
  10. 前記サウンドトラックは、ユーザが前記サウンドトラック時系列中の1つの位置から別の位置への移行を開始したときに前記音声特徴がプレイしている場合、前記音声特徴と関連した移行効果を定める設定値を備えた音声プロパティを有する音声特徴を有し、又は、前記サウンドトラック時系列中のタイムスロットセグメントの終わりの間に前記音声特徴がプレイしている場合、前記音声特徴と関連して、前記音声特徴の残りの部分のプレイバックを決定する移行効果を定める設定値を備えた音声プロパティを有する音声特徴を有し、
    前記移行効果は、プレイの続行、プレイの停止、フェードアウト又はループの任意の1つ又は2つ以上を含む、
    請求項9に記載のサウンドトラックプレイバックシステム。
  11. 前記プロセッサは、移行入力信号に応答して、前記サウンドトラックのプレイバックが1つのタイムスロットセグメントからもう1つのタイムスロットセグメントに移行するように構成され、前記ユーザが前記サウンドトラックプレイバック中のそれらの位置を前記テキストソース中のそれらの読み位置と同期できるようにする、
    請求項1ないし10のいずれか1項に記載のサウンドトラックプレイバックシステム。
  12. 前記移行入力信号は、前記ユーザインターフェイスによるユーザインタラクションに応じて生成される、請求項11に記載のサウンドトラックプレイバックシステム。
  13. 前記システムは、前記移行入力信号を生成するためにユーザにより操作可能な遠隔装置に動作可能に接続される、請求項11に記載のサウンドトラックプレイバックシステム。
  14. 前記サウンドトラックプレイバックシステムは、電子ブックシステムであり、前記テキストソースは前記出力ディスプレイに表示された電子ブックであり、前記移行入力信号は、前記ユーザインターフェイスのユーザ操作に応答して生成され、又は前記電子ブックシステム上の電子ブックのユーザナビゲーションに応答して前記電子ブックにより自動的に生成される、
    請求項11に記載のサウンドトラックプレイバックシステム。
  15. 前記サウンドトラックプレイバックシステムはさらに、ディスプレイを備え、前記テキストソースは前記出力ディスプレイで閲覧可能なオンラインテキストである、
    請求項1ないし14のいずれか1項に記載のサウンドトラックプレイバックシステム。
  16. 前記サウンドトラックプレイバックシステムはさらに、プレイバックの前に前記サウンドトラックの1又は2以上の音声特徴を修正するためにユーザにより操作可能なサウンドトラック修正モジュールを備える、
    請求項1ないし15のいずれか1項に記載のサウンドトラックプレイバックシステム。
  17. 前記サウンドトラック修正モジュールは前記ユーザにより操作可能であり、新たな音声特徴を前記サウンドトラック時系列に挿入し及び/又は前記サウンドトラック時系列中に現存する音声特徴を前記システムによってアクセス可能な音楽ライブラリ、データベース、ウェブサイト、ネットワーク及び/又はインターネットからの音声ファイルで置きかえることが可能である、
    請求項16に記載のサウンドトラックプレイバックシステム。
  18. 前記サウンドトラック修正モジュールは、自動的に新たな音声特徴を前記サウンドトラック時系列に挿入し及び/又は前記サウンドトラック時系列に現存する音声特徴を前記システムによってアクセス可能な音楽ライブラリ、データベース、ウェブサイト、ネットワーク及び/又はインターネットからの音声ファイルで置きかえるように操作可能である、 請求項16に記載のサウンドトラックプレイバックシステム。
  19. 前記サウンドトラック修正モジュールは、自動的に、新たな音声特徴として挿入するため又は現存する音声特徴を置きかえるために、前記音声ファイルの人気、ジャンル、ビート、テンポ、ピッチ、及び/又はムードのうち任意の1つ又は2つ以上を含む基準に基づいて、及び/又は、前記音声特徴が同期する、対応する前記テキストソースのシーンで生じる行動のタイプに基づいて、音声ファイルを選択するよう操作可能である、
    請求項18に記載のサウンドトラックプレイバックシステム。
  20. 前記サウンドトラック修正モジュールは、ユーザにより操作可能であり、前記サウンドトラックの1又は2以上のサウンド層を選択解除して、選択解除されたサウンド層の音声特徴がプレイバック中にミュートされるように、前記コンフィグレーション可能なサウンド層設定を修正する、
    請求項1ないし19のいずれか1項に記載のサウンドトラックプレイバックシステム。
  21. 前記サウンドトラックは、バックグラウンドミュージックに対応する1つ又は2つ以上の音声特徴を備えたミュージック層と、シーンに関連したサウンドに対応する1つ又は2つ以上の音声特徴を備えたバックグラウンド層と、前記テキストソースが読まれる際に起こるイベントにタイミングが取られたサウンド効果に対応した1つ又は2つ以上の音声特徴を備えた効果層とを有する、
    請求項1ないし20のいずれか1項に記載のサウンドトラックプレイバックシステム。
  22. 前記読み速度マッチングモジュールは、前記ユーザからの前記読み速度入力を受け取るように構成されている、
    請求項1ないし21のいずれか1項に記載のサウンドトラックプレイバックシステム。
  23. 前記読み速度マッチングモジュールは、前記テキストソースを通じて前記ユーザのナビゲーションを表す信号に基づいて前記読み速度入力を自動的に計算し、アップデートするように構成されている、
    請求項1ないし21のいずれか1項に記載のサウンドトラックプレイバックシステム。
  24. 前記サウンドトラックの各音声特徴は、プレイバックのための関連のオーディオファイルを指示するデータを含み、前記プロセッサは、前記1又は2以上のサウンドトラックデータファイルからプレイバックのための前記オーディオファイルを検索する、
    請求項1ないし23のいずれか1項に記載のサウンドトラックプレイバックシステム。
  25. 前記サウンドトラックの各音声特徴は、プレイバックのための関連のオーディオファイルを指示するデータを含み、前記プロセッサは、前記システムによってアクセス可能なネットワークデータベース又はその他の記憶媒体からプレイバックのための前記オーディオファイルを検索する、
    請求項1ないし23のいずれか1項に記載のサウンドトラックプレイバックシステム。
  26. 関連するテキストソースを読みながらユーザのためにプレイすべきデジタル複合可変持続時間型連続サウンドトラックを作成する方法であって、前記サウンドトラックは、サウンドトラック時系列と、前記ユーザの読み速度を表す読み速度入力に依存した持続時間を有し、前記方法は、
    (a)前記サウンドトラック時系列中に同時にプレイするよう配置された複数のサウンド層を作り、前記サウンドトラックを、各タイムスロットセグメントに関連したそれぞれのテキストチャンクに対応する開始及び停止マーカを定めることにより、各々が前記テキストソースのテキストチャンクに対応する複数のタイムスロットセグメントに区切り、前記読み速度入力に基づいて、前記対応するテキストチャンクのための予想読み時間に対応させるため、開始及び停止マーカの間の前記タイムスロットセグメントの前記持続時間をコンフィグレーションするステップと、
    (b)前記サウンドトラック時系列中のプリセット開始位置でプレイするように、1つ又は2つ以上の音声特徴の配列体を各サウンド層中に挿入し、各音声特徴を前記サウンドトラックの所定のタイムスロットセグメントでプレイバックするようにコンフィグレーションし、更に各音声特徴の前記プレイバックと関連した1つ又は2つ以上のプレイバック効果を定める音声プロパティをコンフィグレーションし、前記テキストソースのテキストチャンク間の移行中に連続かつギャップレスのサウンドトラックプレイバックを生じさせるステップであって、少なくとも1つのサウンド層は、前記読み速度入力に依存した可変プリセット開始位置を提供することによって、テキストソースが読まれる際に前記テキストソース中で起こるイベントに同期するようにそのプレイバックが時間合わせされている音声特徴を有し、前記ユーザの前記読み速度にそのような音声特徴のプレイバックタイミングがマッチさせられるとともに、可変プリセット開始位置を有する前記サウンドトラックの前記音声特徴のサウンド品質、ピッチ及び/又はテンポは、前記読み速度入力の変化にも関わらずプレイバックの間維持され
    (c)前記サウンド層の前記音声特徴のプレイバックプロパティを定める各サウンド層設定を介して、前記サウンド層が独立してコンフィグレーション可能となるようにコンフィグレーションするステップと、
    (d)音声特徴の前記サウンド層を、前記読み速度入力に基づく前記ユーザの前記読み速度にマッチするよう適合可能なプレイバック持続時間を有し、独立してコンフィグレーション可能な各サウンド層の前記音声特徴のプレイバックプロパティを定める、コンフィグレーション可能なサウンド層設定を有するデジタルサウンドトラックにコンパイルするステップと、を備えている、
    ことを特徴とする方法。
  27. 前記ステップ(b)はさらに、1つ又は2つ以上の音声特徴のためのプリセット停止位置をコンフィグレーションするように前記サウンドトラック作成システムを操作するステップを有し、各停止位置は、前記関連する音声特徴が前記サウンドトラック時系列中でのプレイを停止する時を定め、少なくとも1つのサウンド層は前記読み速度入力に依存した可変プリセット開始及び/又は停止位置を有し、このような音声特徴のプレイバックタイミングが、前記テキストソースが読まれる際に前記テキストソース中で起こるイベントに同期するように、前記ユーザの前記読み速度にマッチさせられる、
    請求項26に記載の方法。
  28. 前記ステップ(b)はさらに、音声特徴の前記可変プリセット開始及び/又は停止位置を、前記音声特徴がその中でプレイバックする前記それぞれの所定のタイムスロットセグメントの持続時間に依存するようにコンフィグレーションするように前記サウンドトラック作成システムを操作するステップを含む、
    請求項27記載の方法。
  29. 前記ステップ(a)は、前記音声特徴の前記プリセット開始及び/又は停止位置が前記読み速度入力とは独立した固定速度サウンド層と、前記音声特徴の前記プリセット開始及び/又は停止位置が前記読み速度入力に依存している可変読み速度サウンド層との混合体を作るように前記サウンドトラック作成システムを操作するステップを含む、
    請求項27記載の方法。
  30. 前記各音声特徴の前記プレイバックと関連した前記1つ又は2つ以上のプレイバック効果は、音量、フェードイン/フェードアウト効果、ルーピング効果、移行効果の任意の1つ又は2つ以上を含む、
    請求項26ないし29のいずれか1項に記載の方法。
JP2011516195A 2008-07-04 2009-06-16 サウンドトラックを作成してプレイする方法及びシステム Expired - Fee Related JP5816085B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
NZ569618 2008-07-04
NZ56961808 2008-07-04
PCT/NZ2009/000106 WO2010002275A2 (en) 2008-07-04 2009-06-16 Method and system for making and playing soundtracks

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015135403A Division JP6195873B2 (ja) 2008-07-04 2015-07-06 サウンドトラックを作成してプレイする方法及びシステム

Publications (3)

Publication Number Publication Date
JP2011527022A JP2011527022A (ja) 2011-10-20
JP2011527022A5 JP2011527022A5 (ja) 2013-02-28
JP5816085B2 true JP5816085B2 (ja) 2015-11-17

Family

ID=41466506

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2011516195A Expired - Fee Related JP5816085B2 (ja) 2008-07-04 2009-06-16 サウンドトラックを作成してプレイする方法及びシステム
JP2015135403A Expired - Fee Related JP6195873B2 (ja) 2008-07-04 2015-07-06 サウンドトラックを作成してプレイする方法及びシステム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2015135403A Expired - Fee Related JP6195873B2 (ja) 2008-07-04 2015-07-06 サウンドトラックを作成してプレイする方法及びシステム

Country Status (5)

Country Link
US (7) US9135333B2 (ja)
EP (1) EP2304727A4 (ja)
JP (2) JP5816085B2 (ja)
CN (1) CN102124523B (ja)
WO (1) WO2010002275A2 (ja)

Families Citing this family (92)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010002275A2 (en) 2008-07-04 2010-01-07 Isoundtrack Limited Method and system for making and playing soundtracks
CN101727949B (zh) * 2009-10-31 2011-12-07 华为技术有限公司 定位播放视频的装置、方法及系统
US8644971B2 (en) * 2009-11-09 2014-02-04 Phil Weinstein System and method for providing music based on a mood
US8825490B1 (en) * 2009-11-09 2014-09-02 Phil Weinstein Systems and methods for user-specification and sharing of background sound for digital text reading and for background playing of user-specified background sound during digital text reading
CN102687182A (zh) * 2009-11-10 2012-09-19 杜尔塞塔有限公司 用于电子视觉作品的配音的动态音频重放
US9047286B2 (en) * 2009-12-17 2015-06-02 Iheartmedia Management Services, Inc. Program and syndicated content detection
US20110184738A1 (en) 2010-01-25 2011-07-28 Kalisky Dror Navigation and orientation tools for speech synthesis
US9432746B2 (en) * 2010-08-25 2016-08-30 Ipar, Llc Method and system for delivery of immersive content over communication networks
US9699503B2 (en) 2010-09-07 2017-07-04 Opentv, Inc. Smart playlist
US10210160B2 (en) 2010-09-07 2019-02-19 Opentv, Inc. Collecting data from different sources
US9396283B2 (en) 2010-10-22 2016-07-19 Daniel Paul Miranker System for accessing a relational database using semantic queries
US9645986B2 (en) 2011-02-24 2017-05-09 Google Inc. Method, medium, and system for creating an electronic book with an umbrella policy
US9772737B1 (en) 2011-04-28 2017-09-26 Amazon Technologies, Inc. Managing content access data in a communication network
US9666227B2 (en) 2011-07-26 2017-05-30 Booktrack Holdings Limited Soundtrack for electronic text
US8612584B2 (en) * 2011-08-29 2013-12-17 Google Inc. Using eBook reading data to generate time-based information
US9141404B2 (en) 2011-10-24 2015-09-22 Google Inc. Extensible framework for ereader tools
JP5941264B2 (ja) * 2011-11-01 2016-06-29 キヤノン株式会社 情報処理装置、情報処理方法
US20130117670A1 (en) * 2011-11-04 2013-05-09 Barnesandnoble.Com Llc System and method for creating recordings associated with electronic publication
GB2510744A (en) * 2011-11-04 2014-08-13 Barnesandnoble Com Llc System and method for creating recordings associated with electronic publication
US9031493B2 (en) * 2011-11-18 2015-05-12 Google Inc. Custom narration of electronic books
US20130131849A1 (en) * 2011-11-21 2013-05-23 Shadi Mere System for adapting music and sound to digital text, for electronic devices
US20130268826A1 (en) * 2012-04-06 2013-10-10 Google Inc. Synchronizing progress in audio and text versions of electronic books
JP2015517684A (ja) * 2012-05-07 2015-06-22 オーディブル・インコーポレイテッドAudible, Inc. コンテンツのカスタマイズ
US9535885B2 (en) 2012-06-28 2017-01-03 International Business Machines Corporation Dynamically customizing a digital publication
US9047356B2 (en) 2012-09-05 2015-06-02 Google Inc. Synchronizing multiple reading positions in electronic books
US9870128B1 (en) * 2013-02-19 2018-01-16 Audible, Inc. Rule-based presentation of related content items
US9836271B2 (en) * 2013-07-17 2017-12-05 Booktrack Holdings Limited Delivery of synchronised soundtracks for electronic media content
US20150039991A1 (en) * 2013-08-01 2015-02-05 Booktrack Holdings Limited Creation system for producing synchronised soundtracks for electronic media content
US10080060B2 (en) 2013-09-10 2018-09-18 Opentv, Inc. Systems and methods of displaying content
US20150074728A1 (en) * 2013-09-10 2015-03-12 Opentv, Inc. Systems and methods of displaying content
IN2014DE02666A (ja) 2013-09-18 2015-06-26 Booktrack Holdings Ltd
US11688377B2 (en) 2013-12-06 2023-06-27 Intelliterran, Inc. Synthesized percussion pedal and docking station
US9875218B2 (en) 2014-01-28 2018-01-23 International Business Machines Corporation Document summarization
US9454342B2 (en) 2014-03-04 2016-09-27 Tribune Digital Ventures, Llc Generating a playlist based on a data generation attribute
US9431002B2 (en) 2014-03-04 2016-08-30 Tribune Digital Ventures, Llc Real time popularity based audible content aquisition
US9798509B2 (en) 2014-03-04 2017-10-24 Gracenote Digital Ventures, Llc Use of an anticipated travel duration as a basis to generate a playlist
JP5943436B2 (ja) * 2014-06-30 2016-07-05 シナノケンシ株式会社 テキストデータと読み上げ音声データとの同期処理装置および同期処理プログラム
US10249205B2 (en) * 2015-06-08 2019-04-02 Novel Effect, Inc. System and method for integrating special effects with a text source
CN105159988B (zh) * 2015-08-28 2018-08-21 广东小天才科技有限公司 一种浏览照片的方法及装置
CN105335455A (zh) * 2015-08-28 2016-02-17 广东小天才科技有限公司 一种阅读文字的方法及装置
WO2017109759A1 (en) * 2015-12-23 2017-06-29 Booktrack Holdings Limited System and method for the creation and playback of soundtrack-enhanced audiobooks
US9959343B2 (en) * 2016-01-04 2018-05-01 Gracenote, Inc. Generating and distributing a replacement playlist
US11470365B2 (en) 2016-03-17 2022-10-11 Melanie Schulz Video reader with music word learning feature
US11042548B2 (en) 2016-06-19 2021-06-22 Data World, Inc. Aggregation of ancillary data associated with source data in a system of networked collaborative datasets
US10324925B2 (en) 2016-06-19 2019-06-18 Data.World, Inc. Query generation for collaborative datasets
US11023104B2 (en) 2016-06-19 2021-06-01 data.world,Inc. Interactive interfaces as computerized tools to present summarization data of dataset attributes for collaborative datasets
US10824637B2 (en) 2017-03-09 2020-11-03 Data.World, Inc. Matching subsets of tabular data arrangements to subsets of graphical data arrangements at ingestion into data driven collaborative datasets
US10853376B2 (en) 2016-06-19 2020-12-01 Data.World, Inc. Collaborative dataset consolidation via distributed computer networks
US10747774B2 (en) 2016-06-19 2020-08-18 Data.World, Inc. Interactive interfaces to present data arrangement overviews and summarized dataset attributes for collaborative datasets
US10353911B2 (en) 2016-06-19 2019-07-16 Data.World, Inc. Computerized tools to discover, form, and analyze dataset interrelations among a system of networked collaborative datasets
US11675808B2 (en) 2016-06-19 2023-06-13 Data.World, Inc. Dataset analysis and dataset attribute inferencing to form collaborative datasets
US11036697B2 (en) 2016-06-19 2021-06-15 Data.World, Inc. Transmuting data associations among data arrangements to facilitate data operations in a system of networked collaborative datasets
US10438013B2 (en) 2016-06-19 2019-10-08 Data.World, Inc. Platform management of integrated access of public and privately-accessible datasets utilizing federated query generation and query schema rewriting optimization
US11947554B2 (en) 2016-06-19 2024-04-02 Data.World, Inc. Loading collaborative datasets into data stores for queries via distributed computer networks
US11755602B2 (en) 2016-06-19 2023-09-12 Data.World, Inc. Correlating parallelized data from disparate data sources to aggregate graph data portions to predictively identify entity data
US11334625B2 (en) 2016-06-19 2022-05-17 Data.World, Inc. Loading collaborative datasets into data stores for queries via distributed computer networks
US11941140B2 (en) 2016-06-19 2024-03-26 Data.World, Inc. Platform management of integrated access of public and privately-accessible datasets utilizing federated query generation and query schema rewriting optimization
US11036716B2 (en) 2016-06-19 2021-06-15 Data World, Inc. Layered data generation and data remediation to facilitate formation of interrelated data in a system of networked collaborative datasets
US11468049B2 (en) 2016-06-19 2022-10-11 Data.World, Inc. Data ingestion to generate layered dataset interrelations to form a system of networked collaborative datasets
US11042537B2 (en) 2016-06-19 2021-06-22 Data.World, Inc. Link-formative auxiliary queries applied at data ingestion to facilitate data operations in a system of networked collaborative datasets
US11042560B2 (en) 2016-06-19 2021-06-22 data. world, Inc. Extended computerized query language syntax for analyzing multiple tabular data arrangements in data-driven collaborative projects
US11042556B2 (en) 2016-06-19 2021-06-22 Data.World, Inc. Localized link formation to perform implicitly federated queries using extended computerized query language syntax
US10645548B2 (en) 2016-06-19 2020-05-05 Data.World, Inc. Computerized tool implementation of layered data files to discover, form, or analyze dataset interrelations of networked collaborative datasets
US11068847B2 (en) 2016-06-19 2021-07-20 Data.World, Inc. Computerized tools to facilitate data project development via data access layering logic in a networked computing platform including collaborative datasets
US10452975B2 (en) 2016-06-19 2019-10-22 Data.World, Inc. Platform management of integrated access of public and privately-accessible datasets utilizing federated query generation and query schema rewriting optimization
US11086896B2 (en) 2016-06-19 2021-08-10 Data.World, Inc. Dynamic composite data dictionary to facilitate data operations via computerized tools configured to access collaborative datasets in a networked computing platform
US10452677B2 (en) 2016-06-19 2019-10-22 Data.World, Inc. Dataset analysis and dataset attribute inferencing to form collaborative datasets
US20180032305A1 (en) 2016-07-29 2018-02-01 Paul Charles Cameron Systems and methods for automatic-creation of soundtracks for text
US10698951B2 (en) 2016-07-29 2020-06-30 Booktrack Holdings Limited Systems and methods for automatic-creation of soundtracks for speech audio
WO2018034371A1 (ko) * 2016-08-19 2018-02-22 스노우 주식회사 동영상 처리 장치, 방법 및 컴퓨터 프로그램
US10565980B1 (en) 2016-12-21 2020-02-18 Gracenote Digital Ventures, Llc Audio streaming of text-based articles from newsfeeds
US10019225B1 (en) 2016-12-21 2018-07-10 Gracenote Digital Ventures, Llc Audio streaming based on in-automobile detection
US10419508B1 (en) 2016-12-21 2019-09-17 Gracenote Digital Ventures, Llc Saving media for in-automobile playout
US10600337B2 (en) * 2017-01-31 2020-03-24 Bank Of America Corporation Intelligent content parsing with synthetic speech and tangible braille production
US11238109B2 (en) 2017-03-09 2022-02-01 Data.World, Inc. Computerized tools configured to determine subsets of graph data arrangements for linking relevant data to enrich datasets associated with a data-driven collaborative dataset platform
US11068453B2 (en) 2017-03-09 2021-07-20 data.world, Inc Determining a degree of similarity of a subset of tabular data arrangements to subsets of graph data arrangements at ingestion into a data-driven collaborative dataset platform
FR3066290A1 (fr) * 2017-05-10 2018-11-16 Via Fabula Procede et dispositif de declenchement d'effets synchronise a la lecture d'elements textuels d'un contenu numerique
US10062367B1 (en) * 2017-07-14 2018-08-28 Music Tribe Global Brands Ltd. Vocal effects control system
CN111615729A (zh) 2017-08-29 2020-09-01 英特尔利特然有限公司 记录和渲染多媒体的装置、系统和方法
US10922308B2 (en) * 2018-03-20 2021-02-16 Data.World, Inc. Predictive determination of constraint data for application with linked data in graph-based datasets associated with a data-driven collaborative dataset platform
US11243960B2 (en) 2018-03-20 2022-02-08 Data.World, Inc. Content addressable caching and federation in linked data projects in a data-driven collaborative dataset platform using disparate database architectures
USD940169S1 (en) 2018-05-22 2022-01-04 Data.World, Inc. Display screen or portion thereof with a graphical user interface
US11947529B2 (en) 2018-05-22 2024-04-02 Data.World, Inc. Generating and analyzing a data model to identify relevant data catalog data derived from graph-based data arrangements to perform an action
USD940732S1 (en) 2018-05-22 2022-01-11 Data.World, Inc. Display screen or portion thereof with a graphical user interface
US11442988B2 (en) 2018-06-07 2022-09-13 Data.World, Inc. Method and system for editing and maintaining a graph schema
CN108900902B (zh) * 2018-07-06 2020-06-09 北京微播视界科技有限公司 确定视频背景音乐的方法、装置、终端设备及存储介质
CN112740327A (zh) * 2018-08-27 2021-04-30 谷歌有限责任公司 故事读者阅读中断的算法确定
EP3841458A1 (en) * 2019-11-14 2021-06-30 Google LLC Automatic audio playback of displayed textual content
CN111324330B (zh) * 2020-02-07 2021-04-30 掌阅科技股份有限公司 电子书的播放处理方法、计算设备及计算机存储介质
CN111506744B (zh) * 2020-04-07 2024-03-19 广东小天才科技有限公司 一种点读的方法及终端设备
CN112151004A (zh) * 2020-09-23 2020-12-29 大众问问(北京)信息科技有限公司 一种混合播报方法、装置、设备及存储介质
US11947600B2 (en) 2021-11-30 2024-04-02 Data.World, Inc. Content addressable caching and federation in linked data projects in a data-driven collaborative dataset platform using disparate database architectures

Family Cites Families (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5111409A (en) * 1989-07-21 1992-05-05 Elon Gasper Authoring and use systems for sound synchronized animation
JPH05314732A (ja) * 1992-05-11 1993-11-26 Casio Comput Co Ltd 携帯型表示装置
US5611018A (en) * 1993-09-18 1997-03-11 Sanyo Electric Co., Ltd. System for controlling voice speed of an input signal
IL110883A (en) 1994-09-05 1997-03-18 Ofer Bergman Reading tutorial system
JP3433532B2 (ja) * 1994-09-30 2003-08-04 日本ビクター株式会社 電子ブック装置
JPH08123976A (ja) * 1994-10-28 1996-05-17 Matsushita Electric Ind Co Ltd アニメーション作成装置
AU1082397A (en) 1995-12-14 1997-07-03 Motorola, Inc. Apparatus and method for storing and presenting text
US20010044588A1 (en) * 1996-02-22 2001-11-22 Mault James R. Monitoring system
US6154757A (en) * 1997-01-29 2000-11-28 Krause; Philip R. Electronic text reading environment enhancement method and apparatus
US7228280B1 (en) * 1997-04-15 2007-06-05 Gracenote, Inc. Finding database match for file based on file characteristics
JP3544118B2 (ja) * 1998-03-31 2004-07-21 シャープ株式会社 電子書籍表示装置及びコンピュータ読み取り可能な記録媒体
US20040080541A1 (en) * 1998-03-20 2004-04-29 Hisashi Saiga Data displaying device
US6195640B1 (en) * 1999-01-29 2001-02-27 International Business Machines Corporation Audio reader
JP2001005837A (ja) * 1999-05-28 2001-01-12 Mitsubishi Electric Inf Technol Center America Inc リーディングシステムおよび印刷物のリーディングを補足する方法
US6763995B1 (en) 1999-08-09 2004-07-20 Pil, L.L.C. Method and system for illustrating sound and text
US6263308B1 (en) * 2000-03-20 2001-07-17 Microsoft Corporation Methods and apparatus for performing speech recognition using acoustic models which are improved through an interactive process
US20070042332A1 (en) 2000-05-20 2007-02-22 Young-Hie Leem System and method for providing customized contents
US20020054073A1 (en) * 2000-06-02 2002-05-09 Yuen Henry C. Electronic book with indexed text-to-audio switching capabilities
US6535269B2 (en) 2000-06-30 2003-03-18 Gary Sherman Video karaoke system and method of use
WO2002017040A2 (en) * 2000-08-18 2002-02-28 Trendmasters, Inc. Digital book educational amusement device
JP2002162984A (ja) * 2000-11-28 2002-06-07 Sharp Corp 音声読書装置
US6792243B2 (en) * 2000-12-21 2004-09-14 Vtech Electronics Limited Electronic book with simulated three-dimensional illustrations
US7020663B2 (en) 2001-05-30 2006-03-28 George M. Hay System and method for the delivery of electronic books
US20030014630A1 (en) 2001-06-27 2003-01-16 Spencer Donald J. Secure music delivery
US6925613B2 (en) * 2001-08-30 2005-08-02 Jim Gibson Strobe reading technology and device
US7897865B2 (en) * 2002-01-15 2011-03-01 Yamaha Corporation Multimedia platform for recording and/or reproducing music synchronously with visual images
US20030158735A1 (en) * 2002-02-15 2003-08-21 Canon Kabushiki Kaisha Information processing apparatus and method with speech synthesis function
US7224934B2 (en) * 2002-03-05 2007-05-29 Jeffrey D Mullen Talking book employing photoelectronics for autonomous page recognition
US20030200858A1 (en) * 2002-04-29 2003-10-30 Jianlei Xie Mixing MP3 audio and T T P for enhanced E-book application
JP4038081B2 (ja) 2002-06-25 2008-01-23 日本放送協会 楽曲選択型コンテンツ再生装置、そのプログラム
AU2002345258A1 (en) * 2002-07-04 2004-01-23 Nokia Corporation Method and device for reproducing multi-track data according to predetermined conditions
US7228054B2 (en) * 2002-07-29 2007-06-05 Sigmatel, Inc. Automated playlist generation
JP2004192560A (ja) * 2002-12-13 2004-07-08 Casio Comput Co Ltd 電子データ再生装置、電子文章表示装置、電子文章表示方法、プログラム及び記録媒体
US8064753B2 (en) * 2003-03-05 2011-11-22 Freeman Alan D Multi-feature media article and method for manufacture of same
CA2536260A1 (en) 2003-08-26 2005-03-03 Clearplay, Inc. Method and apparatus for controlling play of an audio signal
EP1538536A1 (en) * 2003-12-05 2005-06-08 Sony International (Europe) GmbH Visualization and control techniques for multimedia digital content
US20070215686A1 (en) * 2004-01-22 2007-09-20 Matson Craig E Automated teller machine voice guidance system and method
JP4217693B2 (ja) * 2004-05-07 2009-02-04 パナソニック株式会社 電子書籍装置
JP4142669B2 (ja) * 2004-05-11 2008-09-03 松下電器産業株式会社 電子書籍装置および電子書籍装置における表示方法
US20050286546A1 (en) 2004-06-21 2005-12-29 Arianna Bassoli Synchronized media streaming between distributed peers
US9635312B2 (en) 2004-09-27 2017-04-25 Soundstreak, Llc Method and apparatus for remote voice-over or music production and management
US20060075354A1 (en) * 2004-10-05 2006-04-06 Elizabeth Harpel Experience digitally recorded book
JP2006186920A (ja) * 2004-12-28 2006-07-13 Pioneer Electronic Corp 情報再生装置および情報再生方法
WO2006100645A2 (en) 2005-03-24 2006-09-28 Koninklijke Philips Electronics, N.V. Immersive reading experience using eye tracking
US20080140702A1 (en) * 2005-04-07 2008-06-12 Iofy Corporation System and Method for Correlating a First Title with a Second Title
JP2006331257A (ja) * 2005-05-30 2006-12-07 Sharp Corp 電子書籍装置
JP4296514B2 (ja) * 2006-01-23 2009-07-15 ソニー株式会社 音楽コンテンツ再生装置、音楽コンテンツ再生方法及び音楽コンテンツ再生プログラム
JP4382045B2 (ja) * 2006-01-24 2009-12-09 シャープ株式会社 データ出力装置、データ出力方法、データ出力プログラム、および記録媒体
US20080005656A1 (en) * 2006-06-28 2008-01-03 Shu Fan Stephen Pang Apparatus, method, and file format for text with synchronized audio
US8301658B2 (en) 2006-11-03 2012-10-30 Google Inc. Site directed management of audio components of uploaded video files
US20080140413A1 (en) * 2006-12-07 2008-06-12 Jonathan Travis Millman Synchronization of audio to reading
JP5029167B2 (ja) * 2007-06-25 2012-09-19 富士通株式会社 音声読み上げのための装置、プログラム及び方法
EP2179860A4 (en) * 2007-08-23 2010-11-10 Tunes4Books S L METHOD AND SYSTEM FOR ADAPTING THE REPRODUCTION SPEED OF THE TEXT-ASSOCIATED AUDIO TAPE AT THE READING SPEED OF A USER
WO2009086308A1 (en) * 2007-12-21 2009-07-09 Booksync, Llc Method and apparatus for integrating audio and/or video with a book
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
WO2010002275A2 (en) 2008-07-04 2010-01-07 Isoundtrack Limited Method and system for making and playing soundtracks
US20100324895A1 (en) * 2009-01-15 2010-12-23 K-Nfb Reading Technology, Inc. Synchronization for document narration
CA2754173C (en) * 2009-03-03 2016-12-06 Centre De Recherche Informatique De Montreal (Crim) Adaptive videodescription player
US8644971B2 (en) * 2009-11-09 2014-02-04 Phil Weinstein System and method for providing music based on a mood
CN102687182A (zh) 2009-11-10 2012-09-19 杜尔塞塔有限公司 用于电子视觉作品的配音的动态音频重放
US9666227B2 (en) 2011-07-26 2017-05-30 Booktrack Holdings Limited Soundtrack for electronic text
US9880805B1 (en) 2016-12-22 2018-01-30 Brian Howard Guralnick Workout music playback machine

Also Published As

Publication number Publication date
US20150347084A1 (en) 2015-12-03
US20160085503A1 (en) 2016-03-24
EP2304727A4 (en) 2013-10-02
JP6195873B2 (ja) 2017-09-13
JP2011527022A (ja) 2011-10-20
US20150347082A1 (en) 2015-12-03
US10095465B2 (en) 2018-10-09
EP2304727A2 (en) 2011-04-06
US9223864B2 (en) 2015-12-29
US9135333B2 (en) 2015-09-15
CN102124523B (zh) 2014-08-27
JP2015193260A (ja) 2015-11-05
US10140082B2 (en) 2018-11-27
US10095466B2 (en) 2018-10-09
US20150347083A1 (en) 2015-12-03
WO2010002275A3 (en) 2010-03-04
US20110153047A1 (en) 2011-06-23
US20140052283A1 (en) 2014-02-20
CN102124523A (zh) 2011-07-13
WO2010002275A2 (en) 2010-01-07
US10255028B2 (en) 2019-04-09
US20150348532A1 (en) 2015-12-03

Similar Documents

Publication Publication Date Title
JP6195873B2 (ja) サウンドトラックを作成してプレイする方法及びシステム
JP2011527022A5 (ja)
US11314936B2 (en) System and method for assembling a recorded composition
US20080215172A1 (en) Non-Linear Presentation of Content
JP4328807B2 (ja) 音楽再生装置、方法、記録媒体、および集積回路
JP2014520352A (ja) エンハンスされたメディア記録およびプレイバック
JP2005285285A (ja) コンテンツ読出装置及び楽曲再生装置
JP2006267265A (ja) 自動演奏データ処理装置および自動演奏データ処理方法を実現するためのプログラム
LeVitus GarageBand for dummies
JP4301190B2 (ja) 自動演奏データ処理装置および自動演奏データ処理方法を実現するためのプログラム
Durdik Help Composing Your Song with Notes on GarageBand Menus
Plummer Apple Training Series: GarageBand 09
JP2007257731A (ja) オーディオ再生方法及びオーディオ装置
Durdik Fiddlin’with the Functions Around the GarageBand Workspace
JP2007257737A (ja) 音楽再生装置及び電子機器
KR20040044072A (ko) 인터넷상의 노래연습장치

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120618

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130110

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130207

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130501

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130807

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140226

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140515

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140522

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140826

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150304

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150811

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20150819

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150914

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150925

R150 Certificate of patent or registration of utility model

Ref document number: 5816085

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees