JP2010238242A - 複数の音楽ファイルに対するアクセスを提供する方法、システム、およびユーザ・インターフェース・システム - Google Patents

複数の音楽ファイルに対するアクセスを提供する方法、システム、およびユーザ・インターフェース・システム Download PDF

Info

Publication number
JP2010238242A
JP2010238242A JP2010103855A JP2010103855A JP2010238242A JP 2010238242 A JP2010238242 A JP 2010238242A JP 2010103855 A JP2010103855 A JP 2010103855A JP 2010103855 A JP2010103855 A JP 2010103855A JP 2010238242 A JP2010238242 A JP 2010238242A
Authority
JP
Japan
Prior art keywords
user
audio
music
interface
cue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010103855A
Other languages
English (en)
Other versions
JP4993324B2 (ja
Inventor
Steve Mannheimer
マンハイマー,ステイーブ
Barry Jay Weber
ジエイ ウエバー,バリー
Kerry Wayne Calvert
ウエイン カルバート,ケリー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2010238242A publication Critical patent/JP2010238242A/ja
Application granted granted Critical
Publication of JP4993324B2 publication Critical patent/JP4993324B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B19/00Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
    • G11B19/02Control of operating function, e.g. switching from recording to reproducing
    • G11B19/022Control panels
    • G11B19/025'Virtual' control panels, e.g. Graphical User Interface [GUI]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/002Programmed access in sequence to a plurality of record carriers or indexed parts, e.g. tracks, thereof, e.g. for editing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2545CDs

Abstract

【課題】情報を表すオーディオ・キューを用いて大量の情報(オーディオ・ファイル、テキスト・ファイル、ビデオ・ファイル、デバイス機能など)を検索するシステムおよび方法を提供する。
【解決手段】オーディオ・キュー82は、ユーザが大別カテゴリ(例えば音楽分類)を選択して、特定のデータ・セグメント(例えば、特定の歌または歌リスト)まで検索していくことができるように、マルチレベル木データ構造70になっている。各オーディオ・キュー82は、所定数の追加のオーディオ・キュー82または特定のデータ・セグメントを表す短い連続音(例えば、特定の歌の歌詞)である。オーディオ・キュー82はユーザが選択することができ、オーディオ・キューにより、ユーザは、視覚要素または文字(例えば、曲のタイトル、アーティスト名、トラック番号)を覚えなくても情報またはデータ・セグメントを検索することができる。
【選択図】図3

Description

本発明は、情報システムのユーザ・インターフェースに関する。特に、データ・セグメントのナビゲーション(navigation)および操作(manupulation)を補助するために、音響(acoustic:アコーステック)インターフェースを使用することに関する。
グラフィカル・ユーザ・インターフェース(Graphical User Interface:GUI)は、ユーザが大量のデータを容易に検索できるようにするためにしばしば使用される。例えば、ユーザが大量のMP3オーディオ・ファイルをパーソナル・コンピュータのハード・ディスク・ドライブにダウンロードした場合、記憶したMP3オーディオ・ファイルの表示リストを端から端まで探して所望のファイルを見つけることは、面倒な作業になることがある。この検索プロセスを容易にするために、オーディオ・ファイルを様々なユーザ定義フォルダに格納できるようにするグラフィカル・ユーザ・インターフェース(GUI)を、ユーザは使用することができる。従って、ユーザは、関係のあるオーディオ・ファイルを所定のフォルダに所定の順序で格納することができる。例えば、ユーザは、カントリー・ミュージックに関係のある全てのオーディオ・ファイルを識別して、これらのカントリー・ミュージック・オーディオ・ファイルを「カントリー・ミュージック」フォルダに格納することができる。更に、ユーザは、アーティスト、アルバム・タイトルおよび/または曲名でカントリー・ミュージックを更に分類するサブ・フォルダを「カントリー・ミュージック」フォルダ内に作成することができる。その後は、大量のMP3オーディオ・ファイルを素早く調べて、或る音楽ジャンル、或るアーティスト、或るアルバムおよび/または或る曲に関連のある特定のオーディオ・ファイルの位置を見つけることができる。グラフィカル・ユーザ・インターフェース(GUI)により、ユーザはより簡単に所望のオーディオ・ファイルの位置を見つけることができるが、グラフィカル・ユーザ・インターフェース(GUI)には幾つかの欠点がある。
欠点の1つは、グラフィカル・ユーザ・インターフェース(GUI)が、オーディオ・ファイルに関する視覚要素または英数字などの文字を覚えるユーザの記憶力に頼っていることである。音楽の場合には、ユーザは通常、所望のボーカル曲またはインストルメンタル曲のジャンル、アーティスト、アルバムおよび/またはタイトルを記憶していなければならない。しかし、1つの歌の中の幾つかの言葉や、1曲の中の一部の旋律しか覚えていないこともある。このような場合には、ユーザは、どの視覚要素が所望の歌を表すのかを推測して所望の歌を見つけなければならない。
もう1つの欠点は、グラフィカル・ユーザ・インターフェース(GUI)が提供されないか、あるいは、提供はされていても使用しにくい環境にユーザがいることがある。例えば、運転者が複数のコンパクト・ディスクを再生できるマルチCD格納装置を多くの自動車が備えるようになっている。こうしたマルチCD格納装置は、格納装置内のコンパクト・ディスク数および所定のコンパクト・ディスクのトラック数を表示するだけの原始的なグラフィカル・ユーザ・インターフェース(GUI)を備えている場合がある。その結果、運転者は、格納装置内の各コンパクト・ディスクの識別番号および全てのコンパクト・ディスクの全ての曲のトラック番号を覚えていない場合には、所望のオーディオ・コンテンツに行き着くまで、コンパクト・ディスクのトラックをやみくもに探さなければならない。これより進化したグラフィカル・ユーザ・インターフェース(GUI)が備わっている場合も、運転者はやはり所望の曲に関連する視覚要素(例えば、アルバム、アーティストおよび/またはタイトル)を覚えなければならない。更に、所望の曲に関連する視覚要素を覚えていたとしても、運転者は、安全に自分の意識を周囲の運転状況からそらしてグラフィカル・ユーザ・インターフェース(GUI)に表示される視覚要素を探し出すことができないこともある。
本発明は、これらの欠点を解決することを目的とする。
簡単に述べると、本発明は、当該情報を表すオーディオ・キュー(audio cue:音声の手掛かり)を用いて大量の情報(オーディオ・ファイル、テキスト・ファイル、ビデオ・ファイル、デバイス機能など)を検索するシステムおよび方法に関する。オーディオ・キューは、ユーザが大別カテゴリ(例えば、音楽分類)を選択して、特定のデータ・セグメント(例えば、特定の歌または歌リスト)まで検索していくことができるように、マルチレベル木データ構造になっている。各オーディオ・キューは、所定数の追加のオーディオ・キューまたは特定のデータ・セグメントを表す短い連続音(brief burst of sound)(例えば、特定の歌の歌詞)である。オーディオ・キューはユーザが選択することができ、オーディオ・キューにより、ユーザは、視覚要素または文字(例えば、曲のタイトル、アーティスト名、トラック番号)を覚えなくても情報またはデータ・セグメントを検索することができる。オーディオ・キューは、無線デバイス(例えば、遠隔制御(リモート・コントロール:リモコン)または無線マウス)または有線デバイス(例えば、キーボード、トラックボール、またはタッチ・パッド)を用いてアクセスすることができる記憶装置に記憶される。無線または有線デバイスを操作することにより、ユーザは、(スピーカが発生する)オーディオ・キューのマルチレベル木データ構造を検索して、所望のデータ・セグメントを見つけることができる。
本発明の特徴は、複数のデータ・セグメントへのアクセスを提供する方法を含んでいる。この方法は、所定数の記憶されたオーディオ・キューまたはデータ・セグメントをそれぞれ表す複数のオーディオ・キューをメモリに記憶するステップと、第1の所定数の記憶されたオーディオ・キューに対するアクセスを提供するステップと、第1のユーザ要求に応答して、第1の所定数の記憶されたオーディオ・キューのうちの1つを再生するステップと、第2のユーザ要求に応答して、データ・セグメントまたは第2の所定数の記憶されたオーディオ・キューのうちの1つを取り出すステップとを含んでいる。
本発明の別の特徴は、ユーザ・インターフェース・システムを含んでいる。このユーザ・インターフェース・システムは、データ・セグメントのソース(源)に通信可能に接続されたデータ・セグメント・インターフェースと、データ・セグメントとそれぞれ関連づけられる複数のオーディオ・キューを記憶したコンピュータ可読媒体に通信可能に接続されるコンピュータ可読媒体インターフェースと、ユーザ入力に応答して要求を送信するデバイスと、オーディオ・システムに通信可能に接続されたオーディオ・インターフェースと、コンピュータ可読媒体からオーディオ・キューを取り出し、受信した要求に応答してオーディオ・システム上で取り出したオーディオ・キューを再生するプロセッサとを含んでいる。
本発明の更に別の特徴は、コンピュータ可読媒体に記憶されたオーディオ・キューのマルチレベル・データ木構造を含んでいることである。各レベルは、所定数のオーディオ・キューを含んでいる。所定のレベルの各オーディオ・キューは、マルチレベル・データ木構造内の別のレベルまたはデータ・セグメントにリンクされる。
本発明の音響インターフェースをサポートするように構成された例示的なコンピュータ・システムを示すブロック図である。 本発明の音響インターフェースの仮想円弧に沿った図1のシステムの遠隔制御装置の動きを示すブロック図である。 本発明の音響インターフェースのオーディオ・キューの例示的なマルチレベル木データ構造を示す図である。 本発明の音響インターフェースのオーディオ・キューの別の例示的なマルチレベル木データ構造を示す図である。 本発明の音響インターフェースを使用してオーディオ情報を検索する方法を示すフローチャートである。 本発明の音響インターフェースを使用してオーディオ情報を検索する方法を示すフローチャートである。 本発明の音響インターフェースを管理する例示的なグラフィカル・ユーザ・インターフェースを示す図である。 本発明の音響インターフェースのオーディオ・キューの更に別の例示的なマルチレベル木データ構造を示す図である。
本発明の特徴および利点は、例示を目的として与える以下の説明を読めばより明らかになるであろう。
図1を参照すると、本発明をサポートするように構成されたコンピュータ・システム10の幾つかの構成要素が示してある。コンピュータ・システム10は、中央処理装置(CPU)14と、メモリ部16と、入出力(I/O)部18とを有するプロセッサ12を含んでいる。メモリ部16は、揮発性でも不揮発性でもよく、取外し可能なフラッシュ・カード・メモリを含んでいてもよい。I/O部18は、応答マシン20と、ディスプレイ・ユニット22、キーボード24と、スピーカ・システム26と、CD−ROM媒体からデータを読み取ることができ、且つ好ましくは複数のCDを格納するCD格納ユニットを含むコンパクト・ディスク(CD)ユニット28と、CDから読み取った、またはインターネットからダウンロードしたオーディオ・ファイルなどのファイルを格納するデータベース30とに接続される。プロセッサ12はネットワーク・インターフェース32を有し、このネットワーク・インターフェース32により、コンピュータ・システム10は、インターネット34を介して通信することができ、遠隔データベースから複数のフォーマット(例えば、MP3、MIDIなど)のオーディオ・ファイルを取り出すことができるように構成されている。また、ネットワーク・インターフェース32は、コンピュータ・システム10がインターネット・ラジオ・ソースからオーディオ・コンテンツを受信することも可能にする。プロセッサ12は、無線周波数(RF)受信機インターフェース36を含み、このRF受信機インターフェース36により、コンピュータ・システム10は、以下で更に詳細に述べるように、本発明による一対の無線周波数(RF)受信機38を介して遠隔制御装置および/またはポインティング・デバイス40から信号を受信することができる。
本明細書に記載の本発明は、コンピュータ・システム10のこれらのユニットが全て存在することに左右されるものではなく、追加のオーディオ・データ・ソース(源)を含むこともできることは、当業者なら理解できるであろう。例えば、本発明では、ユーザに対して再生しようとするオーディオ・データが、その情報にアクセスしているコンピュータのメモリ中にしばしば存在するので、コンピュータ・システム10をインターネットに接続するネットワーク・インターフェースが不要である。更に、プロセッサ12は、デスクトップ・コンピュータ、ラップトップ・コンピュータ、ステレオ・システム、ホーム・エンターテインメント・センタ、自動車用音楽システム、家庭用装置など複数の電子装置のうちの1つに存在していてもよいことは、当業者なら理解できるであろう。従って、本発明の音響インターフェースは、オーディオ・データ・セグメントをユーザが検索することを容易にするということのみに限定されるものではない。この音響インターフェースは、テキスト・ファイルやビデオ・ファイルなどその他のデータ・セグメントをより容易にユーザが操作できるようにし、様々な電子装置をより簡単にユーザが遠隔制御できるようにする。
次に、図2を参照すると、ポインティング・デバイス40が、音響インターフェースの仮想円弧(virtual arc:バーチャル・アーク)50に沿って移動する際のポインティング・デバイス40と無線周波数(RF)受信機38の間の通信が示されている。図2に示すように、ポインティング・デバイス40は、一対をなす無線周波数(RF)送信機42および44をその両端に含んでいる。ポインティング・デバイス40が、仮想円弧50に沿って移動すると、送信機42および44はそれぞれ無線周波数(RF)信号46および48を生成する。RF受信機38はこれらの信号を受信し、RF受信機インターフェース36およびCPU14(図1に示す)と協働して当業者には既知の方法でこれらの信号を処理して、仮想円弧50に沿ったポインティング・デバイス40の位置を決定する。あるいは、ポインティング・デバイス40は、単一源信号(即ち、コンピュータ・システム10の送信機から送信される信号)を検出する4つの無線周波数(RF)センサと、これらのセンサからの入力を処理して仮想円弧50に沿ったポインティング・デバイス40の位置を決定するCPUとを含んでいてもよい。この場合、コンピュータ・システム10が仮想円弧50に沿ったポインティング・デバイス40の位置を追跡することができるように、位置決めデータはコンピュータ・システム10に返信される。ポインティング・デバイス40は好ましい遠隔制御装置として示されているが、方向指示矢印やトラックボールなどを有する従来の遠隔制御装置を使用することも本発明の範囲内のものである。従来の遠隔制御装置を使用する場合には、仮想グリッド(grid:格子、ます目)や仮想マトリックス(matrix:行列)などの仮想構成を検索するのに、ユーザが方向指示ボタンまたはトラックボールを水平または垂直に操作するだけになることに留意されたい。また、有線制御装置(例えば、制御パッド、タッチ・パッド、ジョイスティック、トラックボールなど)を使用することも本発明の範囲内のものであることにも留意されたい。
ポインティング・デバイス40は、複数の機能ボタン、トグル・スイッチ(toggle)、サム・ホイール(thumb wheel)などを含むことが好ましい。例示的なボタンとしては、ユーザが仮想円弧50上の所定の仮想円弧点52〜60を選択できるようにする「選択(select:セレクト)」ボタン、ユーザがオーディオ・キュー・ツリー(木構造)(図3および図4に示す)内でオーディオ・キュー・レベルを検索できるようにする「ナビゲーション(navigation)」ボタン、ボリュームを調節するサム・ホイール、「一時停止(pause:ポーズ)」ボタン、「早送り(FF:Fast−Forward)」ボタン、「巻戻し(rewind)」ボタン、「スキップ(skip)」ボタン、「電源(power:パワー)」ボタンなどが挙げられる。更に、別の従来のオーディオ制御のためのその他のボタンを使用することも本発明の範囲内のものである。
仮想円弧50は、コンピュータ・システム10のメモリに記憶されたオーディオ・キューに対応する複数の点52〜60を含んでいる。以下で更に詳細に述べるように、オーディオ・キューは、ユーザが大別(general)カテゴリ(例えば、音楽分類(claasification))を選択して、特定のオーディオ情報セグメント(例えば、特定の歌または歌リスト)まで検索していくことができるように、マルチ(多)レベル木データ構造(milti−level tree data structure)になっている。仮想円弧50は、ユーザの正面の仮想点(virtual point)56を中心に約90〜120度の円弧に沿って懐中電灯で照らすように動くユーザの腕が描く自然な軌道とほぼ一致する。プロセッサ12は、ポインティング・デバイス40が仮想円弧50の点52〜56のうちの1つの近傍にあると判定すると、記憶装置(例えば、メモリ16、データベース30、またはインターネット34を介してアクセスされる遠隔データベース)に記憶されたオーディオ・キューを取り出し、このオーディオ・キューを処理してスピーカ26がこのオーディオ・キューを発生するようにする。オーディオ・キューは、仮想円弧50の所定の点52〜56に割り当てられたオーディオ・コンテンツを表す短い(約2〜5秒)連続音であることが好ましい。以下で更に詳細に説明するように、オーディオ・キューは、ユーザが選択することも、あるいはオーディオ・コンテンツのソースが提供することもできる。1つの例示的なオーディオ・キューは、音楽カテゴリ(例えば、クラシック音楽)、曲(song:ソング)(ベートーベン交響曲第5番)、曲リスト(ベートーベンの交響曲)、またはアーティスト(ベートーベン)を識別する識別子として働く好きな音楽のスニペット(snippet:説明文、概説分)(例えば、ベートーベン交響曲第5番の冒頭の4音)である。別の例示的なオーディオ・キューとして、音楽カテゴリ、曲またはアーティストを示す、コンピュータが生成した音声でもよい。更に別の例示的なオーディオ・キューとして、音楽カテゴリ名、曲名またはアーティスト名を述べる録音したユーザ自身の声にすることもできる。
プロセッサ12は、ポインティング・デバイス40が仮想円弧50上の所定の点52から60に接近する、または遠ざかるときに、スピーカ26が発生するオーディオ・スニペットの音量を大きくする、または小さくすることができる。また、プロセッサ12は、ユーザが仮想円弧50上の所定の点52〜60を選択したときに、スピーカ26を介して音声フィードバック(例えば、電子ビープ音またはトーン(発信音))を提供することが好ましい。
次に、図3を参照すると、オーディオ・キュー82の例示的なマルチレベル木データ構造70が示してある。マルチレベル木データ構造70は、ユーザが従来のデータ管理ソフトウェアを使用して作成し、上述のように記憶装置(例えば、メモリ16、データベース30、またはインターネット34を介してアクセスされる遠隔データベース)に記憶される。オーディオ・キュー82は、ユーザが大別カテゴリを選択して、特定のオーディオ情報セグメントを検索していくことができるように、マルチレベル木データ構造70の複数のレベル72から80に構成される。例えば、図3では、レベル72は、所望のオーディオ情報のソース(例えば、ユーザのCD音楽コレクション)を表すユーザ選択のオーディオ・キュー82を含んでいる。レベル74は、様々な音楽スタイル(例えば、ロック)を表すユーザ選択のオーディオ・キュー82を含んでいる。レベル76は、特定のアーティストまたはグループ(例えば、アーティスト/グループ3)を表すユーザ選択のオーディオ・キュー82を含んでいる。レベル78は、特定のアルバム(例えば、アルバム3)を表すユーザ選択のオーディオ・キュー82を含んでいる。レベル80は、特定の曲(例えば、曲4)を表すユーザ選択のオーディオ・キュー82を含んでいる。レベル(72〜80)ごとのオーディオ・キュー82の数は、仮想円弧50(図2に示す)上の点52〜60の数に対応することに留意されたい。また、各レベルが異なる数のオーディオ・キューを含むことができること、並びに仮想円弧上の点の数は所定のレベルのオーディオ・キューの数を反映するように動的に変化することができることに留意されたい。
次に、図4を参照すると、オーディオ・キュー96の別の例示的なマルチレベル木データ構造90が示してある。マルチレベル木データ構造90は、ユーザが、あるレベル102のオーディオ・キュー103を他のレベル94および100のオーディオ・キュー95および101とリンクすることができることを示している。これにより、ユーザは、マルチレベル木データ構造90内の様々な経路を使用して所望のオーディオ情報セグメントまで検索することができる。具体的には、図に示すように、ユーザは、「クラシック音楽」経路または「個人的な気分」経路を介して「曲5」にアクセスしてこれを再生することができる。
次に、図5および図6を参照すると、本発明の音響インターフェースを使用してオーディオ情報を検索する方法110が示してある。最初に、ステップ112で、ユーザは、ポインティング・デバイス40上の電源ボタンを操作してシステム10をオンにする。その後、ステップ114で、ユーザは、ポインティング・デバイス40上の「選択」ボタンをダブル・クリックすることにより音響インターフェースを初期化する。これに応答して、ポインティング・デバイス40は、無線周波数(RF)受信機38および無線周波数(RF)受信機インターフェース36を介して初期化信号をプロセッサ12に送信する。次いで、プロセッサ12が、ポインティング・デバイス40の現在位置を仮想円弧50の中心点56として指定し、マルチレベル木データ構造内の最上位(highest)レベル(例えば、図3のレベル72)のオーディオ・キューを仮想円弧50の点52〜60にマップ(map:対応付け)する。プロセッサ12は、オーディオ・データ・セグメント・ソース(例えば、インターネット34、CD−ROMユニット28、データベース30および/またはメモリ16)の可用性を検査することもできる。次に、ステップ116で、プロセッサ12が、初期化が完了したかどうかを判定する。初期化が完了していない場合には、プロセッサ12はステップ114に戻り、初期化プロセスを継続する。初期化が完了している場合には、プロセッサ12は、ステップ118において、上記で詳細に述べたように、仮想円弧50に沿ったポインティング・デバイス40の動きの追跡を開始する。
次に、ステップ120で、プロセッサ12は、ポインティング・デバイス40が仮想円弧点52〜60の何れか1つから所定距離内にあるかどうかを判定する。所定距離内にない場合には、プロセッサ12はステップ118に戻り、仮想円弧50に沿ったポインティング・デバイス40の動きの追跡を継続する。所定距離内にある場合には、プロセッサ12は、ステップ122で、その仮想円弧点52〜60の何れか1つに割り当てられたオーディオ・キューを記憶装置(例えば、メモリ16またはデータベース30)から取り出し、スピーカ26を介してこれを再生する。その後、ステップ124で、プロセッサ12は、ユーザがポインティング・デバイス40上の「選択」ボタンを操作したかどうかを判定する。操作していない場合には、プロセッサ12はステップ118に戻り、仮想円弧50に沿ったポインティング・デバイス40の動きの追跡を継続する。操作していた場合には、プロセッサ12は、ステップ126で、音声フィードバック(例えば、電子ビープまたは電子トーン)をユーザに提供し、ステップ128で、ユーザがその時点でマルチレベル木データ構造の最下位(lowest)レベル(例えば、図3のレベル80)にいるかどうかを判定する。
ユーザが最下位レベルにいない場合には、プロセッサ12は、ステップ130で、その時点のレベル(例えば、図3のレベル74、76または78)のオーディオ・キューを仮想円弧50の点52〜60にマップし、ステップ118に戻って、仮想円弧50に沿ったポインティング・デバイス40の動きを追跡する。ユーザが木データ構造の最下位レベルにいる場合には、プロセッサ12は、ステップ132で、そのオーディオ・キューに関連するオーディオ・データ・セグメント(例えば、曲または曲のリスト)をオーディオ・データ・セグメント・ソース(源)(例えば、インターネット34、CD−ROMユニット28、データベース30および/またはメモリ16)から取り出し、スピーカ26を介してこのセグメントを再生する。
次に、図7を参照すると、本発明の音響インターフェースを管理するための例示的なグラフィカル・ユーザ・インターフェース(GUI)140が示してある。GUI140は、以下で更に詳細に述べるように、ユーザが様々なオーディオ・キュー・ツリー(木構造)、オーディオ・キュー、およびオーディオ・データ・セグメントを操作できるようにする「オーディオ・キュー・ツリー」プルダウン・メニュー142、「オーディオ・セグメント」プルダウン・メニュー144、「オーディオ・セグメント・リスト」プルダウン・メニュー146、「オーディオ・キュー・リスト」プルダウン・メニュー148および「ヘルプ」プルダウン・メニュー150を含んでいる。また、以下で更に詳細に述べるように、GUI140は、選択したオーディオ情報(例えば、オーディオ・キュー・ツリー、オーディオ・キュー、オーディオ・データ・セグメント)に関連するテキスト(文字)データおよび/またはグラフィック(図形)データ(例えば、名前、識別子、ファイル・サイズ)をユーザが見ることができるようにするウィンドウ部152も含んでいる。GUI140は、選択したオーディオ・キューまたはオーディオ・データ・セグメントをユーザが制御し易くなるようにする制御要素(control)154〜164を更に含んでいる。例示的な制御要素としては、「ボリューム(volume:音量)」アイコン154、「再生(play:プレイ)」アイコン156、「巻戻し」アイコン158、「早送り」アイコン160、「一時停止」アイコン162および「停止(stop)」アイコン164が挙げられるが、これらに限定されない。
動作を説明すると、ユーザは、GUI140に関連する音響インターフェース・ソフトウェアをシステム10上で実行することができる。このソフトウェアは、フロッピー(登録商標)ディスク、スマート・カード、CD、DVDなど(ただし、これらに限定されない)の任意のコンピュータ可読媒体に記憶することも、あるいはイントラネット(図示せず)またはインターネット34を介して遠隔サーバからダウンロードすることもできる。ユーザは、ディスプレイ22上のGUIを見て、キーボード24、マウス(図示せず)、ポインティング・デバイス40または同様のハードウェア・デバイスを用いてGUIのプルダウン・メニューおよびアイコンを操作することが好ましい。
ユーザが「オーディオ・キュー・ツリー」プルダウン・メニュー142を選択した場合には、特に以下のようなGUIアイコンがユーザに対して提示される。「ツリー・リストを見る(View Tree List)」アイコンが選択されると、プロセッサ12は、存在するオーディオ・キュー・ツリーのリストをウィンドウ部152内に表示する。「ツリーを作成する(Create Tree)」アイコンが選択されると、プロセッサは、オーディオ・ツリー名、オーディオ・ツリー内のレベル数、レベルあたりのキュー数、およびその他の関連データをユーザが入力することができる入力画面をウィンドウ部152内に表示する。「ツリーをダウンロードする(Download Tree)」アイコンが選択されると、プロセッサ12は、オーディオ・コンテンツのソースから提供される既存のオーディオ・キュー(例えば、衛星サービス・プロバイダにより提供される衛星無線局を表すオーディオ・キューの既存のオーディオ・キュー・ツリー)をダウンロードする。「ツリーを選択する(Select Tree)」アイコンが選択されると、プロセッサ12は、選択されたオーディオ・キュー・ツリーのメモリ位置を指示して、次にこの音響インターフェースを使用したときに、その選択されたオーディオ・ツリーがユーザにより検索されるようにする。「ツリーをリンクする(Link Tree)」アイコンが選択されると、プロセッサ12は、選択されたオーディオ・キュー・ツリーの選択されたレベルを互いにリンクして、ユーザがより大きなオーディオ・キュー・ツリーを迅速に作成し、且つ/またはオーディオ情報セグメントへの複数の経路を作成することができるようにする。
ユーザが「オーディオ・セグメント」プルダウン・メニュー144を選択した場合には、特に以下のようなGUIアイコンがユーザに対して提示される。「オーディオ・セグメントを作成する(Create Audio Segment)」アイコンが選択されると、プロセッサ12は、記憶装置(例えば、CD−ROMユニット28、データベース30、インターネット34に接続された遠隔サーバ)内のオーディオ・データ・セグメント(例えば、記憶したMP3ファイルまたはコンパクト・ディスク・トラックの曲)にタグ(tag)を付けて、ユーザが本発明の音響インターフェースを用いてそのオーディオ・セグメントを選択したときにプロセッサ12が迅速にそのオーディオ・データ・セグメントを取り出すことができるようにする。「オーディオ・セグメントを再生する(Play Audio Segment)」アイコンが選択されると、プロセッサは、選択されたオーディオ・データ・セグメントを記憶装置から取り出し、スピーカ26を介してこれを再生する(ユーザは、選択されたオーディオ・データ・セグメントの再生を制御アイコン154〜164により制御することができることに留意されたい)。「オーディオ・セグメントを削除する(Delete Audio Segment)」アイコンが選択されると、プロセッサ12は、選択されたオーディオ・データ・セグメントの既存のタグを消去する。
ユーザが「オーディオ・セグメント・リスト」プルダウン・メニュー146を選択した場合には、特に以下のようなGUIアイコンがユーザに対して提示される。「オーディオ・セグメント・リストを見る(View Audio Segment List)」アイコンが選択されると、プロセッサ12は、オーディオ・データ・セグメント・リストをウィンドウ部152内に表示する(表示されたオーディオ・データ・セグメント・リスト、または選択されたオーディオ・データ・セグメント・リスト内のオーディオ・データ・セグメントは、アーティスト名、アルバム・タイトル、曲タイトル、ソース(例えば、CD−ROMユニット28、データベース30、インターネット34など)などにより分類することができることに留意されたい)。「オーディオ・セグメント・リストを作成する(Create Audio Segment List)」アイコンが選択されると、プロセッサ12は、ユーザが特にオーディオ・データ・セグメント・リスト名を入力することができ、また作成されたオーディオ・データ・セグメント・リスト内に含まれることになるオーディオ・データ・セグメントの名称も入力することができる入力画面をウィンドウ部152内に表示する。「オーディ・セグメント・ソース(Audio Segment Source)」アイコンが選択されると、プロセッサは、利用可能なオーディオ・データ・セグメント・ソース(例えば、CD−ROMユニット28、データベース30、インターネット34、メモリ16など)のリストをウィンドウ部152内に表示する。ユーザは、オーディオ・データ・セグメント・ソースをこのリストに追加する、またはこのリストから除去することができる。
ユーザが「オーディオ・キュー・リスト」プルダウン・メニュー148を選択した場合には、特に以下のようなGUIアイコンがユーザに対して提示される。「オーディオ・キューを作成する(Create Audio Cue)」アイコンが選択されると、プロセッサ12は、オーディオ・キュー(即ち、オーディオ・セグメントのスニペット、マイクロフォン入力、コンピュータ生成音声など)の名称およびオーディオ・キューのソースをユーザが入力することができる入力画面をウィンドウ部152内部に表示する。「オーディオ・キューを記憶する(Store Audio Cue)」アイコンが選択されると、プロセッサ12は、メモリ16、ローカル・データベース30、インターネット34を介して接続される遠隔データベースなどの記憶装置に、作成されたオーディオ・キューを記憶する。「オーディオ・キューを再生する(Play Audio Cue)」アイコンが選択されると、プロセッサは、選択されたオーディオ・キューを記憶装置から取り出して、スピーカ26を介してこれを再生する(ユーザは、選択されたオーディオ・キューの再生を制御アイコン154〜164により制御することができることに留意されたい)。「オーディオ・キューを削除する(Delete Audio Cue)」アイコンが選択されると、プロセッサ12は、選択されたオーディオ・キューを記憶装置から消去する。「オーディオ・キュー・リストを見る(View Audio Cue List)」アイコンが選択されると、プロセッサ12は、オーディオ・セグメントとリンクされた存在するオーディオ・キューのリストをウィンドウ部152内に一覧表示する。「オーディオ・キューをリンクする(Link Audio Cue)」アイコンが選択されると、プロセッサ12は入力画面をウィンドウ部152内に表示し、選択されたオーディオ・キューがリンクされることになるオーディオ・セグメント、オーディオ・キュー・ツリーおよびオーディオ・キュー・ツリー・レベルをユーザが入力できるようにする。「オーディオ・キューをリンク解除する(Unlink Audio Cue)」アイコンが選択されると、プロセッサ12は入力画面をウィンドウ部152内に表示し、リンクされたオーディオ・キューを削除するオーディオ・セグメント、オーディオ・キュー・ツリーおよび/またはオーディオ・キュー・ツリー・レベルをユーザが入力できるようにする。
ユーザが「ヘルプ」プルダウン・メニュー150を選択した場合には、複数の「ハウ・ツー(How To)」アイコンがユーザに対して表示され、ユーザが本発明の音響インターフェースのGUI140を効率的に利用できるようにする。当業者には既知の方法でオーディオ・データ、テキスト・データおよびグラフィック・データを管理できるようにする代替のGUIディスプレイ、プルダウン・メニュー、アイコンおよび制御要素も本発明の範囲内と見なすことに留意されたい。例えば、オーディオ・キューおよび/またはオーディオ・キュー・ツリーをオーディオ・データ・セグメント以外のデータ・セグメントにより容易にユーザがリンクすることができるようにする(例えば、オーディオ・キューまたはオーディオ・キュー・ツリーをテキスト・ファイル、ビデオ・ファイル、およびデバイス機能とリンクするなど)「データ・セグメント」プルダウン・メニューがGUI140内にあってもよい。
図8を参照すると、別の例示的なマルチレベル・オーディオ・キュー・ツリー170が示してある。マルチレベル・オーディオ・キュー・ツリー170は、オーディオ・キュー・ツリー170内の様々なレベル172、184〜192が、異なる数のオーディオ・キューをその中に含むことができることを示している。また、オーディオ・キュー・ツリー170は、オーディオ・キューを、純粋なオーディオ・データ・セグメントではないデータ・セグメントとリンクすることが出来ることも示している。例えば、レベル172は、テキスト・ファイルのソースを表すオーディオ・キュー176、ビデオ・ファイルのソースを表すオーディオ・キュー178、応答マシンの制御要素を表すオーディオ・キュー180、およびビデオ装置(VCR)の制御要素を表すオーディオ・キュー182を含んでいる。更に、レベル186は、テキスト・ファイルを表す追加のオーディオ・キューを含み、レベル188は、ビデオ・ファイルのソースから提供される映画を表すオーディオ・キュー(例えば、有名な映画の台詞)を含み、レベル190および192は、それぞれ応答マシン(answering machine)およびビデオ装置(VCR)の個別の制御要素を表すキューを含んでいる。
レベル172は、衛星ラジオ・サービス・プロバイダを表すオーディオ・キュー174も含んでいる。衛星サービス・プロバイダは、場合によりは、数百ものラジオ局をユーザに提供することもある。その結果として、衛星サービス・プロバイダは、ラジオ局についてのデータに関するデータ、即ちメタデータ(metadata)もユーザに提供して、ユーザがそのメタデータを使用してオーディオ・キュー・ツリーを生成することができるようにする。あるいは、サービス・プロバイダは、ユーザがアクセスすることができるダウンロード可能なオーディオ・キューおよび/またはオーディオ・キュー・ツリーを提供することもできる。或る衛星ラジオ局を表すオーディオ・キュー・ツリーの最下位レベル184は、特定の曲または曲リストではなく、将来届くオーディオ・コンテンツのストリームを指すポインタであることに留意されたい。また、インターネット、ディジタル加入者回線(DSL)、ケーブルおよびその他のサービス・プロバイダは同様のサービスを提供することができ、これらのサービスを使用してオーディオ・キュー、オーディオ・キュー・ツリー、あるいはオーディオ・キューまたはオーディオ・キュー・ツリーの生成を容易にするデータを提供することは、本発明の範囲内であることにも留意されたい。
好ましい実施形態に関連して本発明について説明したが、添付の特許請求の範囲により定められるように、本発明の趣旨および範囲を逸脱することなく、これらの実施形態に様々な変更を加えることができることは明らかである。

Claims (18)

  1. 複数の音楽ファイルに対するアクセスを提供する方法であって、
    木構造を有する複数のオーディオ・キューをメモリに記憶するステップであって、各オーディオ・キューが、ユーザによって選択されて音楽ファイルまたは所定数の記憶されたオーディオ・キューであって音楽カテゴリを表す木構造を有するオーディオ・キューをそれぞれ表す、前記複数のオーディオ・キューをメモリに記憶するステップと、
    ユーザ要求に応答して、オーディオ・キューを再生することによって、ユーザが前記木構造をナビゲートできるようにするステップであって、前記木構造を有する第1の所定数の記憶されたオーディオ・キューに対するアクセスがユーザに提供され、第1のユーザ要求に応答して、前記第1の所定数の記憶されたオーディオ・キューのうちの1つをユーザが再生し、第2のユーザ要求に応答して、前記再生されたオーディオ・キューに関連付けられた音楽ファイルまたは第2の所定数の記憶されたオーディオ・キューであって音楽カテゴリを表す前記木構造を有するオーディオ・キューのうちの1つをユーザが取り出せるようにする、前記ユーザが前記木構造をナビゲートできるようにするステップと、
    を含む、前記複数の音楽ファイルに対するアクセスを提供する方法。
  2. 前記複数のオーディオ・キューを記憶するステップが、記憶する前に、オーディオ・データ・セグメントをサンプリングする、ユーザの声を録音する、またはコンピュータが生成した音声を記録することにより、前記複数のオーディオ・キューを作成するステップを更に含む、請求項1に記載の複数の音楽ファイルに対するアクセスを提供する方法。
  3. 前記複数のオーディオ・キューを記憶するステップが、
    複数の既存のオーディオ・キューをダウンロードするステップを更に含む、請求項1に記載の複数の音楽ファイルに対するアクセスを提供する方法。
  4. 前記ユーザが前記木構造をナビゲートできるようにするステップが、
    前記第1の所定数のオーディオ・キューを仮想構成上の複数の点にマップするステップを含む、請求項1に記載の複数の音楽ファイルに対するアクセスを提供する方法。
  5. 前記ユーザが前記木構造をナビゲートできるようにするステップが、
    前記仮想構成上の或る一点から所定距離内をユーザがナビゲートしたときに、前記一点に関連する1つのオーディオ・キューのみが再生されるように、前記仮想構成に沿ったユーザのナビゲーションを追跡するステップを含む、請求項4に記載の複数の音楽ファイルに対するアクセスを提供する方法。
  6. コンピュータ・システム、ステレオ・システム、ホーム・エンターテインメント・センタ、自動車用音楽システム、または電子装置のうちの1つに組み込まれる、請求項1に記載の複数の音楽ファイルに対するアクセスを提供する方法。
  7. 複数の音楽ファイルに対するアクセスを提供するシステムであって、
    木構造を有する複数のオーディオ・キューをメモリに記憶する手段であって、各オーディオ・キューが、ユーザによって選択されて音楽ファイルまたは所定数の記憶されたオーディオ・キューであって音楽カテゴリを表す前記木構造を有するオーディオ・キューをそれぞれ表す、前記複数のオーディオ・キューをメモリに記憶する手段と、
    ユーザ要求に応答して、オーディオ・キューを再生することによって、ユーザが前記木構造をナビゲートできるようにする手段であって、前記木構造を有する第1の所定数の記憶されたオーディオ・キューに対するアクセスがユーザに提供され、第1のユーザ要求に応答して、前記第1の所定数の記憶されたオーディオ・キューのうちの1つをユーザが再生し、第2のユーザ要求に応答して、前記再生されたオーディオ・キューに関連付けられた音楽ファイルまたは第2の所定数の記憶されたオーディオ・キューであって音楽カテゴリを表す前記木構造を有するオーディオ・キューのうちの1つをユーザが取り出せるようにする、前記ユーザが前記木構造をナビゲートできるようにする手段と、
    を含む、前記複数の音楽ファイルに対するアクセスを提供するシステム。
  8. 前記複数のオーディオ・キューを記憶する手段が、記憶する前に、オーディオ・データ・セグメントをサンプリングする、ユーザの声を録音する、またはコンピュータが生成した音声を記録することにより、前記複数のオーディオ・キューを作成するステップを更に含む、請求項7に記載の複数の音楽ファイルに対するアクセスを提供するシステム。
  9. 前記複数のオーディオ・キューを記憶する手段が、
    複数の既存のオーディオ・キューをダウンロードする手段を更に含む、請求項7に記載の複数の音楽ファイルに対するアクセスを提供するシステム。
  10. 前記ユーザが前記木構造をナビゲートできるようにする手段が、
    前記第1の所定数のオーディオ・キューを仮想構成上の複数の点にマップするステップを含む、請求項7に記載の複数の音楽ファイルに対するアクセスを提供するシステム。
  11. 前記ユーザが前記木構造をナビゲートできるようにする手段が、
    前記仮想構成上の或る一点から所定距離内をユーザがナビゲートしたときに、前記一点に関連する1つのオーディオ・キューのみが再生されるように、前記仮想構成に沿ったユーザのナビゲーションを追跡する手段を含む、請求項10に記載の複数の音楽ファイルに対するアクセスを提供するシステム。
  12. コンピュータ・システム、ステレオ・システム、ホーム・エンターテインメント・センタ、自動車用音楽システム、または電子装置のうちの1つに組み込まれる、請求項7に記載の音楽ファイルに対するアクセスを提供するシステム。
  13. ユーザ・インターフェース・システムであって、
    音楽ファイルのソースに通信可能に接続された音楽ファイル・インターフェースと、
    木構造を有する複数のオーディオ・キューを記憶したコンピュータ可読媒体に通信可能に接続されたコンピュータ可読媒体インターフェースであって、各オーディオ・キューが、ユーザによって選択されて音楽ファイルまたは所定数の記憶されたオーディオ・キューであって音楽カテゴリを表す木構造を有するオーディオ・キューをそれぞれ表す、前記コンピュータ可読媒体インターフェースと、
    ユーザ要求を受信するユーザ入力インターフェースと、
    オーディオ・システムに通信可能に接続されたオーディオ・インターフェースと、
    前記音楽ファイル・インターフェース、前記コンピュータ可読媒体インターフェース、前記ユーザ入力インターフェース、および前記オーディオ・インターフェースに通信可能に接続されたプロセッサと、
    を含み、
    前記プロセッサは、
    前記ユーザ入力インターフェースを介して受信されたユーザ要求に応答して、前記オーディオ・インターフェースを介してオーディオ・キューを再生することによって、ユーザが前記木構造をナビゲートできるようにして、前記コンピュータ可読媒体インターフェースを介して前記木構造を有する第1の所定数の記憶されたオーディオ・キューに対するアクセスがユーザに提供され、
    前記ユーザ入力インターフェースを介して受信された第1のユーザ要求に応答して、前記オーディオ・インターフェースを介して前記第1の所定数の記憶されたオーディオ・キューのうちの1つをユーザが再生し、
    前記ユーザ入力インターフェースを介して受信された第2のユーザ要求に応答して、前記オーディオ・インターフェースを介して前記再生されたオーディオ・キューに関連付けられた音楽ファイルまたは第2の所定数の記憶されたオーディオ・キューであって音楽カテゴリを表す前記木構造を有するオーディオ・キューのうちの1つを、前記コンピュータ可読媒体インターフェースを介してユーザが取り出せるようにする、ユーザ・インターフェース・システム。
  14. 前記コンピュータ可読媒体が、ローカル・メモリ・デバイス、遠隔メモリ・デバイス、または取外し可能なメモリ・デバイスのうちの1つである、請求項13に記載のユーザ・インターフェース・システム。
  15. 前記オーディオ・キューの少なくとも1つが、コンピュータ可読媒体に記憶される前にユーザにより作成される、請求項13に記載のユーザ・インターフェース・システム。
  16. 前記オーディオ・キューの少なくとも1つが、音楽ファイルのプロバイダにより作成される、請求項13に記載のユーザ・インターフェース・システム。
  17. 前記オーディオ・キューの少なくとも1つおよび前記音楽ファイルが同一のコンピュータ可読媒体上にある、請求項13に記載のユーザ・インターフェース・システム。
  18. コンピュータ・システム、ステレオ・システム、ホーム・エンターテインメント・センタ、自動車用音楽システム、または電子装置のうちの1つに組み込まれる、請求項13に記載のユーザ・インターフェース・システム。
JP2010103855A 2001-06-29 2010-04-28 複数の音楽ファイルに対するアクセスを提供する方法、システム、およびユーザ・インターフェース・システム Expired - Lifetime JP4993324B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/896,966 US7752546B2 (en) 2001-06-29 2001-06-29 Method and system for providing an acoustic interface
US09/896,966 2001-06-29

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2003509271A Division JP4526060B2 (ja) 2001-06-29 2002-06-27 複数のデータ・セグメントに対するアクセスを提供する方法

Publications (2)

Publication Number Publication Date
JP2010238242A true JP2010238242A (ja) 2010-10-21
JP4993324B2 JP4993324B2 (ja) 2012-08-08

Family

ID=25407129

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2003509271A Expired - Lifetime JP4526060B2 (ja) 2001-06-29 2002-06-27 複数のデータ・セグメントに対するアクセスを提供する方法
JP2010103855A Expired - Lifetime JP4993324B2 (ja) 2001-06-29 2010-04-28 複数の音楽ファイルに対するアクセスを提供する方法、システム、およびユーザ・インターフェース・システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2003509271A Expired - Lifetime JP4526060B2 (ja) 2001-06-29 2002-06-27 複数のデータ・セグメントに対するアクセスを提供する方法

Country Status (8)

Country Link
US (1) US7752546B2 (ja)
EP (1) EP1405299A4 (ja)
JP (2) JP4526060B2 (ja)
KR (1) KR100897491B1 (ja)
CN (1) CN1322484C (ja)
AU (1) AU2002329191A1 (ja)
MX (1) MXPA03011683A (ja)
WO (1) WO2003003159A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10859529B2 (en) 2013-11-09 2020-12-08 Forschungszentrum Juelich Gmbh Device and method for measuring small voltages and potentials on a biological, chemical or other sample

Families Citing this family (137)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8046689B2 (en) * 2004-11-04 2011-10-25 Apple Inc. Media presentation with supplementary media
US7698654B2 (en) * 2004-01-05 2010-04-13 Microsoft Corporation Systems and methods for co-axial navigation of a user interface
TWI329263B (en) * 2004-09-24 2010-08-21 Hon Hai Prec Ind Co Ltd A device and method for processing information
US7735012B2 (en) * 2004-11-04 2010-06-08 Apple Inc. Audio user interface for computing devices
US8717301B2 (en) * 2005-08-01 2014-05-06 Sony Corporation Information processing apparatus and method, and program
US7617188B2 (en) * 2005-03-24 2009-11-10 The Mitre Corporation System and method for audio hot spotting
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8751931B2 (en) * 2005-11-07 2014-06-10 At&T Intellectual Property I, L.P. System and method for providing user-definable audio indicators for multimedia channel selections
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
JP4561766B2 (ja) * 2007-04-06 2010-10-13 株式会社デンソー 音データ検索支援装置、音データ再生装置、プログラム
EP2193420A4 (en) * 2007-07-27 2010-10-06 Synergy Sports Technology Llc SYSTEM AND METHOD FOR USING A WEBSITE CONTAINING VIDEOS READING LISTS AS INTRODUCED ON A DOWNLOAD MANAGER
US20090058842A1 (en) * 2007-09-04 2009-03-05 Apple Inc. Devices and methods for controlling a display to conserve power
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8898568B2 (en) * 2008-09-09 2014-11-25 Apple Inc. Audio user interface
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US20100306657A1 (en) * 2009-06-01 2010-12-02 3Dlabs Inc., Ltd. Audio-Enhanced User Interface for Browsing
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9185326B2 (en) * 2010-06-11 2015-11-10 Disney Enterprises, Inc. System and method enabling visual filtering of content
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
CN102135853A (zh) * 2011-03-09 2011-07-27 苏州佳世达电通有限公司 用于触控显示装置的信息处理方法
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
AR092642A1 (es) * 2012-09-24 2015-04-29 Hitlab Inc Metodo y sistema para evaluar usuarios de karaoke
CN102919554B (zh) * 2012-11-30 2013-08-14 云南双胞胎饲料有限公司 一种添加有激活剂的猪用饲料复合酶制剂
CN104969289B (zh) 2013-02-07 2021-05-28 苹果公司 数字助理的语音触发器
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
KR101759009B1 (ko) 2013-03-15 2017-07-17 애플 인크. 적어도 부분적인 보이스 커맨드 시스템을 트레이닝시키는 것
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
KR101959188B1 (ko) 2013-06-09 2019-07-02 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
WO2014200731A1 (en) 2013-06-13 2014-12-18 Apple Inc. System and method for emergency calls initiated by voice command
KR101749009B1 (ko) 2013-08-06 2017-06-19 애플 인크. 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화
USD749111S1 (en) 2014-01-24 2016-02-09 Microsoft Corporation Display screen with graphical user interface
USD770486S1 (en) 2014-01-24 2016-11-01 Microsoft Corporation Display screen with graphical user interface
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
USD764524S1 (en) 2014-08-28 2016-08-23 Microsoft Corporation Display screen with graphical user interface
USD764525S1 (en) 2014-08-28 2016-08-23 Microsoft Corporation Display screen with graphical user interface
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
CN104820678B (zh) * 2015-04-15 2018-10-19 小米科技有限责任公司 音频信息识别方法及装置
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
KR102416782B1 (ko) * 2017-03-28 2022-07-05 삼성전자주식회사 음성 인식 서비스 운용 방법 및 이를 지원하는 전자 장치
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
CN110622155A (zh) * 2017-10-03 2019-12-27 谷歌有限责任公司 将音乐识别为特定歌曲

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06138892A (ja) * 1992-10-29 1994-05-20 Brother Ind Ltd カラオケ装置
JP2001013978A (ja) * 1999-06-29 2001-01-19 Sharp Corp 情報選択装置、情報選択方法及び記録媒体
JP2001125767A (ja) * 1999-10-28 2001-05-11 Sharp Corp 情報提示装置、情報提示方法、及び情報提示プログラムを記録したコンピュータで読取可能な記録媒体
JP2001126458A (ja) * 1999-10-26 2001-05-11 Sony Corp 電子機器

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0435601B1 (en) * 1989-12-29 2001-11-21 Inxight Software, Inc. Display of hierarchical three-dimensional structures
JPH04291316A (ja) 1991-03-20 1992-10-15 Fujitsu Ltd 屈折率変調型光変調器
US5287102A (en) * 1991-12-20 1994-02-15 International Business Machines Corporation Method and system for enabling a blind computer user to locate icons in a graphical user interface
US5510811A (en) * 1992-11-25 1996-04-23 Microsoft Corporation Apparatus and method for controlling cursor movement
US5799267A (en) * 1994-07-22 1998-08-25 Siegel; Steven H. Phonic engine
US5682196A (en) * 1995-06-22 1997-10-28 Actv, Inc. Three-dimensional (3D) video presentation system providing interactive 3D presentation with personalized audio responses for multiple viewers
US6184876B1 (en) * 1996-07-10 2001-02-06 Intel Corporation Method and apparatus for audibly communicating comparison information to a user
US6516321B1 (en) * 1996-07-30 2003-02-04 Carlos De La Huerga Method for database address specification
US5895461A (en) * 1996-07-30 1999-04-20 Telaric, Inc. Method and system for automated data storage and retrieval with uniform addressing scheme
US6308171B1 (en) * 1996-07-30 2001-10-23 Carlos De La Huerga Method and system for automated data storage and retrieval
US6272505B1 (en) * 1998-07-07 2001-08-07 Carlos De La Huerga Document modification based hyperlink limiting method and apparatus
US5835156A (en) * 1996-08-14 1998-11-10 Samsung Electroncis, Ltd. Television graphical user interface employing remote random access pointing device
US5991781A (en) * 1996-09-27 1999-11-23 Sun Microsystems, Inc. Method and apparatus for detecting and presenting client side image map attributes including sound attributes using page layout data strings
WO1998025269A1 (en) * 1996-12-02 1998-06-11 Thomson Consumer Electronics, Inc. Apparatus and method for identifying the information stored on a medium
JPH10171591A (ja) * 1996-12-06 1998-06-26 Seiko Epson Corp ポインティング装置、ポインタの移動方法および携帯型情報処理装置
TW409245B (en) * 1996-12-11 2000-10-21 Koninkl Philips Electronics Nv A method and device for user-presentation of a compilation system
US6111562A (en) * 1997-01-06 2000-08-29 Intel Corporation System for generating an audible cue indicating the status of a display object
US6083163A (en) * 1997-01-21 2000-07-04 Computer Aided Surgery, Inc. Surgical navigation system and method using audio feedback
JPH11303745A (ja) 1998-04-21 1999-11-02 Matsushita Refrig Co Ltd 密閉型電動圧縮機
US6163510A (en) * 1998-06-30 2000-12-19 International Business Machines Corporation Multimedia search and indexing system and method of operation using audio cues with signal thresholds
NO984066L (no) * 1998-09-03 2000-03-06 Arendi As Funksjonsknapp for datamaskin
US6983251B1 (en) * 1999-02-15 2006-01-03 Sharp Kabushiki Kaisha Information selection apparatus selecting desired information from plurality of audio information by mainly using audio
US6539395B1 (en) * 2000-03-22 2003-03-25 Mood Logic, Inc. Method for creating a database for comparing music
US20020130901A1 (en) * 2001-03-16 2002-09-19 Rajko Milovanovic Enhanced program listing

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06138892A (ja) * 1992-10-29 1994-05-20 Brother Ind Ltd カラオケ装置
JP2001013978A (ja) * 1999-06-29 2001-01-19 Sharp Corp 情報選択装置、情報選択方法及び記録媒体
JP2001126458A (ja) * 1999-10-26 2001-05-11 Sony Corp 電子機器
JP2001125767A (ja) * 1999-10-28 2001-05-11 Sharp Corp 情報提示装置、情報提示方法、及び情報提示プログラムを記録したコンピュータで読取可能な記録媒体

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10859529B2 (en) 2013-11-09 2020-12-08 Forschungszentrum Juelich Gmbh Device and method for measuring small voltages and potentials on a biological, chemical or other sample

Also Published As

Publication number Publication date
CN1522429A (zh) 2004-08-18
AU2002329191A1 (en) 2003-03-03
JP2004531836A (ja) 2004-10-14
EP1405299A2 (en) 2004-04-07
KR100897491B1 (ko) 2009-05-15
KR20040012999A (ko) 2004-02-11
US7752546B2 (en) 2010-07-06
JP4993324B2 (ja) 2012-08-08
CN1322484C (zh) 2007-06-20
US20030001881A1 (en) 2003-01-02
EP1405299A4 (en) 2005-01-12
MXPA03011683A (es) 2004-03-19
JP4526060B2 (ja) 2010-08-18
WO2003003159A2 (en) 2003-01-09
WO2003003159A3 (en) 2003-08-14

Similar Documents

Publication Publication Date Title
JP4993324B2 (ja) 複数の音楽ファイルに対するアクセスを提供する方法、システム、およびユーザ・インターフェース・システム
US7779357B2 (en) Audio user interface for computing devices
JP5258145B2 (ja) インテリジェント音楽トラック選択
JP4919796B2 (ja) ディジタルオーディオファイル検索方法および装置
US7650563B2 (en) Aggregating metadata for media content from multiple devices
US20040261040A1 (en) Method and apparatus for media access control
US20120089951A1 (en) Method and apparatus for navigation within a multi-level application
US20040225519A1 (en) Intelligent music track selection
US20120117185A1 (en) Direct navigation to a remote media archive on a mobile communications device
JP2005275692A (ja) コンテンツ提供装置、コンテンツ提供システム、Webサイト変更装置、Webサイト変更システム、コンテンツ提供方法およびWebサイト変更方法
JP2008047017A (ja) 情報処理装置および方法、並びにプログラム
KR20070067179A (ko) 정보 관리 방법, 정보 관리 프로그램 및 정보 관리 장치
KR100978689B1 (ko) 미디어 선택 방법 및 시스템
JP2007066285A (ja) 情報処理装置および方法、並びにプログラム
CN1842856B (zh) 媒体项的选择
KR101522553B1 (ko) 메타데이터를 이용한 컨텐트 재생목록 생성방법 및 장치
JP2002230945A (ja) 情報記録再生装置及びタイトル情報付与方法、タイトル情報付与手順プログラムを記録したプログラム記録媒体
KR100829115B1 (ko) 이동통신 단말기의 콘텐츠 재생 방법 및 장치
JP2007225740A (ja) 携帯情報端末及び選曲装置
JP2008234672A (ja) コンテンツ提供装置およびコンテンツ提供システム
JPH0561492A (ja) マルチメデイア用カラオケチエンジヤシステム
JP2007058306A (ja) 情報検索装置、情報検索方法、情報検索システム及び情報検索プログラム
US20070078847A1 (en) System and method for generating a play-list
JP2004152327A (ja) 音楽記録再生装置及び方法
JP2008123535A (ja) 情報配信システム、端末装置、ファイル処理方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111005

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20111228

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120425

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120426

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150518

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4993324

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term