JP4237951B2 - 会話ブラウズおよびマルチメディア・ブロードキャスト・オン・デマンドを提供する会話ポータル - Google Patents
会話ブラウズおよびマルチメディア・ブロードキャスト・オン・デマンドを提供する会話ポータル Download PDFInfo
- Publication number
- JP4237951B2 JP4237951B2 JP2001104790A JP2001104790A JP4237951B2 JP 4237951 B2 JP4237951 B2 JP 4237951B2 JP 2001104790 A JP2001104790 A JP 2001104790A JP 2001104790 A JP2001104790 A JP 2001104790A JP 4237951 B2 JP4237951 B2 JP 4237951B2
- Authority
- JP
- Japan
- Prior art keywords
- conversation
- information
- multimodal
- access device
- portal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
- G06F16/9577—Optimising the visualization of content, e.g. distillation of HTML documents
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
- H04L67/1014—Server selection for load balancing based on the content of a request
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/487—Arrangements for providing information services, e.g. recorded voice services or time announcements
- H04M3/493—Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals
- H04M3/4938—Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals comprising a voice browser which renders and interprets, e.g. VoiceXML
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、全般的には通信ネットワークを介して情報にアクセスするシステムおよび方法に関し、具体的には、会話ブラウズおよびマルチメディア・アクセス・オン・デマンドなどのサービスを提供するのに会話ブラウザを使用する会話ポータルに関する。
【０００２】
【従来の技術】
コンピューティングの世界は、数十億の相互接続されたパーベイシブ・クライアントが強力な情報サーバと通信する年代に向かって発展しつつある。実際、この千年期は、ユビキタス情報アクセスを人生の受け入れられる事実にする複数の情報デバイスの可用性という特徴を持つことになる。この、インターネット、無線ネットワーク、または自発的ネットワーク（BluetoothおよびJiniなど）を介して相互接続された数十億のパーベイシブ・デバイスに向かう発展は、人間−計算機対話の基礎となる原理に大きい変革を起こすことになる。近い将来に、パーソナル情報デバイスが、ユビキタス・アクセスを提供し、ユーザの現在の必要および能力に最適の対話モーダリティを使用して、いつでもどこでもあらゆる情報を作成し、操作し、交換する能力がパーソナル情報デバイスに与えられる。そのようなデバイスには、従来の電話機、セル電話、スマート・ホン、ポケット・オーガナイザ、ＰＤＡ、およびＰＣなどの、ユーザとの通信に使用されるインターフェース周辺機器が大きく異なる、馴染みのあるアクセス・デバイスが含まれる。それと同時に、この発展が進行するにつれて、ユーザが、これらのさまざまな情報デバイスによって提供されるユーザ経験の一貫性のあるルック、サウンド、およびフィールを要求するようになる。
【０００３】
情報の可用性の増加は、この情報を操作するために各ユーザが使用可能な計算能力の向上と共に、人間−計算機通信の帯域幅を増やすことを付随的に必要とする。それぞれが所与の時点でのユーザの特定の必要および能力に合わせて設計された複数の機器を介して情報にアクセスする能力は、これらの対話で、人間−計算機通信の帯域幅を最大にするためにすべての使用可能な入出力（Ｉ／Ｏ）モーダリティを活用しなければならないことを必ず意味する。実際、ユーザは、手を使う必要がなく、目を使う必要がない環境での情報デバイスとの対話を最大にするために、そのようなマルチモーダル対話を要求するようになる。
【０００４】
残念ながら、現在のインフラストラクチャは、情報へのシームレスでマルチモーダルなアクセスを提供するように完全に構成されてはいない。実際、アクセス・デバイスを使用してネットワーク上のサーバから過多な情報にアクセスできる（たとえば、専用ネットワーク上で使用可能な個人情報および企業情報、インターネットなどのグローバル・コンピュータ・ネットワークを介してアクセス可能な公開情報など）が、そのような情報の可用性は、ユーザがそのような情報を得るために対話しているクライアント／アクセス・デバイスまたはプラットホーム固有ソフトウェア・アプリケーションのモーダリティによって制限される可能性がある。
【０００５】
たとえば、現在、所望の情報を得るために、さまざまなネットワーク上でアクセスできるさまざまな種類のポータル（またはゲートウェイ）がある。たとえば、周知のＷＷＷ（ワールド・ワイド・ウェブ）ポータルには、Yahoo!（インターネットに対してオープンであり、ユーザに対してオープンである）およびＡＯＬ（インターネットに対してオープンであり、加入ユーザが所有コンテンツにアクセスできる）が含まれる。これらのポータルには、通常は、ウェブ・サイトのディレクトリ、検索エンジン、ニュース、気象情報、電子メール、株呼び値などが含まれる。残念ながら、通常は、完全なＧＵＩ機能を有するクライアント／アクセス・デバイスしか、情報にアクセスするためにそのようなウェブ・ポータルを利用することができない。
【０００６】
他のポータルには、通常は電話会社または無線通信業者（加入ユーザに所有コンテンツを提供する）によって提供される無線ポータルが含まれる。これらの無線ポータルは、ＷＭＬ（wireless markup language）またはＣＨＴＭＬ（compact hypertext markup language）などの言語によって宣言的に駆動される限られたＧＵＩ機能を有するクライアント／アクセス・デバイスによってアクセスすることができる。しかし、これらの無線ポータルは、ボイスおよびＧＵＩなどのシームレス・マルチモーダル・アクセスを提供しない。というのは、人間の通信に別のボイス・モードが使用され、ＷＡＰ（wireless application protocol）アクセスおよびＷＭＬブラウズに別の別個のモードが使用されるからである。
【０００７】
さらに、ＩＶＲサービスおよび電話会社は、音声Ｉ／Ｏ機能だけを有するボイス・ポータル（所有コンテンツを加入ユーザに提供する）を提供することができる。ボイス・ポータルの場合、ユーザは、音声ブラウザを使用して、ＩＶＲサービスにアクセスするか、ボイス・ブラウズを実行することができる。残念ながら、ＧＵＩ機能だけを有するクライアント／アクセス・デバイスは、ボイス・ポータルからの情報に直接にアクセスすることができない。同様に、音声Ｉ／Ｏだけを有するクライアント／アクセス・デバイスは、ＧＵＩモーダリティでの情報にアクセスすることができない。したがって、人間−計算機通信の帯域幅は、現在、たとえばクライアント／アクセス・デバイスの使用可能なＩ／Ｏモーダリティおよび情報を提供するサーバに格納されたコンテンツのフォーマットによって、制限されている。
【０００８】
現在使用可能な他の情報供給源には、ラジオ番組およびテレビジョン（ＴＶ）番組へのアクセスを提供するさまざまなサービス・プロバイダ（たとえば、放送会社、ケーブル・サービス・プロバイダ、および衛星サービス・プロバイダ）が含まれる。これらのサービス・プロバイダの多くが、対話式ＴＶおよびブロードキャスト・プログラム・オン・デマンドを提供する。しかし、対話式ＴＶおよびブロードキャスト・プログラム・オン・デマンドを提供する従来の方法は、すべてが、所与のカタログの組からの特定の番組のユーザによる選択に頼る。たとえば、ユーザは、個人的に映画を注文することによって、所与の時刻に特定の映画を観ることを開始することを選択することができる。その代わりに、ユーザは、ある時刻（たとえば１５分ごと）に開始される新しいブロードキャストに参加することができる。
【０００９】
対話式ＴＶの場合、WebTVなどのサービスを使用して、ユーザが、番組に関連するリンク（たとえばウェブ・ページへのＵＲＬ）に従って、関係するメタ情報（すなわち、追加情報または新聞発表の原文または関係する会社または当事者のページなどの関係情報）にアクセスすることができる。他の対話式ＴＶの使用には、たとえば、視聴者の意見を調査することができる放送会社へのフィードバック送信、フィルムの中央バンクからの見られるビデオまたはフィルムの選択、または視聴者の要求に基づく映画または番組の結末の変更が含まれる。WebTVサービスおよびInteractive TVサービスの両方が、テレビジョン・セットに接続されるセットトップ・ボックスまたは特殊なセットトップ・ユニットを使用する。さらに、ペイパービュー・テレビジョンならびに次の映画を選択するために視聴者が投票する（電話またはウェブを介して）ことができるＴＶサービスを、対話式ＴＶの他の形態とみなすことができる。しかし、そのような事例のすべてにおいて、たとえば、達成できるパーソナライゼーションのレベルが、非常に限られている。
【００１０】
インターネット上では、さまざまなウェブ・サイト（たとえばBloomberg TVまたはBroadcast.com）が、ストリーミング・サウンド技法またはストリーミング・メディア技法を使用して、既存のラジオ局およびテレビ局からの放送を提供する。ウェブベースのビデオ・ストリームおよびオーディオ・ストリーミングを使用するウェブ・ブロードキャストは、テレビジョンまたは、たとえばRealnetworks PlayerまたはMicrosoft Windows Media Playerを使用するパーソナル・コンピュータなどのローカル・マシンにユーザがダウンロードし、再生することができる、事前にコンパイルされたビデオ・ラジオ・クリップに頼る。実際、WebTV対話式ＴＶ環境では、ダウンロードされたストリーム化された番組を、ＴＶ上で再生することができる。
【００１１】
テレテキスト・システムでは、ＡＳＣＩＩメタ情報のカタログが、ＴＶ番組と共にユーザのＴＶまたはセットトップ・ボックスにダウンロードされる。ユーザは、その後、後にダウンロードされる所望の項目を選択することができる。最終的に、新しいセットトップ・ボックスは、ローカル・ハード・ディスクまたはローカル・メモリ・システムに番組の圧縮版を格納する能力を提供して、番組中の一時停止または即時再生などのサービスを提供する。
【００１２】
上で説明したマルチメディア・サービスでは、ユーザが、興味のある番組をダウンロードできるようになるが、これらのサービスは、ユーザが自分の興味に基づいて自分のラジオ番組またはＴＶ番組を構成することができる真のブロードキャスト・オン・デマンド・サービスにアクセスする能力をユーザに提供しない。
【００１３】
【発明が解決しようとする課題】
したがって、所望の情報を取り出すか、パーソナライズされたブロードキャスト・プログラム・オン・デマンドを作成するか、その両方を行うためならびにいつでもプログラムを管理し変更するために、すべての種類のクライアント／アクセス・デバイスを介してどの位置からでもいつでもあらゆる情報供給源（たとえばＷＷＷ）へのマルチモーダル・アクセスを提供するシステムおよび方法の必要が存在する。
【００１４】
【課題を解決するための手段】
本発明は、どの位置からでも、いつでも、あらゆる種類のクライアント／アクセスを使用する、通信ネットワークを介する情報への会話（マルチモーダル）アクセスを提供する会話（マルチモーダル）ポータルを使用するシステムおよび方法を対象とする。本発明の１態様では、会話ポータルに、さまざまな入出力（Ｉ／Ｏ）モーダリティを有するクライアント／アクセス・デバイスとのマルチモーダル・ダイアログを行うことができる会話（マルチモーダル）ブラウザが含まれる。会話ブラウザは、要求元クライアント／アクセス・デバイスからの要求に応答して情報供給源（たとえば、インターネット上またはイントラネット／エクストラネット上に配置されたコンテンツ・サーバ）から情報（コンテンツ・ページ、アプリケーションなど）を取り出し、その後、要求元クライアント／アクセス・デバイスのＩ／Ｏモーダリティとの互換性を有するフォーマットで要求元クライアント／アクセス・デバイスに取り出された情報をサービスまたは提示する。
【００１５】
本発明のもう１つの態様では、コンテンツ・サーバによって提供されるコンテンツ・ページおよびアプリケーションが、マルチモーダルであり、ＣＭＬ（会話マークアップ言語）を使用して実施される。一実施形態では、ＣＭＬは、プラットホーム、またはコンテンツをレンダリング／処理するデバイスまたはブラウザのモーダリティから独立に会話対話（マルチモーダル・ダイアログ）を記述できるようにする複数の会話ジェスチャを使用するモーダリティ独立フォーマットで実施される。会話ポータルは、ＣＭＬ文書のローカル処理／レンダリングのために会話ブラウザを実行するアクセス・デバイスに直接にＣＭＬ文書をサービスすることができる。
【００１６】
本発明のもう１つの態様では、会話ポータルが、要求元クライアント／アクセス・デバイスの検出されたＩ／Ｏモーダリティに基づいてモーダリティ独立フォーマット（ＣＭＬ文書）を少なくとも１つのモーダリティ固有フォーマット（たとえばＨＴＭＬ、ＶｏｉｃｅＸＭＬ）に変換するトランスコーダを使用することによって、コンテンツ・ページおよびアプリケーションへのマルチチャネル・アクセスを提供する。
【００１７】
もう１つの態様では、会話ポータルが、マルチメディア・アクセス・オン・デマンドを提供する。会話ポータルには、情報供給源から得られたオーディオ・データおよびマルチメディア・データをセグメント化し、索引付けするためのオーディオ索引付けシステム、ならびに索引付けされたオーディオ・データおよびマルチメディア・データを格納するマルチメディア・データベースが含まれる。ユーザ要求に応答して、会話ブラウザは、所望のセグメントをマルチメディア・データベースから取得し、クライアントのＩ／Ｏ能力に基づいて、そのようなセグメントをクライアントに提示する。会話ポータルを用いると、加入ユーザは、データベースに格納された異なるセグメント（ニュース、ラジオなど）のタイプおよびそれらがユーザに再生／ブロードキャストされる順序をユーザが指定する、ブロードキャスト・プログラムを構成し、維持することができるようになる。会話ポータルによって提供されるブロードキャスト・プログラム・オン・デマンド・サービスは、どの位置からでも、いつでも、すべてのタイプのアクセス・デバイスを使用してアクセスすることができる。
【００１８】
【発明の実施の形態】
本発明は、どの位置からでも、いつでも、すべてのタイプのクライアント／アクセス・デバイスを使用する、コンピュータ・ネットワークを介する情報への「会話アクセス」を提供する「会話ポータル」（「会話ブラウザ」を含む）を使用するシステムおよび方法を対象とする。本明細書で使用する用語「会話」は、アクセス・デバイス／チャネルの機能に基づき、好ましくはオープンでインターオペラブルなプロトコルおよび標準規格を使用する、ユーザと計算機の間およびさまざまなモーダリティ（Ｉ／Ｏ機能）のデバイスまたはプラットホームの間のシームレスなマルチモーダル・ダイアログ（情報交換）を指すことを理解されたい。マルチモーダル・ダイアログには、音声のみ（たとえばＶｏｉｃｅＸＭＬ）、視覚のみ（ＧＵＩ）（たとえばＨＴＭＬ（ハイパーテキスト・マークアップ言語））、制限付きＧＵＩ（たとえばＷＭＬ（wireless markup language）、ＣＨＴＭＬ（compact HTML）、ＨＤＭＬ（handheld device markup language））などのモーダリティ、およびそのようなモーダリティの組合せ（たとえば音声およびＧＵＩ）が含まれる。さらに、各モーダリティ（またはモーダリティの組合せ）を、完全なＮＬ（自然言語）ユーザ・インターフェースとして実施して、万能会話ユーザ・インターフェース（ＣＵＩ）をもたらすことができる。
【００１９】
「会話」対話（または会話コンピューティング）および「会話ブラウズ」の概念は、本明細書で説明する例示的実施形態に関係するので、下で詳細に説明する。さらに、そのような概念の詳細な議論は、たとえば、国際特許出願第ＰＣＴ／ＵＳ９９／２２９２７号明細書、国際特許出願第ＰＣＴ／ＵＳ９９／２２９２５号明細書、および国際特許出願第ＰＣＴ／ＵＳ９９／２３００８号明細書を参照されたい。
【００２０】
本明細書で説明するシステムおよび方法を、ハードウェア、ソフトウェア、ファームウェア、専用プロセッサ、またはそれらの組合せのさまざまな形態で実施できることを理解されたい。具体的に言うと、本発明は、プログラム記憶装置（たとえば、磁気フロッピ・ディスク、ＲＡＭ、ＲＯＭ、ＣＤ−ＲＯＭなど）上で有形に実施され、適当なアーキテクチャを含むすべての装置または計算機によって実行可能であるプログラム命令を含むアプリケーションとして実施されることが好ましい。さらに、添付図面に示された構成要素システム・コンポーネントおよび処理ステップの一部が、ソフトウェアで実施されることが好ましいので、そのようなコンポーネントおよびステップの間の実際の接続が、本発明をプログラムする形に応じて異なる可能性があることを理解されたい。本明細書の教示を与えられた当業者は、これらおよび類似の本発明の実施形態または構成を企図することができる。
【００２１】
図１を参照すると、ブロック図に、コンピュータ・ネットワーク上の情報への会話アクセスを提供する、本発明の一実施形態によるシステム１０が示されている。一般に、システム１０には、会話ポータル１１が含まれ、会話ポータル１１は、１つまたは複数のクライアント／アクセス・デバイス１２ないし１６からマルチモーダル要求を受信し、それに応答して、ネットワーク１７（たとえばインターネット、イントラネット、ＬＡＮ（ローカル・エリア・ネットワーク）、またはBluetoothなどのアド・ホック・ネットワーク）上で１つまたは複数のコンテンツ・サーバ１８（たとえばウェブ・サーバ）から所望のコンテンツ・ページ、サービス、およびアプリケーションを取り出す。会話ポータル１１には、会話ポータル１１のサービス・プロバイダに関連するウェブ・サーバまたはＩＶＲ（対話式ボイス応答）サーバもしくはその両方を含めることができる。下で詳細に説明するように、会話ポータル１１には、クライアント／アクセス・デバイスのＩ／Ｏモーダリティに基づいて要求元クライアント／アクセス・デバイスとの会話ダイアログを行う機構が含まれる。
【００２２】
各クライアント／アクセス・デバイス１２ないし１６は、ネットワーク２９（たとえば無線、ＰＳＴＮ、ＬＡＮ、インターネット）を介する会話ポータル１１への通信を確立することができる。会話ポータル１１には、モーダリティとは独立に、電話番号またはＵＲＬを介してアクセスできることを諒解されたい。たとえば、クライアント／アクセス・デバイス１２ないし１６の構成に応じて、モデムを介するかＷＭＬ（またはセル電話または他の無線デバイスから直接にアクセス可能なアドレス）、ＨＴＭＬブラウザ・クライアント、ＶｏＩＰ（voice over internet protocol）を介するＶｏｉｃｅＸＭＬブラウザ・クライアント、または他の会話プロトコル用のＩＳＰを介するダイヤルアップ接続を使用して、会話ポータル１１との接続を行うことができる。同様に、電話番号（たとえば８００番）を使用して、これらのモーダリティのすべてについて会話ポータル１１への直接アクセス（すなわち、直接電話呼または会話ポータル１１によって直接に提供されるＩＳＰ機能）を提供することができる。
【００２３】
コンテンツ・サーバ１８は、対応するコンテンツ／ビジネス・ロジック１９を維持し、適当なデータベース動作およびレガシ・システム動作（たとえばＣＧＩスクリプトなどを介して）を実行する。コンテンツ／ビジネス・ロジック１９のデータベース内のコンテンツ・ページおよびアプリケーションは、ＨＴＭＬ、ＨＤＭＬ、ＸＭＬ、ＷＭＬ、およびすべてのＳｐｅｅｃｈＭＬフォーマット（たとえば音声ブラウザおよびＩＶＲプラットホームに関する会話ＵＩを宣言的に記述するための標準規格として提案された最近のＶｏｉｃｅＸＭＬ標準規格（www.voicexml.orgを参照されたい）など）などの１つまたは複数のレガシ・フォーマットで実施することができる。
【００２４】
好ましい実施形態では、コンテンツ・ページおよびアプリケーションが、マルチモーダルであり、ＣＭＬ（会話マークアップ言語）を使用して実施される。一般に、ＣＭＬは、所望のアプリケーションに基づいてユーザに関して行われる会話ダイアログ（マルチモーダルの情報交換および対話）を指定／作成するすべての言語を指す。ＣＭＬ文書は、たとえばそのような対話を作成するのに必要な情報を含む、宣言的ページとすることができる。
【００２５】
ＣＭＬ文書およびＣＭＬアプリケーションを、さまざまな形の１つで実施できることを諒解されたい。好ましい実施形態では、ＣＭＬコンテンツは、たとえば、複数の「会話ジェスチャ」を使用する、モーダリティ独立の単独オーサリング・フォーマットで実施される。手短に言うと、会話ジェスチャは、ユーザとのダイアログ対話の特徴を表し、プレゼンテーション材料をレンダリングするデバイスまたはアプリケーションによって提供される特性およびＵＩとは独立のダイアログの抽象表現を提供する、基本的ダイアログ・コンポーネントである。会話ジェスチャは、ダイアログを記述するために宣言的に（たとえばＸＭＬを使用して）または命令的／手続的にのいずれかで実施することができる。
【００２６】
有利なことに、会話ジェスチャの使用（コンテンツ／アプリケーションを生成するための）によって、そのコンテンツを処理またはレンダリングするデバイスのプラットホーム、ブラウザ、モーダリティ、または機能とは独立に、会話対話を記述することができるようになる。下で詳細に説明するように、ジェスチャベースＣＭＬ文書などのマルチモーダル文書を、会話（マルチモーダル）ブラウザを使用して処理して、マルチモーダル・ブラウザによって供給される異なるビューの間の緊密な同期化を提供することができる。さらに、特定の事前定義の規則を使用して、ジェスチャベースＣＭＬ文書のコンテンツを、特定のクライアント・ブラウザまたはアクセス・デバイスによってサポートされる１つまたは複数のモーダリティに自動的にトランスコーディングすることができる。たとえば、ＣＭＬ文書を、ＨＴＭＬ、ＸＨＴＭＬ、またはＸＭＬ（自動business-to-business交換用）、無線ポータル用のＷＭＬ、および音声アプリケーションおよびＩＶＲシステム用のＶｏｉｃｅＸＭＬなどの適当な宣言型言語に変換することができる。実際、下で説明するように、会話ポータル１１には、ＣＭＬページまたはＣＭＬアプリケーションを、クライアント／アクセス・デバイスの特定の１つまたは複数のモーダリティにトランスコーディングする／適応させるための機構が含まれる。したがって、使用される会話ジェスチャの組または使用されるトランスコーディング方法に無関係に、そのような手法が、本明細書で説明する真の「マルチモーダル／マルチチャネル」（すなわち、会話ポータル１１が、会話（マルチモーダル）ブラウザを実行するアクセス・デバイスに対するマルチモーダル文書（ジェスチャベースＣＭＬ文書など）をローカル会話ブラウザによる処理／レンダリングにサービスできるという意味で「マルチモーダル」、会話ポータル１１が、サポートされるモーダリティにＣＬＭを変換することによってマルチモーダルＣＭＬ文書のコンテンツをレガシ・ブラウザ（たとえばＨＴＭＬ、ＶｏｉｃｅＸＭＬ、ＷＭＬ）にサービスできるという意味で「マルチチャネル」）会話ポータルを可能にすることを諒解されたい。
【００２７】
もう１つの実施形態では、複数の視覚的マークアップ言語および聴覚的マークアップ言語を組み込むことによって、マルチモーダルＣＭＬ文書を実施することができる（すなわち、異なる対話モーダリティからの副文書を含むＣＭＬ文書）。たとえば、ＣＭＬ文書は、単一の文書内に、複数の表現された／サポートされるモーダリティのそれぞれからのマークアップ要素（たとえばＶｏｉｃｅＸＭＬタグおよびＨＴＭＬタグ）を組み込むことと、要素ごとに、異なるＭＬコンテンツを同期化させる同期化タグを使用すること（すなわち、あるモーダリティの所与のコマンドのアクションを、他のサポートされるモーダリティの対応するアクションと同期化させること）とによって実施することができる。
【００２８】
ジェスチャベースＣＭＬ文書と複数のＭＬを含むＣＭＬ文書の主な相違は、ジェスチャベース手法が単一のオーサリングを提供するのに対して、複数ＭＬ手法が複数のオーサリングを必要とすることである。さらに、ジェスチャベース手法は、マルチモーダル・ブラウズ実施形態での「緊密な」同期化を提供するが、これは、複数ＭＬ手法（「疎な」同期化を提供することがしばしばである）を使用して達成することがより困難である。どの場合でも、マルチモーダルＣＭＬ文書は、たとえば既知の標準規格ＸＳＬＴまたはＸＳＬで表現可能な標準木変換を使用して、特定の対話モーダリティについて独立の文書に変換することができる。ＪＳＰ（Java server pages）またはJava Beansなど、ジェスチャごとのＣＭＬページの同様の変換を実施する他のトランスコーディング技法を使用することができる。実施することができる追加のトランスコーディング技法は、たとえば、www.w3c.orgで議論されている。実際、所望のモーダリティの文書に変換することができるマルチモーダル文書の実施によって、コンテンツの再利用が保証され、アクセス可能性要件が満たされる（たとえば、組み合わされた視覚モーダリティおよび聴覚モーダリティを用いて設計されたマルチモーダル文書を、１つのモーダリティだけが使用可能な環境で使用することができる）。
【００２９】
図１の例示的実施形態をもう一度参照すると、会話ポータル１１には、ポータル・プロキシ／捕捉モジュール２０、ポータル・トランスコーダ２１、ポータル会話ブラウザ２２、検索エンジン２３、ポータル音声ブラウザ２４、ポータルの会話アプリケーション２５のデータベース、およびポータル・ディレクトリ２６のデータベースが含まれる。ポータル会話ブラウザ２２は、クライアント要求に応答する所望のページなどの（ＨＴＴＰ、ＷＡＰ、またはBluetoothなどの会話トランスポート・プロトコルを使用する）取出、および、たとえば所与のクライアント／アクセス・デバイス１２ないし１６と会話ポータル１１の間の会話ダイアログを実施するための、ＣＭＬページを含む宣言的フレームワークの解析および処理（アプレットなどの組み込まれた手続的指定を含む）などの機能を実行する責任を負う。
【００３０】
ポータル会話ブラウザ２２が、ＣＭＬ実施形態と共に、会話（マルチモーダル）Ｉ／Ｏイベントを（ｉ）対応するアプリケーション・アクション（他のモーダリティの）または（ｉｉ）それによって適当なアクションを生成するための入力イベントの理解の曖昧さの除去、完成、または訂正を必要とするダイアログのいずれかに変換する機構を含むことを諒解されたい。ポータル会話ブラウザ２２は、取り出されたページを含む会話ＵＩをユーザへの提示のためにレンダリングする（アクセス・デバイスにローカル・クライアント・ブラウザが含まれないと仮定する）か、ローカル・クライアント・ブラウザによるレンダリング／提示のためにクライアント／アクセス・デバイス１２ないし１６にページをサービスするかのいずれかを行う。
【００３１】
会話ポータル１１では、適当なマルチモーダル・ブラウザであればどれでも実施することができるが、ポータル会話ブラウザ２２の好ましいアーキテクチャの１つが、図５に示されており、手短に言うと、図５に示されているように、会話（マルチモーダル）ブラウザ４０には、複数の単一モード・ブラウザ（たとえば、図示のように視覚的ブラウザ４４（ＨＴＭＬ）および音声ブラウザ４５（ＶｏｉｃｅＸＭＬ））、マルチモーダル・シェルＡＰＩ４１、および、登録テーブル４３を有するマルチモーダル・シェル４２が含まれる（マルチモーダル・シェル４２は、従来のどのオペレーティング・システム／プラットホーム上でも動作する）。マルチモーダル・シェル４２は、ネットワーク１７を介してコンテンツ・サーバ１８から取り出されたＣＭＬ文書を処理する仮想メイン・ブラウザとして機能する。
【００３２】
マルチモーダル・シェル４２は、単一モードの視覚的ブラウザ４４および音声ブラウザ４５のそれぞれが、そのアクティブ・コマンドおよび対応するアクション（モード間処理およびモード内処理の両方ならびに他の処理に関するアクション）を登録できるようにする、ＡＰＩ呼出しを介する情報交換を調整する。そのような登録には、そのようなコマンドに関連する適当なタスクを実行するための関係する引数を含めることができる。
【００３３】
マルチモーダル・シェル４２の登録テーブル４３は、「ｎウェイ」コマンド／イベント−アクション登録テーブルとして実施されるレジストリであり、このテーブルに登録されるコマンドまたはイベントのそれぞれによって、アクティブ・アプリケーションについて同期化され共用される「ｎ」個のモーダリティのそれぞれをもたらす特定のアクションが示される。マルチモーダル・シェル４２は、取り出されたＣＭＬ文書を解析して、登録テーブル４３を介する同期化を作成し、ＣＭＬ文書を含む関係するモーダリティ固有情報（たとえばマークアップ言語）を、ブラウザの対話モーダリティに基づくレンダリングのために各ブラウザに送信する。会話（マルチモーダル）ブラウザ４０は、サポートされるモーダリティごとに別々のブラウザ・アプリケーション、ならびに別のマルチモーダル・シェル層を含むものとして図示されているが、これらのコンポーネントの機能性を、会話（マルチモーダル）ブラウザ４０を含む１つのアプリケーションに合併できることを諒解されたい。さらに、マルチモーダル・ブラウザのコンポーネントを、分散することができる。たとえば、マルチモーダル・シェル４２は、会話ポータル１１上に常駐することができるが、視覚的ブラウザ４４および音声ブラウザ４５の一方（または両方）が、マルチモーダル・シェル４２がＣＭＬ解析および同期化を提供する状態で、クライアント・アクセス・デバイス上に常駐することができる。
【００３４】
図６に、より複雑な会話コンピューティング機能が必要な時に、ＣＶＭ（会話仮想計算機）を使用して使用することができるポータル会話ブラウザ２２のもう１つの好ましいアーキテクチャを示す。図６の実施形態では、マルチモーダル・シェル４２の機能性を、コアのＣＶＭカーネル５５内で実施することができる。図６に示されたアーキテクチャの説明は、下で行う。
【００３５】
もう一度図１を参照すると、会話ポータル１１には、コンテンツ・ページについてネットワーク１７を検索するロボット、スパイダ、またはクローラとして既知のアプリケーションを含む適当な従来のタイプの検索エンジン２３が含まれる。さまざまなコンテンツ・ページに、検索エンジン２３の検索可能データベースすなわちポータル・ディレクトリ２６のデータベース内で索引を付けることができる。ポータル会話ブラウザ２２からの解釈された照会を受け取って検索を実行する時に、検索エンジン２３は、照会を実行し、ネットワーク１７およびポータル・ディレクトリ２６を検索して、コンテンツ・サーバ１８上の所望のサイト、コンテンツ・ページ、およびブロードキャストを突きとめ、可能な一致のランク付きリストをＣＭＬフォーマットで返す（たとえば、当業者によって理解されるように、結果のサイトが、検索されたトピックにどれほど近いかのパーセンテージによってランク付けされる）。ランク付きリストは、会話ダイアログを介するユーザへの提示およびユーザによる選択のために、たとえばポータル会話ブラウザ２２を介して、ユーザにレンダリングされる。
【００３６】
検索エンジン２３が、ＣＭＬ、ＨＴＭＬ、ＸＭＬ、または他のレガシ言語フォーマットもしくは新しい言語フォーマットのコンテンツ・ページを突きとめる（そのページが、要求元クライアント／アクセス・デバイスのＩ／Ｏ機能に基づいて異なるモーダリティに変換される可能性があるが）ことを理解されたい。すべての従来の照会フォーマットを、検索エンジン２３によって使用することができることを理解されたい。たとえば、検索エンジン２３は、検索エンジンに使用可能な技術に基づいて、ＮＬＵ照会、または、単純にキーワード照会、ブール照会、および概念／属性ベースの照会をサポートすることができる。さらに、会話ポータル１１は、ＣＭＬに会話ユーザ・インターフェースを提供することが好ましいので、検索エンジンは、すべての可能なＩ／Ｏモーダリティおよびモーダリティの組合せをサポートすることができる。下記の方法を使用するマルチリンガル検索も、考慮することができる。照会は、記号表現（属性／値対）にマッピングされる。属性／値対は、他の言語への直接意味変換（すなわち、必ずしもリテラルではない）の実行に使用される。その後、新しい照会を使用して、他の言語の文書の検索を実行する。
【００３７】
会話ポータル１１が複数チャネルをサポートする「マルチチャネル」態様では、ポータル・トランスコーダ２１を使用して、取り出された文書（ユーザによって選択される）を、要求元クライアント／アクセス・デバイスのサポートされるモーダリティ（１つまたは複数）にトランスコーディングする。具体的に言うと、要求元クライアント／アクセス・デバイスの検出されたモーダリティ（１つまたは複数）に基づいて、ポータル・トランスコーダ２１が、解析されポータル会話ブラウザ２２から出力されたマルチモーダル文書（たとえばジェスチャベースのＣＭＬ文書）を、１つまたは複数のモーダリティ固有フォーマットに変換する。
【００３８】
たとえば、図１に示されているように、クライアント／アクセス・デバイスは、ＨＴＭＬブラウザ１３ａ、ＷＭＬブラウザ１４ａ、またはＶｏｉｃｅＸＭＬブラウザ１５ａなどの、それぞれがパーソナル・コンピュータ（ＧＵＩおよび音声）、携帯電話（音声のみまたは音声および制限付きＧＵＩ）、スマートホン（音声および制限付きＧＵＩ）、ＰＤＡ（制限付きＧＵＩのみ）などのマルチモーダル・デバイスまたは単一モーダル・デバイスで稼動するローカル・レガシ・ブラウザとすることができる。さらに、クライアント／アクセス・デバイス１６は、ポータル音声ブラウザ２４を介して会話ポータル１１と対話する通常の電話（音声Ｉ／Ｏのみ）とすることができ、ここで、ポータル音声ブラウザ２４は、たとえばＶｏｉｃｅＸＭＬ文書を処理してＩＶＲサービスを提供する。実際、コンテンツがＣＭＬで格納／構成される好ましい実施形態では、会話ポータル１１が、各ＣＭＬページをサポートされるＭＬにトランスコーディング（オンザフライで）することによって、これらのチャネルまたはクライアント／アクセス・デバイスのいずれをも直接にサービスできることを諒解されたい。たとえば、ＣＭＬ文書は、（１）ＧＵＩモーダリティを有する従来のブラウザを使用するインターネット・アクセス（ＨＴＴＰを介する）をサポートするためにＨＴＭＬに、（２）ＷＭＬブラウザを使用する無線ネットワークを介する無線アクセス（ＷＡＰを介する）をサポートするためにＷＭＬに、（３）音声ブラウザを使用するＰＳＴＮを介する従来の電話アクセスをサポートするためにＶｏｉｃｅＸＭＬに、または（４）他の現行のＭＬまたは開発される可能性がある将来のＭＬに、変換することができる。
【００３９】
ポータル・トランスコーダ２１は、１つまたは複数のトランスコーディング技法を使用して、ＣＭＬページを１つまたは複数のレガシ・フォーマットに変換する。たとえば、そのような変換は、所定のトランスコーディング規則を使用して実行することができる。具体的に言うと、そのような変換は、デバイス固有でモーダリティ固有のＸＳＬスタイルシートでカプセル化することができる。さらに、上で示したように、ＪＳＰまたはJava Beansなど、ジェスチャごとのＣＭＬページの同様の変換を実施する他のトランスコーディング技法を使用することができる。
【００４０】
ポータル・トランスコーダ２１が、所与のモーダリティでのユーザ対話のＣＭＬ表現へのマッピング（同期化されたマルチモーダル対話の場合、１つのモーダリティでの対話が、他のすべての同期化されたモーダリティにまたがって反映されることになる）などの他の機能を実行することを諒解されたい。さらに、ポータル・トランスコーダ２１の機能性を、ポータル会話ブラウザ２２内に組み込むことができることを諒解されたい。たとえば、図５の会話（マルチモーダル）ブラウザ４０のアーキテクチャでは、マルチモーダル・シェル４２が、マルチモーダル文書のモーダリティ固有表現への動的トランスコーディングおよび異なるモーダリティの間の同期化などの機能を実行する。
【００４１】
会話ポータル１１が、ローカル会話（マルチモーダル）ブラウザ１２ａによるレンダリングのためのマルチモーダルＣＭＬページをサービスする「マルチモーダル」態様では、ポータル・トランスコーダ２１は使用されない。というのは、必要なトランスコーディング／同期化機能が、ローカル会話（マルチモーダル）ブラウザ１２ａによってクライアント側で実行されるからである。実際、ローカル会話（マルチモーダル）ブラウザ１２ａ（図５に関して上で説明したアーキテクチャを有する）を実行する、マルチモーダルのクライアント／アクセス・デバイス１２の場合、会話ポータル１１が、取り出されたＣＭＬ文書をローカル会話（マルチモーダル）ブラウザ１２ａに直接にサービスし、ここで、ＣＭＬ文書が、異なる同期化されるモーダリティ（たとえば、マルチモーダルＷＡＰブラウザ（すなわちＷＭＬモーダリティ用のマイクロブラウザ）のために緊密に同期化されるＷＭＬ文書およびＶｏｉｃｅＸＭＬ文書、または音声ブラウザ（ローカルまたはリモート）およびＨＴＭＬブラウザを含む緊密に同期化される会話（マルチモーダル）ブラウザ用のＨＴＭＬおよびＶｏｉｃｅＸＭＬ）に動的にトランスコーディングされる（たとえばマルチモーダル・シェルを介して）ことを諒解されたい。
【００４２】
「マルチチャネル」態様および「マルチモーダル」態様の両方で、会話ポータル１１が、クライアント・ブラウザまたはアクセス・デバイスもしくはその両方のチャネルおよび機能を検出して、必要な場合にＣＭＬ文書をどのモーダリティ（プレゼンテーション・フォーマット）に変換するかを判定することを諒解されたい。たとえば、クライアント／アクセス・デバイスのアクセス・チャネルまたはモーダリティは、（ｉ）照会の種類または要求されたアドレス（たとえば、ＷＭＬページの照会は、クライアントがＷＭＬブラウザであることを暗示する）、（ｉｉ）アクセス・チャネル（たとえば、電話アクセスは、音声のみを暗示し、ＧＰＲＳネットワーク・アクセスは、ボイスおよびデータ機能を暗示し、ＷＡＰ通信は、アクセスがＷＭＬであることを暗示する）、（ｉｉｉ）ユーザ設定（ユーザは、発呼番号、呼出し側ＩＰ、生物学的測定、パスワード、クッキーなどによって識別することができる）、または（ｉｖ）会話ブラウザ・クライアントの場合に、登録プロトコル、もしくはこれらの組合せによって判定することができる。
【００４３】
図１のシステム１０には、さらに、トランスコーダ２８を有する会話プロキシ・サーバ２７が含まれ、このトランスコーダ２８は、所与のコンテンツ・プロバイダの１つまたは複数のサイトのページ／アプリケーションをレガシ・フォーマットからＣＭＬフォーマット（または他のレガシ・フォーマットもしくはその両方）にトランスコーディングするのに使用することができる。会話プロキシ・サーバ２７は、たとえばコンテンツ・プロバイダまたはコンテンツプロバイダと契約したサード・パーティに直接に加盟させて、コンテンツ・プロバイダのサイトをトランスコーディングし、トランスコーディングされたサイトを格納し、元のサイトがコンテンツ・プロバイダによって変更された時に、格納された（トランスコーディングされた）コンテンツを周期的に更新することができる。たとえば、ＨＴＭＬベースのサイトのサービス・プロバイダは、会話プロキシ・サーバ２７のトランスコーディング・サービスを使用して、サイトのＨＴＭＬコンテンツをＣＭＬフォーマットに変換することができる。そのようなトランスコーディングは、ローカル会話（マルチモーダル）ブラウザ１２ａを実行するクライアント／アクセス・デバイス１２に特に適用可能であり、これによって、ユーザが、厳密に従来のＭＬフォーマットである文書／アプリケーションを含むサイトにアクセスする時にマルチモーダル・ブラウズを行うことができる。この形で、会話ポータル１１は、その後、そのようなページがそのサイトから直接に取り出された時から、そのようなトランスコーディングされたページ（たとえばＣＭＬページ）を会話プロキシ・サーバ２７から取り出すことができる。
【００４４】
会話プロキシ・サーバ２７を使用することによって、コンテンツ・プロバイダが、コンテンツ・プロバイダのページ／アプリケーションを１つまたは複数の所望のモーダリティに変換するために未知のポータル・トランスコーダに頼るのではなく、そのコンテンツがユーザにレンダリングされる（ポータル会話ブラウザ２２またはクライアント・ブラウザによって）形を制御できるようになる。実際、ポータル・トランスコーダ２１が、そのような変換を適当に実行するためにコンテンツ・プロバイダの特定のレガシ文書、アプリケーション、またはビジネス・ロジックもしくはこれらの組合せに関する特定の所有情報を有しない場合がそうである可能性がある（その情報は、コンテンツ・プロバイダだけが知っているか、コンテンツ・プロバイダによって契約したサード・パーティに供給される）。
【００４５】
会話プロキシ・サーバ２７のトランスコーディング・サービスを、自動トランスコーディング技法を使用して実行できることを理解されたい。たとえば、トランスコーダ２８は、ＨＴＭＬ、ＷＭＬ、またはＤＢ２などの従来の（レガシ）構造を有する文書フォーマットを、事前に指定されたトランスコーディング規則を使用してＣＭＬ文書にトランスコーディングすることができる。基本的な構成規則および設計規則を課して（私有または標準規格の対象のいずれかである）、ＨＴＭＬなどのレガシ・フォーマットからＣＭＬへの変換を簡略化することができる（上で組み込まれた国際特許出願第ＰＣＴ／ＵＳ９９／２３００８号明細書に記載の、ＨＴＭＬをｓｐｅｅｃｈＭｌ（ＶｏｉｃｅＸＭＬ）に変換するトランスコーディング規則など）。ジェスチャおよびジェスチャ・パターンの抽出の使用など、他の技法をＨＴＭＬ（または他のレガシＭＬフォーマット）からＣＭＬへのトランスコーディングに使用できることを理解されたい。たとえば、作られたトランスコーディングされたページをＣＭＬからＨＴＭＬへリバース・エンジニアリングすることによって、ＨＴＭＬタグ・パターンの大きいセットを、特定のＣＭＬジェスチャまたはジェスチャのグループにマッピングすることができる。追加のＨＴＭＬタグの詳細を、やはりＣＭＬパターンに変換するか、ページに組み込まれたＨＴＭＬタグとしてＣＭＬページに追加するかのいずれかを行うことができる。この最後の手法は、ジェスチャには関係しないが、ジェスチャで取り込む価値のない、追加のモーダリティ固有（この例ではＨＴＭＬ）のレンダリング情報（たとえば画像の表示）に直接に関係する詳細に使用することができる。さらに、トランスコーダ２８は、トランスコーディングの目的でレガシ・ページに追加されるメタ情報を使用することができる。
【００４６】
さらに、トランスコーダ２８による自動トランスコーディングの結果が、不完全または不正確である時、または会話プロキシ・サーバ２７のサービス・プロバイダが、トランスコーディング結果の品質向上を望む時に、人間のオペレータを使用して、トランスコーディングの結果の手作業の再検討、訂正、または完了もしくはこれらの組合せを行うことができる。実際、すべてのウェブ・サイトが、あまねくＣＭＬでオーサリングされるか、適当な／標準的な構成規則に従うか、完全に自動化されたトランスコーディングをサポートするために適当なメタ情報／ヒントを追加するかのいずれかを行うまでは、手作業の再検討／トランスコーディング・オプションが、複雑なビジネス・ロジックを有するサイトを効率的かつ正確にモデリングするのに特に有利である。
【００４７】
異なるビジネス・モデルに基づいて、会話ポータル１１が、コンテンツ・プロバイダのコンテンツ・サーバ１８のコンテンツ・ページ／アプリケーションをよりよい会話レンダリングのためにＣＭＬで準備または適合させるサービスを、コンテンツ・サーバ１８に提供できることを諒解されたい。たとえば、会話ポータル１１は、（登録されたウェブ・サイトに）その既存のコンテンツ・ページ／アプリケーション（レガシ・フォーマットの）をＣＭＬに事前にトランスコーディングさせ、ポータル・ディレクトリ２６に格納させて、そのようなページを、その後、異なるモーダリティにまたがって高品位レンダリングと共にサービスできることを保証するというオプションを提供することができる。そのようなトランスコーディングは、会話プロキシ・サーバ２７を介して行うことができる（それが会話ポータル１１のサービス・プロバイダに加盟されると仮定する）。さらに、そのようなトランスコーディングは、特定の提携／料金／ビジネス契約を介してウェブ・サイトから直接に情報を得るポータルのオペレータによって直接に実行することができる。サイトの変更を検出し、そのサイト内のトランスコーディングされたコンテンツをそれ相応に更新する機構を使用することができる（すなわち、元のサイトを検査するクローラまたは変更が発生した時の通知契約）。さらに、上で述べたように、自動的トランスコーディング（トランスコーダ２８を介する）の結果が、不完全または不正確である時、または会話ポータル１１のサービス・プロバイダが、トランスコーディング結果の品質を高めたいと思う時に、人間のオペレータを使用して、トランスコーディングの結果の手作業の再検討、訂正、または完了もしくはこれらの組合せを行うことができる。再検討され訂正されたページは、ポータル・ディレクトリ２６に格納することができる。さらに、ページの部分またはパターンを、ポータル・ディレクトリ２６に格納することができる。
【００４８】
さらに、会話ポータル１１のサービス・プロバイダは、最初の例では会社または個人の「会話」ウェブ・サイトを生成し、会話ポータル１１のハードウェアまたはネットワークもしくはその両方でその会話ウェブ・サイトをホスティングするというサービスを提供することができる。実際、会話ポータル１１のサービスは、「会話」ウェブ・サイトに関連する複数のＣＭＬページを生成し、そのようなＣＭＬページをポータル・ディレクトリ２６のデータベースに格納することができる。やはり、会話ポータル１１のサービス・プロバイダは、異なるビジネス・モデルおよびサービス・オファリングに基づいて、これらのさまざまなサービスを提供できることを理解されたい。
【００４９】
したがって、ポータル・ディレクトリ２６のデータベースには、１つまたは複数のコンテンツ・プロバイダのコンテンツ・ページ／アプリケーションを格納することができ、このコンテンツ・ページ／アプリケーションは、効率的な会話レンダリングを提供するために、事前にトランスコーディングされるかＣＭＬで設計されるかのいずれかである。検索プロセス中に、検索エンジン２３は、ウェブ検索に加えて、ポータル・ディレクトリ２６内で要求されたコンテンツを検索する。さらに、ポータル・ディレクトリ２６内のリンクの一部にも、会話アプリケーション２５を含めることができる（たとえば、ＣＶＭの上に構築されるマルチモーダル手続きアプリケーション）。会話アプリケーション２５は、モーダリティ独立ダイアログを担持することによって、アプリケーションに「会話ユーザ・インターフェース」を引き渡すためにすなわち、いつでもどこからでもすべてのデバイスを介して同一の挙動を伴って関係情報にユーザがアクセスでき操作できるようにするために、命令的に（すなわち、命令コードをコンパイルすることによって）、宣言的に（すなわち、マークアップ言語を用いて作成する）、またはその両方の組合せで開発される、通常のアプリケーションである。そのようなアプリケーションの例には、ＣＵＩを介するユニバーサル・メッセージング（電子メール、ファクシミリ、およびボイス・メールのアクセスおよび処理）、日程表作成、e-businessアプリケーションなどが含まれる。これらのポータルの会話アプリケーション２５は、会話ポータル１１のサービス・プロバイダによって直接に提供されるか、会社または個人の代わりに会話ポータルによってホスティングされることが可能であることを諒解されたい。やはり、これらのサービスのすべてを、さまざまなビジネス・モデルに従って提供することができる。
【００５０】
ポータル・プロキシ／捕捉モジュール２０は、会話ポータル１１に対して行われる電話呼またはブラウザ接続（たとえばＨＴＴＰ、ＷＡＰなど）を「捕捉する」ために会話ポータル１１内に組み込むことができるオプション機能である。たとえば、好ましい実施形態では、クライアント／アクセス・デバイス１２ないし１６（たとえばスマートホン、ＨＴＭＬブラウザ、ＷＭＬブラウザ、会話ブラウザ）が、会話ポータル１１に接続し、要求を入力する時に、会話ポータル１１は、会話ポータル１１によって提供され、ユーザによって従われるすべてのリンクについて、呼／クライアント・ブラウザを捕捉状態に維持する。具体的に言うと、会話ポータル１１を介する最初の要求またはポータルによってその後にロードされるページのいずれかから生じる、会話ポータル１１によって提供されるすべてのリンクが、ポータル会話ブラウザ２２によって（クライアント・ブラウザではなく）取り出され、クライアント・ブラウザにサービスされる。ポータル・プロキシ／捕捉モジュール２０は、リンクを取り出し、おそらくはリンクを適当なモーダリティ固有マークアップ言語（たとえばＷＡＰブラウザではＷＭＬ、ウェブ・ブラウザではＨＴＭＬ、音声ブラウザ（電話アクセス）ではＶｏｉｃｅＸＭＬ）にトランスコーディングし、取り出したページをクライアント・ブラウザ（電話アクセスの場合にはサーバ側のポータル音声ブラウザ２４とすることができる）にサービスするのに要する時間の間、クライアントを捕捉状態に保つ。
【００５１】
その一方で、好ましい実施形態では、ユーザによって手作業で直接に要求／入力されるページ（明示的に入力されたＵＲＬ、ブックマーク、他のアプリケーションによって生成されたリンク）は、クライアント・ブラウザによる適当なページの取出のためにクライアント・ブラウザに解放される（すなわち、クライアント・ブラウザが捕捉状態に保たれない）。呼捕捉機能に関する他のポリシを使用することができ、たとえば、会話ポータル１１が、全セッション中に呼を捕捉する（すなわち、全く解放しない）ことができ、また、捕捉期間を情況に基づいて（会話ポータル１１による決定に従って）変更することができることを理解されたい。
【００５２】
有利なことに、呼／クライアント・ブラウザが捕捉状態に保たれている期間の間は、会話ポータル１１のサービスが、継続的に「会話」を聴取／参加し、追加サービスを提供し、ユーザに広告を提供することができる。たとえば、好ましい実施形態では、サイトからサイトへのページ取出の間の時間枠中（必ずしも同一のサーバからの同一のアプリケーションのページ取出の間の時間枠ではなく）に「捕捉状態の」ユーザにマルチモーダル広告を提供することができる。やはり、広告が提供される時間は、会話ポータル１１のポリシに基づいて変更することができる。広告は、純マルチモーダル機能であることを諒解されたい。実際、広告は、クライアント／アクセス・デバイスのモーダリティに応じて、表示、オーディオを使用するレンダリング、またはその両方を行うことができる。さらに、マルチモーダル文書の（マルチモーダル・ブラウザによってレンダリングされる）特定の部分で、コンテンツとは別のフレームに広告を追加することができる。やはり、会話ポータルのサービス・プロバイダによって実施できるさまざまなオプションがある。
【００５３】
ここで図６を参照すると、ブロック図に、図１のシステムで使用することができる会話ブラウザのもう１つの好ましいアーキテクチャが示されている。マルチモーダル・ブラウザである会話ブラウザ５０は、ＣＶＭシェル５３の上で実行される。会話ブラウザ５０には、ＣＭＬ文書を解析し、ＣＭＬ文書のメタ情報を処理して、ユーザに提示するために文書をレンダリングするＣＭＬパーサ／プロセッサ・モジュール５２が含まれる。会話ブラウザ５０には、さらに、音声コマンド、ＤＴＭＦ信号、キーボード入力などのユーザ・コマンド／要求（マルチモーダル）を解釈するコマンド／要求プロセッサ５１（たとえば、コマンドおよび制御インターフェースおよびＨＴＴＰサーバ）が含まれる。ある会話機能または会話サービスが必要な時には、会話ブラウザ５０は、ＣＶＭシェル５３に対する、そのようなサービスを要求するＡＰＩ呼出しを行う（下で説明する）。たとえば、ＣＭＬ文書を（ＣＭＬパーサ／プロセッサ・モジュール５２を介して）解釈する時に、会話ブラウザ５０は、ＴＴＳ（テキスト−音声合成）エンジン６７に（ＣＶＭシェル５３を介して）フックして、合成された音声出力をユーザに提供する。さらに、音声コマンドまたは自然言語照会（たとえばナビゲーション要求）が入力された時に、会話ブラウザ５０は、音声認識エンジン６４およびＮＬＵ（自然言語理解）エンジン６６にフックして、そのような入力コマンドを処理し、これによって、コマンド／要求プロセッサ５１が適当な要求／照会を生成できるようにすることができる。
【００５４】
ＣＶＭシェル５３は、通常のＯＳ（オペレーティング・システム）またはＲＴＯＳ（リアルタイム・オペレーティング・システム）の上で稼動することができる。手短に言うと、図６に示されているように、ＣＶＭシェル５３には、会話ＡＰＩ層５４が含まれ、この会話ＡＰＩ層５４を介して、会話ブラウザ５０が、ＣＶＭカーネル５５に「話しかけて」、（システム呼出しを介して）会話エンジン６３を含むある会話サービスおよび振る舞いにアクセスすることができる。ＣＶＭカーネル５５は、エンジンおよび引数（ローカルまたは分散もしくはその両方）などの会話リソースの割振と、汎用の調整されたＣＵＩ（会話ユーザ・インターフェース）をそれによって提供するために登録された会話機能／要件に基づいて複数のアプリケーションおよびデバイス（ローカルまたは分散もしくはその両方）にまたがるダイアログおよびコンテキストの管理および制御の責任を負う。ＣＶＭシェル５３は、たとえば、会話エンジンＡＰＩ層５６（ＳＡＰＩ、ＳＲＡＰＩ、ＪＳＡＰＩ、ＳＶＡＰＩ、またはそのようなエンジンＡＰＩの拡張など）を介して、音声認識エンジン６４、話者識別／検証エンジン６５、ＮＬＵ（自然言語理解）エンジン６６、ＴＴＳ（テキスト−音声合成）エンジン６７（ならびにＮＬＧ（自然言語生成）エンジンなどの他のエンジン）などのローカルの会話エンジン６３への呼出しを実施することによって、会話サービスおよび会話機能を実行する。さらに、分散トポロジで、リモート音声エンジンへのエンジン呼出しを行うことができる。さらに、オーディオ・サブシステム６２（オーディオ取込、圧縮、圧縮解除、および再構成を提供する）およびＤＴＭＦエンジン６１への呼出しを、通常のドライバ／ＡＰＩ層６０を介して実行することができる。
【００５５】
ＣＶＭシェル５３には、さらに、ＴＣＰ／ＩＰ、ＨＴＴＰ、ＷＡＰなどの従来のプロトコル５８を介するネットワーク通信を提供する通信スタック５７が含まれる。通信スタック５７には、さらに、分散アプリケーションのために使用される会話プロトコル５９（または分散会話プロトコル）が含まれる。上で組み込まれた特許申請書に記載されているように、会話プロトコル５９（または会話方法）には、（１）「会話対応」（すなわち、会話プロトコルを話す）ネットワーク・デバイスおよびアプリケーションを発見するためのプロトコル、（２）ネットワーク・デバイス間で会話エンジンおよび引数などの会話機能（リソース）を登録するためのプロトコル、（３）登録された会話機能に基づいてネットワーク構成（マスタ／スレーブ、対等通信など）を折衝するためのプロトコル、（４）ダイアログの状態、コンテキスト、およびヒストリ、会話引数、アプレット、ＡｃｔｉｖｅＸコンポーネント、手続きオブジェクト、および他の実行可能コードに関する情報など、ネットワーク接続されたデバイスの間での会話を調整するために情報を交換するためのプロトコル、（５）圧縮された音声（波形または特徴）を送受信するための音声符号化プロトコルが含まれる。
【００５６】
図６に示された会話エンジン６３、ＤＴＭＦエンジン６１、通常のドライバ／ＡＰＩ層６０およびオーディオ・サブシステム６２が、会話ブラウザ５０およびＣＶＭシェル５３がその上で実行される基礎となるデバイス、計算機、またはプラットホームの一部であるコンポーネントであることを理解されたい。さらに、会話ブラウザ５０およびＣＶＭシェル５３を、別々のシステムとして提供することができ、その代わりに、会話ブラウザ５０を、それ自体のＣＶＭシェル５３を担持する独立のアプリケーションとして実施することができる（この場合、ブラウザとＣＶＭのプラットホームが同一、すなわち区別不能なエンティティになる）ことを理解されたい。さらに、具体的に上で説明したＣＶＭシェル５３がない場合、会話ブラウザ５０に、説明したＣＶＭシェル５３の機能性および特徴のすべてを組み込むことができる（たとえば、会話ブラウザが、適当なエンジンに対するＡＰＩ呼出しをローカルまたは分散もしくはその両方で行う）ことを理解されたい。実際、ＡＰＩ、サービス、特徴、振る舞い、エンジンへのアクセス、および通信機構は、すべて、ブラウザによって提供される特徴およびサービスの一部として、会話ブラウザ５０に直接に組み込むか、その一部とすることができる。
【００５７】
ここで図２を参照すると、ブロック図に、会話ポータル１１を使用して情報にアクセスするための、本発明のもう１つの実施形態によるシステムが示されている。図２のシステム１０は、図１に示されたシステムの拡張であり、追加的に、マルチモーダル・ブロードキャスト・オン・デマンド・サービスを提供する。具体的に言うと、図２のシステムには、オーディオ索引付けシステム３０が含まれ、このオーディオ索引付けシステム３０は、ネットワーク１７を介してあるコンテンツ・プロバイダのコンテンツ・サーバ１８からアクセスされるブロードキャスト・ニュース、ラジオ・ニュース番組、およびウェブ・ブロードキャストなどの、オーディオ／マルチメディア文書もしくはストリーム化されたオーディオまたはストリーム化されたマルチメディアもしくはその両方のリアルタイム索引付けを実行することが好ましい。ブロードキャストには、ニュースから娯楽までの範囲に渡る（生または事前記録の）オーディオ作品およびビデオ作品を含めることができる。たとえば所与のブロードキャストまたはマルチメディア文書に関連する、索引メタ情報は、マルチモーダル・ブロードキャスト・コンテンツのデータベース３１に格納することができる。ユーザは、あらゆるタイプのクライアント／アクセス・デバイスを使用して会話ポータル１１に接続し、索引メタ情報を使用してデータベース３１を検索して、たとえばあるブロードキャストまたはオーディオ・ファイルの所望のセグメントにアクセスすることができる。クライアント／アクセス・デバイスの機能に応じて、ポータル会話ブラウザ２２が、たとえばマルチメディア・プレイヤ（たとえばRealnetworks playerまたは他のＩＰブロードキャスト・ストリームを再生するアプリケーション）などのプラグインを介して、ストリーム化されたビデオまたはオーディオの所望のセグメントをレンダリング／提示すること、または、そのセグメントを、ユーザへのレンダリング／再生のために、取り出し、アクセス・デバイス上のクライアント・ブラウザにブロードキャスト／ストリーム化すること、のいずれかを行うことができる。
【００５８】
適当な従来のオーディオ索引付けシステムであれば、どれでも図２のシステム内で使用できることを理解されたい。手短に言うと、一実施形態では、上で組み込まれたオーディオ索引付けシステム３０が、データベース３１での格納のために、たとえば話者の身元、環境、トピック、またはチャネルもしくはこれらの組合せなどのオーディオ情報に基づいて、オーディオ・ファイル、マルチメディア・ファイル、ニュース、またはラジオ放送をセグメント化し、索引を付ける。当初、オーディオ・ファイルまたはオーディオ・データ・ストリーム（リアルタイムで受信される）の関係する特徴が、抽出され、処理されて、オーディオ・データが、たとえば別個の話者の音声、音楽、雑音、および異なる背景条件に基づいて、複数のセグメントにセグメント化される。たとえば、通常のラジオ放送ニュース・レポートには、明瞭な音声、帯域幅を制限された音声（さまざまなタイプのマイクロホンによって作られる）、電話の音声、音楽セグメント、音楽に重なった音声、環境雑音に重なった音声、音声に重なった音声などを含む非常にさまざまな供給源からの音声信号および非音声信号が含まれる。セグメントごとに、オーディオ索引付けシステム３０が、特定の話者または背景環境／チャネルもしくはその両方を識別し、話された発声を録音し、セグメントの関係するコンテンツ／トピックを判定して、セグメントに索引を付け、そのようなデータに基づいてそのトピックを検出する。
【００５９】
したがって、データベース３１には、マルチメディア文書／ストリームごとに、以下のメタ情報の任意の組合せが格納される可能性がある：タイム・マーク（セグメントの時間境界を示す）、話者の身元（意味がある場合）、話者の変化のセグメント化（適用可能な場合）、セグメントの話された部分の録音、環境情報（音楽、電話音声など）、セグメントのトピック、トピックの検出された変化の境界、セグメント／ストーリの索引／属性値対または特徴（最大エントロピの意味で）、言語、および言語境界。
【００６０】
さらに、オーディオ索引付けシステム３０には、索引メタ情報を使用して、データベース３１に格納されたオーディオ／マルチメディア・ファイルの所望のセグメントを検索し、取り出す、情報取出システム（または検索エンジン）が含まれる。具体的に言うと、データベース３１から所望のセグメントを取り出すために、照会パラメータに、話者の身元（ＩＤタグ）、環境／チャネル、キーワード／コンテキスト、またはトピック／ＮＬＵコンテンツもしくはこれらの組合せなどの異なる索引メタ情報の組合せを含めることができる。
【００６１】
上で示したように、会話ポータル１１は、コンテンツ・サーバ１８にアクセスして、たとえば１つまたは複数のブロードキャスト・ニュースおよびラジオ・ニュース番組にリアルタイムで索引を付けることができる。そのようなアクセスは、たとえば所与のトピックに関する関係するニュース・セグメントなどのリアルタイムの検索を要求する、会話ポータル１１との接続で発行されたユーザ照会に応答するものとすることができる。たとえば、ユーザは、たとえば通常の電話機であるクライアント／アクセス・デバイス１６を介して、会話ポータル１１にアクセスし、たとえば株式市場に関する最新のニュースのオーディオ・セグメントなどの検索要求を発行することができる（この検索要求は、ポータル音声ブラウザ２４またはポータル会話ブラウザ２２もしくはその両方を介して解釈される）。検索エンジン２３は、関係するサイトにアクセスして、１つまたは複数のストリーム化されたブロードキャストを取り出し、このブロードキャストが、オーディオ索引付けシステム３０を介してセグメント化され、索引を付けられる。セグメントのランク付きリストが、ポータル音声ブラウザ２４（ユーザ・アクセスが電話機を介すると仮定する）またはポータル会話ブラウザ２２を介して、会話ダイアログを介して、レンダリングされ、ユーザに提示される。会話ダイアログを介して、ユーザは、再生のために所望のセグメントを選択でき、ポータル音声ブラウザ２４（または、マルチモーダル・コンテンツの場合にはポータル会話ブラウザ２２）が、後続アクセスのためのデータベース３１内でのそのようなセグメントおよび索引付けメタ情報の記憶（長期）を必ずしも伴わずに、関係するセグメントをユーザに再生する。マルチモーダル・クライアント／アクセス・デバイスを使用することによって、ユーザが、興味のあるオーディオ−ビジュアル・セグメントを得るためにマルチモーダル・ブロードキャスト・オン・デマンドを要求し、会話／マルチモーダル・ユーザ・インターフェースを使用してマルチモーダル・プレゼンテーション／ストリーム／ブロードキャストをナビゲートできることを諒解されたい。
【００６２】
さらに、そのようなブロードキャストのコンテンツ・プロバイダは、会話ポータル１１のサービス・プロバイダに加盟するか他の形で登録することができ、そのようなコンテンツ・プロバイダのストリーミング・オーディオ／マルチメディアまたは他の関係する文書（オーディオおよびマルチメディア）が、会話ポータル１１の許可されたユーザによる後続アクセスのために自動的にダウンロードされ、索引を付けられる（周期的に）。この形で、ユーザは、会話ポータルに接続し、データベース３１を直接に検索するために照会を発行し、所望のコンテンツを有する１つまたは複数の事前に索引を付けられたマルチメディア・セグメントを取り出すことができる（ネットワーク上の検索の代わりにまたはそれに加えて）。ユーザは、異なるセグメントが再生／ブロードキャストされる順序をユーザが指定できるブロードキャスト・プログラムを構成し、たとえばセル電話または他の接続されたデバイス上でそのプログラムを聞くことができる。
【００６３】
さらに、マルチメディア文書またはストリーミング・データもしくはその両方を周期的にダウンロードし、索引を付けることによって、会話ポータル１１が、ユーザ設定（たとえば事前に選択されたトピックまたは興味のあるブロードキャスト／文書／リストのタイプ）に基づいて、加入ユーザ用のパーソナライズされた「視聴」プログラムを構成するサービスを提供することができる。ユーザは、そのユーザが聞くもののメニューを構成することもできる。会話ポータル１１に接続する際に、ユーザは、パーソナライズされたプログラムにアクセスし、事前に指定された順序で所望のコンテンツを再生することができる。例として、加入ユーザは、ユーザが会話ポータル１１に接続された無線電話を介してアクセスできるパーソナライズされたラジオ・オン・デマンド・プログラムを生成することができる。さらに、後続の検索中に、加入ユーザは、自分のパーソナライズされたプログラムに、検索結果リストでユーザに提示される追加のマルチメディア・セグメントを追加できることを了解されたい。プログラム中のどの時点でも、ユーザは、ポータル会話ブラウザ・コマンドを使用して、プログラムに割り込むか、一時停止させるか、変更することができる。
【００６４】
ここで図３および図４を参照すると、流れ図に、会話ポータルを使用してネットワーク上で情報にアクセスする、本発明の１態様による方法が示されている。まず、図３を参照すると、ユーザが、任意のタイプのクライアント／アクセス・デバイスを使用して、たとえば電話機を使用して８００番を呼び出すことによって、会話ポータルにアクセスする（ステップ１００）。好ましい実施形態では、会話ポータルへの接続時に、ユーザ識別／検証処理を実行して（ステップ１０１）、ユーザがその会話ポータルの許可されたユーザであるかどうかを判定する。ユーザ識別は、パーソナライゼーションまたはログインもしくはその両方と課金が行われる場合に使用されることを理解されたい。
【００６５】
従来の形のセキュリティ手順またはログオン手順をどれでも使用できることを理解されたい。手短に言うと、この特許では、自動音声認識技法、テキスト依存話者識別技法、および自然言語理解技法、ならびに他の動的機能および静的機能を使用する、サービス（会話ポータルなど）へのアクセスを保護する方法が開示される。１態様では、認証処理に、名前、住所、または顧客番号などの話者のしるしを含む、話者の話された発声を受け取り、復号するステップと、候補話者に関する情報を含むデータベースにアクセスするステップと、その情報に基づいて話者に質問するステップと、質問に対する回答を受け取り、復号し、検証するステップと、話者のボイス・サンプルを得、モデルに対してボイス・サンプルを検証するステップと、回答およびボイス・サンプルに基づいてスコアを生成するステップと、スコアが閾値以上である場合にユーザにアクセスを許可するステップなどのステップが含まれる。
【００６６】
その代わりに、話者識別／検証を、フレーム単位の特徴分類に基づくテキスト独立話者検証処理で開示された方法を使用して、ダイアログのバックグラウンドでテキスト独立話者認識を介して実行することができる。
【００６７】
何らかの形で話者識別を実行する時に、その出力を、ボイス・クッキーであるかのように処理することができる。具体的に言うと、従来のクッキーは、ブラウザがサイトに接続する時に、ウェブ・サイトがブラウザに配送するコードである。クッキーには、ユーザの設定、過去の使用などに関する情報を格納することができる。クッキーには、ディジタル証明書を含めることもできる。したがって、話者ＩＤおよび検証を使用して、サーバ側のポータル会話ブラウザまたはポータル音声ブラウザに格納することができる等価な情報（クッキー）を作成することができる。その後、会話ポータルへの接続時に、ユーザ識別を、ディジタル証明書の提示と同等であるクッキーを使用してバックグラウンドで透過的に実行することができる。上で示したように、話者識別処理は、たとえば、ユーザ設定（たとえば、プレゼンテーション・フォーマット、サービス・アクセス、課金加入アクセス、モーダリティ設定など）が話者の識別および検証の際にセットされる、ユーザ・カスタマイズに使用できることを理解されたい。ユーザＩＤ、パスワード、ＧＳＭセル電話のＳＩＭＳ番号、アクセス・クライアント（ブラウザ）内の従来のクッキーなどの、他のログイン、識別、認証手順を使用できることを理解されたい。
【００６８】
ログイン処理の後に、ユーザが許可されないと判定される場合（ステップ１０２の否定の判定）、クライアントとポータルの間の通信が終了する（ステップ１０３）。その一方で、ユーザが許可されると判定される場合（ステップ１０２の肯定の判定）、ユーザに、会話ポータルの「ホーム・ページ」に関連する複数のメニューが提示される（ステップ１０４）（たとえば合成された音声を介して）。最初のメニュー・オプションには、たとえば、コンテンツ・ページまたはサービス（ＣＭＬまたはレガシのページ／アプリケーション）の検索、リアルタイムまたは事前に記録されたブロードキャストまたはトランスコーディング・サービスを使用するレガシ情報へのアクセス、および興味のあるブロードキャスト・セグメントを検索するためのパーソナライズされたプログラムへのアクセスを含めることができる。
【００６９】
使用可能なメニュー・オプションおよびユーザが望む情報のタイプに応じて、ユーザは、適当な検索要求を発行する（ステップ１０５）。会話ポータル１１は（ポータル会話ブラウザ２２を介して）、照会を解釈し、解釈された照会を検索エンジン２３に供給して、それ相応に検索を実行する（ステップ１０６）。やはり、選択されたメニュー・オプションに基づいて、要求される検索は、たとえば、あるＷＷＷまたはＣＭＬコンテンツ・ページ、ブロードキャストベースのウェブ・サイトからのブロードキャスト、または索引付けされたブロードキャストの格納されたセグメントの取出になる可能性がある。要求された検索のタイプに応じて、検索エンジン２３は、ＷＷＷ、ポータル・ディレクトリ２６、または索引付けされたブロードキャストのデータベース３１のいずれかを検索し、可能な一致のランク付きリストをＣＭＬで返す（ステップ１０７）。ランク付きリストは、その後、たとえばポータル会話ブラウザ２２またはポータル音声ブラウザ２４を介して、ユーザにレンダリングされる（ステップ１０８）。
【００７０】
ユーザが特定のウェブ文書（またはサービス）の検索を要求したと仮定すると、ランク付きリストには、ユーザが文書をダウンロードするために選択することができるウェブ・サイトのリストが含まれる。ユーザが、リストから特定の文書を取り出すことを望まない場合（ステップ１０９の否定の判断）、ユーザは、追加の検索に継続する（ステップ１１０の肯定の結果であり、ステップ１０４に戻る）か、会話ポータルから切断する（ステップ１０３）ことができる。その一方で、ユーザが、リストから特定の文書を取り出すことを望む場合（ステップ１０９の肯定の判断）、ユーザは、適当なマルチモーダル・コマンド（ボイスまたはマウス・クリック）を発行して、所望の文書を取り出すことができる（ステップ１１１）。会話ブラウザは、対応するコンテンツ・サーバ１８から所望の文書をダウンロードするのに適当な要求を生成し、送信する。
【００７１】
好ましい実施形態では、所望の文書がＣＭＬ以外のプレゼンテーション・フォーマット（たとえばＨＴＭＬ）である場合（ステップ１１２の否定の結果）に、文書を適当なトランスコーダに送信して、その文書を適当なＣＭＬフォーマットに変換し（ステップ１１３）、この文書が、会話ブラウザ（クライアント上またはサーバ上もしくは両方で（分散トポロジで）稼動する）を介してユーザへの再生のためにレンダリングされる（ステップ１１４）。上で示したように、トランスコーダは、たとえば、会話ポータル１１のサーバ内または、たとえば文書がそこから取り出されたコンテンツ・サーバに関連するプロキシ・サーバ内に常駐することができる。その代わりに、レガシ・クライアント・ブラウザの場合に、取り出された文書を、適当なモーダリティにトランスコーディングすることができる（たとえば、ＣＭＬ文書またはＨＴＭＬ文書を、クライアント音声ブラウザでのレンダリングのためにＶｏｉｃｅＸＭＬ文書にトランスコーディングすることができる）。ストリーミング・オーディオ／マルチモーダル・フォーマットで取り出された文書は、ＣＭＬまたは他のレガシＭＬに変換されないことを理解されたい。その一方で、要求された文書のプレゼンテーション・フォーマットがＣＭＬである場合には、その文書は、レンダリングのために会話ブラウザ（クライアント、サーバ、または両方（分散））に直接に送信される（ステップ１１４）。
【００７２】
もう一度ステップ１０８に戻って、ユーザが、特定のウェブ・ブロードキャスト（ラジオまたはビデオ・プレゼンテーションの生または事前に記録されたブロードキャスト）の検索を要求したと仮定すると、ランク付きリストには、ユーザがそこから所望のブロードキャストを選択することができる、そのようなブロードキャストを提供するウェブ・サイトのリストが含まれる（図４のステップ１１５）。ユーザが、リスト内の特定のブロードキャストを取り出すことを望まない場合（ステップ１１５の否定の判断）、ユーザは、追加の検索に継続する（ステップ１１９に肯定の結果であり、図３のステップ１０４に戻る）か、会話ポータルから切断する（図３のステップ１０３）ことができる。その一方で、ユーザが、リスト内の特定のブロードキャストをダウンロードすることを望む場合（ステップ１１５の肯定の判断）、ユーザは、適当な（マルチモーダル）コマンドを発行して、所望のブロードキャストをダウンロードすることができる（ステップ１１６）。ポータル会話ブラウザ２２が、所望のブロードキャストを提供するコンテンツ・サーバに接続するための適当な要求を生成し、送信する（ステップ１１７）。任意選択として、ユーザは、後の再生および検索のためにブロードキャストに索引を付けさせる（オーディオ索引付けシステム３０を介して）コマンドを発行することができる（ステップ１１８）。
【００７３】
もう一度ステップ１０８に戻って、ユーザが、ウェブ・ブロードキャストのある事前に格納された／索引を付けられたセグメントの検索を要求したと仮定すると、ランク付きリストには、ユーザがそこから選択することができる使用可能なセグメント（オーディオ／オーディオ−ビジュアル）のリストが含まれる（図４のステップ１２０）。ユーザが、リストされたどのセグメントの取り出しも望まない場合（ステップ１２０の否定の判断）、ユーザは、追加の検索に継続する（ステップ１１９に肯定の結果であり、図３のステップ１０４に戻る）か、会話ポータルから切断する（ステップ１１９の否定の結果であり、図３のステップ１０３に戻る）ことができる。その一方で、ユーザが、リスト内の１つまたは複数のセグメントの再生を望む場合（ステップ１２０の肯定の判断）、ユーザは、そのようなセグメントをダウンロードするのに適当な（マルチモーダル）コマンドを発行することができる（ステップ１２１）。適当なプラグインを使用して、ポータル会話ブラウザ２２またはポータル音声ブラウザ２４が、選択されたセグメントをユーザに再生する（ステップ１２２）。任意選択として、適当なプラグインを使用して、ユーザは、セグメントの再生を制御するコマンド（たとえば早送り、巻き戻し、検索など）を発行することができる。
【００７４】
要約すると、本発明は、有利なことに、たとえばどこからでもいつでも任意の接続された適当なデバイスを介して、ＷＷＷへの会話（マルチモーダル）アクセスを提供して、所望の情報の抽出またはパーソナライズされたブロードキャスト・プログラム・オン・デマンドの作成もしくはその両方ならびにいつでもプログラムの管理および変更を行えるようにする。本発明が、従来のシステムに対する複数の長所を提供することを諒解されたい。たとえば、本発明を用いると、ユーザが、リアルタイム・ブロードキャストおよび事前に記録されたブロードキャストのマルチモーダル検索を実行できるようになり、興味のあるトピックに関するセグメントをマルチモーダル再生のために選択できるようになる。もう１つの長所は、本発明によって、さらに、ユーザが、クライアント／アクセス・デバイスのＩ／Ｏ機能に無関係に、すべてのフォーマット（ＣＭＬまたはレガシ）の文書およびサービスにアクセスできるようになることである。実際、取り出されるページは、ＣＭＬフォーマットであるか、会話（マルチモーダル）ブラウザによるレンダリングのためにオンザフライでＣＬＭフォーマットに変換することができる。
【００７５】
さらに、本発明を用いると、ユーザが、自分が従うプログラムを生成できるようになり、ユーザが、いつでもプログラムに割り込むか変更することができるようになる。さらに、ユーザは、所与のセグメントの視聴中に代替物を検索することができる（バックグラウンド検索またはオフ・ライン検索）。もう１つの長所は、本発明が、たとえば単一の電話番号を介して、ユーザがいつでもどこからでもブロードキャスト・オン・デマンドにアクセスできるようにするサービスを提供することである。実際、無線ネットワークの拡張に伴って、そのようなサービスに、無線接続されたどのデバイスを介してもアクセスすることができる。上で説明した従来のサービスは、そのような機能を提供しない。実際、ブロードキャスト・オン・デマンドおよび真に対話式のプログラミングは、本発明が提案されるまでは、上で説明した従来のシステムのどれによっても適当に満足されなかった、長年にわたる要望であった。
【００７６】
さらに、本発明のビジネス態様に関して、さまざまな発展し得るビジネス・モデルがある。上で示したように、会話ポータル・サービスは、加入ベースとして、さまざまなチャネルから収入を生成することができる。たとえば、会社またはコンテンツ・プロバイダは、会話ポータルのサービス・プロバイダに登録して、適当な料金の支払時に、手作業で管理されるポータル・ディレクトリ２６の一部になることができる。さらに、たとえば後の請求を必要とする定額制または従量制など、ユーザ加入を介して収入を生成することができる。請求は、ユーザを知ることによって実行することができる（接続ブラウザのＩＤ、発呼電話機、または生物測定／検証または会話ポータルへのログイン）。さらに、会話ポータルの支払／収入は、チャネル・キャリア（たとえば電話通信業者、無線通信業者、またはＩＳＰ）との契約を介して直接に得ることができる。
【００７７】
さらに、もう１つのビジネス・モデルが、会話ポータルを、コンテンツ・ページ、サービス、およびブロードキャスト・コンテンツへの会話アクセスのためにすべての人にオープンにすることである。その場合には、収入は、加入ユーザ／会社の代わりに会話ポータル１１によって提供される広告または他のサービスもしくはその両方について加入ユーザ／会社によって支払われる料金から生成することができる。たとえば、会話ポータルの呼捕捉オプションは、ポータルを介して行われる取出の間（たとえば新規検索が実行される時）に広告（バナー）を提供することによって、直接収入ストリームを提供することができる。
【００７８】
さらに、会話を継続的に聴取すること（呼捕捉）によって、会話ポータルは、ユーザが他のサービス（汎用メッセージング、電子メール、ディレクトリ・アシスタンス、地図／交通アシスタンスなど）にアクセスできる主機構になることができ、ここで、そのようなサービスのサービス・プロバイダが、そのレベルで顕著に使用可能になる（ポータルからのより高度なメニュー検索を介してアクセス可能になるのではなく）ために余分な料金を支払う。会話ポータルのこの「捕捉」機構によって、そのポータルでユーザが費やす平均時間が大幅に増える（ユーザが照会を入力し、結果の新しいサイトへのリンクに従うことを決定する短い時間の間だけユーザと対話する従来のポータルと比較して）。また、そのようなサービス（常にアクセス可能である）を提供することによって、ポータルは、サービスを必要とする時にユーザが、サービスの１つへのアクセスが望まれる時に、この会話ポータルに接続する可能性を大幅に高める。
【００７９】
まとめとして、本発明の構成に関して以下の事項を開示する。
【００８０】
（１）会話ポータルであって、
変化する入出力（Ｉ／Ｏ）モーダリティを有するクライアントとのマルチモーダル・ダイアログを行う会話ブラウザであって、前記会話ブラウザが、要求元クライアントからの要求に応答して情報供給源から情報を取り出し、前記要求元クライアントの前記Ｉ／Ｏモーダリティとの互換性を有するフォーマットで前記取り出された情報の前記要求元クライアントへのサービスおよび提示の１つを行う、会話ブラウザ
を含む会話ポータル。
（２）前記情報供給源によって供給される前記情報が、マルチモーダル表現で実施される、上記（１）に記載の会話ポータル。
（３）前記マルチモーダル表現が、モーダリティ独立フォーマットである、上記（２）に記載の会話ポータル。
（４）機能的に前記会話ブラウザに関連する、前記要求元クライアントの前記Ｉ／Ｏモーダリティに基づいて前記マルチモーダル情報を少なくとも１つのモーダリティ固有フォーマットに変換するトランスコーダをさらに含む、上記（２）に記載の会話ポータル。
（５）前記会話ポータルが、前記マルチモーダル情報を前記少なくとも１つのモーダリティ固有フォーマットに変換するために、前記要求元クライアントの前記Ｉ／Ｏモーダリティを検出する、上記（４）に記載の会話ポータル。
（６）前記会話ポータルが、登録プロトコルおよびアクセス・チャネルの識別の１つに基づいて、前記要求元クライアントの前記Ｉ／Ｏモーダリティを検出する、上記（５）に記載の会話ポータル。
（７）前記会話ブラウザによってアクセス可能な、情報供給源の索引、情報供給源に関連する情報、およびそれらの組合せの１つを格納するポータル・ディレクトリ・データベースをさらに含む、上記（１）に記載の会話ポータル。
（８）前記情報供給源に関連する前記ポータル・ディレクトリ・データベースに格納された前記情報が、前記会話ポータルのサービス・プロバイダと前記情報供給源のサービス・プロバイダとの間のビジネス契約の下で前記会話ポータルの前記サービス・プロバイダによってマルチモーダル・フォーマットで維持される、上記（７）に記載の会話ポータル。
（９）前記要求元クライアントと前記会話ポータルの間の接続を捕捉し、所定の時間枠の間前記クライアントを捕捉状態に保持する捕捉モジュールをさらに含む、上記（１）に記載の会話ポータル。
（１０）前記クライアントが、前記会話ブラウザによって提供されるリンクが前記要求元クライアントによって選択された時間枠と、前記要求元クライアントへのレンダリングまたはサービスの１つの時間枠の間に捕捉状態に保持される、上記（９）に記載の会話ポータル。
（１１）前記要求元クライアントが、前記要求元クライアントによってリンクが直接に要求された時に解放される、上記（１０）に記載の会話ポータル。
（１２）前記会話ポータルのサービス・プロバイダが、前記要求元クライアントが捕捉状態に保持される少なくとも１つの所定の時間枠の間、広告、サービス、およびこれらの組合せの１つを提供する、上記（９）に記載の会話ポータル。
（１３）前記少なくとも１つの所定の時間枠が、異なる情報供給源の間のリンクの取出の間の時間枠である、上記（１２）に記載の会話ポータル。
（１４）前記広告およびサービスが、マルチモーダルである、上記（１２）に記載の会話ポータル。
（１５）前記広告およびサービスが、前記会話ポータルの前記サービス・プロバイダと第三者との間のビジネス契約の下で第三者の代わりに前記サービス・プロバイダによって提供される、上記（１２）に記載の会話ポータル。
（１６）情報供給源から得られたオーディオ・データおよびマルチメディア・データをセグメント化し、索引を付ける、オーディオ索引付けシステムと、
前記索引付けされたオーディオ・データおよびマルチメディア・データを格納するマルチメディア・データベースと
をさらに含む、上記（１）に記載の会話ポータル。
（１７）前記会話ブラウザが、クライアント要求に応答して前記マルチメディア・データベースから所望のセグメントを取得し、前記クライアントのＩ／Ｏ能力に基づいてそのようなセグメントを前記クライアントに提示する、上記（１６）に記載の会話ポータル。
（１８）前記会話ブラウザが、マルチメディア・データに索引を付け、前記マルチメディア・データベースに格納するために、少なくとも１つの情報供給源から前記マルチメディア・データを周期的にダウンロードする、上記（１６）に記載の会話ポータル。
（１９）前記少なくとも１つの情報供給源の前記マルチメディア・データの前記ダウンロードおよび索引付けが、前記会話ポータルのサービス・プロバイダと前記少なくとも１つの情報供給源のサービス・プロバイダとの間のビジネス契約の下で実行される、上記（１８）に記載の会話ポータル。
（２０）前記会話ポータルが、登録された加入者のために、前記マルチメディア・データベース内のユーザによって選択されたマルチメディア・セグメントを含むプログラムを維持する、上記（１６）に記載の会話ポータル。
（２１）前記登録された加入者が、前記プログラムを会話的にナビゲートし、前記要求元クライアントを介するブロードキャストのために所望のセグメントを選択する、上記（２０）に記載の会話ポータル。
（２２）前記プログラムが、前記登録された加入者が無線電話を介してアクセスするラジオ・オン・デマンド・サービスを含む、上記（２０）に記載の会話ポータル。
（２３）情報にアクセスするシステムであって、
少なくとも１つの入出力モーダリティを有するアクセス・デバイスと、
コンテンツ・サーバと、
前記アクセス・デバイスから通信される要求に応答して、前記コンテンツ・サーバから情報を取り出し、前記アクセス・デバイスの前記少なくとも１つの入出力モーダリティに基づく、前記アクセス・デバイスへの前記取り出された情報のサービスおよび提示の１つを行う会話ポータルと
を含むシステム。
（２４）前記コンテンツ・サーバが、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、およびその両方の１つを提供する、上記（２３）に記載のシステム。
（２５）
前記マルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションが、モーダリティ独立表現で実施される、上記（２４）に記載のシステム。
（２６）前記会話ポータルが、前記アクセス・デバイスの前記入出力機能に基づくユーザへの提示のためにマルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションの１つを取り出し、処理する会話ブラウザを含む、上記（２４）に記載のシステム。
（２７）前記会話ポータルが、マルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションの１つを、前記アクセス・デバイスの検出された入出力機能に基づいて、少なくとも１つのモーダリティ固有表現に変換するポータル・トランスコーダを含む、上記（２４）に記載のシステム。
（２８）前記会話ポータルによってアクセス可能な、コンテンツ・プロバイダのモーダリティ固有サイトをマルチモーダル表現に変換するプロキシ・トランスコーダをさらに含む、上記（２４）に記載のシステム。
（２９）前記プロキシ・トランスコーダのサービスが、前記コンテンツ・プロバイダおよび前記コンテンツ・プロバイダとのビジネス契約の下の第三者の１つによって提供される、上記（２８）に記載のシステム。
（３０）前記アクセス・デバイスが、前記会話ポータルによって受信されたマルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションの１つを処理し、提示するローカル会話ブラウザを含むマルチモーダル・デバイスである、上記（２４）に記載のシステム。
（３１）前記会話ポータルが、事前に指定された電話番号を呼び出すことによってアクセスされる、上記（２３）に記載のシステム。
（３２）前記会話ポータルが、コンテンツ・サーバ・アドレスのディレクトリを含むポータル・ディレクトリ・データベースを含む、上記（２３）に記載のシステム。
（３３）前記ポータル・ディレクトリ・データベースが、少なくとも１つのコンテンツ・プロバイダに関連する、前記会話ポータルによってホスティングされる、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、および両方の１つを含む、上記（３２）に記載のシステム。
（３４）通信ネットワークを介する情報へのアクセスを提供する方法であって、少なくとも１つの入出力モーダリティを関連付けられているアクセス・デバイスを使用して会話ポータルとの通信を確立するステップと、
前記会話ポータルによって、ユーザ要求に応答して情報を取り出すステップと、
前記会話ポータルによって、前記アクセス・デバイスの前記少なくとも１つの入出力モーダリティに基づいて、前記ユーザへの前記情報の提示およびサービスの１つを行うステップと
を含む方法。
（３５）前記取り出された情報が、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、およびその両方の１つを含む、上記（３４）に記載の方法。
（３６）前記アクセス・デバイスの少なくとも１つの入出力モーダリティを検出するステップと、
前記取り出されたマルチモーダル情報を、前記少なくとも１つの検出された入出力モーダリティに対応する少なくとも１つのモーダリティ固有フォーマットにトランスコーディングするステップと
をさらに含む、上記（３５）に記載の方法。
（３７）前記取り出すステップが実行される期間中に前記ユーザを捕捉状態に保持するステップと、
前記ユーザが捕捉状態に保持される所定の時間枠中に、前記ユーザに広告、サービス、およびそれらの組合せの１つを提示するステップと
をさらに含む、上記（３４）に記載の方法。
（３８）前記会話ポータルによって、ブロードキャスト・オン・デマンド・サービスを提供するために、登録加入者用のプログラムを維持するステップをさらに含む、上記（３４）に記載の方法。
【図面の簡単な説明】
【図１】本発明の一実施形態による、会話ポータルを介して情報にアクセスするシステムのブロック図である。
【図２】本発明のもう１つの実施形態による、会話ポータルを介して情報にアクセスするシステムのブロック図である。
【図３】図４と共に、本発明の１態様による情報アクセスの方法の流れ図を構成する図である。
【図４】図３と共に、本発明の１態様による情報アクセスの方法の流れ図を構成する図である。
【図５】本発明に関連して使用することができる、会話（マルチモーダル）ブラウザのアーキテクチャのブロック図である。
【図６】本発明に関連して使用することができる、もう１つの会話（マルチモーダル）ブラウザのアーキテクチャのブロック図である。
【符号の説明】
１０ システム
１１ 会話ポータル
１２ クライアント／アクセス・デバイス
１２ａ ローカル会話（マルチモーダル）ブラウザ
１３ クライアント／アクセス・デバイス
１３ａ ＨＴＭＬブラウザ
１４ クライアント／アクセス・デバイス
１４ａ ＷＭＬブラウザ
１５ クライアント／アクセス・デバイス
１５ａ ＶｏｉｃｅＸＭＬブラウザ
１６ クライアント／アクセス・デバイス
１７ ネットワーク
１８ コンテンツ・サーバ
１９ コンテンツ／ビジネス・ロジック
【発明の属する技術分野】
本発明は、全般的には通信ネットワークを介して情報にアクセスするシステムおよび方法に関し、具体的には、会話ブラウズおよびマルチメディア・アクセス・オン・デマンドなどのサービスを提供するのに会話ブラウザを使用する会話ポータルに関する。
【０００２】
【従来の技術】
コンピューティングの世界は、数十億の相互接続されたパーベイシブ・クライアントが強力な情報サーバと通信する年代に向かって発展しつつある。実際、この千年期は、ユビキタス情報アクセスを人生の受け入れられる事実にする複数の情報デバイスの可用性という特徴を持つことになる。この、インターネット、無線ネットワーク、または自発的ネットワーク（BluetoothおよびJiniなど）を介して相互接続された数十億のパーベイシブ・デバイスに向かう発展は、人間−計算機対話の基礎となる原理に大きい変革を起こすことになる。近い将来に、パーソナル情報デバイスが、ユビキタス・アクセスを提供し、ユーザの現在の必要および能力に最適の対話モーダリティを使用して、いつでもどこでもあらゆる情報を作成し、操作し、交換する能力がパーソナル情報デバイスに与えられる。そのようなデバイスには、従来の電話機、セル電話、スマート・ホン、ポケット・オーガナイザ、ＰＤＡ、およびＰＣなどの、ユーザとの通信に使用されるインターフェース周辺機器が大きく異なる、馴染みのあるアクセス・デバイスが含まれる。それと同時に、この発展が進行するにつれて、ユーザが、これらのさまざまな情報デバイスによって提供されるユーザ経験の一貫性のあるルック、サウンド、およびフィールを要求するようになる。
【０００３】
情報の可用性の増加は、この情報を操作するために各ユーザが使用可能な計算能力の向上と共に、人間−計算機通信の帯域幅を増やすことを付随的に必要とする。それぞれが所与の時点でのユーザの特定の必要および能力に合わせて設計された複数の機器を介して情報にアクセスする能力は、これらの対話で、人間−計算機通信の帯域幅を最大にするためにすべての使用可能な入出力（Ｉ／Ｏ）モーダリティを活用しなければならないことを必ず意味する。実際、ユーザは、手を使う必要がなく、目を使う必要がない環境での情報デバイスとの対話を最大にするために、そのようなマルチモーダル対話を要求するようになる。
【０００４】
残念ながら、現在のインフラストラクチャは、情報へのシームレスでマルチモーダルなアクセスを提供するように完全に構成されてはいない。実際、アクセス・デバイスを使用してネットワーク上のサーバから過多な情報にアクセスできる（たとえば、専用ネットワーク上で使用可能な個人情報および企業情報、インターネットなどのグローバル・コンピュータ・ネットワークを介してアクセス可能な公開情報など）が、そのような情報の可用性は、ユーザがそのような情報を得るために対話しているクライアント／アクセス・デバイスまたはプラットホーム固有ソフトウェア・アプリケーションのモーダリティによって制限される可能性がある。
【０００５】
たとえば、現在、所望の情報を得るために、さまざまなネットワーク上でアクセスできるさまざまな種類のポータル（またはゲートウェイ）がある。たとえば、周知のＷＷＷ（ワールド・ワイド・ウェブ）ポータルには、Yahoo!（インターネットに対してオープンであり、ユーザに対してオープンである）およびＡＯＬ（インターネットに対してオープンであり、加入ユーザが所有コンテンツにアクセスできる）が含まれる。これらのポータルには、通常は、ウェブ・サイトのディレクトリ、検索エンジン、ニュース、気象情報、電子メール、株呼び値などが含まれる。残念ながら、通常は、完全なＧＵＩ機能を有するクライアント／アクセス・デバイスしか、情報にアクセスするためにそのようなウェブ・ポータルを利用することができない。
【０００６】
他のポータルには、通常は電話会社または無線通信業者（加入ユーザに所有コンテンツを提供する）によって提供される無線ポータルが含まれる。これらの無線ポータルは、ＷＭＬ（wireless markup language）またはＣＨＴＭＬ（compact hypertext markup language）などの言語によって宣言的に駆動される限られたＧＵＩ機能を有するクライアント／アクセス・デバイスによってアクセスすることができる。しかし、これらの無線ポータルは、ボイスおよびＧＵＩなどのシームレス・マルチモーダル・アクセスを提供しない。というのは、人間の通信に別のボイス・モードが使用され、ＷＡＰ（wireless application protocol）アクセスおよびＷＭＬブラウズに別の別個のモードが使用されるからである。
【０００７】
さらに、ＩＶＲサービスおよび電話会社は、音声Ｉ／Ｏ機能だけを有するボイス・ポータル（所有コンテンツを加入ユーザに提供する）を提供することができる。ボイス・ポータルの場合、ユーザは、音声ブラウザを使用して、ＩＶＲサービスにアクセスするか、ボイス・ブラウズを実行することができる。残念ながら、ＧＵＩ機能だけを有するクライアント／アクセス・デバイスは、ボイス・ポータルからの情報に直接にアクセスすることができない。同様に、音声Ｉ／Ｏだけを有するクライアント／アクセス・デバイスは、ＧＵＩモーダリティでの情報にアクセスすることができない。したがって、人間−計算機通信の帯域幅は、現在、たとえばクライアント／アクセス・デバイスの使用可能なＩ／Ｏモーダリティおよび情報を提供するサーバに格納されたコンテンツのフォーマットによって、制限されている。
【０００８】
現在使用可能な他の情報供給源には、ラジオ番組およびテレビジョン（ＴＶ）番組へのアクセスを提供するさまざまなサービス・プロバイダ（たとえば、放送会社、ケーブル・サービス・プロバイダ、および衛星サービス・プロバイダ）が含まれる。これらのサービス・プロバイダの多くが、対話式ＴＶおよびブロードキャスト・プログラム・オン・デマンドを提供する。しかし、対話式ＴＶおよびブロードキャスト・プログラム・オン・デマンドを提供する従来の方法は、すべてが、所与のカタログの組からの特定の番組のユーザによる選択に頼る。たとえば、ユーザは、個人的に映画を注文することによって、所与の時刻に特定の映画を観ることを開始することを選択することができる。その代わりに、ユーザは、ある時刻（たとえば１５分ごと）に開始される新しいブロードキャストに参加することができる。
【０００９】
対話式ＴＶの場合、WebTVなどのサービスを使用して、ユーザが、番組に関連するリンク（たとえばウェブ・ページへのＵＲＬ）に従って、関係するメタ情報（すなわち、追加情報または新聞発表の原文または関係する会社または当事者のページなどの関係情報）にアクセスすることができる。他の対話式ＴＶの使用には、たとえば、視聴者の意見を調査することができる放送会社へのフィードバック送信、フィルムの中央バンクからの見られるビデオまたはフィルムの選択、または視聴者の要求に基づく映画または番組の結末の変更が含まれる。WebTVサービスおよびInteractive TVサービスの両方が、テレビジョン・セットに接続されるセットトップ・ボックスまたは特殊なセットトップ・ユニットを使用する。さらに、ペイパービュー・テレビジョンならびに次の映画を選択するために視聴者が投票する（電話またはウェブを介して）ことができるＴＶサービスを、対話式ＴＶの他の形態とみなすことができる。しかし、そのような事例のすべてにおいて、たとえば、達成できるパーソナライゼーションのレベルが、非常に限られている。
【００１０】
インターネット上では、さまざまなウェブ・サイト（たとえばBloomberg TVまたはBroadcast.com）が、ストリーミング・サウンド技法またはストリーミング・メディア技法を使用して、既存のラジオ局およびテレビ局からの放送を提供する。ウェブベースのビデオ・ストリームおよびオーディオ・ストリーミングを使用するウェブ・ブロードキャストは、テレビジョンまたは、たとえばRealnetworks PlayerまたはMicrosoft Windows Media Playerを使用するパーソナル・コンピュータなどのローカル・マシンにユーザがダウンロードし、再生することができる、事前にコンパイルされたビデオ・ラジオ・クリップに頼る。実際、WebTV対話式ＴＶ環境では、ダウンロードされたストリーム化された番組を、ＴＶ上で再生することができる。
【００１１】
テレテキスト・システムでは、ＡＳＣＩＩメタ情報のカタログが、ＴＶ番組と共にユーザのＴＶまたはセットトップ・ボックスにダウンロードされる。ユーザは、その後、後にダウンロードされる所望の項目を選択することができる。最終的に、新しいセットトップ・ボックスは、ローカル・ハード・ディスクまたはローカル・メモリ・システムに番組の圧縮版を格納する能力を提供して、番組中の一時停止または即時再生などのサービスを提供する。
【００１２】
上で説明したマルチメディア・サービスでは、ユーザが、興味のある番組をダウンロードできるようになるが、これらのサービスは、ユーザが自分の興味に基づいて自分のラジオ番組またはＴＶ番組を構成することができる真のブロードキャスト・オン・デマンド・サービスにアクセスする能力をユーザに提供しない。
【００１３】
【発明が解決しようとする課題】
したがって、所望の情報を取り出すか、パーソナライズされたブロードキャスト・プログラム・オン・デマンドを作成するか、その両方を行うためならびにいつでもプログラムを管理し変更するために、すべての種類のクライアント／アクセス・デバイスを介してどの位置からでもいつでもあらゆる情報供給源（たとえばＷＷＷ）へのマルチモーダル・アクセスを提供するシステムおよび方法の必要が存在する。
【００１４】
【課題を解決するための手段】
本発明は、どの位置からでも、いつでも、あらゆる種類のクライアント／アクセスを使用する、通信ネットワークを介する情報への会話（マルチモーダル）アクセスを提供する会話（マルチモーダル）ポータルを使用するシステムおよび方法を対象とする。本発明の１態様では、会話ポータルに、さまざまな入出力（Ｉ／Ｏ）モーダリティを有するクライアント／アクセス・デバイスとのマルチモーダル・ダイアログを行うことができる会話（マルチモーダル）ブラウザが含まれる。会話ブラウザは、要求元クライアント／アクセス・デバイスからの要求に応答して情報供給源（たとえば、インターネット上またはイントラネット／エクストラネット上に配置されたコンテンツ・サーバ）から情報（コンテンツ・ページ、アプリケーションなど）を取り出し、その後、要求元クライアント／アクセス・デバイスのＩ／Ｏモーダリティとの互換性を有するフォーマットで要求元クライアント／アクセス・デバイスに取り出された情報をサービスまたは提示する。
【００１５】
本発明のもう１つの態様では、コンテンツ・サーバによって提供されるコンテンツ・ページおよびアプリケーションが、マルチモーダルであり、ＣＭＬ（会話マークアップ言語）を使用して実施される。一実施形態では、ＣＭＬは、プラットホーム、またはコンテンツをレンダリング／処理するデバイスまたはブラウザのモーダリティから独立に会話対話（マルチモーダル・ダイアログ）を記述できるようにする複数の会話ジェスチャを使用するモーダリティ独立フォーマットで実施される。会話ポータルは、ＣＭＬ文書のローカル処理／レンダリングのために会話ブラウザを実行するアクセス・デバイスに直接にＣＭＬ文書をサービスすることができる。
【００１６】
本発明のもう１つの態様では、会話ポータルが、要求元クライアント／アクセス・デバイスの検出されたＩ／Ｏモーダリティに基づいてモーダリティ独立フォーマット（ＣＭＬ文書）を少なくとも１つのモーダリティ固有フォーマット（たとえばＨＴＭＬ、ＶｏｉｃｅＸＭＬ）に変換するトランスコーダを使用することによって、コンテンツ・ページおよびアプリケーションへのマルチチャネル・アクセスを提供する。
【００１７】
もう１つの態様では、会話ポータルが、マルチメディア・アクセス・オン・デマンドを提供する。会話ポータルには、情報供給源から得られたオーディオ・データおよびマルチメディア・データをセグメント化し、索引付けするためのオーディオ索引付けシステム、ならびに索引付けされたオーディオ・データおよびマルチメディア・データを格納するマルチメディア・データベースが含まれる。ユーザ要求に応答して、会話ブラウザは、所望のセグメントをマルチメディア・データベースから取得し、クライアントのＩ／Ｏ能力に基づいて、そのようなセグメントをクライアントに提示する。会話ポータルを用いると、加入ユーザは、データベースに格納された異なるセグメント（ニュース、ラジオなど）のタイプおよびそれらがユーザに再生／ブロードキャストされる順序をユーザが指定する、ブロードキャスト・プログラムを構成し、維持することができるようになる。会話ポータルによって提供されるブロードキャスト・プログラム・オン・デマンド・サービスは、どの位置からでも、いつでも、すべてのタイプのアクセス・デバイスを使用してアクセスすることができる。
【００１８】
【発明の実施の形態】
本発明は、どの位置からでも、いつでも、すべてのタイプのクライアント／アクセス・デバイスを使用する、コンピュータ・ネットワークを介する情報への「会話アクセス」を提供する「会話ポータル」（「会話ブラウザ」を含む）を使用するシステムおよび方法を対象とする。本明細書で使用する用語「会話」は、アクセス・デバイス／チャネルの機能に基づき、好ましくはオープンでインターオペラブルなプロトコルおよび標準規格を使用する、ユーザと計算機の間およびさまざまなモーダリティ（Ｉ／Ｏ機能）のデバイスまたはプラットホームの間のシームレスなマルチモーダル・ダイアログ（情報交換）を指すことを理解されたい。マルチモーダル・ダイアログには、音声のみ（たとえばＶｏｉｃｅＸＭＬ）、視覚のみ（ＧＵＩ）（たとえばＨＴＭＬ（ハイパーテキスト・マークアップ言語））、制限付きＧＵＩ（たとえばＷＭＬ（wireless markup language）、ＣＨＴＭＬ（compact HTML）、ＨＤＭＬ（handheld device markup language））などのモーダリティ、およびそのようなモーダリティの組合せ（たとえば音声およびＧＵＩ）が含まれる。さらに、各モーダリティ（またはモーダリティの組合せ）を、完全なＮＬ（自然言語）ユーザ・インターフェースとして実施して、万能会話ユーザ・インターフェース（ＣＵＩ）をもたらすことができる。
【００１９】
「会話」対話（または会話コンピューティング）および「会話ブラウズ」の概念は、本明細書で説明する例示的実施形態に関係するので、下で詳細に説明する。さらに、そのような概念の詳細な議論は、たとえば、国際特許出願第ＰＣＴ／ＵＳ９９／２２９２７号明細書、国際特許出願第ＰＣＴ／ＵＳ９９／２２９２５号明細書、および国際特許出願第ＰＣＴ／ＵＳ９９／２３００８号明細書を参照されたい。
【００２０】
本明細書で説明するシステムおよび方法を、ハードウェア、ソフトウェア、ファームウェア、専用プロセッサ、またはそれらの組合せのさまざまな形態で実施できることを理解されたい。具体的に言うと、本発明は、プログラム記憶装置（たとえば、磁気フロッピ・ディスク、ＲＡＭ、ＲＯＭ、ＣＤ−ＲＯＭなど）上で有形に実施され、適当なアーキテクチャを含むすべての装置または計算機によって実行可能であるプログラム命令を含むアプリケーションとして実施されることが好ましい。さらに、添付図面に示された構成要素システム・コンポーネントおよび処理ステップの一部が、ソフトウェアで実施されることが好ましいので、そのようなコンポーネントおよびステップの間の実際の接続が、本発明をプログラムする形に応じて異なる可能性があることを理解されたい。本明細書の教示を与えられた当業者は、これらおよび類似の本発明の実施形態または構成を企図することができる。
【００２１】
図１を参照すると、ブロック図に、コンピュータ・ネットワーク上の情報への会話アクセスを提供する、本発明の一実施形態によるシステム１０が示されている。一般に、システム１０には、会話ポータル１１が含まれ、会話ポータル１１は、１つまたは複数のクライアント／アクセス・デバイス１２ないし１６からマルチモーダル要求を受信し、それに応答して、ネットワーク１７（たとえばインターネット、イントラネット、ＬＡＮ（ローカル・エリア・ネットワーク）、またはBluetoothなどのアド・ホック・ネットワーク）上で１つまたは複数のコンテンツ・サーバ１８（たとえばウェブ・サーバ）から所望のコンテンツ・ページ、サービス、およびアプリケーションを取り出す。会話ポータル１１には、会話ポータル１１のサービス・プロバイダに関連するウェブ・サーバまたはＩＶＲ（対話式ボイス応答）サーバもしくはその両方を含めることができる。下で詳細に説明するように、会話ポータル１１には、クライアント／アクセス・デバイスのＩ／Ｏモーダリティに基づいて要求元クライアント／アクセス・デバイスとの会話ダイアログを行う機構が含まれる。
【００２２】
各クライアント／アクセス・デバイス１２ないし１６は、ネットワーク２９（たとえば無線、ＰＳＴＮ、ＬＡＮ、インターネット）を介する会話ポータル１１への通信を確立することができる。会話ポータル１１には、モーダリティとは独立に、電話番号またはＵＲＬを介してアクセスできることを諒解されたい。たとえば、クライアント／アクセス・デバイス１２ないし１６の構成に応じて、モデムを介するかＷＭＬ（またはセル電話または他の無線デバイスから直接にアクセス可能なアドレス）、ＨＴＭＬブラウザ・クライアント、ＶｏＩＰ（voice over internet protocol）を介するＶｏｉｃｅＸＭＬブラウザ・クライアント、または他の会話プロトコル用のＩＳＰを介するダイヤルアップ接続を使用して、会話ポータル１１との接続を行うことができる。同様に、電話番号（たとえば８００番）を使用して、これらのモーダリティのすべてについて会話ポータル１１への直接アクセス（すなわち、直接電話呼または会話ポータル１１によって直接に提供されるＩＳＰ機能）を提供することができる。
【００２３】
コンテンツ・サーバ１８は、対応するコンテンツ／ビジネス・ロジック１９を維持し、適当なデータベース動作およびレガシ・システム動作（たとえばＣＧＩスクリプトなどを介して）を実行する。コンテンツ／ビジネス・ロジック１９のデータベース内のコンテンツ・ページおよびアプリケーションは、ＨＴＭＬ、ＨＤＭＬ、ＸＭＬ、ＷＭＬ、およびすべてのＳｐｅｅｃｈＭＬフォーマット（たとえば音声ブラウザおよびＩＶＲプラットホームに関する会話ＵＩを宣言的に記述するための標準規格として提案された最近のＶｏｉｃｅＸＭＬ標準規格（www.voicexml.orgを参照されたい）など）などの１つまたは複数のレガシ・フォーマットで実施することができる。
【００２４】
好ましい実施形態では、コンテンツ・ページおよびアプリケーションが、マルチモーダルであり、ＣＭＬ（会話マークアップ言語）を使用して実施される。一般に、ＣＭＬは、所望のアプリケーションに基づいてユーザに関して行われる会話ダイアログ（マルチモーダルの情報交換および対話）を指定／作成するすべての言語を指す。ＣＭＬ文書は、たとえばそのような対話を作成するのに必要な情報を含む、宣言的ページとすることができる。
【００２５】
ＣＭＬ文書およびＣＭＬアプリケーションを、さまざまな形の１つで実施できることを諒解されたい。好ましい実施形態では、ＣＭＬコンテンツは、たとえば、複数の「会話ジェスチャ」を使用する、モーダリティ独立の単独オーサリング・フォーマットで実施される。手短に言うと、会話ジェスチャは、ユーザとのダイアログ対話の特徴を表し、プレゼンテーション材料をレンダリングするデバイスまたはアプリケーションによって提供される特性およびＵＩとは独立のダイアログの抽象表現を提供する、基本的ダイアログ・コンポーネントである。会話ジェスチャは、ダイアログを記述するために宣言的に（たとえばＸＭＬを使用して）または命令的／手続的にのいずれかで実施することができる。
【００２６】
有利なことに、会話ジェスチャの使用（コンテンツ／アプリケーションを生成するための）によって、そのコンテンツを処理またはレンダリングするデバイスのプラットホーム、ブラウザ、モーダリティ、または機能とは独立に、会話対話を記述することができるようになる。下で詳細に説明するように、ジェスチャベースＣＭＬ文書などのマルチモーダル文書を、会話（マルチモーダル）ブラウザを使用して処理して、マルチモーダル・ブラウザによって供給される異なるビューの間の緊密な同期化を提供することができる。さらに、特定の事前定義の規則を使用して、ジェスチャベースＣＭＬ文書のコンテンツを、特定のクライアント・ブラウザまたはアクセス・デバイスによってサポートされる１つまたは複数のモーダリティに自動的にトランスコーディングすることができる。たとえば、ＣＭＬ文書を、ＨＴＭＬ、ＸＨＴＭＬ、またはＸＭＬ（自動business-to-business交換用）、無線ポータル用のＷＭＬ、および音声アプリケーションおよびＩＶＲシステム用のＶｏｉｃｅＸＭＬなどの適当な宣言型言語に変換することができる。実際、下で説明するように、会話ポータル１１には、ＣＭＬページまたはＣＭＬアプリケーションを、クライアント／アクセス・デバイスの特定の１つまたは複数のモーダリティにトランスコーディングする／適応させるための機構が含まれる。したがって、使用される会話ジェスチャの組または使用されるトランスコーディング方法に無関係に、そのような手法が、本明細書で説明する真の「マルチモーダル／マルチチャネル」（すなわち、会話ポータル１１が、会話（マルチモーダル）ブラウザを実行するアクセス・デバイスに対するマルチモーダル文書（ジェスチャベースＣＭＬ文書など）をローカル会話ブラウザによる処理／レンダリングにサービスできるという意味で「マルチモーダル」、会話ポータル１１が、サポートされるモーダリティにＣＬＭを変換することによってマルチモーダルＣＭＬ文書のコンテンツをレガシ・ブラウザ（たとえばＨＴＭＬ、ＶｏｉｃｅＸＭＬ、ＷＭＬ）にサービスできるという意味で「マルチチャネル」）会話ポータルを可能にすることを諒解されたい。
【００２７】
もう１つの実施形態では、複数の視覚的マークアップ言語および聴覚的マークアップ言語を組み込むことによって、マルチモーダルＣＭＬ文書を実施することができる（すなわち、異なる対話モーダリティからの副文書を含むＣＭＬ文書）。たとえば、ＣＭＬ文書は、単一の文書内に、複数の表現された／サポートされるモーダリティのそれぞれからのマークアップ要素（たとえばＶｏｉｃｅＸＭＬタグおよびＨＴＭＬタグ）を組み込むことと、要素ごとに、異なるＭＬコンテンツを同期化させる同期化タグを使用すること（すなわち、あるモーダリティの所与のコマンドのアクションを、他のサポートされるモーダリティの対応するアクションと同期化させること）とによって実施することができる。
【００２８】
ジェスチャベースＣＭＬ文書と複数のＭＬを含むＣＭＬ文書の主な相違は、ジェスチャベース手法が単一のオーサリングを提供するのに対して、複数ＭＬ手法が複数のオーサリングを必要とすることである。さらに、ジェスチャベース手法は、マルチモーダル・ブラウズ実施形態での「緊密な」同期化を提供するが、これは、複数ＭＬ手法（「疎な」同期化を提供することがしばしばである）を使用して達成することがより困難である。どの場合でも、マルチモーダルＣＭＬ文書は、たとえば既知の標準規格ＸＳＬＴまたはＸＳＬで表現可能な標準木変換を使用して、特定の対話モーダリティについて独立の文書に変換することができる。ＪＳＰ（Java server pages）またはJava Beansなど、ジェスチャごとのＣＭＬページの同様の変換を実施する他のトランスコーディング技法を使用することができる。実施することができる追加のトランスコーディング技法は、たとえば、www.w3c.orgで議論されている。実際、所望のモーダリティの文書に変換することができるマルチモーダル文書の実施によって、コンテンツの再利用が保証され、アクセス可能性要件が満たされる（たとえば、組み合わされた視覚モーダリティおよび聴覚モーダリティを用いて設計されたマルチモーダル文書を、１つのモーダリティだけが使用可能な環境で使用することができる）。
【００２９】
図１の例示的実施形態をもう一度参照すると、会話ポータル１１には、ポータル・プロキシ／捕捉モジュール２０、ポータル・トランスコーダ２１、ポータル会話ブラウザ２２、検索エンジン２３、ポータル音声ブラウザ２４、ポータルの会話アプリケーション２５のデータベース、およびポータル・ディレクトリ２６のデータベースが含まれる。ポータル会話ブラウザ２２は、クライアント要求に応答する所望のページなどの（ＨＴＴＰ、ＷＡＰ、またはBluetoothなどの会話トランスポート・プロトコルを使用する）取出、および、たとえば所与のクライアント／アクセス・デバイス１２ないし１６と会話ポータル１１の間の会話ダイアログを実施するための、ＣＭＬページを含む宣言的フレームワークの解析および処理（アプレットなどの組み込まれた手続的指定を含む）などの機能を実行する責任を負う。
【００３０】
ポータル会話ブラウザ２２が、ＣＭＬ実施形態と共に、会話（マルチモーダル）Ｉ／Ｏイベントを（ｉ）対応するアプリケーション・アクション（他のモーダリティの）または（ｉｉ）それによって適当なアクションを生成するための入力イベントの理解の曖昧さの除去、完成、または訂正を必要とするダイアログのいずれかに変換する機構を含むことを諒解されたい。ポータル会話ブラウザ２２は、取り出されたページを含む会話ＵＩをユーザへの提示のためにレンダリングする（アクセス・デバイスにローカル・クライアント・ブラウザが含まれないと仮定する）か、ローカル・クライアント・ブラウザによるレンダリング／提示のためにクライアント／アクセス・デバイス１２ないし１６にページをサービスするかのいずれかを行う。
【００３１】
会話ポータル１１では、適当なマルチモーダル・ブラウザであればどれでも実施することができるが、ポータル会話ブラウザ２２の好ましいアーキテクチャの１つが、図５に示されており、手短に言うと、図５に示されているように、会話（マルチモーダル）ブラウザ４０には、複数の単一モード・ブラウザ（たとえば、図示のように視覚的ブラウザ４４（ＨＴＭＬ）および音声ブラウザ４５（ＶｏｉｃｅＸＭＬ））、マルチモーダル・シェルＡＰＩ４１、および、登録テーブル４３を有するマルチモーダル・シェル４２が含まれる（マルチモーダル・シェル４２は、従来のどのオペレーティング・システム／プラットホーム上でも動作する）。マルチモーダル・シェル４２は、ネットワーク１７を介してコンテンツ・サーバ１８から取り出されたＣＭＬ文書を処理する仮想メイン・ブラウザとして機能する。
【００３２】
マルチモーダル・シェル４２は、単一モードの視覚的ブラウザ４４および音声ブラウザ４５のそれぞれが、そのアクティブ・コマンドおよび対応するアクション（モード間処理およびモード内処理の両方ならびに他の処理に関するアクション）を登録できるようにする、ＡＰＩ呼出しを介する情報交換を調整する。そのような登録には、そのようなコマンドに関連する適当なタスクを実行するための関係する引数を含めることができる。
【００３３】
マルチモーダル・シェル４２の登録テーブル４３は、「ｎウェイ」コマンド／イベント−アクション登録テーブルとして実施されるレジストリであり、このテーブルに登録されるコマンドまたはイベントのそれぞれによって、アクティブ・アプリケーションについて同期化され共用される「ｎ」個のモーダリティのそれぞれをもたらす特定のアクションが示される。マルチモーダル・シェル４２は、取り出されたＣＭＬ文書を解析して、登録テーブル４３を介する同期化を作成し、ＣＭＬ文書を含む関係するモーダリティ固有情報（たとえばマークアップ言語）を、ブラウザの対話モーダリティに基づくレンダリングのために各ブラウザに送信する。会話（マルチモーダル）ブラウザ４０は、サポートされるモーダリティごとに別々のブラウザ・アプリケーション、ならびに別のマルチモーダル・シェル層を含むものとして図示されているが、これらのコンポーネントの機能性を、会話（マルチモーダル）ブラウザ４０を含む１つのアプリケーションに合併できることを諒解されたい。さらに、マルチモーダル・ブラウザのコンポーネントを、分散することができる。たとえば、マルチモーダル・シェル４２は、会話ポータル１１上に常駐することができるが、視覚的ブラウザ４４および音声ブラウザ４５の一方（または両方）が、マルチモーダル・シェル４２がＣＭＬ解析および同期化を提供する状態で、クライアント・アクセス・デバイス上に常駐することができる。
【００３４】
図６に、より複雑な会話コンピューティング機能が必要な時に、ＣＶＭ（会話仮想計算機）を使用して使用することができるポータル会話ブラウザ２２のもう１つの好ましいアーキテクチャを示す。図６の実施形態では、マルチモーダル・シェル４２の機能性を、コアのＣＶＭカーネル５５内で実施することができる。図６に示されたアーキテクチャの説明は、下で行う。
【００３５】
もう一度図１を参照すると、会話ポータル１１には、コンテンツ・ページについてネットワーク１７を検索するロボット、スパイダ、またはクローラとして既知のアプリケーションを含む適当な従来のタイプの検索エンジン２３が含まれる。さまざまなコンテンツ・ページに、検索エンジン２３の検索可能データベースすなわちポータル・ディレクトリ２６のデータベース内で索引を付けることができる。ポータル会話ブラウザ２２からの解釈された照会を受け取って検索を実行する時に、検索エンジン２３は、照会を実行し、ネットワーク１７およびポータル・ディレクトリ２６を検索して、コンテンツ・サーバ１８上の所望のサイト、コンテンツ・ページ、およびブロードキャストを突きとめ、可能な一致のランク付きリストをＣＭＬフォーマットで返す（たとえば、当業者によって理解されるように、結果のサイトが、検索されたトピックにどれほど近いかのパーセンテージによってランク付けされる）。ランク付きリストは、会話ダイアログを介するユーザへの提示およびユーザによる選択のために、たとえばポータル会話ブラウザ２２を介して、ユーザにレンダリングされる。
【００３６】
検索エンジン２３が、ＣＭＬ、ＨＴＭＬ、ＸＭＬ、または他のレガシ言語フォーマットもしくは新しい言語フォーマットのコンテンツ・ページを突きとめる（そのページが、要求元クライアント／アクセス・デバイスのＩ／Ｏ機能に基づいて異なるモーダリティに変換される可能性があるが）ことを理解されたい。すべての従来の照会フォーマットを、検索エンジン２３によって使用することができることを理解されたい。たとえば、検索エンジン２３は、検索エンジンに使用可能な技術に基づいて、ＮＬＵ照会、または、単純にキーワード照会、ブール照会、および概念／属性ベースの照会をサポートすることができる。さらに、会話ポータル１１は、ＣＭＬに会話ユーザ・インターフェースを提供することが好ましいので、検索エンジンは、すべての可能なＩ／Ｏモーダリティおよびモーダリティの組合せをサポートすることができる。下記の方法を使用するマルチリンガル検索も、考慮することができる。照会は、記号表現（属性／値対）にマッピングされる。属性／値対は、他の言語への直接意味変換（すなわち、必ずしもリテラルではない）の実行に使用される。その後、新しい照会を使用して、他の言語の文書の検索を実行する。
【００３７】
会話ポータル１１が複数チャネルをサポートする「マルチチャネル」態様では、ポータル・トランスコーダ２１を使用して、取り出された文書（ユーザによって選択される）を、要求元クライアント／アクセス・デバイスのサポートされるモーダリティ（１つまたは複数）にトランスコーディングする。具体的に言うと、要求元クライアント／アクセス・デバイスの検出されたモーダリティ（１つまたは複数）に基づいて、ポータル・トランスコーダ２１が、解析されポータル会話ブラウザ２２から出力されたマルチモーダル文書（たとえばジェスチャベースのＣＭＬ文書）を、１つまたは複数のモーダリティ固有フォーマットに変換する。
【００３８】
たとえば、図１に示されているように、クライアント／アクセス・デバイスは、ＨＴＭＬブラウザ１３ａ、ＷＭＬブラウザ１４ａ、またはＶｏｉｃｅＸＭＬブラウザ１５ａなどの、それぞれがパーソナル・コンピュータ（ＧＵＩおよび音声）、携帯電話（音声のみまたは音声および制限付きＧＵＩ）、スマートホン（音声および制限付きＧＵＩ）、ＰＤＡ（制限付きＧＵＩのみ）などのマルチモーダル・デバイスまたは単一モーダル・デバイスで稼動するローカル・レガシ・ブラウザとすることができる。さらに、クライアント／アクセス・デバイス１６は、ポータル音声ブラウザ２４を介して会話ポータル１１と対話する通常の電話（音声Ｉ／Ｏのみ）とすることができ、ここで、ポータル音声ブラウザ２４は、たとえばＶｏｉｃｅＸＭＬ文書を処理してＩＶＲサービスを提供する。実際、コンテンツがＣＭＬで格納／構成される好ましい実施形態では、会話ポータル１１が、各ＣＭＬページをサポートされるＭＬにトランスコーディング（オンザフライで）することによって、これらのチャネルまたはクライアント／アクセス・デバイスのいずれをも直接にサービスできることを諒解されたい。たとえば、ＣＭＬ文書は、（１）ＧＵＩモーダリティを有する従来のブラウザを使用するインターネット・アクセス（ＨＴＴＰを介する）をサポートするためにＨＴＭＬに、（２）ＷＭＬブラウザを使用する無線ネットワークを介する無線アクセス（ＷＡＰを介する）をサポートするためにＷＭＬに、（３）音声ブラウザを使用するＰＳＴＮを介する従来の電話アクセスをサポートするためにＶｏｉｃｅＸＭＬに、または（４）他の現行のＭＬまたは開発される可能性がある将来のＭＬに、変換することができる。
【００３９】
ポータル・トランスコーダ２１は、１つまたは複数のトランスコーディング技法を使用して、ＣＭＬページを１つまたは複数のレガシ・フォーマットに変換する。たとえば、そのような変換は、所定のトランスコーディング規則を使用して実行することができる。具体的に言うと、そのような変換は、デバイス固有でモーダリティ固有のＸＳＬスタイルシートでカプセル化することができる。さらに、上で示したように、ＪＳＰまたはJava Beansなど、ジェスチャごとのＣＭＬページの同様の変換を実施する他のトランスコーディング技法を使用することができる。
【００４０】
ポータル・トランスコーダ２１が、所与のモーダリティでのユーザ対話のＣＭＬ表現へのマッピング（同期化されたマルチモーダル対話の場合、１つのモーダリティでの対話が、他のすべての同期化されたモーダリティにまたがって反映されることになる）などの他の機能を実行することを諒解されたい。さらに、ポータル・トランスコーダ２１の機能性を、ポータル会話ブラウザ２２内に組み込むことができることを諒解されたい。たとえば、図５の会話（マルチモーダル）ブラウザ４０のアーキテクチャでは、マルチモーダル・シェル４２が、マルチモーダル文書のモーダリティ固有表現への動的トランスコーディングおよび異なるモーダリティの間の同期化などの機能を実行する。
【００４１】
会話ポータル１１が、ローカル会話（マルチモーダル）ブラウザ１２ａによるレンダリングのためのマルチモーダルＣＭＬページをサービスする「マルチモーダル」態様では、ポータル・トランスコーダ２１は使用されない。というのは、必要なトランスコーディング／同期化機能が、ローカル会話（マルチモーダル）ブラウザ１２ａによってクライアント側で実行されるからである。実際、ローカル会話（マルチモーダル）ブラウザ１２ａ（図５に関して上で説明したアーキテクチャを有する）を実行する、マルチモーダルのクライアント／アクセス・デバイス１２の場合、会話ポータル１１が、取り出されたＣＭＬ文書をローカル会話（マルチモーダル）ブラウザ１２ａに直接にサービスし、ここで、ＣＭＬ文書が、異なる同期化されるモーダリティ（たとえば、マルチモーダルＷＡＰブラウザ（すなわちＷＭＬモーダリティ用のマイクロブラウザ）のために緊密に同期化されるＷＭＬ文書およびＶｏｉｃｅＸＭＬ文書、または音声ブラウザ（ローカルまたはリモート）およびＨＴＭＬブラウザを含む緊密に同期化される会話（マルチモーダル）ブラウザ用のＨＴＭＬおよびＶｏｉｃｅＸＭＬ）に動的にトランスコーディングされる（たとえばマルチモーダル・シェルを介して）ことを諒解されたい。
【００４２】
「マルチチャネル」態様および「マルチモーダル」態様の両方で、会話ポータル１１が、クライアント・ブラウザまたはアクセス・デバイスもしくはその両方のチャネルおよび機能を検出して、必要な場合にＣＭＬ文書をどのモーダリティ（プレゼンテーション・フォーマット）に変換するかを判定することを諒解されたい。たとえば、クライアント／アクセス・デバイスのアクセス・チャネルまたはモーダリティは、（ｉ）照会の種類または要求されたアドレス（たとえば、ＷＭＬページの照会は、クライアントがＷＭＬブラウザであることを暗示する）、（ｉｉ）アクセス・チャネル（たとえば、電話アクセスは、音声のみを暗示し、ＧＰＲＳネットワーク・アクセスは、ボイスおよびデータ機能を暗示し、ＷＡＰ通信は、アクセスがＷＭＬであることを暗示する）、（ｉｉｉ）ユーザ設定（ユーザは、発呼番号、呼出し側ＩＰ、生物学的測定、パスワード、クッキーなどによって識別することができる）、または（ｉｖ）会話ブラウザ・クライアントの場合に、登録プロトコル、もしくはこれらの組合せによって判定することができる。
【００４３】
図１のシステム１０には、さらに、トランスコーダ２８を有する会話プロキシ・サーバ２７が含まれ、このトランスコーダ２８は、所与のコンテンツ・プロバイダの１つまたは複数のサイトのページ／アプリケーションをレガシ・フォーマットからＣＭＬフォーマット（または他のレガシ・フォーマットもしくはその両方）にトランスコーディングするのに使用することができる。会話プロキシ・サーバ２７は、たとえばコンテンツ・プロバイダまたはコンテンツプロバイダと契約したサード・パーティに直接に加盟させて、コンテンツ・プロバイダのサイトをトランスコーディングし、トランスコーディングされたサイトを格納し、元のサイトがコンテンツ・プロバイダによって変更された時に、格納された（トランスコーディングされた）コンテンツを周期的に更新することができる。たとえば、ＨＴＭＬベースのサイトのサービス・プロバイダは、会話プロキシ・サーバ２７のトランスコーディング・サービスを使用して、サイトのＨＴＭＬコンテンツをＣＭＬフォーマットに変換することができる。そのようなトランスコーディングは、ローカル会話（マルチモーダル）ブラウザ１２ａを実行するクライアント／アクセス・デバイス１２に特に適用可能であり、これによって、ユーザが、厳密に従来のＭＬフォーマットである文書／アプリケーションを含むサイトにアクセスする時にマルチモーダル・ブラウズを行うことができる。この形で、会話ポータル１１は、その後、そのようなページがそのサイトから直接に取り出された時から、そのようなトランスコーディングされたページ（たとえばＣＭＬページ）を会話プロキシ・サーバ２７から取り出すことができる。
【００４４】
会話プロキシ・サーバ２７を使用することによって、コンテンツ・プロバイダが、コンテンツ・プロバイダのページ／アプリケーションを１つまたは複数の所望のモーダリティに変換するために未知のポータル・トランスコーダに頼るのではなく、そのコンテンツがユーザにレンダリングされる（ポータル会話ブラウザ２２またはクライアント・ブラウザによって）形を制御できるようになる。実際、ポータル・トランスコーダ２１が、そのような変換を適当に実行するためにコンテンツ・プロバイダの特定のレガシ文書、アプリケーション、またはビジネス・ロジックもしくはこれらの組合せに関する特定の所有情報を有しない場合がそうである可能性がある（その情報は、コンテンツ・プロバイダだけが知っているか、コンテンツ・プロバイダによって契約したサード・パーティに供給される）。
【００４５】
会話プロキシ・サーバ２７のトランスコーディング・サービスを、自動トランスコーディング技法を使用して実行できることを理解されたい。たとえば、トランスコーダ２８は、ＨＴＭＬ、ＷＭＬ、またはＤＢ２などの従来の（レガシ）構造を有する文書フォーマットを、事前に指定されたトランスコーディング規則を使用してＣＭＬ文書にトランスコーディングすることができる。基本的な構成規則および設計規則を課して（私有または標準規格の対象のいずれかである）、ＨＴＭＬなどのレガシ・フォーマットからＣＭＬへの変換を簡略化することができる（上で組み込まれた国際特許出願第ＰＣＴ／ＵＳ９９／２３００８号明細書に記載の、ＨＴＭＬをｓｐｅｅｃｈＭｌ（ＶｏｉｃｅＸＭＬ）に変換するトランスコーディング規則など）。ジェスチャおよびジェスチャ・パターンの抽出の使用など、他の技法をＨＴＭＬ（または他のレガシＭＬフォーマット）からＣＭＬへのトランスコーディングに使用できることを理解されたい。たとえば、作られたトランスコーディングされたページをＣＭＬからＨＴＭＬへリバース・エンジニアリングすることによって、ＨＴＭＬタグ・パターンの大きいセットを、特定のＣＭＬジェスチャまたはジェスチャのグループにマッピングすることができる。追加のＨＴＭＬタグの詳細を、やはりＣＭＬパターンに変換するか、ページに組み込まれたＨＴＭＬタグとしてＣＭＬページに追加するかのいずれかを行うことができる。この最後の手法は、ジェスチャには関係しないが、ジェスチャで取り込む価値のない、追加のモーダリティ固有（この例ではＨＴＭＬ）のレンダリング情報（たとえば画像の表示）に直接に関係する詳細に使用することができる。さらに、トランスコーダ２８は、トランスコーディングの目的でレガシ・ページに追加されるメタ情報を使用することができる。
【００４６】
さらに、トランスコーダ２８による自動トランスコーディングの結果が、不完全または不正確である時、または会話プロキシ・サーバ２７のサービス・プロバイダが、トランスコーディング結果の品質向上を望む時に、人間のオペレータを使用して、トランスコーディングの結果の手作業の再検討、訂正、または完了もしくはこれらの組合せを行うことができる。実際、すべてのウェブ・サイトが、あまねくＣＭＬでオーサリングされるか、適当な／標準的な構成規則に従うか、完全に自動化されたトランスコーディングをサポートするために適当なメタ情報／ヒントを追加するかのいずれかを行うまでは、手作業の再検討／トランスコーディング・オプションが、複雑なビジネス・ロジックを有するサイトを効率的かつ正確にモデリングするのに特に有利である。
【００４７】
異なるビジネス・モデルに基づいて、会話ポータル１１が、コンテンツ・プロバイダのコンテンツ・サーバ１８のコンテンツ・ページ／アプリケーションをよりよい会話レンダリングのためにＣＭＬで準備または適合させるサービスを、コンテンツ・サーバ１８に提供できることを諒解されたい。たとえば、会話ポータル１１は、（登録されたウェブ・サイトに）その既存のコンテンツ・ページ／アプリケーション（レガシ・フォーマットの）をＣＭＬに事前にトランスコーディングさせ、ポータル・ディレクトリ２６に格納させて、そのようなページを、その後、異なるモーダリティにまたがって高品位レンダリングと共にサービスできることを保証するというオプションを提供することができる。そのようなトランスコーディングは、会話プロキシ・サーバ２７を介して行うことができる（それが会話ポータル１１のサービス・プロバイダに加盟されると仮定する）。さらに、そのようなトランスコーディングは、特定の提携／料金／ビジネス契約を介してウェブ・サイトから直接に情報を得るポータルのオペレータによって直接に実行することができる。サイトの変更を検出し、そのサイト内のトランスコーディングされたコンテンツをそれ相応に更新する機構を使用することができる（すなわち、元のサイトを検査するクローラまたは変更が発生した時の通知契約）。さらに、上で述べたように、自動的トランスコーディング（トランスコーダ２８を介する）の結果が、不完全または不正確である時、または会話ポータル１１のサービス・プロバイダが、トランスコーディング結果の品質を高めたいと思う時に、人間のオペレータを使用して、トランスコーディングの結果の手作業の再検討、訂正、または完了もしくはこれらの組合せを行うことができる。再検討され訂正されたページは、ポータル・ディレクトリ２６に格納することができる。さらに、ページの部分またはパターンを、ポータル・ディレクトリ２６に格納することができる。
【００４８】
さらに、会話ポータル１１のサービス・プロバイダは、最初の例では会社または個人の「会話」ウェブ・サイトを生成し、会話ポータル１１のハードウェアまたはネットワークもしくはその両方でその会話ウェブ・サイトをホスティングするというサービスを提供することができる。実際、会話ポータル１１のサービスは、「会話」ウェブ・サイトに関連する複数のＣＭＬページを生成し、そのようなＣＭＬページをポータル・ディレクトリ２６のデータベースに格納することができる。やはり、会話ポータル１１のサービス・プロバイダは、異なるビジネス・モデルおよびサービス・オファリングに基づいて、これらのさまざまなサービスを提供できることを理解されたい。
【００４９】
したがって、ポータル・ディレクトリ２６のデータベースには、１つまたは複数のコンテンツ・プロバイダのコンテンツ・ページ／アプリケーションを格納することができ、このコンテンツ・ページ／アプリケーションは、効率的な会話レンダリングを提供するために、事前にトランスコーディングされるかＣＭＬで設計されるかのいずれかである。検索プロセス中に、検索エンジン２３は、ウェブ検索に加えて、ポータル・ディレクトリ２６内で要求されたコンテンツを検索する。さらに、ポータル・ディレクトリ２６内のリンクの一部にも、会話アプリケーション２５を含めることができる（たとえば、ＣＶＭの上に構築されるマルチモーダル手続きアプリケーション）。会話アプリケーション２５は、モーダリティ独立ダイアログを担持することによって、アプリケーションに「会話ユーザ・インターフェース」を引き渡すためにすなわち、いつでもどこからでもすべてのデバイスを介して同一の挙動を伴って関係情報にユーザがアクセスでき操作できるようにするために、命令的に（すなわち、命令コードをコンパイルすることによって）、宣言的に（すなわち、マークアップ言語を用いて作成する）、またはその両方の組合せで開発される、通常のアプリケーションである。そのようなアプリケーションの例には、ＣＵＩを介するユニバーサル・メッセージング（電子メール、ファクシミリ、およびボイス・メールのアクセスおよび処理）、日程表作成、e-businessアプリケーションなどが含まれる。これらのポータルの会話アプリケーション２５は、会話ポータル１１のサービス・プロバイダによって直接に提供されるか、会社または個人の代わりに会話ポータルによってホスティングされることが可能であることを諒解されたい。やはり、これらのサービスのすべてを、さまざまなビジネス・モデルに従って提供することができる。
【００５０】
ポータル・プロキシ／捕捉モジュール２０は、会話ポータル１１に対して行われる電話呼またはブラウザ接続（たとえばＨＴＴＰ、ＷＡＰなど）を「捕捉する」ために会話ポータル１１内に組み込むことができるオプション機能である。たとえば、好ましい実施形態では、クライアント／アクセス・デバイス１２ないし１６（たとえばスマートホン、ＨＴＭＬブラウザ、ＷＭＬブラウザ、会話ブラウザ）が、会話ポータル１１に接続し、要求を入力する時に、会話ポータル１１は、会話ポータル１１によって提供され、ユーザによって従われるすべてのリンクについて、呼／クライアント・ブラウザを捕捉状態に維持する。具体的に言うと、会話ポータル１１を介する最初の要求またはポータルによってその後にロードされるページのいずれかから生じる、会話ポータル１１によって提供されるすべてのリンクが、ポータル会話ブラウザ２２によって（クライアント・ブラウザではなく）取り出され、クライアント・ブラウザにサービスされる。ポータル・プロキシ／捕捉モジュール２０は、リンクを取り出し、おそらくはリンクを適当なモーダリティ固有マークアップ言語（たとえばＷＡＰブラウザではＷＭＬ、ウェブ・ブラウザではＨＴＭＬ、音声ブラウザ（電話アクセス）ではＶｏｉｃｅＸＭＬ）にトランスコーディングし、取り出したページをクライアント・ブラウザ（電話アクセスの場合にはサーバ側のポータル音声ブラウザ２４とすることができる）にサービスするのに要する時間の間、クライアントを捕捉状態に保つ。
【００５１】
その一方で、好ましい実施形態では、ユーザによって手作業で直接に要求／入力されるページ（明示的に入力されたＵＲＬ、ブックマーク、他のアプリケーションによって生成されたリンク）は、クライアント・ブラウザによる適当なページの取出のためにクライアント・ブラウザに解放される（すなわち、クライアント・ブラウザが捕捉状態に保たれない）。呼捕捉機能に関する他のポリシを使用することができ、たとえば、会話ポータル１１が、全セッション中に呼を捕捉する（すなわち、全く解放しない）ことができ、また、捕捉期間を情況に基づいて（会話ポータル１１による決定に従って）変更することができることを理解されたい。
【００５２】
有利なことに、呼／クライアント・ブラウザが捕捉状態に保たれている期間の間は、会話ポータル１１のサービスが、継続的に「会話」を聴取／参加し、追加サービスを提供し、ユーザに広告を提供することができる。たとえば、好ましい実施形態では、サイトからサイトへのページ取出の間の時間枠中（必ずしも同一のサーバからの同一のアプリケーションのページ取出の間の時間枠ではなく）に「捕捉状態の」ユーザにマルチモーダル広告を提供することができる。やはり、広告が提供される時間は、会話ポータル１１のポリシに基づいて変更することができる。広告は、純マルチモーダル機能であることを諒解されたい。実際、広告は、クライアント／アクセス・デバイスのモーダリティに応じて、表示、オーディオを使用するレンダリング、またはその両方を行うことができる。さらに、マルチモーダル文書の（マルチモーダル・ブラウザによってレンダリングされる）特定の部分で、コンテンツとは別のフレームに広告を追加することができる。やはり、会話ポータルのサービス・プロバイダによって実施できるさまざまなオプションがある。
【００５３】
ここで図６を参照すると、ブロック図に、図１のシステムで使用することができる会話ブラウザのもう１つの好ましいアーキテクチャが示されている。マルチモーダル・ブラウザである会話ブラウザ５０は、ＣＶＭシェル５３の上で実行される。会話ブラウザ５０には、ＣＭＬ文書を解析し、ＣＭＬ文書のメタ情報を処理して、ユーザに提示するために文書をレンダリングするＣＭＬパーサ／プロセッサ・モジュール５２が含まれる。会話ブラウザ５０には、さらに、音声コマンド、ＤＴＭＦ信号、キーボード入力などのユーザ・コマンド／要求（マルチモーダル）を解釈するコマンド／要求プロセッサ５１（たとえば、コマンドおよび制御インターフェースおよびＨＴＴＰサーバ）が含まれる。ある会話機能または会話サービスが必要な時には、会話ブラウザ５０は、ＣＶＭシェル５３に対する、そのようなサービスを要求するＡＰＩ呼出しを行う（下で説明する）。たとえば、ＣＭＬ文書を（ＣＭＬパーサ／プロセッサ・モジュール５２を介して）解釈する時に、会話ブラウザ５０は、ＴＴＳ（テキスト−音声合成）エンジン６７に（ＣＶＭシェル５３を介して）フックして、合成された音声出力をユーザに提供する。さらに、音声コマンドまたは自然言語照会（たとえばナビゲーション要求）が入力された時に、会話ブラウザ５０は、音声認識エンジン６４およびＮＬＵ（自然言語理解）エンジン６６にフックして、そのような入力コマンドを処理し、これによって、コマンド／要求プロセッサ５１が適当な要求／照会を生成できるようにすることができる。
【００５４】
ＣＶＭシェル５３は、通常のＯＳ（オペレーティング・システム）またはＲＴＯＳ（リアルタイム・オペレーティング・システム）の上で稼動することができる。手短に言うと、図６に示されているように、ＣＶＭシェル５３には、会話ＡＰＩ層５４が含まれ、この会話ＡＰＩ層５４を介して、会話ブラウザ５０が、ＣＶＭカーネル５５に「話しかけて」、（システム呼出しを介して）会話エンジン６３を含むある会話サービスおよび振る舞いにアクセスすることができる。ＣＶＭカーネル５５は、エンジンおよび引数（ローカルまたは分散もしくはその両方）などの会話リソースの割振と、汎用の調整されたＣＵＩ（会話ユーザ・インターフェース）をそれによって提供するために登録された会話機能／要件に基づいて複数のアプリケーションおよびデバイス（ローカルまたは分散もしくはその両方）にまたがるダイアログおよびコンテキストの管理および制御の責任を負う。ＣＶＭシェル５３は、たとえば、会話エンジンＡＰＩ層５６（ＳＡＰＩ、ＳＲＡＰＩ、ＪＳＡＰＩ、ＳＶＡＰＩ、またはそのようなエンジンＡＰＩの拡張など）を介して、音声認識エンジン６４、話者識別／検証エンジン６５、ＮＬＵ（自然言語理解）エンジン６６、ＴＴＳ（テキスト−音声合成）エンジン６７（ならびにＮＬＧ（自然言語生成）エンジンなどの他のエンジン）などのローカルの会話エンジン６３への呼出しを実施することによって、会話サービスおよび会話機能を実行する。さらに、分散トポロジで、リモート音声エンジンへのエンジン呼出しを行うことができる。さらに、オーディオ・サブシステム６２（オーディオ取込、圧縮、圧縮解除、および再構成を提供する）およびＤＴＭＦエンジン６１への呼出しを、通常のドライバ／ＡＰＩ層６０を介して実行することができる。
【００５５】
ＣＶＭシェル５３には、さらに、ＴＣＰ／ＩＰ、ＨＴＴＰ、ＷＡＰなどの従来のプロトコル５８を介するネットワーク通信を提供する通信スタック５７が含まれる。通信スタック５７には、さらに、分散アプリケーションのために使用される会話プロトコル５９（または分散会話プロトコル）が含まれる。上で組み込まれた特許申請書に記載されているように、会話プロトコル５９（または会話方法）には、（１）「会話対応」（すなわち、会話プロトコルを話す）ネットワーク・デバイスおよびアプリケーションを発見するためのプロトコル、（２）ネットワーク・デバイス間で会話エンジンおよび引数などの会話機能（リソース）を登録するためのプロトコル、（３）登録された会話機能に基づいてネットワーク構成（マスタ／スレーブ、対等通信など）を折衝するためのプロトコル、（４）ダイアログの状態、コンテキスト、およびヒストリ、会話引数、アプレット、ＡｃｔｉｖｅＸコンポーネント、手続きオブジェクト、および他の実行可能コードに関する情報など、ネットワーク接続されたデバイスの間での会話を調整するために情報を交換するためのプロトコル、（５）圧縮された音声（波形または特徴）を送受信するための音声符号化プロトコルが含まれる。
【００５６】
図６に示された会話エンジン６３、ＤＴＭＦエンジン６１、通常のドライバ／ＡＰＩ層６０およびオーディオ・サブシステム６２が、会話ブラウザ５０およびＣＶＭシェル５３がその上で実行される基礎となるデバイス、計算機、またはプラットホームの一部であるコンポーネントであることを理解されたい。さらに、会話ブラウザ５０およびＣＶＭシェル５３を、別々のシステムとして提供することができ、その代わりに、会話ブラウザ５０を、それ自体のＣＶＭシェル５３を担持する独立のアプリケーションとして実施することができる（この場合、ブラウザとＣＶＭのプラットホームが同一、すなわち区別不能なエンティティになる）ことを理解されたい。さらに、具体的に上で説明したＣＶＭシェル５３がない場合、会話ブラウザ５０に、説明したＣＶＭシェル５３の機能性および特徴のすべてを組み込むことができる（たとえば、会話ブラウザが、適当なエンジンに対するＡＰＩ呼出しをローカルまたは分散もしくはその両方で行う）ことを理解されたい。実際、ＡＰＩ、サービス、特徴、振る舞い、エンジンへのアクセス、および通信機構は、すべて、ブラウザによって提供される特徴およびサービスの一部として、会話ブラウザ５０に直接に組み込むか、その一部とすることができる。
【００５７】
ここで図２を参照すると、ブロック図に、会話ポータル１１を使用して情報にアクセスするための、本発明のもう１つの実施形態によるシステムが示されている。図２のシステム１０は、図１に示されたシステムの拡張であり、追加的に、マルチモーダル・ブロードキャスト・オン・デマンド・サービスを提供する。具体的に言うと、図２のシステムには、オーディオ索引付けシステム３０が含まれ、このオーディオ索引付けシステム３０は、ネットワーク１７を介してあるコンテンツ・プロバイダのコンテンツ・サーバ１８からアクセスされるブロードキャスト・ニュース、ラジオ・ニュース番組、およびウェブ・ブロードキャストなどの、オーディオ／マルチメディア文書もしくはストリーム化されたオーディオまたはストリーム化されたマルチメディアもしくはその両方のリアルタイム索引付けを実行することが好ましい。ブロードキャストには、ニュースから娯楽までの範囲に渡る（生または事前記録の）オーディオ作品およびビデオ作品を含めることができる。たとえば所与のブロードキャストまたはマルチメディア文書に関連する、索引メタ情報は、マルチモーダル・ブロードキャスト・コンテンツのデータベース３１に格納することができる。ユーザは、あらゆるタイプのクライアント／アクセス・デバイスを使用して会話ポータル１１に接続し、索引メタ情報を使用してデータベース３１を検索して、たとえばあるブロードキャストまたはオーディオ・ファイルの所望のセグメントにアクセスすることができる。クライアント／アクセス・デバイスの機能に応じて、ポータル会話ブラウザ２２が、たとえばマルチメディア・プレイヤ（たとえばRealnetworks playerまたは他のＩＰブロードキャスト・ストリームを再生するアプリケーション）などのプラグインを介して、ストリーム化されたビデオまたはオーディオの所望のセグメントをレンダリング／提示すること、または、そのセグメントを、ユーザへのレンダリング／再生のために、取り出し、アクセス・デバイス上のクライアント・ブラウザにブロードキャスト／ストリーム化すること、のいずれかを行うことができる。
【００５８】
適当な従来のオーディオ索引付けシステムであれば、どれでも図２のシステム内で使用できることを理解されたい。手短に言うと、一実施形態では、上で組み込まれたオーディオ索引付けシステム３０が、データベース３１での格納のために、たとえば話者の身元、環境、トピック、またはチャネルもしくはこれらの組合せなどのオーディオ情報に基づいて、オーディオ・ファイル、マルチメディア・ファイル、ニュース、またはラジオ放送をセグメント化し、索引を付ける。当初、オーディオ・ファイルまたはオーディオ・データ・ストリーム（リアルタイムで受信される）の関係する特徴が、抽出され、処理されて、オーディオ・データが、たとえば別個の話者の音声、音楽、雑音、および異なる背景条件に基づいて、複数のセグメントにセグメント化される。たとえば、通常のラジオ放送ニュース・レポートには、明瞭な音声、帯域幅を制限された音声（さまざまなタイプのマイクロホンによって作られる）、電話の音声、音楽セグメント、音楽に重なった音声、環境雑音に重なった音声、音声に重なった音声などを含む非常にさまざまな供給源からの音声信号および非音声信号が含まれる。セグメントごとに、オーディオ索引付けシステム３０が、特定の話者または背景環境／チャネルもしくはその両方を識別し、話された発声を録音し、セグメントの関係するコンテンツ／トピックを判定して、セグメントに索引を付け、そのようなデータに基づいてそのトピックを検出する。
【００５９】
したがって、データベース３１には、マルチメディア文書／ストリームごとに、以下のメタ情報の任意の組合せが格納される可能性がある：タイム・マーク（セグメントの時間境界を示す）、話者の身元（意味がある場合）、話者の変化のセグメント化（適用可能な場合）、セグメントの話された部分の録音、環境情報（音楽、電話音声など）、セグメントのトピック、トピックの検出された変化の境界、セグメント／ストーリの索引／属性値対または特徴（最大エントロピの意味で）、言語、および言語境界。
【００６０】
さらに、オーディオ索引付けシステム３０には、索引メタ情報を使用して、データベース３１に格納されたオーディオ／マルチメディア・ファイルの所望のセグメントを検索し、取り出す、情報取出システム（または検索エンジン）が含まれる。具体的に言うと、データベース３１から所望のセグメントを取り出すために、照会パラメータに、話者の身元（ＩＤタグ）、環境／チャネル、キーワード／コンテキスト、またはトピック／ＮＬＵコンテンツもしくはこれらの組合せなどの異なる索引メタ情報の組合せを含めることができる。
【００６１】
上で示したように、会話ポータル１１は、コンテンツ・サーバ１８にアクセスして、たとえば１つまたは複数のブロードキャスト・ニュースおよびラジオ・ニュース番組にリアルタイムで索引を付けることができる。そのようなアクセスは、たとえば所与のトピックに関する関係するニュース・セグメントなどのリアルタイムの検索を要求する、会話ポータル１１との接続で発行されたユーザ照会に応答するものとすることができる。たとえば、ユーザは、たとえば通常の電話機であるクライアント／アクセス・デバイス１６を介して、会話ポータル１１にアクセスし、たとえば株式市場に関する最新のニュースのオーディオ・セグメントなどの検索要求を発行することができる（この検索要求は、ポータル音声ブラウザ２４またはポータル会話ブラウザ２２もしくはその両方を介して解釈される）。検索エンジン２３は、関係するサイトにアクセスして、１つまたは複数のストリーム化されたブロードキャストを取り出し、このブロードキャストが、オーディオ索引付けシステム３０を介してセグメント化され、索引を付けられる。セグメントのランク付きリストが、ポータル音声ブラウザ２４（ユーザ・アクセスが電話機を介すると仮定する）またはポータル会話ブラウザ２２を介して、会話ダイアログを介して、レンダリングされ、ユーザに提示される。会話ダイアログを介して、ユーザは、再生のために所望のセグメントを選択でき、ポータル音声ブラウザ２４（または、マルチモーダル・コンテンツの場合にはポータル会話ブラウザ２２）が、後続アクセスのためのデータベース３１内でのそのようなセグメントおよび索引付けメタ情報の記憶（長期）を必ずしも伴わずに、関係するセグメントをユーザに再生する。マルチモーダル・クライアント／アクセス・デバイスを使用することによって、ユーザが、興味のあるオーディオ−ビジュアル・セグメントを得るためにマルチモーダル・ブロードキャスト・オン・デマンドを要求し、会話／マルチモーダル・ユーザ・インターフェースを使用してマルチモーダル・プレゼンテーション／ストリーム／ブロードキャストをナビゲートできることを諒解されたい。
【００６２】
さらに、そのようなブロードキャストのコンテンツ・プロバイダは、会話ポータル１１のサービス・プロバイダに加盟するか他の形で登録することができ、そのようなコンテンツ・プロバイダのストリーミング・オーディオ／マルチメディアまたは他の関係する文書（オーディオおよびマルチメディア）が、会話ポータル１１の許可されたユーザによる後続アクセスのために自動的にダウンロードされ、索引を付けられる（周期的に）。この形で、ユーザは、会話ポータルに接続し、データベース３１を直接に検索するために照会を発行し、所望のコンテンツを有する１つまたは複数の事前に索引を付けられたマルチメディア・セグメントを取り出すことができる（ネットワーク上の検索の代わりにまたはそれに加えて）。ユーザは、異なるセグメントが再生／ブロードキャストされる順序をユーザが指定できるブロードキャスト・プログラムを構成し、たとえばセル電話または他の接続されたデバイス上でそのプログラムを聞くことができる。
【００６３】
さらに、マルチメディア文書またはストリーミング・データもしくはその両方を周期的にダウンロードし、索引を付けることによって、会話ポータル１１が、ユーザ設定（たとえば事前に選択されたトピックまたは興味のあるブロードキャスト／文書／リストのタイプ）に基づいて、加入ユーザ用のパーソナライズされた「視聴」プログラムを構成するサービスを提供することができる。ユーザは、そのユーザが聞くもののメニューを構成することもできる。会話ポータル１１に接続する際に、ユーザは、パーソナライズされたプログラムにアクセスし、事前に指定された順序で所望のコンテンツを再生することができる。例として、加入ユーザは、ユーザが会話ポータル１１に接続された無線電話を介してアクセスできるパーソナライズされたラジオ・オン・デマンド・プログラムを生成することができる。さらに、後続の検索中に、加入ユーザは、自分のパーソナライズされたプログラムに、検索結果リストでユーザに提示される追加のマルチメディア・セグメントを追加できることを了解されたい。プログラム中のどの時点でも、ユーザは、ポータル会話ブラウザ・コマンドを使用して、プログラムに割り込むか、一時停止させるか、変更することができる。
【００６４】
ここで図３および図４を参照すると、流れ図に、会話ポータルを使用してネットワーク上で情報にアクセスする、本発明の１態様による方法が示されている。まず、図３を参照すると、ユーザが、任意のタイプのクライアント／アクセス・デバイスを使用して、たとえば電話機を使用して８００番を呼び出すことによって、会話ポータルにアクセスする（ステップ１００）。好ましい実施形態では、会話ポータルへの接続時に、ユーザ識別／検証処理を実行して（ステップ１０１）、ユーザがその会話ポータルの許可されたユーザであるかどうかを判定する。ユーザ識別は、パーソナライゼーションまたはログインもしくはその両方と課金が行われる場合に使用されることを理解されたい。
【００６５】
従来の形のセキュリティ手順またはログオン手順をどれでも使用できることを理解されたい。手短に言うと、この特許では、自動音声認識技法、テキスト依存話者識別技法、および自然言語理解技法、ならびに他の動的機能および静的機能を使用する、サービス（会話ポータルなど）へのアクセスを保護する方法が開示される。１態様では、認証処理に、名前、住所、または顧客番号などの話者のしるしを含む、話者の話された発声を受け取り、復号するステップと、候補話者に関する情報を含むデータベースにアクセスするステップと、その情報に基づいて話者に質問するステップと、質問に対する回答を受け取り、復号し、検証するステップと、話者のボイス・サンプルを得、モデルに対してボイス・サンプルを検証するステップと、回答およびボイス・サンプルに基づいてスコアを生成するステップと、スコアが閾値以上である場合にユーザにアクセスを許可するステップなどのステップが含まれる。
【００６６】
その代わりに、話者識別／検証を、フレーム単位の特徴分類に基づくテキスト独立話者検証処理で開示された方法を使用して、ダイアログのバックグラウンドでテキスト独立話者認識を介して実行することができる。
【００６７】
何らかの形で話者識別を実行する時に、その出力を、ボイス・クッキーであるかのように処理することができる。具体的に言うと、従来のクッキーは、ブラウザがサイトに接続する時に、ウェブ・サイトがブラウザに配送するコードである。クッキーには、ユーザの設定、過去の使用などに関する情報を格納することができる。クッキーには、ディジタル証明書を含めることもできる。したがって、話者ＩＤおよび検証を使用して、サーバ側のポータル会話ブラウザまたはポータル音声ブラウザに格納することができる等価な情報（クッキー）を作成することができる。その後、会話ポータルへの接続時に、ユーザ識別を、ディジタル証明書の提示と同等であるクッキーを使用してバックグラウンドで透過的に実行することができる。上で示したように、話者識別処理は、たとえば、ユーザ設定（たとえば、プレゼンテーション・フォーマット、サービス・アクセス、課金加入アクセス、モーダリティ設定など）が話者の識別および検証の際にセットされる、ユーザ・カスタマイズに使用できることを理解されたい。ユーザＩＤ、パスワード、ＧＳＭセル電話のＳＩＭＳ番号、アクセス・クライアント（ブラウザ）内の従来のクッキーなどの、他のログイン、識別、認証手順を使用できることを理解されたい。
【００６８】
ログイン処理の後に、ユーザが許可されないと判定される場合（ステップ１０２の否定の判定）、クライアントとポータルの間の通信が終了する（ステップ１０３）。その一方で、ユーザが許可されると判定される場合（ステップ１０２の肯定の判定）、ユーザに、会話ポータルの「ホーム・ページ」に関連する複数のメニューが提示される（ステップ１０４）（たとえば合成された音声を介して）。最初のメニュー・オプションには、たとえば、コンテンツ・ページまたはサービス（ＣＭＬまたはレガシのページ／アプリケーション）の検索、リアルタイムまたは事前に記録されたブロードキャストまたはトランスコーディング・サービスを使用するレガシ情報へのアクセス、および興味のあるブロードキャスト・セグメントを検索するためのパーソナライズされたプログラムへのアクセスを含めることができる。
【００６９】
使用可能なメニュー・オプションおよびユーザが望む情報のタイプに応じて、ユーザは、適当な検索要求を発行する（ステップ１０５）。会話ポータル１１は（ポータル会話ブラウザ２２を介して）、照会を解釈し、解釈された照会を検索エンジン２３に供給して、それ相応に検索を実行する（ステップ１０６）。やはり、選択されたメニュー・オプションに基づいて、要求される検索は、たとえば、あるＷＷＷまたはＣＭＬコンテンツ・ページ、ブロードキャストベースのウェブ・サイトからのブロードキャスト、または索引付けされたブロードキャストの格納されたセグメントの取出になる可能性がある。要求された検索のタイプに応じて、検索エンジン２３は、ＷＷＷ、ポータル・ディレクトリ２６、または索引付けされたブロードキャストのデータベース３１のいずれかを検索し、可能な一致のランク付きリストをＣＭＬで返す（ステップ１０７）。ランク付きリストは、その後、たとえばポータル会話ブラウザ２２またはポータル音声ブラウザ２４を介して、ユーザにレンダリングされる（ステップ１０８）。
【００７０】
ユーザが特定のウェブ文書（またはサービス）の検索を要求したと仮定すると、ランク付きリストには、ユーザが文書をダウンロードするために選択することができるウェブ・サイトのリストが含まれる。ユーザが、リストから特定の文書を取り出すことを望まない場合（ステップ１０９の否定の判断）、ユーザは、追加の検索に継続する（ステップ１１０の肯定の結果であり、ステップ１０４に戻る）か、会話ポータルから切断する（ステップ１０３）ことができる。その一方で、ユーザが、リストから特定の文書を取り出すことを望む場合（ステップ１０９の肯定の判断）、ユーザは、適当なマルチモーダル・コマンド（ボイスまたはマウス・クリック）を発行して、所望の文書を取り出すことができる（ステップ１１１）。会話ブラウザは、対応するコンテンツ・サーバ１８から所望の文書をダウンロードするのに適当な要求を生成し、送信する。
【００７１】
好ましい実施形態では、所望の文書がＣＭＬ以外のプレゼンテーション・フォーマット（たとえばＨＴＭＬ）である場合（ステップ１１２の否定の結果）に、文書を適当なトランスコーダに送信して、その文書を適当なＣＭＬフォーマットに変換し（ステップ１１３）、この文書が、会話ブラウザ（クライアント上またはサーバ上もしくは両方で（分散トポロジで）稼動する）を介してユーザへの再生のためにレンダリングされる（ステップ１１４）。上で示したように、トランスコーダは、たとえば、会話ポータル１１のサーバ内または、たとえば文書がそこから取り出されたコンテンツ・サーバに関連するプロキシ・サーバ内に常駐することができる。その代わりに、レガシ・クライアント・ブラウザの場合に、取り出された文書を、適当なモーダリティにトランスコーディングすることができる（たとえば、ＣＭＬ文書またはＨＴＭＬ文書を、クライアント音声ブラウザでのレンダリングのためにＶｏｉｃｅＸＭＬ文書にトランスコーディングすることができる）。ストリーミング・オーディオ／マルチモーダル・フォーマットで取り出された文書は、ＣＭＬまたは他のレガシＭＬに変換されないことを理解されたい。その一方で、要求された文書のプレゼンテーション・フォーマットがＣＭＬである場合には、その文書は、レンダリングのために会話ブラウザ（クライアント、サーバ、または両方（分散））に直接に送信される（ステップ１１４）。
【００７２】
もう一度ステップ１０８に戻って、ユーザが、特定のウェブ・ブロードキャスト（ラジオまたはビデオ・プレゼンテーションの生または事前に記録されたブロードキャスト）の検索を要求したと仮定すると、ランク付きリストには、ユーザがそこから所望のブロードキャストを選択することができる、そのようなブロードキャストを提供するウェブ・サイトのリストが含まれる（図４のステップ１１５）。ユーザが、リスト内の特定のブロードキャストを取り出すことを望まない場合（ステップ１１５の否定の判断）、ユーザは、追加の検索に継続する（ステップ１１９に肯定の結果であり、図３のステップ１０４に戻る）か、会話ポータルから切断する（図３のステップ１０３）ことができる。その一方で、ユーザが、リスト内の特定のブロードキャストをダウンロードすることを望む場合（ステップ１１５の肯定の判断）、ユーザは、適当な（マルチモーダル）コマンドを発行して、所望のブロードキャストをダウンロードすることができる（ステップ１１６）。ポータル会話ブラウザ２２が、所望のブロードキャストを提供するコンテンツ・サーバに接続するための適当な要求を生成し、送信する（ステップ１１７）。任意選択として、ユーザは、後の再生および検索のためにブロードキャストに索引を付けさせる（オーディオ索引付けシステム３０を介して）コマンドを発行することができる（ステップ１１８）。
【００７３】
もう一度ステップ１０８に戻って、ユーザが、ウェブ・ブロードキャストのある事前に格納された／索引を付けられたセグメントの検索を要求したと仮定すると、ランク付きリストには、ユーザがそこから選択することができる使用可能なセグメント（オーディオ／オーディオ−ビジュアル）のリストが含まれる（図４のステップ１２０）。ユーザが、リストされたどのセグメントの取り出しも望まない場合（ステップ１２０の否定の判断）、ユーザは、追加の検索に継続する（ステップ１１９に肯定の結果であり、図３のステップ１０４に戻る）か、会話ポータルから切断する（ステップ１１９の否定の結果であり、図３のステップ１０３に戻る）ことができる。その一方で、ユーザが、リスト内の１つまたは複数のセグメントの再生を望む場合（ステップ１２０の肯定の判断）、ユーザは、そのようなセグメントをダウンロードするのに適当な（マルチモーダル）コマンドを発行することができる（ステップ１２１）。適当なプラグインを使用して、ポータル会話ブラウザ２２またはポータル音声ブラウザ２４が、選択されたセグメントをユーザに再生する（ステップ１２２）。任意選択として、適当なプラグインを使用して、ユーザは、セグメントの再生を制御するコマンド（たとえば早送り、巻き戻し、検索など）を発行することができる。
【００７４】
要約すると、本発明は、有利なことに、たとえばどこからでもいつでも任意の接続された適当なデバイスを介して、ＷＷＷへの会話（マルチモーダル）アクセスを提供して、所望の情報の抽出またはパーソナライズされたブロードキャスト・プログラム・オン・デマンドの作成もしくはその両方ならびにいつでもプログラムの管理および変更を行えるようにする。本発明が、従来のシステムに対する複数の長所を提供することを諒解されたい。たとえば、本発明を用いると、ユーザが、リアルタイム・ブロードキャストおよび事前に記録されたブロードキャストのマルチモーダル検索を実行できるようになり、興味のあるトピックに関するセグメントをマルチモーダル再生のために選択できるようになる。もう１つの長所は、本発明によって、さらに、ユーザが、クライアント／アクセス・デバイスのＩ／Ｏ機能に無関係に、すべてのフォーマット（ＣＭＬまたはレガシ）の文書およびサービスにアクセスできるようになることである。実際、取り出されるページは、ＣＭＬフォーマットであるか、会話（マルチモーダル）ブラウザによるレンダリングのためにオンザフライでＣＬＭフォーマットに変換することができる。
【００７５】
さらに、本発明を用いると、ユーザが、自分が従うプログラムを生成できるようになり、ユーザが、いつでもプログラムに割り込むか変更することができるようになる。さらに、ユーザは、所与のセグメントの視聴中に代替物を検索することができる（バックグラウンド検索またはオフ・ライン検索）。もう１つの長所は、本発明が、たとえば単一の電話番号を介して、ユーザがいつでもどこからでもブロードキャスト・オン・デマンドにアクセスできるようにするサービスを提供することである。実際、無線ネットワークの拡張に伴って、そのようなサービスに、無線接続されたどのデバイスを介してもアクセスすることができる。上で説明した従来のサービスは、そのような機能を提供しない。実際、ブロードキャスト・オン・デマンドおよび真に対話式のプログラミングは、本発明が提案されるまでは、上で説明した従来のシステムのどれによっても適当に満足されなかった、長年にわたる要望であった。
【００７６】
さらに、本発明のビジネス態様に関して、さまざまな発展し得るビジネス・モデルがある。上で示したように、会話ポータル・サービスは、加入ベースとして、さまざまなチャネルから収入を生成することができる。たとえば、会社またはコンテンツ・プロバイダは、会話ポータルのサービス・プロバイダに登録して、適当な料金の支払時に、手作業で管理されるポータル・ディレクトリ２６の一部になることができる。さらに、たとえば後の請求を必要とする定額制または従量制など、ユーザ加入を介して収入を生成することができる。請求は、ユーザを知ることによって実行することができる（接続ブラウザのＩＤ、発呼電話機、または生物測定／検証または会話ポータルへのログイン）。さらに、会話ポータルの支払／収入は、チャネル・キャリア（たとえば電話通信業者、無線通信業者、またはＩＳＰ）との契約を介して直接に得ることができる。
【００７７】
さらに、もう１つのビジネス・モデルが、会話ポータルを、コンテンツ・ページ、サービス、およびブロードキャスト・コンテンツへの会話アクセスのためにすべての人にオープンにすることである。その場合には、収入は、加入ユーザ／会社の代わりに会話ポータル１１によって提供される広告または他のサービスもしくはその両方について加入ユーザ／会社によって支払われる料金から生成することができる。たとえば、会話ポータルの呼捕捉オプションは、ポータルを介して行われる取出の間（たとえば新規検索が実行される時）に広告（バナー）を提供することによって、直接収入ストリームを提供することができる。
【００７８】
さらに、会話を継続的に聴取すること（呼捕捉）によって、会話ポータルは、ユーザが他のサービス（汎用メッセージング、電子メール、ディレクトリ・アシスタンス、地図／交通アシスタンスなど）にアクセスできる主機構になることができ、ここで、そのようなサービスのサービス・プロバイダが、そのレベルで顕著に使用可能になる（ポータルからのより高度なメニュー検索を介してアクセス可能になるのではなく）ために余分な料金を支払う。会話ポータルのこの「捕捉」機構によって、そのポータルでユーザが費やす平均時間が大幅に増える（ユーザが照会を入力し、結果の新しいサイトへのリンクに従うことを決定する短い時間の間だけユーザと対話する従来のポータルと比較して）。また、そのようなサービス（常にアクセス可能である）を提供することによって、ポータルは、サービスを必要とする時にユーザが、サービスの１つへのアクセスが望まれる時に、この会話ポータルに接続する可能性を大幅に高める。
【００７９】
まとめとして、本発明の構成に関して以下の事項を開示する。
【００８０】
（１）会話ポータルであって、
変化する入出力（Ｉ／Ｏ）モーダリティを有するクライアントとのマルチモーダル・ダイアログを行う会話ブラウザであって、前記会話ブラウザが、要求元クライアントからの要求に応答して情報供給源から情報を取り出し、前記要求元クライアントの前記Ｉ／Ｏモーダリティとの互換性を有するフォーマットで前記取り出された情報の前記要求元クライアントへのサービスおよび提示の１つを行う、会話ブラウザ
を含む会話ポータル。
（２）前記情報供給源によって供給される前記情報が、マルチモーダル表現で実施される、上記（１）に記載の会話ポータル。
（３）前記マルチモーダル表現が、モーダリティ独立フォーマットである、上記（２）に記載の会話ポータル。
（４）機能的に前記会話ブラウザに関連する、前記要求元クライアントの前記Ｉ／Ｏモーダリティに基づいて前記マルチモーダル情報を少なくとも１つのモーダリティ固有フォーマットに変換するトランスコーダをさらに含む、上記（２）に記載の会話ポータル。
（５）前記会話ポータルが、前記マルチモーダル情報を前記少なくとも１つのモーダリティ固有フォーマットに変換するために、前記要求元クライアントの前記Ｉ／Ｏモーダリティを検出する、上記（４）に記載の会話ポータル。
（６）前記会話ポータルが、登録プロトコルおよびアクセス・チャネルの識別の１つに基づいて、前記要求元クライアントの前記Ｉ／Ｏモーダリティを検出する、上記（５）に記載の会話ポータル。
（７）前記会話ブラウザによってアクセス可能な、情報供給源の索引、情報供給源に関連する情報、およびそれらの組合せの１つを格納するポータル・ディレクトリ・データベースをさらに含む、上記（１）に記載の会話ポータル。
（８）前記情報供給源に関連する前記ポータル・ディレクトリ・データベースに格納された前記情報が、前記会話ポータルのサービス・プロバイダと前記情報供給源のサービス・プロバイダとの間のビジネス契約の下で前記会話ポータルの前記サービス・プロバイダによってマルチモーダル・フォーマットで維持される、上記（７）に記載の会話ポータル。
（９）前記要求元クライアントと前記会話ポータルの間の接続を捕捉し、所定の時間枠の間前記クライアントを捕捉状態に保持する捕捉モジュールをさらに含む、上記（１）に記載の会話ポータル。
（１０）前記クライアントが、前記会話ブラウザによって提供されるリンクが前記要求元クライアントによって選択された時間枠と、前記要求元クライアントへのレンダリングまたはサービスの１つの時間枠の間に捕捉状態に保持される、上記（９）に記載の会話ポータル。
（１１）前記要求元クライアントが、前記要求元クライアントによってリンクが直接に要求された時に解放される、上記（１０）に記載の会話ポータル。
（１２）前記会話ポータルのサービス・プロバイダが、前記要求元クライアントが捕捉状態に保持される少なくとも１つの所定の時間枠の間、広告、サービス、およびこれらの組合せの１つを提供する、上記（９）に記載の会話ポータル。
（１３）前記少なくとも１つの所定の時間枠が、異なる情報供給源の間のリンクの取出の間の時間枠である、上記（１２）に記載の会話ポータル。
（１４）前記広告およびサービスが、マルチモーダルである、上記（１２）に記載の会話ポータル。
（１５）前記広告およびサービスが、前記会話ポータルの前記サービス・プロバイダと第三者との間のビジネス契約の下で第三者の代わりに前記サービス・プロバイダによって提供される、上記（１２）に記載の会話ポータル。
（１６）情報供給源から得られたオーディオ・データおよびマルチメディア・データをセグメント化し、索引を付ける、オーディオ索引付けシステムと、
前記索引付けされたオーディオ・データおよびマルチメディア・データを格納するマルチメディア・データベースと
をさらに含む、上記（１）に記載の会話ポータル。
（１７）前記会話ブラウザが、クライアント要求に応答して前記マルチメディア・データベースから所望のセグメントを取得し、前記クライアントのＩ／Ｏ能力に基づいてそのようなセグメントを前記クライアントに提示する、上記（１６）に記載の会話ポータル。
（１８）前記会話ブラウザが、マルチメディア・データに索引を付け、前記マルチメディア・データベースに格納するために、少なくとも１つの情報供給源から前記マルチメディア・データを周期的にダウンロードする、上記（１６）に記載の会話ポータル。
（１９）前記少なくとも１つの情報供給源の前記マルチメディア・データの前記ダウンロードおよび索引付けが、前記会話ポータルのサービス・プロバイダと前記少なくとも１つの情報供給源のサービス・プロバイダとの間のビジネス契約の下で実行される、上記（１８）に記載の会話ポータル。
（２０）前記会話ポータルが、登録された加入者のために、前記マルチメディア・データベース内のユーザによって選択されたマルチメディア・セグメントを含むプログラムを維持する、上記（１６）に記載の会話ポータル。
（２１）前記登録された加入者が、前記プログラムを会話的にナビゲートし、前記要求元クライアントを介するブロードキャストのために所望のセグメントを選択する、上記（２０）に記載の会話ポータル。
（２２）前記プログラムが、前記登録された加入者が無線電話を介してアクセスするラジオ・オン・デマンド・サービスを含む、上記（２０）に記載の会話ポータル。
（２３）情報にアクセスするシステムであって、
少なくとも１つの入出力モーダリティを有するアクセス・デバイスと、
コンテンツ・サーバと、
前記アクセス・デバイスから通信される要求に応答して、前記コンテンツ・サーバから情報を取り出し、前記アクセス・デバイスの前記少なくとも１つの入出力モーダリティに基づく、前記アクセス・デバイスへの前記取り出された情報のサービスおよび提示の１つを行う会話ポータルと
を含むシステム。
（２４）前記コンテンツ・サーバが、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、およびその両方の１つを提供する、上記（２３）に記載のシステム。
（２５）
前記マルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションが、モーダリティ独立表現で実施される、上記（２４）に記載のシステム。
（２６）前記会話ポータルが、前記アクセス・デバイスの前記入出力機能に基づくユーザへの提示のためにマルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションの１つを取り出し、処理する会話ブラウザを含む、上記（２４）に記載のシステム。
（２７）前記会話ポータルが、マルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションの１つを、前記アクセス・デバイスの検出された入出力機能に基づいて、少なくとも１つのモーダリティ固有表現に変換するポータル・トランスコーダを含む、上記（２４）に記載のシステム。
（２８）前記会話ポータルによってアクセス可能な、コンテンツ・プロバイダのモーダリティ固有サイトをマルチモーダル表現に変換するプロキシ・トランスコーダをさらに含む、上記（２４）に記載のシステム。
（２９）前記プロキシ・トランスコーダのサービスが、前記コンテンツ・プロバイダおよび前記コンテンツ・プロバイダとのビジネス契約の下の第三者の１つによって提供される、上記（２８）に記載のシステム。
（３０）前記アクセス・デバイスが、前記会話ポータルによって受信されたマルチモーダル・コンテンツ・ページおよびマルチモーダル・アプリケーションの１つを処理し、提示するローカル会話ブラウザを含むマルチモーダル・デバイスである、上記（２４）に記載のシステム。
（３１）前記会話ポータルが、事前に指定された電話番号を呼び出すことによってアクセスされる、上記（２３）に記載のシステム。
（３２）前記会話ポータルが、コンテンツ・サーバ・アドレスのディレクトリを含むポータル・ディレクトリ・データベースを含む、上記（２３）に記載のシステム。
（３３）前記ポータル・ディレクトリ・データベースが、少なくとも１つのコンテンツ・プロバイダに関連する、前記会話ポータルによってホスティングされる、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、および両方の１つを含む、上記（３２）に記載のシステム。
（３４）通信ネットワークを介する情報へのアクセスを提供する方法であって、少なくとも１つの入出力モーダリティを関連付けられているアクセス・デバイスを使用して会話ポータルとの通信を確立するステップと、
前記会話ポータルによって、ユーザ要求に応答して情報を取り出すステップと、
前記会話ポータルによって、前記アクセス・デバイスの前記少なくとも１つの入出力モーダリティに基づいて、前記ユーザへの前記情報の提示およびサービスの１つを行うステップと
を含む方法。
（３５）前記取り出された情報が、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、およびその両方の１つを含む、上記（３４）に記載の方法。
（３６）前記アクセス・デバイスの少なくとも１つの入出力モーダリティを検出するステップと、
前記取り出されたマルチモーダル情報を、前記少なくとも１つの検出された入出力モーダリティに対応する少なくとも１つのモーダリティ固有フォーマットにトランスコーディングするステップと
をさらに含む、上記（３５）に記載の方法。
（３７）前記取り出すステップが実行される期間中に前記ユーザを捕捉状態に保持するステップと、
前記ユーザが捕捉状態に保持される所定の時間枠中に、前記ユーザに広告、サービス、およびそれらの組合せの１つを提示するステップと
をさらに含む、上記（３４）に記載の方法。
（３８）前記会話ポータルによって、ブロードキャスト・オン・デマンド・サービスを提供するために、登録加入者用のプログラムを維持するステップをさらに含む、上記（３４）に記載の方法。
【図面の簡単な説明】
【図１】本発明の一実施形態による、会話ポータルを介して情報にアクセスするシステムのブロック図である。
【図２】本発明のもう１つの実施形態による、会話ポータルを介して情報にアクセスするシステムのブロック図である。
【図３】図４と共に、本発明の１態様による情報アクセスの方法の流れ図を構成する図である。
【図４】図３と共に、本発明の１態様による情報アクセスの方法の流れ図を構成する図である。
【図５】本発明に関連して使用することができる、会話（マルチモーダル）ブラウザのアーキテクチャのブロック図である。
【図６】本発明に関連して使用することができる、もう１つの会話（マルチモーダル）ブラウザのアーキテクチャのブロック図である。
【符号の説明】
１０ システム
１１ 会話ポータル
１２ クライアント／アクセス・デバイス
１２ａ ローカル会話（マルチモーダル）ブラウザ
１３ クライアント／アクセス・デバイス
１３ａ ＨＴＭＬブラウザ
１４ クライアント／アクセス・デバイス
１４ａ ＷＭＬブラウザ
１５ クライアント／アクセス・デバイス
１５ａ ＶｏｉｃｅＸＭＬブラウザ
１６ クライアント／アクセス・デバイス
１７ ネットワーク
１８ コンテンツ・サーバ
１９ コンテンツ／ビジネス・ロジック
Claims (21)
- 複数種類のクライアント／アクセス・デバイスとの接続を、所定の時間枠の間、捕捉するマルチモーダル対応可能な捕捉モジュールと、
電話機と音声対応可能で前記捕捉モジュールと該電話機の仲介をする音声ブラウザ手段と、
前記クライアント／アクセス・デバイスのサポートされるフォーマットに出力データを変換するトランスコーダと、
前記クライアント／アクセス・デバイスからの要求に応答して情報供給源から情報を取り出し、該情報の前記トランスコーダにより変換したデータを前記クライアント／アクセス・デバイスへ提供する会話ブラウザ手段と、ここで、前記情報供給源によって供給される前記情報は、ＧＵＩ、ＨＴＭＬ、ＷＭＬ、ＣＨＴＭＬ、ＨＤＭＬ、ＶｏｉｃｅＸＭＬ又はこれらの組合せフォーマットに変換されるマルチモーダル情報であり、
前記会話ブラウザ手段によってアクセス可能な、情報供給源の索引、前記情報供給源に関連する関連情報、前記情報供給源から取り出した情報、およびそれらの組合せの１つを、マルチモーダル情報として、格納するポータル・ディレクトリ・データベースと、
を含む会話ポータル手段において、
前記マルチモーダル情報が、クライアントに関して行われるマルチモーダル・ダイアログ（マルチモーダルの情報交換および対話）を指定・作成する言語であるＣＭＬで表現されていたときに、前記トランスコーダが、前記マルチモーダル情報についてＣＭＬ解析を行って前記マルチモーダル情報を相互に同期化して変換する、
前記クライアント／アクセス・デバイスの機能を登録プロトコルに基づいて検出して、必要な場合にどのフォーマットに変換するかを判定する、
前記クライアント／アクセス・デバイスが捕捉状態に保持される少なくとも１つの所定の時間枠の間、広告、サービス、およびこれらの組合せの１つを提供する、
会話ポータル手段。 - 前記クライアント／アクセス・デバイスが、サイトからサイトへのページ取出の間の時間枠中、捕捉状態に保持される、請求項１に記載の会話ポータル手段。
- 前記クライアント／アクセス・デバイスによってリンクが直接に要求された時に解放される、請求項２に記載の会話ポータル手段。
- 前記少なくとも１つの所定の時間枠が、異なる情報供給源の間のリンクの取出の間の時間枠である、請求項１に記載の会話ポータル手段。
- 前記広告およびサービスが、マルチモーダル情報として提供される、請求項１に記載の会話ポータル手段。
- 情報供給源から得られたオーディオ・データおよびマルチメディア・データをセグメント化し、索引を付ける、オーディオ索引付けシステムと、
前記索引付けされたオーディオ・データおよびマルチメディア・データを格納するマルチメディア・データベースと
をさらに含む、請求項１に記載の会話ポータル手段。 - 前記トランスコーダが、前記クライアント／アクセス・デバイスからの要求に応答して前記マルチメディア・データベースから所望のセグメントを取得し、前記クライアント／アクセス・デバイスの機能に基づいて変換する、請求項６に記載の会話ポータル手段。
- 前記会話ブラウザ手段が、マルチメディア・データに索引を付け、前記マルチメディア・データベースに格納するために、少なくとも１つの情報供給源から前記マルチメディア・データを周期的にダウンロードする、請求項６に記載の会話ポータル手段。
- 前記会話ポータル手段が、前記マルチメディア・データベース内に、前記クライアント／アクセス・デバイスからの要求によって選択されたマルチメディア・セグメントを含むプログラムを維持する、請求項６に記載の会話ポータル手段。
- 前記クライアント／アクセス・デバイスからの要求に応じて、ブロードキャストのために前記プログラムの所望のセグメントを選択する、請求項９に記載の会話ポータル手段。
- 前記クライアント／アクセス・デバイスが無線電話であり、前記プログラムが、ラジオ・オン・デマンド・サービスを含む、請求項９に記載の会話ポータル手段。
- 情報にアクセスするシステムであって、
少なくとも１つの入出力モーダリティを有するアクセス・デバイスと、
コンテンツ・サーバと、ここで、前記コンテンツ・サーバが、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、又は、その両方をマルチモーダル情報として提供しており、
前記アクセス・デバイスから通信される要求に応答して、前記コンテンツ・サーバから情報を取り出し、前記アクセス・デバイスの入出力機能を検出して、その機能に基づいて該情報を変換し、前記アクセス・デバイスへ該情報の提供を行う会話ポータル手段と、ここで、前記会話ポータル手段が、マルチモーダル・コンテンツ・ページ又はマルチモーダル・アプリケーションを、検出した前記入出力機能に基づいて、変換するポータル・トランスコーダ、及びコンテンツ・サーバ・アドレスのディレクトリを含むポータル・ディレクトリ・データベースを含み、更に、前記ポータル・ディレクトリ・データベースが、少なくとも１つのコンテンツ・プロバイダに関連する、前記会話ポータル手段によってホスティングされる、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、又は、その両方を含み、
前記会話ポータル手段によってアクセス可能な、コンテンツ・プロバイダのサイトの情報をマルチモーダル情報に変換するプロキシ・トランスコーダと、
を含むシステム。 - 前記会話ポータル手段が、前記アクセス・デバイスの前記入出力機能に基づいて、マルチモーダル・コンテンツ・ページ又はマルチモーダル・アプリケーションを取り出し、処理する会話ブラウザ手段を含む、請求項１２に記載のシステム。
- 前記アクセス・デバイスが、前記会話ポータル手段によって受信されたマルチモーダル・コンテンツ・ページ又はマルチモーダル・アプリケーションを処理し、提示するローカル会話ブラウザ手段を含むマルチモーダル・デバイスである、請求項１２に記載のシステム。
- 前記会話ポータル手段が、事前に指定された電話番号を呼び出すことによってアクセスされる、請求項１２に記載のシステム。
- 通信ネットワークを介する情報へのアクセスを提供する方法であって、
複数種類のアクセス・デバイスとの接続を、所定の時間枠の間、捕捉するマルチモーダル対応可能な捕捉モジュールと、電話機と音声対応可能で、前記捕捉モジュールと該電話機の仲介をする音声ブラウザ手段と、前記アクセス・デバイスのサポートされるフォーマットに出力データを変換するトランスコーダと、前記アクセス・デバイスからの要求に応答して、情報供給源から供給されＧＵＩ、ＨＴＭＬ、ＷＭＬ、ＣＨＴＭＬ、ＨＤＭＬ、Ｖ ｏｉｃｅＸＭＬ又はこれらの組合せフォーマットに変換されるマルチモーダル情報を取り出し、該マルチモーダル情報の前記トランスコーダにより変換したデータを前記アクセス・デバイスへ提供する会話ブラウザ手段と、前記会話ブラウザ手段によってアクセス可能な、情報供給源の索引、前記情報供給源に関連する関連情報、前記情報供給源から取り出した情報、およびそれらの組合せの１つを、マルチモーダル情報として、格納するポータル・ディレクトリ・データベースとを有する会話ポータル手段に、前記アクセス・デバイスがアクセスするステップと、
前記会話ポータル手段が、前記アクセス・デバイスのユーザ識別／検証を行うステップと、
前記会話ポータル手段が、前記アクセス・デバイスの機能に基づき、選択可能なメニュー・オプションを提示するステップと、
前記アクセス・デバイスの検索要求を前記会話ポータル手段が受け取るステップと、
前記会話ポータル手段によって、前記検索要求に応答して前記情報を取り出すステップと、
前記情報を取り出すステップが実行される間に前記アクセス・デバイスを捕捉状態に保持するステップと、
前記アクセス・デバイスが捕捉状態に保持される所定の時間枠中に、前記アクセス・デバイスに広告、サービス、又は、それらの組合せを提示するステップと
前記会話ポータル手段によって、前記アクセス・デバイスの機能に基づいて、前記アクセス・デバイスへの前記情報の提示又はサービスを行うステップと、
前記会話ポータル手段が、前記アクセス・デバイスの機能を検出するステップと、
前記取り出された情報が、ユーザに関して行われるマルチモーダル・ダイアログ（マルチモーダルの情報交換および対話）を指定・作成する言語であるＣＭＬで表現されていたときに、前記マルチモーダル情報についてＣＭＬ解析を行って前記マルチモーダル情報を相互に同期化し、前記検出された機能に対応する少なくとも１つのフォーマットにトランスコーディングするステップと
を含む方法。 - 前記取り出された情報が、マルチモーダル・コンテンツ・ページ、マルチモーダル・アプリケーション、又は、その両方を含む、請求項１６に記載の方法。
- 前記会話ポータル手段によって、ブロードキャスト・オン・デマンド・サービスを提供するために、登録加入者用のプログラムを維持するステップ
をさらに含む、請求項１６に記載の方法。 - 前記会話ポータル手段によって、情報供給源からオーディオ・データ又はマルチメディア・データを得るステップと、
前記会話ポータル手段によって、前記オーディオ・データ又はマルチメディア・データをセグメント化するステップと、
索引付けシステムによって、セグメント化された前記オーディオ・データ又はマルチメディア・データに索引を付けるステップと、
マルチメディア・データベースによって、索引を付けられた前記オーディオ・データ又はマルチメディア・データを格納するステップと
をさらに含む、請求項１６に記載の方法。 - 前記会話ポータル手段によって、前記アクセス・デバイスからの要求に応答して前記マルチメディア・データベースから所望のセグメントを取得するステップと、
前記会話ポータル手段によって、前記アクセス・デバイスの機能に基づいて、所望のセグメントの前記オーディオ・データ又はマルチメディア・データをトランスコーディングするステップと
をさらに含む、請求項１９に記載の方法。 - 前記会話ポータル手段によって、マルチメディア・データに索引を付け、前記マルチメディア・データベースに格納するために、少なくとも１つの情報供給源から前記マルチメディア・データを周期的にダウンロードするステップとをさらに含む、請求項１９に記載の方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US09/545,078 US7415537B1 (en) | 2000-04-07 | 2000-04-07 | Conversational portal for providing conversational browsing and multimedia broadcast on demand |
| US09/545078 | 2000-04-07 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002049559A JP2002049559A (ja) | 2002-02-15 |
| JP4237951B2 true JP4237951B2 (ja) | 2009-03-11 |
Family
ID=24174812
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001104790A Expired - Fee Related JP4237951B2 (ja) | 2000-04-07 | 2001-04-03 | 会話ブラウズおよびマルチメディア・ブロードキャスト・オン・デマンドを提供する会話ポータル |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US7415537B1 (ja) |
| EP (2) | EP1143679B1 (ja) |
| JP (1) | JP4237951B2 (ja) |
Families Citing this family (118)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2345662A1 (en) * | 1998-10-02 | 2000-04-13 | International Business Machines Corporation | Structure skeletons for efficient voice navigation through generic hierarchical objects |
| US7140004B1 (en) * | 2000-06-13 | 2006-11-21 | Tellme Networks, Inc. | Method and apparatus for zero-footprint phone application development |
| USRE47053E1 (en) | 2000-06-30 | 2018-09-18 | Benhov Gmbh, Llc | Method and system for subscriber-based audio service over a communication network |
| US7574486B1 (en) * | 2000-11-06 | 2009-08-11 | Telecommunication Systems, Inc. | Web page content translator |
| US7379973B2 (en) * | 2001-01-12 | 2008-05-27 | Voicegenie Technologies, Inc. | Computer-implemented voice application indexing web site |
| NL1017388C2 (nl) * | 2001-02-16 | 2002-08-19 | Marc Van Oldenborgh | Organisch datanetwerk met een dynamische topologie. |
| US20020147818A1 (en) * | 2001-04-04 | 2002-10-10 | Michael Wengrovitz | Session initiation protocol routing using voice cookies |
| US7191233B2 (en) * | 2001-09-17 | 2007-03-13 | Telecommunication Systems, Inc. | System for automated, mid-session, user-directed, device-to-device session transfer system |
| US20030120626A1 (en) * | 2001-12-20 | 2003-06-26 | Koninklijke Philips Electronics N.V. | Voice-enabled, consumer transaction system |
| US6947772B2 (en) | 2002-01-31 | 2005-09-20 | Qualcomm Incorporated | System and method for providing messages on a wireless device connecting to an application server |
| US6704396B2 (en) | 2002-02-27 | 2004-03-09 | Sbc Technology Resources, Inc. | Multi-modal communications method |
| JP4267462B2 (ja) * | 2002-04-08 | 2009-05-27 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 分散エンタープライズ・アプリケーションにおける問題判別の方法およびシステム |
| US7305436B2 (en) | 2002-05-17 | 2007-12-04 | Sap Aktiengesellschaft | User collaboration through discussion forums |
| US7321887B2 (en) | 2002-09-30 | 2008-01-22 | Sap Aktiengesellschaft | Enriching information streams with contextual content |
| US7200801B2 (en) | 2002-05-17 | 2007-04-03 | Sap Aktiengesellschaft | Rich media information portals |
| US7127473B2 (en) | 2002-05-17 | 2006-10-24 | Sap Aktiengesellschaft | Methods and systems for providing supplemental contextual content |
| US7346668B2 (en) | 2002-05-17 | 2008-03-18 | Sap Aktiengesellschaft | Dynamic presentation of personalized content |
| US7370276B2 (en) | 2002-05-17 | 2008-05-06 | Sap Aktiengesellschaft | Interface for collecting user preferences |
| JP4528116B2 (ja) | 2002-06-25 | 2010-08-18 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 分散環境中でアプリケーションの性能を監視するための方法およびシステム |
| US7526482B2 (en) * | 2002-08-01 | 2009-04-28 | Xerox Corporation | System and method for enabling components on arbitrary networks to communicate |
| US7039398B2 (en) | 2002-08-30 | 2006-05-02 | Qualcomm Incorporated | Server processing of interactive screens for a wireless device |
| US6996394B2 (en) | 2002-08-30 | 2006-02-07 | Qualcomm Incorporated | Server processing in providing messages for a wireless device connecting to a server |
| JP2004178332A (ja) * | 2002-11-28 | 2004-06-24 | Satake Corp | コンテンツ変換制御方法及びコンテンツ利用システム |
| US8302012B2 (en) | 2002-12-02 | 2012-10-30 | Sap Aktiengesellschaft | Providing status of portal content |
| CN1720520B (zh) * | 2002-12-02 | 2010-05-05 | 索尼株式会社 | 对话控制设备和方法,以及机器人设备 |
| US8028237B2 (en) | 2002-12-02 | 2011-09-27 | Sap Aktiengesellschaft | Portal-based desktop |
| DE10257788A1 (de) * | 2002-12-11 | 2004-07-22 | Daimlerchrysler Ag | Verfahren zur informativen Unterstützung eines Fahrzeugführers mittels eines Fahrzeug-Multimediasystems |
| US20040181467A1 (en) * | 2003-03-14 | 2004-09-16 | Samir Raiyani | Multi-modal warehouse applications |
| US7613767B2 (en) * | 2003-07-11 | 2009-11-03 | Microsoft Corporation | Resolving a distributed topology to stream data |
| CN100386999C (zh) * | 2003-07-23 | 2008-05-07 | 华为技术有限公司 | 监测用户连接状态的方法 |
| US7840635B2 (en) * | 2003-08-15 | 2010-11-23 | International Business Machines Corporation | Method and system for monitoring performance of processes across multiple environments and servers |
| EP1533975B1 (en) | 2003-11-18 | 2010-12-01 | International Business Machines Corporation | Method and System for communication between a multi-modal device and a Web Application |
| US7712108B2 (en) * | 2003-12-08 | 2010-05-04 | Microsoft Corporation | Media processing methods, systems and application program interfaces |
| US7900140B2 (en) * | 2003-12-08 | 2011-03-01 | Microsoft Corporation | Media processing methods, systems and application program interfaces |
| US7733962B2 (en) * | 2003-12-08 | 2010-06-08 | Microsoft Corporation | Reconstructed frame caching |
| US7735096B2 (en) | 2003-12-11 | 2010-06-08 | Microsoft Corporation | Destination application program interfaces |
| US20050188022A1 (en) * | 2004-01-02 | 2005-08-25 | Hanson James E. | Method and apparatus to provide a human-usable interface to conversational support |
| US7257583B2 (en) * | 2004-01-09 | 2007-08-14 | Microsoft Corporation | System and method for updating an on-device application catalog in a mobile device receiving a push message from a catalog server indicating availability of an application for download |
| US20050185718A1 (en) * | 2004-02-09 | 2005-08-25 | Microsoft Corporation | Pipeline quality control |
| US7941739B1 (en) | 2004-02-19 | 2011-05-10 | Microsoft Corporation | Timeline source |
| US7934159B1 (en) | 2004-02-19 | 2011-04-26 | Microsoft Corporation | Media timeline |
| US7664882B2 (en) * | 2004-02-21 | 2010-02-16 | Microsoft Corporation | System and method for accessing multimedia content |
| US7609653B2 (en) * | 2004-03-08 | 2009-10-27 | Microsoft Corporation | Resolving partial media topologies |
| US7577940B2 (en) * | 2004-03-08 | 2009-08-18 | Microsoft Corporation | Managing topology changes in media applications |
| US7669206B2 (en) * | 2004-04-20 | 2010-02-23 | Microsoft Corporation | Dynamic redirection of streaming media between computing devices |
| KR100629434B1 (ko) | 2004-04-24 | 2006-09-27 | 한국전자통신연구원 | 음성/그래픽 입출력이 가능한 멀티모달 웹기반 데이터방송처리 장치 및 그 방법과 그를 이용한 멀티모달 웹기반데이터방송 수신 시스템 및 그 방법 |
| DE602004008887T2 (de) * | 2004-05-18 | 2008-01-17 | Alcatel Lucent | Verfahren und Server zur Bereitstellung eines multi-modalen Dialogs |
| GB2415801A (en) * | 2004-07-02 | 2006-01-04 | Hewlett Packard Development Co | Storage of data packages in association with electronic document browsing |
| EP1615124A1 (en) * | 2004-07-07 | 2006-01-11 | Alcatel Alsthom Compagnie Generale D'electricite | A method for handling a multi-modal dialog |
| US7590750B2 (en) * | 2004-09-10 | 2009-09-15 | Microsoft Corporation | Systems and methods for multimedia remoting over terminal server connections |
| US7640162B2 (en) * | 2004-12-14 | 2009-12-29 | Microsoft Corporation | Semantic canvas |
| US8499028B2 (en) * | 2005-02-23 | 2013-07-30 | International Business Machines Corporation | Dynamic extensible lightweight access to web services for pervasive devices |
| EP1696341A1 (en) * | 2005-02-28 | 2006-08-30 | BRITISH TELECOMMUNICATIONS public limited company | Splitting multimedia data |
| US7778397B2 (en) * | 2005-03-10 | 2010-08-17 | Avaya Inc. | Dynamic video generation in interactive voice response systems |
| US20060277172A1 (en) * | 2005-05-13 | 2006-12-07 | Crow Brian M | System and method for managing tasks |
| US20060288036A1 (en) * | 2005-06-17 | 2006-12-21 | Microsoft Corporation | Device specific content indexing for optimized device operation |
| CA2549223A1 (en) * | 2005-06-27 | 2006-12-27 | Renaissance Learning, Inc. | Wireless classroom response system |
| US9152982B2 (en) | 2005-08-19 | 2015-10-06 | Nuance Communications, Inc. | Method of compensating a provider for advertisements displayed on a mobile phone |
| US7937269B2 (en) * | 2005-08-22 | 2011-05-03 | International Business Machines Corporation | Systems and methods for providing real-time classification of continuous data streams |
| US8073700B2 (en) | 2005-09-12 | 2011-12-06 | Nuance Communications, Inc. | Retrieval and presentation of network service results for mobile device using a multimodal browser |
| US7477909B2 (en) | 2005-10-31 | 2009-01-13 | Nuance Communications, Inc. | System and method for conducting a search using a wireless mobile device |
| US8732186B2 (en) * | 2005-12-01 | 2014-05-20 | Peter Warren | Computer-implemented method and system for enabling communication between networked users based on common characteristics |
| US20070204216A1 (en) * | 2006-02-24 | 2007-08-30 | Morgan Brian S | System and method for creating layouts using a layout editor |
| US7613696B2 (en) * | 2006-02-24 | 2009-11-03 | International Business Machines Corporation | Configuring search results using a layout editor |
| US7496580B2 (en) * | 2006-04-11 | 2009-02-24 | Honeywell International Inc. | Apparatus and method for procedural operations development and distribution |
| TWI312945B (en) * | 2006-06-07 | 2009-08-01 | Ind Tech Res Inst | Method and apparatus for multimedia data management |
| US8185607B1 (en) * | 2006-06-14 | 2012-05-22 | Comscore, Inc. | Querying wireless network offerings |
| US20100174544A1 (en) * | 2006-08-28 | 2010-07-08 | Mark Heifets | System, method and end-user device for vocal delivery of textual data |
| US20080077524A1 (en) * | 2006-09-25 | 2008-03-27 | Greene Jeffrey Marc | Global communication and transaction system and method |
| US8843376B2 (en) | 2007-03-13 | 2014-09-23 | Nuance Communications, Inc. | Speech-enabled web content searching using a multimodal browser |
| US8296385B2 (en) * | 2007-04-23 | 2012-10-23 | Lenovo (Singapore) Pte. Ltd. | Apparatus and method for selective engagement in software distribution |
| US20080297657A1 (en) * | 2007-06-04 | 2008-12-04 | Richard Griffiths | Method and system for processing text in a video stream |
| US8949877B2 (en) * | 2007-08-31 | 2015-02-03 | At&T Intellectual Property I, L.P. | Method and system for determining subscriber demand for multimedia content |
| US8255491B1 (en) | 2008-01-28 | 2012-08-28 | Comscore, Inc. | Determining a particular type of wireless device to be emulated |
| US8997150B2 (en) | 2008-03-10 | 2015-03-31 | Hulu, LLC | Method and apparatus for permitting user interruption of an advertisement and the substitution of alternate advertisement version |
| US9286616B2 (en) * | 2008-03-10 | 2016-03-15 | Hulu, LLC | Method and apparatus for providing directed advertising based on user preferences |
| WO2009136828A1 (en) | 2008-05-07 | 2009-11-12 | Telefonaktiebolaget L M Ericsson (Publ) | System for delivery of content to be played autonomously |
| US8073112B2 (en) * | 2008-07-02 | 2011-12-06 | International Business Machines Corporation | Method and system to manage multiple IVRs |
| US20100030644A1 (en) * | 2008-08-04 | 2010-02-04 | Rajasekaran Dhamodharan | Targeted advertising by payment processor history of cashless acquired merchant transactions on issued consumer account |
| CN102257792B (zh) * | 2008-12-18 | 2014-07-02 | 爱立信电话股份有限公司 | 用于包括策略数据库的内容传递的方法 |
| US9628297B2 (en) | 2009-04-23 | 2017-04-18 | International Business Machines Corporation | Communication authentication using multiple communication media |
| US8484027B1 (en) * | 2009-06-12 | 2013-07-09 | Skyreader Media Inc. | Method for live remote narration of a digital book |
| US9841282B2 (en) | 2009-07-27 | 2017-12-12 | Visa U.S.A. Inc. | Successive offer communications with an offer recipient |
| US9031860B2 (en) | 2009-10-09 | 2015-05-12 | Visa U.S.A. Inc. | Systems and methods to aggregate demand |
| US9342835B2 (en) | 2009-10-09 | 2016-05-17 | Visa U.S.A | Systems and methods to deliver targeted advertisements to audience |
| US8595058B2 (en) | 2009-10-15 | 2013-11-26 | Visa U.S.A. | Systems and methods to match identifiers |
| US20110093324A1 (en) | 2009-10-19 | 2011-04-21 | Visa U.S.A. Inc. | Systems and Methods to Provide Intelligent Analytics to Cardholders and Merchants |
| US20110125565A1 (en) | 2009-11-24 | 2011-05-26 | Visa U.S.A. Inc. | Systems and Methods for Multi-Channel Offer Redemption |
| US8700782B2 (en) * | 2010-08-18 | 2014-04-15 | Microsoft Corporation | Directing modalities over different networks in multimodal communications |
| JP6042337B2 (ja) * | 2010-09-27 | 2016-12-14 | フル・エルエルシー | 広告体験を改善するためにユーザ情報を提供するための方法および装置 |
| KR101173946B1 (ko) * | 2010-11-04 | 2012-08-14 | 전자부품연구원 | 홈 네트워크 시스템에서 어플리케이션 서비스 방법 및 어플리케이션 공유 방법 |
| US10007915B2 (en) | 2011-01-24 | 2018-06-26 | Visa International Service Association | Systems and methods to facilitate loyalty reward transactions |
| US9264435B2 (en) * | 2011-02-15 | 2016-02-16 | Boingo Wireless, Inc. | Apparatus and methods for access solutions to wireless and wired networks |
| US20120239396A1 (en) * | 2011-03-15 | 2012-09-20 | At&T Intellectual Property I, L.P. | Multimodal remote control |
| JP6035713B2 (ja) * | 2011-08-12 | 2016-11-30 | ソニー株式会社 | 情報処理装置、通信システムおよび情報処理装置の制御方法 |
| US10223707B2 (en) | 2011-08-19 | 2019-03-05 | Visa International Service Association | Systems and methods to communicate offer options via messaging in real time with processing of payment transaction |
| US8966520B2 (en) | 2011-10-03 | 2015-02-24 | Hulu, LLC | Video ad swapping in a video streaming system |
| US10129720B1 (en) * | 2011-12-30 | 2018-11-13 | Genesys Telecommunications Laboratories, Inc. | Conversation assistant |
| US9705729B2 (en) | 2012-06-01 | 2017-07-11 | Dell Products L.P. | General client engine with load balancing for client-server communication |
| US9066159B2 (en) | 2012-10-23 | 2015-06-23 | Hulu, LLC | User control of ad selection for subsequent ad break of a video |
| US9208784B2 (en) * | 2013-01-08 | 2015-12-08 | C21 Patents, Llc | Methododolgy for live text broadcasting |
| US9215075B1 (en) | 2013-03-15 | 2015-12-15 | Poltorak Technologies Llc | System and method for secure relayed communications from an implantable medical device |
| US9407725B2 (en) | 2013-06-14 | 2016-08-02 | Dell Products L.P. | Generic transcoding service for client-server communication |
| US9716740B2 (en) * | 2013-06-14 | 2017-07-25 | Dell Products L.P. | Web-based transcoding to clients for client-server communication |
| US9300669B2 (en) | 2013-06-14 | 2016-03-29 | Dell Products L.P. | Runtime API framework for client-server communication |
| US10354268B2 (en) | 2014-05-15 | 2019-07-16 | Visa International Service Association | Systems and methods to organize and consolidate data for improved data storage and processing |
| US10650398B2 (en) | 2014-06-16 | 2020-05-12 | Visa International Service Association | Communication systems and methods to transmit data among a plurality of computing systems in processing benefit redemption |
| US10438226B2 (en) | 2014-07-23 | 2019-10-08 | Visa International Service Association | Systems and methods of using a communication network to coordinate processing among a plurality of separate computing systems |
| US11489962B2 (en) | 2015-01-06 | 2022-11-01 | Cyara Solutions Pty Ltd | System and methods for automated customer response system mapping and duplication |
| US10291776B2 (en) * | 2015-01-06 | 2019-05-14 | Cyara Solutions Pty Ltd | Interactive voice response system crawler |
| US9691085B2 (en) | 2015-04-30 | 2017-06-27 | Visa International Service Association | Systems and methods of natural language processing and statistical analysis to identify matching categories |
| CN105933900A (zh) * | 2016-04-22 | 2016-09-07 | 上海斐讯数据通信技术有限公司 | 一种基于操作系统的门户认证页面自适应系统及其方法 |
| US10592227B2 (en) * | 2016-09-16 | 2020-03-17 | Oracle International Corporation | Versioned intelligent offline execution of software configuration automation |
| US11366864B2 (en) | 2017-02-09 | 2022-06-21 | Microsoft Technology Licensing, Llc | Bot integration in a web-based search engine |
| US10565247B2 (en) * | 2017-07-28 | 2020-02-18 | Global Tel*Link Corporation | Controlled environment secure media streaming system with digital video recording |
| CN114546324B (zh) * | 2020-11-11 | 2024-09-17 | 上海哔哩哔哩科技有限公司 | 音频处理方法及装置 |
| US11341337B1 (en) * | 2021-06-11 | 2022-05-24 | Winter Chat Pty Ltd | Semantic messaging collaboration system |
| CN113722425B (zh) * | 2021-07-23 | 2024-08-27 | 阿里巴巴达摩院(杭州)科技有限公司 | 数据处理方法、计算机设备及计算机可读存储介质 |
Family Cites Families (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH03204259A (ja) * | 1990-01-04 | 1991-09-05 | Nippon Telegr & Teleph Corp <Ntt> | データベース検索通信方式 |
| US5297191A (en) * | 1990-09-28 | 1994-03-22 | At&T Bell Laboratories | Method and apparatus for remotely programming a wireless telephone set |
| US5614940A (en) * | 1994-10-21 | 1997-03-25 | Intel Corporation | Method and apparatus for providing broadcast information with indexing |
| JPH0983565A (ja) | 1995-09-13 | 1997-03-28 | Toshiba Corp | 通信システム |
| JPH09135265A (ja) * | 1995-11-09 | 1997-05-20 | Hitachi Ltd | 情報提供システム |
| JP3789535B2 (ja) | 1996-01-31 | 2006-06-28 | ソニー株式会社 | 情報処理装置および情報処理方法 |
| US5727159A (en) | 1996-04-10 | 1998-03-10 | Kikinis; Dan | System in which a Proxy-Server translates information received from the Internet into a form/format readily usable by low power portable computers |
| US6553410B2 (en) | 1996-02-27 | 2003-04-22 | Inpro Licensing Sarl | Tailoring data and transmission protocol for efficient interactive data transactions over wide-area networks |
| US5889951A (en) * | 1996-05-13 | 1999-03-30 | Viewpoint Corporation | Systems, methods, and computer program products for accessing, leasing, relocating, constructing and modifying internet sites within a multi-dimensional virtual reality environment |
| JP3471523B2 (ja) | 1996-05-21 | 2003-12-02 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 通信方法及び通信端末 |
| US5721827A (en) | 1996-10-02 | 1998-02-24 | James Logan | System for electrically distributing personalized information |
| JPH10133973A (ja) | 1996-10-31 | 1998-05-22 | Hitachi Ltd | Ｈｔｍｌ情報提供方法 |
| US5915001A (en) * | 1996-11-14 | 1999-06-22 | Vois Corporation | System and method for providing and using universally accessible voice and speech data files |
| US5897616A (en) | 1997-06-11 | 1999-04-27 | International Business Machines Corporation | Apparatus and methods for speaker verification/identification/classification employing non-acoustic and/or acoustic models and databases |
| JPH11136394A (ja) | 1997-08-26 | 1999-05-21 | Casio Comput Co Ltd | データ出力システムおよびデータ出力方法 |
| US6067570A (en) | 1997-10-20 | 2000-05-23 | The Delfin Project, Inc. | Method and system for displaying and interacting with an informational message based on an information processing system event |
| JPH11149448A (ja) | 1997-11-18 | 1999-06-02 | Sony Corp | ネットワークシステム、クライアント端末及び中継サーバ |
| JPH11250009A (ja) | 1998-03-04 | 1999-09-17 | Uniden Corp | サーバ装置及びウェブデータ変換方式 |
| JPH11288403A (ja) | 1998-04-03 | 1999-10-19 | Toshiba Corp | 分散ネットワークコンピューティングシステム、同システムに用いられる情報交換装置、情報交換方法、及び記憶媒体 |
| JPH11306067A (ja) | 1998-04-21 | 1999-11-05 | Osaka Gas Co Ltd | プロキシーシステム |
| US6859451B1 (en) | 1998-04-21 | 2005-02-22 | Nortel Networks Limited | Server for handling multimodal information |
| JPH11341051A (ja) | 1998-05-25 | 1999-12-10 | Canon Inc | 通信システム及び通信システムにおけるメディア変換方法 |
| JPH11345178A (ja) | 1998-06-02 | 1999-12-14 | Toshiba Corp | 分散ネットワークコンピューテングシステムに於けるコンテンツ変換装置、同システムに於けるコンテンツ変換方法、キーバインド方法、及びコマンドの表示方法 |
| US6269336B1 (en) | 1998-07-24 | 2001-07-31 | Motorola, Inc. | Voice browser for interactive services and methods thereof |
| US6493671B1 (en) | 1998-10-02 | 2002-12-10 | Motorola, Inc. | Markup language for interactive services to notify a user of an event and methods thereof |
| US7082397B2 (en) * | 1998-12-01 | 2006-07-25 | Nuance Communications, Inc. | System for and method of creating and browsing a voice web |
| US6438217B1 (en) * | 1999-03-11 | 2002-08-20 | Microsoft Corporation | Apparatus and method for future transmission of device-independent messages |
| JP3063263U (ja) * | 1999-04-21 | 1999-10-29 | 株式会社ガリレオゼスト | 情報提供サ―ビスシステム |
| JP3756344B2 (ja) * | 1999-05-11 | 2006-03-15 | 京セラ株式会社 | マルチモード携帯電話装置 |
| JP2001022786A (ja) * | 1999-07-13 | 2001-01-26 | Hitachi Ltd | 情報提供システム |
| US6501832B1 (en) * | 1999-08-24 | 2002-12-31 | Microstrategy, Inc. | Voice code registration system and method for registering voice codes for voice pages in a voice network access provider system |
| US6490564B1 (en) * | 1999-09-03 | 2002-12-03 | Cisco Technology, Inc. | Arrangement for defining and processing voice enabled web applications using extensible markup language documents |
| US7685252B1 (en) * | 1999-10-12 | 2010-03-23 | International Business Machines Corporation | Methods and systems for multi-modal browsing and implementation of a conversational markup language |
| US6430624B1 (en) * | 1999-10-21 | 2002-08-06 | Air2Web, Inc. | Intelligent harvesting and navigation system and method |
| US6424945B1 (en) * | 1999-12-15 | 2002-07-23 | Nokia Corporation | Voice packet data network browsing for mobile terminals system and method using a dual-mode wireless connection |
| US9923008B2 (en) | 2013-04-12 | 2018-03-20 | Omnivision Technologies, Inc. | Wafer-level array cameras and methods for fabricating the same |
| CN106463464B (zh) | 2014-07-30 | 2019-02-22 | 京瓷株式会社 | 电子部件收纳用封装件以及具备其的电子装置 |
| US9659864B2 (en) | 2015-10-20 | 2017-05-23 | Taiwan Semiconductor Manufacturing Company, Ltd. | Method and apparatus for forming self-aligned via with selectively deposited etching stop layer |
| US10295798B2 (en) | 2017-04-03 | 2019-05-21 | Denso Corporation | Camera module |
| US11759599B2 (en) | 2020-06-26 | 2023-09-19 | GE Precision Healthcare LLC | Systems and method for valve control in a fill assembly of a medical device |
-
2000
- 2000-04-07 US US09/545,078 patent/US7415537B1/en not_active Expired - Lifetime
-
2001
- 2001-03-21 EP EP01000062.8A patent/EP1143679B1/en not_active Expired - Lifetime
- 2001-03-21 EP EP10184767A patent/EP2273754A3/en not_active Withdrawn
- 2001-04-03 JP JP2001104790A patent/JP4237951B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| EP1143679A3 (en) | 2004-10-27 |
| US7415537B1 (en) | 2008-08-19 |
| EP2273754A2 (en) | 2011-01-12 |
| EP1143679A2 (en) | 2001-10-10 |
| JP2002049559A (ja) | 2002-02-15 |
| EP1143679B1 (en) | 2018-05-09 |
| EP2273754A3 (en) | 2011-04-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4237951B2 (ja) | 会話ブラウズおよびマルチメディア・ブロードキャスト・オン・デマンドを提供する会話ポータル | |
| US6912691B1 (en) | Delivering voice portal services using an XML voice-enabled web server | |
| US7337405B2 (en) | Multi-modal synchronization | |
| US9373359B2 (en) | Systems and methods for rendering text onto moving image content | |
| US8209385B2 (en) | Multimedia mood messages | |
| US20070243887A1 (en) | Platform for telephone-optimized data and voice services | |
| US20090119717A1 (en) | Method and system for utilizing video content to obtain text keywords or phrases for providing content related to links to network-based resources | |
| US20110067059A1 (en) | Media control | |
| US20020147687A1 (en) | Method and computer system for program recording service | |
| US20020054090A1 (en) | Method and apparatus for creating and providing personalized access to web content and services from terminals having diverse capabilities | |
| WO2000072168A1 (en) | Method and apparatus for access to, and delivery of, multimedia information | |
| US20110289187A1 (en) | Method for Transmitting a Media File to a Mobile Device and Entity Therefor | |
| CN1613098A (zh) | 同时控制应用设备 | |
| US20090319627A1 (en) | System and method to provide services based on network | |
| KR20010103273A (ko) | 동기 멀티미디어 통합언어 포맷을 이용한 전자 음악 배급서비스 시스템 및 그 방법 | |
| US20080275937A1 (en) | Control Device, Method and Program for Providing Information | |
| KR101173946B1 (ko) | 홈 네트워크 시스템에서 어플리케이션 서비스 방법 및 어플리케이션 공유 방법 | |
| KR101097372B1 (ko) | 홈 네트워크 시스템에서 어플리케이션 서비스 방법 및 서버 | |
| JP5624056B2 (ja) | クエリを生成する方法、装置及びコンピュータプログラム | |
| JP2002132646A (ja) | コンテンツインタポレーティングウェブプロキシサーバ | |
| KR20020021420A (ko) | 스마일 에디터를 이용한 정보 제공방법 및 시스템 | |
| KR101236481B1 (ko) | 홈 네트워크 시스템에서 컨텐츠 공유 방법 | |
| WO2000055769A2 (en) | Method and system for pre-loading internet content | |
| Di Nitto et al. | Adaptation of web contents and services to terminals capabilities: The@ Terminals approach | |
| WO2000055728A1 (en) | Method and system for communicating over the internet |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040511 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040727 |
|
| RD12 | Notification of acceptance of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7432 Effective date: 20040727 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20040727 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20041005 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041126 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20041203 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20050121 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081015 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20081217 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081219 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4237951 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111226 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111226 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111226 Year of fee payment: 3 |
|
| S202 | Request for registration of non-exclusive licence |
Free format text: JAPANESE INTERMEDIATE CODE: R315201 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111226 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121226 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121226 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131226 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |