WO2002079966A1

WO2002079966A1 - Dispositif et procédé de présentation de contenus interactifs

Info

Publication number: WO2002079966A1
Application number: PCT/JP2001/002581
Authority: WO
Inventors: Fumio Honda; Seiki Shibata; Eiji Hasegawa
Original assignee: Fujitsu Limited
Priority date: 2001-03-28
Filing date: 2001-03-28
Publication date: 2002-10-10
Also published as: US20040056892A1; EP1376321A1; JPWO2002079966A1

Description

明細書対話型コンテンッ提示装置とその方法技術分野

この発明は、画像、音声やテキストなどを含むコンテンツの提示に関し、さらに詳しくは、コンテンツへの視聴者の操作によってコンテンツの表示内容が変る対話型コンテンッを表示する対話型コンテンッ提示装置とそのコンテンツの提示方法に関する。背景技術

ディジタル · テレビジョン放送の本格的な放送が開始され、画像と音声だけでなく、データをも同時に放送する放送形態が普及しつつある。このデータ放送では、種々の形態の放送が可能になり、放送内容と視聴者との対話を重視した対話型コンテンツを放送することが可能である。この対話型コンテンツとは、テレビジョンなどの画面に表示されるコンテンッに視聴者が操作を行い、この操作に対応して、表示内容が変化する様に構成されたコンテンツを指す。具体的には、たとえば、映像にボ夕ン形状の画像を表示し、このボタンをリモコンなどの入力装置を使用して選択すると、対応した画像に切り替わる様に構成したコンテンツを指している。上記のボタンの様に視聴者が操作を行う対象である画像を対話部品（または対話部品画像）と称する。

このコンテンッを表示するテレビジョンモニタなどの表示装置と視聴者との間の距離は、表示画面サイズに応じて最適とされる明視距離によって定まる。たとえば現行のハイビジョン放送では、画面の縦方向の長さの 3倍程度の距離だけ、画面から離れて視聴するのが良いとされている。それで、テレビジョン放送を視聴する際に、視聴者は表示装置から離れた位置から画像を視聴するので、チヤンネルの選択や音量調整などをリモートコントロール装置（以下、リモコンと称する）で操作することが多い。

したがって、データ放送でも対話型のコンテンツをテレビジョンモニ夕に表示するので、画面から離れて視聴し、そして表示されたコンテンッを操作することになる。そのため、視聴者との対話を前提とする上記コンテンッは、このリモコンを使用して操作することを想定して制作されている。すなわち、コンテンツ制作者は、視聴者がリモコンに設けられた上下左右の方向を指示するカーソルキーを使用して、対話部品を指定するためにフォーカスを移動し、決定キ一で選択するようにコンテンッを記述している。ここで、 " フォーカスを移動する" とは、 " 指定されている対話部品を別の対話部品に指定変更する" こと、または" 選択されている対話部品から、別の対話部品を指定する" ことを示す。

このデータ放送は従来のテレビジョン放送に比べて、情報量や放送番組数も多く、鮮明な画像を特徴としている。そこで、急速な勢いで普及しつつあるパーソナルコンピュータ（以下、ノ、。ソコン）でも、このデ一夕放送を視聴する機会が増えることが予想される。このパソコンでは、通常、モニタ上の位置をマウスや夕ッチパネルのような表示装置の画面上の位置を指示するポィンティングデバイスで指示する。

しかしながら、上記したように、データ放送で提供される対話型コンテンッは、リモコン操作を前提として制作されおり、コンテンツをボインティングデバイスで操作することは考慮されていない。

したがって、パソコンのモニタに表示されたこの対話型コンテンッをマウスや夕ツチパネルなどのポインティングデバイスで操作すると、対話型コンテンツは制作者の意図しない動作をしたり、障害が発生する恐れがある。発明の開示

本発明の目的は、リモコンなどの様に方向を指示する機器を使用して、操作する（対話する）ことを前提としたコンテンツを座標を指定するポィンティングデバイスで操作できる様にした装置と方法である。この目的のために本発明の対話型コンテンッ提示装置では、映像を表示するためのモニタなどの表示部に、リモコンなどによって上下左右方向に指示されることを前提に作成された対話部品を表示し、表示部の画面上の座標を指示する座標入力部、たとえば夕ッチパネルやマウスなどによつて、上記対話部品を指示した場合に、この座標入力部によって指示した座標を、上記の上下左右の方向の組合せに座標変換部によって変換して、ポインティングデバイスによって目的とする対話部品を指定する。

上記した様に、コンテンッをボインティングデバイスで指示した座標を上下左右方向の組合せに変換するので、リモコンなどによって指示 · 選択することを前提に制作されたコンテンッをポインティングデバイスによっても指示 ·選択することが可能になる。

本発明は上記目的を達成するために、画像を表示する表示部と、この表示部の画面上の座標を指定する座標入力部と、この座標入力部によつて指定された座標と表示部の画面上の所定の位置との間の位置関係を 1 つまたは複数の方向の組合せに変換する座標変換部と、この組合せを所定の信号、たとえばリモコンからの信号を受信する検出器から出力される方向指示信号に相当する信号に変換する信号変換部とを有することを特徴とする対話型コンテンッ提示装置を提供することを目的とする。

また、本発明は、上記目的を達成するために、インターフヱース部に入力された信号を処理して表示部に画像として表示するためのコンテンッ処理部を設け、表示部の画面上の座標を指定する座標入力部によって指定された座標と前記表示部に表示された所定の位置との位置関係を座標変換部によって、 1つの方向または複数の方向の組合せに変換し、この変換された 1つの方向または組合せをェミュレ一タ部で所定の信号に変換し、変換されたこの所定の信号を前記コンテンツ処理部に入力する対話型コンテンツ提示装置を提供することを目的とする。

また、本発明は、インタ一フ一ス部を介して入力される信号を画像データに信号処理するコンテンッ処理部と、この画像データを表示する表示部と、表示部の画面上の座標を指定する座標入力部と、この座標入力部によって指定された座標と表示部に表示されている第 1の特定の位置からの他の特定の位置を経由して指定された座標へ到達する 1つの方向または複数の方向の組合せに変換する座標変換部と、 1つの方向またはこの組合せを所定の信号に変換するエミユレ一夕部と、このエミユレ —タ部で変換された所定.の信号をコンテンツ処理部に入力することを特徵とする対話型コンテンッ提示装置を提供することを目的とする。

ここで、特定の位置とは表示部に表示された対話用部品画像を示す。そして、 "他の特定の位置を経由して"とは、表示部に表示された対話用部品画像であって、第 1の特定の位置に表示される以外の対話用部品画像を指す。

また、本発明は、上記の対話型コンテンツ提示装置に、さらに電波または回線を介して送信されてくるコンテンッゃ記憶媒体に記録されたコンテンッを表示するために、これらのコンテンッを受信するためのイン夕一フュース部を設けた対話型コンテンツ提示装置を提供することを目的とする。

また、本発明はコンテンツの 2つの対話部品間の関係を 1つまたは複数の方向を組合せた対応関係を記憶する記憶部を備え対話型コンテンッ提示装置を提供することを目的とする。

また、本発明は、上記目的を達成するために、画面上の座標を指定する第 1のステップと、この画面上の所定の位置と第 1のステツプで指定された座標との間の位置関係を 1つまたは複数の方向の組合せに変換する第 2のステップと、変換された 1つまたは複数の方向の組合せを所定の信号に変換する第 3のステップとを有するコンテンッ提示方法を提供する。

さらに、本発明は、上記目的を達成するために、画像中の第 1の位置を指定する第 1のステップと、画像中の第 2の位置と第 1の位置との位置関係を第 2の位置から画像中特定の位置を経由して第 1の位置へ到達する 1つまたは複数の方向の組合せを生成する第 2のステップと、この組合せを所定の信号に変換する第 3のステップとを有することを特徴とする対話型コンテンツ提示方法を提供する。

さらに、上記方法を記録した記録媒体、プログラム、およびこれらを搭載した対話型コンテンッ提示装置を提供する。

さらに、本発明は、上記目的を達成するために、画面上にコンテンツとこのコンテンッに対応する対話部品画像とを表示する表示部と、対話部品画像の選択によりデータを入力するための前記表示部に対応する座標を入力する座標入力部とを有する対話型コンテンッ提示装置において、画面上に表示される複数の対話部品画像と該対話部品画像を選択するための力一ソルキーとの対応関係を受信するステップと、この複数の対話部品画像を表示した位置を座標指定可能な座標入力部から入力するステップと、この入力された座標から指定された対話部品画像へ移動するためのカーソルキーの方向の組み合せを先の対応関係から生成するステツプと、この生成されたカーソルキーの方向の組合せに基づいて対話部品画像を指定するステップとからなることを特徴とする対話型コンテンッ提示プログラムおよびこのプログラムに基づいて画面に表示した対話部口口画像を選択する対話型コンテンツ提示装置を提供する図面の簡単な説明

第 1図は、本発明の概要を示すための表示画面の 1例を示す図である ( 第 2図の（A ) は、第 1図に示した画面上の対話部品をリモコンで選択する場合を説明する図であり、（B ) は対話部品をポインティングデバイスで選択する場合を説明する図である。

第 3図は、本発明のコンテンッ提示装置の 1例を示す概略図である。第 4図は、本発明のコンテンツ提示装置を説明するために、 1例として示した対話型コンテンッの画像の概略図である。

第 5図は、第 4図に示した対話型コンテンッの動作を示す図である。第 6図は、第 4図に示した対話型コンテンッの動作であるジャンプ · バイ · ステップの動作の定義を示す図である。

第 7図は、第 4図に示した対話型コンテンツをリモコンで操作する際のリモコンの方向操作とフォ一カスの移動とフィールド値の変化の対応関係を示す図である。

第 8図は、第 1の実施形態に示すコンテンッ提示装置の概要を示すブ口ック図である。

第 9図は、第 1の実施形態で使用している経路探索の処理フローチヤ一卜の 1例を示す図である。

第 1 0図は、第 1の実施形態での経路探索例を示す図である。

第 1 1図は、第 2の実施形態に示すコンテン'ッ提示装置の概要を示すプロック図である。

第 1 2図は、 2つの対話部品の位置関係を方向の組合せで示した図である。第 1 3図は、第 3の実施形態の概要を示すブロック図である。発明を実施するための最良の形態

本発明の概要を図 1、 2を参照して説明する。図 1は、テレビジョン装置やパソコンのモニタの画面 2 0に提示された画像を模式的に示したものである。この画面 2 0中のボタン A 1 0、 B l l、 C 1 2が対話部品である。すなわち、ボタン A 1 0をホームポジションとした場合に、視聴者がリモコンの下方向キーを押下すると、ボタン Bが例えば点滅したり、形状が変化したり、表示色が変わったりして、このボタン Bが選択されたことが明示される。そして、リモコンの決定キ一を押下すると、このボタン Bが選択 ·決定されたことになり、この選択に対応した画像などが領域 2 1に表示される。このように、リモコンなどを使用して対話する（上記の例では、視聴者が画面上の対話部品を選択すること）様に、対話部品は制作されている。

つぎに、このボタン B、 Cをリ乇コンで選択する場合を図 2の（A ) に、ポインティングデバイスであるマウスで選択する場合を図 2の（B ) に示し、ポインティングデバイスによる選択方法の問題点を説明する。ここで、図 1、図 2で対話部品であるボタン A、 B、 Cの配置は任意であるが、上下方向の一列に配置した場合を 1例として示した。リモコンでこれらのボタン A、 B、 Cを選択 ·決定する場合には、上記した様に、本例の場合にはリモコンの上、下方向キ一を使用してボタンを選択する。即ち、ボタン A 1 0からボタン Cに選択を変更する場合には、リモコンの下方向キーを 2回押下する。

—方、ポインティングデバイスとしてマウスを使用する場合には、ボタン A 1 0がホームポジションであるとして、ボタン C 1 2を選択するには、図 2の（B ) に示す様に、任意の位置 aにあるカーソル 2 2をボタン C 1 2の所定領域内の位置 bまで移動する。この移動する際の経路 2 3は、毎回異なり、また、ボタン A 1 0からボタン B 1 1を経ることなく、直接選択目的のボタン C 1 2へ力一ソル 2 2を移動させる。この様なマウスによる選択によって、図 2の（A ) と同様に、ボタン Cを選択した結果を得るためには、力一ソル 2 2を位置 aから経路 2 3を経て位置 bに移動させた動作を、リモコンの下方向キ一を 2度押下したと同等の動作に変換する必要がある。

以下、コンテンツの記述内容を変更することなく、上記に説明したポィンティングデバイスによっても、正しく対話部品を選択するコンテンッ提示装置とその方法について詳述する。

[第 1の実施形態]

本発明の本第 1の実勢形態では、データ放送から対話型コンテンッを受信する場合を主に説明する。図 3は、本発明の第 1の実施形態のコンテンッ提示装置の 1例を示した図であり、パーソナルコンピュ一タ本体 3 0、モニタ 3 1、キ一ボード 3 2およびマウス 3 3を含んで構成される。このパーソナルコンピュータ本体 3 0内または、外部に設置した放送受信装置を介して通信ィンターフェース部を経由して、コンテンツを受信する。また、図示していないが、パーソナルコンピュータ本体 3 0 は、電源ケーブルを介して電源が供給されている。

この第 1の実施形態では、上記した様にボインティングデバイスとして、マウスを使用しているが、指などが接触した際の抵抗値の変化によつて接触位置を検出したり、指の位置などを光学的に検出するタツチセンサ、または、座標検出装置などの他のポインティングデバイスをモニ夕 3 1の画面上または近傍に配置して使用しても良い。

つぎに、方向キーを備えたリモコンで操作する対話型のコンテンッの 1例を図 4力、ら図 7を参照して説明する。図 4はモニタなどの画面 3 0 0に対話部品であるボタン A 3 0 1、ボタン B 3 0 2、ボタン C 3 0 3、ボタン D 3 0 4が縦一列に配置され、視聴者が選んだボタンに対応した画像が画面 3 0 0中の領域 3 0 5に表示される。フィールド 3 0 6は、ボタンを押下毎に更新される状態を表示するものであり、レジスタ内容を目視可能にしたものに相当している。本実施形態では、画面上に表示したが必ずしも表示する必要はない。

図 5は、リモコンの操作と上記したコンテンツの動作の対応を示す対応表 4 0 0である。この対応表 4 0 0のフォーカス欄には、現在選択されているボタン、つまりフォーカスされているボタンを示し、操作の欄には、リモコンの上下左右の方向キ一や、決定キー等の操作するキーを示し、これらのキ一を操作したときのフォーカスの移動先、つまり選択される対話部品をフォーカス移動先の欄に示す。そして、動作欄には、この各キ一を操作した際のフィ一ルド値の更新および画面の更新の各々の動作説明を示してある。

以下に、詳細に説明する。ボタン Aが現在選択されている場合に、リモコンの上方向キーを押下すると（操作の欄に、矢印†で示す）、図 4 に示す様にボタン A 3 0 1の上方向には、対話部品が配置されていないので、フォーカスの移動は現ボタン Aの位置のままであり (フォーカス移動先の欄に、記号 " - " で示す）、したがって、画面の更新はない（動作の欄に、記号 "一 " で示す）。

このボタン Aが現在、選択されている場合に、リモコンの下方向キーを押下すると、図 4に示す様に、ボタン A 3 0 1の下方向には、対話部品であるボタン B 3 0 2が配置されており、このボタン Bがフォーカス移動先となる（フォーカス移動先の欄に、 " B u t t o n B " と示す） < この様に、移動方向先に対話部品であるボタン A、 B、 Cまたは Dがあれば、そのボタンがフオーカス移動先になる。そして、フィ一ルドには、本実施形態では数値 " 1 " を加算する構成としている。つぎに、左方向キー（矢印 " ―" で示す）、または右方向キ一（矢印 " →" で示す）を押下した場合には、図 4に示す様に、ボタン A 3 0 1の左右の位置には対話部品は配置されていないので、いずれの場合にも、フォーカス位置は移動せず、したがってフィールド値は更新されない。また、このキ —操作例では、図 5に示した様に下方向キーを押下し、この下方向に対話部品がある場合には、フィールド値は " 1 " 加算される。そして、上方向キーを押下し、この上方向に対話部品がある場合には、フィールド値は " 1 " 減算される。

つぎに、ボタン Aがフォーカスされていて、決定キ一を押下した場合、その時のフィ一ルド値に対応したジャンプを行う（動作欄に、 "ジヤンプバイフィールドの定義に従って動作" と示す）。

このジャンプバイフィールドを図 6を参照して説明する。この定義は、図 4に示したフィ一ルド 3 0 6に記録されている値、すなわちフィ一ルド値を変数とし、決定キーを押下した際にこのフィールド値に従つて、図 4の領域 3 0 5に表示する画像を指定する。定義 5 0 0中で、 "負ならば e r r o r, b m 1 " の意味は、フィ一ルド値が負であれば、 b m 1 (^B r o a d c a s t Ma r k u p L a n g u a g e) で g己述された " e r r r o r" と言う名称のコンテンッを領域 3 0 5に表示することを定義している。同様に、フィールド値が "0 " の場合には、名称が " j u mp 0 " のコンテンツを領域 3 0 5に表示することを定義している。ここで、本第 1の実施形態では、上記した様にデータ放送からコンテンツを受信した場合を 1例として説明しており、このジャンプバイフィールドの定義に使用した記述言語は、コンテンツの内容によつて他の記述言語を使用することが可能である。

つぎに、図 7にキー操作例を示す。このキー操作例は、初期値としてボタン Aのフィールド値を " 0 " とした場合に、操作欄に示す矢印方向のキ一を順次押下した際に、選択されるボタンおよびフィールド値の変化を示したものである。

ボタン Aが初期値として選択されており、下方向キ一を押下すると、ボタン Bが選択され、フィールド値は " 0 " から " 1 " 加算され " 1 " に更新される。さらに、下方向キーを押下すると、フォーカスは、ボタン Bからボタン Cに移動するとともに、フィールド値は " 1 " から " 1 " 加算され " 2 " に更新される。さらに、下方向キ一を押下すると、フ才 —カスは、ボタン Cからボタン Dに移動し、フィールド値は "2 " から " 3 " に更新される。つぎに、上方向キ一を押下すると、フォーカスは、ボタン Dから上方に配置されているボタン Cに移動し、フィールド値は " 3 " から " 2 " に更新される。この様に図 7の最終行に示したキー操作まで行うと、ボタン Cが最終的にフォーカスされ、フィ一ルド値は" 2 " となる。ここで、決定キ一を押下すれば、図 5に示したジャンプ ·.バイ · フィ一ルドの定義に従って、名称 " j u m p 2 " のコンテンツが領域 3 0 5に表示される。

ここで、上記したリモコン操作を前提とした対話型コンテンッの対話部品を単にポインティングデバイスで選択しただけでは、正しく対話用部品に対応した画像が選択できない例を示す。

たとえば、図 4に示したコンテンツが、図 5の対応表 4 0 0に応じた動作をする場合、対話部品の初期位置ボタン Aで、フィ一ルド値は" 0 " であるとする。ボインティングデバイスで例えばボタン Cを押下した時に、単純にボタン Cの「決定」操作に定義された動作を行うと、フィールド値は初期値の" 0 " のままであり、画像の変化は無く、コンテンツは制作者の意図通りの動作は行わないことになる。

そこで、上記したコンテンッを例にして、ポインティングデバイスを使用して、リモコン操作と同様に、このコンテンツを動作させる対話型コンテンッ提示装置とその方法を図 8力、ら図 1 0を参照して説明する。図 8に本実施形態に使用する対話型コンテンツ提示装置 1 0 0の要部を示す。本実施形態では、コンテンツが放送電波、通信回線などを介して、対話型コンテンッ提示装置 1 0 0のィンタ一フヱ一ス部に入力される場合示しており、コンパクトディスクなどの記憶媒体からの対話型コンテンッを受信する場合は、図示していないディスク読取り装置または、上記のインタ一フヱ一ス部を介して、入力する様に構成しても良い。

以下では、放送電波や通信回線などを介して入力されるコンテンツの場合を説明する。このコンテンツはィンターフヱース部 1 2 0を介して、コンテンッ提示装置 1 0 0に入力される。ここで、通常のデータ放送受信装置のチューナ、符号訂正、圧縮情報の伸長などの処理は、本対話型コンテンツ提示装置 1 0 0内部または外部に備えても良く、本実施形態では、外部の放送受信部からの出力をこのィン夕一フヱ一ス部 1 2 0で受信する場合を 1例としている。

画面変更抑制部 1 2 1に入力されたコンテンツ 1 1 0は、コンテンツ受信 ·処理部 1 2 2で対応する画像データに変換され、対話型コンテンッ提示装置 1 0 0のモニタである提示装置 1 2 3に表示される。

ここで、入力されたコンテンツの一部または全体を、一旦磁気ディスクまたは半導体メモリなどで構成され記憶部に記憶する構成としてもよい。ただし、コンテンツのデータ量や構成によっては、この記憶部は使用しなくても良い。また、この記憶部を後述する各処理に必要なデータの記憶部として使用しても良い。

視聴者は、提示装置 1 2 3の画面に表示されたコンテンツ（図 4参照）を見ながら、上記したマウスや夕ツチパネルなどのボインティングデバイス 1 2 4を使用して、対話部品であるボタン A、 B、 C、 Dの中から所望のボタン位置を指示する。この位置を指示することによって指定されたポインティングデバイス 1 2 4上の座標がボイント検查部 1 2 5に出力される。このポイント検査部 1 2 5では、ポインティングデバイス 1 2 4上の座標が提示装置 1 2 3の画面上の座標に変換され、この変換された座標（または位置情報）とコンテンツ受信 ·処理部 1 2 2からの各対話部品の座標（または位置情報）との比較を行い、どのボタンが選択されたかを検出する。

ここで、このコンテンツは、ボタン Aが初期値（ホームポジション）として選択されているものとする。したがって、初期画面上でボインティングデバイス 1 2 4を使用して、新たにボタンを選択した場合、このボタン Aと新たに選択されたボタンとが既知となる。

つぎに、この 2つのボタン間をリモコンの上下左右キーで選択する場合の経路、すなわちボタン Aから新たに選択されたボタンを" 上下左右キ一のどのキーをどの順序で押下すれば到達するか" を、経路探索部 1 2 6で探索し、方向を示すキーの列（方向列）を生成する。この方向列を生成する処理フローチヤ一トを示した図 9を参照して、方向列の生成を説明する。

経路探索の処理をステップ 7 0 0で開始し、ステップ 7 0 1で各方向キーに対応した移動先ボタンを探索し、探索したボタンが目的のボタン、つまりポインティングデバイス 1 2 4で選択したボタンか否かを判定する。もし、例えばポインティングデバイス 1 2 4でボタン Bを選択していたのならば、ボタン Aからボタン Bがー致するか否かをステツプ 7 0 1で比較し、一致した場合（ステップ 7 0 1で Y E Sの場合）、処理を終了する（ステップ 7 1 0 ) o

ステップ 7 0 1でボタン Aと新たに選択されたボタンが一致しなかつた場合（ステップ 7 0 1で N Oの場合）、ボタン Aが既に検査済みであるか否かを検査する（ステップ 7 0 2 ) 。検查済みであれば（ステツプ 7 0 2で Y E Sの場合）、経路探索が失敗したとして、処理を完了する（ステップ 7 2 0および 7 1 0 ) 。未検査の場合 (ステップ 7 0 2で N Oの場合）、ボタン Aを検査済みとした上で（ステップ 7 0 3 ) 、次の処理に進む。

ステップ 7 0 4で、上下左右方向キーについて、未検索のキーがあるか否かを判定する。もし、未検索のキーがある場合（ステップ 7 0 4で Y E Sの場合）、ステップ 7 0 5でボタン Aを基点として未検索方向の移動先部品があるか否かを判定し、ない場合には（ステップ 7 0 5で N 0の場合）ステップ 7 2 0の N G処理を経てこの処理を終了する（ステップ 7 1 0 ) 。一方、有る場合には移動先部品であるボタン情報を取得し（ステップ 7 0 5で Y E Sの場合）、ステップ 7 0 6で、その移動先部品を基点として、本処理を再帰的に呼び出すことによって、その部品からポインティングデバイス' 1 2 4で指定したボタンへの経路探索を行う o

つぎに、ステップ 7 0 7で、ステップ 7 0 6の経路探索の成功の可否を判定する。ステップ 7 0 7で、この経路探索が成功となった場合（ステツプ 7 0 7で Y E Sの場合）、この検索処理を終了する（ステップ 7 1 0 ) 。もし、ステップ 7 0 7で成功でなかつた場合（ステップ 7 0 7 で N 0の場合）、ステッ ^ 7 0 4に戻り、未検索のキーの有無を確認し、有る場合にはステップ 7 0 5に進む。

一方、ステップ 7 0 4で未検索のキーが無い場合（ステップ 7 0 4で N Oの場合）、ポインティングデバイス 1 2 4で指定したボタンが検索できなかったことになり、ステップ 7 2 0でエラ一を表示や、再試行を促す表示などの N G処理（ステップ 7 2 0 ) を行い、検索処理を終了する。

この検索処理フローチヤ一卜で示した処理によって、ボタン Aからポインティングデバイス 1 2 4で選択されたボタンまでをリモコンの上下左右キー操作によつ.て移動する場合のキー列、すなわち方向列が生成ざれる。

ここで、ポイント検査部 1 2 5 と経路探索部 1 2 6 とによってマウスによる画面上の座標が方向を示す方向列（キー列）に変換されたので、ボイント検查部 1 2 5と経路探索部 1 2 6 とで座標変換部 1 3 1が構成されている。

この生成された方向列（キー列）に対応する方向列（キ—列）情報を、リモコンのキ一操作処理をェミユレ一卜するリモコンエミユレ一夕部 1 2 8 (図 8参照）に出力し、このリモコンエミュレータ部 1 2 8で、上記の方向列（キ一列）情報に対応するリモコンからの方向列（キ一列）情報に変換されたェミュレート信号 1 2 9が生成され、コンテンッ受信 ·処理部 1 2 2に出力される。

上記した経路探索処理による探索例を図 1 0を参照して説明する。この探索例は、ボタン Aが現在選択されており、ポインティングデバイス 1 2 4によってボタン Cが指定された場合で、説明を簡明にするために、左右方向については検索しないものとした。

図 1 0で四角内の矢印 "† "は上方向キ一による操作を示し、矢印" 1 " は下方向キーによる操作を示す。まず、ボタン Aが選択されており（状態 7 5 1 )、移動方向は上、下方向のみであるので、上方向の移動をすると (状態 7 5 2 ) 、ボタン Aの上方向には対話部品は無いのでエラ一状態 (状態 7 5 3 ) となる。そして、再度、状態 7 5 1から未検索の下方向の移動に移ると（状態 7 6 0 ) 、移動先部品はボタン Bであり（状態 7 6 1 ) 、この移動先部品ボタン Bと、ポインティングデバイス 1 2 4で指示した対話部品ボタン Cとを比較する。この両対話部品は異なるので、つぎに、ボタン Bを基点に各キーについて移動先部品を検索する。上方向の移動をすると（状態 7 7 0 )、移動先部品はボタン Aを検索でき（状態 7 7 1 ) 、この移動先部品であるボタン Aは検査済みなので、状態 7 6 1に戻り、未検索の下方向の移動をする（状態 7 6 2 ) 。この移動先部品はボタン Cであり（状態 7 6 3 ) 、ボインティングデバイス 1 2 4 で指定した対話部品であるボタン Cと比較する。この両対話部品は一致するので、検索が完了となる（状態 7 6 4 ) 。したがって、ボタン Aからボタン Cまでのキー操作の経路は " Γ'、 " I " であることが分かる。なお、図 1 0に示したルート 7 8 0、 7 9 0は、上記状態が遷移するルートを示したものである。

なお、上記説明では、目的の対話部品を探索する迄に、他の対話部品を経由する。ここで、好ましくは、これらの経由する対話部品に対応した画像を表示せずに、目的の対話部品を探索できるまでは、基点となる対話部品に対応した画像を保持しておくことが望ましい。この様にすることによって、視聴者が不要な画像を見る煩わしさが無くて済む。

上記した様に、第 1の実施形態によって、コンテンツに含まれる対話部品をボインティングデバイスを使用して選択できる構成としたので、方向指示機能を備えない機器においてもこのコンテンツとの対話が可能となる。

また、上記の実施形態では、データ放送からのコンテンツを 1例として説明したが、通信回線を介してコンテンツを受信して、このコンテンッとの対話を上記に説明したコンテンツ提示装置で行っても良い。

また、上記の第 1の実施形態に於けるコンテンツ提示装置 1 0 0のィンタ一フェース部 1 2 0を介して、または、本コンテンツ提示装置 1 0 0内に備えるフロッピィ、光ディスクなどの記録媒体を読み取る読取り装置を介して、対話型コンテンツを読み込み、上記に説明した様に、マウスなどのボインティングデバイスを使用して対話しても良い。

[第 2の実施形態]

第 1の実施形態では、基点となる対話部品からポインティングデバイスで選択した対話部品までを図 9に示す処理によってキー操作列を生成した。

この方向列（キー列）の生成方法に代えて、第 2の実施形態では、対話部品間を移動する場合の上下左右キーの方向列（キ一列）の対応表を経路探索部に備え、この対応表に従って、基点と移動先の対話部品に対して、方向列（キー列）を検索する様に構成した。

本第 2の実施形態においても、第 1の実施形態で説明したコンテンツを例に説明する。本実施形態のコンテンツ提示装置の 1例を図 1 1に示し、対話部品が縦 1列に配列されたボタン A、ボタン B、ボタン C、'ボタン Dである場合の対応表を図 1 2に示す。

図 1 1で、第 1の実施形態で説明したコンテンツ提示装置 1 0 0 (図 8参照）と同様に機能を持つコンテンツ提示装置 8 0 0の構成要素には、同じ符号を付した。第 1の実施形態のコンテンッ提示装置 1 0 0と異なるのは、経路探索部 8 1 0であり、本第 2の実施形態では、この経路探索部 8 1 0内に、対話部品である各ボタン間を移動する場合の経路をキ一操作列で示した対応情報 8 2 0 (図 1 2参照）が格納され記憶されている。この図 1 2に示した対応情報 8 2 0は、基点となる対話部品であるボタン A、ボタン B、ボタン C、ボタン Dを縦列に、移動先部品となるボタン A、ボタン B、ボタン（：、ボタン Dを横列に配列したものであり、例えばボタン Aを基点とし、ボタン Cを移動先とした場合の操作キ一列は " I I " つまり、下方向キ一を 2回操作することを示している。また、ボタン Dを基点とし、ボタン Aを移動先とした場合の操作キー列は "个 † †" 、つまり上方向キ一を 3回操作することを示している。このコンテンッ提示装置 8 0 0では、コンテンッ受信 ·処理部 1 2 2 から現時点で選択されているボタン、つまり基点となるボタンの情報と、ボイント検査部 1 2 5から目的とするボタン、つまり移動先ボタンの情報とが各々が経路探索部 8 1 0に入力される。したがって、この対応情報 8 2 0を使用することにより、リモコンの上下キーを使用して、基点となるボタンから移動先となるボタンまでの方向列（キ一列）が検索され、この検索された方向列（キ一列）情報をリモコンエミュレータ部 1 2 8へ出力し、リモコンエミュレー夕部 1 2 8で、この方向列（キー列）情報をリモコンからの信号と同様な信号に変換し、コンテンツ受信 ·処理部 1 2 2に出力し、コンテンツの画面情報を変更し、提示装置 1 2 3 の画面上の画像を更新する。

なお、第 2の実施形態においても、ボイント検査部 1 2 5と経路探索部 8 1 0によって座標変換が行われるので、このポイント検查部 1 2 5 と経路探索部 8 1 0によって座標変換部 1 3 1が構成されている。

また、第 1の実施形態と同様に、通信回線を経由したり、記録媒体からコンテンツを受信して、このコンテンツと上記した様に対話しても良い。

この第 2の実施形態では、第 1の実施形態と同様の効果に加え、さらに、経路探索部に各対話部品間の移動に対応する方向列（キー列）情報を記憶させる様に構成したので、高速に対話部品間の経路を探索できる。

[第 3の実施形態]

図 1 3を参照して、第 3の実施形態を説明する。図 1 3に示したコンテンッ提示装置 9 0 0中で図 8に示したコンテンッ提示装置 1 0 0の構成要素と同等または同じ様な機能を有する構成要素には、同じ符号を付した。このコンテンッ提示装置 .9 0 0に'は、リモートコント口一ル装置 2 2 2 (リモコン）とこのリモートコントロール装置 2 2 2からの信号を検出する検出部 2 2 1を画面変更抑制部 2 2 0に設けた構成とした。さらに、ディスク装置 9 1 0をコンテンッ受信 ·処理部 1 2 2に接続し、このディスク装置 9 1 0に第 1の実施形態で説明した対話型コンテンッを記録格納した記録媒体を搭載可能にした。この様に構成したので、コンテンッ提示装置 9 0 0は、ポインティングデバイス 1 2 4またはリモコンのいずれでも提示装置 1 2 3に表示されたコンテンツとの対話が可能となる。さらに、データ放送や通信回線を利用して受信した対話型コンテンッ以外にも、記録媒体に記録格納された対話型コンテンツとの対話が可能となる。産業上の利用可能性

本発明の対話型コンテンッ提示装置およびその方法によれば、コンテンッを表示するモニタなどの表示装置上の座標を指定または指示するポィンティングデバイスを使用して、この指定または指示された座標と表示装置上の所定の位置との間を一つまたは複数の方向の組合せに変換する様に構成したので、リモコンなどの方向指示機能を使用して対話することを前提にして制作されたコンテンッをボインティングデバイスを利用して対話することができる。

Claims

請求の範囲

1 . 画像を表示する表示部と、

前記表示部の画面上の座標を指定する座標入力部と、

前記座標入力部によつて指定された座標と前記表示部の画面上の所定の位置との間の位置関係を 1つまたは複数の方向の組合せに変換する座標変換部と、

前記座標変換部で変換された前記組合せを所定の信号に変換する信号変換部とを有することを特徴とする対話型コンテンッ提示装置。

2 . インタ一フェース部と、

画像を表示する表示部と、

前記ィンターフュース部に入力された信号を前記表示部に表示する画像データに信号処理するコンテンツ ^理部と、

前記表示部の画面上の座標を指定する座標入力部と、

前記座標入力部によって指定された座標と前記表示部に表示された所定の位置との位置関係を 1つの方向または複数の方向の組合せに変換する座標変換部と、

前記座標変換部で変換された前記 1 つの方向または前記組合せを所定の信号に変換するエミユレ一夕部と、

前記ェミュレータ部で変換された所定の信号を前記コンテンッ処理部に入力することを特徴とする対話型コンテンッ提示装置。

3 . イン夕一フェース部と、

画像を表示する表示部と、

前記表示部の画面上の座標を指定する座標入力部と、

前記ィンタ一フェース部に入力された信号を前記表示部で表示する画像データに信号処理するコンテンッ処理部と、

前記座標入力部によって指定された座標と前記表示部に表示されている第 1の特定の位置から他の特定の位置を経由して前記指定された座標へ到達する 1つの方向または複数の方向の組合せに変換する座標変換部と、

前記座標変換部で変換された前記 1 つの方向または前記組合せを所定の信号に変換するエミュレー夕部と、

前記エミュレータ部で変換された所定の信号を前記コンテンッ処理部に入力することを特徴とする対話型コンテンッ提示装置。

4 . 前記インターフユ一ス部は、電波または回線を介して送信されてくる信号を受信し、所定の信号に変換することを特徴とする請求項 3に記載の対話型コンテンッ提示装置。

5 . 前記ィンタ一フ一ス部は、記録媒体を有したディスク装置からの信号を所定の信号に変換することを特徴とする請求項 3に記載の対話型コンテンッ提示装置。

6 . 前記画面上の特定の位置は、前記コンテンツ処理部によって定められることを特徴とする請求項 3に記載のコンテンッ提示装置。

7 . インタ一フヱ一ス部と、

画像を表示する表示部と、

前記表示部の画面上の座標を指定する座標入力部と、

前記インターフユース部に入力された信号を前記表示部で表示する画像データに信号処理するコンテンッ処理部と、

前記表示部に表示されている第 1の対話部品画像と前記座標入力部によって指定された第 2の対話部品画像との位置関係を前記第 1の対話部品画像から他の対話部品画像を経由して、前記第 2の対話部品画像に到達する複数の方向の組合せ、または前記第 1の対話部品画像から前記第 2の対話部品画像に到達する方向を探索する経路探索部と、

前記経路探索部で探索された前記組合せを所定の信号に変換するエミュレータ部と、

前記エミュレ一タ部で変換された所定の信号を前記コンテンッ処理部に入力することを特徴とする対話型コンテンッ提示装置。

8 . 前記第 1と第 2の対話部品画像と前記経路探索部によつて生成された前記組合せとの対応関係を記憶する記憶部を備えたことを特徴する請求項 7に記載の対話型コンテンッ提示装置。

9 . 前記第 2の対話部品画像を指定し、前記表示部に表示された画像が前記第 2の対話部品画像の指定に対応した画像に変更されるまで、前記第 1の対話部品画像に対応する画像が前記表示部に表示されていることを特徴とする請求項 7または 8に記載の対話型コンテンツ表示装置。

1 0 . 画面上の座標を指定する第 1のステップと、

前記画面上の所定の位置と前記第 1のステツプで指定された座標との間の位置関係を 1つまたは複数の方向の組合せに変換する第 2のステツプと、

前記変換された 1つまたは複数の方向の組合せを所定の信号に変換する第 3のステツプと、

を有するコンテンツ提示方法。

1 1 . 画像中の第 1の位置を指定する第 1のステップと、

前記画像中の第 2の位置と前記第 1の位置との位置関係を前記第 2の位置から前記画像中特定の位置を経由して前記第 1の位置へ到達する 1つまたは複数の方向の組合せを生成する第 2のステップと、

前記組合せを所定の信号に変換する第 3のステップとを有することを特徴とする対話型コンテンツ提示方法。

1 2 . 前記第 2のステップで、

前記第 2の位置から前記複数の方向に前記特定の位置が有るか否かを判定し、前記特定の位置が有る場合に前記特定の位置が前記第 1の位置か否かを判定するステツプを有することを特徴とする請求項 1 0に記載の対話型コンテンツ提示方法。

1 3 . 請求項 1 0乃至請求項 1 2に記載の対話型コンテンツ提示方法のいずれかを記録した記録媒体。

1 4 . 請求項 1 0乃至請求項 1 2に記載の対話型コンテンツ提示方法のいずれかを記載したプログラム。

1 5 . 画面上にコンテンツと該コンテンツに対応する対話部品画像とを表示する表示部と、該対話部品画像の選択によりデータを入力するための前記表示部に対応する座標を人力する座標入力部とを有する対話型コンテンッ提示装置において、

前記画面上に表示される複数の対話部品画像と該対話部品画像を選択するための力一ソルキーとの対応関係を受信するステップと、前記複数の対話部品画像を表示した位置を座標指定可能な座標入力部から入力するステップと、

前記入力された座標から指定された対話部品画像へ移動するためのカーソルキーの方向の組み合せを前記受信した対応関係から生成すステップと、

前記生成されたカーソルキーの方向の組合せに基づいて対話部品画像を指定するステツプとからなることを特徴とする対話型コンテンッ提示プログラム。

1 6 . 請求項 1 4または請求項 1 5に記載したプログラムに基づいて、画面に表示した対話部品画像を選択する対話型コンテンツ提示装置。