JPH1139120A - コンテンツ表示・選択装置及びコンテンツ表示・選択方法、並びにコンテンツ表示・選択方法のプログラムが記録された記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 マウスに代表されるポインティングデバイス
を使用しなくても所望のコンテンツを選択可能とする。 【解決手段】 画像表示装置に表示された複数のコンテ
ンツからユーザが所望のコンテンツを選択するために、
複数のコンテンツ中の一つを仮に選択する形でユーザが
注目可能な表示態様とし、仮に選択されたコンテンツか
らキーボードあるいは音声又は画像認識手段により２次
元的に移動の指示を受け入れることにより所望のコンテ
ンツを選択可能とする。したがって、インターネット上
のＷＷＷ(World Wide Web)のコンテンツを表示、選択す
るブラウザソフトにおいて、読み込んだコンテンツの座
標を２次元マトリックスで管理し、文字列、図形などを
含む全てのコンテンツを上下左右、斜めに相対的に選択
を可能としている。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ＨＴＭＬで記述さ
れたコンテンツを表示し、かつ表示されたコンテンツを
ユーザが選択することができるコンテンツ表示・選択装
置、コンテンツ表示・選択方法並びにコンテンツ表示・
選択方法のプログラムが記録された記録媒体に関し、イ
ンターネットやイントラネットのコンテンツ、さらには
蓄積コンテンツの閲覧用ブラウザに関する。

【０００２】

【従来の技術】インターネットやイントラネットのコン
テンツ、さらには蓄積コンテンツではコンテンツのデー
タは一般的にＨＴＭＬ（Hyper Text Markup Language）
で記述されている。なお、本明細書でいう「コンテン
ツ」とはコンピュータの中で扱われ、あるいはネットワ
ークの中を流れるマルチメディア情報をいい、具体的に
は娯楽、教育、ビジネス、ショッピング、情報提供など
の分野における様々な映像、音声、文字などの情報をい
う。

【０００３】図１２は従来のコンテンツ表示・選択装置
としてのコンピュータシステムを模式的に示す図であ
る。この従来の装置の動作について図１３〜図１７によ
り説明する。現在のブラウザでは、ＨＴＭＬで記述され
たコンテンツを表示する際に、まずコンテンツ読み込み
手段１６によりＨＴＭＬで記述されたＨＴＭＬファイル
を取得する。このＨＴＭＬファイルの入手先はネットワ
ーク１２、パソコン通信、またはＣＤ−ＲＯＭやその他
の記憶媒体（ディスク）１４などがある。読み込まれた
ＨＴＭＬファイルをファイルの先頭から順番にコンテン
ツ解析手段１８Ａにより解析し、表示すべきデータであ
るかどうかを判定する。表示すべきデータが画像データ
であった場合はＨＴＭＬで記述された場所から画像デー
タを読み込み、画像の縦、横の大きさ（表示範囲）を計
測し、コンテンツ表示手段２４Ａで画像表示装置２８を
制御して表示指定位置に表示を行う。また表示したデー
タに他のコンテンツを示すリンク情報（A HREF..で記述
されたもの）を含むものは、そのコンテンツの表示位置
と表示範囲、リンク情報はコンテンツの順番で確保した
コンテンツ表示位置記憶装置２０Ａに記憶する。

【０００４】表示するデータが文字であった場合はＨＴ
ＭＬで指定された文字の大きさ（相対的な大きさ）と、
ブラウザによって指定された（任意に選択可能）実際の
文字種類を基に各文字の大きさに関する情報を取得し、
データの示す文字列を解析し、各文字の横、縦の大きさ
からその文字列を表示するのに必要な縦、横の大きさ
（表示範囲）を算出し、現在の表示指定位置に文字列を
表示する。画像と同じく、表示したデータに他のコンテ
ンツを示すリンク情報（A HREF..で記述されたもの）を
含むものは、そのコンテンツの表示位置と表示範囲、リ
ンク情報はコンテンツの順番で確保したコンテンツ表示
位置記憶装置２０Ａに記憶する。またそのコンテンツが
リンク情報を持つことを示すために表示される文字を特
定の色で表示する。

【０００５】図１３は画像表示装置２８に表示されたコ
ンテンツの例を示す図であり、図１４は図１３に示した
表示を行うためのＨＴＭＬによる記述例である。また、
図１５はコンテンツ表示位置記憶装置２０Ａの記憶内容
を示す図である。次に、表示されたコンテンツを選択す
る動作について説明する。従来のＷＷＷブラウザでは、
必ずマウスなどのポインティングデバイスを必要とし、
表示された複数のコンテンツの中で、選択したいコンテ
ンツのある場所にポインティングデバイスにより画面上
で動くポインタを重ね合せてから、クリックすることに
より選択している。例えば図１３中の左下の図形「Butt
on1」のように表示されたコンテンツの場合、このコン
テンツをポインティングデバイスで選択した場合は、ま
ず選択された座標を読み取り、その指定位置を基に、コ
ンテンツ表示位置記憶回路に記憶された各コンテンツの
表示位置、表示範囲から指定位置がそのコンテンツ上に
あるかを判定していく。通常、表示装置のBIOS（基本イ
ンターフェース）、ライブラリでポインティングデバイ
スの情報の取得は容易である。複数のコンテンツが重な
って表示されることはないので、最初に指定位置を含む
と判定されたコンテンツが選択されたものと判定され
る。ポインティングデバイスとしは、マウスの他に、パ
ッド式のもの、ジョイスティック式のものなどが用いら
れているが、いずれもユーザが手先で操作して目標とす
るコンテンツにポインタを合せる方式である。

【０００６】選択されたコンテンツが確定すれば、その
コンテンツに対応したリンク情報を、コンテンツ表示位
置記憶回路から読み出し、そのリンク情報で示されたＨ
ＴＭＬ情報を読みに行く。また、ＨＴＭＬでは、画像の
任意の位置をポインティングデバイスで選択したとき
に、特定のリンク情報を返すというイメージマップとい
うものも定義されているが、その対応の方法について説
明する。図１６にイメージマップを用いたコンテンツの
例示し、図１７にその表示のためのＨＴＭＬデータの例
を示す。図１７の下線部のIMG SRC=で示された画像デー
タが下地となり、AREA SHAPEで示された図形、座標がそ
の領域を表す。ここで画像データ上の（180,60）という
座標を選択すると、ブラウザは、その後のAREA SHAPEで
示された情報を基にこの座標を含む領域を判定してい
く。

【０００７】判定の方法は、以下の方法を用いる。図１
６に示されたイメージマップ上のコンテンツの表示領域
は、”COORDS”の後に続く表示位置左上のｘ座標、ｙ座
標、表示位置右下のｘ座標、ｙ座標が示されているの
で、選択位置のｘ座標が表示位置左上のｘ座標から表示
位置右下のｘ座標の範囲にあり、なおかつ選択位置のｙ
座標が表示位置左上のｙ座標から表示位置右下のｙ座標
の範囲に入っていれば、この領域にあると判定される。
またコンテンツが円形（SHAPEが"CIRCLE"）の場合
は、”COORDS”の後に続くデータは表示位置中心のｘ座
標、ｙ座標、半径であるので、（選択位置のｘ座標 -
表示位置中心のｘ座標）の２乗と（選択位置のｙ座標
- 表示位置中心のｙ座標）の２乗の和の平方根が半
径の値よりも小さい（又は等しい）場合に、この領域に
あると判定される。

【０００８】またコンテンツが複数の座標で囲まれたポ
リゴン図形の場合（SHAPEが"POLYGON"）は、表示領域の
判定がやや複雑になるが、図１６の右端に示されたよう
な図形の場合は、領域を分割し、上部の矩形と下部の矩
形で領域を判定すればよい。さらに複雑な波形の場合
は、x, yどちらかの座標で領域を分け、それぞれの領域
においてそれぞれの直線を示す方程式のどちら側の領域
に含まれるかという判定を行えば最終的にポリゴン図形
の場合も領域の判定が可能である。ポリゴン図形の領域
判定については他にも考えられるが、ここでは省略す
る。

【０００９】ここではAREA SHAPEの2番目の<AREA SHAPE
="RECT" COORDS="120,0,240,120" HREF="index2.ＨＴＭ
Ｌ">に（180,60）が含まれるので、リンク情報としては
その後に続くHREFで示された"index2.html"という情報
が取得される。このように、従来のコンテンツ表示選択
装置では、表示されたコンテンツの選択にはポインティ
ングデバイスが中心で、コンテンツを表示した画面上で
マウスなどでクリックした座標を基に、表示しているコ
ンテンツの座標（範囲）を検索してそのコンテンツの選
択を判定していた。

【００１０】

【発明が解決しようとする課題】以上のように、従来の
選択方法では、ポインティングデバイスなどでユーザが
座標を指定しなければコンテンツの選択ができず、また
カーソルやポインタなど、現在どこの座標を選択してい
るかを示すための画面上の表示がなければユーザはコン
テンツを選択することができない。ポインティングデバ
イスの操作は初心者には慣れるまで困難であり、またハ
ンディキャップユーザにとっては微妙な動きの制御が困
難なこともあり、カーソルキーや音声認識、画像認識な
ど非接触制御によるアシストが望まれていた。したがっ
て、本発明はマウスに代表されるポインティングデバイ
スを使用しなくても所望のコンテンツを選択することが
可能なコンテンツ表示・選択装置及びコンテンツ表示・
選択方法、並びにコンテンツ表示・選択方法のプログラ
ムが記録された記録媒体を提供することを目的とする。

【００１１】

【課題を解決するための手段】上記目的を達成するた
め、本発明では表示するコンテンツのうち、リンク情報
を持ったコンテンツの表示位置（表示範囲）を２次元の
コンテンツ選択インデックスマップによって管理し、デ
フォルトの表示位置のコンテンツをブリンキングや枠な
どの表示によって強調し、以後、そのコンテンツからの
相対移動をユーザからの指示や別プログラム（音声認識
プログラムなど）によって移動できるようにしている。
またイメージマップなども、同様に管理することによっ
て従来、ポインティングデバイスでなければ指定できな
かった領域も相対移動で選択ができるようにした。

【００１２】本発明の「コンテンツ表示選択装置」によ
り、例えば、ポインティングデバイスのない端末でも、
キーボードやパッド（ゲーム機のコントローラ）などで
もすべてのコンテンツの選択ができるようになり、また
音声認識や画像認識と組み合わせ、「上」「下」「斜め
上」「2つ下」などの相対移動も可能となる。これによ
り非接触の操作が可能となり、ハンディキャップユーザ
や、街頭端末などでもボタンなど、簡単な入力装置での
操作が可能となる。

【００１３】すなわち本発明によれば、ＨＴＭＬで記述
されたコンテンツを表示し、かつ表示された前記コンテ
ンツをユーザが選択することができるコンテンツ表示・
選択装置であって、前記コンテンツの情報を読み込むコ
ンテンツ情報読み込み手段と、読み込まれた前記コンテ
ンツ情報を解析し、画面に表示する必要のあるコンテン
ツを抽出し、その表示位置情報を用いてコンテンツ表示
位置関係を２次元の配列にマッピングしたコンテンツ選
択インデックスマップを作成するコンテンツ解析手段
と、解析された前記コンテンツの表示位置と当該コンテ
ンツのリンク情報を記憶するコンテンツ表示位置記憶装
置と、前記コンテンツ表示位置記憶装置の出力信号によ
りコンテンツを画像表示装置に表示するコンテンツ表示
手段と、前記画像表示装置に表示された複数のコンテン
ツからユーザが所望のコンテンツを選択するために、前
記複数のコンテンツ中の一つを仮に選択する形で前記ユ
ーザが注目可能な表示態様とし、仮に選択されたコンテ
ンツからキーボードあるいは音声又は画像認識手段によ
り２次元的に移動の指示を受け入れることにより所望の
コンテンツを選択可能なコンテンツ選択手段とを、有す
るコンテンツ表示・選択装置が提供される。

【００１４】また本発明によれば、ＨＴＭＬで記述され
たコンテンツを表示し、かつ表示された前記コンテンツ
をユーザが選択することができるコンテンツ表示・選択
装置であって、前記コンテンツの情報を読み込み、読み
込まれた前記コンテンツ情報を解析し、解析された前記
コンテンツの表示位置と当該コンテンツのリンク情報を
記憶するコンテンツ表示位置記憶装置と、前記コンテン
ツ表示位置記憶装置の出力信号によりコンテンツを画像
表示装置に表示するコンテンツ表示手段と、ユーザの指
示を受け入れるキーボード及び／又は音声又は画像認識
手段を有するものにより、コンテンツを表示・選択する
ためのコンテンツ表示・選択方法であって、読み込まれ
た前記コンテンツ情報を解析し、画面に表示する必要の
あるコンテンツを抽出するステップと、抽出されたコン
テンツの表示位置情報を用いてコンテンツ表示位置関係
を２次元の配列にマッピングしたコンテンツ選択インデ
ックスマップを作成するステップと、解析された前記コ
ンテンツの表示位置と当該コンテンツのリンク情報を記
憶するステップと、前記コンテンツ表示位置記憶装置の
出力信号によりコンテンツを画像表示装置に表示するス
テップと、前記画像表示装置に表示された複数のコンテ
ンツからユーザが所望のコンテンツを選択可能とするた
めに、前記複数のコンテンツ中の一つを仮に選択する形
で前記ユーザが注目可能な表示態様とするステップと、
前記仮に選択されたコンテンツから他のコンテンツに注
目可能な表示態様を移動させるべくユーザからの２次元
的移動の指示を前記キーボード及び／又は前記音声又は
画像認識手段により受け入れるステップと、受け入れら
れた前記指示により注目可能な表示態様を２次元的に移
動させて他のコンテンツを注目可能な表示態様とするス
テップとを、有するコンテンツ表示・選択方法が提供さ
れる。

【００１５】また本発明によれば、コンテンツを表示、
選択するコンテンツ表示・選択方法において、読み込ん
だコンテンツの座標をＸＹの２次元マトリックスで管理
するステップと、画面に表示される複数のコンテンツ中
の１つの表示態様を他のコンテンツの表示態様と異なる
ものとして注目可能な表示態様とするステップと、注目
可能な表示態様のコンテンツからキーボードあるいは音
声又は画像認識手段により２次元的に移動の指示を受け
入れることにより所望のコンテンツを選択するステップ
とを、有することを特徴とするコンテンツ表示・選択方
法が提供される。

【００１６】また本発明によれば、ＨＴＭＬで記述され
たコンテンツを表示し、かつ表示された前記コンテンツ
をユーザが選択することができるコンテンツ表示・選択
装置であって、前記コンテンツの情報を読み込み、読み
込まれた前記コンテンツ情報を解析し、解析された前記
コンテンツの表示位置と当該コンテンツのリンク情報を
記憶するコンテンツ表示位置記憶装置と、前記コンテン
ツ表示位置記憶装置の出力信号によりコンテンツを画像
表示装置に表示するコンテンツ表示手段と、ユーザの指
示を受け入れるキーボード及び／又は音声又は画像認識
手段を有するものにより、コンテンツを表示・選択する
ためのコンテンツ表示・選択方法のプログラムが記録さ
れた記録媒体であって、読み込まれた前記コンテンツ情
報を解析し、画面に表示する必要のあるコンテンツを抽
出するステップと、抽出されたコンテンツの表示位置情
報を用いてコンテンツ表示位置関係を２次元の配列にマ
ッピングしたコンテンツ選択インデックスマップを作成
するステップと、解析された前記コンテンツの表示位置
と当該コンテンツのリンク情報を記憶するステップと、
前記コンテンツ表示位置記憶装置の出力信号によりコン
テンツを画像表示装置に表示するステップと、前記画像
表示装置に表示された複数のコンテンツからユーザが所
望のコンテンツを選択可能とするために、前記複数のコ
ンテンツ中の一つを仮に選択する形で前記ユーザが注目
可能な表示態様とするステップと、前記仮に選択された
コンテンツから他のコンテンツに注目可能な表示態様を
移動させるべくユーザからの２次元的移動の指示を前記
キーボード及び／又は前記音声又は画像認識手段により
受け入れるステップと、受け入れられた前記指示により
注目可能な表示態様を２次元的に移動させて他のコンテ
ンツを注目可能な表示態様とするステップとを、有する
コンテンツ表示・選択方法のプログラムが記録された記
録媒体が提供される。

【００１７】また本発明によれば、ＨＴＭＬで記述され
たコンテンツを表示し、かつ表示された前記コンテンツ
をユーザが選択するためのコンピュータで用いられるコ
ンテンツ表示・選択方法のプログラムが記録された記録
媒体であって、読み込んだコンテンツの座標をＸＹの２
次元マトリックスで管理するステップと、画面に表示さ
れる複数のコンテンツ中の１つの表示態様を他のコンテ
ンツの表示態様と異なるものとして注目可能な表示態様
とするステップと、注目可能な表示態様のコンテンツか
らキーボードあるいは音声又は画像認識手段により２次
元的に移動の指示を受け入れることにより所望のコンテ
ンツを選択するステップとを、有するプログラムの記録
された記録媒体が提供される。

【００１８】

【発明の実施の形態】以下、図面を参照して本発明のコ
ンテンツ表示・選択装置の好ましい実施の形態について
説明する。図１は本発明に係るコンテンツ表示・選択装
置の好ましい実施の形態の構成の例を示す図であり、図
２〜図１１はこの実施の形態の動作を説明するための図
である。このコンテンツ表示・選択装置１０は図示省略
のＣＰＵ（中央演算処理装置）を有するコンピュータに
より実現されるものであり、インタフェースやメモリな
どを有している。図１はこのコンテンツ表示・選択装置
の機能をブロックで示したものであり、図示の例ではコ
ンテンツ読み込み手段１６、コンテンツ解析手段１８、
コンテンツ表示位置記憶装置２０、コンテンツ選択イン
デックスマップ２２、コンテンツ表示手段２４、コンテ
ンツ選択手段２６、画像表示装置２８を有している。な
お、このコンテンツ表示・選択装置はネットワーク１２
に接続可能であり、またＣＤ−ＲＯＭなどのディスク１
４からデータ読み出すディスクドライブに接続可能（あ
るいは内蔵している）である。

【００１９】コンテンツ選択手段２６には図示省略のマ
ウスやキーボードなどが接続されるが、本発明における
コンテンツの選択にはマウスは不要である。なお、コン
テンツ選択手段２６は後述する音声認識などのための外
部プログラムにより制御することもできる。画像表示装
置２８としてはＣＲＴやＴＦＴ液晶ディスプレイなどを
用いることができる。コンテンツ表示手段２４は画像を
記憶するＶＲＡＭなどを有し、コンテンツ選択インデッ
クスマップ２２及びコンテンツ表示位置記憶装置２０の
出力信号と、コンテンツ選択手段２６を介して入力され
たユーザからの指示に基づいて画像表示装置２８におけ
る表示態様を制御する。

【００２０】まずコンテンツ読み込み手段１６によりＨ
ＴＭＬで記述されたＨＴＭＬファイルを取得する。この
ＨＴＭＬファイルの入手先はネットワーク１２、パソコ
ン通信、又はＣＤ−ＲＯＭやその他の記憶媒体１４など
がある。次に図１の実施の形態の動作について図２に示
すコンテンツを例に説明する。「コンテンツ」には、あ
らゆるマルチメディア情報が含まれ、具体的には文字
列、図形、クリッカブルマップなど含まれる。図３は図
２の画像を画像表示装置２８に表示するためのＨＴＭＬ
の記述データの例である。図４の（ａ）、（ｂ）は後述
するグループ分けの２つの例を示す図、図５はコンテン
ツ選択インデックスマップの例を示す図、図６はコンテ
ンツ表示位置記憶装置２０の記憶内容の例を示す図であ
る。読み込まれたＨＴＭＬファイルをファイルの先頭か
ら順番にコンテンツ解析手段１８により解析し、表示す
べきデータであるかを判定する。表示すべきデータが画
像データであった場合は、ＨＴＭＬで記述された場所か
ら画像データを読み込み、画像の縦、横の大きさ（表示
範囲）を計測し、コンテンツ表示手段２４により画像表
示装置２８を制御して表示指定位置に表示を行う。また
表示したデータに他のコンテンツを示すリンク情報（A
HREF..で記述されたもの）を含むものは、そのコンテン
ツの表示位置と表示範囲、リンク情報はコンテンツの順
番で確保したコンテンツ表示位置記憶装置に記憶する。
表示指定位置は表示されたコンテンツによって移動さ
れ、次のコンテンツ表示位置を示すようになる。

【００２１】表示するデータが文字であった場合はＨＴ
ＭＬで指定された文字の大きさ（相対的な大きさ）と、
ブラウザによって指定された（任意に選択可能）実際の
文字種類を基に各文字の大きさに関する情報を取得し、
データの示す文字列を解析し、各文字の横、縦の大きさ
からその文字列を表示するのに必要な縦、横の大きさ
（表示範囲）を算出し、現在の表示指定位置に文字列を
表示する。画像と同じく、表示したデータに他のコンテ
ンツを示すリンク情報（A HREF..で記述されたもの）を
含むものは、そのコンテンツの表示位置と表示範囲、リ
ンク情報はコンテンツの順番で確保したコンテンツ表示
位置記憶装置２０に記憶する。

【００２２】またそのコンテンツがリンク情報を持つこ
とを示すために表示される文字を特定の色で表示する。
ここまでは図１２〜図１７に沿って説明した従来の方法
と同様であるが、本発明による方式では、コンテンツ表
示位置記憶装置２０の内容の表示開始位置、表示範囲に
注目し、表示開始位置を抽出する。各コンテンツの表示
位置のｙ座標が等しいものを集め、グループ化する（図
４の（ａ））。またコンテンツが多い場合はｙ座標の範
囲をある程度大まかに分け、適度にグループ分けを行う
（図４の（ｂ））。

【００２３】さらにグループ化された中でｘ座標を基
に、各グループ内で順番を付ける。基本的にｘ座標の小
さい順に番号を付ける。同じ座標が存在する場合はｙ座
標の小さいものを若い番号とする。グループ化と順番付
けが終わったら、それぞれの最大値を基に、２次元の配
列で管理されたコンテンツ選択インデックスマップを作
成する。例えばｙ座標が５グループ、ｘ座標による順番
付けで最大が３とすると、3×5の２次元テーブルを確保
し、該当するコンテンツの情報を記憶する。さらにこの
コンテンツ選択インデックスマップに、それぞれのコン
テンツを示す情報を埋め込んで行くが、基本的にグルー
プ内の順番に配置すればよいが、そのグループのコンテ
ンツの数がグループ毎の最大コンテンツ数より少ない場
合、コンテンツの表示位置のｘ座標から、上下のコンテ
ンツとの位置関係を調べ、より自然な位置関係に配置す
ることも可能である（図５参照）。

【００２４】図５においてコンテンツ１１は、グループ
５の２番目のコンテンツであるが、表示位置が、グルー
プ4のコンテンツ９に近いことから、自然な上下関係と
してグループ５の３番目に配置を行っている。この配置
の判定方法は、ｘ方向についても大まかなグループ分け
を行い、各グループ毎のコンテンツの数によって配置を
調節すればよい。この場合、コンテンツの存在しない場
所が存在するが、その位置にはコンテンツがない、とい
う情報を記憶しておく（図５参照）。

【００２５】図６は、コンテンツ表示記憶装置２０の記
憶内容の例を示している。ここではコンテンツ番号を基
に、コンテンツ種類、表示位置、表示幅、高さ、リンク
先を記憶している。次に、表示されたコンテンツを選択
する動作について説明する。従来のように、ポインティ
ングデバイスがある場合は、従来通りの選択方法を行う
ことも可能であるが、本方式を用いた場合は、最初に表
示された状態で、コンテンツマップから一番左上つまり
コンテンツマップ（A,1）で示されたコンテンツについ
て、仮に選択されていることを示すために、表示されて
いるコンテンツの色を変えたり、ブリンキングを行うな
ど、他のコンテンツと表示態様を異なるものとしてい
る。この状態のコンテンツを注目可能な表示態様のコン
テンツという。

【００２６】仮に選択されている注目可能な表示態様の
コンテンツをユーザがそのまま指定する場合は、キーボ
ードなどで 特定のキーを押してもよいし、別の手段、
例えば音声認識装置や別のボタンなどで選択の意志を指
定することにより選択を確定することができる。コンテ
ンツの選択を変更する場合は、これも一般的な場合はキ
ーボード上の特定のキー、矢印のついたカーソルキー、
数字を入力するテンキーなどでもよいし、音声認識装置
を用いて「上」「下」「右」「左」などの音声指示を認
識させてもよい。このように注目可能な表示態様のコン
テンツをユーザの指示に従って移動させることができ
る。なお、移動は上下左右のみならず、「右上」など斜
めに行わせることも可能である。なお、本発明では注目
可能な表示態様のコンテンツが移動するのであり、コン
テンツ自体が移動するものではなく、また従来から用い
られている画面上のカーソルやポインタ（矢印など）に
より選択を行うものではない。

【００２７】例えば図５を例にすると、現在選択されて
いるコンテンツが（B,3）にある場合、ユーザから「１
つ上」と音声により指定された場合、音声認識処理を介
して（B,2）にあるコンテンツ３を選択状態、すなわち
注目可能な表示態様とする。さらに「上」と指定された
場合、（B,1）にコンテンツがないので（X,1）の位置に
含まれるコンテンツから最も（B,1）に近いもの、ここ
では（A,1）のコンテンツ1を選択する。上下端、左右端
のコンテンツからさらに移動するように指定された場
合、任意に決められるが、例えば右端から右へ移動と指
定されたら、移動を行わない方法もあるが、１つ下に移
動して左端のコンテンツを選択したり、同じ行（y位
置）の左端のコンテンツに移動することも可能である。

【００２８】なお、音声認識のみならず、画像認識処理
により、あるいは音声認識と画像認識を組み合わせた処
理により、ユーザの選択指示を受入れることができる。
画像認識による方法は、テレビカメラなどにより、ユー
ザの顔や手を動画として撮像し、ユーザが端末のディス
プレイに表示されたコンテンツを見ながら身振り、手振
りで所望のコンテンツを選択している様子から、ユーザ
が選択しようとしているものを判断するものである。す
なわち、ユーザの顔や手などの動きに応じて画面上のコ
ンテンツの選択方向（上下左右など）、選択の可否（は
い、いいえ）を認識するものである。かかる画像認識に
よる人の意志の読み取りの技術は、例えば情報処理学会
論文誌Ｖｏｌ．３７，Ｎｏ．６（１９９６年６月）pp10
49-1060の湯浅夏樹氏他による「マルチモーダル対話デ
ータベースに基づく音声と身振りの認識系統合モデル」
などに示されているものを用いることができる。

【００２９】次にイメージマップが含まれる場合の動作
について図７〜図１１を用いて説明する。図７はイメー
ジマップを含むコンテンツの例を示す図、図８は図７の
ためのＨＴＭＬ記述データの例を示す図、図９がグルー
プ分けの例を示す図、図１０がコンテンツ選択インデッ
クスマップの例を示す図、図１１がコンテンツ表示位置
記憶装置２０の記憶内容の例を示す図である。イメージ
マップの場合は、まず図８の下線部のIMG SRC=で指定さ
れる画像のデータから、通常に表示する場合と同じく、
画像データの大きさがわかる。また表示開始位置は現在
表示中のコンテンツの位置から計算される。さらにその
後のAREA SHAPE=で指定される各領域の先頭座標と、こ
のイメージマップの表示される位置から、全体からみた
領域の座標（絶対座標）を求める。通常はイメージマッ
プの表示位置に領域を示す座標を加算すればよい。

【００３０】各領域の開始座標の絶対座標が求められた
ら、この座標を基に、ｙ座標方向にグループ分けを行い
（図９）、コンテンツ表示記憶装置２０にコンテンツ情
報とコンテンツ表示位置、幅、高さ、リンク先などを記
憶する（図１１）。また、コンテンツ選択インデックス
マップ２２にも、同様にグループ分けと番号付を行い、
コンテンツを登録する（図１０）。以上の説明のよう
に、イメージマップのために記述された領域も、他のコ
ンテンツと同じように扱えば、イメージマップ中の領域
もコンテンツ選択インデックスマップ２２に登録するこ
とが可能となり、ポインティングデバイスを用いなくて
もイメージマップ中のリンク情報を選択することが可能
となる。なお、イメージマップの場合の注目座標は、最
初に現れる座標以外に、表示領域の最右端、最上端な
ど、任意に選択してもかまわない。

【００３１】上記実施の形態は主として本発明によるコ
ンテンツ表示・選択装置とコンテンツ表示・選択方法を
中心に説明したが、このコンテンツ表示・選択方法を実
現するプログラムをＣＤ−ＲＯＭや磁気記録媒体などの
記録媒体に記録したものも本発明の範囲であることはい
うまでもない。

【００３２】

【発明の効果】以上説明したように本発明によれば、マ
ウスに代表されるポインティングデバイスを用いずに、
また、指示位置を示すカーソルやポインタを用いること
なくキーボードや音声制御などによる相対位置の指示に
より画面上のコンテンツの選択が可能になり、ポインテ
ィングデバイスがない端末やハンディキャップユーザで
もコンテンツの選択を容易に行うことができるようにな
る。

【図面の簡単な説明】

【図１】本発明に係るコンテンツ表示・選択装置の好ま
しい実施の形態の機能を中心に示したブロック図であ
る。

【図２】図１の実施の形態によるコンテンツの表示例で
ある。

【図３】図２の表示を行うためのＨＴＭＬによる記述で
ある。

【図４】画面内の複数のコンテンツを本発明の実施の形
態によりグループ分けする２つの手法を示す図（ａ）、
（ｂ）である。

【図５】本発明の実施の形態におけるコンテンツ選択イ
ンデックスマップの例である。

【図６】本発明の実施の形態におけるコンテンツ表示位
置記憶装置の記憶内容の例である。

【図７】図１の実施の形態によるイメージマップを含む
コンテンツの表示例である。

【図８】図７の表示を行うためのＨＴＭＬによる記述で
ある。

【図９】画面内のイメージマップを含む複数のコンテン
ツを本発明の実施の形態によりグループ分けする手法を
示す図である。

【図１０】本発明の実施の形態におけるイメージマップ
を含んだコンテンツ選択インデックスマップの例であ
る。

【図１１】本発明の実施の形態におけるイメージマップ
がある場合のコンテンツ表示位置記憶装置の記憶内容の
例である。

【図１２】従来のコンテンツ表示・選択装置の機能を中
心に示したブロック図である。

【図１３】図１２の従来装置によるコンテンツの表示例
である。

【図１４】図１２の表示を行うためのＨＴＭＬによる記
述である。

【図１５】従来装置におけるコンテンツ表示位置記憶装
置の記憶内容の例である。

【図１６】イメージマップを含むコンテンツの例であ
る。

【図１７】図１６の表示を行うためのＨＴＭＬによる記
述である。

【符号の説明】

１０ コンテンツ表示・選択装置 １２ ネットワーク １４ ディスク（記憶媒体） １６ コンテンツ読み込み手段 １８ コンテンツ解析手段 ２０ コンテンツ表示位置記憶装置 ２２ コンテンツ選択インデックスマップ ２４ コンテンツ表示手段 ２６ コンテンツ選択手段 ２８ 画像表示装置

Claims (13)

【特許請求の範囲】
1. 【請求項１】 ＨＴＭＬで記述されたコンテンツを表示
   し、かつ表示された前記コンテンツをユーザが選択する
   ことができるコンテンツ表示・選択装置であって、 前記コンテンツの情報を読み込むコンテンツ情報読み込
   み手段と、 読み込まれた前記コンテンツ情報を解析し、画面に表示
   する必要のあるコンテンツを抽出し、その表示位置情報
   を用いてコンテンツ表示位置関係を２次元の配列にマッ
   ピングしたコンテンツ選択インデックスマップを作成す
   るコンテンツ解析手段と、 解析された前記コンテンツの表示位置と当該コンテンツ
   のリンク情報を記憶するコンテンツ表示位置記憶装置
   と、 前記コンテンツ表示位置記憶装置の出力信号によりコン
   テンツを画像表示装置に表示するコンテンツ表示手段
   と、 前記画像表示装置に表示された複数のコンテンツからユ
   ーザが所望のコンテンツを選択するために、前記複数の
   コンテンツ中の一つを仮に選択する形で前記ユーザが注
   目可能な表示態様とし、仮に選択されたコンテンツから
   キーボードあるいは音声又は画像認識手段により２次元
   的に移動の指示を受け入れることにより所望のコンテン
   ツを選択可能なコンテンツ選択手段とを、 有するコンテンツ表示・選択装置。
2. 【請求項２】 前記コンテンツ解析手段が、 各コンテンツの表示開始位置を抽出する手段と、 抽出された各コンテンツの表示開始位置のｙ座標が等し
   いものを集めてグループ化する手段と、 前記グループ化された中で、各コンテンツの表示開始位
   置のｘ座標に応じて前記各グループ内で各コンテンツに
   順番を付ける手段と、 前記ｙ座標の及びｘ座標の大きさに応じて全てのコンテ
   ンツに番号を割り振る手段とを、 有する請求項１記載のコンテンツ表示・選択装置。
3. 【請求項３】 前記コンテンツ解析手段が、 各コンテンツの表示開始位置を抽出する手段と、 抽出された各コンテンツの表示開始位置のｙ座標が近い
   ものを集めてグループ化する手段と、 前記グループ化された中で、各コンテンツの表示開始位
   置のｘ座標に応じて前記各グループ内で各コンテンツに
   順番を付ける手段と、 前記グループの順位及びｘ座標の大きさに応じて全ての
   コンテンツに番号を割り振る手段とを、 有する請求項１記載のコンテンツ表示・選択装置。
4. 【請求項４】 前記解析手段が前記グループ化する手段
   によりグループ化されたグループ数と、前記ｘ座標によ
   る順番付けにより付された最大数とを用いて前記コンテ
   ンツ選択インデックスマップを２次元マップとして生成
   する手段を有する請求項２又は３記載のコンテンツ表示
   ・選択装置。
5. 【請求項５】 前記解析手段が前記コンテンツ選択イン
   デックスマップに前記コンテンツを示す情報を埋め込む
   手段を有し、前記各グループ内において各コンテンツの
   ｘ座標を、その上下のグループのコンテンツとのｘ座標
   との位置関係から判断して、グループ内の順位にかかわ
   らず可能な限り自然な位置関係となるよう各コンテンツ
   を示す情報を埋め込むよう調整する手段を有する請求項
   ４記載のコンテンツ表示・選択装置。
6. 【請求項６】 前記解析手段が前記コンテンツ選択イン
   デックスマップに前記コンテンツを示す情報を埋め込む
   とき、コンテンツが存在しない場合は、コンテンツが存
   在しない旨を示す情報を記憶させる手段を有する請求項
   ５記載のコンテンツ表示・選択装置。
7. 【請求項７】 前記解析手段が更にイメージマップ解析
   手段を有し、ＨＴＭＬで記述されたイメージマップ内の
   領域情報の任意の点を基に、そのコンテンツの表示位置
   とみなし、イメージマップ以外のデータと同様に前記コ
   ンテンツ選択インデックスマップ上にコンテンツ情報を
   記憶する請求項１ないし６のいずれか１つに記載のコン
   テンツ表示・選択装置。
8. 【請求項８】 ＨＴＭＬで記述されたコンテンツを表示
   し、かつ表示された前記コンテンツをユーザが選択する
   ことができるコンテンツ表示・選択装置であって、前記
   コンテンツの情報を読み込み、読み込まれた前記コンテ
   ンツ情報を解析し、解析された前記コンテンツの表示位
   置と当該コンテンツのリンク情報を記憶するコンテンツ
   表示位置記憶装置と、前記コンテンツ表示位置記憶装置
   の出力信号によりコンテンツを画像表示装置に表示する
   コンテンツ表示手段と、ユーザの指示を受け入れるキー
   ボード及び／又は音声又は画像認識手段を有するものに
   より、コンテンツを表示・選択するためのコンテンツ表
   示・選択方法であって、 読み込まれた前記コンテンツ情報を解析し、画面に表示
   する必要のあるコンテンツを抽出するステップと、 抽出されたコンテンツの表示位置情報を用いてコンテン
   ツ表示位置関係を２次元の配列にマッピングしたコンテ
   ンツ選択インデックスマップを作成するステップと、 解析された前記コンテンツの表示位置と当該コンテンツ
   のリンク情報を記憶するステップと、 前記コンテンツ表示位置記憶装置の出力信号によりコン
   テンツを画像表示装置に表示するステップと、 前記画像表示装置に表示された複数のコンテンツからユ
   ーザが所望のコンテンツを選択可能とするために、前記
   複数のコンテンツ中の一つを仮に選択する形で前記ユー
   ザが注目可能な表示態様とするステップと、 前記仮に選択されたコンテンツから他のコンテンツに注
   目可能な表示態様を移動させるべくユーザからの２次元
   的移動の指示を前記キーボード及び／又は前記音声又は
   画像認識手段により受け入れるステップと、 受け入れられた前記指示により注目可能な表示態様を２
   次元的に移動させて他のコンテンツを注目可能な表示態
   様とするステップとを、 有するコンテンツ表示・選択方法。
9. 【請求項９】 前記コンテンツ選択インデックスマップ
   を作成するステップが、 各コンテンツの表示開始位置を抽出するステップと、 抽出された各コンテンツの表示開始位置のｙ座標と同一
   かあるいは近いものを集めてグループ化するステップ
   と、 前記グループ化された中で、各コンテンツの表示開始位
   置のｘ座標に応じて前記各グループ内で各コンテンツに
   順番を付けるステップと、 前記グループの順位及びｘ座標の大きさに応じて全ての
   コンテンツに番号を割り振るステップとを、 有する請求項８記載のコンテンツ表示・選択方法。
10. 【請求項１０】 前記コンテンツを注目可能な表示態様
    とするステップが当該コンテンツの表示色を他のコンテ
    ンツの表示色とは異なるものとするか、又は当該コンテ
    ンツの表示のみをブリンキングさせるものである請求項
    ８又は９記載のコンテンツ表示・選択方法。
11. 【請求項１１】 コンテンツを表示、選択するコンテン
    ツ表示・選択方法において、 読み込んだコンテンツの座標をＸＹの２次元マトリック
    スで管理するステップと、 画面に表示される複数のコンテンツ中の１つの表示態様
    を他のコンテンツの表示態様と異なるものとして注目可
    能な表示態様とするステップと、 注目可能な表示態様のコンテンツからキーボードあるい
    は音声又は画像認識手段により２次元的に移動の指示を
    受け入れることにより所望のコンテンツを選択するステ
    ップとを、 有することを特徴とするコンテンツ表示・選択方法。
12. 【請求項１２】 ＨＴＭＬで記述されたコンテンツを表
    示し、かつ表示された前記コンテンツをユーザが選択す
    ることができるコンテンツ表示・選択装置であって、前
    記コンテンツの情報を読み込み、読み込まれた前記コン
    テンツ情報を解析し、解析された前記コンテンツの表示
    位置と当該コンテンツのリンク情報を記憶するコンテン
    ツ表示位置記憶装置と、前記コンテンツ表示位置記憶装
    置の出力信号によりコンテンツを画像表示装置に表示す
    るコンテンツ表示手段と、ユーザの指示を受け入れるキ
    ーボード及び／又は音声又は画像認識手段を有するもの
    により、コンテンツを表示・選択するためのコンテンツ
    表示・選択方法のプログラムが記録された記録媒体であ
    って、 読み込まれた前記コンテンツ情報を解析し、画面に表示
    する必要のあるコンテンツを抽出するステップと、 抽出されたコンテンツの表示位置情報を用いてコンテン
    ツ表示位置関係を２次元の配列にマッピングしたコンテ
    ンツ選択インデックスマップを作成するステップと、 解析された前記コンテンツの表示位置と当該コンテンツ
    のリンク情報を記憶するステップと、 前記コンテンツ表示位置記憶装置の出力信号によりコン
    テンツを画像表示装置に表示するステップと、 前記画像表示装置に表示された複数のコンテンツからユ
    ーザが所望のコンテンツを選択可能とするために、前記
    複数のコンテンツ中の一つを仮に選択する形で前記ユー
    ザが注目可能な表示態様とするステップと、 前記仮に選択されたコンテンツから他のコンテンツに注
    目可能な表示態様を移動させるべくユーザからの２次元
    的移動の指示を前記キーボード及び／又は前記音声又は
    画像認識手段により受け入れるステップと、 受け入れられた前記指示により注目可能な表示態様を２
    次元的に移動させて他のコンテンツを注目可能な表示態
    様とするステップとを、 有するコンテンツ表示・選択方法のプログラムが記録さ
    れた記録媒体。
13. 【請求項１３】 ＨＴＭＬで記述されたコンテンツを表
    示し、かつ表示された前記コンテンツをユーザが選択す
    るためのコンピュータで用いられるコンテンツ表示・選
    択方法のプログラムが記録された記録媒体であって、 読み込んだコンテンツの座標をＸＹの２次元マトリック
    スで管理するステップと、 画面に表示される複数のコンテンツ中の１つの表示態様
    を他のコンテンツの表示態様と異なるものとして注目可
    能な表示態様とするステップと、 注目可能な表示態様のコンテンツからキーボードあるい
    は音声又は画像認識手段により２次元的に移動の指示を
    受け入れることにより所望のコンテンツを選択するステ
    ップとを、 有するコンテンツ表示・選択方法のプログラムが記録さ
    れた記録媒体。