JP5391224B2

JP5391224B2 - 映像付加情報表示制御装置およびその動作方法

Info

Publication number: JP5391224B2
Application number: JP2011069681A
Authority: JP
Inventors: 美佐土橋; 豪東野
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 2011-03-28
Filing date: 2011-03-28
Publication date: 2014-01-15
Anticipated expiration: 2031-03-28
Also published as: JP2012205191A

Description

本発明は、映像を表示装置に表示させ且つ付加情報をヘッドマウントディスプレイに表示させ且つ映像内の表示物に付加情報が重ならないようにした映像付加情報表示制御装置およびその動作方法に関するものである。

従来において、映像が表示された表示装置に付加情報を表示する際、映像内の被写体やテロップ等の文字情報に付加情報が重なり、ユーザが映像を見づらく感じることがある。これを解決する方法として下記のような技術がある。

特許文献１は、テロップ等に重ならないように付加情報を表示する技術を開示している。

特許文献２では、被写体に重ならないように付加情報を表示する技術を開示している。

非特許文献１、２では、映像を縮小してできる余白に付加情報を表示する技術を開示している。

また、従来においては、利用者がパソコン、携帯電話などの端末を操作して、端末の画面に付加情報を表示する技術がある。

特開平１０−３２２５９５号公報特開平１１−２６１８９０号公報

森田寿哉,小峯一晃,石山邦彦,後藤淳,比留間伸行,浦谷則好「プロトコル分析を用いたデータ放送コンテンツのユーザーインターフェース評価」,電子情報通信学会技術研究報告.HIP,ヒューマン情報処理101(227),35-42,2001-07-19 山田宰監修,映像情報メディ学会編：デジタル放送ハンドブック,オーム社，2003

しかしならが、上記の方法には、以下のような、不都合がある。

特許文献１、２の方法では、映像に占める文字情報や被写体の割合が大きい場合、どうしても付加情報が文字情報等に重なってしまう場合がある。

また、非特許文献１、２の方法では、縮小された映像を見づらく感じることがある。

また、これらの方法では、複数のユーザが映像を視聴する場合、各ユーザは、同じ付加情報を見なければならない。例えば、聴覚障害を持つユーザには付加情報である字幕や手話の映像を、健聴者のユーザには付加情報であるプロフィールを見せるということができない。

また、端末の画面に付加情報を表示する方法では、ユーザに適した付加情報を見せることができるが、映像と付加情報を交互に見るのが煩わしく感じることがある。

本発明は、上記の課題に鑑みてなされたものであり、その目的とするところは、映像を表示装置に表示させ且つ付加情報をヘッドマウントディスプレイに表示させ且つ映像内の表示物に付加情報が重ならないようにした映像付加情報表示制御装置およびその動作方法を提供することにある。

上記の課題を解決するために、第１の本発明は、映像を表示装置に表示させる映像表示制御手段と、前記映像をヘッドマウントディスプレイ越しに見るユーザに装着された当該ヘッドマウントディスプレイの表示位置に表示すべき付加情報を記憶する付加情報管理手段と、前記ヘッドマウントディスプレイへ投影される前記表示装置または前記表示装置に表示される前記映像内の表示物の投影位置を求め、前記求められた投影位置に重ならないように前記付加情報の表示位置を求める付加情報表示位置取得手段と、前記付加情報を読み出し、当該付加情報を前記求められた表示位置に表示させる付加情報表示制御手段とを備える映像付加情報表示制御装置において、前記映像付加情報表示制御装置は、前記ユーザが前記ヘッドマウントディスプレイ越しに見る画像を取得するカメラとともに用いられ、且つ、前記カメラで取得された画像の全領域に占める前記表示装置の映っている領域の割合を算出し、前記割合が予め定められた値以上か否かを判定する付加情報表示モード選択部を備え、前記付加情報表示位置取得手段は、前記割合が前記値以上なら、前記表示装置が投影されている領域内に前記付加情報を表示した場合の前記表示位置を求めることを特徴とする映像付加情報表示制御装置をもって解決手段とする。

第２の本発明は、映像を表示装置に表示させる映像表示制御手段と、前記映像をヘッドマウントディスプレイ越しに見るユーザに装着された当該ヘッドマウントディスプレイの表示位置に表示すべき付加情報を記憶する付加情報管理手段とを備える映像付加情報表示制御装置の動作方法であって、前記映像付加情報表示制御装置の付加情報表示位置取得手段が、前記ヘッドマウントディスプレイへ投影される前記表示装置または前記表示装置に表示される前記映像内の表示物の投影位置を求め、前記求められた投影位置に重ならないように前記付加情報の表示位置を求める工程と、前記映像付加情報表示制御装置の付加情報表示制御手段が、前記付加情報を読み出し、当該付加情報を前記求められた表示位置に表示させる工程とを備え、前記映像付加情報表示制御装置は、前記ユーザが前記ヘッドマウントディスプレイ越しに見る画像を取得するカメラとともに用いられ、前記映像付加情報表示制御装置の付加情報表示モード選択部は、前記カメラで取得された画像の全領域に占める前記表示装置の映っている領域の割合を算出し、前記割合が予め定められた値以上か否かを判定し、前記付加情報表示位置取得手段は、前記割合が前記値以上なら、前記表示装置が投影されている領域内に前記付加情報を表示した場合の前記表示位置を求めることを特徴とする映像付加情報表示制御装置の動作方法をもって解決手段とする。

本発明によれば、映像を表示装置に表示させ且つ付加情報をヘッドマウントディスプレイに表示させ且つ映像内の表示物に付加情報が重ならないようにすることが可能となる。

本実施の形態に係る映像付加情報表示制御装置を用いたシステムの構成を示す図である。本実施の形態に係る映像付加情報表示制御装置の概略構成を示すブロック図である。付加情報管理部１３の概略構成を示すブロック図である。付加情報表示モード選択部１６の動作を示すフローチャートである。利用者が映像の視聴を開始してからヘッドマウントディスプレイに付加情報が表示されるまでを時系列的に示すフローチャートである。

以下、本発明の実施の形態について図面を参照して説明する。

図１は、本実施の形態に係る映像付加情報表示制御装置を用いたシステムの構成を示す図である。

本実施の形態に係るシステムは、映像付加情報表示制御装置１、ユーザＵの前に置かれた表示装置２、ユーザＵの頭部に装着されたヘッドマウントディスプレイ３、ヘッドマウントディスプレイ３に装着されたカメラ４、ユーザＵに操作されるリモートコントローラ（以下、リモコン）５を含む。表示装置２は、以下の説明では、筐体やスイッチなどを除き、映像が表示される部分のみをいう。

映像付加情報表示制御装置１は、無線などで、ヘッドマウントディスプレイ３に情報を送信できるようになっている。また、映像付加情報表示制御装置１は、無線などで、カメラ４、リモコン５から画像、指示を受信できるようになっている。

映像付加情報表示制御装置１は、表示装置２に映像Ｖを表示させ、映像Ｖに関する付加情報Ａをヘッドマウントディスプレイ３に表示させるものである。

ユーザＵは、付加情報Ａが表示されたヘッドマウントディスプレイ３越しに、表示装置２および映像Ｖを見ることになる。つまり、ヘッドマウントディスプレイ３は透過型であり、表示装置２および映像Ｖの像は、ヘッドマウントディスプレイ３を透過するので、ユーザＵは、その像を見ることになる。

カメラ４は、ユーザＵがヘッドマウントディスプレイ３越しに見る風景Ｋ（表示装置２を含む）を撮影して、その画像Ｇを取得し、映像付加情報表示制御装置１は、画像Ｇを基に付加情報Ａの表示位置の座標を求める。

リモコン５は、ユーザＵの操作による指示を映像付加情報表示制御装置１に送信し、映像付加情報表示制御装置１は、指示に応じた種類の付加情報Ａをヘッドマウントディスプレイ３に表示させる。

図２は、本実施の形態に係る映像付加情報表示制御装置の概略構成を示すブロック図である。

映像付加情報表示制御装置１は、映像Ｖが記憶された映像記憶部１１、映像Ｖを表示装置２に表示させる映像表示制御部１２、映像に付随する付加情報Ａを取得し、付加情報Ａから付加情報Ａに含まれるキーワードを抽出し、キーワードを基に外部のインターネットから他の付加情報Ａを取得し、各付加情報Ａを記憶する付加情報管理部１３と、リモコン５からの指示に対応する付加情報Ａを付加情報管理部１３から取得する付加情報取得部１４、カメラ４で取得された画像Ｇから表示装置２の映っている領域２Ａを検出する表示装置領域検出部１５、検出された領域２Ａと映像Ｖを基に、ヘッドマウントディスプレイ３の、表示装置２が投影されている領域内に付加情報を表示すべきか（画面内表示モード）、当該領域外に付加情報を表示すべきか（画面外表示モード）を選択する付加情報表示モード選択部１６、検出された領域２Ａと映像Ｖと表示モードとを基に、付加情報Ａの表示位置の座標ＡＬを求める付加情報表示位置取得部１７、付加情報Ａをヘッドマウントディスプレイ３の座標ＡＬの位置に表示させる付加情報表示制御部１８を備える。

図３は、付加情報管理部１３の概略構成を示すブロック図である。

映像記憶部１１には、例えば、インターネットから取得された映像Ｖが記憶される。映像Ｖは、映像Ｖに付随する付加情報Ａとともに映像記憶部１１に記憶される。

付加情報管理部１３は、付加情報Ａが記憶される付加情報記憶部１３１、付加情報Ａから付加情報Ａに含まれるキーワードを抽出するキーワード抽出部１３２、キーワードを基にインターネットから他の付加情報Ａを取得し、付加情報記憶部１３１に記憶させる付加情報取得部１３３を有する。

付加情報管理部１３は、映像Ｖに付随する付加情報Ａを映像記憶部１１から取得し、付加情報記憶部１３１に記憶させる。キーワード抽出部１３２は、付加情報記憶部１３１から付加情報Ａを読み出し、所定のアルゴリズムにより、付加情報Ａから映像Ｖに関するキーワードを抽出する。付加情報取得部１３３は、キーワードをインターネットに送出し、図示しないインターネット上のサーバなどから、文字情報、静止画、動画等の他の付加情報Ａを取得し、付加情報記憶部１３１に記憶させる。

付加情報管理部１３は、付加情報記憶部１３１の各付加情報Ａに対し、各付加情報Ａを区別するため、固有の識別情報を付与する。また、付加情報管理部１３は、各識別情報に対し、対応する付加情報の種類（例えば、付加情報が字幕であるのか、手話映像であるのか、出演者のプロフィールを示す文字情報であるのか等）を示すタグを付与する。

ここでは、付加情報管理部１３は、付加情報Ａが映像Ｖに付随するものであるなら、同じく映像Ｖに付随するメタデータが、付加情報Ａの種類を示しているので、メタデータに応じたタグを付加情報Ａに付与する。

また、付加情報管理部１３は、インターネット上のサーバなどから取得した付加情報Ａには、その旨を示す一律のタグ（「その他」のようなタグ）を付与する。

付加情報管理部１３は、各識別情報につき、当該識別情報および当該識別情報に付与されたタグからなる属性情報を生成し、付加情報取得部１４に送信する。付加情報取得部１４は、各属性情報を保持する。

図４は、付加情報表示モード選択部１６の動作を示すフローチャートである。

付加情報表示モード選択部１６は、まず、カメラ４で取得された画像Ｇ（ユーザＵがヘッドマウントディスプレイ３越しに見る風景Ｋの画像）の全領域に占める領域２Ａ（表示装置２の映っている領域）の割合Ｑを算出する（Ｓ１）。

次に、付加情報表示モード選択部１６は、割合Ｑが予め定められた値Ｘ１以上か否かを判定する（Ｓ３）。

付加情報表示モード選択部１６は、割合Ｑが値Ｘ１以上なら、付加情報表示位置取得部１７に、画面内表示モードを選択したことを通知し（Ｓ５）、処理を終える。

一方、付加情報表示モード選択部１６は、割合Ｑが値Ｘ１未満なら、まず、映像Ｖに占める被写体（映像内の人物など）の割合Ｐ１を算出する（Ｓ７）。

次に、付加情報表示モード選択部１６は、映像Ｖに占める文字情報（映像内のテロップなど）の割合Ｐ２を算出する（Ｓ９）。

次に、付加情報表示モード選択部１６は、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域に付加情報Ａを表示した場合に、当該領域に占める付加情報Ａの割合Ｐ３を算出する（Ｓ１１）。付加情報表示モード選択部１６は、例えば、付加情報Ａの表示面積を予め記憶しており、映像Ｖ（表示装置２）が投影されいる領域の面積に対する、付加情報Ａの表示面積の割合（割合Ｐ３）を算出する。

次に、付加情報表示モード選択部１６は、割合Ｐ１、Ｐ２、Ｐ３の合計Ｐ４が、予め定められた値Ｘ２以上か否かを判定する（Ｓ１３）。

付加情報表示モード選択部１６は、割合Ｐ４が値Ｘ２以上なら、付加情報表示位置取得部１７に、画面外表示モードを選択したことを通知し（Ｓ１５）、処理を終える。

一方、付加情報表示モード選択部１６は、割合Ｐ４が値Ｘ２未満なら、付加情報表示位置取得部１７に、画面内表示モードを選択したことを通知し（Ｓ５）、処理を終える。

この図の処理において、割合Ｑが値Ｘ１以上の場合、画面内表示モードを選択するのは、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域内に付加情報Ａを表示しても、割合Ｑが比較的高ければ、映像Ｖ内の表示物（上記の被写体や文字情報など）と付加情報Ａとが重ならないようにしやすいからである。

また、この図の処理において、割合Ｐ４が値Ｘ２未満の場合、画面内表示モードを選択するのは、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域内に付加情報Ａを表示しても、割合Ｐ４が比較的低ければ、映像Ｖ内の表示物（上記の被写体や文字情報など）と付加情報Ａとが重ならないようにしやすいからである。

図５は、利用者が映像の視聴を開始してからヘッドマウントディスプレイに付加情報が表示されるまでを時系列的に示すフローチャートである。

まず、映像表示制御部１２が、映像Ｖを映像記憶部１１から読み出し、表示装置２への映像Ｖの表示を開始する（Ｓ１０１）。ユーザＵは、ヘッドマウントディスプレイ３越しに映像Ｖの視聴を開始する。

次に、表示装置領域検出部１５が、カメラ４で取得された画像Ｇから表示装置２の映っている領域２Ａを検出する（Ｓ１１１）。

次に、付加情報表示モード選択部１６が、上記のように、画面内表示モードまたは画面外表示モードを選択する（Ｓ１１３）。

次に、付加情報表示位置取得部１７は、画面内表示モードが選択された場合は、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域内に付加情報Ａを表示した場合の、当該付加情報Ａの表示位置の座標ＡＬを求め、座標ＡＬを付加情報表示制御部１８に通知する（Ｓ１１５）。このとき、付加情報表示位置取得部１７は、ヘッドマウントディスプレイ３へ投影される映像Ｖ内の表示物（上記の被写体や文字情報など）の投影位置を求め、当該投影位置に重ならないように付加情報Ａの座標ＡＬを求める（Ｓ１１５）。

一方、付加情報表示位置取得部１７は、画面外表示モードが選択された場合は、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域外に付加情報Ａを表示した場合の、当該付加情報Ａの表示位置の座標ＡＬの座標を求め、座標ＡＬを付加情報表示制御部１８に通知する（Ｓ１１５）。

これと平行して、上記のように、付加情報管理部１３は、各付加情報Ａを取得し、各付加情報Ａにつき、属性情報（識別情報およびタグ）を生成し（Ｓ１２１）、各属性情報を付加情報取得部１４に送信する（Ｓ１２３）。

ユーザＵが、リモコン５の操作により、表示させたい付加情報Ａの種類を指示する（Ｓ１２５）と、付加情報取得部１４は、種類に対応するタグを含む属性情報を検索し、当該属性情報から識別情報を読み出す（Ｓ１２７）。

次に、付加情報取得部１４は、読み出した識別情報と同じ識別情報を付与された付加情報Ａを付加情報管理部１３から取得し、付加情報表示制御部１８に送信する（Ｓ１２９）。

付加情報表示制御部１８は、付加情報取得部１４から送信された付加情報Ａと、付加情報表示位置取得部１７から通知された座標ＡＬを記憶し（Ｓ１３１）、映像Ｖの進行にあわせて、付加情報Ａを読み出し、座標ＡＬの位置に表示させ（Ｓ１３３）、処理を終える。

画面内表示モードが選択された場合、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域内に付加情報Ａが表示されるが、映像Ｖ内の表示物（上記の被写体や文字情報など）の投影位置に重ならないように付加情報Ａが表示されるので、付加情報Ａが映像Ｖ内の表示物に重なって見づらいという不都合を解消することができる。

一方、画面外表示モードが選択された場合、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域外に付加情報Ａが表示されるので、付加情報Ａが映像Ｖ内の表示物に重なって見づらいという不都合を解消することができる。

また、ユーザＵがリモコン５で指示した所望の付加情報Ａの種類に対応するタグを含む属性情報を検索し、当該属性情報から識別情報を読み出し、当該識別情報と同じ識別情報を付与された付加情報を表示させるので、例えば、聴覚障害をもつユーザＵの指示により、付加情報である字幕を表示させることができる。

ユーザＵは、例えば、ヘッドマウントディスプレイ３の、映像Ｖ（表示装置２）が投影されいる領域内に表示されている付加情報Ａを、領域外の上方や下方や右方や左方の部分に表示させたい場合、または、逆に領域外に表示されている付加情報Ａを領域内に表示させたい場合、または、領域外に表示している付加情報Ａを領域外の他の部分（例えば、付加情報Ａが領域外の下方に表示されている場合、上方や右方や左方）に表示させたい場合、または、付加情報Ａの種類を変更したい場合、例えば、字幕をプロフィールに変更したい場合、または、フォント、表示速度、表示方法（スクロール方式か切り替わり方式か等）等を変更したい場合、または、複数種の付加情報Ａを表示させたい場合、例えば、聴覚障害を持つユーザ用の字幕と健聴者のユーザ用のプロフィールつまり２種類の付加情報を表示させたい場合、リモコン５により、その旨の指示を行う。フォントは、例えば、リモコン５により「明朝体（大）→明朝体（特大）→ゴシック体（大）→ゴシック体（特大）」のように切り替える。

付加情報表示位置取得部１７は、付加情報Ａの表示位置の変更に関する指示を取得し、この指示に基づいて、変更後の表示位置の座標ＡＬを求め、付加情報表示制御部１８に通知する。これにより、付加情報Ａの表示位置をユーザＵの所望の表示位置に変更することができる。

付加情報取得部１４は、付加情報Ａの種類やその数の変更に関する指示を取得し、この指示に基づいて、変更後の種類の付加情報Ａを取得し、付加情報表示制御部１８に送信する。これにより、付加情報Ａの種類をユーザＵの所望の種類に変更することができる。また、例えば、聴覚障害を持つユーザには字幕を、健聴者のユーザにはプロフィールを見せることができる。

なお、本実施の形態に係る映像付加情報表示制御装置１としてコンピュータを機能させるためのコンピュータプログラムは、半導体メモリ、磁気ディスク、光ディスク、光磁気ディスク、磁気テープなどのコンピュータ読み取り可能な記録媒体に記録でき、また、インターネットなどの通信網を介して伝送させて、広く流通させることができる。

１…映像付加情報表示制御装置
２…表示装置
２Ａ…画像Ｇの中の表示装置２の映っている領域
３…ヘッドマウントディスプレイ
４…カメラ
５…リモコン
１１…映像記憶部
１２…映像表示制御部
１３…付加情報管理部
１４、１３３…付加情報取得部
１５…表示装置領域検出部
１６…付加情報表示モード選択部
１７…付加情報表示位置取得部
１８…付加情報表示制御部
１３１…付加情報記憶部
１３２…キーワード抽出部
Ａ…付加情報
ＡＬ…付加情報Ａの表示位置の座標
Ｇ…表示装置２を含む風景Ｋの画像
Ｋ…表示装置２を含む風景
Ｕ…ユーザ
Ｖ…映像

Claims

映像を表示装置に表示させる映像表示制御手段と、
前記映像をヘッドマウントディスプレイの越しに見るユーザに装着された当該ヘッドマウントディスプレイの表示位置に表示すべき付加情報を記憶する付加情報管理手段と、
前記ヘッドマウントディスプレイへ投影される前記表示装置または前記表示装置に表示される前記映像内の表示物の投影位置を求め、前記求められた投影位置に重ならないように前記付加情報の表示位置を求める付加情報表示位置取得手段と、
前記付加情報を読み出し、当該付加情報を前記求められた表示位置に表示させる付加情報表示制御手段と
を備える映像付加情報表示制御装置において、
前記映像付加情報表示制御装置は、前記ユーザが前記ヘッドマウントディスプレイ越しに見る画像を取得するカメラとともに用いられ、且つ、前記カメラで取得された画像の全領域に占める前記表示装置の映っている領域の割合を算出し、前記割合が予め定められた値以上か否かを判定する付加情報表示モード選択部を備え、
前記付加情報表示位置取得手段は、前記割合が前記値以上なら、前記表示装置が投影されている領域内に前記付加情報を表示した場合の前記表示位置を求める
ことを特徴とする映像付加情報表示制御装置。
前記付加情報表示モード選択部は、
前記映像に占める被写体の割合と、前記映像に占める文字情報の割合と、前記映像が投影されている領域に付加情報を表示した場合の当該領域に占める付加情報の割合を算出し、当該各割合の合計が予め定められた値以上か否かを判定し、
前記付加情報表示位置取得手段は、前記合計が当該値未満なら、前記表示装置が投影されている領域内に前記付加情報を表示した場合の前記表示位置を求める一方、前記合計が当該値以上なら、前記表示装置が投影されている領域外に前記付加情報を表示した場合の前記表示位置を求める
ことを特徴とする請求項１記載の映像付加情報表示制御装置。
前記付加情報管理手段は、
前記映像に付随する付加情報を取得し、当該付加情報から当該付加情報に含まれるキーワードを抽出し、当該キーワードを基に外部から他の付加情報を取得し、当該各付加情報を記憶する
ことを特徴とする請求項１または２記載の映像付加情報表示制御装置。
映像を表示装置に表示させる映像表示制御手段と、前記映像をヘッドマウントディスプレイの越しに見るユーザに装着された当該ヘッドマウントディスプレイの表示位置に表示すべき付加情報を記憶する付加情報管理手段とを備える映像付加情報表示制御装置の動作方法であって、
前記映像付加情報表示制御装置の付加情報表示位置取得手段が、前記ヘッドマウントディスプレイへ投影される前記表示装置または前記表示装置に表示される前記映像内の表示物の投影位置を求め、前記求められた投影位置に重ならないように前記付加情報の表示位置を求める工程と、
前記映像付加情報表示制御装置の付加情報表示制御手段が、前記付加情報を読み出し、当該付加情報を前記求められた表示位置に表示させる工程と
を備え、
前記映像付加情報表示制御装置は、前記ユーザが前記ヘッドマウントディスプレイ越しに見る画像を取得するカメラとともに用いられ、
前記映像付加情報表示制御装置の付加情報表示モード選択部は、前記カメラで取得された画像の全領域に占める前記表示装置の映っている領域の割合を算出し、前記割合が予め定められた値以上か否かを判定し、
前記付加情報表示位置取得手段は、前記割合が前記値以上なら、前記表示装置が投影されている領域内に前記付加情報を表示した場合の前記表示位置を求める
ことを特徴とする映像付加情報表示制御装置の動作方法。
前記付加情報表示モード選択部は、
前記映像に占める被写体の割合と、前記映像に占める文字情報の割合と、前記映像が投影されている領域に付加情報を表示した場合の当該領域に占める付加情報の割合を算出し、当該各割合の合計が予め定められた値以上か否かを判定し、
前記付加情報表示位置取得手段は、前記合計が当該値未満なら、前記表示装置が投影されている領域内に前記付加情報を表示した場合の前記表示位置を求める一方、前記合計が当該値以上なら、前記表示装置が投影されている領域外に前記付加情報を表示した場合の前記表示位置を求める
ことを特徴とする請求項４記載の映像付加情報表示制御装置の動作方法。
前記付加情報管理手段は、
前記映像に付随する付加情報を取得し、当該付加情報から当該付加情報に含まれるキーワードを抽出し、当該キーワードを基に外部から他の付加情報を取得し、当該各付加情報を記憶する
ことを特徴とする請求項４または５記載の映像付加情報表示制御装置の動作方法。
請求項１ないし３のいずれかに記載の映像付加情報表示制御装置としてコンピュータを機能させるためのコンピュータプログラム。