JP2001331246A - 画像関連データ表示装置 - Google Patents
画像関連データ表示装置Info
- Publication number
- JP2001331246A JP2001331246A JP2000147154A JP2000147154A JP2001331246A JP 2001331246 A JP2001331246 A JP 2001331246A JP 2000147154 A JP2000147154 A JP 2000147154A JP 2000147154 A JP2000147154 A JP 2000147154A JP 2001331246 A JP2001331246 A JP 2001331246A
- Authority
- JP
- Japan
- Prior art keywords
- related data
- image
- objects
- display device
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
(57)【要約】
【課題】 動画像の１フレームに存在する指定したオブ
ジェクトに関連するデータのみを表示できるようにす
る。 【解決手段】 オブジェクト識別目安取得部１は、動画
像の１フレームに存在する全てのオブジェクトの形状情
報及び配置情報が入力され、オブジェクト識別画像を出
力する。オブジェクト特定部４は、オブジェクト指定部
３によって指定されたオブジェクトを、オブジェクト識
別画像に基づいて特定する。関連データ選択部５は、特
定されたオブジェクトに対応する関連データを、関連デ
ータ対応部２によって配置情報を対応させた関連データ
から選択する。関連データ表示部６は、その関連データ
を動画像とともに表示する。
ジェクトに関連するデータのみを表示できるようにす
る。 【解決手段】 オブジェクト識別目安取得部１は、動画
像の１フレームに存在する全てのオブジェクトの形状情
報及び配置情報が入力され、オブジェクト識別画像を出
力する。オブジェクト特定部４は、オブジェクト指定部
３によって指定されたオブジェクトを、オブジェクト識
別画像に基づいて特定する。関連データ選択部５は、特
定されたオブジェクトに対応する関連データを、関連デ
ータ対応部２によって配置情報を対応させた関連データ
から選択する。関連データ表示部６は、その関連データ
を動画像とともに表示する。
Description
【０００１】
【発明の属する技術分野】本発明は、画像関連データ表
示装置に関するものであり、特に、任意に指定した複数
のオブジェクトの関連データを表示する、オブジェクト
に基づいた画像関連データ表示装置に関するものであ
る。
示装置に関するものであり、特に、任意に指定した複数
のオブジェクトの関連データを表示する、オブジェクト
に基づいた画像関連データ表示装置に関するものであ
る。
【０００２】
【従来の技術】従来、マウスのようなポインタ装置の示
す画像に関連したデータをコンピュータによって表示す
るに当たり、ＨＴＭＬ(Hyper Text Makeup Language)の
機能が通常使用されている。ＨＴＭＬを用いた<IMG SRC
=“image" ALT=“comment"> という表記によって、imag
e というファイル名の画像がウィンドウ内に表示され、
その画像にマウスが合わせられると、comment というテ
キストが、基となる画像に重ね合わされて表示される。
ＨＴＭＬでは、ＧＩＦ(Graphics Interchange Format),
ＪＰＥＧ(ITU-TT.81｜ISO/IEC 10918-1,“Information
technology-Digitalcompression and coding of contin
uous-tone still images-Requirements andguideline
s",1993),ＰＮＧ(portable Network Graphics) 等の静
止画像を表示することができる。
す画像に関連したデータをコンピュータによって表示す
るに当たり、ＨＴＭＬ(Hyper Text Makeup Language)の
機能が通常使用されている。ＨＴＭＬを用いた<IMG SRC
=“image" ALT=“comment"> という表記によって、imag
e というファイル名の画像がウィンドウ内に表示され、
その画像にマウスが合わせられると、comment というテ
キストが、基となる画像に重ね合わされて表示される。
ＨＴＭＬでは、ＧＩＦ(Graphics Interchange Format),
ＪＰＥＧ(ITU-TT.81｜ISO/IEC 10918-1,“Information
technology-Digitalcompression and coding of contin
uous-tone still images-Requirements andguideline
s",1993),ＰＮＧ(portable Network Graphics) 等の静
止画像を表示することができる。
【０００３】動画像は、複数のフレーム画像が時間的に
連続したものである。各々のフレーム画像は、輝度、色
差等で表現されたテクスチャ画像によって表示される。
動画像をフレーム単位で符号化する方式の例は、次の通
りである。 １．ＭＰＥＧ−１ Ｖｉｄｅｏ(ISO/IEC 11172-2,“Inf
ormation technology-Coding of moving pictures and
associated audio for digital storage mediaat up to
about 1.5Mbit/s" 1993) ２．ＭＰＥＧ−２ Ｖｉｄｅｏ(ISO/IEC 13818-2,“Inf
ormation technology-Generic coding of moving pictu
res and associated audio information:Video"1996) ３．Ｈ．２６１(ITU-T Recommendation H.261,“Video
codec for audiovisualservices at px64kbites/s",199
0) ４．Ｈ．２６３(ITU-T Recommendation H.263,“Video
coding for low bitratecommunication",1996)
連続したものである。各々のフレーム画像は、輝度、色
差等で表現されたテクスチャ画像によって表示される。
動画像をフレーム単位で符号化する方式の例は、次の通
りである。 １．ＭＰＥＧ−１ Ｖｉｄｅｏ(ISO/IEC 11172-2,“Inf
ormation technology-Coding of moving pictures and
associated audio for digital storage mediaat up to
about 1.5Mbit/s" 1993) ２．ＭＰＥＧ−２ Ｖｉｄｅｏ(ISO/IEC 13818-2,“Inf
ormation technology-Generic coding of moving pictu
res and associated audio information:Video"1996) ３．Ｈ．２６１(ITU-T Recommendation H.261,“Video
codec for audiovisualservices at px64kbites/s",199
0) ４．Ｈ．２６３(ITU-T Recommendation H.263,“Video
coding for low bitratecommunication",1996)
【０００４】ＭＰＥＧ−１ Ｖｉｄｅｏ又はＭＰＥＧ−
２ Ｖｉｄｅｏで符号化された動画像データを、ＭＰＥ
Ｇ−２ Ｓｙｓｔｅｍｓ(ISO/IEC 13818-1,“Informati
on technology-Generic coding of moving pictures an
d associated audio: Systems",1994) のようなデータ
多重方式によって、ＭＰＥＧ−２ Ａｕｄｉｏ(ISO/IEC
13818-1,“Information technology-Generic coding o
f moving pictures andassociated audio: Systems",19
94) で符号化された音声データやその他のデータと多重
して伝送することができる。
２ Ｖｉｄｅｏで符号化された動画像データを、ＭＰＥ
Ｇ−２ Ｓｙｓｔｅｍｓ(ISO/IEC 13818-1,“Informati
on technology-Generic coding of moving pictures an
d associated audio: Systems",1994) のようなデータ
多重方式によって、ＭＰＥＧ−２ Ａｕｄｉｏ(ISO/IEC
13818-1,“Information technology-Generic coding o
f moving pictures andassociated audio: Systems",19
94) で符号化された音声データやその他のデータと多重
して伝送することができる。
【０００５】また、近年の画像符号化の分野では、ＭＰ
ＥＧ−４ Ｖｉｓｕａｌ(ISO/IEC 14496-2,“Informati
on technology-Generic coding of audio-visual objec
ts-Part 2:Visual", 1999) を代表とするオブジェクト
ベース符号化が注目されている。オブジェクトベース符
号化は、画像を、人物、車、家、背景等のオブジェクト
に分割して、オブジェクト単位で符号化を行うものであ
る。
ＥＧ−４ Ｖｉｓｕａｌ(ISO/IEC 14496-2,“Informati
on technology-Generic coding of audio-visual objec
ts-Part 2:Visual", 1999) を代表とするオブジェクト
ベース符号化が注目されている。オブジェクトベース符
号化は、画像を、人物、車、家、背景等のオブジェクト
に分割して、オブジェクト単位で符号化を行うものであ
る。
【０００６】オブジェクトの映像データは、テクスチャ
情報及び形状情報から構成されている。テクスチャ情報
は、輝度や色差の情報であり、通常はテクスチャ画像と
して表現される。それに対して、形状情報は、オブジェ
クトの形状及び透明度の情報である。なお、オブジェク
トの形状は、通常２値のビットプレーン画像で表現され
るが、透明度を画素値で示した多値の画像で表現される
こともある。
情報及び形状情報から構成されている。テクスチャ情報
は、輝度や色差の情報であり、通常はテクスチャ画像と
して表現される。それに対して、形状情報は、オブジェ
クトの形状及び透明度の情報である。なお、オブジェク
トの形状は、通常２値のビットプレーン画像で表現され
るが、透明度を画素値で示した多値の画像で表現される
こともある。
【０００７】オブジェクトを単位とする符号化の場合、
テクスチャ成分を個々のオブジェクトに分離して符号化
するので、そのオブジェクトに適切な符号化を行うこと
ができる。そのために、フレーム単位に符号化するＭＰ
ＥＧ−２ Ｖｉｄｅｏのような符号化方式に比べて符号
化効率が優れている。また、家、車等の意味を有するオ
ブジェクトを組み合わせて新たな映像シーンを制作でき
るという利点を有する。
テクスチャ成分を個々のオブジェクトに分離して符号化
するので、そのオブジェクトに適切な符号化を行うこと
ができる。そのために、フレーム単位に符号化するＭＰ
ＥＧ−２ Ｖｉｄｅｏのような符号化方式に比べて符号
化効率が優れている。また、家、車等の意味を有するオ
ブジェクトを組み合わせて新たな映像シーンを制作でき
るという利点を有する。
【０００８】
【発明が解決しようとする課題】従来のＨＴＭＬを利用
した画像関連データ表示装置では、矩形の画像が表示さ
れる。人物のように非矩形の画像を表示する場合でも、
人物の背景部分も合わせた矩形の画像が実際に表示され
ている。そのために、種々の情報を有するオブジェクト
が矩形の画像中に存在する場合でも、特定のオブジェク
トを選択してそのオブジェクトに関連したデータのみを
表示することができない。
した画像関連データ表示装置では、矩形の画像が表示さ
れる。人物のように非矩形の画像を表示する場合でも、
人物の背景部分も合わせた矩形の画像が実際に表示され
ている。そのために、種々の情報を有するオブジェクト
が矩形の画像中に存在する場合でも、特定のオブジェク
トを選択してそのオブジェクトに関連したデータのみを
表示することができない。
【０００９】ＨＴＭＬでは、マウスが位置する画像に関
連したテキストのみを表示する。したがって、二つ以上
の画像に関連したテキストを同時に表示することができ
ない。また、ＨＴＭＬでは、静止画像又は繰り返し再生
される動画像を表示するので、複数画像の関連データを
一度に表示する必要がないが、オブジェクトが動画像で
ある場合や関連データが時間とともに変化する場合に
は、複数のオブジェクトを同時に選択することが所望さ
れる。
連したテキストのみを表示する。したがって、二つ以上
の画像に関連したテキストを同時に表示することができ
ない。また、ＨＴＭＬでは、静止画像又は繰り返し再生
される動画像を表示するので、複数画像の関連データを
一度に表示する必要がないが、オブジェクトが動画像で
ある場合や関連データが時間とともに変化する場合に
は、複数のオブジェクトを同時に選択することが所望さ
れる。
【００１０】動画像の符号化方式として例示したＭＰＥ
Ｇ−１ Ｖｉｄｅｏ，ＭＰＥＧ−２Ｖｉｄｅｏ，Ｈ．２
６１及びＨ．２６３は、いずれもフレーム単位の符号化
方式である。そのために、オブジェクト単位の関連デー
タを付加したとしても、指定されたオブジェクトに対応
する関連データのみを表示することができない。
Ｇ−１ Ｖｉｄｅｏ，ＭＰＥＧ−２Ｖｉｄｅｏ，Ｈ．２
６１及びＨ．２６３は、いずれもフレーム単位の符号化
方式である。そのために、オブジェクト単位の関連デー
タを付加したとしても、指定されたオブジェクトに対応
する関連データのみを表示することができない。
【００１１】それに対して、ＭＰＥＧ−４ Ｖｉｓｕａ
ｌは、オブジェクト単位とする符号化方式であり、指定
されたオブジェクトに対応する関連データの表示が可能
となる。しかしながら、この場合には、動画像の符号化
方式がＭＰＥＧ−４ Ｖｉｓｕａｌに限定されるという
不都合がある。また、テクスチャ画像もオブジェクトご
とに分割されており、テクスチャの復号化処理もオブジ
ェクトごとに行われるので、受信側の処理が複雑になる
という不都合がある。
ｌは、オブジェクト単位とする符号化方式であり、指定
されたオブジェクトに対応する関連データの表示が可能
となる。しかしながら、この場合には、動画像の符号化
方式がＭＰＥＧ−４ Ｖｉｓｕａｌに限定されるという
不都合がある。また、テクスチャ画像もオブジェクトご
とに分割されており、テクスチャの復号化処理もオブジ
ェクトごとに行われるので、受信側の処理が複雑になる
という不都合がある。
【００１２】本発明の目的は、動画像の１フレームに存
在する指定したオブジェクトに関連するデータのみを表
示することができる画像関連データ表示装置を提供する
ことである。
在する指定したオブジェクトに関連するデータのみを表
示することができる画像関連データ表示装置を提供する
ことである。
【００１３】
【課題を解決するための手段】本発明による画像関連デ
ータ表示装置は、動画像の１フレームに存在する全ての
オブジェクトのうちの任意のものを指定するオブジェク
ト指定手段と、そのオブジェクト指定手段によって指定
されたオブジェクトを、そのオブジェクトの形状情報に
基づいて特定するオブジェクト特定手段と、そのオブジ
ェクト特定手段によって特定されたオブジェクトに対応
する関連データを選択する関連データ選択手段と、その
関連データ選択手段によって選択された関連データを、
動画像とともに表示する関連データ表示手段とを具える
ことを特徴とするものである。
ータ表示装置は、動画像の１フレームに存在する全ての
オブジェクトのうちの任意のものを指定するオブジェク
ト指定手段と、そのオブジェクト指定手段によって指定
されたオブジェクトを、そのオブジェクトの形状情報に
基づいて特定するオブジェクト特定手段と、そのオブジ
ェクト特定手段によって特定されたオブジェクトに対応
する関連データを選択する関連データ選択手段と、その
関連データ選択手段によって選択された関連データを、
動画像とともに表示する関連データ表示手段とを具える
ことを特徴とするものである。
【００１４】本発明による画像関連データ表示装置によ
れば、オブジェクトの形状情報及び関連データを用い
て、指定されたオブジェクトを特定し、関連データを動
画像とともに表示する。これによって、動画像の１フレ
ームに存在する指定したオブジェクトに関連するデータ
のみを表示することができる。この場合、形状情報は、
オブジェクトを指定するオブジェクト指定手段とその位
置に対応するオブジェクトを結びつけるためにのみ用い
られる。このように形状情報を付加するので、動画像の
符号化をフレーム単位で行う方式である場合でも、フレ
ーム内の個々のオブジェクトに対応した関連データを表
示することができる。
れば、オブジェクトの形状情報及び関連データを用い
て、指定されたオブジェクトを特定し、関連データを動
画像とともに表示する。これによって、動画像の１フレ
ームに存在する指定したオブジェクトに関連するデータ
のみを表示することができる。この場合、形状情報は、
オブジェクトを指定するオブジェクト指定手段とその位
置に対応するオブジェクトを結びつけるためにのみ用い
られる。このように形状情報を付加するので、動画像の
符号化をフレーム単位で行う方式である場合でも、フレ
ーム内の個々のオブジェクトに対応した関連データを表
示することができる。
【００１５】本発明による他の画像関連データ表示装置
は、動画像の１フレームに存在する全てのオブジェクト
の形状情報及び配置情報に基づいて、オブジェクトを識
別する目安を取得するオブジェクト識別目安取得手段
と、前記配置情報を、前記オブジェクトの関連データに
対応させる関連データ対応手段と、前記オブジェクトの
うちの任意のものを指定するオブジェクト指定手段と、
そのオブジェクト指定手段によって指定されたオブジェ
クトを、前記目安に基づいて特定するオブジェクト特定
手段と、そのオブジェクト特定手段によって特定された
オブジェクトに対応する関連データを、前記関連データ
対応手段によって配置情報を対応させた関連データから
選択する関連データ選択手段と、その関連データ選択手
段によって選択された関連データを、動画像とともに表
示する関連データ表示手段とを具えることを特徴とする
ものである。
は、動画像の１フレームに存在する全てのオブジェクト
の形状情報及び配置情報に基づいて、オブジェクトを識
別する目安を取得するオブジェクト識別目安取得手段
と、前記配置情報を、前記オブジェクトの関連データに
対応させる関連データ対応手段と、前記オブジェクトの
うちの任意のものを指定するオブジェクト指定手段と、
そのオブジェクト指定手段によって指定されたオブジェ
クトを、前記目安に基づいて特定するオブジェクト特定
手段と、そのオブジェクト特定手段によって特定された
オブジェクトに対応する関連データを、前記関連データ
対応手段によって配置情報を対応させた関連データから
選択する関連データ選択手段と、その関連データ選択手
段によって選択された関連データを、動画像とともに表
示する関連データ表示手段とを具えることを特徴とする
ものである。
【００１６】本発明による他の画像関連データ表示装置
によれば、オブジェクトの形状情報、配置情報及び関連
データを用いることによって、複数のオブジェクトが複
雑に入り組んだ画像に対しても、指定したオブジェクト
に関連するデータのみを表示することができる。
によれば、オブジェクトの形状情報、配置情報及び関連
データを用いることによって、複数のオブジェクトが複
雑に入り組んだ画像に対しても、指定したオブジェクト
に関連するデータのみを表示することができる。
【００１７】前記配置情報を、例えば、前記オブジェク
トを表示する座標及び前記オブジェクトを配置する順番
を設定した情報とする。また、前記関連データが、例え
ば、画像、音声及びテキストを有する。さらに、前記形
状情報を、例えば、２値のビットプレーン画像又は透明
度を画素値とする複数値の画像で表現する。
トを表示する座標及び前記オブジェクトを配置する順番
を設定した情報とする。また、前記関連データが、例え
ば、画像、音声及びテキストを有する。さらに、前記形
状情報を、例えば、２値のビットプレーン画像又は透明
度を画素値とする複数値の画像で表現する。
【００１８】
【発明の実施の形態】本発明による画像関連データ表示
装置の実施の形態を、図面を参照して詳細に説明する。
図１は、本発明による画像関連データ表示装置の実施の
形態を示す図である。この画像関連データ表示装置は、
オブジェクト識別目安取得部１と、関連データ対応部２
と、オブジェクト指定部３と、オブジェクト特定部４
と、関連データ選択部５と、関連データ表示部６と、動
画像表示部７とを具える。
装置の実施の形態を、図面を参照して詳細に説明する。
図１は、本発明による画像関連データ表示装置の実施の
形態を示す図である。この画像関連データ表示装置は、
オブジェクト識別目安取得部１と、関連データ対応部２
と、オブジェクト指定部３と、オブジェクト特定部４
と、関連データ選択部５と、関連データ表示部６と、動
画像表示部７とを具える。
【００１９】オブジェクト識別目安取得部１は、動画像
の１フレームに存在する全てのオブジェクトの形状情報
及び配置情報が入力され、オブジェクトの識別番号を画
素値とした１枚の識別画像（以下、「オブジェクト識別
画像」と称する。）を目安として出力する。
の１フレームに存在する全てのオブジェクトの形状情報
及び配置情報が入力され、オブジェクトの識別番号を画
素値とした１枚の識別画像（以下、「オブジェクト識別
画像」と称する。）を目安として出力する。
【００２０】本実施の形態において、配置情報を、オブ
ジェクトを表示する座標及びオブジェクトを配置する順
番を設定した情報とする。これは、オブジェクトからフ
レーム画像を構成する際に用いられる情報である。オブ
ジェクト識別目安取得部１は、新たなフレームが入力さ
れる度にオブジェクト識別画像を更新する。
ジェクトを表示する座標及びオブジェクトを配置する順
番を設定した情報とする。これは、オブジェクトからフ
レーム画像を構成する際に用いられる情報である。オブ
ジェクト識別目安取得部１は、新たなフレームが入力さ
れる度にオブジェクト識別画像を更新する。
【００２１】ここで、２個のオブジェクト形状が入力さ
れたときにオブジェクト識別画像を導出する場合を、３
×３画素の画像について図２を用いて説明する。本実施
の形態では、個々の形状情報を２値のビットパターン画
像で表現するものとする。図２に示す２個のオブジェク
ト形状（オブジェクトＡ，Ｂ）において、画素値１で示
した部分についてはオブジェクト形状に属する画素を表
しており、それに対して、斜線を付した画素値０で示し
た部分についてはオブジェクト形状以外の画素を示して
いる。オブジェクトＡは、画像の中央及びその右隣の画
素を有するオブジェクトであり、オブジェクトＢは、画
像の中央の画素以外の全ての画素を有するオブジェクト
である。
れたときにオブジェクト識別画像を導出する場合を、３
×３画素の画像について図２を用いて説明する。本実施
の形態では、個々の形状情報を２値のビットパターン画
像で表現するものとする。図２に示す２個のオブジェク
ト形状（オブジェクトＡ，Ｂ）において、画素値１で示
した部分についてはオブジェクト形状に属する画素を表
しており、それに対して、斜線を付した画素値０で示し
た部分についてはオブジェクト形状以外の画素を示して
いる。オブジェクトＡは、画像の中央及びその右隣の画
素を有するオブジェクトであり、オブジェクトＢは、画
像の中央の画素以外の全ての画素を有するオブジェクト
である。
【００２２】オブジェクトＡ，Ｂにはオブジェクト識別
番号がそれぞれ割り当てられる。例えば、配置情報に基
づいて、最も前に位置するオブジェクトから１，
２，．．．と順番に割り当てる。図２の場合、オブジェ
クトＡが前景であり、オブジェクトＢが背景であると配
置情報に設定されており、オブジェクトＡ，Ｂにオブジ
ェクト識別番号１及び２をそれぞれ割り当てる。これら
オブジェクト識別番号を用いて、オブジェクト形状の画
素値を識別番号とする。具体的には、２値のビットプレ
ーン画像の各画素にオブジェクト識別番号を乗算する。
図２において、オブジェクトＡは、０及び１の画素値を
有する画像となり、オブジェクトＢは、０及び２の画素
値を有する画像となる。このようにして、オブジェクト
Ａ，Ｂの各々に対して、オブジェクト識別番号及び０を
画素値とするオブジェクト識別画像を構成することがで
きる。
番号がそれぞれ割り当てられる。例えば、配置情報に基
づいて、最も前に位置するオブジェクトから１，
２，．．．と順番に割り当てる。図２の場合、オブジェ
クトＡが前景であり、オブジェクトＢが背景であると配
置情報に設定されており、オブジェクトＡ，Ｂにオブジ
ェクト識別番号１及び２をそれぞれ割り当てる。これら
オブジェクト識別番号を用いて、オブジェクト形状の画
素値を識別番号とする。具体的には、２値のビットプレ
ーン画像の各画素にオブジェクト識別番号を乗算する。
図２において、オブジェクトＡは、０及び１の画素値を
有する画像となり、オブジェクトＢは、０及び２の画素
値を有する画像となる。このようにして、オブジェクト
Ａ，Ｂの各々に対して、オブジェクト識別番号及び０を
画素値とするオブジェクト識別画像を構成することがで
きる。
【００２３】このようにして構成されたオブジェクト識
別画像は、オブジェクト識別目安取得部１から出力され
る。具体的には、最も前に位置するオブジェクトをベー
スにして、オブジェクト形状の画素値が０になる部分
に、そのオブジェクトの次に位置するオブジェクトの画
素値を当てはめる。このような手順によって、最も前に
位置する画像から最も後ろに位置する画像（背景）に至
るまで逐次合成して、オブジェクト識別画像が構成され
る。
別画像は、オブジェクト識別目安取得部１から出力され
る。具体的には、最も前に位置するオブジェクトをベー
スにして、オブジェクト形状の画素値が０になる部分
に、そのオブジェクトの次に位置するオブジェクトの画
素値を当てはめる。このような手順によって、最も前に
位置する画像から最も後ろに位置する画像（背景）に至
るまで逐次合成して、オブジェクト識別画像が構成され
る。
【００２４】図２について説明すると、オブジェクト
Ａ，Ｂは共に中央の右隣の画素を有する。しかしなが
ら、配置情報によってオブジェクトＡがオブジェクトＢ
の前に位置するので、オブジェクト識別画像において、
中央の右隣の画素は１の画素値を有する。背景もオブジ
ェクトの一つと仮定する場合、全ての画素がいずれか１
個のオブジェクトに属することになる。
Ａ，Ｂは共に中央の右隣の画素を有する。しかしなが
ら、配置情報によってオブジェクトＡがオブジェクトＢ
の前に位置するので、オブジェクト識別画像において、
中央の右隣の画素は１の画素値を有する。背景もオブジ
ェクトの一つと仮定する場合、全ての画素がいずれか１
個のオブジェクトに属することになる。
【００２５】一方、関連データ対応部２は、画像、音声
及びテキストから構成した関連データをオブジェクトご
とに取得する。この際、配置情報を基にして、オブジェ
クト識別番号と関連データとの対応をとる。
及びテキストから構成した関連データをオブジェクトご
とに取得する。この際、配置情報を基にして、オブジェ
クト識別番号と関連データとの対応をとる。
【００２６】次に、これら形状情報及び配置情報に基づ
いて、関連データを動画像とともに表示する手順を説明
する。
いて、関連データを動画像とともに表示する手順を説明
する。
【００２７】オブジェクト指定部３は、マウスやリモー
トコントローラのようなポインタ装置によって指定され
たオブジェクトの座標値を出力する。オブジェクトの指
定を、例えば、ポインタ装置によって画面上のオブジェ
クトを直接選択し又は画面の一部に表示させたアイコン
で選択することによって行う。この際、オブジェクトを
連続的に選択することによって、任意の個数のオブジェ
クトを同時に選択することができる。
トコントローラのようなポインタ装置によって指定され
たオブジェクトの座標値を出力する。オブジェクトの指
定を、例えば、ポインタ装置によって画面上のオブジェ
クトを直接選択し又は画面の一部に表示させたアイコン
で選択することによって行う。この際、オブジェクトを
連続的に選択することによって、任意の個数のオブジェ
クトを同時に選択することができる。
【００２８】次いで、オブジェクト特定部４は、オブジ
ェクト指定部３から出力された座標値及びオブジェクト
識別目安取得部１から出力されたオブジェクト識別画像
が入力され、指定されたオブジェクトを特定し、そのオ
ブジェクト識別番号を出力する。ポインタ装置によって
直接指定した場合には、ポインタ装置の示す位置に対応
するオブジェクト識別画像の画素値を読み出す。その画
素値がオブジェクト識別番号と一致しているので、オブ
ジェクト特定部４は画素値を出力するだけでよい。アイ
コン等で指定した場合でも、アイコン位置のオブジェク
ト識別画像の画素値をオブジェクト識別番号と一致させ
ることによって、同様の処理を適用することができる。
ェクト指定部３から出力された座標値及びオブジェクト
識別目安取得部１から出力されたオブジェクト識別画像
が入力され、指定されたオブジェクトを特定し、そのオ
ブジェクト識別番号を出力する。ポインタ装置によって
直接指定した場合には、ポインタ装置の示す位置に対応
するオブジェクト識別画像の画素値を読み出す。その画
素値がオブジェクト識別番号と一致しているので、オブ
ジェクト特定部４は画素値を出力するだけでよい。アイ
コン等で指定した場合でも、アイコン位置のオブジェク
ト識別画像の画素値をオブジェクト識別番号と一致させ
ることによって、同様の処理を適用することができる。
【００２９】次いで、関連データ選択部５は、オブジェ
クト特定部４から出力されたオブジェクト識別番号及び
関連データ対応部２から出力された関連データが入力さ
れ、オブジェクト指定部３によって指定されたオブジェ
クトの関連データを出力する。
クト特定部４から出力されたオブジェクト識別番号及び
関連データ対応部２から出力された関連データが入力さ
れ、オブジェクト指定部３によって指定されたオブジェ
クトの関連データを出力する。
【００３０】最後に、関連データ表示部６は、関連デー
タ選択部５から出力された関連データ及び動画像表示部
７の画像や音声が入力され、指定したオブジェクトに該
当する関連データを動画像と共に出力し及び表示する。
タ選択部５から出力された関連データ及び動画像表示部
７の画像や音声が入力され、指定したオブジェクトに該
当する関連データを動画像と共に出力し及び表示する。
【００３１】動画像表示部７は、映像及び音声から構成
した動画像データを受信し及び表示する機能を有し、典
型的にはテレビジョン放送の受信機とする。
した動画像データを受信し及び表示する機能を有し、典
型的にはテレビジョン放送の受信機とする。
【００３２】関連データを、映像、音声、テキスト等の
データ形式に合致した形態で表示する。関連データが映
像やテキストの場合、動画像を表示している画面の一部
に表示する。関連データ用の窓領域を画面上に予め確保
し、そこに表示することもできる。それに対して、関連
データが音声の場合、動画像と共に伝送される音声と合
成して再生する。
データ形式に合致した形態で表示する。関連データが映
像やテキストの場合、動画像を表示している画面の一部
に表示する。関連データ用の窓領域を画面上に予め確保
し、そこに表示することもできる。それに対して、関連
データが音声の場合、動画像と共に伝送される音声と合
成して再生する。
【００３３】本実施の形態によれば、オブジェクトの形
状情報、配置情報及び関連データを用いることによっ
て、複数のオブジェクトが複雑に入り組んだ画像に対し
ても、指定したオブジェクトに関連するデータのみを表
示することができる。
状情報、配置情報及び関連データを用いることによっ
て、複数のオブジェクトが複雑に入り組んだ画像に対し
ても、指定したオブジェクトに関連するデータのみを表
示することができる。
【００３４】本発明は、上記実施の形態に限定されるも
のではなく、幾多の変更及び変形が可能である。例え
ば、関連データは、画像、音声、テキストのうちの少な
くとも１個を有すればよい。また、形状情報を、２値の
ビットプレーン画像の代わりに、透明度を画素値とする
複数値の画像で表現することもできる。さらに、形状情
報及び関連データのみを用いて、動画像の１フレームに
存在する指定したオブジェクトに関連するデータのみを
表示することもできる。
のではなく、幾多の変更及び変形が可能である。例え
ば、関連データは、画像、音声、テキストのうちの少な
くとも１個を有すればよい。また、形状情報を、２値の
ビットプレーン画像の代わりに、透明度を画素値とする
複数値の画像で表現することもできる。さらに、形状情
報及び関連データのみを用いて、動画像の１フレームに
存在する指定したオブジェクトに関連するデータのみを
表示することもできる。
【図１】 本発明による画像関連データ表示装置及び方
法の実施の形態を示す図である。
法の実施の形態を示す図である。
【図２】 図１のオブジェクト形状取得部の動作を説明
するための図である。
するための図である。
１ オブジェクト識別目安取得部 ２ 関連データ対応部 ３ オブジェクト指定部 ４ オブジェクト特定部 ５ 関連データ選択部 ６ 関連データ表示部 ７ 動画像表示部
フロントページの続き (72)発明者 金子 豊 東京都世田谷区砧１丁目10番11号 日本放 送協会 放送技術研究所内 (72)発明者 鹿喰 善明 東京都世田谷区砧１丁目10番11号 日本放 送協会 放送技術研究所内 Ｆターム(参考） 5E501 AB06 AC33 BA05 CA02 CB09 CC02 DA04 EB05 EB06 FA04 FB29
Claims (5)
- 【請求項１】 動画像の１フレームに存在する全てのオ
ブジェクトのうちの任意のものを指定するオブジェクト
指定手段と、 そのオブジェクト指定手段によって指定されたオブジェ
クトを、そのオブジェクトの形状情報に基づいて特定す
るオブジェクト特定手段と、 そのオブジェクト特定手段によって特定されたオブジェ
クトに対応する関連データを選択する関連データ選択手
段と、 その関連データ選択手段によって選択された関連データ
を、動画像とともに表示する関連データ表示手段とを具
えることを特徴とする画像関連データ表示装置。 - 【請求項２】 動画像の１フレームに存在する全てのオ
ブジェクトの形状情報及び配置情報に基づいて、オブジ
ェクトを識別する目安を取得するオブジェクト識別目安
取得手段と、 前記配置情報を、前記オブジェクトの関連データに対応
させる関連データ対応手段と、 前記オブジェクトのうちの任意のものを指定するオブジ
ェクト指定手段と、 そのオブジェクト指定手段によって指定されたオブジェ
クトを、前記目安に基づいて特定するオブジェクト特定
手段と、 そのオブジェクト特定手段によって特定されたオブジェ
クトに対応する関連データを、前記関連データ対応手段
によって配置情報を対応させた関連データから選択する
関連データ選択手段と、 その関連データ選択手段によって選択された関連データ
を、動画像とともに表示する関連データ表示手段とを具
えることを特徴とする画像関連データ表示装置。 - 【請求項３】 前記配置情報を、前記オブジェクトを表
示する座標及び前記オブジェクトを配置する順番を設定
した情報としたことを特徴とする請求項２記載の画像関
連データ表示装置。 - 【請求項４】 前記関連データが、画像、音声及びテキ
ストを有することを特徴とする請求項１から３のうちの
いずれか１項に記載の画像関連データ表示装置。 - 【請求項５】 前記形状情報を、２値のビットプレーン
画像又は透明度を画素値とする複数値の画像で表現した
ことを特徴とする請求項１から４のうちのいずれか１項
に記載の画像関連データ表示装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000147154A JP2001331246A (ja) | 2000-05-19 | 2000-05-19 | 画像関連データ表示装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000147154A JP2001331246A (ja) | 2000-05-19 | 2000-05-19 | 画像関連データ表示装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001331246A true JP2001331246A (ja) | 2001-11-30 |
Family
ID=18653369
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000147154A Pending JP2001331246A (ja) | 2000-05-19 | 2000-05-19 | 画像関連データ表示装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001331246A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102156658A (zh) * | 2010-02-26 | 2011-08-17 | 微软公司 | 对象的低等待时间呈现 |
-
2000
- 2000-05-19 JP JP2000147154A patent/JP2001331246A/ja active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102156658A (zh) * | 2010-02-26 | 2011-08-17 | 微软公司 | 对象的低等待时间呈现 |
| CN102156658B (zh) * | 2010-02-26 | 2015-06-17 | 微软公司 | 对象的低等待时间呈现 |
| US9400695B2 (en) | 2010-02-26 | 2016-07-26 | Microsoft Technology Licensing, Llc | Low latency rendering of objects |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7469064B2 (en) | Image display apparatus | |
| US6205260B1 (en) | Sprite-based video coding system with automatic segmentation integrated into coding and sprite building processes | |
| US6559846B1 (en) | System and process for viewing panoramic video | |
| US6104425A (en) | Method and apparatus for transmitting television signals, method and apparatus for receiving television signals, and method and apparatus for transmitting/receiving television signals | |
| JP3177221B2 (ja) | 興味深いシーンのイメージを表示するための方法及び装置 | |
| US6810403B2 (en) | Visual database system for storing data with time codes | |
| JP2005500721A (ja) | Ｖｔｖシステム | |
| US8004542B2 (en) | Video composition apparatus, video composition method and video composition program | |
| JP4519531B2 (ja) | 画像表示装置、画像表示方法およびプログラム | |
| KR20040054416A (ko) | 정지영상 이미지 처리방법 | |
| JP2005500721A5 (ja) | ||
| US20040109014A1 (en) | Method and system for displaying superimposed non-rectangular motion-video images in a windows user interface environment | |
| US20060109908A1 (en) | Method of retrieving video picture and apparatus therefor | |
| CN102714747A (zh) | 立体视频图形覆盖 | |
| CN103984778A (zh) | 一种视频检索方法及系统 | |
| CN113225587B (zh) | 视频处理方法、视频处理装置及电子设备 | |
| US7936936B2 (en) | Method of visualizing a large still picture on a small-size display | |
| JP2007515891A (ja) | 画像フォーマット変換 | |
| JP2007087023A (ja) | 情報処理装置 | |
| JP2001331246A (ja) | 画像関連データ表示装置 | |
| JP2016158279A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| US6341294B1 (en) | Image processing apparatus for retrieving moving image data | |
| JP4616153B2 (ja) | データ通信装置、データ通信方法およびデータ通信プログラム | |
| JP6110592B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| JP2001008231A (ja) | ３次元空間における物体の多視点画像伝送方法及びシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050510 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070713 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070724 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070920 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20070920 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080108 |