JP6288476B2 - 映像受信装置、及び、映像受信装置における情報表示制御方法 - Google Patents

Description

本発明は、映像受信装置、及び、映像受信装置における情報表示制御方法に関する。

特許文献１は、映像放送から取得する映像情報に対して文字認識を行うことにより、検索可能なインデックスを作成する映像再生端末を開示する。ユーザは、この映像再生端末により、映像の中から希望するシーンを検索して視聴することができる。

特開２００６−３４０１３６号公報

本開示は、ユーザが選択しやすい検索項目を提示する映像受信装置を提供する。

本開示における映像受信装置は、映像コンテンツを受信する受信部と、前記映像コンテンツを解析することで、前記映像コンテンツの一部である部分コンテンツを抽出し、抽出した前記部分コンテンツの前記映像コンテンツ内における特徴を取得する抽出部と、前記部分コンテンツから、前記部分コンテンツを示す文字又は画像を含む情報である構成情報を生成する情報生成部と、前記部分コンテンツから取得された前記特徴に基づいて、前記映像コンテンツと、前記部分コンテンツから生成された前記構成情報との関連の大きさを示す優先度を前記構成情報に対して決定する優先度決定部と、前記構成情報に対して前記優先度決定部が決定した前記構成情報の優先度に応じて、前記構成情報の表示画面への表示を制御する表示制御部とを備える。

本開示における映像受信装置は、ユーザが選択しやすい検索項目を提示するのに有効である。

図１は、実施の形態における映像受信装置の機能ブロック図である。 図２は、実施の形態における部分コンテンツの抽出の説明図である。 図３は、実施の形態における部分コンテンツの特徴量の説明図である。 図４は、実施の形態における構成情報の説明図である。 図５は、実施の形態における優先度の決定方法の第一の説明図である。 図６は、実施の形態における優先度の決定方法の第二の説明図である。 図７は、実施の形態における優先度の決定方法の第三の説明図である。 図８は、実施の形態における優先度の決定方法の第四の説明図である。 図９は、実施の形態における優先度の決定方法の第五の説明図である。 図１０は、実施の形態における構成情報の表示の説明図である。 図１１は、実施の形態における映像受信装置による構成情報の表示方法を示すフローチャートである。

以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。

なお、発明者らは、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって請求の範囲に記載の主題を限定することを意図するものではない。

（実施の形態）
以下、図１〜１１を用いて、本実施の形態を説明する。

［１−１．構成］
図１は、本実施の形態における映像受信装置の機能ブロック図である。

図１に示されるように、映像受信装置１は、受信部１０１と、抽出部１０２と、情報生成部１０３と、通信部１０４と、優先度決定部１０５と、記憶部１０６と、表示制御部１０７とを備える。

受信部１０１は、映像コンテンツを受信する。ここで、映像コンテンツは、地上放送若しくはＩＰ（Internet Protocol）放送などにより配信されたコンテンツ、又は、記録メディアに記録されたコンテンツなどを含む。映像コンテンツは、映像を含み、さらに、音声又は当該映像コンテンツのジャンルを示す情報を有するメタ情報を含んでもよい。受信部１０１は、地上放送を受信するためのアンテナ及び受信回路、ＩＰ放送などを受信するための通信インタフェースを用いて映像コンテンツを受信する。

抽出部１０２は、受信部１０１が受信した映像コンテンツを解析することで、映像コンテンツの一部である部分コンテンツを抽出する。そして、抽出した部分コンテンツの特徴を取得する。部分コンテンツとは、映像コンテンツに含まれる画像内において人物などのオブジェクトが表示された領域の画像（オブジェクト画像）、映像コンテンツに含まれる画像内において文字が表示された領域に対応する画像（文字領域画像）、映像コンテンツに含まれる音声、又は、映像コンテンツに含まれるメタ情報のことである。また、特徴とは、部分コンテンツの当該映像コンテンツ内における特徴を示し、この特徴を数値により示すものを特徴量とよぶ。

具体的には、部分コンテンツがオブジェクト画像である場合には、特徴量は、画像内での部分コンテンツの表示サイズ（表示の大きさ）又は表示位置のことである。すなわち、抽出部１０２は、オブジェクト画像の、画像内における表示サイズ、および表示位置のうち少なくとも１つを特徴（特徴量）として取得する。

また、部分コンテンツが文字領域画像である場合には、特徴量は、画像内での部分コンテンツの表示サイズ（表示の大きさ）、表示位置、又は表示色のことである。すなわち、抽出部１０２は、文字領域画像の画像内における表示位置、表示色、および文字の大きさのうち少なくとも１つを特徴（特徴量）として取得する。

また、部分コンテンツが音声である場合には、特徴量は、音声の音圧（音量）、音程、又は、テンポのことである。すなわち、抽出部１０２は、音声の音圧（音量）、音程、又は、テンポのうち少なくとも１つを特徴（特徴量）として取得する。部分コンテンツと特徴量とについては、後で詳細に説明する。

情報生成部１０３は、抽出部１０２が抽出した部分コンテンツから、部分コンテンツを示す情報であって、文字又は画像を含む情報である構成情報を生成する。具体的には、部分コンテンツがオブジェクト画像である場合には、構成情報は、当該オブジェクト画像に対応する人物の氏名若しくは略称、又は、オブジェクト画像そのものである。また、部分コンテンツが文字領域画像である場合には、構成情報は、当該文字領域画像に表示される文字（文字列）である。また、部分コンテンツとして音声を用いる場合には、構成情報は、当該音声を変換した文字（文字列）である。

なお、オブジェクト画像を当該オブジェクト画像に対応する人物の氏名などに変換するには、外部の検索装置（例えば、インターネット上の検索サイト）を用いた画像検索のような既存の技術を用いることができる。この場合、情報生成部１０３は、通信部１０４を介して検索装置と通信を行うことより、検索項目（検索対象）と検索結果とをやりとりする。つまり、情報生成部１０３は、オブジェクト画像を通信部１０４を介して検索装置に送信し、その応答として検索装置が送信する検索結果（氏名又は略称など）を通信部１０４を介して受信する。なお、文字領域画像又は音声から文字（文字列）を取得することは、公知の文字認識技術又は音声認識技術により当該文字領域画像又は音声に含まれる文章を認識した後に、当該文章に対して形態素解析技術を適用することで当該文章を文字（文字列）に分解することで実現される。

通信部１０４は、通信ネットワークを介して外部の通信装置と通信するためのインタフェースであり、情報生成部１０３が検索装置と通信する際に使われる。通信部１０４は、情報生成部１０３からオブジェクト画像を受け取ると、それを通信ネットワークに送信できる形式のデータに変換して通信ネットワークに送信する。また、通信部１０４は、通信ネットワークから検索結果を受け取ると、それを情報生成部１０３に転送する。なお、上記通信ネットワークには、公衆電話回線、携帯電話回線、衛星通信回線或いはデータ通信回線などを含む通信ネットワーク、メトロネットワーク、企業内ネットワーク、又は、家庭内ネットワークなどあらゆる形態の通信ネットワークが含まれる。

優先度決定部１０５は、部分コンテンツから抽出された特徴に基づいて、映像コンテンツと、部分コンテンツから生成された構成情報との関連の大きさを示す優先度を構成情報に対して決定する。優先度について、以下で具体的に説明する。

特徴量としてオブジェクト画像又は文字領域画像の表示サイズを用いる場合、優先度決定部１０５は、表示サイズが大きいほど、当該オブジェクト画像又は文字領域画像から変換された構成情報の優先度をより高い値（より高い優先度を示す値）に決定する。また、特徴量としてオブジェクト画像又は文字領域画像の表示位置を用いる場合、優先度決定部１０５は、表示位置が画像内の中央に近いほど、当該オブジェクト画像又は文字領域画像から変換された構成情報の優先度をより高い値に決定する。また、優先度決定部１０５は、画像内の所定の領域と、当該領域に対する優先度とを対応付けて示すテンプレートに基づいて優先度を決定することもできる。テンプレートに基づいた優先度の決定方法については、後で詳しく説明する。

また、特徴量として文字領域画像の文字の表示色を用いる場合、優先度決定部１０５は、表示色が周囲の画像の表示色との色又は輝度の差が大きいほど、当該文字領域画像から変換された構成情報の優先度をより高い値に決定する。なお、特徴量として文字領域画像の文字の表示色を用いる場合、文字を表示する用途で通常多く用いられる色（例えば、黒色又は白色）で表示された文字領域画像から変換された構成情報の優先度をより低い値に決定し、通常多く用いられる色と異なる色（例えば、赤色又は黄色）で表示された文字領域画像から変換された構成情報の優先度をより高い値に決定するようにしてもよい。

また、特徴量として音声の音圧（音量）を用いる場合、優先度決定部１０５は、音圧が大きいほど、当該音声から変換された構成情報の優先度をより高い値に決定する。また、特徴量として音声の音程を用いる場合、優先度決定部１０５は、音程が高いほど、当該音声から変換された構成情報の優先度をより高い値に決定する。また、特徴量として音声のテンポを用いる場合、優先度決定部１０５は、テンポがゆっくりであるほど、当該音声から変換された構成情報の優先度をより高い値に決定する。また、優先度決定部は、単語同士の関連（関連語辞書）に基づいて、構成情報の優先度を決定することもできる。

なお、優先度に、ユーザの好みを反映してもよい。つまり、映像受信装置１が、ユーザの好みを示す情報、例えば、ユーザが好む映像コンテンツのジャンル、又は、ユーザが好むものを示す単語を保持しており、優先度決定部１０５は、構成情報の中でユーザの好みを示す情報に一致又は関連するものの優先度をより高い値に決定することもできる。

なお、構成情報の優先度は、他の構成情報に対する相対的な度合いを示す量であってよい。また、優先度は、上記のような複数の優先度決定方法のそれぞれにおいて数値で示した後にそれらの数値を足し合わせて算出してもよい。この場合には、構成情報の優先度は、他の構成情報に対する相対的な度合いではなく、構成情報に対して定まる値になる。なお、優先度は、映像コンテンツと、部分コンテンツから生成された構成情報との関連の大きさを示すものであるので、関連度とよぶこともできる。

記憶部１０６は、優先度決定部１０５が利用するテンプレート、ユーザの好みを示す情報、及び関連語辞書を格納するためのメモリである。記憶部１０６は、優先度決定部１０５が優先度を決定するのに用いるものを必要に応じて記憶している。なお、記憶部１０６は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）又はフラッシュメモリ等の不揮発性の記録媒体により実現される。

表示制御部１０７は、構成情報に対して優先度決定部１０５が決定した優先度に応じて、構成情報の表示画面への表示を制御する。具体的には、表示制御部１０７は、優先度が高い構成情報ほど、表示画面の上部に表示させる。また、表示制御部１０７は、優先度が高い構成情報ほど、大きな文字で表示画面に表示させてもよい。また、表示制御部１０７は、優先度が高い構成情報ほど、ユーザにより強く認識される表示色（赤又は黄色など）で表示させてもよいし、より濃い色で表示させてもよい。また、表示制御部１０７は、優先度が高いほうから所定数の構成情報だけを表示画面に表示させ、残りの構成情報を表示画面に表示させないようにしてもよい。なお、表示画面は、映像受信装置１の外部にあるものであってもよいし、映像受信装置１が表示部（不図示）として有してもよい。

ユーザは、表示画面に表示された構成情報を閲覧し、興味をもった構成情報を指定すると、指定した構成情報に関する詳細情報（例えば、指定した構成情報を検索装置で検索した場合の検索結果）を知ることができる。仮に、単に複数の構成情報が表示されると、ユーザは、複数の構成情報のうちのどれが映像コンテンツの内容に関連が大きいのかを知ることができない。本実施の形態に係る映像受信装置は、複数の構成情報とともに、構成情報のそれぞれの優先度をユーザに提示することができる。ユーザは、優先度が高い構成情報を知ることができ、その後、必要に応じて当該構成情報の詳細情報を取得する行動を行うことができる。

なお、受信部１０１と、抽出部１０２と、情報生成部１０３と、通信部１０４と、優先度決定部１０５と、表示制御部１０７とのそれぞれは、例えば、プログラム（アプリケーションプログラム等）を格納しているＲＯＭ（Read Only Memory）等の不揮発性メモリ、そのプログラムを実行するＣＰＵ（Central Processing Unit）、及び、ＣＰＵによる実行時の一時的な作業領域としてのＲＡＭ（Random Access Memory）等により実現される。さらに、通信部１０４が行う外部の装置との通信は、通信インタフェース（ＩＥＥＥ８０２．３規格等に適合する有線ＬＡＮ、ＩＥＥＥ８０２．１１ａ、ｂ、ｇ規格等に適合する無線ＬＡＮなど）により実現される。

図２は、本実施の形態における部分コンテンツの抽出の説明図である。図２に示される画像２０１は、映像コンテンツに含まれる画像の一例である。画像２０１には、オブジェクトである人物（顔）の画像と、人物の氏名及び説明のための文字列とが含まれている。以下で、抽出部１０２が、画像２０１から部分コンテンツを抽出する方法を説明する。

抽出部１０２は、画像２０１のうち、オブジェクトを含む部分（オブジェクト画像）、及び文字を含む部分（文字領域画像）を部分コンテンツとして抽出する。ここで、オブジェクトを含む部分とは、オブジェクトと、当該オブジェクトの近傍の画像とを含む画像のことである。文字を含む部分に対しても同様である。人物（顔）の画像の抽出には、公知の技術（例えば、画像の中から、目、鼻、口、又は、輪郭のなどの顔の特徴的な部分を検出することで顔を認識する顔認識技術）を用いることができる。また、文字列の抽出には、公知の技術（例えば、画像を構成する画素の色を２値化することにより、文字を含む領域と、それ以外の領域とを分離する文字領域検出技術）を用いることができる。このようにして、抽出部１０２は、画像２０１に含まれるオブジェクト画像２１１と、文字領域画像２１２、２１３及び２１４とを部分コンテンツとして抽出する。

なお、ここでは、抽出部１０２が映像コンテンツに含まれる画像から、オブジェクト画像と文字領域画像とを部分コンテンツとして抽出することを説明した。映像コンテンツが音声を含む場合、抽出部１０２は、当該映像コンテンツから音声を分離することで、部分コンテンツである音声を抽出することができる。

図３は、本実施の形態における部分コンテンツの特徴量の説明図である。図３には、図２において抽出部１０２が抽出した部分コンテンツのそれぞれについて、部分コンテンツの種別と、画像内での表示位置と、表示の大きさとを示す表３０１が示されている。

抽出部１０２は、抽出した部分コンテンツ（オブジェクト画像２１１と、文字領域画像２１２〜２１４）のそれぞれについて、画像内での表示位置と、表示の大きさとを取得する。さらに、抽出部１０２は、部分コンテンツである文字領域画像２１２〜２１４のそれぞれについて、文字の大きさを取得する。表示位置は、部分コンテンツの画像内での位置を一意に示す情報であればよく、例えば、表示位置は、部分コンテンツの左上隅の座標を用いることができる。以下では、表示位置として部分コンテンツの左上隅の座標を用いることとして説明する。つまり、オブジェクト画像２１１の表示位置は、オブジェクト画像２１１の左上隅の座標である（６００，０）である。また、同様にして、文字領域画像２１２の表示位置は、（１００，０）である。

表示の大きさは、部分コンテンツの画像内での大きさを一意に示す情報であればよく、例えば、部分コンテンツの横方向の幅と、縦方向の幅とを用いることができる。以下では、表示の大きさとして横方向の幅と、縦方向の幅とを用いることとして説明する。つまり、オブジェクト画像２１１の表示の大きさは、（６００，４００）である。また、同様にして、文字領域画像２１２の表示の大きさは、（５００，２００）である。

文字の大きさは、文字領域内の文字の大きさを一意に示す情報であればよく、例えば、文字のフォントサイズを用いることができる。以下では、表示の大きさとしてフォントサイズを用いることとして説明する。つまり、文字領域画像２１２の文字の大きさは、４０である。また、同様にして、文字領域画像２１３の文字の大きさは、５０である。

図４は、本実施の形態における構成情報の説明図である。

図４には、図２において抽出部１０２が抽出した部分コンテンツのそれぞれについての構成情報を示す表４０１が示されている。

情報生成部１０３は、抽出部１０２が抽出した部分コンテンツを、部分コンテンツを示す情報であって、文字又は画像を含む情報である構成情報に変換する。具体的には、情報生成部１０３は、部分コンテンツの１つとして抽出されたオブジェクト画像４１１（オブジェクト画像２１１と同一）を、構成情報とする。次に、オブジェクト画像２１１から画像検索によって変換された文字列４１２を、構成情報に加える。同様に、情報生成部１０３は、部分コンテンツの別の１つとして抽出された文字領域画像２１２から、当該文字領域画像２１２に含まれている文字列４１２を、構成情報とする。なお、画像検索によって変換された文字列４１２は、複数あってもよい。また、オブジェクト画像４１１と文字列４１２とを統合して、１つの構成情報として扱ってもよい。

図５は、本実施の形態における優先度の決定方法の第一の説明図である。図５を参照しながら、優先度決定部１０５による文字サイズに基づいた優先度の決定方法について説明する。

図５の（ａ）に示される画像２０１は、部分コンテンツとして文字領域画像２１２、２１３及び２１４を含む。優先度決定部１０５は、それぞれの文字領域画像の文字の大きさに基づいて、文字の大きさが大きいほど、当該文字領域画像の構成情報の優先度をより高く決定する。ここでは、文字領域画像２１２、２１３及び２１４の文字の大きさが、それぞれ４０、５０及び２０であるので、優先度決定部１０５は、文字領域画像２１２、２１３及び２１４の構成情報の優先度を、それぞれ優先度２、１及び３と決定する。ここでは、数値が小さいほど高い優先度を示すとする。

同様に、優先度決定部１０５は、図５の（ｂ）に示される画像５０２に含まれる文字領域画像５２１及び５２２の構成情報の優先度を、それぞれ、優先度２及び１と決定する。

図６は、本実施の形態における優先度の決定方法の第二の説明図である。図６を参照しながら、優先度決定部１０５による表示位置に基づいた優先度の決定方法について説明する。

図６の（ａ）に示される画像６０１は、部分コンテンツとして文字領域画像６１１及び６１２を含む。優先度決定部１０５は、それぞれの文字領域画像の表示位置に基づいて、表示位置が画面中央に近いほど、当該文字領域画像の構成情報の優先度をより高く決定する。ここでは、文字領域画像６１１の表示位置は、文字領域画像６１２より画面中央に近いので、文字領域画像６１１及び６１２の構成情報の優先度を、それぞれ、優先度１及び２と決定する。

同様に、優先度決定部１０５は、図６の（ｂ）に示される画像６０２に含まれる文字領域画像６２１及び６２２の構成情報の優先度を、それぞれ、優先度１及び２と決定する。

図７は、本実施の形態における優先度の決定方法の第三の説明図である。図７の（ａ１）〜（ａ３）を参照しながら、優先度決定部１０５によるテンプレートに基づいた優先度の決定方法について説明する。ここで、テンプレートとは、ジャンルに応じて映像コンテンツの画面構成の特徴を示すものであって、画面内の領域とその領域の優先度とを対応付けたものである。

図７の（ａ１）に示される画像７０１は、ニュース番組における、ニュースの内容を示す見出し画像と、ニュースの内容を示す見出し文章とが表示された一場面の画像である。

図７の（ａ２）に示されるテンプレート７０２は、画像内の左上に位置する縦方向の長さと横方向の長さとがほぼ等しい（ほぼ正方形の）領域７１１と、画面内の下部に位置する横長の領域７１２とを有する。そして、領域７１１には優先度１が、領域７１２には優先度２が、それぞれ対応付けられている。テンプレート７０２は、画像７０１のようにニュースの内容を示す見出し画像と見出し文章とが表示された一場面に適用されるのに適したテンプレートである。画像７０１のような画面においては、ユーザがニュースの内容を容易に捉えることができるように、画像を用いてニュースの内容を示した領域がある。この領域がニュースの内容と最も大きく関連していると考えられるので、テンプレート７０２を用いることで、この領域に対応する領域７１１の構成情報に、比較的高い優先度を決定するようにする。また、画像７０１のような画面において、さらに、ユーザがニュースの内容の詳細を容易に捉えることができるように、文字を用いてニュースの内容を示した領域がある。この領域は、上記の見出し画像に対応するニュースの内容における新たな内容、又は詳細な内容が表示され、上記の見出し画像の次に大きく関連していると考えられるので、テンプレート７０２を用いることで、この領域に対応する領域７１２の構成情報に、領域７１１の構成情報の次に高い優先度を決定するようにする。

図７の（ａ３）に示される画像７０１には、図７の（ａ１）の画像７０１に含まれる構成情報に対して優先度決定部１０５が決定した優先度が示されている。

優先度決定部１０５は、画像７０１に含まれる部分コンテンツを抽出し、抽出した部分コンテンツが、テンプレート７０２の領域のいずれかに含まれるか否かを判定する。この判定の結果、部分コンテンツが含まれている領域に対応付けられている優先度を、部分コンテンツの構成情報の優先度として決定する。具体的には、画像７０１において抽出される部分コンテンツである文字領域画像７１３は、テンプレート７０２の領域７１１に含まれているので、文字領域画像７１３の構成情報の優先度を、領域７１１に対応付けられている優先度である優先度１に決定する。同様に、文字領域画像７１４の構成情報の優先度を、領域７１２に対応付けられている優先度である優先度２に決定する。なお、文字領域画像のそれぞれがテンプレートにおける領域に完全に含まれている場合に文字領域画像の構成情報の優先度を決定するとしてもよいし、文字領域画像のそれぞれがテンプレートにおける領域の一部に含まれている場合に文字領域画像の構成情報の優先度を決定するとしてもよい。その場合、文字領域画像のうちテンプレートにおける領域に入っている割合に応じて優先度を調整するようにしてもよい。

次に、図７の（ｂ１）〜（ｂ３）を参照しながら、優先度決定部１０５によるテンプレートに基づいた優先度の決定方法について説明する。

図７の（ｂ１）に示される画像７２１は、ニュース番組における、ニュースの内容を示す見出し項目と、その内容を詳細に示す文章とが表示された一場面の画像である。

図７の（ｂ２）に示されるテンプレート７２２は、画面内の下部に位置する横長の領域７３２と、領域７３２の左上にほぼ隣接するように位置する横長の領域７３１とを有する。そして、領域７３１には優先度１が、領域７３２には優先度２が、それぞれ対応付けられている。テンプレート７２２は、画像７２１のようにニュースの内容を示す見出し項目と文章とが表示された一場面に適用されるのに適したテンプレートである。画像７２１のような画面においては、ユーザがニュースの内容を容易に捉えることができるように、比較的短い言葉を用いてニュースの内容を示した領域がある。この領域がニュースの内容と最も大きく関連していると考えられるので、テンプレート７２２を用いることで、この領域に対応する領域７３１の構成情報に、比較的高い優先度を決定するようにする。また、画像７０１のような画面において、さらに、ユーザがニュースの内容の詳細を容易に捉えることができるように、ニュースの内容の詳細を示した領域がある。この領域は、上記の見出し画像に対応するニュースの内容における新たな内容、又は詳細な内容が表示され、上記の見出し項目の次に大きく関連していると考えられるので、テンプレート７２２を用いることで、この領域に対応する領域７３２の構成情報に、領域７３１の構成情報の次に高い優先度を決定するようにする。

図７の（ｂ３）に示される画像７２１には、図７の（ｂ１）の画像７２１に含まれる構成情報に対して優先度決定部１０５が決定した優先度が示されている。

優先度決定部１０５は、画像７２１に含まれる部分コンテンツである文字領域画像７３３及び７３４の優先度を、上記と同様にして、それぞれ、優先度１及び２と決定する。

図８は、本実施の形態における優先度の決定方法の第四の説明図である。図８の（ａ１）〜（ａ３）を参照しながら、優先度決定部１０５によるテンプレートに基づいた優先度の決定方法について説明する。

図８の（ａ１）に示される画像８０１は、サッカー番組における、試合の名称と、試合の進行状況（点数）とが表示された一場面の画像である。

図８の（ａ２）に示されるテンプレート８０２は、画面内の左上部に位置する横長の領域８１１と、画面内の右上部に位置する横長の領域８１２とを有する。そして、領域８１２には優先度１が、領域８１１には優先度２が、それぞれ対応付けられている。テンプレート８０２は、画像８０１のようなサッカー番組の一場面に適用されるのに適したテンプレートである。画像８０１のような画面においては、ユーザがサッカーの試合の名称を容易に捉えることができるように、その名称を示した領域がある。この領域がサッカー番組の内容と最も大きく関連していると考えられるので、テンプレート８０２を用いることで、この領域に対応する領域８１２の構成情報に、比較的高い優先度を決定するようにする。また、画像８０１のような画面において、試合の進行状況を示した領域がある。試合の進行状況は、映像コンテンツの構成情報として定まったものではない（試合の進行によって変化していくものである）ので、テンプレート８０２を用いることで、この領域に対応する領域８１１の構成情報に、領域８１２の構成情報より低い優先度を決定するようにする。

図８の（ａ３）に示される画像８０３には、図８の（ａ１）の画像８０１に含まれる構成情報に対して優先度決定部１０５が決定した優先度が示されている。

優先度決定部１０５は、画像８０３に含まれる部分コンテンツである文字領域画像８１３及び８１４の優先度を、上記と同様にして、それぞれ、優先度２及び１と決定する。

次に、図８の（ｂ１）〜（ｂ３）を参照しながら、優先度決定部１０５によるテンプレートに基づいた優先度の決定方法について説明する。

図８の（ｂ１）に示される画像８２１は、野球番組における、試合の名称と、試合の進行状況（点数）とが表示された一場面の画像である。

図８の（ｂ２）に示されるテンプレート８２２は、画面内の左上部に位置する横長の領域８３１と、画面内の右下部に位置する縦方向の長さと横方向の長さとがほぼ等しい（ほぼ正方形の）領域８３２とを有する。そして、領域８３１には優先度１が、領域８３２には優先度２が、それぞれ対応付けられている。テンプレート８２２は、画像８２１のような野球番組の一場面に適用されるのに適したテンプレートである。画像８０１のような画面においては、ユーザが野球の試合の名称を容易に捉えることができるように、その名称を示した領域がある。この領域が野球番組の内容と最も大きく関連していると考えられるので、テンプレート８２２を用いることで、この領域に対応する領域８３１の構成情報に、比較的高い優先度を決定するようにする。また、画像８２１のような画面において、試合の進行状況を示した領域がある。試合の進行状況は、映像コンテンツの構成情報として定まったものではない（試合の進行によって変化していくものである）ので、テンプレート８２２を用いることで、この領域に対応する領域８３２の構成情報に、領域８３１の構成情報より低い優先度を決定するようにする。

優先度決定部１０５は、画像８２３に含まれる部分コンテンツである文字領域画像８３３及び８３４の優先度を、上記と同様にして、それぞれ、優先度１及び２と決定する。

以上、映像コンテンツの種別に応じて異なるテンプレートを利用して、構成情報の優先度付けを行う方法の例について示した。映像コンテンツの種別を判定するには、映像コンテンツのメタ情報に含まれる映像コンテンツのジャンルに関する情報を利用してもよいし、映像コンテンツの部分コンテンツから映像コンテンツのジャンルを取得するようにしてもよい。また、上記に例示したテンプレートだけでなく、上記と同じように、画面内の領域とその領域の優先度とを対応付けたものであれば、テンプレートとして利用可能である。さらに、テンプレートは、上記に例示したような、領域画像のパターンであってもよいし、画像上の領域を示す情報と、当該領域の優先度を示す情報とを対応付けた情報であってもよい。

図９は、本実施の形態における優先度の決定方法の第五の説明図である。図９を参照しながら、図９の（ａ）に示される画像９０１に対して、優先度決定部１０５が関連語辞書を用いて優先度を決定する方法について説明する。ここで、関連語辞書とは、単語と、当該単語と関連がある単語とを対応づけて示すものである。具体的には、ある単語について、当該単語に関連がある単語を、当該単語に従属するように関連付けて示すものである。

図９の（ａ）に示されるように、画像９０１は、部分コンテンツとして文字領域画像９１１、９１２及び９１３を含んでいる。

優先度決定部１０５は、文字領域画像９１１、９１２及び９１３の構成情報を、関連語辞書における単語の従属関係に従って並べた図（図９の（ｂ）、以下、関連語ツリーともよぶ）を作成する。関連語辞書において、単語「中飯」は、「原発再稼動」及び「原発」と関連があるので、図９の（ｂ）において、「中飯」の下位に「原発再稼動」と「原発」とが、当該従属関係を示す直線で結ばれている。また、文字領域画像９１１、９１２及び９１３の構成情報の単語であって、他の単語との関連をもたない単語である「提案」、「為替」及び「ニュース」は、直線で結ばれずに単独で存在している。

優先度決定部１０５は、関連語ツリーを参照して、単語の優先度を決定する（図９の（ｃ））。ここで、優先度決定部１０５は、関連語ツリーの中でより上位に位置する単語ほど、当該単語の優先度をより高く設定する。具体的には、「中飯」は関連語ツリーの中で最上位であるので、優先度を最も高く決定する。「中飯」の次には、関連語ツリーに従い、「原発再稼動」及び「原発」、「１００ｋｍ圏内」、並びに、「安全協定」及び「自治体」が続く。他の単語との関連をもたない「提案」、「為替」及び「ニュース」は、優先度を最も低く決定される。

図１０は、本実施の形態における構成情報の表示の説明図である。

図１０の（ａ）は、画像１００１（画像７２１と同一）を表示画面に構成情報と合わせて表示する場合の、表示画面の例である。画像１００１の部分コンテンツである文字領域画像１０１１、１０１２及び１０１３の構成情報に、それぞれ、高、中及び低の優先度が決定されている。さらに、文字領域画像１０１１の構成情報である「中飯」及び「原発再稼動」には、関連語辞書に基づいて、「中飯」のほうに、「原発再稼動」より高い優先度が設定されている。このような場合、画像の右端の領域１００２に、構成情報（検索キーワードとも記載する）が、構成情報の優先度が高いほど画面の上部に位置するように表示される。

図１０の（ｂ）は、画像１０２１（画像２０１と同一）を表示画面に構成情報と合わせて表示する場合の、表示画面の例である。画像１０２１の部分コンテンツであるオブジェクト画像１０３４の構成情報と、文字領域画像１０３１、１０３２及び１０３３の構成情報とに、それぞれ、高、高、中及び低の優先度が決定されている。このような場合、上記と同様に、画像の右端の領域１０２２に、構成情報（検索キーワードとも記載する）が、構成情報の優先度が高いほど画面の上部に位置するように表示される。構成情報としてオブジェクト画像がある場合には、領域１０２２にオブジェクト画像が縮小されて表示される。

なお、構成情報が表示される領域１００２は、画像１００１に重畳表示されるようにしてもよいし、画像１００１の左右の幅を縮めて画像１００１を左側によせ、空いた領域に表示されるようにしてもよい。重畳表示する場合には、領域１００２を半透明にして重畳させることで、ユーザが画像１００１を視認できるようにしてもよい。また、構成情報が表示される領域１０２２についても同様である。

なお、上記では、構成情報のそれぞれを、その優先度が高いほど画面の上部に位置するように、つまり、優先度に応じて画面上の位置を設定するようにした。このようにする代わりに、優先度に応じて表示される構成情報の文字の大きさを変化させるようにしてもよい。つまり、優先度が高いほど大きな文字で表示されるようにしてもよい。さらに、上記のようにする代わりに、優先度が高い構成情報を、文字を表示する用途で通常多く用いられる色と異なる色で表示し、優先度が低い構成情報を、通常多く用いられる色で表示するようにしてもよい。

なお、構成情報としてオブジェクト画像がある場合に、オブジェクト画像を縮小した画像を領域１０２２に表示するとして説明したが、このようにする代わりに、オブジェクト画像から画像検索により得られる、オブジェクト画像に対応する名称（例えば、オブジェクト画像が人物の顔である場合には、その人物の氏名）を、再び検索によって画像に変換した結果を用いてもよい。このようにすると、画像に人物の横顔が表示されていてユーザがその人物を認識しにくい場合であっても、構成情報としてその人物を正面から撮影した画像を表示することもでき、ユーザがその人物を認識しやすくなる。

［１−２．動作］
図１１は、本実施の形態における映像受信装置１による構成情報の表示方法を示すフローチャートである。

まず、受信部１０１が、映像コンテンツを受信する（ステップＳ１１０１）。

次に、抽出部１０２が、受信部１０１が受信した映像コンテンツを解析することで、映像コンテンツの一部である部分コンテンツを抽出する。そして、抽出した部分コンテンツの特徴を示す特徴量を取得する（ステップＳ１１０２）。

次に、情報生成部１０３が、抽出部１０２が抽出した部分コンテンツを、部分コンテンツを示す情報であって、文字又は画像を含む情報である構成情報に変換する（ステップＳ１１０３）。構成情報に変換する際には、必要に応じて、通信部１０４を介して外部の検索装置と通信してもよい。

次に、優先度決定部１０５は、部分コンテンツから抽出部１０２により抽出された特徴量に基づいて定められ、映像コンテンツ内における当該部分コンテンツの重要さである優先度を決定する（ステップＳ１１０４）。

次に、構成情報に対して優先度決定部１０５が決定した優先度に応じて、構成情報を表示画面に表示させる（ステップＳ１１０５）。

［１−３．効果等］
以上のように、本実施の形態における映像受信装置は、映像コンテンツを受信する受信部と、前記映像コンテンツを解析することで、前記映像コンテンツの一部である部分コンテンツを抽出し、抽出した前記部分コンテンツの前記映像コンテンツ内における特徴を取得する抽出部と、前記部分コンテンツから、前記部分コンテンツを示す文字又は画像を含む情報である構成情報を生成する情報生成部と、前記部分コンテンツから取得された前記特徴に基づいて、前記映像コンテンツと、前記部分コンテンツから生成された前記構成情報との関連の大きさを示す優先度を前記構成情報に対して決定する優先度決定部と、前記構成情報に対して前記優先度決定部が決定した前記構成情報の優先度に応じて、前記構成情報の表示画面への表示を制御する表示制御部とを備える。

これにより、映像受信装置は、映像コンテンツから生成される構成情報を、当該構成情報と映像コンテンツとの関連の大きさを示す優先度に応じてユーザに提示する。構成情報に対応する部分コンテンツは、映像コンテンツ上において、映像コンテンツとの関連の大きさを反映して表現されている。映像受信装置は、上記のような部分コンテンツの表現の態様に基づいて、構成情報の優先度を決定する。よって、ユーザは、単に映像コンテンツに含まれる情報を閲覧できるだけでなく、その情報の映像コンテンツにおける関連の大きさをも知ることができる。そして、ユーザは、関連の大きい情報の中から知りたい情報を選択することができる。よって、映像受信装置は、ユーザが選択しやすい検索項目を提示することができる。

また、前記抽出部は、前記映像コンテンツに含まれる画像内の一部の画像であって、文字が表示された領域を含む画像である文字領域画像を前記部分コンテンツとして抽出し、抽出した前記文字領域画像の前記画像内における表示位置、表示色、および文字の大きさのうち少なくとも１つを前記特徴として取得し、前記情報生成部は、前記文字領域画像から、前記文字領域画像に含まれる文字を含む情報である構成情報を生成し、前記優先度決定部は、前記抽出部が取得した前記表示位置、前記表示色、および前記文字の大きさのうち少なくとも１つに基づいて、前記文字領域画像から生成された前記構成情報に対して優先度を決定するとしてもよい。

これにより、映像受信装置は、映像コンテンツに含まれる文字について、その表示位置、表示色、および文字の大きさのうち少なくとも１つを考慮して、その文字に対応する構成情報の優先度を決定することができる。映像コンテンツに含まれる文字の表示位置、表示色、および文字の大きさには、当該映像コンテンツと当該文字との関連の大きさが反映されている。映像受信装置は、これらのうち少なくとも１つの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記優先度決定部は、前記文字領域画像が前記画像内の中央に近いほど、前記文字領域画像から生成された前記構成情報に対してより高い優先度を決定するとしてもよい。

これにより、映像受信装置は、画像の中央付近に表示される文字に対応する構成情報に、より高い優先度を決定することができる。画像に表示される文字は、画像の中央付近に表示されるほど、より当該映像コンテンツとの関連が大きい。映像受信装置は、これらの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記映像受信装置は、さらに、前記画像内の所定領域の位置及び大きさと、前記所定領域に対する優先度とを対応づけて示すテンプレートを記憶している記憶部を備え、前記優先度決定部は、前記文字領域画像が表示された前記画像内の領域に前記テンプレートにおいて対応付けられた優先度を、前記文字領域画像から生成された前記構成情報に対する優先度として決定するとしてもよい。

これにより、映像受信装置は、テンプレートを利用して、画像内の文字領域画像に対応する構成情報の優先度を決定することができる。テンプレートは、ジャンルに応じて映像コンテンツの画面構成の特徴を示すものであって、画面内の領域とその領域の優先度とを対応付けたものである。よって、映像受信装置は、より適切に構成情報の優先度を決定することができる。

また、前記抽出部は、前記映像コンテンツに含まれるメタ情報を前記部分コンテンツとして抽出し、抽出した前記メタ情報から前記映像コンテンツのジャンルを取得し、前記記憶部は、映像コンテンツのジャンルごとに前記テンプレートを記憶しており、前記優先度決定部は、前記抽出部が取得した前記映像コンテンツのジャンルに対応した前記テンプレートを参照することで、前記文字領域画像から生成された前記構成情報に対する優先度を決定するとしてもよい。

これにより、映像受信装置は、映像コンテンツに含まれるメタ情報に基づいて当該映像コンテンツのジャンルを取得し、当該ジャンルに応じたテンプレートを用いて、構成情報の優先度を決定することができる。

また、前記抽出部は、前記映像コンテンツに含まれる画像内の一部の画像であって、オブジェクトが表示された領域を含む画像であるオブジェクト画像を、前記部分コンテンツとして抽出し、抽出した前記オブジェクト画像の前記画像内における表示位置、および表示の大きさのうち少なくとも１つを、前記特徴として取得し、前記情報生成部は、前記オブジェクト画像から、前記オブジェクト画像を示す文字又は画像を含む情報である構成情報を生成し、前記優先度決定部は、前記抽出部が取得した前記表示位置、および前記表示の大きさのうち少なくとも１つに基づいて、前記オブジェクト画像から生成された前記構成情報に対して前記優先度を決定するとしてもよい。

これにより、映像受信装置は、映像コンテンツに含まれるオブジェクト（人物、人物の顔）について、その表示位置、および文字の大きさのうち少なくとも１つを考慮して、そのオブジェクトに対応する構成情報の優先度を決定することができる。映像コンテンツに含まれるオブジェクトの表示位置、および文字の大きさには、当該映像コンテンツと当該オブジェクトとの関連の大きさが反映されている。映像受信装置は、これらのうち少なくとも１つの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記優先度決定部は、前記オブジェクト画像が前記画像内の中央に近いほど、前記オブジェクト画像から生成された前記構成情報に対してより高い優先度を決定するとしてもよい。

これにより、映像受信装置は、画像の中央付近に表示されるオブジェクトに対応する構成情報に、より高い優先度を決定することができる。画像に表示されるオブジェクトは、画像の中央付近に表示されるほど、より当該映像コンテンツとの関連が大きい。映像受信装置は、これらの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記優先度決定部は、前記オブジェクト画像が前記画像内において大きく表示されるほど、前記オブジェクト画像から生成された前記構成情報に対してより高い優先度を決定するとしてもよい。

これにより、映像受信装置は、画像内で大きく表示されるオブジェクトに対応する構成情報に、より高い優先度を決定することができる。画像に表示されるオブジェクトは、大きく表示されるほど、より当該映像コンテンツとの関連が大きい。映像受信装置は、これらの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記抽出部は、前記映像コンテンツに含まれる音声を前記部分コンテンツとして抽出し、抽出した前記音声の音圧、音程、およびテンポのうち少なくとも１つを前記特徴として取得し、前記情報生成部は、前記音声から、前記音声を変換した文字を含む情報である構成情報を生成し、前記優先度決定部は、前記抽出部が取得した前記音圧、前記音程、および前記テンポのうち少なくとも１つに基づいて、前記音声から生成された前記構成情報に対する前記優先度を決定するとしてもよい。

これにより、映像受信装置は、映像コンテンツに含まれる音声について、その音圧、音程、又は、テンポのうち少なくとも１つを考慮して、そのオブジェクトに対応する構成情報の優先度を決定することができる。映像コンテンツに含まれる音声の音圧、音程、およびテンポには、当該映像コンテンツと当該オブジェクトとの関連の大きさが反映されている。映像受信装置は、これらのうち少なくとも１つの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記優先度決定部は、前記音声の前記音圧が大きいほど、前記音声から変換された前記構成情報に対してより高い優先度を決定するとしてもよい。

これにより、映像受信装置は、音圧が大きい音声に対応する構成情報に、より高い優先度を決定することができる。音声は、音圧が大きいほど、より当該映像コンテンツとの関連が大きい。映像受信装置は、これらの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記記憶部は、さらに、単語と、当該単語と関連がある単語とを対応づけて示す関連語辞書を記憶しており、前記抽出部は、複数の前記部分コンテンツを抽出し、抽出した前記部分コンテンツのそれぞれの特徴を取得し、前記情報生成部は、複数の前記部分コンテンツのそれぞれから、複数の前記構成情報を生成し、前記優先度決定部は、前記関連語辞書を参照することで、前記情報生成部が生成した複数の前記構成情報のそれぞれの従属関係を示す関連語ツリーを生成し、生成した前記関連語ツリーにおいて構成情報がより上位であるほど、当該構成情報に対してより高い優先度を決定するとしてもよい。

これにより、映像受信装置は、映像コンテンツに含まれる構成情報について、他の構成情報との関連の多さを考慮して、他の構成情報との関連がより多いほど、そのオブジェクトに対応する構成情報の優先度を決定することができる。映像受信装置は、これらの情報を用いて優先度を決定するので、適切に構成情報の優先度を決定することができる。

また、前記表示制御部は、前記構成情報の前記優先度が高いほど、前記構成情報を前記表示画面上においてより上方に表示するように、前記表示を制御するとしてもよい。

これにより、映像受信装置は、優先度が高い構成情報を、表示画面上において、ユーザがより視認しやすい位置に表示することができる。

また、前記表示制御部は、前記優先度が高い方から所定数の前記構成情報を選択し、選択した前記構成情報だけを前記表示画面に表示するように、前記表示を制御するとしてもよい。

これにより、映像受信装置は、映像コンテンツに含まれる複数の構成情報のうち、優先度が高いものだけをユーザに提示することができる。

また、前記映像受信装置は、さらに、前記表示画面を有する表示部を備えるとしてもよい。

これにより、映像受信装置は、映像受信装置自身が有する表示画面によりユーザに映像コンテンツとともに構成情報を提示することができる。

また、本実施の形態の映像受信装置における情報表示制御方法は、映像コンテンツを受信する受信ステップと、前記映像コンテンツを解析することで、前記映像コンテンツの一部である部分コンテンツを抽出し、抽出した前記部分コンテンツの前記映像コンテンツ内における特徴を取得する抽出ステップと、前記部分コンテンツから、前記部分コンテンツを示す文字又は画像を含む情報である構成情報を生成する情報生成ステップと、前記部分コンテンツから取得された前記特徴に基づいて、前記映像コンテンツと、前記部分コンテンツから生成された前記構成情報との関連の大きさを示す優先度を前記構成情報に対して決定する優先度決定ステップと、前記構成情報に対して前記優先度決定ステップで決定した前記構成情報の優先度に応じて、前記構成情報の表示画面への表示を制御する表示制御ステップとを含む。

これにより、上記の映像受信装置と同様の効果を奏する。

以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。

本開示における映像受信装置は、映像に含まれる検索項目を映像との関連性とともに提示する映像受信地に利用可能である。

１ 映像受信装置
１０１ 受信部
１０２ 抽出部
１０３ 情報生成部
１０４ 通信部
１０５ 優先度決定部
１０６ 記憶部
１０７ 表示制御部
２０１、５０２、６０１、６０２、７０１、７０３、７２１、７２３、８０１、８０３、８２１、８２３、９０１、１００１、１０２１ 画像
２１１、４１１、１０３４ オブジェクト画像
２１２、２１３、２１４、５２１、５２２、６１１、６１２、６２１、６２２、７１３、７１４、７３３、７３４、８１３、８１４、８３３、８３４、９１１、９１２、９１３、１０１１、１０１２、１０１３、１０３１、１０３２、１０３３ 文字領域画像
３０１、４０１ 表
４１２ 文字列
７０２、７２２、８０２、８２２ テンプレート
７１１、７１２、７３１、７３２、８１１、８１２、８３１、８３２、１００２、１０２２ 領域

Claims (14)

1. 映像コンテンツを受信する受信部と、
   前記映像コンテンツを解析することで、前記映像コンテンツの一部である部分コンテンツを抽出し、抽出した前記部分コンテンツの前記映像コンテンツ内における特徴を取得する抽出部と、
   前記部分コンテンツから、前記部分コンテンツを示す文字又は画像を含む情報である構成情報を生成する情報生成部と、
   前記部分コンテンツから取得された前記特徴に基づいて、前記映像コンテンツと、前記部分コンテンツから生成された前記構成情報との関連の大きさを示す優先度を前記構成情報に対して決定する優先度決定部と、
   前記構成情報に対して前記優先度決定部が決定した前記構成情報の優先度に応じて、前記構成情報の表示画面への表示を制御する表示制御部とを備え、
   前記抽出部は、前記映像コンテンツに含まれる画像内の一部の画像であって、文字又はオブジェクトが表示された領域を含む画像である部分画像を前記部分コンテンツとして抽出し、抽出した前記部分画像の前記画像内における表示位置を含む前記特徴を取得し、
   前記優先度決定部は、前記抽出部が取得した前記表示位置を用いて、前記部分画像が前記画像内の中央に近いほど、前記部分画像から生成された前記構成情報に対してより高い優先度を決定する
   映像受信装置。
2. 前記抽出部は、
   前記映像コンテンツに含まれる画像内の一部の画像であって、文字が表示された領域を含む画像である、前記部分画像のうちの文字領域画像を前記部分コンテンツとして抽出し、抽出した前記文字領域画像の前記画像内における表示色、および文字の大きさのうち少なくとも１つをさらに含む前記特徴を取得し、
   前記情報生成部は、
   前記文字領域画像から、前記文字領域画像に含まれる文字を含む情報である構成情報を生成し、
   前記優先度決定部は、
   前記抽出部が取得した前記表示色、および前記文字の大きさのうち少なくとも１つにさらに基づいて、前記文字領域画像から生成された前記構成情報に対して優先度を決定する
   請求項１に記載の映像受信装置。
3. 前記映像受信装置は、さらに、
   前記画像内の所定領域の位置及び大きさと、前記所定領域に対する優先度とを対応づけて示すテンプレートを記憶している記憶部を備え、
   前記優先度決定部は、
   前記文字領域画像が表示された前記画像内の領域に前記テンプレートにおいて対応付けられた優先度を、前記文字領域画像から生成された前記構成情報に対する優先度として決定する
   請求項２に記載の映像受信装置。
4. 前記抽出部は、
   前記映像コンテンツに含まれるメタ情報を前記部分コンテンツとして抽出し、抽出した前記メタ情報から前記映像コンテンツのジャンルを取得し、
   前記記憶部は、
   映像コンテンツのジャンルごとに前記テンプレートを記憶しており、
   前記優先度決定部は、
   前記抽出部が取得した前記映像コンテンツのジャンルに対応した前記テンプレートを参照することで、前記文字領域画像から生成された前記構成情報に対する優先度を決定する
   請求項３に記載の映像受信装置。
5. 前記抽出部は、
   前記映像コンテンツに含まれる画像内の一部の画像であって、オブジェクトが表示された領域を含む画像である、前記部分画像のうちのオブジェクト画像を、前記部分コンテンツとして抽出し、抽出した前記オブジェクト画像の前記画像内における表示の大きさをさらに含む、前記特徴を取得し、
   前記情報生成部は、
   前記オブジェクト画像から、前記オブジェクト画像を示す文字又は画像を含む情報である構成情報を生成し、
   前記優先度決定部は、
   前記抽出部が取得した前記表示の大きさにさらに基づいて、前記オブジェクト画像から生成された前記構成情報に対して前記優先度を決定する
   請求項１〜４のいずれか１項に記載の映像受信装置。
6. 前記優先度決定部は、
   前記オブジェクト画像が前記画像内において大きく表示されるほど、前記オブジェクト画像から生成された前記構成情報に対してより高い優先度を決定する
   請求項５に記載の映像受信装置。
7. 前記抽出部は、
   前記映像コンテンツに含まれる音声を前記部分コンテンツとして抽出し、抽出した前記音声の音圧、音程、およびテンポのうち少なくとも１つを前記特徴として取得し、
   前記情報生成部は、
   前記音声から、前記音声を変換した文字を含む情報である構成情報を生成し、
   前記優先度決定部は、
   前記抽出部が取得した前記音圧、前記音程、および前記テンポのうち少なくとも１つに基づいて、前記音声から生成された前記構成情報に対する前記優先度を決定する
   請求項１〜６のいずれか１項に記載の映像受信装置。
8. 映像コンテンツを受信する受信部と、
   前記映像コンテンツを解析することで、前記映像コンテンツの一部である部分コンテンツを抽出し、抽出した前記部分コンテンツの前記映像コンテンツ内における特徴を取得する抽出部と、
   前記部分コンテンツから、前記部分コンテンツを示す文字又は画像を含む情報である構成情報を生成する情報生成部と、
   前記部分コンテンツから取得された前記特徴に基づいて、前記映像コンテンツと、前記部分コンテンツから生成された前記構成情報との関連の大きさを示す優先度を前記構成情報に対して決定する優先度決定部と、
   前記構成情報に対して前記優先度決定部が決定した前記構成情報の優先度に応じて、前記構成情報の表示画面への表示を制御する表示制御部とを備え、
   前記抽出部は、
   前記映像コンテンツに含まれる音声を前記部分コンテンツとして抽出し、抽出した前記音声の音圧、音程、およびテンポのうち少なくとも１つを前記特徴として取得し、
   前記情報生成部は、
   前記音声から、前記音声を変換した文字を含む情報である構成情報を生成し、
   前記優先度決定部は、
   前記抽出部が取得した前記音圧、前記音程、および前記テンポのうち少なくとも１つに基づいて、前記音声から生成された前記構成情報に対する前記優先度を決定する
   映像受信装置。
9. 前記優先度決定部は、
   前記音声の前記音圧が大きいほど、前記音声から変換された前記構成情報に対してより高い優先度を決定する
   請求項７又は８に記載の映像受信装置。
10. 前記記憶部は、さらに、
    単語と、当該単語と関連がある単語とを対応づけて示す関連語辞書を記憶しており、
    前記抽出部は、複数の前記部分コンテンツを抽出し、抽出した前記部分コンテンツのそれぞれの特徴を取得し、
    前記情報生成部は、
    複数の前記部分コンテンツのそれぞれから、複数の前記構成情報を生成し、
    前記優先度決定部は、
    前記関連語辞書を参照することで、前記情報生成部が生成した複数の前記構成情報のそれぞれの従属関係を示す関連語ツリーを生成し、生成した前記関連語ツリーにおいて構成情報がより上位であるほど、当該構成情報に対してより高い優先度を決定する
    請求項３に記載の映像受信装置。
11. 前記表示制御部は、
    前記構成情報の前記優先度が高いほど、前記構成情報を前記表示画面上においてより上方に表示するように、前記表示を制御する
    請求項１〜１０のいずれか１項に記載の映像受信装置。
12. 前記表示制御部は、
    前記優先度が高い方から所定数の前記構成情報を選択し、選択した前記構成情報だけを前記表示画面に表示するように、前記表示を制御する
    請求項１〜１１のいずれか１項に記載の映像受信装置。
13. 前記映像受信装置は、さらに、
    前記表示画面を有する表示部を備える
    請求項１〜１２のいずれか１項に記載の映像受信装置。
14. 映像コンテンツを受信する受信ステップと、
    前記映像コンテンツを解析することで、前記映像コンテンツの一部である部分コンテンツを抽出し、抽出した前記部分コンテンツの前記映像コンテンツ内における特徴を取得する抽出ステップと、
    前記部分コンテンツから、前記部分コンテンツを示す文字又は画像を含む情報である構成情報を生成する情報生成ステップと、
    前記部分コンテンツから取得された前記特徴に基づいて、前記映像コンテンツと、前記部分コンテンツから生成された前記構成情報との関連の大きさを示す優先度を前記構成情報に対して決定する優先度決定ステップと、
    前記構成情報に対して前記優先度決定ステップで決定した前記構成情報の優先度に応じて、前記構成情報の表示画面への表示を制御する表示制御ステップとを含み、
    前記抽出ステップでは、前記映像コンテンツに含まれる画像内の一部の画像であって、文字又はオブジェクトが表示された領域を含む画像である部分画像を前記部分コンテンツとして抽出し、抽出した前記部分画像の前記画像内における表示位置を含む前記特徴を取得し、
    前記優先度決定ステップでは、前記抽出ステップで取得した前記表示位置を用いて、前記部分画像が前記画像内の中央に近いほど、前記部分画像から生成された前記構成情報に対してより高い優先度を決定する
    映像受信装置における情報表示制御方法。

Images