JP2019213112A - 映像信号受信装置、及び映像信号受信方法 - Google Patents

Abstract

【課題】同一の映像コンテンツを異なる映像信号で受信した際、ディスプレイに表示される映像を切り替えるとユーザが違和感を感じる場合がある。【解決手段】一実施の形態にかかる映像信号受信装置１は、同一の映像コンテンツを第１アスペクト比で送信する第１映像信号および第１アスペクト比と異なる第２アスペクト比で送信する第２映像信号を受信する。第２映像信号に含まれる第２映像のサイズ調整量を決定する際、第２映像信号に含まれる第２画像に対して拡縮処理を実施して拡縮画像を生成するともに、第２画像に対してシフト処理を実施してシフト画像を生成する。そして、第１映像信号に含まれる第１画像と拡縮画像との類似度を算出するとともに、第１画像とシフト画像との類似度を算出し、拡縮画像およびシフト画像のうち算出された類似度が高い方の画像を、次の拡縮処理およびシフト処理を実施する画像に用いる。【選択図】図１

Description

本発明は映像信号受信装置、及び映像信号受信方法に関し、例えば同一の映像コンテンツを異なる映像信号で受信することができる映像信号受信装置、及び映像信号受信方法に関する。

映像信号を送信する送信方式の一つに、同一の映像コンテンツを異なる映像信号で送信する送信方式がある。例えば、日本国内における地上デジタル放送では、画質と電波感度の異なる２つの映像信号（フルセグメント放送、ワンセグメント放送）が送出されている。フルセグメント放送（以下、フルセグと記載する）は、高解像度であるがノイズ耐性が弱く、電波受信感度が低下すると映像にノイズが発生する。一方、ワンセグメント放送（以下、ワンセグと記載する）は、低解像度であるがノイズ耐性が強く、電波受信感度に依存せずに一定の表示が可能である。フルセグ、ワンセグは同一の映像コンテンツ（同一の番組）を送出しているため、カーナビゲーションを代表とする移動体端末では電波受信感度に応じてフルセグとワンセグの切り替えを実施して、最適な映像を表示している。

特許文献１には、スケーリングにより発生し得る映像のずれを適切に補正することが可能な受信装置に関する技術が開示されている。

特開２０１０−２５１８９７号公報

上述のように、カーナビゲーション等の移動体端末では電波受信感度に応じてフルセグとワンセグとの切り替えを実施しており、この切り替えによって最適な映像を表示している。しかしながら、フルセグとワンセグとではエンコードの方式が異なるため、フルセグ映像とワンセグ映像との間に映像サイズ（アスペクト比）の違いや表示位置のずれが生じる。このため、フルセグとワンセグとを切り替えた際に、ディスプレイに表示される映像にずれが生じ、ユーザに違和感を感じさせるという問題がある。換言すると、同一の映像コンテンツを異なる映像信号で受信した際、ディスプレイに表示される映像を切り替えると、ユーザに違和感を感じさせる場合がある。

その他の課題と新規な特徴は、本明細書の記述および添付図面から明らかになるであろう。

一実施の形態にかかる映像信号受信装置は、同一の映像コンテンツを第１アスペクト比で送信する第１映像信号および前記第１アスペクト比と異なる第２アスペクト比で送信する第２映像信号をそれぞれ受信する。第２映像信号に含まれる第２映像のサイズ調整量を決定する際、第２映像信号に含まれる第２画像を縮小または拡大する拡縮処理を実施して拡縮画像を生成するともに、第２画像を水平方向または垂直方向にシフトするシフト処理を実施してシフト画像を生成する。そして、第１映像信号に含まれる第１画像と拡縮画像との類似度を算出するとともに、第１画像とシフト画像との類似度を算出し、拡縮画像およびシフト画像のうち算出された類似度が高い方の画像を、次の拡縮処理およびシフト処理を実施する画像に用いる。

前記一実施の形態によれば、同一の映像コンテンツを異なる映像信号で受信した際に、ディスプレイに表示される映像を切り替えてもユーザが違和感を感じることを抑制することができる。

実施の形態１にかかる映像信号受信装置を説明するためのブロック図である。 実施の形態１にかかる映像信号受信装置の動作を説明するためのフローチャートである。 実施の形態１にかかる映像信号受信装置の動作を説明するためのフローチャートである。 類似度算出処理を説明するためのフローチャートである。 画像サイズ決定処理のフローを説明するための図である。 画像サイズ決定処理の具体例を説明するための図である。 実施の形態１にかかる映像信号受信装置の動作を説明するためのタイミングチャートである。 実施の形態１にかかる映像信号受信装置を備える映像受信システムの一例を示すブロック図である。 実施の形態２にかかる映像信号受信装置を説明するためのブロック図である。 実施の形態２にかかる映像信号受信装置の動作を説明するためのフローチャートである。 実施の形態２にかかる映像信号受信装置の動作を説明するための図である。 実施の形態３にかかる映像信号受信装置を説明するためのブロック図である。 実施の形態３にかかる映像信号受信装置の動作を説明するためのフローチャートである。 実施の形態４にかかる映像信号受信装置を説明するためのブロック図である。

＜実施の形態１＞
以下、図面を参照して実施の形態１について説明する。
図１は、実施の形態１にかかる映像信号受信装置を説明するためのブロック図である。図１に示すように、映像信号受信装置１は、受信処理部１０、分離部１１、第１映像復号部１２_１、第２映像復号部１２_２、第１映像調整部１３_１、第２映像調整部１３_２、演算処理部１４、端処理部１７、映像切替部１８、及び出力制御部１９を備える。演算処理部１４は、類似度算出処理部１５およびサイズ調整量決定処理部１６を備える。

受信処理部１０は映像信号を受信する。映像信号には、同一の映像コンテンツを第１アスペクト比で送信する第１映像信号と第２アスペクト比で送信する第２映像信号とが含まれている。例えば、映像信号は、地上デジタル放送の映像信号であり、この場合は、第１映像信号がフルセグの映像信号（高解像度）であり、第２映像信号がワンセグの映像信号（低解像度）である。受信処理部１０は、ＴＳ（Transport Stream）データを分離部１１に出力する。また、受信処理部１０は、映像信号を受信したことを示す信号を演算処理部１４に出力する。

なお、以下では、映像信号が地上デジタル放送の映像信号である場合を例として説明するが、本実施の形態にかかる映像信号受信装置１は、同一の映像コンテンツを第１アスペクト比で送信する第１映像信号と第２アスペクト比で送信する第２映像信号とを含む映像信号であれば、地上デジタル放送以外の映像信号にも適用することができる。

分離部１１は、受信処理部１０から供給されたＴＳデータに含まれる第１映像信号と第２映像信号とを分離し、分離した第１映像信号および第２映像信号をそれぞれ、第１映像復号部１２_１および第２映像復号部１２_２に出力する。

第１映像復号部１２_１は、分離部１１から供給された第１映像信号を復号する。例えば、第１映像信号（フルセグ）はＭＰＥＧ２規格で符号化された信号である。この場合、第１映像復号部１２_１はＭＰＥＧ２デコーダで構成されており、第１映像信号はＭＰＥＧ２デコーダを用いて復号される。復号された第１映像信号は、第１映像調整部１３_１に供給される。

第２映像復号部１２_２は、分離部１１から供給された第２映像信号を復号する。例えば、第２映像信号（ワンセグ）はＨ．２６４規格で符号化された信号である。この場合、第２映像復号部１２_２はＨ．２６４デコーダで構成されており、第２映像信号はＨ．２６４デコーダを用いて復号される。復号された第２映像信号は、第２映像調整部１３_２に供給される。

なお、本実施の形態では、第１及び第２映像信号を符号化する規格を上述の例と逆にしてもよく、また、符号化する規格としてＭＰＥＧ２規格およびＨ．２６４規格以外の規格を用いてもよい。この場合は、第１及び第２映像復号部１２_１、１２_２のそれぞれに、第１及び第２映像信号の規格に対応したデコーダを設ける。

第１映像調整部１３_１は、復号された第１映像信号に含まれる第１映像のサイズを表示画面サイズに調整する。具体的には、第１映像調整部１３_１は、第１映像を縮小または拡大する拡縮処理と、第１映像を水平方向または垂直方向にシフトするシフト処理とを実施することで、第１映像のサイズを表示画面サイズに調整する。ここで、表示画面サイズは、第１映像を表示するディスプレイのサイズに対応している。サイズ調整された後の第１映像信号は、映像切替部１８に供給される。また、第１映像調整部１３_１でサイズ調整された第１映像のうち、所定のタイミングにおける第１映像（この場合は静止画であるので「第１画像」と記載する）は、演算処理部１４の類似度算出処理部１５に供給される。

第２映像調整部１３_２は、復号された第２映像信号に含まれる第２映像のサイズを調整する。具体的には、第２映像調整部１３_２は、第２映像を縮小または拡大する拡縮処理と、第２映像を水平方向または垂直方向にシフトするシフト処理とを実施することで、第２映像のサイズを調整する。このとき、第２映像調整部１３_２は、１度目の処理では、第２映像のサイズを表示画面サイズに調整する処理を実施し、この調整した第２映像を類似度算出処理部１５に出力する。２度目以降の処理では、第２映像調整部１３_２は、演算処理部１４（サイズ調整量決定処理部１６）におけるサイズ調整量決定処理の結果（画像サイズの調整量）に応じて、第２映像信号に含まれる第２映像のサイズを調整する。サイズ調整された後の第２映像信号は、端処理部１７を経由して映像切替部１８に供給される。

また、第２映像調整部１３_２でサイズ調整された第２映像のうち、所定のタイミングにおける第２映像（この場合は静止画であるので「第２画像」と記載する）は、演算処理部１４の類似度算出処理部１５に供給される。ここで、第１映像調整部１３_１から類似度算出処理部１５に供給される第１画像と、第２映像調整部１３_２から類似度算出処理部１５に供給される第２画像は、時間同期された画像データ（つまり同一のタイミングにおける画像データ）であり、これらは同一の画像である。

演算処理部１４は、第１映像信号に含まれる第１画像と第２映像信号に含まれる第２画像との類似度を算出する類似度算出処理と、第２映像信号に含まれる第２画像の画像サイズ調整量を類似度算出処理で算出された類似度に基づいて決定するサイズ調整量決定処理と、を実施する。類似度算出処理は類似度算出処理部１５で実施され、サイズ調整量決定処理はサイズ調整量決定処理部１６で実施される。例えば、演算処理部１４は、映像信号を受信したことを示す信号を受信処理部１０から受信したタイミングで、類似度算出処理およびサイズ調整量決定処理を開始する。例えば、映像信号を受信したことを示す信号は、映像信号の受信開始のタイミングや視聴している番組が切り替わったタイミングに、受信処理部１０から演算処理部１４に供給される。

演算処理部１４は、類似度算出処理とサイズ調整量決定処理とを繰り返すことで、第２画像の画像サイズの調整量を決定するが、このとき演算処理部１４は、類似度算出処理において算出される類似度が高くなるように第２画像の画像サイズを調整する。演算処理部１４における類似度算出処理とサイズ調整量決定処理の詳細については後述する。なお、本明細書では、「類似度算出処理」および「サイズ調整量決定処理」を合わせて「画像サイズ決定処理」と記載する。

端処理部１７は、第２映像調整部１３_２でサイズ調整された第２映像に対して端処理を実施する。具体的には、端処理部１７は、サイズ調整された後の第２映像をディスプレイに表示した際にディスプレイと第２映像との間に余白領域が生じる場合、この余白領域を補間する処理を実施する。また、端処理部１７は、サイズ調整された後の第２映像をディスプレイに表示した際に表示領域外の領域が生じる場合、この表示領域外の領域を除去する処理を実施する。端処理部１７で端処理された第２映像信号は、映像切替部１８に供給される。

映像切替部１８は、第１映像調整部１３_１から出力された第１映像信号および端処理部１７から出力された第２映像信号を入力し、第１映像信号および第２映像信号のうちのいずれか一方を出力制御部１９に出力する。

ここで、第１映像信号はフルセグの映像信号であり、第２映像信号はワンセグの映像信号である。フルセグの映像信号（第１映像信号）は、高解像度であるがノイズ耐性が弱く、電波受信感度が低下すると映像にノイズが発生する。一方、ワンセグの映像信号（第２映像信号）は、低解像度であるがノイズ耐性が強く、電波受信感度に依存せずに一定の表示が可能である。例えば、映像切替部１８は、フルセグの映像（第１映像）をディスプレイに表示している際に、第１映像信号の受信状況（電波受信感度）が所定の基準よりも悪化した場合に、第１映像信号（フルセグ）から第２映像信号（ワンセグ）に出力映像を切り替えるようにしてもよい。例えば、映像切替部１８は、受信処理部１０から受信状況に関する情報（符号２０で示す）を取得し、この受信状況に関する情報に基づいて、第１映像信号（フルセグ）と第２映像信号（ワンセグ）とを切り替えてもよい。

また、映像切替部１８は、ユーザの入力に応じて、第１映像信号（フルセグ）と第２映像信号（ワンセグ）とを切り替えるようにしてもよい。この場合は、ユーザインタフェース（不図示）から映像切替部１８に切り替え信号（符号２０で示す）が供給される。

出力制御部１９は、映像切替部１８から供給された映像信号（第１映像信号または第２映像信号）をディスプレイに表示する際の制御を実施する。

次に、本実施の形態にかかる映像信号受信装置の動作（映像信号受信方法）について説明する。図２、図３は、本実施の形態にかかる映像信号受信装置の動作を説明するためのフローチャートである。

図１に示す受信処理部１０に映像信号（ＴＳデータ）が供給されると、受信処理部１０は供給された映像信号を分離部１１に供給する。分離部１１は、受信処理部１０から供給されたＴＳデータに含まれる第１映像信号と第２映像信号とを分離し、分離した第１映像信号および第２映像信号をそれぞれ、第１映像復号部１２_１および第２映像復号部１２_２に出力する（図２のステップＳ１）。

次に、第１映像復号部１２_１は、分離部１１から供給された第１映像信号を復号する（ステップＳ２）。その後、第１映像調整部１３_１は、復号された第１映像信号に含まれる第１映像のサイズを表示画面サイズに調整（正規化）する（ステップＳ３）。このとき、第１映像調整部１３_１は、第１映像調整部１３_１でサイズ調整された第１映像のうち、所定のタイミングにおける第１映像（この場合は静止画であるので「第１画像」と記載する）を類似度算出処理部１５に供給する。

また、第２映像復号部１２_２は、分離部１１から供給された第２映像信号を復号する（ステップＳ４）。その後、第２映像調整部１３_２は、復号された第２映像信号に含まれる第２映像のサイズを表示画面サイズに調整（正規化）する（ステップＳ５）。このとき、第２映像調整部１３_２は、第２映像調整部１３_２でサイズ調整された第２映像のうち、所定のタイミングにおける第２映像（この場合は静止画であるので「第２画像」と記載する）を類似度算出処理部１５に供給する。

ここで、第１映像調整部１３_１から類似度算出処理部１５に供給される第１画像と、第２映像調整部１３_２から類似度算出処理部１５に供給される第２画像は、時間同期された画像データ（つまり同一のタイミングにおける画像データ）であり、これらは同一の画像である。なお、ステップＳ２〜Ｓ５の順序は、この順序に限定されることはない。

類似度算出処理部１５に供給される第１画像および第２画像は、第１映像調整部１３_１および第２映像調整部１３_２において色差情報が除去された画像データであり、この場合は第１画像の各々の画素における輝度値および第２画像の各々の画素における輝度値が類似度算出処理部１５に供給される。このように、第１画像の輝度値と第２画像の輝度値を用いることで、後述する類似度算出処理における計算量を削減することができる。また、人間の視覚は色差よりも輝度に敏感であることから、輝度値を用いることが好ましい。一方、本実施の形態では、類似度算出処理の計算精度を高めるために、輝度値に加えて色差情報を用いてもよい。また、輝度値を用いずに色差情報を用いてもよい。すなわち、類似度算出処理に用いる画素データ（輝度値、色差情報）は、計算量や計算精度を考慮してユーザが任意に決定することができる。

次に、類似度算出処理部１５は、第１映像調整部１３_１から供給された第１画像と第２映像調整部１３_２から供給された第２画像の類似度Ｒ０を算出する（図３のステップＳ６）。このとき、類似度算出処理部１５は、第１画像の各々の座標における画素値と、第１画像の各々の座標と対応する座標における第２画像の画素値とを用いて、類似度を算出する。上述したように、例えば、第１画像の画素値は第１画像の輝度値であり、第２画像の画素値は第２画像の輝度値である。以下、類似度算出処理について具体的に説明する。

図４は、類似度算出処理を説明するためのフローチャートである。図４のフローチャートに示すステップＳ２１及びステップＳ２５は、ｘの値を「０≦ｘ＜画像幅」の範囲で１ずつ増加させる処理を繰り返すループ処理を示している。また、ステップＳ２２及びステップＳ２４は、ｙの値を「０≦ｙ＜画像高さ」の範囲で１ずつ増加させる処理を繰り返すループ処理を示している。また、ステップＳ２３は、第１画像の座標（ｘ、ｙ）における画素値Ｐ１（ｘ、ｙ）と、第２画像の座標（ｘ、ｙ）における画素値Ｐ２（ｘ、ｙ）との差の二乗をループ処理毎に加算する処理（つまり、ｓｕｍ＝ｓｕｍ＋｛Ｐ１（ｘ、ｙ）−Ｐ２（ｘ、ｙ）｝^２）を示している。

図４に示すフローチャートでは、最初のループ処理において第１及び第２画像の座標（０、０）に対して、ｓｕｍ＝ｓｕｍ＋｛Ｐ１（０、０）−Ｐ２（０、０）｝^２）を求める。また、次のループ処理（ステップＳ２２〜ステップＳ２４）では、第１及び第２画像の座標（０、１）に対して、ｓｕｍ＝ｓｕｍ＋｛Ｐ１（０、１）−Ｐ２（０、１）｝^２）を求める。また、次のループ処理（ステップＳ２２〜ステップＳ２４）では、第１及び第２画像の座標（０、２）に対して、ｓｕｍ＝ｓｕｍ＋｛Ｐ１（０、２）−Ｐ２（０、２）｝^２を求める。このような処理を繰り返すことで、各々の座標（ｘ、ｙ）において、第１画像の座標（ｘ、ｙ）における画素値Ｐ１（ｘ、ｙ）と第２画像の座標（ｘ、ｙ）における画素値Ｐ２（ｘ、ｙ）との差の二乗の和を求めることができる。

その後、ステップＳ２１〜Ｓ２５で求めた値ｓｕｍに対して、類似度Ｒ＝１／｛ｓｕｍ／（画像幅×画像高さ）｝を演算することで、類似度Ｒを求めることができる（ステップＳ２６）。つまり、「ｓｕｍ／（画像幅×画像高さ）」は平均二乗誤差を示しており、この平均二乗誤差の逆数を求めることで、類似度Ｒを算出することができる。

ここで、「画像幅」および「画像高さ」は、第１画像および第２画像のうち類似度算出処理で用いた領域の画像幅および画像高さに対応している。換言すると、類似度算出処理では第１画像および第２画像の重複する部分について類似度を算出しており、「画像幅」および「画像高さ」は、第１画像と第２画像とが重複する領域の画像幅および画像高さに対応している。類似度算出処理で用いる第１画像と第２画像の領域（画像幅および画像高さ）は任意に決定することができる。なお、第１画像の画像幅および画像高さと第２画像の画像幅および画像高さはそれぞれ同一である。

類似度Ｒは、第１画像と第２画像とが類似している度合いを示しており、類似度Ｒの値が高いほど第１画像と第２画像とが類似していることを示している。つまり、第１画像と第２画像とが類似している場合は、各々の座標において、第１画像の画素値Ｐ１（ｘ、ｙ）と第２画像の画素値Ｐ２（ｘ、ｙ）とが近似しているため、ｓｕｍ＝ｓｕｍ＋｛Ｐ１（ｘ、ｙ）−Ｐ２（ｘ、ｙ）｝^２の値が小さくなる。よって、この場合は、類似度Ｒ＝１／｛ｓｕｍ／（画像幅×画像高さ）｝の値が大きくなる。

逆に、第１画像と第２画像とが類似していない場合は、各々の座標において、第１画像の画素値Ｐ１（ｘ、ｙ）と第２画像の画素値Ｐ２（ｘ、ｙ）とが近似していないため、ｓｕｍ＝ｓｕｍ＋｛Ｐ１（ｘ、ｙ）−Ｐ２（ｘ、ｙ）｝^２の値が大きくなる。よって、この場合は、類似度Ｒ＝１／｛ｓｕｍ／（画像幅×画像高さ）｝の値が小さくなる。

次に、図３のフローチャートに示すように、ステップＳ６で算出した類似度Ｒ０を暫定的に類似度の最大値Ｒｍａｘに設定する（ステップＳ７）。

その後、サイズ調整量決定処理部１６は、第２画像に対して拡縮処理を実施する（ステップＳ８）。具体的には、サイズ調整量決定処理部１６は、第２映像調整部１３_２を用いて第２画像に対して拡縮処理を実施する。このとき、サイズ調整量決定処理部１６は、拡縮処理を実施するための命令を第２映像調整部１３_２に出力する。第２映像調整部１３_２は、サイズ調整量決定処理部１６からの命令に応じて、第２画像に対して拡縮処理を実施する。なお、このとき拡縮処理される第２画像（元の画像）は、ステップＳ６で類似度Ｒ０を算出した際に用いた第２画像である。

第２映像調整部１３_２は、例えば第２画像を垂直方向に１ライン分縮小することで拡縮処理を実施する。その後、第２映像調整部１３_２は、拡縮処理された第２画像を類似度算出処理部１５に出力する。類似度算出処理部１５は、第１画像と拡縮処理された第２画像（拡縮画像）との類似度Ｒ１を算出する（ステップＳ９）。類似度Ｒ１を算出する処理については、ステップＳ６で説明した場合と同様であるので重複した説明は省略する。

次に、サイズ調整量決定処理部１６は、第２画像に対してシフト処理を実施する（ステップＳ１０）。具体的には、サイズ調整量決定処理部１６は、第２映像調整部１３_２を用いて第２画像に対してシフト処理を実施する。このとき、サイズ調整量決定処理部１６は、第２画像に対してシフト処理を実施するための命令を第２映像調整部１３_２に出力する。第２映像調整部１３_２は、サイズ調整量決定処理部１６からの命令に応じて、第２画像に対してシフト処理を実施する。なお、このときシフト処理される第２画像（元の画像）は、ステップＳ６で類似度Ｒ０を算出した際に用いた第２画像である。つまり、本実施の形態では、ステップＳ６で類似度Ｒ０を算出した際に用いた第２画像に対して、拡縮処理（ステップＳ８）とシフト処理（ステップＳ１０）とをそれぞれ実施している。

第２映像調整部１３_２は、例えば第２画像を垂直方向に１ライン分シフト（平行移動）することでシフト処理を実施する。その後、第２映像調整部１３_２は、シフト処理された第２画像を類似度算出処理部１５に出力する。類似度算出処理部１５は、第１画像とシフト処理された第２画像（シフト画像）との類似度Ｒ２を算出する（ステップＳ１１）。類似度Ｒ２を算出する処理については、ステップＳ６で説明した場合と同様であるので重複した説明は省略する。

その後、サイズ調整量決定処理部１６は、ステップＳ９で算出した類似度Ｒ１とステップＳ１１で算出した類似度Ｒ２とを比較する（ステップＳ１２）。そして、類似度Ｒ１が類似度Ｒ２よりも大きい場合（ステップＳ１２：Ｎｏ）、ステップＳ７で設定された類似度の最大値Ｒｍａｘと類似度Ｒ１とを比較する（ステップＳ１３）。その結果、ステップＳ７で設定された類似度の最大値Ｒｍａｘよりも類似度Ｒ１が大きい場合（ステップＳ１３：Ｙｅｓ）、類似度の最大値Ｒｍａｘを類似度Ｒ１の値に設定（更新）する（ステップＳ１５）。その後、ステップＳ８〜ステップＳ１６の処理を繰り返す。次のステップＳ８〜ステップＳ１６の処理を繰り返す際、今回のステップＳ８において拡縮処理された第２画像（類似度Ｒ１の算出に用いられた第２画像）が次の拡縮処理およびシフト処理を実施する第２画像（基準画像）として用いられる。

一方、類似度Ｒ１が類似度Ｒ２よりも小さい場合（ステップＳ１２：Ｙｅｓ）、ステップＳ７で設定された類似度の最大値Ｒｍａｘと類似度Ｒ２とを比較する（ステップＳ１４）。その結果、ステップＳ７で設定された類似度の最大値Ｒｍａｘよりも類似度Ｒ２が大きい場合（ステップＳ１４：Ｙｅｓ）、類似度の最大値Ｒｍａｘを類似度Ｒ２の値に設定（更新）する（ステップＳ１６）。その後、ステップＳ８〜ステップＳ１６の処理を繰り返す。次のステップＳ８〜ステップＳ１６の処理を繰り返す際、今回のステップＳ１０においてシフト処理された第２画像（類似度Ｒ２の算出に用いられた第２画像）が次の拡縮処理およびシフト処理を実施する第２画像（基準画像）として用いられる。

すなわち、本実施の形態にかかる映像信号受信装置では、第２画像に拡縮処理を実施した拡縮画像と第１画像との類似度Ｒ１を算出するとともに、第２画像にシフト処理を実施したシフト画像と第１画像との類似度Ｒ２を算出し、拡縮画像およびシフト画像のうち算出された類似度が高い方の画像を次の拡縮処理およびシフト処理を実施する画像（基準画像）に用いている。

図５は、本実施の形態にかかる映像信号受信装置における画像サイズ決定処理のフローを説明するための図である。図５の第２画像２１は、初期の第２画像（縮小幅＝０、シフト量＝０）を示している。第２画像２１は、ステップＳ６で類似度Ｒ０を算出した際の第２画像に対応している。本実施の形態では、まず、最初のフローにおいて、第２画像２１に対して拡縮処理（ステップＳ８）とシフト処理（ステップＳ１０）とを実施する。

すなわち、図５に示すように、第２画像２１に対して拡縮処理（ステップＳ８）を実施する場合は、第２画像２１を垂直方向に１ライン分縮小する処理を実施する。換言すると、第２画像２１の画像高さが１ライン分削られた画像高さとなるような縮小率で、第２画像２１を垂直方向に縮小する。第２画像２１を縮小することで、第２画像２１のアスペクト比が変更される。その後、縮小された画像の上端を、垂直方向の上端に揃える。図５に示す例では、第２画像２１に対して拡縮処理を実施した第２画像２２は、垂直方向の上側に１ライン分縮小されている（縮小幅＝１、シフト量＝０）。拡縮処理後の第２画像２２は上端が揃えられている。

また、第２画像２１に対してシフト処理（ステップＳ１０）を実施する場合は、第２画像２１のアスペクト比を変更することなく、第２画像２１を垂直方向の下側に１ライン分平行移動する。図５に示す例では、第２画像２１に対してシフト処理を実施した第２画像２３は、垂直方向の下側に１ライン分シフトされている（縮小幅＝０、シフト量＝−１）。

その後、ステップＳ９において、第１画像と拡縮処理された第２画像（拡縮画像）２２との類似度Ｒ１を算出する。また、ステップＳ１１において、第１画像とシフト処理された第２画像（シフト画像）２３との類似度Ｒ２を算出する。そして、第２画像（拡縮画像）２２および第２画像（シフト画像）２３のうち、算出された類似度Ｒ１、Ｒ２が高い方の画像が次の拡縮処理およびシフト処理を実施する画像（基準画像）に用いられる。図５に示す例では、第２画像（シフト画像）２３の類似度Ｒ２よりも第２画像（拡縮画像）２２の類似度Ｒ１のほうが大きいので、第２画像２２が、次の拡縮処理およびシフト処理を実施する基準画像となる。

次のフロー（つまり、２回目のステップＳ８〜Ｓ１６）において、第２画像２２に対して拡縮処理およびシフト処理を実施する。すなわち、図５に示すように、新たな基準画像である第２画像２２を垂直方向に１ライン分縮小し、その後、垂直方向の上端に画像の上端を揃えることで拡縮処理（ステップＳ８）を実施する。第２画像２２に対して拡縮処理を実施した後の第２画像２４の縮小幅およびシフト量、すなわち、第２画像２１からのトータルの縮小幅およびシフト量は、縮小幅＝２、シフト量＝０となる。

また、新たな基準画像である第２画像２２を垂直方向の下側に１ライン分平行移動することで、シフト処理（ステップＳ１０）を実施する。第２画像２２に対してシフト処理を実施した後の第２画像２５の縮小幅およびシフト量、すなわち、第２画像２１からのトータルの縮小幅およびシフト量は、縮小幅＝１、シフト量＝−１となる。

その後、ステップＳ９において、第１画像と拡縮処理された第２画像（拡縮画像）２４との類似度Ｒ１を算出する。また、ステップＳ１１において、第１画像とシフト処理された第２画像（シフト画像）２５との類似度Ｒ２を算出する。そして、第２画像（拡縮画像）２４および第２画像（シフト画像）２５のうち、算出された類似度Ｒ１、Ｒ２が高い方の画像が次の拡縮処理およびシフト処理を実施する画像（基準画像）に用いられる。図５に示す例では、第２画像（拡縮画像）２４の類似度Ｒ１よりも第２画像（シフト画像）２５の類似度Ｒ２のほうが大きいので、第２画像（シフト画像）２５が、次の拡縮処理およびシフト処理を実施する基準画像となる。

そして、次のフロー（つまり、３回目のステップＳ８〜Ｓ１６）において、第２画像２５に対して拡縮処理およびシフト処理を実施する。図５に示すように、第２画像２５に対して拡縮処理を実施した第２画像２６は、垂直方向の上側に１ライン分更に縮小されて、第２画像２１からのトータルの縮小幅およびシフト量は、縮小幅＝２、シフト量＝−１となる。また、第２画像２５に対してシフト処理を実施した第２画像２７は、垂直方向の下側に１ライン分更にシフトされて、第２画像２１からのトータルの縮小幅およびシフト量は、縮小幅＝１、シフト量＝−２となる。

その後、ステップＳ９において、第１画像と拡縮処理された第２画像（拡縮画像）２６との類似度Ｒ１を算出する。また、ステップＳ１１において、第１画像とシフト処理された第２画像（シフト画像）２７との類似度Ｒ２を算出する。そして、第２画像（拡縮画像）２６および第２画像（シフト画像）２７のうち、算出された類似度Ｒ１、Ｒ２が高い方の画像が次の拡縮処理およびシフト処理を実施する画像に用いられる。以降、同様の動作を繰り返すことで、画像サイズ決定処理が実施される。

本実施の形態では、図３のフローチャートに示すステップＳ８〜Ｓ１６を繰り返す際、すなわち、類似度算出処理とサイズ調整量決定処理とを繰り返す際、算出される類似度が高くなるように第２画像の画像サイズを調整する。そして、類似度の最大値Ｒｍａｘが最大となった際に（ステップＳ１３：Ｎｏ、またはステップＳ１４：Ｎｏ）、演算処理部１４はステップＳ８〜Ｓ１６の処理を終了する。そして、類似度の最大値Ｒｍａｘが最大となった際の拡縮量とシフト量を、第２画像の画像サイズ調整量として決定する。

第２映像調整部１３_２は、決定された第２画像の画像サイズ調整量（拡縮量、シフト量）を用いて第２映像のサイズを調整し、調整後の第２映像を端処理部１７に出力する。端処理部１７は、決定された第２画像の画像サイズ調整量（拡縮量、シフト量）に基づいて、調整後の第２映像の端処理を実施する（ステップＳ１７）。図５に示した例のように、第２画像に対して垂直方向に縮小する処理を実施した場合は、第２画像の上下に余白領域が発生する。このような場合、端処理部１７は、余白領域を補間する処理を実施する。例えば、端処理部１７は、予め保存されている補間用の画像を余白領域に埋め込むことで、余白領域を補間する処理を実施することができる。端処理部１７で端処理された後の第２映像信号は、映像切替部１８に供給される。

映像切替部１８は、第１映像調整部１３_１から出力された第１映像信号および端処理部１７から出力された第２映像信号を入力し、第１映像信号および第２映像信号のうちのいずれか一方を出力制御部１９に出力する。出力制御部１９は、映像切替部１８から供給された映像信号（第１映像信号または第２映像信号）をディスプレイ（不図示）に表示する際の制御を実施する。

上述の処理により、映像信号の受信処理が実施される。

なお、図５では拡縮処理の一例として第２画像を垂直方向に縮小した場合を示したが、拡縮処理は、垂直方向に拡大する処理、水平方向に縮小する処理、水平方向に拡大する処理、及びこれらを組み合わせた処理であってもよい。また、図５ではシフト処理の一例として、第２画像を垂直方向下側にシフトした場合を示したが、シフト処理は、垂直方向上側にシフトする処理、水平方向右側にシフトする処理、水平方向左側にシフトする処理、及びこれらを組み合わせた処理であってもよい。

例えば、上述の全ての拡縮処理およびシフト処理を組み合わせて実施してもよい。具体的には、垂直方向に縮小する処理と垂直方向下側にシフトする処理との組み合わせ、垂直方向に縮小する処理と垂直方向上側にシフトする処理との組み合わせ、垂直方向に縮小する処理と水平方向右側にシフトする処理との組み合わせ、垂直方向に縮小する処理と水平方向左側にシフトする処理との組み合わせ、垂直方向に拡大する処理と垂直方向下側にシフトする処理との組み合わせ、垂直方向に拡大する処理と垂直方向上側にシフトする処理との組み合わせ、垂直方向に拡大する処理と水平方向右側にシフトする処理との組み合わせ、垂直方向に拡大する処理と水平方向左側にシフトする処理との組み合わせ、水平方向に縮小する処理と垂直方向下側にシフトする処理との組み合わせ、水平方向に縮小する処理と垂直方向上側にシフトする処理との組み合わせ、水平方向に縮小する処理と水平方向右側にシフトする処理との組み合わせ、水平方向に縮小する処理と水平方向左側にシフトする処理との組み合わせ、水平方向に拡大する処理と垂直方向下側にシフトする処理との組み合わせ、水平方向に拡大する処理と垂直方向上側にシフトする処理との組み合わせ、水平方向に拡大する処理と水平方向右側にシフトする処理との組み合わせ、水平方向に拡大する処理と水平方向左側にシフトする処理との組み合わせ、を各々実施してもよい。

上述の拡縮処理およびシフト処理を組み合わせて実施した場合は、各々の組み合わせにおいて類似度が算出される。本実施の形態では、各々の組み合わせで算出された類似度のうち、最も高い類似度が得られた際の拡縮量とシフト量を、第２画像の画像サイズ調整量として決定する。このように、拡縮処理およびシフト処理の組み合わせを各々実施することで、画像サイズ決定処理を精度よく実施することができる。

このとき、特定の拡縮処理およびシフト処理の組み合わせを実施しても類似度が改善しない場合は、この特定の拡縮処理およびシフト処理を打ち切って、次の拡縮処理およびシフト処理の組み合わせを実施するようにしてもよい。

具体的に説明すると、例えば、第２画像を垂直方向に縮小する処理と第２画像を垂直方向下側にシフトする処理との組み合わせを実施した際、第２画像を垂直方向に縮小する処理を数回繰り返しても類似度が高くならない場合や第２画像を垂直方向下側にシフトする処理を数回繰り返しても類似度が高くならない場合には、これらの処理を打ち切って、次の拡縮処理およびシフト処理の組み合わせを実施するようにしてもよい。このように、類似度が高くならない処理を途中で打ち切ることで、全体の処理時間を短縮することができる。

また、上述の説明では、拡縮処理およびシフト処理を１ライン単位で実施する例を示したが、拡縮処理およびシフト処理は複数ライン単位（例えば、２ライン単位）で実施してもよい。このように、拡縮処理およびシフト処理を複数ライン単位で実施することで、画像サイズ決定処理にかかる処理時間を短縮することができる。一方、拡縮処理およびシフト処理を実施する単位ラインの数を大きくし過ぎると、画像サイズ決定処理の精度が悪化する。このため、拡縮処理およびシフト処理を実施する単位ラインの数は、画像サイズ決定処理にかかる処理時間と精度を考慮して決定することが好ましい。

図６は、画像サイズ決定処理の具体例を説明するための図である。図６に示す［例１］では、第２映像復号部１２_２で復号された第２画像３２ａが、第１映像復号部１２_１で復号された第１画像３１ａと比べて、垂直方向に伸びた画像となっている。このような第２画像３２ａに対して拡縮処理・シフト処理を実施する際は、図３のステップＳ８における拡縮処理において第２画像３２ａを垂直方向に縮小する処理と、ステップＳ１０におけるシフト処理において第２画像３２ａを垂直方向にシフトする処理とを繰り返す。このような処理を繰り返すことで、第２映像出力例３３ａに示すように、第２画像３２ａのアスペクト比を第１画像３１ａのアスペクト比に合わせることができる。また、第２画像３２ａの垂直方向における位置を第１画像３１ａの垂直方向における位置に合わせることができる。なお、［例１］では第２画像３２ａに対して垂直方向に縮小する処理を実施しているので、第２映像出力例３３ａに示すように、第２画像の上下に余白領域が発生する。このような場合、端処理部１７は、余白領域を補間する処理を実施する。

図６の［例２］では、第２映像復号部１２_２で復号された第２画像３２ｂが、第１映像復号部１２_１で復号された第１画像３１ｂと比べて、垂直方向において縮んだ画像となっている。このような第２画像３２ｂに対して拡縮処理・シフト処理を実施する際は、図３のステップＳ８における拡縮処理において第２画像３２ｂを垂直方向に拡大する処理と、ステップＳ１０におけるシフト処理において第２画像３２ｂを垂直方向にシフトする処理とを繰り返す。このような処理を繰り返すことで、第２映像出力例３３ｂに示すように、第２画像３２ｂのアスペクト比を第１画像３１ｂのアスペクト比に合わせることができる。また、第２画像３２ｂの垂直方向における位置を第１画像３１ｂの垂直方向における位置に合わせることができる。なお、［例２］では第２画像３２ｂに対して垂直方向に拡大する処理を実施しているので、第２映像出力例３３ｂに示すように、第２画像の上下にディスプレイの表示領域外の領域が発生する。このような場合、端処理部１７は、表示領域外の領域を除去する処理を実施する。

図６の［例３］では、第２映像復号部１２_２で復号された第２画像３２ｃが、第１映像復号部１２_１で復号された第１画像３１ｃと比べて、水平方向に伸びた画像となっている。このような第２画像３２ｃに対して拡縮処理・シフト処理を実施する際は、図３のステップＳ８における拡縮処理において第２画像３２ｃを水平方向に縮小する処理と、ステップＳ１０におけるシフト処理において第２画像３２ｃを水平方向にシフトする処理とを繰り返す。このような処理を繰り返すことで、第２映像出力例３３ｃに示すように、第２画像３２ｃのアスペクト比を第１画像３１ｃのアスペクト比に合わせることができる。また、第２画像３２ｃの水平方向における位置を第１画像３１ｃの水平方向における位置に合わせることができる。なお、［例３］では第２画像３２ｃに対して水平方向に縮小する処理を実施しているので、第２映像出力例３３ｃに示すように、第２画像の左右に余白領域が発生する。このような場合、端処理部１７は、余白領域を補間する処理を実施する。

図６の［例４］では、第２映像復号部１２_２で復号された第２画像３２ｄが、第１映像復号部１２_１で復号された第１画像３１ｄと比べて、水平方向において縮んだ画像となっている。このような第２画像３２ｄに対して拡縮処理・シフト処理を実施する際は、図３のステップＳ８における拡縮処理において第２画像３２ｄを水平方向に拡大する処理と、ステップＳ１０におけるシフト処理において第２画像３２ｄを水平方向にシフトする処理とを繰り返す。このような処理を繰り返すことで、第２映像出力例３３ｄに示すように、第２画像３２ｄのアスペクト比を第１画像３１ｄのアスペクト比に合わせることができる。また、第２画像３２ｄの水平方向における位置を第１画像３１ｄの水平方向における位置に合わせることができる。なお、［例４］では第２画像３２ｄに対して水平方向に拡大する処理を実施しているので、第２映像出力例３３ｄに示すように、第２画像の左右にディスプレイの表示領域外の領域が発生する。このような場合、端処理部１７は、表示領域外の領域を除去する処理を実施する。

図７は、本実施の形態にかかる映像信号受信装置の動作を説明するためのタイミングチャートであり、第１及び第２映像の出力タイミングと、画像サイズ決定処理のタイミングを示している。図７に示すように、視聴開始のタイミングｔ１において、出力制御部１９は第１映像を出力する。また、演算処理部１４は、第２画像に対して画像サイズ決定処理（図２、図３参照）を実施する。この画像サイズ決定処理は、タイミングｔ２において終了する。このとき求めた第２画像の画像サイズ調整量（拡縮量、シフト量）は、メモリ等の記憶手段（図８のメモリ１０４参照）に保存される。

なお、第１映像復号部１２_１および第２映像復号部１２_２は、分離部１１から第１映像信号および第２映像信号が供給されている間、復号処理を常に実施している。例えば、出力制御部１９が第１映像を出力している場合であっても、第２映像復号部１２_２は第２映像信号を復号している。逆に、出力制御部１９が第２映像を出力している場合であっても、第１映像復号部１２_１は第１映像信号を復号している。

その後、タイミングｔ３において第１映像から第２映像に映像が切り替わると、第２映像調整部１３_２は、保存されていた第２画像の画像サイズ調整量（拡縮量、シフト量）を用いて第２映像のサイズを調整する。そして、サイズ調整された後の第２映像は、出力制御部１９からディスプレイに出力される。このとき、第２映像調整部１３_２は、タイミングｔ３の前に第２画像の画像サイズ調整量（拡縮量、シフト量）を用いて第２映像のサイズを予め調整しておいてもよい。

その後、タイミングｔ４において第２映像から第１映像に映像が切り替わると、出力制御部１９からディスプレイに第１映像が出力される。そして、タイミングｔ５において番組が切り替わると、演算処理部１４は、切り替わった後の番組の第２画像に対して画像サイズ決定処理（図２、図３参照）を実施する。この画像サイズ決定処理は、タイミングｔ６において終了する。このとき求めた第２画像の画像サイズ調整量（拡縮量、シフト量）は、メモリ等の記憶手段に保存される。

例えば、番組の切り替えは、ユーザによるリモコン操作を用いて検出することができる。また、番組の切り替えは、電子番組表ＥＰＧ（Electronic Program Guide）を用いても検出することができる。例えば、地上デジタル放送の場合はマルチチャンネル機能を備えるので、この場合は、現在視聴している番組（主チャンネル）が終了した後に、マルチチャンネル放送に自動的に切り替わるが、このときの番組の切り替えを電子番組表ＥＰＧを用いて検出することができる。番組が切り替わると、切り替わった後の映像信号を受信したことを示す信号が受信処理部１０から演算処理部１４に供給される（図１参照）。

その後、タイミングｔ７において第１映像から第２映像に映像が切り替わると、第２映像調整部１３_２は、保存されていた第２画像の画像サイズ調整量（拡縮量、シフト量）を用いて第２映像のサイズを調整する。そして、サイズ調整された後の第２映像は、出力制御部１９からディスプレイに出力される。

上述のように、本実施の形態にかかる映像信号受信装置では、視聴開始のタイミングｔ１、及び番組が切り替わったタイミングｔ５において画像サイズ決定処理を実施している。一度、画像サイズ調整量が決定されると、同一の番組を視聴している間は画像サイズ決定処理が不要となる。

また、本実施の形態では、第１映像および第２映像の各々１枚の画像に対して画像サイズ決定処理を実施しているが、画像調整の精度を高めるために複数の画像（フレーム）に対して継続的に画像サイズ決定処理を実施してもよい。

次に、本実施の形態にかかる映像信号受信装置のハードウェア構成について説明する。図８は、本実施の形態にかかる映像信号受信装置を備える映像受信システムの一例を示すブロック図であり、本実施の形態にかかる映像信号受信装置のハードウェア構成の一例を示している。

図８に示す映像受信システム１００は、データ処理装置１０１、アンテナ１０２、チューナ１０３、メモリ１０４、及びディスプレイ１０５を備える。アンテナ１０２およびチューナ１０３は、デジタル放送の映像信号を受信する。データ処理装置１０１は、アンテナ１０２およびチューナ１０３で受信した映像信号に対して各種の処理を実施する。メモリ１０４はＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）等で構成されており、データ処理装置１０１で実行するプログラムやデータを格納する。ディスプレイ１０５は、データ処理装置１０１で生成された映像を表示する。

データ処理装置１０１はＬＳＩ（Large Scale Integrated circuit）等の半導体チップで構成されている。データ処理装置１０１は、バス１１０、ＴＳインタフェース１１１、デマルチプレクサ１１２、ビデオデコーダ１１３、ビデオスケーラ１１４、ＣＰＵ（Central Processing Unit）１１５、メモリインタフェース１１６、及びディスプレイインタフェース１１７を備える。データ処理装置１０１を構成する各々の構成要素は、バス１１０を介して互いに接続されている。

ＴＳインタフェース１１１は、図１の受信処理部１０に対応している。ＴＳインタフェース１１１は、チューナ１０３と通信を行い、チューナ１０３から映像信号を受信する。映像信号には第１映像信号（フルセグ）と第２映像信号（ワンセグ）とが含まれている。

デマルチプレクサ１１２は、図１の分離部１１に対応しており、ＴＳインタフェース１１１で受信した映像信号（ＴＳデータ）に含まれる第１映像信号と第２映像信号とを分離する。

ビデオデコーダ１１３は、図１の第１映像復号部１２_１および第２映像復号部１２_２に対応しており、デマルチプレクサ１１２で分離された第１映像信号および第２映像信号を復号する。

ビデオスケーラ１１４は、図１の第１映像調整部１３_１および第２映像調整部１３_２に対応しており、復号された第１映像信号に含まれる第１映像および復号された第２映像信号に含まれる第２映像のサイズを調整する。

メモリインタフェース１１６は、データ処理装置１０１からメモリ１０４へのアクセスを制御する。ディスプレイインタフェース１１７は、図１の出力制御部１９に対応しており、データ処理装置１０１で処理された映像信号（第１映像信号または第２映像信号）をディスプレイ１０５に表示する際の制御を実施する。

ＣＰＵ（１１５）は、図１の演算処理部１４に対応しており、上述の画像サイズ決定処理（つまり、類似度算出処理およびサイズ調整量決定処理）を実施する。また、ＣＰＵ（１１５）は、データ処理装置１０１が備えるＴＳインタフェース１１１、デマルチプレクサ１１２、ビデオデコーダ１１３、ビデオスケーラ１１４、メモリインタフェース１１６、及びディスプレイインタフェース１１７をそれぞれ制御する。

例えば、ビデオデコーダ１１３は、ＣＰＵ（１１５）からの制御に基づいて、第１映像信号および第２映像信号を復号する。また、ビデオスケーラは、ＣＰＵ（１１５）からの制御に基づいて、第１映像信号に含まれる第１映像および第２映像信号に含まれる第２映像のサイズをそれぞれ調整する。

図１に示した映像信号受信装置１における各々の機能は、図８に示したメモリ１０４に格納されているプログラムをＣＰＵ（１１５）で実行することで実現される。

背景技術で説明したように、地上デジタル放送では、画質と電波感度の異なる２つの映像信号（フルセグ放送、ワンセグ放送）が送出されている。フルセグ、ワンセグは同一の映像コンテンツ（同一の番組）を送出しているため、カーナビゲーションを代表とする移動体端末では電波受信感度に応じてフルセグとワンセグの切り替えを実施して、最適な映像を表示している。

しかしながら、フルセグとワンセグとではエンコードの方式が異なるため、フルセグ映像とワンセグ映像との間に映像サイズ（アスペクト比）の違いが生じる。このため、フルセグとワンセグとを切り替えた際に、ディスプレイに表示される映像にずれが生じ、ユーザに違和感を感じさせるという問題があった。換言すると、同一の映像コンテンツを異なる映像信号で受信した際、ディスプレイに表示される映像を切り替えると、ユーザに違和感を感じさせる場合があった。

また、映像サイズ（アスペクト比）は各放送局によっても異なっており、このような各放送局間における画像サイズ（アスペクト比）の違いは、各放送局で用いられている画像処理装置（エンコード装置）の違いや、各放送局においてフルセグの映像からワンセグの映像を生成する際のスケーリングの違い等が原因の一つである。

上記課題を解決するために、本実施の形態にかかる映像信号受信装置では、第１映像信号に含まれる第１画像と第２映像信号に含まれる第２画像との類似度を算出する類似度算出処理と、第２映像信号に含まれる第２画像の画像サイズ調整量を類似度算出処理で算出された類似度に基づいて決定するサイズ調整量決定処理と、を実施している。そして、類似度算出処理とサイズ調整量決定処理とを繰り返す際、類似度算出処理で算出される類似度が高くなるように第２画像の画像サイズを調整している。具体的には、類似度算出処理で算出された類似度に基づいて第２画像の画像サイズ調整量を決定し、決定された画像サイズ調整量に応じて調整された第２画像と第１画像との類似度を算出し、算出された類似度に基づいて第２画像の画像サイズ調整量を決定する、処理を繰り返す際、類似度算出処理で算出される類似度が高くなるように第２画像の画像サイズ調整量を決定している。

このように、本実施の形態にかかる映像信号受信装置では、第１画像と第２画像の類似度が高くなるように第２画像の画像サイズを調整しているので、第１画像に対する第２画像のずれを小さくすることができる。すなわち、第２画像のアスペクト比を第１画像のアスペクト比に合わせることができる。よって、同一の映像コンテンツを異なる映像信号で受信した際に、ディスプレイに表示される映像を切り替えてもユーザが違和感を感じることを抑制することができる。

なお、特許文献１に開示されている技術では、上記の問題を解決するために、ワンセグの映像とフルセグの映像のそれぞれ対して特徴部分を検出し、検出した特徴部分の比較結果に基づいてスケーリング率を検出し、このスケーリング率を用いてワンセグの映像のずれを補正している。

しかしながら、特許文献１に開示されている技術では、一定以上の長さの縦線と横線の交点を特徴部分として検出しているため、例えば雨空のような明確な線や交点が存在しない映像の場合は、比較対象となる特徴部分を抽出することができない。この場合はスケーリング率を検出することができないため、ワンセグの映像のずれを適切に補正することができないという問題がある。

これに対して本実施の形態にかかる映像信号受信装置では、映像の特徴部分を検出するのではなく、第１映像信号に含まれる第１画像と第２映像信号に含まれる第２画像の類似度を定量的に算出することで画像サイズを調整しているので、映像の特徴部分に依存せずに最適な画像サイズ調整量を決定することができる。

＜実施の形態２＞
次に、実施の形態２について説明する。図９は、実施の形態２にかかる映像信号受信装置２を説明するためのブロック図である。本実施の形態かかる映像信号受信装置２は、実施の形態１で説明した映像信号受信装置１（図１等参照）と比べて、演算処理部４０が領域決定部４１を備える点が異なる。これ以外の構成及び動作については、実施の形態１で説明した映像信号受信装置と同様であるので、同一の構成要素には同一の符号を付し重複した説明は省略する。

図９に示すように、演算処理部４０は、類似度算出処理部１５、サイズ調整量決定処理部１６に加えて、領域決定部４１を備える。領域決定部４１は、類似度算出処理とサイズ調整量決定処理とを実施する対象画像領域を決定する。

以下、本実施の形態にかかる映像信号受信装置２の動作について、図１０に示すフローチャートを用いて説明する。なお、図１０では、画像サイズ決定処理について説明しているが、これ以外の動作については実施の形態１で説明した場合（図２、図３参照）と同様である。

まず、領域決定部４１は、第１画像および第２画像の画像領域を各々４つの領域に分割する（ステップＳ３１）。具体的には、図１１に示すように、第１画像および第２画像の画像領域５１を領域１〜領域４に分割する。

その後、類似度算出処理部１５は、各々の画像領域（領域１〜領域４）における類似度を算出する（ステップＳ３２）。類似度を算出する処理については、実施の形態１で説明した場合（図４参照）と同様である。例えば、本実施の形態では、図４における類似度算出処理を実施する際に、第１及び第２画像の座標（ｘ、ｙ）を各々の領域１〜領域４に設定して各々の領域１〜領域４における類似度をそれぞれ算出する。そして、各々の画像領域（領域１〜領域４）のうち、算出された類似度が最も低い画像領域を対象画像領域に決定する（ステップＳ３３）。本実施の形態では、一例として、図１１の領域１を決定された対象画像領域ｘとする。

そして、決定された対象画像領域が所定のサイズであるか否かを判定する（ステップＳ３４）。現時点での対象画像領域（図１１参照）のサイズは１／４であるので、例えば、所定のサイズを１／１６に設定した場合は（ステップＳ３４：Ｎｏ）、再度、ステップＳ３１〜Ｓ３４の動作を繰り返す。

つまり、領域決定部４１は、第１画像および第２画像の対象画像領域を各々４つの領域に分割する（ステップＳ３１）。具体的には、図１１に示すように、第１画像および第２画像の画像領域５２の対象画像領域ｘを領域ｘ−１〜領域ｘ−４に分割する。その後、類似度算出処理部１５は、各々の画像領域（領域ｘ−１〜領域ｘ−４）における類似度を算出する（ステップＳ３２）。そして、各々の画像領域（領域ｘ−１〜領域ｘ−４）のうち、算出された類似度が最も低い画像領域を対象画像領域に決定する（ステップＳ３３）。本実施の形態では、一例として、図１１の領域ｘ−４を決定された対象画像領域とする。

そして、決定された対象画像領域ｘ−４が所定のサイズであるか否かを判定する（ステップＳ３４）。今回の対象画像領域ｘ−４のサイズは１／１６であるので、所定のサイズ（１／１６）と一致する（ステップＳ３４：Ｙｅｓ）。

次に、ステップＳ３３で決定された所定のサイズ（１／１６）の対象画像領域ｘ−４に対して画像サイズ決定処理を実施する（ステップＳ３５）。画像サイズ決定処理は、演算処理部４０の類似度算出処理部１５およびサイズ調整量決定処理部１６で実施される。画像サイズ決定処理を実施することで、画像サイズ調整量（拡縮量、シフト量）が決定される。なお、画像サイズ決定処理については、実施の形態１で説明した場合と同様であるので重複した説明は省略する。

その後、対象画像領域ｘ−４の４倍の面積の領域１において、画像サイズ調整量を検証する（ステップＳ３６）。具体的には、図１１に示すように、対象画像領域ｘ−４の４倍の面積の領域１に対して類似度算出処理を実施する。このとき、ステップＳ３５で求めた画像サイズ調整量（拡縮量、シフト量）を用いて領域１の第２画像を調整して類似度算出処理を実施する。このとき求めた類似度が、ステップＳ３５において画像サイズ調整量（拡縮量、シフト量）を求めた際の類似度（つまり、図３の「Ｒｍａｘ」に対応している）と同程度である場合、画像サイズ調整量が適切であると判定することができる。

一方、対象画像領域ｘ−４の４倍の面積の領域１の類似度が、ステップＳ３５において画像サイズ調整量（拡縮量、シフト量）を求めた際の類似度（つまり、図３の「Ｒｍａｘ」に対応している）よりも低い場合、画像サイズ調整量が不適切であると判定する。

画像サイズ調整量が不適切であると判定される場合の一例としては、例えば対象画像領域ｘ−４に格子状の模様がある場合が挙げられる。すなわち、格子状の模様に対して画像サイズ決定処理を実施した場合は、局所的（対象画像領域ｘ−４）に類似度が高くなるようにシフト処理を行ったとしても、シフトする方向が誤っていると、対象画像領域ｘ−４の４倍の面積の領域１において類似度が低くなる場合がある。このような場合は、対象画像領域ｘ−４の４倍の面積の領域１に対して、画像サイズ決定処理をやり直す（ステップＳ３５参照）。

次に、対象画像領域が表示画面サイズか否かを判定する（ステップＳ３７）。現時点では、対象画像領域（領域１）のサイズが１／４であるので（ステップＳ３７：Ｎｏ）、再度、ステップＳ３６の処理を繰り返す。すなわち、図１１に示すように、対象画像領域（領域１）の４倍の面積の領域５１（表示画面サイズ）に対して類似度算出処理を実施する。このとき、ステップＳ３５で求めた画像サイズ調整量（拡縮量、シフト量）を用いて領域５１（表示画面サイズ）の第２画像を調整して類似度算出処理を実施する。このとき求めた類似度が、ステップＳ３５において画像サイズ調整量（拡縮量、シフト量）を求めた際の類似度（つまり、図３の「Ｒｍａｘ」に対応している）と同程度である場合、画像サイズ調整量が適切であると判定することができる。

その後、対象画像領域が表示画面サイズか否かを判定する（ステップＳ３７）。今回は領域５１が表示画面サイズであるので（ステップＳ３７：Ｙｅｓ）、図１０に示すフローチャートの処理を終了する。

上述の処理を実施することで、第２画像に対応する画像サイズ調整量（拡縮量、シフト量）を決定することができる。

本実施の形態では、分割した画像領域に対して画像サイズ決定処理を実施している。すなわち、画像サイズ決定処理を局所的に実施しているので、実施の形態１の場合よりも画像サイズ決定処理の時間を短縮することができる。

一例として、第２映像をＮライン分垂直方向に縮小したケースについて、画面サイズ（display_pixel）を処理量の指標として、実施の形態１と実施の形態２の処理量を比較した結果を以下に示す。

［実施の形態１の処理量］
（１）類似度算出処理＝display_pixel×１＋display_pixel×（２×（Ｎ＋１））
＝display_pixel×（２Ｎ＋３）
・「display_pixel×１」は、初期位置での類似度算出処理（図３のステップＳ６）を示す。
・「display_pixel×（２×（Ｎ＋１））」は、Ｎ＋１回の拡縮処理における類似度算出処理（図３のステップＳ８〜Ｓ１６）を示す。

（２）サイズ調整量決定処理＝display_pixel×（Ｎ＋１）
・「display_pixel×（Ｎ＋１）」は、Ｎ＋１回の拡縮処理を示す。

［実施の形態２の処理量（画像領域を２回分割処理（１／１６に分割）した場合）］
（１）類似度算出処理＝display_pixel×１＋（display_pixel／１６）×２Ｎ＋（display_pixel／４）×２＋display_pixel×２＝display_pixel×３＋（（８＋２Ｎ）×display_pixel／１６）
・「display_pixel×１」は、初期位置での類似度算出処理を示す。
・「（display_pixel／１６）×２Ｎ」は、領域分割後の類似度算出処理を示す（図１０のステップＳ３５）。
・「（display_pixel／４）×２」は、１／４の画面サイズにおける検証用の類似度算出処理を示す（図１０のステップＳ３６）。
・「display_pixel×２」は、画面サイズにおける検証用の類似度算出処理を示す（図１０のステップＳ３６）。
（２）サイズ調整量決定処理＝（display_pixel／１６）×（Ｎ＋１）＋（display_pixel／４）×１＋display_pixel×１＝display_pixel＋（（５＋Ｎ）×display_pixel）／１６）
・「（display_pixel／１６）×（Ｎ＋１）」は、１／１６に画面サイズを分割した後の拡縮処理を示す（図１０のステップＳ３５）。
・「（display_pixel／４）×１」は、１／４の画面サイズにおける検証用の拡縮処理を示す（図１０のステップＳ３６）。
・「display_pixel×１」は、画面サイズにおける検証用の拡縮処理を示す（図１０のステップＳ３６）。

実施の形態１における処理量は、類似度算出処理の処理量「display_pixel×（２Ｎ＋３）」とサイズ調整量決定処理の処理量「display_pixel×（Ｎ＋１）」とを加算した値「display_pixel×（３Ｎ＋４）」となる。

また、実施の形態２における処理量は、類似度算出処理の処理量「display_pixel×３＋（（８＋２Ｎ）×display_pixel／１６）」とサイズ調整量決定処理の処理量「display_pixel＋（（５＋Ｎ）×display_pixel）／１６）」とを加算した値「display_pixel×４＋（１３＋３Ｎ）×display_pixel／１６」となる。

ここで、Ｎは１以上の整数であるので、実施の形態２における処理量「display_pixel×４＋（１３＋３Ｎ）×display_pixel／１６」は、実施の形態１における処理量「display_pixel×（３Ｎ＋４）」に対して少ない量となる。

また、本実施の形態では、分割した画像領域のうち、類似度が最も低い画像領域を対象画像領域としている（図１０のステップＳ３３参照）。この理由は以下の通りである。すなわち、第１画像と第２画像の類似度が低い領域は、特徴量が多い物体が存在している領域であると推定することができる。

例えば、領域１に飛行機の画像があり、領域２に雲の画像がある場合、領域１の飛行機の画像は境界が明確であるが、領域２の雲の画像は境界がはっきりしない。このため、領域１と領域２の類似度を比較すると、領域２の画像（境界が不明確な画像）のほうが領域１の画像（境界が明確な画像）よりも、類似度が高くなる傾向がある。つまり、領域２の画像（境界が不明確な画像）のほうが領域１の画像（境界が明確な画像）よりも、第１画像と第２画像の画素値の平均二乗誤差が小さくなる傾向があり、このため類似度が高くなる傾向がある。本実施の形態では、類似度が低い画像領域を対象画像領域とすることで、特徴量が多い画像領域に対して画像サイズ決定処理を実施することができる。したがって、画像サイズ決定処理における精度を向上させることができる。

なお、上述した例では、分割した画像領域のうち、類似度が最も低い画像領域を対象画像領域としていた。しかしながら本実施の形態では、類似度が最も低い画像領域以外の画像領域（例えば分割した画像領域のうち類似度が２番目に低い画像領域など）を対象画像領域としてもよい。

また、本実施の形態では、初回の類似度算出処理（図１０のステップＳ３２）において、最小の画面分割単位（上記例では１／１６）で各分割領域における類似度を保存しておいてもよい。このように類似度を保存しておくことで、以降の類似度算出処理（図１０のステップＳ３２）を省略することができ、処理時間を短縮することができる。

＜実施の形態３＞
次に、実施の形態３について説明する。図１２は、実施の形態３にかかる映像信号受信装置３を説明するためのブロック図である。本実施の形態かかる映像信号受信装置３は、実施の形態１で説明した映像信号受信装置１（図１等参照）と比べて、データ管理部６１を備える点が異なる。これ以外の構成及び動作については、実施の形態１で説明した映像信号受信装置と同様であるので、同一の構成要素には同一の符号を付し重複した説明は省略する。なお、本実施の形態は、実施の形態２と組み合わせてもよい。

図１２に示すように、本実施の形態にかかる映像信号受信装置３は、データ管理部６１を備える。データ管理部６１は、過去に実施した画像サイズ決定処理によって決定された第２画像の画像サイズ調整量（拡縮量、シフト量）に関するデータを管理する。データ管理部６１は、第１及び第２映像信号の送信元の放送局情報と画像サイズ調整量とを対応付けて管理する。このとき、データ管理部６１は、第１及び第２映像信号の送信元の放送局情報と第１及び第２映像信号の復号情報（解像度情報）と画像サイズ調整量とを対応付けて管理してもよい。データ管理部６１で管理する各々の情報（つまり、放送局情報、第１及び第２映像信号の復号情報、画像サイズ調整量）は、例えば、図８に示したように、外部に設けられたメモリ１０４に格納するようにしてもよい。

以下、本実施の形態にかかる映像信号受信装置３の動作について、図１３に示すフローチャートを用いて説明する。なお、図１３では、主にデータ管理部６１の動作について説明しているが、これ以外の動作については実施の形態１で説明した場合（図２、図３参照）と同様である。

まず、図１２に示す受信処理部１０は、映像信号を受信した際、受信した映像信号の送信元の放送局情報をデータ管理部６１に供給する。データ管理部６１は、受信処理部１０から供給された放送局情報（メタデータ）に対応する画像サイズ調整量を検索する（ステップＳ４１）。このとき、データ管理部６１は、更に第１及び第２映像信号の復号情報（解像度情報）を用いて画像サイズ調整量を検索してもよい。

ステップＳ４１で検索した結果、放送局情報と一致するデータがある場合、データ管理部６１は一致した画像サイズ調整量を演算処理部１４に供給する（ステップＳ４２：Ｙｅｓ）。その後、演算処理部１４は、データ管理部６１から供給された画像サイズ調整量を検証する（ステップＳ４３）。具体的には、演算処理部１４のサイズ調整量決定処理部１６は、データ管理部６１から供給された画像サイズ調整量を第２画像のサイズ調整量と決定する。その後、類似度算出処理部１５は、画像サイズ調整量を用いて調整された第２画像と第１画像との類似度を算出する。また、類似度算出処理部１５は、画像サイズ調整を実施していない第２画像と第１画像との類似度を算出する。そして、調整後の第２画像と第１画像との類似度が、画像サイズ調整を実施していない第２画像と第１画像との類似度よりも大きい場合に、データ管理部６１から供給された画像サイズ調整量が適切であると判定する。このような処理により、データ管理部６１から供給された画像サイズ調整量が適切であるか否かを判定する。なお、類似度算出処理部１５およびサイズ調整量決定処理部１６の動作については、実施の形態１で説明した場合と同様であるので、重複した説明は省略する。

例えば、放送局側の設備が更新されたなどの理由により、放送局側の符号化パラメータが変更される場合がある。このような場合は、データ管理部６１から供給された画像サイズ調整量が適切でない場合も想定されるので、本実施の形態では、ステップＳ４３において、データ管理部６１から供給された画像サイズ調整量が適切であるか否かを検証している。

データ管理部６１から供給された画像サイズ調整量が適切であると判定された場合は（ステップＳ４４：Ｙｅｓ）、この画像サイズ調整量を用いて第２映像のサイズが調整される。

一方、ステップＳ４２において放送局情報と一致するデータがない場合（ステップＳ４２：Ｎｏ）、または、ステップＳ４４において画像サイズ調整量が適切でないと判定された場合は（ステップＳ４４：Ｎｏ）、演算処理部１４は、第２画像の最適な画像サイズ調整量を改めて求めるために画像サイズ決定処理を実施する（ステップＳ４５）。画像サイズ決定処理は、演算処理部４０の類似度算出処理部１５およびサイズ調整量決定処理部１６で実施される。画像サイズ決定処理を実施することで、第２画像の画像サイズ調整量（拡縮量、シフト量）が決定される。なお、画像サイズ決定処理については、実施の形態１で説明した場合と同様であるので重複した説明は省略する。

ステップＳ４５で決定された画像サイズ調整量は、映像信号の送信元の放送局情報と対応付けて新たにデータ管理部６１に登録される（ステップＳ４６）。また、ステップＳ４５で決定された画像サイズ調整量を用いて第２映像のサイズが調整される。

本実施の形態にかかる映像信号受信装置３では、データ管理部６１において、放送局情報と画像サイズ調整量とを対応付けて管理している。そして、受信した映像信号の放送局情報と一致するデータ（画像サイズ調整量）がある場合、一致した画像サイズ調整量を用いて第２映像の画像サイズを調整している。このように画像サイズ調整量が一致した場合は、画像サイズ決定処理を省略することができるので、映像信号受信処理にかかる時間を短縮することができる。

一例として、データ管理部６１で管理していた画像サイズ調整量を用いて第２映像の画像サイズを調整した場合の処理量を示す。なお、以下では画面サイズ（display_pixel）を処理量の指標としている。

［実施の形態３の処理量］
（１）類似度算出処理＝display_pixel×１ ；初期位置での類似度算出処理
＋display_pixel×１ ；検索データによる類似度算出処理
＋display_pixel×１ ；検証用類似度算出処理
＝display_pixel×３
（２）サイズ調整量決定処理＝display_pixel×１ ；検索データによる拡縮処理
＋display_pixel×１ ；検証用拡縮処理
＝display_pixel×２

実施の形態３の処理量は、上述した実施の形態１、２の処理量に比べて大幅に少ない。よって、データ管理部６１を設けることで、映像信号受信処理にかかる時間を短縮することができる。

＜実施の形態４＞
次に、実施の形態４について説明する。図１４は、実施の形態４にかかる映像信号受信装置４を説明するためのブロック図である。本実施の形態かかる映像信号受信装置４は、実施の形態１で説明した映像信号受信装置１（図１等参照）と比べて、対象画像決定部７１を備える点が異なる。これ以外の構成及び動作については、実施の形態１で説明した映像信号受信装置と同様であるので、同一の構成要素には同一の符号を付し重複した説明は省略する。なお、本実施の形態は、実施の形態２、３と組み合わせてもよい。

例えば、電波の受信状況が悪いときなどは、復号される映像にノイズが含まれる場合がある。このような画像を画像サイズ決定処理に用いると、第２画像のサイズを適切に決定することができないという問題がある。本実施の形態にかかる映像信号受信装置４では、対象画像決定部７１を設けて、画像サイズ決定処理に用いる対象画像からノイズが多い画像を除外することでこのような問題を解決している。以下、本実施の形態かかる映像信号受信装置４について詳細に説明する。

図１４に示すように、本実施の形態にかかる映像信号受信装置４は、対象画像決定部７１を備える。対象画像決定部７１は、第１映像復号部１２_１及び第２映像復号部１２_２から各々供給された量子化パラメータを用いて、類似度算出処理とサイズ調整量決定処理とを実施する対象画像を決定する。例えば、対象画像決定部７１は、第１映像復号部１２_１及び第２映像復号部１２_２から各々供給された量子化パラメータが所定の閾値よりも小さい画像を対象画像と決定することができる。

例えば、対象画像決定部７１は、第１映像復号部１２_１及び第２映像復号部１２_２から量子化パラメータを取得した際に、１ＧＯＰ（Group Of Pictures）程度の量子化パラメータを蓄積し、量子化パラメータの平均値を算出する。この平均値を再生映像の量子化パラメータの閾値として決定し、次に閾値を下回る量子化パラメータを取得した際に、この量子化パラメータに対応する第１画像および第２画像を対象画像と決定する。そして、決定された対象画像に対して画像サイズ決定処理を実施する。画像サイズ決定処理については、実施の形態１で説明した場合と同様であるので重複した説明は省略する。なお、量子化パラメータの閾値は、上述のように平均値を用いて算出するのではなく、予め定められた絶対値を用いてもよい。

量子化パラメータは、映像信号の符号化パラメータの１つであり、Ｈ．２６４規格ではＱＰ値（Quantization Parameter）が、ＭＰＥＧ２規格ではＱＳ値（Quantizer Scale）が用いられている。量子化パラメータは、画質とビットレートに関係するパラメータであり、量子化パラメータを小さくすると画質劣化を抑えることができるがビットレートが高くなる。一方、量子化パラメータを大きくすると画質は劣化するがビットレートを抑制できる。放送局のデジタル放送送出装置では、規定されたビットレートを超えないように量子化パラメータを調整している。本実施の形態では、量子化パラメータと画質に相関関係があることに着目し、量子化パラメータが所定の閾値よりも小さい画像を対象画像と決定することで、画像サイズ決定処理の精度を向上させている。

また、本実施の形態では、対象画像決定部７１は、第１映像復号部１２_１及び第２映像復号部１２_２から供給された復号エラー情報を用いて、類似度算出処理とサイズ調整量決定処理とを実施する対象画像を決定してもよい。例えば、対象画像決定部７１は、第１映像復号部１２_１及び第２映像復号部１２_２から供給された復号エラー情報がエラーを示した画像を、対象画像から除外するようにしてもよい。ここで、復号エラーとは、電波の受信状況が悪いときなどに、第１映像復号部１２_１及び第２映像復号部１２_２が映像を適切に復号できないことを意味する。

更に、本実施の形態では、対象画像決定部７１は、類似度算出処理とサイズ調整量決定処理とを実施する対象画像を決定する際、第１映像復号部１２_１及び第２映像復号部１２_２から供給された量子化パラメータおよび復号エラー情報の両方を用いて決定してもよい。この場合は、量子化パラメータが所定の閾値よりも小さい画像を対象画像と決定するとともに、復号エラー情報がエラーを示した画像を対象画像から除外することで、画像サイズ決定処理の精度を向上させることができる。

以上で説明した本実施の形態にかかる映像信号受信装置では、量子化パラメータや復号エラー情報を用いて対象画像を決定している。よって、画質の劣化が著しい画像（ノイズが多い画像）を対象画像から除外することができるので、画像サイズ決定処理の精度を向上させることができる。

なお、本実施の形態にかかる技術内容は、実施の形態２にかかる映像信号受信装置にも適用することができる。すなわち、実施の形態２で説明した映像信号受信装置では、画像領域を分割し、この分割した画像領域に対して画像サイズ決定処理を局所的に実施していた。このため、分割した画像領域内にノイズが存在する場合は画像サイズ決定処理において誤検出（エラー）が発生する場合があった。このような問題は、本実施の形態にかかる映像信号受信装置のように量子化パラメータを用いることで解決することができる。すなわち、分割された領域の量子化パラメータが所定の閾値よりも小さいことを条件とすることで、画像サイズ決定処理において誤検出（エラー）を抑制することができる。

このとき、実施の形態２で説明した映像信号受信装置において、分割領域の最小サイズ（図１１に示す例では、領域ｘ−１等であり、画像領域５２の１／１６）を「第２映像の符号化マクロブロック×表示画面への拡大率」以上となるようにすることが好ましい。

すなわち、「符号化マクロブロック」とは符号化する際のブロック単位であり、このブロック単位で量子化パラメータが決定される。また、「表示画面への拡大率」とは第２映像を表示画面に表示する際の拡大率である。例えば、第２映像の画面解像度がＱＶＧＡ（３２０×２４０）であり、表示画面の画面解像度がフルＨＤ（１９２０×１０８０）である場合は、「表示画面への拡大率」はＱＶＧＡをフルＨＤ（１９２０×１０８０）の表示画面に表示する際の拡大率であり、約５〜６倍程度となる。

したがって、分割領域の最小サイズ（図１１に示す例では、領域ｘ−１等）を「第２映像の符号化マクロブロック×表示画面への拡大率」以上とすることで、最小サイズの分割領域（図１１に示す例では、領域ｘ−１等）の中に、少なくとも１つの符号化マクロブロックを含めることができる。よって、最小サイズの分割領域に含まれる符号化マクロブロックの量子化パラメータを用いて、対象画像を決定することができる。つまり、分割された領域（例えば、図１１の領域ｘ−１）に含まれるマクロブロックの量子化パラメータが所定の閾値よりも小さい画像を対象画像と決定することで、画像サイズ決定処理において誤検出（エラー）を抑制することができる。

以上で説明した実施の形態１〜４にかかる映像信号受信装置は、海外のデジタル放送規格やインターネットのストリーミングサービスやテレビ・インターネット同時放送におけるシームレスな切り替えにも適用可能である。

例えば、アメリカのデジタル放送規格であるＡＴＳＣ Ｍ／Ｈ、中国のデジタル放送規格であるＤＴＭＢ、ヨーロッパのデジタル放送規格であるＤＶＢ Ｔにおけるサイマル放送の切り替えを行う場合、それぞれの画像（上述の第１画像および第２画像に対応）を比較して画像サイズを調整してもよい。このような処理により、海外各国のデジタル放送において映像切り替わり時の違和感を低減することができる。

また、電波状況に応じて入力ソース（テレビまたはインターネット）の切り替えを行う場合、テレビとインターネットとの相互の切り替えをする際に、それぞれの画像（上述の第１画像および第２画像に対応）を比較して画像サイズを調整してもよい。このような処理により、テレビとインターネットを用いた同時放送の映像間の切り替わり時の違和感を低減することができる。

また、インターネット回線の速度の状況に応じて入力ソース（フルＨＤ、ＳＤ等）の切り替えを行う場合、それぞれの画像（上述の第１画像および第２画像に対応）を比較して画像サイズを調整してもよい。このような処理により、インターネットのストリーミングサービスにおいて映像切り替わり時の違和感を低減することができる。

以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。

１、２、３、４ 映像信号受信装置
１０ 受信処理部
１１ 分離部
１２_１ 第１映像復号部
１２_２ 第２映像復号部
１３_１ 第１映像調整部
１３_２ 第２映像調整部
１４ 演算処理部
１５ 類似度算出処理部
１６ サイズ調整量決定処理部
１７ 端処理部
１８ 映像切替部
１９ 出力制御部
２０ 受信状況に関する情報、切り替え信号
４０ 演算処理部
４１ 領域決定部
６１ データ管理部
７１ 対象画像決定部
１００ 映像受信システム
１０１ データ処理装置
１０２ アンテナ
１０３ チューナ
１０４ メモリ
１０５ ディスプレイ
１１０ バス
１１１ ＴＳインタフェース
１１２ デマルチプレクサ
１１３ ビデオデコーダ
１１４ ビデオスケーラ
１１５ ＣＰＵ
１１６ メモリインタフェース
１１７ ディスプレイインタフェース

Claims (20)

1. 同一の映像コンテンツを第１アスペクト比で送信する第１映像信号および前記第１アスペクト比と異なる第２アスペクト比で送信する第２映像信号をそれぞれ受信する受信処理部と、
   前記第１映像信号に含まれる第１映像のサイズを調整する第１映像調整部と、
   前記第２映像信号に含まれる第２映像のサイズを調整する第２映像調整部と、
   前記第２映像調整部で調整される前記第２映像のサイズ調整量を決定する画像サイズ決定処理を実施する演算処理部と、を備え、
   前記第２映像調整部は、前記第２映像信号に含まれる第２画像を縮小または拡大する拡縮処理を実施して拡縮画像を生成するともに、前記第２画像を水平方向または垂直方向にシフトするシフト処理を実施してシフト画像を生成し、
   前記演算処理部は、
   前記第１映像信号に含まれる第１画像と前記拡縮画像との類似度を算出するとともに、前記第１画像と前記シフト画像との類似度を算出し、
   前記拡縮画像および前記シフト画像のうち前記算出された類似度が高い方の画像を、前記第２映像調整部において次の拡縮処理およびシフト処理を実施する画像に用いる、
   映像信号受信装置。
2. 前記演算処理部は、
   前記第１画像と前記拡縮画像との類似度と前記第１画像と前記シフト画像との類似度のうち高い方の類似度を類似度の最大値に設定し、
   前記次の拡縮処理を実施した拡縮画像と前記第１画像との類似度と前記次のシフト処理を実施したシフト画像と前記第１画像との類似度のうち、類似度が高い方の類似度が前記設定された類似度の最大値よりも低い場合、前記類似度が高い方の画像の拡縮量とシフト量を前記第２画像の画像サイズ調整量として決定し、
   前記第２映像調整部は、前記決定された第２画像の画像サイズ調整量を用いて前記第２映像のサイズを調整する、
   請求項１に記載の映像信号受信装置。
3. 前記演算処理部は、
   前記第１画像と前記拡縮画像との類似度と前記第１画像と前記シフト画像との類似度のうち高い方の類似度を類似度の最大値に設定し、
   前記次の拡縮処理を実施した拡縮画像と前記第１画像との類似度と前記次のシフト処理を実施したシフト画像と前記第１画像との類似度のうち、類似度が高い方の類似度が前記設定された類似度の最大値よりも高い場合、前記類似度が高い方の類似度を用いて前記類似度の最大値を更新する、
   請求項１に記載の映像信号受信装置。
4. 前記サイズ調整された第２映像に対して端処理を実施する端処理部を更に備え、
   前記端処理部は、前記サイズ調整された第２映像をディスプレイに表示した際に生じる余白領域を補間する処理および前記サイズ調整された第２映像を前記ディスプレイに表示した際に生じる表示領域外の領域を除去する処理の少なくとも一方を実施する、請求項２に記載の映像信号受信装置。
5. 前記第１映像調整部で調整された前記第１映像および前記第２映像調整部で調整された前記第２映像を入力し、前記第１映像および前記第２映像のうちのいずれか一方を出力する映像切替部を更に備える、請求項１に記載の映像信号受信装置。
6. 前記第２映像信号は前記第１映像信号よりも低画質の映像信号であり、
   前記映像切替部は、前記第１映像信号の受信状況が所定の基準よりも悪化した場合に、前記第１映像から前記第２映像に出力映像を切り替える、
   請求項５に記載の映像信号受信装置。
7. 前記第１画像と前記第２画像は時間同期された画像である、請求項１に記載の映像信号受信装置。
8. 前記類似度は、前記第１画像の各々の座標における画素値と、前記第１画像の各々の座標と対応する座標における前記第２画像の画素値と、を用いて算出される、請求項１に記載の映像信号受信装置。
9. 前記第１画像の画素値は前記第１画像の輝度値であり、前記第２画像の画素値は前記第２画像の輝度値である、請求項８に記載の映像信号受信装置。
10. 前記類似度は、前記第１画像の座標（ｘ、ｙ）における画素値Ｐ１（ｘ、ｙ）と前記第２画像の座標（ｘ、ｙ）における画素値Ｐ２（ｘ、ｙ）との差の二乗である｛Ｐ１（ｘ、ｙ）−Ｐ２（ｘ、ｙ）｝^２を、各々の座標において求めた和の逆数を用いて算出される（ここで、ｘ、ｙは、０≦ｘ＜画像幅、０≦ｙ＜画像高さ、を満たす値である）、請求項８に記載の映像信号受信装置。
11. 前記演算処理部は、
    前記第１及び第２画像を所定の数の画像領域に分割し、
    前記分割された各々の画像領域における前記第１及び第２画像の類似度を算出し、
    前記分割された各々の画像領域のうち、前記算出された類似度が最も低い画像領域を対象画像領域に決定し、
    前記決定された対象画像領域に対して前記画像サイズ決定処理を実施する、
    請求項１に記載の映像信号受信装置。
12. 前記演算処理部は、
    前記対象画像領域に対して前記画像サイズ決定処理を実施することで前記第２画像のサイズ調整量を決定し、
    前記第２画像のサイズ調整量を決定した後、前記分割する前のサイズの第２画像を前記決定されたサイズ調整量を用いて調整し、当該調整後の第２画像と前記第１画像との類似度を算出することで、前記サイズ調整量を検証する、
    請求項１１に記載の映像信号受信装置。
13. 前記演算処理部で決定された前記第２画像のサイズ調整量に関するデータを管理するデータ管理部を備え、
    前記データ管理部は、前記第１及び第２映像信号の送信元の放送局情報と前記サイズ調整量とを対応付けて管理しており、
    前記受信処理部は、前記第１及び第２映像信号を受信した際、前記第１及び第２映像信号の送信元の放送局情報を前記データ管理部に供給し、
    前記データ管理部は、前記受信処理部から供給された前記放送局情報に対応するサイズ調整量が存在する場合、当該サイズ調整量を前記演算処理部に供給し、
    前記演算処理部は、前記データ管理部から供給された前記サイズ調整量を前記第２画像のサイズ調整量に決定する、
    請求項１に記載の映像信号受信装置。
14. 前記演算処理部は、
    前記データ管理部から供給された前記サイズ調整量を用いて調整された第２画像と前記第１画像との類似度を算出することで前記サイズ調整量が適切であるか否かを判定し、
    前記サイズ調整量が適切ではないと判定した場合に、前記画像サイズ決定処理を実施する、
    請求項１３に記載の映像信号受信装置。
15. 前記第１映像信号を復号して第１映像を生成する第１映像復号部と、
    前記第２映像信号を復号して第２映像を生成する第２映像復号部と、
    前記画像サイズ決定処理を実施する対象画像を、前記第１及び第２映像復号部から供給された量子化パラメータ及び復号エラー情報の少なくとも一つを用いて決定する対象画像決定部と、を更に備える、
    請求項１に記載の映像信号受信装置。
16. 前記対象画像決定部は、前記量子化パラメータが所定の閾値よりも小さい画像を前記対象画像と決定する、請求項１５に記載の映像信号受信装置。
17. 前記対象画像決定部は、前記復号エラー情報がエラーを示した画像を前記対象画像から除外する、請求項１５に記載の映像信号受信装置。
18. 同一の映像コンテンツを第１アスペクト比で送信する第１映像信号および前記第１アスペクト比と異なる第２アスペクト比で送信する第２映像信号をそれぞれ受信し、
    前記第１映像信号に含まれる第１映像のサイズを調整し、
    前記第２映像信号に含まれる第２映像のサイズ調整量を決定する画像サイズ決定処理を実施し、
    前記画像サイズ決定処理を実施する際、
    前記第２映像信号に含まれる第２画像を縮小または拡大する拡縮処理を実施して拡縮画像を生成するともに、前記第２画像を水平方向または垂直方向にシフトするシフト処理を実施してシフト画像を生成し、
    前記第１映像信号に含まれる第１画像と前記拡縮画像との類似度を算出するとともに、前記第１画像と前記シフト画像との類似度を算出し、
    前記拡縮画像および前記シフト画像のうち前記算出された類似度が高い方の画像を、次の拡縮処理およびシフト処理を実施する画像に用いる、
    映像信号受信方法。
19. 前記第１画像と前記拡縮画像との類似度と前記第１画像と前記シフト画像との類似度のうち高い方の類似度を類似度の最大値に設定し、
    前記次の拡縮処理を実施した拡縮画像と前記第１画像との類似度と前記次のシフト処理を実施したシフト画像と前記第１画像との類似度のうち、類似度が高い方の類似度が前記設定された類似度の最大値よりも低い場合、前記類似度が高い方の画像の拡縮量とシフト量を前記第２画像の画像サイズ調整量として決定し、
    前記決定された第２画像の画像サイズ調整量を用いて前記第２映像のサイズを調整する、
    請求項１８に記載の映像信号受信方法。
20. 前記第１画像と前記第２画像は時間同期された画像である、請求項１８に記載の映像信号受信方法。