JP2014045425A - 電子機器、電子機器の制御方法 - Google Patents

Abstract

【課題】
例えば、第１解像度の映像と、差分情報（第１解像度より解像度が高い第２解像度の映像と第１解像度の映像との差分情報）を用い、高解像度映像を表示する差分伝送方式において、差分情報や「２ｋ１ｋ」映像がスムーズに受信されない場合に、ユーザに与える不快感を低減させることが課題になっていた。
【解決手段】
実施形態の電子機器は、第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理および超解像処理を行う処理部を備える。
また、外部から出力された第２解像度の映像の差分情報を受信する差分情報受信部を備える。
また、前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理および超解像度処理が行われた第２解像度の映像を出力する映像出力部を備える。
【選択図】 図２

Description

本発明の実施形態は、電子機器、電子機器の制御方法に関する。

近年、例えば、「２ｋ１ｋ」と呼ばれる高解像度の映像（第１解像度の映像）を表示することが可能な、高解像度映像を表示可能なディスプレイを備えた電子機器が普及している。

ここで、「２ｋ１ｋ」とは、いわゆるフルＨＤ相当のサイズを示す表現である。「２ｋ１ｋ」の「Ｋ」はキロを指す。また、フルＨＤの解像度は１９２０×１０８０で、概算で２０００×１０００、すなわち「２ｋ１ｋ」という表現になっている。また、解像度は、例えば、映像を表現するための縦と横の点（ドット）の数として表現される。

また、近年、例えば、「４ｋ２ｋ」と呼ばれる、さらに高解像度の映像（第２解像度の映像）を表示可能なディスプレイを備えた電子機器が製品化されつつある。

ここで、「４ｋ２ｋ」とは、水平画素数４０００×垂直画素数２０００前後の画面解像度を持つ映像フォーマットの総称である。「４ｋ２ｋ」は、例えば、デジタルシネマの標準規格であるＤＣＩで定められている４Ｋ（４０９６×２１６０）や、ＦＨＤ（フルＨＤ：１９２０×１０８０)の４倍の画素数を持つＱＦＨＤ(クアッド・フルＨＤ：３８４０×２１６０等を指す。

このように、「４ｋ２ｋ」は、新しい動画規格として注目されている。

しかし、「４ｋ２ｋ」においては、情報を収納する媒体規格や配信方法が定まっておらず、コンテンツもあまり供給されていないため、一般的にはあまり馴染みがないのが現状である。

このため、例えば、第１解像度の映像ストリーム（例えば、「２ｋ１ｋ」）と、差分情報（第１解像度より解像度が高い第２解像度の映像（例えば、「４ｋ２ｋ」）との差分情報）を用い、第２解像度の映像を表示する方式が提案されている（差分伝送方式）。

しかし、上記のような差分伝送方式において、例えば、差分情報や「２ｋ１ｋ」映像（第１解像度の映像）映像がスムーズに受信されない場合は、「４ｋ２ｋ」映像（第２解像度の映像）の表示がスムーズに行えなくなり、ユーザに不快感を与える恐れがある。

このため、例えば、第１解像度の映像と、差分情報（第１解像度より解像度が高い第２解像度の映像と第１解像度の映像との差分情報）を用い、高解像度映像を表示する差分伝送方式において、差分情報や「２ｋ１ｋ」映像（第１解像度の映像）がスムーズに受信されない場合に、ユーザに与える不快感を低減させることが課題になっていた。

特開２０１１−１０９４６９号公報

例えば、第１解像度の映像と、差分情報（第１解像度より解像度が高い第２解像度の映像と第１解像度の映像との差分情報）を用い、高解像度映像を表示する差分伝送方式において、差分情報や「２ｋ１ｋ」映像がスムーズに受信されない場合に、ユーザに与える不快感を低減させることが課題になっていた。

実施形態の電子機器は、第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理および超解像処理を行う処理部を備える。

また、外部から出力された第２解像度の映像の差分情報を受信する差分情報受信部を備える。

また、前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理および超解像度処理が行われた第２解像度の映像を出力する映像出力部を備える。

実施形態に係わる電子機器の構成を示すブロック図。 実施形態に係わる電子機器における処理動作を示す図。 実施形態に係わる電子機器の動作を説明するフローチャート。 他の実施形態に係わる電子機器における処理動作を示す図。 他の実施形態に係わる電子機器の動作を説明するフローチャート。 他の実施形態に係わる電子機器における処理動作を示す図。 他の実施形態に係わる電子機器の動作を説明するフローチャート。 実施形態の電子機器における差分情報が受信できない場合の、映像処理設定部を示す図。 実施形態に係わる電子機器における基本的な処理動作を示す図。

以下、図面を参照し、実施の形態を説明する。

図１は、実施形態に係わる電子機器の構成を示すブロック図である。

ここでは、電子機器の一例としてデジタル放送受信装置を用いて説明を行うが、この実施形態において、電子機器は、パーソナルコンピュータ（ＰＣ）や、タブレットＰＣ、スマートフォン等にも適用可能である。

この実施形態においては、電子機器（デジタル放送受信装置）１０は、例えば、ユーザに操作されるリモートコントローラ（リモコン２０）から出力されるリモコン信号を受信し、動作する。

例えば、赤外線受信部１１０は、リモコン信号を受信し、ユーザの指示を制御部１１１に向けて出力する。

制御部１１１は、操作コマンド処理部１１１ａ、ＣＰＵ１１１ｂ、メモリ部１１１ｃ等を備えており、例えば、制御情報（制御信号）を映像処理部１０４や映像出力部１０５に向けて出力し、電子機器（デジタル放送受信装置）１０を制御する。

また、電子機器（デジタル放送受信装置）１０は、デジタル放送やインターネット等で送信（ＩＰ伝送）された放送等の映像コンテンツ（入力ストリーム）を受信し、映像処理して、例えば、映像表示部１１から映像を、スピーカ１２から音声を出力する。

また、電子機器（デジタル放送受信装置）１０は、記憶装置１０６を備えており、記憶装置１０６に記憶された映像コンテンツ（入力ストリーム）を受信し、映像処理して、同様に、映像表示部１１から映像を、スピーカ１２から音声を出力する。

デジタルチューナ１０１は、例えば、デジタル放送やインターネット等で送信（ＩＰ伝送）された放送等の映像コンテンツを受信し、入力ストリーム部１０７に向けて出力する。

また、記憶装置１０６は、記憶された映像コンテンツを入力ストリーム部１０７に向けて出力する。

入力ストリーム処理部１０２は、出力された映像コンテンツを受信してストリーム処理を行い、映像信号を映像デコーダ１０３に、音声信号を音声バッファ１０７に向けて出力する。

映像デコーダ１０３は、映像信号を受信し、デコード処理を行って、映像処理部１０４に向けて出力する。

また、音声バッファ１０７は、音声信号を受信し、バッファ処理を行って、音声出力部１０８に向けて出力する。

映像処理部１０４は、図に示すように、例えば、映像フレームバッファを備えている。映像処理部１０４は、例えば、映像フレームバッファを用いて映像処理を行い、映像出力部１０５に向けて出力する。

音声出力部１０８は、バッファ処理された音声信号を受信し、音声デコーダ１０９に向けて音声信号を出力する。

映像出力部１０５は、映像表示部１１に向けて映像信号を出力する。

音声デコーダ１０９は、音声信号にデコード処理を行い、スピーカ１２に向けて音声信号を出力する。

そして、この実施形態において、電子機器１０は、例えば、図９に示すように、上記のような差分伝送方式により、一般的な映像ストリームである第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）の映像ストリームと、第２解像度（「４ｋ２ｋ（３８４０×２１６０）」解像度）と第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）との差分の映像ストリームの、２つのストリームを受信する。

ここで、図９は、実施形態に係わる電子機器における基本的な処理動作を示す図である。

ここで、上記一般的な映像ストリーム（第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）の映像ストリーム）は、例えば、現在放送されている地上波デジタル放送やＢＳ放送等の放送波で放送される映像ストリームである。

また、上記第２解像度（「４ｋ２ｋ（３８４０×２１６０）」解像度）と第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）との差分の映像ストリームは、例えば、ネットワーク（ＩＰ）や放送の隙間等で送信され、電子機器１０で受信される。

そして、上記一般的な映像ストリーム（第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）の映像ストリーム）は、映像に変換できるストリーム、また、上記第２解像度（「４ｋ２ｋ（３８４０×２１６０）」解像度）と第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）との差分の映像ストリームは、差分のストリームの形式であり、受信を行うことにより高品質な映像品質を得ることができる。

なお、ここでは、解像度は一例であり、他の解像度であっても良い。

そして、この実施形態に係る、例えば、通信等で生じる何らかの問題により、第２解像度（「４ｋ２ｋ（３８４０×２１６０）」解像度）と第１解像度（「２ｋ１ｋ（１９２０×１０８０)」解像度）との差分情報映像ストリームが受信できない場合の具体的な処理について、以下のように説明する。

図２は、実施形態に係わる電子機器における処理動作を示す図である。

この実施形態においては、例えば、放送やインターネット（ＩＰ）、あるいは映像再生装置等から、上記差分伝送方式等によって、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報（差分情報）が、「２ｋ１ｋ」映像（第１解像度の映像）とリンクするようにして送信される。

そして、電子機器１０は、これら差分情報と「２ｋ１ｋ」映像（第１解像度の映像）を受信し、例えば、電子機器１０において、差分情報が反映された高解像度映像（「４ｋ２ｋ」映像（第２解像度の映像））を作成し、高解像度ディスプレイを用いて、高解像度映像（「４ｋ２ｋ」映像）を表示する。

そして、この実施形態において電子機器１０は、「２ｋ１ｋ」の映像ストリームと「２ｋ１ｋ」と「４ｋ２ｋ」の映像差分情報のストリームを伝送する方式（差分伝送方式）において、予め、「２ｋ１ｋ」の映像ストリームを超解像処理させる。

電子機器１０は、超解像処理後の「４ｋ２ｋ」映像と「２ｋ１ｋ」と「４ｋ２ｋ」の映像差分情報ストリームとを用い、「４ｋ２ｋ」映像ストリームを生成する。

そして、例えば、通信等で生じる何らかの問題により、「２ｋ１ｋ」と「４ｋ２ｋ」の映像差分情報ストリームが受信できない場合においては、電子機器１０は、予め生成している超解像処理後の「４ｋ２ｋ」映像を、例えば、そのまま「４ｋ２ｋ」として出力する。

例えば、電子機器１０の入力ストリーム処理部２１は、放送やインターネット（ＩＰ）、あるいは映像再生装置等から出力された「２ｋ１ｋ」映像ストリームを受信し、所定のストリーム処理を行い、「２ｋ１ｋ」映像ストリームを出力する。

デコード処理部２２は、入力ストリーム処理部２１から出力された「２ｋ１ｋ」映像ストリームを受信し、デコード処理を行い、「２ｋ１ｋ」映像を出力する。

スケーリング（アップコンバージョン）処理および超解像処理部２３は、デコード処理され出力された「２ｋ１ｋ」映像を受信し、スケーリング（アップコンバージョン）処理および超解像処理を行い、スケーリングと超解像処理された「４ｋ２ｋ」映像を出力する。

ここで、スケーリング（アップコンバージョン）とは、ある映像をより高精細な映像の規格に形式変換することである。アップスケーリングとも呼ばれる。この実施形態においては、例えば、「２ｋ１ｋ」映像を「４ｋ２ｋ」映像の規格に形式変換する。

また、「超解像」処理とは、例えば、低解像度の画像を１枚、あるいは他の複数の画像を元に推定した値を使い、高精細やクリアにする技術である。映像拡大精細化技術等とも呼ばれる。

例えば、動画データでは、あるフレームに注目すると、時間的に前後するフレーム内で、１つの物が上下左右どこかに移動していること等を根拠とし、「似たような画像であるだろう」と予測できる。そこで、対象とするフレームの画像と前後する、似たようなデータの画像から、高精細に撮影された場合はどのような画像だったか推測し、高精細化した画像データを作成する。この作業を、例えば、全フレームに対して繰り返し、動画データ全体を高精細化する。

また、例えば、「よく似た」あるいは「同じ対象物である」ことを推測するために、画像処理で輪郭線を抽出し、被写体と背景を分離し、対象物を細かく分けて、本来の画像を推測する、という処理も提案されている。

また、例えば、１枚の画像から超解像を行う「一枚超解像」という技術も提案されている。これは、映像をアップスケールする際に、その対象となる１枚の画像から補完データを推測し、高精細化する技術である。例えば、「１つの点がおそらく周辺の色がまざってしまった」と推測し、あるアルゴリズムで色を分離して配置する混色分離技術を利用する。

また、例えば、電子機器１０の入力ストリーム処理部２４は、同様に、放送やインターネット（ＩＰ）、あるいは映像再生装置等から出力された「４ｋ２ｋ」映像の差分ストリームを受信し、所定のストリーム処理を行い、「４ｋ２ｋ」映像の差分ストリームを出力する。

デコード処理部２５は、入力ストリーム処理部２４から出力された「４ｋ２ｋ」映像の差分ストリームを受信し、「４ｋ２ｋ」映像の差分情報を出力する。

映像信号ＭＵＸ（映像信号マルチプレクサ）２６は、上記スケーリング（アップコンバージョン）処理および超解像処理部２３から出力されたスケーリングと超解像処理された「４ｋ２ｋ」映像と、上記デコード処理部２５から出力された「４ｋ２ｋ」映像の差分ストリームを受信し、マルチプレクス処理を行い、「４ｋ２ｋ」映像ストリームを出力する。

ここで、マルチプレクサ（ｍｕｌｔｉｐｌｅｘｅｒ）は、ふたつ以上の入力をひとつの信号として出力する。

また、この実施形態では、マルチプレクサ（ｍｕｌｔｉｐｌｅｘｅｒ）は、映像と映像差分の加算により、新たな映像を生成するための演算も含む。

そして、映像信号ＭＵＸ（映像信号マルチプレクサ）２６から出力された「４ｋ２ｋ」映像ストリームは、映像処理部２７で受信され、所定の映像処理が施され、出力される。

図３は、実施形態に係わる電子機器の動作を説明するフローチャートである。

ステップＳ１００は、ここでの開始ステップである。続いて、ステップＳ１０１に進む。

ステップＳ１０１は、２ｋ１ｋ映像（第１解像度の映像）のストリームを受信し、ストリーム処理を行うステップである（入力ストリーム処理部２１）。続いて、ステップＳ１０２に進む。

ステップＳ１０２は、上記ストリーム処理された「２ｋ１ｋ」映像のストリームをデコード処理するステップである（デコード部２２）。続いて、ステップＳ１０３に進む。

ステップＳ１０３は、上記「２ｋ１ｋ」映像を「４ｋ２ｋ」映像（第１解像度より解像度が高い、第２解像度の映像）の規格に形式変換（スケーリングまたはアップコンバージョン）処理および、超解像処理し、出力するステップである（スケーリングおよび超解像処理部２３）。続いて、ステップＳ１０４に進む。

ステップＳ１０４は、「４ｋ２ｋ」映像の差分ストリームを受信し、ストリーム処理するステップである（入力ストリーム処理部２４）。続いて、ステップＳ１０５に進む。

ステップＳ１０５は、ストリーム処理された「４ｋ２ｋ」映像の差分ストリームを受信し、デコード処理するステップである（デコード処理部２５）。続いて、ステップＳ１０６に進む。

ステップＳ１０６は、「４ｋ２ｋ」映像の差分ストリームを受信したかを検出するステップである。「４ｋ２ｋ」映像の差分ストリームを受信したと検出される場合は、ステップＳ１０７に進む（Ｙｅｓ）。「４ｋ２ｋ」映像の差分ストリームを受信しないと検出される場合は、ステップＳ１０８に進む（Ｎｏ）。

ステップＳ１０７は、スケーリング処理および超解像処理され出力された「４ｋ２ｋ」映像と、デコード処理され出力された「４ｋ２ｋ」映像の差分ストリームを用い、「４ｋ２ｋ」映像ストリームを生成し、出力するステップである（映像信号ＭＵＸ部２６）。続いて、ステップＳ１０９に進む。

ステップＳ１０８は、スケーリング処理および超解像処理され出力された「４ｋ２ｋ」映像を、出力するステップである（映像信号ＭＵＸ部２６）。続いて、ステップＳ１０９に進む。

ステップＳ１０９は、受信した映像信号に映像処理を行うステップである（映像処理部２７）。続いて、ステップＳ１１０に進む。

ステップＳ１１０は、終了ステップであり、ここでの処理は終了する。

すなわち、この実施形態においては、電子機器１０は、第１解像度の映像（例えば、「２ｋ１ｋ」映像）を受信し、前記第１解像度より解像度が高い第２解像度の映像（例えば、「４ｋ２ｋ」映像）にスケーリング処理および超解像処理を行う処理部を備える。

また、外部から出力された第２解像度の映像（例えば、「４ｋ２ｋ」映像）の差分情報を受信する差分情報受信部を備える。

また、前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理および超解像度処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）を出力する映像出力部を備える。

また、この実施形態においては、電子機器１０は、前記差分情報の受信が検出された場合は、前記映像出力部は、前記スケーリング処理および前記超解像度処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）と、前記受信した第２解像度の映像（「４ｋ２ｋ」映像）の差分情報を用い、第２解像度の映像（「４ｋ２ｋ」映像）を生成して出力する。

図４は、他の実施形態に係わる電子機器における処理動作を示す図である。

この実施形態においても、例えば、放送やインターネット（ＩＰ）、あるいは映像再生装置等から、上記差分伝送方式等によって、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報（差分情報）が、「２ｋ１ｋ」映像（第１解像度の映像）とリンクするようにして送信される。

そして、電子機器１０は、これら差分情報と「２ｋ１ｋ」映像（第１解像度の映像）を受信し、例えば、電子機器１０において、差分情報が反映された高解像度映像（「４ｋ２ｋ」映像（第２解像度の映像））を作成し、高解像度ディスプレイを用いて、高解像度映像（「４ｋ２ｋ」映像）を表示する。

この実施形態において電子機器１０は、「２ｋ１ｋ」映像（第１解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームとを用いて、「４ｋ２ｋ」映像（第２解像度の映像）ストリームを生成する。

そして、電子機器１０は、この生成した「４ｋ２ｋ」映像（第２解像度の映像）ストリームに対して超解像処理を施す。

そして、電子機器１０が、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームが受信できる場合には、超解像処理部４６ではスケーリング処理を行わず、「４ｋ２ｋ」映像（第２解像度の映像）のまま出力する。

しかし、上記のように、何らかの事情により、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームが受信できない場合は、例えば、電子機器１０のデコード処理およびスケーリング処理部４２において、「２ｋ１ｋ」映像（第１解像度の映像）から「４ｋ２ｋ」映像（第２解像度の映像）にスケーリング処理を用いて拡大し、その映像を超解像処理部４６において、超解像処理を行う。

すなわち、入力ストリーム処理部４１は、「２ｋ１ｋ」映像（第１解像度の映像）のストリームを受信し、ストリーム処理を行った「２ｋ１ｋ」映像（第１解像度の映像）のストリームを出力する。

デコード処理およびスケーリング処理部４２は、入力ストリーム処理部４１から出力された「２ｋ１ｋ」映像（第１解像度の映像）のストリームを受信し、デコード処理およびスケーリング処理を行って、「２ｋ１ｋ」映像（第１解像度の映像）から「４ｋ２ｋ」映像（第２解像度の映像）に、「２ｋ１ｋ」映像（第１解像度の映像）を、スケーリング処理を用いて拡大し、出力する。

また、入力ストリーム処理部４３は、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームを受信し、ストリーム処理を行った「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームを出力する。

デコード処理部４４は、入力ストリーム処理部４３から出力された「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームを受信し、デコード処理を行って、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報を出力する。

映像信号ＭＵＸ（映像信号マルチプレクサ）４５は、上記デコード処理およびスケーリング処理部４２から出力された「４ｋ２ｋ」映像（第２解像度の映像）および、デコード処理部４４から出力された「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報を受信し、両者から「４ｋ２ｋ」映像（第２解像度の映像）を作成して出力する。

超解像処理部４６は、この映像信号ＭＵＸ（映像信号マルチプレクサ）４５から出力された「４ｋ２ｋ」映像（第２解像度の映像）を受信し、超解像処理を行い、超解像処理された「４ｋ２ｋ」映像（第２解像度の映像）を出力する。

映像処理部４７は、超解像処理部４６から出力された超解像処理された「４ｋ２ｋ」映像（第２解像度の映像）を受信し、所定の映像処理を行って、出力する。

図５は、他の実施形態に係わる電子機器の動作を説明するフローチャートである。

ステップＳ２０１は、「２ｋ１ｋ」映像（第１解像度の映像）のストリームを受信し、ストリーム処理を行うステップである（入力ストリーム処理部４１）。続いて、ステップＳ２０２に進む。

ステップＳ２０２は、ストリーム処理された「２ｋ１ｋ」映像のストリームをデコード処理および「４ｋ２ｋ」映像にスケーリング処理するステップである（デコード処理およびスケーリング処理部４２）。続いて、ステップＳ２０３に進む。

ステップＳ２０３は、「４ｋ２ｋ」映像の差分ストリームを受信し、ストリーム処理するステップである（入力ストリーム処理部４３）。続いて、ステップＳ２０４に進む。

ステップＳ２０４は、ストリーム処理された「４ｋ２ｋ」映像の差分ストリームを受信し、デコード処理するステップである（デコード処理部４４）。続いて、ステップＳ２０５に進む。

ステップＳ２０５は、「４ｋ２ｋ」映像の差分ストリームを受信したかを検出するステップである。「４ｋ２ｋ」映像の差分ストリームを受信したと検出される場合は、ステップＳ２０６に進む（Ｙｅｓ）。「４ｋ２ｋ」映像の差分ストリームを受信しないと検出される場合は、ステップＳ２０７に進む（Ｎｏ）。

ステップＳ２０６は、デコード処理およびスケーリング処理され出力された「４ｋ２ｋ」映像と、デコード処理され出力された「４ｋ２ｋ」映像の差分ストリームを用い、「４ｋ２ｋ」映像ストリームを生成し、出力するステップである（映像信号ＭＵＸ部４５）。続いて、ステップＳ２０８に進む。

ステップＳ２０７は、デコード処理およびスケーリング処理され出力された「４ｋ２ｋ」映像を、出力するステップである（映像信号ＭＵＸ部４５）。続いて、ステップＳ２０８に進む。

ステップＳ２０８は、出力された「４ｋ２ｋ」映像に超解像処理を行うステップである（超解像処理部４６）。続いて、ステップＳ２０９に進む。

ステップＳ２０９は、超解像処理され出力された「４ｋ２ｋ」映像に映像処理を行うステップである（映像処理部２７）。続いて、ステップＳ２１０に進む。

ステップＳ２１０は、終了ステップであり、ここでの処理は終了する。

すなわち、この実施形態においては、電子機器１０は、第１解像度の映像（例えば、「２ｋ１ｋ」映像）を受信し、前記第１解像度より解像度が高い第２解像度の映像（例えば、「４ｋ２ｋ」映像）にスケーリング処理を行うスケーリング処理部を備える。

また、外部から出力された第２解像度の映像（例えば、「４ｋ２ｋ」映像）の差分情報を受信する差分情報受信部を備える。

また、前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理が行われた第２解像度の映像を出力する映像出力部と、
前記出力された第２解像度の映像（例えば、「４ｋ２ｋ」映像）に超解像処理を行い出力する超解像処理部を備える。

また、この実施形態においては、電子機器１０は、前記差分情報の受信が検出された場合は、前記映像出力部は、前記スケーリング処理が行われた第２解像度の映像（例えば、「４ｋ２ｋ」映像）と、前記受信した第２解像度の映像（例えば、「４ｋ２ｋ」映像）の差分情報を用い、第２解像度の映像（例えば、「４ｋ２ｋ」映像）を生成して出力する。

図６は、他の実施形態に係わる電子機器における処理動作を示す図である。

この実施形態においても、例えば、放送やインターネット（ＩＰ）、あるいは映像再生装置等から、上記差分伝送方式等によって、「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報（差分情報）が、「２ｋ１ｋ」映像（第１解像度の映像）とリンクするようにして送信される。

そして、電子機器１０は、これら差分情報と「２ｋ１ｋ」映像（第１解像度の映像）を受信し、例えば、電子機器１０において、差分情報が反映された高解像度映像（「４ｋ２ｋ」映像（第２解像度の映像））を作成し、高解像度ディスプレイを用いて、高解像度映像（「４ｋ２ｋ」映像）を表示する。

この実施形態において、電子機器１０は、「２ｋ１ｋ」映像（第１解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）と「２ｋ１ｋ」映像（第１解像度の映像）との差分情報ストリームとを用いて、「４ｋ２ｋ」映像（第２解像度の映像）ストリームを生成する。

そして、電子機器１０は、「２ｋ１ｋ」映像（第１解像度の映像）と、「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報ストリームとを用いて、「４ｋ２ｋ」映像（第２解像度の映像）ストリームを生成する。

また、この実施形態において、電子機器１０は、「２ｋ１ｋ」映像（第１解像度の映像）に対して超解像処理を行い、「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）の差分情報ストリームを、超解像処理および「４ｋ２ｋ」映像差分生成部６３において生成する。

そして、「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報ストリームが受信できる場合には、「２ｋ１ｋ」映像（第１解像度の映像）と、受信した「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報ストリームを用いて「４ｋ２ｋ」映像（第２解像度の映像）を生成する。

しかし、何らかの事情により、「４ｋ２ｋ」の映像差分情報ストリーム（「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報ストリーム）が受信できない場合には、超解像処理および「４ｋ２ｋ」映像差分生成部６３において生成した「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報ストリームを受信映像差分情報ストリームとして使用する。

すなわち、入力ストリーム処理部６１は、「２ｋ１ｋ」映像（第１解像度の映像）のストリームを受信し、ストリーム処理を行った「２ｋ１ｋ」映像（第１解像度の映像）のストリームを出力する。

デコード処理およびスケーリング処理部６２は、ストリーム処理を行い出力された「２ｋ１ｋ」映像（第１解像度の映像）のストリームを受信し、デコード処理およびスケーリング処理を行って「４ｋ２ｋ」映像（第２解像度の映像）を出力する。

超解像処理および「４ｋ２ｋ」映像差分生成部６３は、デコード処理およびスケーリング処理部６２から出力されたデコード処理およびスケーリング処理が行われた「４ｋ２ｋ」映像（第２解像度の映像）から「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報を生成し、出力する。

また、入力ストリーム処理部６４は、「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分ストリームを受信し、ストリーム処理を行い、出力する。

デコード処理部６５は、入力ストリーム処理部６４から出力された「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分ストリームを受信し、デコード処理を行い、出力する。

映像信号ＭＵＸ（映像信号マルチプレクサ）６６は、上記デコード処理およびスケーリング処理部６２から出力された「４ｋ２ｋ」映像（第２解像度の映像）、超解像処理および「４ｋ２ｋ」映像差分生成部６３から出力された「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分情報、およびデコード処理部６５から出力された「２ｋ１ｋ」映像（第１解像度の映像）と「４ｋ２ｋ」映像（第２解像度の映像）との映像差分ストリームを受信し、マルチプレクス処理を行い、「４ｋ２ｋ」映像ストリームを出力する。

そして、映像処理部６７は、映像信号ＭＵＸ（映像信号マルチプレクサ）６６から出力された「４ｋ２ｋ」映像ストリームに所定の映像処理を行い、出力する。

図７は、他の実施形態に係わる電子機器の動作を説明するフローチャートである。

ステップＳ３００は、ここでの開始ステップである。続いて、ステップＳ３０１に進む。

ステップＳ３０１は、「２ｋ１ｋ」映像（第１解像度の映像）のストリームを受信し、ストリーム処理を行うステップである（入力ストリーム処理部６１）。続いて、ステップＳ３０２に進む。

ステップＳ３０２は、ストリーム処理された「２ｋ１ｋ」映像のストリームをデコード処理および「４ｋ２ｋ」映像にスケーリング処理するステップである（デコード処理およびスケーリング処理部６２）。続いて、ステップＳ３０３に進む。

ステップＳ３０３は、スケーリング処理された「４ｋ２ｋ」映像に超解像処理し、スケーリング処理された「４ｋ２ｋ」映像との差分を生成し、出力するステップである（超解像処理および「４ｋ２ｋ」映像差分生成部６３）。続いて、ステップＳ３０４に進む。

ステップＳ３０４は、「４ｋ２ｋ」映像の差分ストリームを受信し、ストリーム処理するステップである（入力ストリーム処理部６４）。続いて、ステップＳ３０５に進む。

ステップＳ３０５は、ストリーム処理された「４ｋ２ｋ」映像の差分ストリームを受信し、デコード処理するステップである（デコード処理部６５）。続いて、ステップＳ３０６に進む。

ステップＳ３０６は、「４ｋ２ｋ」映像の差分ストリームを受信したかを検出するステップである。「４ｋ２ｋ」映像の差分ストリームを受信したと検出される場合は、ステップＳ３０７に進む（Ｙｅｓ）。「４ｋ２ｋ」映像の差分ストリームを受信しないと検出される場合は、ステップＳ３０８に進む（Ｎｏ）。

ステップＳ３０７は、デコード処理およびスケーリング処理され出力された「４ｋ２ｋ」映像と、デコード処理され出力された「４ｋ２ｋ」映像の差分ストリームを用い、「４ｋ２ｋ」映像ストリームを生成し、出力するステップである（映像信号ＭＵＸ部６６）。続いて、ステップＳ３０９に進む。

ステップＳ３０８は、デコード処理およびスケーリング処理され出力された「４ｋ２ｋ」映像と、生成されたスケーリング処理された「４ｋ２ｋ」映像との差分を用い、「４ｋ２ｋ」映像ストリームを生成し、出力するステップである（映像信号ＭＵＸ部６６）。続いて、ステップＳ３０９に進む。

ステップＳ３０９は、出力された「４ｋ２ｋ」映像ストリームに、所定の映像処理を行うステップである（映像処理部６７）。続いて、ステップＳ３１０に進む。

ステップＳ３１０は、終了ステップであり、ここでの処理は終了する。

すなわち、この実施形態においては、電子機器１０は、第１解像度の映像（例えば、「２ｋ１ｋ」映像）を受信し、前記第１解像度（「２ｋ１ｋ」映像）より解像度が高い第２解像度（例えば、「４ｋ２ｋ」映像）の映像にスケーリング処理を行うスケーリング処理部を備える。

また、前記スケーリング処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）に超解像処理を行い、前記スケーリング処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）との差分情報を生成する差分情報生成部を備える。

また、外部から出力された第２解像度の映像（「４ｋ２ｋ」映像）の差分情報を受信する差分情報受信部を備える。

また、前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）と、前記生成された前記スケーリング処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）との差分情報を用い、第２解像度の映像（「４ｋ２ｋ」映像）を生成し、出力する映像出力部を備える。

また、前記差分情報の受信が検出されない場合は、前記映像出力部は、前記スケーリング処理が行われた第２解像度の映像（「４ｋ２ｋ」映像）と、前記受信された外部から出力された第２解像度の映像（「４ｋ２ｋ」映像）の差分情報を用い、第２解像度の映像（「４ｋ２ｋ」映像）を生成し、出力する。

図８は、実施形態の電子機器における差分情報が受信できない場合の、映像処理設定部を示す図である。

この実施形態に係る電子機器１０は、例えば、映像表示部１１に、差分情報が受信できない場合の映像処理が設定可能に構成される（映像処理設定部８０）。

例えば、ユーザがリモコン２０を操作し、リモコン２０を操作するユーザの指示に応じて、リモコン信号が出力され、電子機器１０が操作される。

ここでは、図８に示すように、例えば、映像表示部１１に、「ＹＥＳ」、「ＮＯ」が表示され、リモコン２０を操作するユーザによって、どちらかが選択され、設定される。

上記のように構成することによって、上記実施形態においては、例えば、差分伝送方式において、差分情報や「２ｋ１ｋ」映像がスムーズに受信されない場合に、ユーザに与える不快感を低減させることが可能になる。

なお、上記実施形態の制御処理の手順は全てソフトウェアによって実行することが可能である。このため、制御処理の手順を実行するプログラムを格納したコンピュータ読み取り可能な記憶媒体を通じてこのプログラムを通常のコンピュータにインストールして実行するだけで、上記実施形態と同様の効果を容易に実現することができる。

なお、上記実施形態は、記述そのものに限定されるものではなく、実施段階では、その趣旨を逸脱しない範囲で、構成要素を種々変形して具体化することが可能である。

また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。

例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

１０…電子機器、２１…入力ストリーム処理部、２２…デコード処理部、２３…スケーリング（アップコンバージョン）処理および超解像処理部、２４…入力ストリーム処理部、２５…デコード処理部、２６…映像信号ＭＵＸ、２７…映像処理部。

Claims (11)

1. 第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理および超解像処理を行う処理部と、
   外部から出力された第２解像度の映像の差分情報を受信する差分情報受信部と、
   前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理および超解像度処理が行われた第２解像度の映像を出力する映像出力部を備える電子機器。
2. 前記差分情報の受信が検出された場合は、前記映像出力部は、前記スケーリング処理および前記超解像度処理が行われた第２解像度の映像と、前記受信した第２解像度の映像の差分情報を用い、第２解像度の映像を生成して出力する請求項１に記載の電子機器。
3. 第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理を行うスケーリング処理部と、
   外部から出力された第２解像度の映像の差分情報を受信する差分情報受信部と、
   前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理が行われた第２解像度の映像を出力する映像出力部と、
   前記出力された第２解像度の映像に超解像処理を行い出力する超解像処理部を備える電子機器。
4. 前記差分情報の受信が検出された場合は、前記映像出力部は、前記スケーリング処理が行われた第２解像度の映像と、前記受信した第２解像度の映像の差分情報を用い、第２解像度の映像を生成して出力する請求項３に記載の電子機器。
5. 第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理を行うスケーリング処理部と、
   前記スケーリング処理が行われた第２解像度の映像に超解像処理を行い、前記スケーリング処理が行われた第２解像度の映像との差分情報を生成する差分情報生成部と、
   外部から出力された第２解像度の映像の差分情報を受信する差分情報受信部と、
   前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理が行われた第２解像度の映像と、前記生成された前記スケーリング処理が行われた第２解像度の映像との差分情報を用い、第２解像度の映像を生成し、出力する映像出力部を備える電子機器。
6. 前記差分情報の受信が検出されない場合は、前記映像出力部は、前記スケーリング処理が行われた第２解像度の映像と、前記受信された外部から出力された第２解像度の映像の差分情報を用い、第２解像度の映像を生成し、出力する請求項５に記載の電子機器。
7. 前記差分情報の検出を設定可能な設定部を備える請求項１乃至６に記載の電子機器。
8. 前記第１解像度の映像は２ｋ１ｋ映像を、前記第２解像度の映像は４ｋ２ｋ映像をそれぞれ含む請求項１乃至７に記載の電子機器。
9. 第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理および超解像処理を行うステップと、
   外部から出力された第２解像度の映像の差分情報を受信するステップと、
   前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理および超解像度処理が行われた第２解像度の映像を出力するステップを備える電子機器の制御方法。
10. 第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理を行うステップと、
    外部から出力された第２解像度の映像の差分情報を受信するステップと、
    前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理が行われた第２解像度の映像を出力するステップと、
    前記出力された第２解像度の映像に超解像処理を行い出力するステップを備える電子機器の制御方法。
11. 第１解像度の映像を受信し、前記第１解像度より解像度が高い第２解像度の映像にスケーリング処理を行うステップと、
    前記スケーリング処理が行われた第２解像度の映像に超解像処理を行い、前記スケーリング処理が行われた第２解像度の映像との差分情報を生成するステップと、
    外部から出力された第２解像度の映像の差分情報を受信するステップと、
    前記差分情報の受信を検出し、検出されない場合は、前記スケーリング処理が行われた第２解像度の映像と、前記生成された前記スケーリング処理が行われた第２解像度の映像との差分情報を用い、第２解像度の映像を生成し、出力するステップを備える電子機器の制御方法。

Images