WO2014171411A1

WO2014171411A1 - 表示制御装置、表示制御装置の制御方法、プログラム、及び記録媒体

Info

Publication number: WO2014171411A1
Application number: PCT/JP2014/060526
Authority: WO
Inventors: 隆臣藤本
Original assignee: シャープ株式会社
Priority date: 2013-04-19
Filing date: 2014-04-11
Publication date: 2014-10-23
Also published as: JP2014212484A

Abstract

　スマートフォン（１）は、表示装置（１００）の画面解像度（Ｍ１）を取得する画面解像度取得部（２０）と、画面データ（Ｍ２）にコンテンツ映像（５１）を含めると共に、画面解像度（Ｍ１）に基づいて、画面データ（Ｍ２）におけるコンテンツ映像（５１）以外の領域にコントロールＵＩ（４１）を含めて、表示装置（１００）に送信して表示させる画面データ生成部（２１）とを備える。

Description

表示制御装置、表示制御装置の制御方法、プログラム、及び記録媒体

　本発明は、表示装置にコンテンツを出力して表示させる表示制御装置等に関する。

　外部の表示装置にコンテンツを出力して表示させる技術には、さまざまなものがある。近年、携帯電話、スマートフォン、パソコンなどの表示画面を、テレビジョン受像機に伝送するMiracast（登録商標）と呼ばれる技術が提案された。

　しかしながら、コンテンツを表示装置にそのまま表示させると、表示画面上で、コンテンツ以外の無駄な余白が生じる可能性がある。これは、コンテンツと表示装置とでアスペクト比が一致しないためである。このような余白を削減する技術として、下記の特許文献１、２の技術が提案されている。

　特許文献１には、電子カメラが取得した複数の画像のうち、縦長の画像については２枚並べて、横長の画像については１枚だけ、テレビモニタに表示させる技術が開示されている。

　特許文献２には、カメラが記録した画像の一部分を切り出して、画面の左右の余白が少なくなるように外部表示装置に表示させる技術が開示されている。

日本国公開特許公報「特開２００６－１０９３６０号公報（２００６年４月２０日公開）」日本国公開特許公報「特開２００７－３３６５１５号公報（２００７年１２月２７日公開）」

　しかしながら、特許文献１の技術は、２枚の画像をテレビモニタに出力しているに過ぎず、テレビモニタに表示させるための画面データそのものを生成しているわけではない。したがって、特許文献１の技術を適用しても、表示される２枚の画像以外の領域には依然、余白が残るという問題がある。

　また、特許文献２の技術は、画像の一部を切り出して表示しているため、表示される画像は、一部分が欠けた状態で表示されるという問題がある。

　本発明は上記の問題点に鑑みなされたものであって、その目的は、表示装置の表示画面を有効に活用できる表示制御装置等を提供することにある。

　上記の課題を解決するために、本発明の一態様に係る表示制御装置は、表示装置が備える表示画面の画面解像度と等しい解像度の表示用画像を生成し、上記表示用画像を上記表示装置に送信して当該表示装置が備える上記表示画面に表示させる表示制御装置であって、上記表示装置が備える上記表示画面の上記画面解像度を取得する取得手段と、上記表示用画像に第１コンテンツを含める第１コンテンツ追加手段と、上記取得手段が取得した上記画面解像度に基づいて、上記表示用画像における上記第１コンテンツ以外の領域に、第２コンテンツを含める第２コンテンツ追加手段とを備える。

　また、本発明の一態様に係る表示制御装置の制御方法は、表示装置が備える表示画面の画面解像度と等しい解像度の表示用画像を生成し、上記表示用画像を上記表示装置に送信して当該表示装置が備える上記表示画面に表示させる表示制御装置の制御方法であって、上記表示装置が備える上記表示画面の上記画面解像度を取得する取得ステップと、上記表示用画像に第１コンテンツを含める第１コンテンツ追加ステップと、上記取得ステップにて取得した上記画面解像度に基づいて、上記表示用画像における上記第１コンテンツ以外の領域に、第２コンテンツを含める第２コンテンツ追加ステップとを含む。

　本発明の一態様によれば、表示装置の表示画面を有効に活用できるという効果を奏する。

本発明の一実施形態に係る画面送信システムの要部構成を示す機能ブロック図である。上記実施形態に係るスマートフォンによって生成される画面データのパターンを列挙した図であり、（ａ）は表示画面およびコンテンツ映像の両方が縦長のパターンを示す図であり、（ｂ）及び（ｃ）は表示画面が縦長かつコンテンツ映像が横長のパターンを示す図であり、（ｄ）及び（ｅ）は表示画面が横長かつコンテンツ映像が縦長のパターンを示す図であり、（ｆ）は表示画面およびコンテンツ映像の両方が横長のパターンを示す図である。上記画面データに含められるコントロールＵＩ（User Interface）の表示例を示す図であり、（ａ）は縦長のコントロールＵＩを示す図であり、（ｂ）は横長のコントロールＵＩを示す図である。上記画面データにコンテンツ映像を含める際に実行されるスケーリング処理を説明するための図である。上記画面送信システムにおいて実行される処理の流れの一例を示すシーケンス図である。本発明の他の実施形態に係るスマートフォンによって生成される画面データを示す図である。

　〔実施形態１〕
　以下、本発明の一実施形態について、図１～図５に基づいて詳細に説明する。

　〔画面送信システム１０００の構成〕
　図１は、本実施形態に係る画面送信システム１０００の要部構成を示す機能ブロック図である。図示の通り、画面送信システム１０００は、スマートフォン（表示制御装置）１および表示装置１００を含む。スマートフォン１と表示装置１００とは通信可能に接続されており、各種データを互いに送受信できるようになっている。この通信は、例えば、Ｗｉ－Ｆｉ（登録商標）通信などによって実現されるが、これに限定されるものではない。

　以下、画面送信システム１０００において実行される処理の概略を説明する。

　まず、表示装置１００は、自装置の表示画面の画面解像度Ｍ１をスマートフォン１に送信する。

　スマートフォン１は、受信した画面解像度Ｍ１と解像度が等しい画面データ（表示用画像）Ｍ２を生成する。この画面データＭ２には、スマートフォン１が再生中のコンテンツ映像５１が含まれる。さらに、コンテンツ映像５１以外の余白の領域には、コンテンツ映像５１の再生制御を行うためのコントロールＵＩ４１が含まれる。

　そして、スマートフォン１は、生成した画面データＭ２を表示装置１００に送信する。

　表示装置１００は、画面データＭ２を受信し、表示画面に表示させる。これにより、スマートフォン１が再生中のコンテンツ映像５１およびコントロールＵＩ４１は、表示装置１００の表示画面に表示される。

　以上の通り、本実施形態に係るスマートフォン１は、表示装置１００の表示画面に表示させるための画面データＭ２を生成する。この画面データＭ２におけるコンテンツ映像５１を除く余白の領域は、コントロールＵＩ４１で埋められる。したがって、スマートフォン１は、余白が削減された画面を表示装置１００に表示させることができるので、表示装置１００の表示画面を有効に活用できる。

　さらに、スマートフォン１は、表示装置１００が備える表示画面の画面解像度Ｍ１を取得し、画面解像度Ｍ１と等しい解像度の画面データＭ２を生成するので、任意の解像度を有する表示装置１００に対して、その表示装置１００に応じた表示画面を生成できる。

　〔スマートフォン１の構成〕
　次に、図１を参照して、スマートフォン１の構成を詳細に説明する。

　なお、本実施形態に係る表示装置１００と接続される装置はこのようなスマートフォンに限定されず、表示装置１００に画像を送信する機能を備えたあらゆる情報処理装置に適用可能である。例えば、スマートフォン１の代わりとして、携帯電話、パソコン、タブレットＰＣ、カメラ、ＤＶＤ（Digital Versatile Disc）プレイヤ、ＢＤ（Blu-ray（登録商標） Disc）プレイヤ、ケーブルテレビ用のＳＴＢ（Set Top Box）などの情報処理装置を広く採用できる。

　図示の通り、スマートフォン１は、制御部１０および記憶部１１を備えている構成である。さらに、スマートフォン１は、図示しないが、タッチパネル、音声入力部、音声出力部、放送受像部、ＧＰＳ（Global Positioning System）受信部など、スマートフォンが標準的に備えている各種機能を備えていてもよい。また、表示装置１００との間のデータの送受信は、スマートフォン１が内蔵する図示しない通信部を介して行われる。

　記憶部１１は、ＨＤＤ（Hard Disc Drive）、フラッシュメモリなどの不揮発性の記憶装置からなり、コンテンツ情報４０およびコントロールＵＩ４１を記憶する。なお、記憶部１１は、ＲＡＭ（Random Acceess Memory）などの揮発性の記憶領域をさらに有していてもよい。この領域は、制御部１０が実行する各種処理の過程で、演算に使用するデータおよび演算結果などを一時的に記憶する作業領域として利用される。

　コンテンツ情報４０は、コンテンツ解像度５０およびコンテンツ映像５１からなる。コンテンツ解像度５０は、コンテンツ映像５１の解像度（横の画素数×縦の画素数）である。コンテンツ映像５１は、映像コンテンツの実体データであって、スマートフォン１が再生可能な形式で記録されている。ただし、コンテンツ情報４０はこのような映像コンテンツに限定されず、例えば、画像コンテンツ、画像を含む音楽コンテンツなどであってもよい。

　コントロールＵＩ４１は、上記コンテンツ映像５１の再生制御を行うためのユーザインターフェースである。コントロールＵＩ４１の詳細は後述する。

　制御部１０は、スマートフォン１全体を統括して制御するものであり、ＣＰＵ（Central Processing Unit）などで構成できる。制御部１０は、機能ブロックとして、画面解像度取得部（取得手段）２０、画面データ生成部（第１コンテンツ追加手段、第２コンテンツ追加手段）２１、コンテンツ再生部（再生制御手段）２２、および、操作信号取得部（再生制御手段）２３を備えている構成である。

　画面解像度取得部２０は、表示装置１００との接続が開始されたときに、表示装置１００から画面解像度Ｍ１を取得し、画面データ生成部２１に出力するものである。画面解像度Ｍ１は、表示装置１００の表示部１１２が備える表示画面（以下、単に「表示画面」と称する）の解像度（横の画素数×縦の画素数）である。

　画面データ生成部２１は、後述する手順に従って画面データＭ２を生成し、表示装置１００に送信して表示させるものである。また、画面データ生成部２１は、画面データＭ２の解像度を画面解像度Ｍ１と一致させる。従って、表示装置１００は、スマートフォン１から送信された画面データＭ２に対してスケーリング等の加工処理を施すことなく、そのまま表示画面に表示させることができる。

　画面データ生成部２１は、方向判定部３０およびスケーリング処理部３１をさらに備える。

　方向判定部３０は、画面解像度Ｍ１およびコンテンツ解像度５０に基づいて、表示画面の方向（以下、表示方向１３０と称する）と、コンテンツ映像５１の方向（以下、コンテンツ方向と称する）とが一致しているか否かを判定するものである。さらに、方向判定部３０は、表示方向１３０とコンテンツ方向とが一致している場合、画面解像度Ｍ１とコンテンツ解像度５０との間で、縦の解像度同士および横の解像度同士が一致しているか否かを判定する。これらの判定結果は、スケーリング処理部３１および画面データ生成部２１により利用される。

　表示方向１３０は、表示画面が縦向きおよび横向きのいずれであるかを示す情報である。ここで「縦向き」とは、ユーザから見て表示画面の長辺方向が垂直方向である（すなわち、表示画面が縦長である）ことを指す。一方「横向き」とは、ユーザから見て表示画面の長辺方向が水平方向である（すなわち、表示画面が横長である）ことを指す。スマートフォン１は、表示方向１３０を表示装置１００から取得してもよい。あるいは、画面解像度Ｍ１が示す縦横の画素数の比率（アスペクト比）に基づいて表示方向１３０を特定してもよい。

　コンテンツ方向は、コンテンツ映像５１が縦向き、あるいは、横向きのいずれであるかを指す。方向判定部３０は、コンテンツ解像度５０が示す縦横の画素数の比率（アスペクト比）に基づいてコンテンツ方向を求めてもよいし、コンテンツ情報４０にコンテンツ方向の情報が含まれる場合、その情報を利用してもよい。

　スケーリング処理部３１は、コンテンツ再生部２２が再生しているコンテンツ映像５１に対してスケーリング処理を施すものである。具体的には、スケーリング処理部３１は、コンテンツ映像５１の長辺方向および短辺方向の少なくとも一方の解像度（画素数）が、表示画面の長辺方向および短辺方向の少なくとも一方の解像度（画素数）に達するまで、長辺方向および短辺方向に等倍にスケーリングする。ただし、方向判定部３０により画面解像度Ｍ１とコンテンツ解像度５０との間で、縦の解像度同士および横の解像度同士が一致していると判定された場合、スケーリング処理部３１は、上記スケーリング処理を省略できる。

　図４は、スケーリング処理部３１が実行するスケーリング処理の一例を示す図である。同図では、コンテンツ映像５１の縦の画素数をＸ、横の画素数をＹとし、表示画面（画面データＭ２）の横の画素数をＬ、縦の画素数をＭ＋Ｎとしている。同図から明らかなように、コンテンツ映像５１は横向きであって、表示画面は縦向きである。また、各辺の画素数の大小関係は、Ｌ＞Ｙ、かつ、Ｍ＋Ｎ＞Ｘである。

　この場合、スケーリング処理部３１は、コンテンツ映像５１の横方向（長辺方向）の画素数Ｙが、表示画面の横方向（短辺方向）の画素数Ｌに達するまで、コンテンツ映像５１を縦横等倍で拡大する。これにより、図示の通り、コンテンツ映像５１はアスペクト比を保ったまま、表示画面の横幅一杯のサイズにまで拡大されることになる。

　さらに、画面データ生成部２１は、スケーリング処理部３１により上記スケーリング処理が施されたコンテンツ映像５１をブランクの画面データＭ２に貼り付ける第１合成処理を行う。ここで、「貼り付ける」とは、ブランクの画面データＭ２の画素値を上書きすることを指す。ブランクの画面データＭ２とは、解像度が画面解像度Ｍ１と等しい画像であって、各画素値に所定の初期値（例えば、黒色を示す値）が設定された画像である。上述の通り、コンテンツ映像５１は、表示画面の横幅一杯あるいは縦幅一杯のサイズにまでスケーリングされている。そのため、上記第１合成処理により、ブランクの画面データＭ２における該当領域は、スケーリングされたコンテンツ映像５１の画素値で上書きされることになる。

　なお、コンテンツ映像５１をブランクの画面データＭ２のどの位置に貼り付けるかは特に限定されない。以下、コンテンツ映像５１が横向きである場合には、ブランクの画面データＭ２の上辺または下辺に接するように貼り付けるものとする。同様に、コンテンツ映像５１が縦向きである場合には、ブランクの画面データＭ２の左辺または右辺に接するように貼り付けるものとする。例えば、図４に示す例では、コンテンツ映像５１はブランクの画面データＭ２の上辺に接するように貼り付けられている。

　さらに、画面データ生成部２１は、方向判定部３０において表示方向１３０とコンテンツ方向とが異なると判定された場合、記憶部１１から読み出したコントロールＵＩ４１を、画面データＭ２におけるコンテンツ映像５１以外の領域（余白の領域）に貼り付ける第２合成処理を行う。

　コントロールＵＩ４１は、コンテンツ映像５１の再生動作の制御をユーザが指示するためのユーザインターフェース（コントロール制御パネル）である。コントロールＵＩ４１は、表示用情報と制御情報Ｍ３とから構成される。

　図３の（ａ）及び（ｂ）は、コントロールＵＩ４１の表示例を示す図である。図示の通り、コントロールＵＩ４１は、縦向き（縦長）のものと横向き（横長）のものがそれぞれ用意されている。同図では、コントロールＵＩ４１は、再生時間２００、巻き戻しキー２０１、早送りキー２０２、再生キー２０３、前コンテンツキー２０４、次コンテンツキー２０５、および、停止キー２０６を含む。

　また、図３の（ｂ）に示すように、横向きのコントロールＵＩ４１は、コンテンツ映像５１の現在の再生位置を示すシークバー２１０をさらに含む。このように、コントロールＵＩ４１は、方向（縦向きまたは横向き）に応じて、表示する項目を変更してもよい。なお、コントロールＵＩ４１の表示形態は図３に示す例に限定されず、例えば、コンテンツ情報４０が画像コンテンツ、画像を含む音楽コンテンツなどの場合は、コントロールＵＩ４１は、それらを制御するために適した表示形態となる。

　図２は、画面データ生成部２１によって生成された画面データＭ２のパターンを列挙した図である。同図では、コンテンツ映像５１と画面データＭ２（表示画面）のそれぞれが、縦向きあるいは横向きであるときの全組み合わせのパターンについて示している。

　図２の（ａ）は、コンテンツ映像５１と画面データＭ２とがいずれも縦向きのパターンを示している。この場合、両者の方向が一致しているので、画面データ生成部２１は上記第２合成処理を行わない。すなわち、コントロールＵＩ４１は、画面データＭ２に追加されない。従って、図示の通り、コンテンツ映像５１は、画面データＭ２の大部分の領域を占めることになる。特に、コンテンツ解像度５０と画面解像度Ｍ１とが一致している場合、コンテンツ映像５１は画面データＭ２の全面に貼り付けられる。

　図２の（ｂ）、（ｃ）は、コンテンツ映像５１が横向き、かつ、画面データＭ２が縦向きのパターンを示している。この場合、画面データ生成部２１は上記第２合成処理を行うので、コントロールＵＩ４１は画面データＭ２に追加される。また、コンテンツ映像５１の余白の領域は横長であるので、図３の（ｂ）に示す横向きのコントロールＵＩ４１が貼り付けられる。

　図２の（ｂ）では、コンテンツ映像５１が画面データＭ２の上側に詰めて配置されているので、コントロールＵＩ４１は、画面データＭ２の下側に配置される。一方、図２の（ｃ）では、コンテンツ映像５１が画面データＭ２の下側に詰めて配置されているので、コントロールＵＩ４１は画面データＭ２の上側に配置される。このように、図２の（ｂ）、（ｃ）のケースでは、コントロールＵＩ４１は、コンテンツ映像５１とは上下反対側の領域に配置される。

　図２の（ｄ）、（ｅ）は、コンテンツ映像５１が縦向き、かつ、画面データＭ２が横向きのパターンを示している。この場合、画面データ生成部２１は上記第２合成処理を行うので、コントロールＵＩ４１は画面データＭ２に追加される。また、コンテンツ映像５１の余白の領域は縦長であるので、図３の（ａ）に示す縦向きのコントロールＵＩ４１が貼り付けられる。

　図２の（ｄ）では、コンテンツ映像５１が画面データＭ２の左側に詰めて配置されているので、コントロールＵＩ４１は画面データＭ２の右側に配置される。一方、図２の（ｅ）では、コンテンツ映像５１が画面データＭ２の右側に詰めて配置されているので、コントロールＵＩ４１は画面データＭ２の左側に配置される。このように、図２の（ｄ）、（ｅ）のケースでは、コントロールＵＩ４１は、コンテンツ映像５１とは左右反対側の領域に配置される。

　図２の（ｆ）は、コンテンツ映像５１と画面データＭ２とがいずれも横向きのパターンを示している。この場合、両者の方向が一致しているので、画面データ生成部２１は上記第２合成処理を行わない。すなわち、コントロールＵＩ４１は、画面データＭ２に追加されない。従って、図示の通り、コンテンツ映像５１は、画面データＭ２の大部分の領域を占めることになる。特に、コンテンツ解像度５０と画面解像度Ｍ１とが一致している場合、コンテンツ映像５１は画面データＭ２の全面に貼り付けられる。

　なお、画面データ生成部２１は、コントロールＵＩ４１を上記余白の領域の大きさに合わせて伸縮した後に、画面データＭ２に貼り付けることが望ましい。例えば、図２の（ｂ）に示すケースでは、コンテンツ映像５１の余白の領域は、コンテンツ映像５１のアスペクト比に応じて縦方向に変化する。従って、この場合、コントロールＵＩ４１は、縦方向に伸縮可能なようになっていればよい。ただし、少なくとも、コントロールＵＩ４１の各キーは余白の領域において全て表示されることが望ましい。

　また、画面データ生成部２１は、画面データＭ２におけるコンテンツ映像５１以外の余白の領域が所定の大きさを超える場合にのみ、コントロールＵＩ４１を貼り付けるようになっていてもよい。これにより、余白の領域が小さい場合にはコントロールＵＩ４１が追加されないので、コントロールＵＩ４１が小さすぎて視認できなかったり、コントロールＵＩ４１の一部が欠けてしまったりするといった事態を避けることができる。さらに、コントロールＵＩ４１を貼り付ける第２合成処理を省略できるので、画面データＭ２を短時間で生成することができる。

　また、画面データＭ２におけるコンテンツ映像５１以外の余白の領域に貼り付けられる情報は、上述したコントロールＵＩ４１に限られず、例えば、コンテンツ映像５１の再生状態を示すインジケータ等であってもよい。

　コントロールＵＩ４１の制御情報Ｍ３は、コントロールＵＩ４１へのユーザの指示を表示装置１００が受け付けるために必要となる情報である。例えば、制御情報Ｍ３は、画面データＭ２に貼り付けられたコントロールＵＩ４１の各キーの位置を示す座標情報と、該キーが示す再生制御コマンドとを対応付けた情報である。この再生制御コマンドは、「巻き戻し」「早送り」「再生」「停止」といった、コンテンツ映像５１の再生制御を指示するための情報である。画面データ生成部２１は、上述した一連の手順に従って生成した画面データＭ２を表示装置１００に送信して表示画面に表示させるとともに、制御情報Ｍ３を表示装置１００に送信する。

　なお、画面データ生成部２１は、コンテンツ再生部２２において再生されているコンテンツ映像５１を取得しながら、リアルタイムで画面データＭ２を生成して表示装置１００に送信することが望ましい。

　コンテンツ再生部２２は、記憶部１１から読み出したコンテンツ映像５１を再生するものである。コンテンツ再生部２２が再生中のコンテンツ映像５１は、画面データ生成部２１に出力される。また、コンテンツ再生部２２における再生動作は、操作信号取得部２３からの指示に基づいて制御される。

　なお、コンテンツ再生部２２は、スマートフォン１が内蔵する表示部（図示せず）および音声出力部（図示せず）を介して、再生中のコンテンツ映像５１をユーザに提示する機能を有していてもよい。スマートフォン１が自装置の姿勢に応じて自装置の表示画面を回転する機能をさらに備えている場合、上記コンテンツ方向は、スマートフォン１の表示画面の方向と一致することになる。なお、スマートフォン１が備える表示部においても、コンテンツ映像５１の再生動作を、スマートフォン１側で制御するためのユーザインターフェースを表示してもよい。

　また、コンテンツ再生部２２がコンテンツ映像５１の再生を開始するタイミングは、特に限定されない。例えば、スマートフォン１と表示装置１００との間の接続が確立される。その後、スマートフォン１が内蔵するタッチパネル（表示部；図示せず）を介したユーザ操作により、スマートフォン１が保持する複数のコンテンツ映像５１のうち、特定のコンテンツ映像５１が選択される。当該選択時において、コンテンツ映像５１の再生を開始するようになっていてもよい。あるいは、操作信号取得部２３からの指示に基づいてコンテンツ映像５１の再生を開始してもよい。

　操作信号取得部２３は、表示装置１００から操作信号Ｍ４を取得し、取得した操作信号Ｍ４に基づいて、コンテンツ再生部２２にて再生されているコンテンツ映像５１の再生動作の制御を指示するものである。操作信号Ｍ４は、上記再生制御コマンドを含む信号である。例えば、操作信号Ｍ４に含まれる再生制御コマンドが「巻き戻し」であった場合、操作信号取得部２３は、そのことをコンテンツ再生部２２に通知する。この通知を受けたコンテンツ再生部２２は、再生中のコンテンツ映像５１を所定時間だけ巻き戻す。画面データ生成部２１は、この巻き戻しが行われたコンテンツ映像５１に基づいて、画面データＭ２を生成する。

　スマートフォン１が接続する表示装置１００は、特定の１台に限定されない。つまり、スマートフォン１は、接続先を他の表示装置１００に切り替えられるようになっている。スマートフォン１は、接続先の表示装置１００から画面解像度Ｍ１を取得できるので、接続先の表示装置１００の解像度に応じた画面データＭ２を生成できる。

　〔表示装置１００の構成〕
　次に、図１を参照して、表示装置１００の構成を詳細に説明する。表示装置１００は、好適にはテレビジョン受像機、ＰＣモニター等であるが、これらの装置に限定されず、スマートフォン１と通信する機能を備えたあらゆる表示装置を広く採用できる。

　図示の通り、表示装置１００は、制御部１１０、記憶部１１１、表示部１１２、および、操作部１１３を備えている構成である。さらに、表示装置１００は、図示しないが、音声出力部、放送受像部などを備えていてもよい。また、スマートフォン１とのデータの送受信は、表示装置１００が内蔵する図示しない通信部を介して行われる。

　記憶部１１１は、不揮発性の記憶装置からなり、画面解像度Ｍ１（及び、表示方向１３０）を記憶する。記憶部１１１は、揮発性の記憶領域をさらに有していてもよい。この領域は、制御部１１０が実行する各種処理の過程で、演算に使用するデータおよび演算結果等を一時的に格納する作業領域として利用される。

　表示部１１２は、液晶パネル、有機ＥＬ（Electroluminescence）パネルなどのフラットディスプレイパネルからなり、表示装置１００によって処理される情報、画像などを表示画面に表示する。なお、表示部１１２は、タッチパネルとして操作部１１３を兼ねる構成であってもよい。

　通常、表示部１１２の表示画面の形状は長方形である。従って、表示画面の方向は、横向き（横長）あるいは縦向き（縦長）のいずれかである。この表示画面の方向は、表示方向１３０として記憶部１１１に記憶される。

　さらに、表示部１１２は、時計回り及び／又は反時計回りに回動可能なように形成されていてもよい。表示部１１２がこのように形成されていれば、ユーザは、表示装置１００の表示画面を横向きにしたり縦向きにしたりすることができる。そして、現在の表示画面の方向は、記憶部１１１に記憶される表示方向１３０に反映されるようになっている。

　操作部１１３は、ユーザが表示装置１００への入力操作を行うために設置されているインターフェースであり、例えば、ボタン、キーボード、タッチパネル、リモートコントローラ等である。リモートコントローラの場合、操作部１１３は、表示装置１００の外部に存在する。

　制御部１１０は、表示装置１００全体を統括して制御するものである。制御部１１０は、機能ブロックとして、画面解像度送信部１２０、画面データ取得部１２１、および、操作受付部１２２を備えている構成である。

　画面解像度送信部１２０は、記憶部１１１から読み出した画面解像度Ｍ１をスマートフォン１に送信するものである。

　画面データ取得部１２１は、スマートフォン１から画面データＭ２を取得し、表示部１１２に表示させるものである。さらに、画面データＭ２にコントロールＵＩ４１が含まれる場合、画面データ取得部１２１は、スマートフォン１から送信される制御情報Ｍ３を取得する。この制御情報Ｍ３は、後述する操作受付部１２２により利用される。なお、画面データ取得部１２１は、画面データＭ２に加えて音声データをスマートフォン１から取得し、当該音声データを、表示装置１００が備える音声出力部（図示せず）を介して出力させる機能を備えていてもよい。

　操作受付部１２２は、操作部１１３を介してユーザ操作を受け付け、該ユーザ操作と制御情報Ｍ３とに基づいて操作信号Ｍ４を生成し、スマートフォン１に送信するものである。操作信号Ｍ４は、コンテンツ映像５１の再生動作を制御するための再生制御コマンドを含む信号である。例えば、操作部１１３がタッチパネルである場合、操作受付部１２２は、ユーザによるタッチ操作が有った位置を示す表示画面上の座標を取得する。そして、制御情報Ｍ３から、該座標が含まれる座標範囲に対応する再生制御コマンドを取得し、操作信号Ｍ４に含めてスマートフォン１に送信する。

　〔処理の流れ〕
　図５は、画面送信システム１０００において実行される処理の流れの一例を示すシーケンス図である。

　まず、ユーザは、表示装置１００とスマートフォン１とを接続させる（Ｓ１）。接続が確立したら、表示装置１００の画面解像度送信部１２０は、記憶部１１１から画面解像度Ｍ１を読み出してスマートフォン１に送信する（Ｓ２）。スマートフォン１の画面解像度取得部２０は、送信された画面解像度Ｍ１を受信する（Ｓ３、取得ステップ）。なお、画面解像度送信部１２０が画面解像度Ｍ１を送信するタイミングは、コンテンツ映像５１の方向、あるいは、表示画面の方向が変更されたタイミングであってもよい。

　次に、スマートフォン１の画面データ生成部２１は、受信した画面解像度Ｍ１と解像度が等しいブランクの画面データＭ２を用意する（Ｓ４）。

　続いて、コンテンツ再生部２２は、コンテンツ映像５１を再生する（Ｓ５）。なお、コンテンツ映像５１の再生が開始されるタイミングはこのタイミングに限定されず、表示装置１００との接続が確立する前から、コンテンツ映像５１が再生されていてもよい。

　続いて、方向判定部３０は、コンテンツ映像５１の方向（コンテンツ方向）と表示画面の方向（表示方向１３０）とが一致しているか否かを判定する（Ｓ６）。

　コンテンツ方向と表示方向１３０とが一致している場合（Ｓ６においてＹＥＳ）、さらに、方向判定部３０は、コンテンツ解像度５０と画面解像度Ｍ１とが一致するか否かを判定する（Ｓ７）。コンテンツ解像度５０と画面解像度Ｍ１が一致している場合（Ｓ７においてＹＥＳ）、画面データ生成部２１は、コンテンツ映像５１をブランクの画面データＭ２に貼り付ける（Ｓ８、第１合成処理、第１コンテンツ追加ステップ）。そして、画面データＭ２を表示装置１００に送信する（Ｓ１４）。

　一方、コンテンツ解像度５０と画面解像度Ｍ１とが異なる場合（Ｓ７においてＮＯ）、スケーリング処理部３１は、コンテンツ映像５１をブランクの画面データＭ２の解像度（画面解像度Ｍ１）に合わせてスケーリングする（Ｓ９）。そして、スケーリングされたコンテンツ映像５１を画面データＭ２に貼り付けて（Ｓ１０、第１合成処理、第１コンテンツ追加ステップ）、当該画面データＭ２を表示装置１００に送信する（Ｓ１４）。

　また、コンテンツ方向と表示方向１３０とが異なる場合（Ｓ６においてＮＯ）、スケーリング処理部３１は、コンテンツ映像５１をブランクの画面データＭ２の解像度（画面解像度Ｍ１）に合わせてスケーリングする（Ｓ１１）。そして、画面データ生成部２１は、スケーリングされたコンテンツ映像５１を画面データＭ２に貼り付ける（Ｓ１２、第１合成処理、第１コンテンツ追加ステップ）。さらに、画面データ生成部２１は、画面データＭ２におけるコンテンツ映像５１以外の余白の領域に、記憶部１１から読み出したコントロールＵＩ４１を貼り付ける（Ｓ１３、第２合成処理、第２コンテンツ追加ステップ）。画面データ生成部２１は、このようにして生成した画面データＭ２と、コントロールＵＩ４１の制御情報Ｍ３とを表示装置１００に送信する（Ｓ１４）。

　Ｓ１４において画面データＭ２が送信された後は、スマートフォン１の処理はＳ５に戻る。ただし、２回目以降の処理では、Ｓ６、Ｓ７の各ステップの処理を省略し、前回の判定結果を利用してもよい。そして、画面データ生成部２１は、ブランクの画面データＭ２ではなく、前回の画面データＭ２に対して第１合成処理および第２合成処理を行う。

　表示装置１００の画面データ取得部１２１は、スマートフォン１から送信された画面データＭ２を受信する（Ｓ１５）。スマートフォン１から制御情報Ｍ３が送信された場合（すなわち、画面データＭ２にコントロールＵＩ４１が追加されている場合）、制御情報Ｍ３も併せて取得する。そして、画面データ取得部１２１は、取得した画面データＭ２を表示部１１２の表示画面に表示させる（Ｓ１６）。画面データ取得部１２１は、スマートフォン１から画面データＭ２を受信する毎に、受信した画面データＭ２を表示させることで、表示画面を更新し続ける。

　そして、画面データＭ２にコントロールＵＩ４１が含まれる場合、以降の各ステップ（Ｓ１７～Ｓ２０）の処理が実行される。

　コントロールＵＩ４１に対するユーザ操作が有ったとき（Ｓ１７においてＹＥＳ）、操作受付部１２２は、制御情報Ｍ３に基づいて、該ユーザ操作に対応する再生制御コマンドを取得する。そして、該再生制御コマンドを操作信号Ｍ４に含めてスマートフォン１に送信する（Ｓ１８）。

　スマートフォン１の操作信号取得部２３は、上記操作信号Ｍ４を受信する（Ｓ１９）。そして、受信した操作信号Ｍ４に含まれる再生制御コマンドに基づいて、コンテンツ再生部２２に指示を送る。この指示を受けたコンテンツ再生部２２は、コンテンツ映像５１の再生動作を変更する（Ｓ２０）。その後、スマートフォン１の処理はＳ５に戻る。

　〔実施形態２〕
　以下、本発明の他の実施形態について、図６に基づいて詳細に説明する。

　図６は、本実施形態に係るスマートフォン１が生成した画面データＭ２を示す図である。図示の通り、本実施形態では、画面データ生成部２１は、画面データＭ２にコントロールＵＩ４１を貼り付ける代わりに、スマートフォン１が備える表示部（図示せず）の表示画像（自装置表示画像）３００を貼り付ける。従って、表示装置１００の表示画面には、スマートフォン１の画面がミラーリングされて表示されることになる。

　本実施形態によれば、スマートフォン１は、自装置で再生中のコンテンツ映像５１を表示装置１００に表示させるとともに、そのコンテンツ映像５１と並べて、自装置の表示画面を表示装置１００に表示させることができる。このように、画面データＭ２におけるコンテンツ映像５１の余白の領域に貼り付ける内容は、コントロールＵＩ４１に限定されない。

　さらに、操作受付部１２２は、表示装置１００に対するユーザ操作（例えば、タッチ操作）に基づいて、スマートフォン１の表示画像３００が示す画面を操作するための操作信号Ｍ４を生成し、スマートフォン１に送信してもよい。これにより、表示装置１００側で、スマートフォン１の画面を操作できる。つまり、スマートフォン１の操作部の機能を、表示装置１００に代行させることが可能となる。

　〔実施形態３：ソフトウェアによる実現例〕
　スマートフォン１および表示装置１００の制御ブロック（制御部１０および制御部１１０）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ＣＰＵを用いてソフトウェアによって実現してもよい。

　後者の場合、スマートフォン１および表示装置１００は、各機能を実現するソフトウェアであるプログラムの命令を実行するＣＰＵ、上記プログラムおよび各種データがコンピュータ（またはＣＰＵ）で読み取り可能に記録されたＲＯＭ（Read Only Memory）または記憶装置（これらを「記録媒体」と称する）、上記プログラムを展開するＲＡＭ（Random Access Memory）などを備えている。そして、コンピュータ（またはＣＰＵ）が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。

　〔まとめ〕
　本発明の態様１に係る表示制御装置（スマートフォン１）は、表示装置（１００）が備える表示画面の画面解像度（Ｍ１）と等しい解像度の表示用画像（画面データＭ２）を生成し、上記表示用画像を上記表示装置に送信して当該表示装置が備える上記表示画面に表示させる表示制御装置であって、上記表示装置が備える上記表示画面の上記画面解像度を取得する取得手段（画面解像度取得部２０）と、上記表示用画像に第１コンテンツ（コンテンツ映像５１）を含める第１コンテンツ追加手段（画面データ生成部２１）と、上記取得手段が取得した上記画面解像度に基づいて、上記表示用画像における上記第１コンテンツ以外の領域に、第２コンテンツ（コントロールＵＩ４１）を含める第２コンテンツ追加手段（画面データ生成部２１）とを備える。

　本発明の態様８に係る表示制御装置の制御方法は、表示装置が備える表示画面の画面解像度と等しい解像度の表示用画像を生成し、上記表示用画像を上記表示装置に送信して当該表示装置が備える上記表示画面に表示させる表示制御装置の制御方法であって、上記表示装置が備える上記表示画面の上記画面解像度を取得する取得ステップ（Ｓ３）と、上記表示用画像に第１コンテンツを含める第１コンテンツ追加ステップ（Ｓ８、Ｓ１０、Ｓ１２、第１合成処理）と、上記取得ステップにて取得した上記画面解像度に基づいて、上記表示用画像における上記第１コンテンツ以外の領域に、第２コンテンツを含める第２コンテンツ追加ステップ（Ｓ１３、第２合成処理）とを含む。

　上記の構成および方法によれば、上記表示制御装置は、表示装置が備える表示画面の画面解像度を取得する。また、表示用画像に第１コンテンツを含めると共に、取得した画面解像度に基づいて、表示用画像における第１コンテンツ以外の領域に第２コンテンツを含める。そして、生成した表示用画像を表示装置に送信して、表示装置が備える表示画面に表示させる。

　よって、上記表示制御装置は、表示用画像における第１コンテンツ以外の領域（以下、余白領域と称する）に第２コンテンツを含めた上で、当該表示用画像を表示装置に送信する。このため、上記表示制御装置は、第１コンテンツ以外の余白領域が削減された状態の表示用画像を表示装置に表示させることができる。従って、表示装置の表示画面を有効に活用できるという効果を奏する。

　また、従来、表示装置にコンテンツを送信して表示させるときに、表示装置の画面解像度とコンテンツの解像度（または、アスペクト比、画角情報など）とが一致しない場合、コンテンツの一部が欠けた状態で表示されことがある。また、表示装置側で簡易なスケーリング処理を行ったとしても、表示されるコンテンツが潰れてしまったり、何も表示されない黒色の領域（額縁）が生じてしまったりして、デザイン性が損なわれることがある。

　このような問題は、コンテンツを送信する側の装置が、表示装置の画面解像度に応じた適切な表示用画像を生成した上で、表示用画像を送信していないために生じる。

　そこで、上記表示制御装置は、表示装置が備える表示画面の画面解像度を取得し、取得した画面解像度に基づいて、表示用画像を生成する。これにより、上記表示制御装置は、任意の解像度を有する表示装置に対して、その表示装置が備える表示画面の画面解像度に適した表示用画像を生成して、表示装置に表示させることができる。例えば、表示装置の画面解像度とコンテンツの解像度とが一致していない場合であっても、取得した画面解像度に応じて、自装置が保有するコンテンツを適切に配置された表示用画像を生成し、表示装置に表示させることができる。

　従って、コンテンツの一部が欠けたり、コンテンツが潰れたり、黒色の領域が大きくなったりするといった従来の問題を解決することができるので、表示品位を向上させることができる。

　本発明の態様２に係る表示制御装置は、上記態様１において、上記第２コンテンツ追加手段は、上記表示画面における上記第１コンテンツの長辺方向（コンテンツ方向）が上記表示画面の長辺方向（表示方向１３０）と異なる場合にのみ、上記表示用画像における上記第１コンテンツ以外の領域に、上記第２コンテンツを含めてもよい。

　上記の構成によれば、上記表示制御装置は、表示装置の表示画面の長辺方向と、第１コンテンツの長辺方向とが異なる場合にのみ、第１コンテンツ以外の領域に第２コンテンツを含める。通常、両者の長辺方向が一致する場合（特に、アスペクト比が近い場合）、異なる場合と比べて、表示画面における第１コンテンツ以外の余白領域が小さくなる。

　そこで、上記表示制御装置は、長辺方向が異なる場合にのみ、余白領域に第２コンテンツを含める。従って、長辺方向が一致する場合に第２コンテンツを含めないので、第２コンテンツが小さすぎて視認できなかったり、第２コンテンツの一部が欠けてしまったりするといった事態を避けることができる。また、第２コンテンツを含める処理を省略できるので、表示用画像を短時間で生成することができる。

　本発明の態様３に係る表示制御装置は、上記態様１または２において、上記第２コンテンツ追加手段は、上記表示用画像における上記第１コンテンツ以外の領域が所定の大きさを超える場合にのみ、上記表示用画像における上記第１コンテンツ以外の領域に、上記第２コンテンツを含めてもよい。

　上記の構成によれば、上記表示制御装置は、第１コンテンツ以外の領域が所定の大きさを超える場合にのみ、第１コンテンツ以外の領域に、第２コンテンツを含める。

　すなわち、上記表示制御装置は、余白領域が所定の大きさ以下の場合には当該余白領域に第２コンテンツを含めない。これにより、第２コンテンツが小さすぎて視認できなかったり、第２コンテンツの一部が欠けてしまったりするといった事態を避けることができる。また、第２コンテンツを含める処理を省略できるので、表示用画像を短時間で生成することができる。

　本発明の態様４に係る表示制御装置は、上記態様１から３の何れか１つの態様において、上記第２コンテンツは、上記第１コンテンツの再生に関連する表示用情報（コントロールＵＩ４１、インジケータ）であってもよい。

　上記の構成によれば、第２コンテンツは、第１コンテンツの再生に関連する表示用情報である。よって、上記表示制御装置は、第１コンテンツの再生に関連する情報で余白領域を埋めることができる。特に、第１コンテンツの再生に関連する情報は、第１コンテンツを視聴しているユーザにとって関心のある情報である可能性が高いので、従来表示されていた黒色の領域（額縁）よりも有益な情報をユーザに提供できるという効果を奏する。

　本発明の態様５に係る表示制御装置は、上記態様４において、上記第２コンテンツは上記第１コンテンツの再生制御をユーザが指示するための表示用情報（コントロールＵＩ４１）であって、上記第１コンテンツの再生制御のユーザによる指示を取得し、当該指示に基づいて、上記第１コンテンツの再生を制御する再生制御手段（コンテンツ再生部２２、操作信号取得部２３）をさらに備えていてもよい。

　上記の構成によれば、上記表示制御装置は、第１コンテンツの再生制御のユーザによる指示を取得し、当該指示に基づいて、第１コンテンツの再生を制御する。従って、上記表示制御装置は、第２コンテンツを用いて余白領域を埋めることができると共に、当該第２コンテンツに基づくユーザからの指示を取得し、第１コンテンツの再生を制御できるという効果を奏する。

　本発明の態様６に係る表示制御装置は、上記態様１から５の何れか１つの態様において、上記第１コンテンツ追加手段は、上記第１コンテンツの長辺方向および短辺方向の少なくとも一方の解像度が、上記表示画面の長辺方向および短辺方向の少なくとも一方の解像度に達するまで、長辺方向および短辺方向に等倍にスケーリングした上記第１コンテンツを上記表示用画像に含めてもよい。

　上記の構成によれば、上記表示制御装置は、第１コンテンツに対してスケーリング処理を施すことで、第１コンテンツを表示装置の横幅あるいは縦幅一杯に拡大した上で、余白領域を第２コンテンツで埋めることができる。従って、上記表示制御装置は、表示装置の画面解像度に合わせて、第１コンテンツを可能な限り大きく表示装置に表示させることができる。

　本発明の態様７に係る表示制御装置は、上記態様１から６の何れか１つの態様において、表示部をさらに備え、上記第２コンテンツ追加手段は、上記表示部に表示される画像である自装置表示画像（表示画像３００）を上記第２コンテンツとして上記表示用画像に含めてもよい。

　上記の構成によれば、上記表示制御装置は、自装置が備える表示部に表示される表示画面を余白領域に表示させることができる。

　また、上記表示制御装置および上記表示装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記表示制御装置および上記表示装置が備える各手段として動作させることにより上記表示制御装置および上記表示装置をコンピュータにて実現させる上記表示制御装置および上記表示装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。

　本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。

　本発明に係る表示制御装置は、表示用のコンテンツを送信する機能を備えた情報処理装置に適用することができる。特に、スマートフォン、携帯電話、パソコン、タブレットＰＣ、カメラ、ＤＶＤプレイヤ、ＢＤプレイヤ、ケーブルテレビ用のＳＴＢなどの様々な情報処理装置に幅広く適用することができる。

　　１　スマートフォン（表示制御装置）
　２０　画面解像度取得部（取得手段）
　２１　画面データ生成部（第１コンテンツ追加手段、第２コンテンツ追加手段）
　２２　コンテンツ再生部（再生制御手段）
　２３　操作信号取得部（再生制御手段）
　３０　方向判定部
　３１　スケーリング処理部
　４１　コントロールＵＩ（第２コンテンツ）
　５０　コンテンツ解像度
　５１　コンテンツ映像（第１コンテンツ）
１００　表示装置
１１２　表示部
１３０　表示方向（表示画面の長辺方向）
３００　表示画像（第２コンテンツ、自装置表示画像）
　Ｍ１　画面解像度
　Ｍ２　画面データ（表示用画像）

Claims

　表示装置が備える表示画面の画面解像度と等しい解像度の表示用画像を生成し、上記表示用画像を上記表示装置に送信して当該表示装置が備える上記表示画面に表示させる表示制御装置であって、
　上記表示装置が備える上記表示画面の上記画面解像度を取得する取得手段と、
　上記表示用画像に第１コンテンツを含める第１コンテンツ追加手段と、
　上記取得手段が取得した上記画面解像度に基づいて、上記表示用画像における上記第１コンテンツ以外の領域に、第２コンテンツを含める第２コンテンツ追加手段とを備えることを特徴とする表示制御装置。
　上記第２コンテンツ追加手段は、上記表示画面における上記第１コンテンツの長辺方向が上記表示画面の長辺方向と異なる場合にのみ、上記表示用画像における上記第１コンテンツ以外の領域に、上記第２コンテンツを含めることを特徴とする請求項１に記載の表示制御装置。
　上記第２コンテンツ追加手段は、上記表示用画像における上記第１コンテンツ以外の領域が所定の大きさを超える場合にのみ、上記表示用画像における上記第１コンテンツ以外の領域に、上記第２コンテンツを含めることを特徴とする請求項１または２に記載の表示制御装置。
　上記第２コンテンツは、上記第１コンテンツの再生に関連する表示用情報であることを特徴とする請求項１から３のいずれか１項に記載の表示制御装置。
　上記第２コンテンツは上記第１コンテンツの再生制御をユーザが指示するための表示用情報であって、
　上記第１コンテンツの再生制御のユーザによる指示を取得し、当該指示に基づいて、上記第１コンテンツの再生を制御する再生制御手段をさらに備えていることを特徴とする請求項４に記載の表示制御装置。
　上記第１コンテンツ追加手段は、上記第１コンテンツの長辺方向および短辺方向の少なくとも一方の解像度が、上記表示画面の長辺方向および短辺方向の少なくとも一方の解像度に達するまで、長辺方向および短辺方向に等倍にスケーリングした上記第１コンテンツを上記表示用画像に含めることを特徴とする請求項１から５のいずれか１項に記載の表示制御装置。
　表示部をさらに備え、
　上記第２コンテンツ追加手段は、上記表示部に表示される画像である自装置表示画像を上記第２コンテンツとして上記表示用画像に含めることを特徴とする請求項１から６のいずれか１項に記載の表示制御装置。
　表示装置が備える表示画面の画面解像度と等しい解像度の表示用画像を生成し、上記表示用画像を上記表示装置に送信して当該表示装置が備える上記表示画面に表示させる表示制御装置の制御方法であって、
　上記表示装置が備える上記表示画面の上記画面解像度を取得する取得ステップと、
　上記表示用画像に第１コンテンツを含める第１コンテンツ追加ステップと、
　上記取得ステップにて取得した上記画面解像度に基づいて、上記表示用画像における上記第１コンテンツ以外の領域に、第２コンテンツを含める第２コンテンツ追加ステップとを含むことを特徴とする表示制御装置の制御方法。
　請求項１から７のいずれか１項に記載の表示制御装置としてコンピュータを機能させるためのプログラムであって、コンピュータを上記各手段として機能させるためのプログラム。
　請求項９に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。