JP5522678B2

JP5522678B2 - 電子機器

Info

Publication number: JP5522678B2
Application number: JP2010107379A
Authority: JP
Inventors: 修司大屋
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2010-05-07
Filing date: 2010-05-07
Publication date: 2014-06-18
Anticipated expiration: 2030-05-07
Also published as: JP2011239079A

Description

この発明は電子機器に関し、特に、他の表示装置に接続して映像出力を行なう電子機器に関する。

たとえば特開２０１０−１６４３９号公報に開示されているように、電子機器の一例としての携帯電話機の中には、加速度センサ等を搭載することによって端末の回転（天地）を検出する機能を有するものがある。そのような携帯電話機においては、画面表示の際に検出された端末の天地に基づいて画面の表示方向を変更する制御を行なうものがある。

特開２０１０−１６４３９号公報

このような制御を行なう電子機器を外部の表示装置としてのテレビジョン受像機（以下、ＴＶともいう）と接続してＴＶに対して映像を出力する場合、各アプリケーションはそのアプリケーションにおける画面をＴＶで表示させるためにＴＶの解像度（縦横比）に応じて画面を再構成する必要がある。これにより各アプリケーションでの処理として、先述の端末の天地に基づいて画面の表示方向を変更する処理に加えて、ＴＶの解像度（縦横比）に応じて画面を再構成する処理まで必要となる。これは、アプリケーションでの処理を煩雑にし、処理時間や処理用のメモリが多く要求される、という問題につながる。また、さらにＴＶの解像度（縦横比）に応じて画面を再構成する処理まで実行することのできないアプリケーションの場合、該アプリケーションでの画面をＴＶで表示させることができない、という問題もある。

本発明はこのような問題に鑑みてなされたものであって、アプリケーションでの画面を容易に外部の表示装置で表示させることのできる電子機器を提供することを目的としている。

上記目的を達成するために、本発明のある局面に従うと、電子機器は、ディスプレイと、本体の向きを検出するためのセンサと、他の出力装置に対して映像信号を出力するための出力手段と、アプリケーションを実行するためのアプリケーション処理手段と、アプリケーション処理手段にアプリケーションでの画面の向きを通知し、アプリケーション処理手段で生成される画面データの出力を制御するための制御手段と、生成された画面データのサイズを変換するための変換手段とを備え、アプリケーション処理手段は、制御手段から通知された向きに対応した、ディスプレイのサイズに応じた画面データを生成し、制御手段は、アプリケーションでの画面の出力先がディスプレイである場合には検出された本体の向きをアプリケーション処理手段に通知し、アプリケーションでの画面の出力先が出力手段から他の出力装置である場合には他の出力装置に対応して予め記憶している向きをアプリケーション処理手段に通知し、変換手段は、アプリケーションでの画面の出力先が他の出力装置である場合には、アプリケーション処理手段で生成されたディスプレイのサイズに応じた画面データのサイズを他の出力装置の表示サイズに応じて変換する。

好ましくは、制御手段は、アプリケーションでの画面の出力先がディスプレイである場合には本体の向きとして第１の向き、または第１の向きに直交する第２の向きをアプリケーション処理手段に通知し、アプリケーションでの画面の出力先が他の出力装置である場合には、第１の向きと第２の向きとのうちの他の出力装置に対応して予め記憶している向きをアプリケーション処理手段に通知する。

より好ましくは、ディスプレイの形状は矩形であって、本体が第１の向きである場合に縦方向の辺の方が横方向の辺よりも長く、他の出力装置の表示形状は矩形であって、横方向の辺の方が縦方向の辺よりも長く、制御手段は、アプリケーションでの画面の出力先が他の出力装置である場合に、第２の向きをアプリケーション処理手段に通知する。

好ましくは、変換手段は、アプリケーションでの画面の出力先が他の出力装置である場合に、アプリケーション処理手段で生成されたディスプレイのサイズに応じた画面データのサイズを他の出力装置の表示サイズに応じて拡大するための処理を行なう。

この発明によると、電子機器でのアプリケーションでの画面を、当該アプリケーションでの処理を煩雑にさせることなく外部の表示装置で表示させることができる。

本実施の形態にかかる携帯電話機の構成の具体例を示す図である。携帯電話機での表示画面およびＴＶでの表示画面の具体例を示す図である。携帯電話機での表示画面およびＴＶでの表示画面の具体例を示す図である。本実施の形態にかかる携帯電話機の機能構成の具体例を示すブロック図である。本実施の形態にかかる携帯電話機での処理の流れの具体例を示すフローチャートである。

以下に、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。以下においては、本発明にかかる電子機器が一例として携帯電話機で実現されるものとして説明する。しかしながら、電子機器は携帯電話機に限定されず、その他、マルチメディアプレーヤ、ゲーム機、電子書籍端末、パーソナルコンピュータ（ＰＣ）等であってもよい。さらには、携帯機器に限定もされない。たとえば、タッチパネルディスプレイ一体型デスクトップＰＣなどであってもよい。

図１は、本実施の形態にかかる携帯電話機１の構成の具体例を示す図である。図１を参照して、本実施の形態にかかる携帯電話機１は、液晶パネル（ＬＣＤ：Liquid Crystal Display）などである表示部１１と、数字キーやその他操作キーなどの操作入力のための入力部１２とを含む。

表示部１１は矩形であって、その縦横の長さが異なる。一例として、図１では、表示部１１が縦８５４ピクセル×横４８０ピクセルの縦長の形状であることが示されている。数字キーを操作方向としたときの携帯電話機１の向きは図１に表わされたように、表示部１１が上方、入力部１２が下方に位置する向きであるものとし、以降の説明では、その向きを「縦向き」とも称する。表示部１１の具体的なサイズは限定されないが、その縦横の長さが異なり、以下の説明では、図１に表わされたように携帯電話機１を縦向きとしたときに縦長の形状であるものとする。

携帯電話機１は、他の表示装置としてのテレビジョン受像機（以下、ＴＶと略する）３と接続され、通信回路５を通してＴＶ３に対して信号を出力することができる。携帯電話機１からＴＶ３への通信の一例として、ＨＤＭＩ（High-Definition Multimedia Interface）（登録商標）を利用した通信が挙げられる。

ＴＶ３は、液晶パネルなどである表示部３１を含む。表示部３１もまた矩形であって、携帯電話機１の表示部１１よりも大きなサイズである。一例として、図１では表示部３１が縦１０８０ピクセル×横１９２０ピクセルの横長の形状であることが示されている。具体的なサイズは限定されないが、以下の説明では、携帯電話機１の表示部１１よりも大きく、図１に表わされたように横長の形状であるものとする。

携帯電話機１では、当該端末機を縦向きにした場合には表示部１１に表示される画面が縦向きになり、縦向きから９０度回転させた向き（以降の説明ではこの向きを「横向き」とも称する）にした場合には表示部１１に表示される画面も横向きになる。また、携帯電話機１から映像信号がＴＶ３に出力されてＴＶ３で表示される場合には、その表示部３１のサイズに応じた大きさの画面が表示される。

図２および図３は、携帯電話機１での表示画面およびＴＶ３での表示画面の具体例を示す図である。図２を参照して、具体例として、再生するコンテンツがたとえば写真や動画などの画像である場合、携帯電話機１を縦向きとしたときには、図２（Ａ）に表わされたように画像が縦方向となる表示画面が表示部１１に表示される。また、携帯電話機１を横向きとした場合には、図２（Ｂ）に表わされたように画像が横方向となる表示画面が表示部１１に表示される。携帯電話機１からＴＶ３に映像信号が出力されてＴＶ３で再生される場合には、図２（Ｃ）に表わされたように画面のサイズがＴＶ３の表示部３１に応じたサイズに拡大される。

これにより、ユーザが携帯電話機１を縦方向に持った場合であっても（図２（Ａ））、横方向に持った場合であっても（図２（Ｂ））、表示部１１に表示される画面が天地方向となり、コンテンツを視聴しやすくなる。また、ＴＶ３で表示させることで、大画面でコンテンツを視聴することができる。

図３を参照して、再生するコンテンツがたとえばメールやドキュメントなどのテキストである場合も、携帯電話機１を縦向きとしたときには、図３（Ａ）に表わされたように
文字の向きが縦方向となる表示画面が表示部１１に表示される。また、携帯電話機１を横向きとした場合には、図３（Ｂ）に表わされたように文字の向きが横方向となる表示画面が表示部１１に表示される。このとき、必要に応じてレイアウトが再構成される。携帯電話機１からＴＶ３に映像信号が出力されてＴＶ３で再生される場合には、図３（Ｃ）に表わされたように画面のサイズがＴＶ３の表示部３１に応じたサイズに拡大される。

これにより、ユーザが携帯電話機１を縦方向に持った場合であっても（図３（Ａ））、横方向に持った場合であっても（図３（Ｂ））、表示部１１に表示される画面が天地方向となり、そのままの向きでテキストを読むことができる。また、ＴＶ３で表示させることで、大画面でテキストを読むことができる。

携帯電話機１の向きに応じた表示を実現するため、携帯電話機１では当該端末の向きを検出し、コンテンツを再生しているアプリケーションが当該向きに応じて表示画面を再構成する。これにより、図２（Ａ），図２（Ｂ）、および図３（Ａ），図３（Ｂ）に表わされたような、携帯電話機１の向きに応じた表示が実現される。

一方、携帯電話機１ではアプリケーションにおいてＴＶ３での大画面の表示を実現するための処理は実行されず、アプリケーション層とＯＳ（Operating System）層との中間に位置する、フレームワークとも言われる画面制御層においてこの処理が実行される。

このような処理を実現するための携帯電話機１の機能を、図４を用いて説明する。図４は、携帯電話機１の機能構成の具体例を示すブロック図である。

図４を参照して、携帯電話機１は、図示しないＣＰＵ（Central Processing Unit）を含んでメモリに記憶されるプログラムを実行することで全体を制御するための制御部１０と、表示部１１と、入力部１２と、加速度センサ１３と、表示部１１の表示画面のための表示データを保持するためのメモリであるＶＲＡＭ（Video Random Access Memory）（図４ではＬＣＤ−ＶＲＡＭと表わされている）１５と、ＴＶ３に出力する映像信号に含まれる表示データを保持するためのメモリであるＶＲＡＭ（図４ではＨＤＭＩ−ＶＲＡＭと表わされている）１７と、画面データをＶＲＡＭ１５に描画して表示データを得、表示部１１に接続され表示部１１に対して表示データを出力するための出力部（図４ではＬＣＤ出力部と表わされている）１４と、画面データをＶＲＡＭ１７に描画して表示データを得、ＴＶ３に通信回路５を通して表示データに基づく映像信号を出力するための出力部（図４ではＨＤＭＩ出力部と表わされている）１６とを含む。これらはいずれもハードウェアによって実現されることが想定されるが、少なくとも一部がソフトウェアで実現されるものであってもよい。

さらに、制御部１０は、画面制御層に相当する出力制御部１０１と、各アプリケーションでの処理を実行するためのアプリケーション処理部１０２と、外部からの情報等に基づいて各アプリケーションや出力制御部１０１に対して必要な制御信号を出力してこれら機能を制御するためのシステム制御部１０３とを含む。これらは、制御部１０の図示しないＣＰＵがメモリに記憶されるプログラムを実行することによってソフトウェアで実現されることが想定されるが、少なくとも一部がハードウェアで実現されるものであってもよい。

加速度センサ１３は、重力加速度に対応したセンサ信号をシステム制御部１０３に対して出力する。システム制御部１０３は、加速度センサ１３からのセンサ信号に基づいて当該端末の向きを特定する。

システム制御部１０３は、入力部１２からの操作信号の入力を受け付けて、指定されたアプリケーションを実行させるための制御信号をアプリケーション処理部１０２に対して出力する。その際、画面の出力先が表示部１１である場合には、システム制御部１０３は加速度センサ１３からのセンサ信号に基づいて当該端末の向きが縦向きであるのか横向きであるのかを特定してその結果を画面の向きとしてアプリケーション処理部１０２に対して出力（通知）する。画面の出力先がＴＶ３である場合には、システム制御部１０３は当該端末の向きに関わらず、予めＴＶ３に対応付けて記憶されている方向として横向きを画面の向きとしてアプリケーション処理部１０２に対して通知する。また、システム制御部１０３は、画面の出力先を特定する情報と共に画面出力を指示する制御信号を出力制御部１０１に対して出力する。

アプリケーション処理部１０２は、システム制御部１０３からの制御信号に従って特定されたアプリケーションを実行し、表示画面を出力制御部１０１に対して出力する。その際、システム制御部１０３からの通知に従って、画面の出力先が表示部１１である場合には検出された当該端末の向きに応じた方向に画面データを生成して出力制御部１０１に対して出力する。表示部１１の画面サイズが図１に示された８５４ピクセル×４８０ピクセルであり、当該端末の向きが縦向きと通知されたときにはアプリケーション処理部１０２は縦向き用の縦８５４ピクセル×横４８０ピクセルの画面データを生成し、横向きと通知されたときには横向き用の縦４８０ピクセル×横８５４ピクセルの画面データを生成する。

画面の出力先がＴＶ３である場合には、アプリケーション処理部１０２は、横向き用であって、表示部１１のサイズに対応した画面データを生成して出力制御部１０１に対して出力する。このとき表示部１１のサイズが上述のサイズである場合、アプリケーション処理部１０２は、出力先が表示部１１である場合であって当該端末の向きが横向きであるときと同様に、横向き用の縦４８０ピクセル×横８５４ピクセルの画面データを生成する。

出力制御部１０１は、画面の出力先が表示部１１である場合には、アプリケーション処理部１０２から入力された画面データを出力部１４に渡し、表示部１１に表示させるための制御信号を出力する。出力部１４は入力された画面データをＶＲＡＭ１５に描画して表示データを得、表示部１１に対して表示データを出力する。

出力制御部１０１は、画面の出力先がＴＶ３である場合には、アプリケーション処理部１０２から入力された横向きの画面データを出力部１６に渡す。

出力部１６は変換部１６１を含む。出力部１６は予めＴＶ３の表示部３１に対応したサイズを記憶しており、ＶＲＡＭ１７のそのサイズに対応した領域に画面データを描画することで、画面データをＴＶ３の表示部３１に対応したサイズに拡大する。表示部１１のサイズが図１に表わされた８５４ピクセル×４８０ピクセル、ＴＶ３のサイズが図１に表わされた縦１０８０ピクセル×横１９２０ピクセルであるとき、変換部１６１は、アプリケーション処理部１０２において生成された横向き用の縦４８０ピクセル×横８５４ピクセルの画面データを、縦１０８０ピクセル×横１９２０ピクセル分のＶＲＡＭ１７の領域に描画する。このとき、本例のように縦横のアスペクト比が異なる場合、変換部１６１は、必要に応じて補間処理を実行しながら画面データを描画する。これにより、アプリケーション処理部１０２において生成された縦４８０ピクセル×横８５４ピクセルの画面データが縦１０８０ピクセル×横１９２０ピクセルまで拡大される。もちろん、図１に表わされた各表示部のサイズは一例であるので、ＴＶ３の表示部３１のサイズが携帯電話機１の表示部１１のサイズよりも小さい場合には、変換部１６１は、アプリケーション処理部１０２において生成された表示部１１のサイズに対応した横向き用の画面データに対してＴＶ３の表示部３１に対応したサイズに縮小する処理を施す。また、このとき、必要に応じて画素を間引く処理を実行してもよい。

出力部１６はサイズ変換して得られた表示データに基づく映像信号をＴＶ３に対して出力する。

なお、図４は、本実施の形態にかかる機能を説明するために携帯電話機の機能を簡略化したものである。したがって、携帯電話機１は、たとえばカメラなどの、図４に表わされた以外の機能を含んでいてもよい。

図５は、本実施の形態にかかる携帯電話機１での処理の流れの具体例を示すフローチャートである。図５のフローチャートに表わされた処理は、携帯電話機１の制御部１０が入力部１２からの操作信号に基づいて特定されたアプリケーションを実行する際に行なわれる処理であって、図示しないＣＰＵがメモリに記憶されているプログラムを実行して図４に表わされた各部を機能させることによって実現される。

図５を参照して、システム制御部１０３はアプリケーションの実行の際に入力部１２からの指示を受け付けることによって、アプリケーションの画面のＴＶ３への出力を判断する（ステップＳ１０１）。または、ＴＶ３との通信インタフェースでもある出力部１６に通信回路５を形成するケーブルの接続を検出することでアプリケーションの画面のＴＶ３への出力を判断してもよい。本例では、携帯電話機１からＴＶ３へＨＤＭＩを利用した通信が行なわれるので、ＨＤＭＩケーブルが出力部１６に接続されたこと、または携帯電話機１とＴＶ３とのＨＤＭＩ通信の確立が検出されたこと、などによってアプリケーションの画面のＴＶ３への出力を判断してもよい。

アプリケーション画面の出力先がＴＶ３である場合（ステップＳ１０１でＹＥＳ）、システム制御部１０３はアプリケーション処理部１０２に対して画面の向きを横向きと通知する（ステップＳ１０３）。これにより、対応したアプリケーションでは、当該端末が横向きであるときと同様に、当該端末の表示部１１のサイズに対応した横向き用の画面データ（本例では縦４８０ピクセル×横８５４ピクセルの画面データ）が生成され、その画面データがシステム制御部１０３に入力される。

出力部１６の変換部１６１は、システム制御部１０３がアプリケーション処理部１０２から受け付けた当該端末の表示部１１のサイズに対応した横向き用の画面データを予め記憶しているＴＶ３の表示部３１のサイズにあわせて拡大処理し（ステップＳ１０５）、拡大処理された画面データに対応した映像信号をＴＶ３に対して出力する（ステップＳ１０７）。

アプリケーションではその実行に従って順次画面データが生成され、その際、ステップＳ１０３の通知に従って、当該端末が横向きであるときと同様に当該端末の表示部１１のサイズに対応した横向き用の画面データが生成される。そして、変換部１６１では、出力先がＴＶ３であるうちは（ステップＳ１０９でＮＯ）、上記ステップＳ１０５，Ｓ１０７の処理を繰り返し、アプリケーションで生成された当該端末の表示部１１のサイズに対応した画面データをＴＶ３の表示部３１のサイズにあわせて拡大する処理を行なう。

アプリケーションにおける画面のＴＶ３への出力が終了すると（ステップＳ１０９でＹＥＳ）、システム制御部１０３は、当該アプリケーションの実行が継続している場合には現在の端末の向きを特定し、その結果、すなわち当該端末が縦向きであるか横向きであるかをアプリケーション処理部１０２に通知する（ステップＳ１１１）。これにより、出力先がＴＶ３から当該端末の表示部１１に切り替わったときにスムーズにアプリケーションにおいて現在の端末の向きに応じた画面データが生成され、表示部１１に表示されることになる。

本実施の形態にかかる携帯電話機１でかかる処理が行なわれることによって、フレームワーク側での処理でＴＶ３用の画面データの生成が実現される。そのため、各アプリケーションは、出力先がＴＶ３である場合に特別な処理を行なうことなく、従来の、当該端末が縦向きであったとき、横向きであったときの画面データを生成するときと同様の処理を行なう。これは、各アプリケーションでＴＶ３用の画面データを生成する場合と比較して、アプリケーションの処理を容易にすることができる。その結果、ＴＶ３用の画面の描画速度を速めることができる。特に、動画再生の際にはフレームレートを確保することができ、ＴＶ３での出力品質を向上させることができる。また、ＴＶ３用の画面を構成するためのさらなるメモリを不要とすることができるため、携帯電話機本体の小型化、軽量化に貢献し得る。

さらに、上述の図５に表わされた処理を携帯電話機１で実行させるためのプログラムを提供することもできる。このようなプログラムは、コンピュータに付属するフレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disk-Read Only Memory）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）およびメモリカードなどのコンピュータ読取り可能な記録媒体にて記録させて、プログラム製品として提供することもできる。あるいは、コンピュータに内蔵するハードディスクなどの記録媒体にて記録させて、プログラムを提供することもできる。また、ネットワークを介したダウンロードによって、プログラムを提供することもできる。

なお、本発明にかかるプログラムは、コンピュータのオペレーティングシステム（ＯＳ）の一部として提供されるプログラムモジュールのうち、必要なモジュールを所定の配列で所定のタイミングで呼出して処理を実行させるものであってもよい。その場合、プログラム自体には上記モジュールが含まれずＯＳと協働して処理が実行される。このようなモジュールを含まないプログラムも、本発明にかかるプログラムに含まれ得る。

また、本発明にかかるプログラムは他のプログラムの一部に組込まれて提供されるものであってもよい。その場合にも、プログラム自体には上記他のプログラムに含まれるモジュールが含まれず、他のプログラムと協働して処理が実行される。このような他のプログラムに組込まれたプログラムも、本発明にかかるプログラムに含まれ得る。

提供されるプログラム製品は、ハードディスクなどのプログラム格納部にインストールされて実行される。なお、プログラム製品は、プログラム自体と、プログラムが記録された記録媒体とを含む。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

１携帯電話機、５通信回路、１０制御部、１１，３１表示部、１２入力部、１３加速度センサ、１４，１６出力部、１５，１７ＲＡＭ、１０１出力制御部、１０２アプリケーション処理部、１０３システム制御部、１６１変換部。

Claims

ディスプレイと、
本体の向きを検出するためのセンサと、
他の出力装置に対して映像信号を出力するための出力手段と、
アプリケーションを実行するためのアプリケーション処理手段と、
前記アプリケーション処理手段に前記アプリケーションでの画面の向きを通知し、前記アプリケーション処理手段で生成される画面データの出力を制御するための制御手段と、
前記画面データのサイズを変換するための変換手段とを備え、
前記アプリケーション処理手段は、前記制御手段から通知された向きに対応した、前記ディスプレイのサイズに応じた画面データを生成し、
前記制御手段は、前記アプリケーションでの画面の出力先が前記ディスプレイである場合には前記検出された本体の向きを前記アプリケーション処理手段に通知し、前記アプリケーションでの画面の出力先が前記出力手段から前記他の出力装置である場合には前記他の出力装置に対応して予め記憶している向きを前記アプリケーション処理手段に通知し、
前記変換手段は、前記アプリケーションでの画面の出力先が前記他の出力装置である場合には、前記アプリケーション処理手段で生成された前記ディスプレイのサイズに応じた画面データのサイズを前記他の出力装置の表示サイズに応じて変換する、電子機器。
前記制御手段は、
前記アプリケーションでの画面の出力先が前記ディスプレイである場合には本体の向きとして第１の向き、または前記第１の向きに直交する第２の向きを前記アプリケーション処理手段に通知し、
前記アプリケーションでの画面の出力先が前記他の出力装置である場合には、前記第１の向きと前記第２の向きとのうちの前記他の出力装置に対応して予め記憶している向きを前記アプリケーション処理手段に通知する、請求項１に記載の電子機器。
前記ディスプレイの形状は矩形であって、本体が前記第１の向きである場合に縦方向の辺の方が横方向の辺よりも長く、
前記他の出力装置の表示形状は矩形であって、横方向の辺の方が縦方向の辺よりも長く、
前記制御手段は、前記アプリケーションでの画面の出力先が前記他の出力装置である場合に、前記第２の向きを前記アプリケーション処理手段に通知する、請求項２に記載の電子機器。
前記変換手段は、前記アプリケーションでの画面の出力先が前記他の出力装置である場合に、前記アプリケーション処理手段で生成された前記ディスプレイのサイズに応じた画面データのサイズを前記他の出力装置の表示サイズに応じて拡大するための処理を行なう、請求項１〜３のいずれかに記載の電子機器。