JP2022026314A - 情報処理装置及びプログラム - Google Patents

Abstract

【課題】表示部の変形に伴う曲げ部の位置を基準に画像を表示する領域の割り当てを決定する場合に比して、画像の観察を容易にする。【解決手段】情報処理装置は、プロセッサを有し、プロセッサは、変形可能な表示部の変形に伴う曲げ部の位置を境に１つの表示面が複数の領域に分けられる場合、表示の対象である複数の画像の内容に応じて、表示面に対する画像の配置を決定する。【選択図】図４

Description

本発明は、情報処理装置及びプログラムに関する。

現在、表示面の変形が可能な表示デバイスが実用化されている。表示面が変形する場合には、表示デバイスそのものが任意の位置で変形可能な場合もあれば、変形の位置が予め用意されたヒンジの位置に制限される場合もある。

特開平６－１９６６３号公報

複数の画像を１つの表示面に表示する場合、各画像の表示に用いる領域が、曲げ部を跨がないように配置する方法がある。曲げ部には筋が視認されることがあり、筋が視認されると、多くの場合、画質の低下をまねくためである。
ただし、画像の内容によっては、筋が見えたとしても横に長い領域を割り当てた方が画像の観察が容易な場合もあれば、反対に縦に長い領域を割り当てた方が画像の観察が容易な場合もある。また、複数のページを含む画像の場合には、１つ前又は後のページに移動する方向に長い領域を割り当てる方が画像の観察が容易な場合もある。

本発明は、表示部の変形に伴う曲げ部の位置を基準に画像を表示する領域の割り当てを決定する場合に比して、画像の観察を容易にすることを目的とする。

請求項１に記載の発明は、プロセッサを有し、前記プロセッサは、変形可能な表示部の変形に伴う曲げ部の位置を境に１つの表示面が複数の領域に分けられる場合、表示の対象である複数の画像の内容に応じて、当該表示面に対する当該画像の配置を決定する、情報処理装置である。
請求項２に記載の発明は、前記プロセッサは、複数の前記画像のうち優先度が高い画像の画面比率が横長の場合、前記表示面内に横長の領域を割り当て、残りの領域に他の画像を優先度の順番に割り当てる、請求項１に記載の情報処理装置である。
請求項３に記載の発明は、前記プロセッサは、複数の前記画像のうち優先度が高い画像の画面比率が縦長の場合、前記表示面内に縦長の領域を割り当て、残りの領域に他の画像を優先度の順番に割り当てる、請求項１に記載の情報処理装置である。
請求項４に記載の発明は、前記画像の優先度は、ユーザの設定により定まる、請求項２又は３に記載の情報処理装置である。
請求項５に記載の発明は、動画像及び静止画像及び文書の優先度は、メモ及び操作子及びウィジェットの優先度よりも高く設定される、請求項２又は３に記載の情報処理装置である。
請求項６に記載の発明は、前記画像の優先度は、データ量の大きさにより定まる、請求項２又は３に記載の情報処理装置である。
請求項７に記載の発明は、前記プロセッサは、前記画像が複数のページで構成される場合、ページの移動を伴うスクロールの方向に応じ、前記表示面内における領域の割り当てを決定する、請求項１に記載の情報処理装置である。
請求項８に記載の発明は、コンピュータに、変形可能な表示部の変形に伴う曲げ部の位置を境に１つの表示面が複数の領域に分けられる場合、表示の対象である複数の画像の内容に応じて、当該表示面に対する当該画像の配置を決定させる機能を実現させるプログラムである。

請求項１記載の発明によれば、表示部の変形に伴う曲げ部の位置を基準に画像を表示する領域の割り当てを決定する場合に比して、画像の観察を容易にできる。
請求項２記載の発明によれば、優先度の高い画像の観察を容易にできる。
請求項３記載の発明によれば、優先度の高い画像の観察を容易にできる。
請求項４記載の発明によれば、ユーザの希望を優先できる。
請求項５記載の発明によれば、相対的にユーザの注目度が高い情報の観察を容易にできる。
請求項６記載の発明によれば、相対的にデータ量が多い情報の観察を容易にできる。
請求項７記載の発明によれば、スクロールの方向に応じて画像の配置を決定できる。
請求項８記載の発明によれば、表示部の変形に伴う曲げ部の位置を基準に画像を表示する領域の割り当てを決定する場合に比して、画像の観察を容易にできる。

実施の形態１で使用する携帯可能な携帯端末の外観構成の一例を説明する図である。（Ａ）は携帯端末を正面から見た図であり、（Ｂ）は携帯端末を側面から見た図である。 ディスプレイを変形する場合に生じる２つの表示領域と、その境界の位置を与える境界線を説明する図である。（Ａ）は携帯端末を正面から見た図であり、（Ｂ）は携帯端末を側面から見た図である。 実施の形態１で使用する携帯端末のハードウェア構成の一例を説明する図である。 ディスプレイに表示される画像の配置を決定する方法の一例を説明するフローチャートである。 実施の形態１で使用する設定の一例を説明する図である。 携帯端末のディスプレイを縦向きで使用する場合における画像の配置例１を説明する図である。（Ａ）は境界線を跨がない配置例を示し、(Ｂ)は境界線を跨ぐ配置を含む配置例を示す。 携帯端末のディスプレイを縦向きで使用する場合における画像の配置例２を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線を跨がないように配置する比較例を説明する図である。 携帯端末のディスプレイを縦向きで使用する場合における画像の配置例３を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線を跨がないように配置する比較例を説明する図である。 携帯端末のディスプレイを縦向きで使用する場合における画像の配置例４を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線を跨がないように配置する比較例を説明する図である。 携帯端末のディスプレイを横向きで使用する場合における画像の配置例５を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線を跨がないように配置する比較例を説明する図である。 携帯端末のディスプレイを横向きで使用する場合における画像の配置例６を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線を跨がないように配置する比較例を説明する図である。 携帯端末のディスプレイを縦向きで使用する状態から横向きで使用する状態に変化させる場合の画像の配置例７を説明する図である。（Ａ）はディスプレイを縦向きで使用する場合の画像の配置例であり、（Ｂ）はディスプレイを横向きで使用する場合の画像の配置例を説明する図である。 実施の形態２で使用する携帯端末に対する歪ゲージの設置例を説明する図である。 実施の形態２で使用する携帯端末のハードウェア構成の一例を説明する図である。 実施の形態２におけるディスプレイの変形と境界線との関係を説明する図である。（Ａ）は携帯端末をディスプレイの対角線方向の変形させた状態を示し、（Ｂ）は変形後における表示領域の設定例を示す。 実施の形態２におけるディスプレイの変形と画像の配置との関係を説明する図である。（Ａ）は携帯端末をディスプレイの対角線方向の変形させた状態を示し、（Ｂ）は縦長の画像Ａ及びＢを表示する場合の配置例であり、（Ｃ）は横長の画像Ａ及びＢを表示する場合の配置例である。 ２つのヒンジを有する携帯端末の構成例を説明する図である。（Ａ）は携帯端末を正面から見た図であり、（Ｂ）は携帯端末を側面から見た図であり、（Ｃ）は携帯端末の変形例を説明する図である。 ３つの表示領域４Ａ、４Ｂ、４Ｃに対する画像の配置例を説明する図である。（Ａ）は２つ又は３つの表示領域に跨って画像を配置する例を示し、（Ｂ）は１つの表示領域に１つの画像を配置する比較例を示す。 他の携帯端末の外観構成の一例を説明する図である。 他の携帯端末の外観構成の一例を説明する図である。（Ａ）は携帯端末を正面から見た図であり、（Ｂ）は携帯端末を側面から見た図である。

以下、図面を参照して、本発明の実施の形態を説明する。
＜実施の形態１＞
＜外観構成＞
図１は、実施の形態１で使用する携帯可能な端末（以下「携帯端末」という）１の外観構成の一例を説明する図である。（Ａ）は携帯端末１を正面から見た図であり、（Ｂ）は携帯端末１を側面から見た図である。携帯端末１は情報処理装置の一例である。
図１に示す携帯端末１は、例えばタブレット型のコンピュータやスマートフォンを想定している。もっとも、携帯端末１は、ゲーム機や電子辞書でもよい。

本実施の形態における携帯端末１の本体２は、２つの本体パネル２Ａ及び２Ｂを有している。
本体パネル２Ａ及び２Ｂの内部には、コンピュータとしての動作を可能にする不図示の部品が内蔵されている。２つの本体パネル２Ａ及び２Ｂは、ヒンジ３を介して互いに連結されている。本実施の形態で使用するヒンジ３は、携帯端末１の短辺を２分する位置に設けられている。ヒンジ３は、プラスチック、樹脂、ゴム等の変形可能な素材、可動部品で構成される連結金具等でもよい。

図１の場合、ディスプレイ４の短辺はｘ軸の方向であり、長辺はｙ軸方向である。なお、本実施の形態で使用する携帯端末１の長辺の長さＬｙは、短辺の長さＬｘの２倍以上である。
本実施の形態で使用するディスプレイ４は、ヒンジ３を中心としてＶ字形状への変形が可能である。ヒンジ３が設けられている位置は、曲げ部の位置に対応する。
本実施の形態における携帯端末１は、ディスプレイ４が設けられている面を谷側とする折り曲げ変形が可能である。このため、ディスプレイ４は、折り曲げ変形が可能な素材、例えばフィルム状のプラスチック基板に形成されている。

ディスプレイ４は、例えば有機ＥＬ（＝Electro Luminescent）ディスプレイや液晶ディスプレイで構成される。ディスプレイ４の表面（すなわち表示面）には画像その他の情報が表示される。
図２は、ディスプレイ４を変形する場合に生じる２つの表示領域４Ａ及び表示領域４Ｂと、その境界の位置を与える境界線４１を説明する図である。（Ａ）は携帯端末１を正面から見た図であり、（Ｂ）は携帯端末１を側面から見た図である。以下では、図２（Ａ）に示すように、境界線４１の向きが縦向きとなるディスプレイ４の配置において、ユーザから見て境界線４１の左に位置する表示領域の意味で「左領域４Ａ」ということがあり、反対に境界線４１の右に位置する表示領域の意味で「右領域４Ｂ」ということがある。

境界線４１は、折り筋として視認される場合もあれば、折り筋として視認されない場合もある。また、当初は折り筋として視認されないが、経年変化に伴い、折り筋として視認される場合もある。
携帯端末１は、変形前のディスプレイ４を１つの表示領域として管理するが、変形後のディスプレイ４を２つの表示領域４Ａ及び表示領域４Ｂとして管理する。
本実施の形態における表示領域４Ａと表示領域４Ｂの形状は同じある。従って、表示領域４Ａの長辺の長さは、短辺の長さの４倍以上となる。表示領域４Ｂについても同様である。

＜ハードウェア構成＞
図３は、実施の形態１で使用する携帯端末１のハードウェア構成の一例を説明する図である。
本実施の形態で使用する携帯端末１は、プログラムの実行を通じて各部を制御するプロセッサ１０１と、ディスプレイ４に表示されるソフトウェアキー（以下「ソフトキー」ともいう）に対する操作を検知する静電容量式のフィルムセンサ１０２と、ヒンジ角センサ１０３と、慣性センサ１０４と、通話や録音に使用されるマイク１０５と、音の出力に使用されるスピーカ１０６と、システムデータや内部データが記憶される内部メモリ１０７と、補助記憶装置としての外部メモリ１０８と、外部装置との通信に用いられる通信モジュール１０９等を有している。

本実施の形態の場合、内部メモリ１０７と外部メモリ１０８は、半導体メモリである。内部メモリ１０７は、ＢＩＯＳ（＝Basic Input Output System）等が記憶されたＲＯＭ（＝Read Only Memory）と、主記憶装置として用いられるＲＡＭ（＝Random Access Memory）とを有している。プロセッサ１０１と内部メモリ１０７はコンピュータを構成する。プロセッサ１０１は、ＲＡＭをプログラムの作業スペースとして使用する。外部メモリ１０８には、ファームウェアやアプリが記憶される。

フィルムセンサ１０２は、ディスプレイ４の表面に配置される。フィルムセンサ１０２は、ディスプレイ４に表示される情報の観察を妨げない特性を有し、ユーザが操作する位置を静電容量の変化により検知する。
ヒンジ角センサ１０３は、本体２がヒンジ３を中心に変形される場合における本体パネル２Ａと本体パネル２Ｂとが成す角度に関する情報を出力する。換言すると、ヒンジ角センサ１０３は、折り曲げの角度を出力する。なお、折り曲げ角度を表す情報として、ヒンジ３を構成する歯車の回転数や回転角等を出力してもよい。

慣性センサ１０４は、例えば加速度と角速度を検知する６軸センサである。慣性センサ１０４により携帯端末１の使用時の姿勢の検知が可能になる。
マイク１０５は、ユーザの音声や周囲の音を電気信号に変換するデバイスである。
スピーカ１０６は、電気信号を音に変換して出力するデバイスである。

通信モジュール１０９は、複数世代の移動通信システム、無線ＬＡＮ（＝Local Area Network）、ブルートゥース（登録商標）、ＵＳＢ（＝Universal Serial Bus）等の規格に準拠している。
移動通信システムに準拠する規格には、例えば第４世代（すなわち４Ｇ）や第５世代（すなわち５Ｇ）がある。また、無線ＬＡＮの規格には、例えばＩＥＥＥ８０２．１１の１１ａ、１１ｂ、１１ｇ、１１ｎ、１１ａｃ、１１ａｄ、１１ａｘがある。

＜複数の画像の配置の決定＞
図４は、ディスプレイ４に表示される画像の配置を決定する方法の一例を説明するフローチャートである。図４に示す処理は、プロセッサ１０１（図３参照）が実行する。なお、図中に示す記号のＳはステップを表している。
図４の場合、プロセッサ１０１は、最初に、ディスプレイ４のスペックを取得する（ステップ１）。ここでは、スペックとして、ディスプレイ４の画面サイズ、解像度、アスペクト比等の情報が取得される。アスペクト比は、画面の横の長さと縦の長さの比であり、画面比率の一例である。

次に、プロセッサ１０１は、ディスプレイ４の使用の向き、２つの表示領域４Ａ及び表示領域４Ｂのサイズ等の情報を取得する（ステップ２）。使用の向きの特定には、例えば慣性センサ１０４の出力を使用する。本実施の形態では、ディスプレイ４の長辺の向きが、ユーザから見て縦方向か横方向かが特定される。換言すると、境界線４１の向きが、ユーザから見て縦向きか横向きかが特定される。本実施の形態では、ディスプレイ４の長辺が縦向きで使用される場合を「縦長」での使用といい、ディスプレイ４の長辺が横向きで使用される場合を「横長」での使用という。

続いて、プロセッサ１０１は、起動中のアプリと各アプリにより表示される画像の内容等を取得する（ステップ３）。ここでのアプリは、ディスプレイ４への画像の表示を伴うアプリに限定される。従って、バックグラウンドで実行中のアプリは無視される。
画像の内容には、画像の種類、アスペクト比、複数ページの有無、スクロールの有無等がある。これらの情報は、例えばアプリから取得する。本実施の形態の場合、画像の種類は、動画像、静止画像、文書、画像の操作子、メモ、ガジェット等により区分される。ここでの動画像、静止画像、文書、画像の操作子、メモ、ガジェット等は、画像の一例である。
本実施の形態では、横の長さが縦の長さよりも長い画像を横長の画像又はアスペクト比が横長といい、縦の長さが横の長さよりも長い画像を縦長の画像又はアスペクト比が縦長という。

動画像には、例えばテレビ画像やビデオ画像がある。なお、時間の経過に伴って表示の内容が変化するアイコンも動画像に含まれる。ただし、本実施の形態では、アイコンを、動画像とは別の種類として扱う。アイコンは、特定のアプリの起動や特定の画面等の呼び出しに用いられる。
静止画像には、例えば写真や地図、案内板、標識、アイコンがある。ここでのアイコンは、時間の経過に伴って表示の内容が変化しないアイコンを意味する。
文書には、例えばオフィスソフトで作成される画像、スキャナにより光学的に読み取った画像、Ｅメール、ファックス画像、ウェブ画像がある。

操作子には、例えば動画像や静止画像等に対する動作の指示に用いるソフトキーやスクロールバーがある。操作子には、例えば再生、停止、ページ送り、スクロールの指示に用いる画像がある。本実施の形態における操作子は、動画像や静止画像に従たる画像である。このため、操作子は、基本的に制御の対象である動画像や静止画像の周辺に配置される。
メモには、例えばタスク等のリスト、覚え書き、ノート、付箋、メモ帳がある。本実施の形態の場合、メモは、文書に対して入力や表示が簡略化された又は制限されているアプリに対応する。
ウィジェットには、例えばアプリの起動に用いるアイコンや情報の表示に用いるインターフェースをいう。ウィジェットは、特定の目的に特化したアプリに対応する。

次に、プロセッサ１０１は、取得された内容等に関する設定があるか否かを判定する（ステップ４）。
図５は、実施の形態１で使用する設定の一例を説明する図である。図５に示す設定は、例えば外部メモリ１０８に記憶されている。
図５に示す設定の場合、各画像は、種類、アスペクト比、複数ページの有無、スクロールの有無、優先度の情報で構成される。

本実施の形態の場合、アスペクト比は、アプリにより指定される。もっとも、表示のサイズは、配置された領域に応じて変化する。また、図５の場合、画像のアスペクト比が横長か縦長かで区分しているが、４：３や１６：９などの具体的な数値で特定してもよい。なお、画像の操作子であるソフトキーの形状や配列等は様々であるので、図５においては、アスペクト比の区分を記載していない。メモやウィジェットについても同様である。

複数ページは、画像がページ形式で管理される場合に画像が複数のページ画像で構成されることを意味する。例えばオフィスソフトで作成されるテキスト文書が代表例である。もっとも、複数ページであっても、１つの領域内に複数のページを割り付けて表示するレイアウトの場合で、１つの領域内に全てのページが割り付けられるときは、スクロールは不要である。
なお、単一ページの場合でも、画像の全てが領域内に収まらないときは、スクロールが必要になるが、ここでの設定では考慮しない。

優先度は、対応する画像を配置する表示領域を決定する順番を与える。本実施の形態の場合、数字の「１」が最も優先されることを意味し、次は数字の「２」であり、その次が数字の「３」である。
従って、表示の対象である画像が複数ある場合、優先度が「１」の画像を配置する領域は、優先度が「２」や「３」の画像よりも先に決定される。なお、優先度が同じ画像の間では、予め定めた規則に従って先に領域を決定する画像が特定される。例えば動画像が静止画像よりも優先される。また例えばデータ量の大きい画像が、データ量の小さい画像よりも優先される。

図４の説明に戻る。
取得された内容等に関する設定がある場合、プロセッサ１０１は、ステップ４で肯定結果を得る。この場合、プロセッサ１０１は、表示する各画像の優先度を取得する（ステップ５）。次に、プロセッサ１０１は、優先度に応じて各画像の配置を決定して表示する（ステップ６）。
一方、取得された内容等に関する設定が存在しない場合、プロセッサ１０１は、ステップ４で否定結果を得る。この場合、プロセッサ１０１は、１つのアプリを１つの表示領域に順番に配置して表示する（ステップ７）。割り当てる順番は、例えばアプリが起動された順番により決定する。

このように、プロセッサ１０１は、初期の配置を決定して表示する。一方で、プロセッサ１０１が決定した配置を変更したい場合がある。
そこで、プロセッサ１０１は、ステップ６又はステップ７の実行後、画像の配置に対する変更の希望があるか否かを判定する（ステップ８）。
ステップ８で肯定結果が得られた場合、プロセッサ１０１は、ユーザの指示に応じて配置を変更し、変更後の配置を登録する（ステップ９）。ユーザが登録した配置の情報がある場合、プロセッサ１０１は、ステップ５及び６の配置の決定の際に、ユーザが登録した配置を優先する。
ステップ８で否定結果が得られた場合、プロセッサ１０１は、画像の配置を決定する処理を終了する。

＜複数画像の配置例＞
以下では、図６～図１２を用いて画像の配置例を説明する。
＜配置例１＞
図６は、携帯端末１のディスプレイ４を縦向きで使用する場合における画像の配置例１を説明する図である。（Ａ）は境界線４１を跨がない配置例を示し、(Ｂ)は境界線４１を跨ぐ配置を含む配置例を示す。
図６（Ａ）の場合、左領域４Ａには画像Ａが配置され、右領域４Ｂには画像Ｂと画像Ｃが上下に配置されている。
一方、図６（Ｂ）の場合、左領域４Ａと右領域４Ｂを跨ぐように画像Ａが配置され、左領域４Ａの下段に画像Ｂが、右領域４Ｂの下段に画像Ｃが配置されている。

図６の場合、各画像の面積はほぼ同じである。
ただし、画像Ａが縦長の画像の場合や縦方向にスクロールする画像の場合には、図６（Ａ）に示す配置の方がユーザには視認性がよい。
一方、画像Ａが横長の画像の場合や横方向にスクロールする画像の場合には、境界線４１が筋として視認されることで画像Ａの画質を低下させてしまうが、図６（Ｂ）に示す配置の方が、アスペクト比を維持したまま画像Ａを大きく表示することが可能である。このため、画像Ａの表示には、図６（Ｂ）に示す配置の方が、ユーザにとっての視認性がよい。
このように、ユーザにとって視認性がよい画像の配置は、画像の内容に応じて定まる。

＜配置例２＞
図７は、携帯端末１のディスプレイ４を縦向きで使用する場合における画像の配置例２を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線４１を跨がないように配置する比較例を説明する図である。
図７に示す配置例は、優先度が「１」の動画像４０１と、優先度が「２」の操作子４０２とメモ４０３と、優先度が「３」のウィジェット４０４をディスプレイ４に配置する場合を想定している。

この場合、優先度が「１」の画像は、動画像４０１だけである。このため、動画像４０１の配置が最初に決定される。図７で想定する動画像４０１は横長の画像であるので、左領域４Ａと右領域４Ｂの両方を跨ぐように動画像４０１の配置が決定される。動画像４０１の配置が決まった状態が図７（Ａ）である。

優先度が「２」の画像は、操作子４０２とメモ４０３の２つである。ただし、操作子４０２の方が、優先度が「１」の動画像４０１との関連性が高いので、操作子４０２の配置が先に決定される。図７の場合、操作子４０２は、動画像４０１の再生や停止の指示に用いるソフトキーや再生中の位置を示す時間軸とで構成される。操作子４０２の配置が決まった状態が図７（Ｂ）である。図７の場合、操作子４０２は、動画像４０１の下辺に沿って配置される。

この後、同じ優先度のメモ４０３の配置が決定され、続いて、優先度が「３」のウィジェット４０４の配置が決定される。全ての画像の配置が決まった状態が図７（Ｃ）である。
参考までに、比較例を図７（Ｄ）に示す。図７（Ｄ）は、アプリ毎に配置する領域を決定する場合を採用する場合の配置例である。図７（Ｄ）は、動画像４０１のアスペクト比を維持する場合の配置である。この場合、動画像４０１は、左領域４Ａに配置されるので、動画像４０１の表示上のサイズは、図７（Ａ）の配置に比して格段に小さくなり、視認性が低下してしまう。この視認性の低下の影響は、境界線４１が筋として視認される以上に大きい。

＜配置例３＞
図８は、携帯端末１のディスプレイ４を縦向きで使用する場合における画像の配置例３を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線４１を跨がないように配置する比較例を説明する図である。
図８に示す配置例は、優先度が「１」の文書４１１と、優先度が「２」の操作子４１２とメモ４１３をディスプレイ４に配置する場合を想定している。

この場合、優先度が「１」の画像は、文書４１１だけである。このため、文書４１１の配置が最初に決定される。図８で想定する文書４１１は、２ページが左右に配置される横長の画像であるので、左領域４Ａと右領域４Ｂの両方を跨ぐように文書４１１の配置が決定される。文書４１１の配置が決まった状態が図８（Ａ）である。

優先度が「２」の画像は、操作子４１２とメモ４１３の２つである。ただし、操作子４１２の方が、優先度が「１」の文書４１１との関連性が高いので、操作子４１２の配置が先に決定される。図８の場合、操作子４１２は、文書４１１のページ送りの指示に用いるソフトキーや全ページに対する位置を示すスライダとで構成される。操作子４１２の配置が決まった状態が図８（Ｂ）である。

この後、同じ優先度のメモ４０３の配置が決定される。全ての画像の配置が決まった状態が図８（Ｃ）である。
参考までに、比較例を図８（Ｄ）に示す。図８（Ｄ）は、アプリ毎に配置する領域を決定する場合を採用する場合の配置例である。図８（Ｄ）は、文書４１１のアスペクト比を維持する場合の配置である。この場合、文書４１１は、左領域４Ａに配置されるので、文書４１１の表示上のサイズは、図８（Ａ）の配置に比して格段に小さくなり、視認性が低下してしまう。この視認性の低下の影響は、境界線４１が筋として視認される以上に大きい。

＜配置例４＞
図９は、携帯端末１のディスプレイ４を縦向きで使用する場合における画像の配置例４を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線４１を跨がないように配置する比較例を説明する図である。
図９に示す配置例は、優先度が「１」の静止画像４２１及び４２２と、優先度が「２」のメモ４２３と、優先度が「３」のウィジェット４２４をディスプレイ４に配置する場合を想定している。

図９の場合、優先度が「１」の画像は、静止画像４２１及び静止画像４２２の２つである。このため、静止画像４２１と静止画像４２２の間で最初に配置する画像が決定される。図９では、表示される画像のサイズが大きい静止画像４２１の配置が最初に決定される。例外もあるが、一般には、サイズが大きいとデータ量も大きい。
図９で想定する静止画像４２１は横長の画像であるので、左領域４Ａと右領域４Ｂの両方を跨ぐように静止画像４２１の配置が決定される。静止画像４２１の配置が決まった状態が図９（Ａ）である。

次に、優先度が同じ「１」の静止画像４２２の配置が決定される。静止画像４２２も横長の画像であるが、アプリが指定する画像のサイズは、静止画像４２１よりも小さい。この静止画像４２２は、空き領域に配置される。なお、横長である静止画像４２２も、左領域４Ａと右領域４Ｂの両方を跨ぐように配置が決定される。静止画像４２２の配置が決まった状態が図９（Ｂ）である。
次に高い優先度は「２」である。優先度が「２」の画像はメモ４２３である。メモ４２３は、空き領域である領域４Ｂの下段に配置される。その後、優先度が「３」の画像であるウィジェット４２４の配置が最後まで残った空き領域に配置される。メモ４２３とウィジェット４２４の配置が決まった状態が図９（Ｃ）である。

参考までに、比較例を図９（Ｄ）に示す。図９（Ｄ）は、アプリ毎に配置する領域を決定する場合を採用する場合の配置例である。図９（Ｄ）は、静止画像４２１と静止画像４２２のアスペクト比を維持する場合の配置である。この場合、静止画像４２１は左領域４Ａに配置され、静止画像４２２は右領域４Ｂに配置される。横幅が領域４Ａ及び４Ｂの幅に制限されるので、静止画像４２１と静止画像４２２の表示上のサイズは、図９（Ａ）の配置に比して格段に小さくなり、視認性が低下してしまう。この視認性の低下の影響は、境界線４１が筋として視認される以上に大きい。

＜配置例５＞
図１０は、携帯端末１のディスプレイ４を横向きで使用する場合における画像の配置例５を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線４１を跨がないように配置する比較例を説明する図である。
図１０に示す配置例は、優先度が「１」の文書４３１と、優先度が「２」の操作子４３２とメモ４３３と、優先度が「３」のウィジェット４３４をディスプレイ４に配置する場合を想定している。なお、図１０の場合、境界線４１は横向きとなる。

図１０の場合、優先度が「１」の画像は、縦書きの文書４３１だけである。このため、文書４３１の配置が最初に決定される。図１０で想定する文書４３１は縦書きの画像であるので、縦方向のサイズが長くなるように、左領域４Ａと右領域４Ｂの両方を跨ぐように文書４３１の配置が決定される。文書４３１の配置が決まった状態が図１０（Ａ）である。

次に、優先度が「２」の画像は、操作子４３２とメモ４３３の２つである。ただし、操作子４３２の方が、優先度が「１」の文書４３１との関連性が高いので、操作子４３２の配置が先に決定される。図１０の場合、操作子４３２は、文書４３１の表示位置を指定するスクロールで構成される。操作子４３２の配置が決まった状態が図１０（Ｂ）である。
次に、同じ優先度のメモ４３３の配置が決定され、続いて、優先度が「３」のウィジェット４３４の配置が決定される。メモ４３３とウィジェット４３４の配置が決まった状態が図１０（Ｃ）である。

参考までに、比較例を図１０（Ｄ）に示す。図１０（Ｄ）は、アプリ毎に配置する領域を決定する場合を採用する場合の配置例である。図１０（Ｄ）は、文書４３１の配置が境界線４１を超えないように決定する場合である。この場合、文書４３１は右領域４Ｂに配置され、メモ４３３は左領域４Ａに配置される。縦方向の幅が右領域４Ｂの幅に制限されるので、文書４３１の表示上の縦方向の幅は、図１０（Ａ）の配置に比して格段に狭くなり、視認性が低下してしまう。この視認性の低下の影響は、境界線４１が筋として視認される以上に大きい。

＜配置例６＞
図１１は、携帯端末１のディスプレイ４を横向きで使用する場合における画像の配置例６を説明する図である。（Ａ）～（Ｃ）は画像の配置が決定される過程を説明する図であり、（Ｄ）は各画像が境界線４１を跨がないように配置する比較例を説明する図である。
図１１に示す配置例は、優先度が「１」の文書４４１と、優先度が「２」の操作子４４２とメモ４４３と、優先度が「３」のウィジェット４４４をディスプレイ４に配置する場合を想定している。なお、図１１の場合も、境界線４１は横向きとなる。

図１１の場合、優先度が「１」の画像は、横書きの文書４４１だけである。このため、文書４４１の配置が最初に決定される。図１１の場合、文書４４１のスクロールの方向は縦方向である。このため、文書４４１は、縦方向のサイズが長くなるように、左領域４Ａと右領域４Ｂの両方を跨ぐように配置が決定される。文書４４１の配置が決まった状態が図１１（Ａ）である。図１１では、文書４４１のアスペクト比が維持されている。

次に、優先度が「２」の画像は、操作子４４２とメモ４４３の２つである。ただし、操作子４４２の方が、優先度が「１」の文書４４１との関連性が高いので、操作子４４２の配置が先に決定される。図１１の場合、操作子４４２は、文書４４１の表示位置を指定するスクロールで構成される。操作子４４２の配置が決まった状態が図１１（Ｂ）である。図１１では、文書４４１は、表示の位置が縦方向にスクロールされる。
次に、同じ優先度のメモ４４３の配置が決定され、続いて、優先度が「３」のウィジェット４４４の配置が決定される。メモ４４３とウィジェット４４４の配置が決まった状態が図１１（Ｃ）である。

参考までに、比較例を図１１（Ｄ）に示す。図１１（Ｄ）は、アプリ毎に配置する領域を決定する場合を採用する場合の配置例である。図１１（Ｄ）は、文書４４１の配置が境界線４１を超えないように決定する場合である。この場合、文書４４１は、アスペクト比を維持した状態で左領域４Ａに配置され、メモ４４３は右領域４Ｂに配置される。縦方向の幅が領域４Ａの幅に制限されるので、文書４４１の表示上の縦方向の幅は、図１１（Ａ）の配置に比して格段に狭くなり、視認性が低下してしまう。この視認性の低下の影響は、境界線４１が筋として視認される以上に大きい。

＜配置例７＞
図１２は、携帯端末１のディスプレイ４を縦向きで使用する状態から横向きで使用する状態に変化させる場合の画像の配置例７を説明する図である。（Ａ）はディスプレイ４を縦向きで使用する場合の画像の配置例であり、（Ｂ）はディスプレイ４を横向きで使用する場合の画像の配置例を説明する図である。
図１２に示す配置例は、優先度が「１」の画像が画像４５１と画像４５２の２つであり、優先度が「２」の画像が画像４５３の場合を想定している。
本実施の形態の場合には、携帯端末１の使用の向きが縦向きでも横向きでも、優先度の順番に配置が決定され、相対的に順位が低い優先度の画像が空き領域に配置される。このため、使用の向きが変更されても、画像４５１と画像４５２の画像は、境界線４１を跨いで配置されるので、画像のサイズが大きく変化することはなく、視認性が確保される。

＜実施の形態２＞
図１３は、実施の形態２で使用する携帯端末１Ａに対する歪ゲージ５の設置例を説明する図である。
図１３に示す図は、携帯端末１Ａを正面から見た図である。
本実施の形態で使用する携帯端末１Ａの本体２とディスプレイ４は、柔軟性が高い基板で構成され、任意の位置で表方向にも裏方向にも折り曲げ変形が可能である。すなわち、本実施の形態で使用する携帯端末１Ａは、実施の形態１で説明した携帯端末１（図１参照）とは異なり、表示面を任意の場所で変形することが可能である。このため、本実施の形態で使用する携帯端末１Ａにはヒンジ３が設けられていない。

代わりに、ディスプレイ４の全面に歪ゲージ５が配置される。図１３の場合、複数の歪ゲージ５は、ディスプレイ４の全面に等間隔に配置されている。もっとも、歪ゲージ５は、ディスプレイ４の外周である額縁の領域にのみ配置してもよい。本実施の形態の場合、複数の歪ゲージ５から出力される歪の大きさの分布に基づいてディスプレイ４の折り曲げ変形後の形状が推定される。
歪ゲージ５は、ディスプレイ４の下層と本体２との間に設けられる。本実施の形態では、折り曲げ変形に伴う境界線４１の位置の特定に歪ゲージ５を使用する。
本実施の形態における携帯端末１Ａも、情報処理装置の一例である。

図１４は、実施の形態２で使用する携帯端末１Ａのハードウェア構成の一例を説明する図である。図１４には、図３との対応部分に対応する符号を付して示している。
本実施の形態で使用する携帯端末１Ａには、ヒンジ角センサ１０３（図３参照）に代えて歪ゲージ５が設けられている。
歪ゲージ５は、薄い絶縁体上にジグザグ形状にレイアウトされた金属の抵抗体が取り付けられた構造を有し、抵抗体の変形に伴う電気抵抗の変化を測定し、これを被測定物の歪量に換算する。歪ゲージ５は、力学的センサの一例である。

本実施の形態におけるプロセッサ１０１は、複数の歪ゲージ５から出力される歪の大きさ等の分布からディスプレイ４の折り曲げ変形後の形状を推定し、境界線４１（図２参照）の位置を特定する。境界線４１の位置が特定されると、プロセッサ１０１は、境界線４１を挟んで隣り合う領域を、前述した実施の形態における表示領域４Ａ及び表示領域４Ｂとして特定する。
図１５は、実施の形態２におけるディスプレイ４の変形と境界線４１との関係を説明する図である。（Ａ）は携帯端末１Ａをディスプレイ４の対角線方向の変形させた状態を示し、（Ｂ）は変形後における表示領域４Ａ及び表示領域４Ｂの設定例を示す。
図１５に示す変形の場合、境界線４１は、ディスプレイ４の対角線方向に形成される。この結果、表示領域４Ａ及び表示領域４Ｂは三角形になる。

図１６は、実施の形態２におけるディスプレイ４の変形と画像の配置との関係を説明する図である。（Ａ）は携帯端末１Ａをディスプレイ４の対角線方向の変形させた状態を示し、（Ｂ）は縦長の画像Ａ及びＢを表示する場合の配置例であり、（Ｃ）は横長の画像Ａ及びＢを表示する場合の配置例である。図１６には、図１５との対応部分に対応する符号を付して示している。
本実施の形態で使用する携帯端末１Ａの場合、ディスプレイ４に形成される境界線４１の位置は固定されておらず、曲げ位置に応じて変化する。このため、表示領域４Ａと表示領域４Ｂの形状も様々である。仮に、表示領域４Ａと表示領域４Ｂの形状に合わせて画像を表示すると、画像のアスペクト比が変化し、画像の視認性が低下する。また、画像のサイズが小さくなる可能性がある。

しかし、本実施の形態の場合には、表示領域４Ａ及び表示領域４Ｂを跨いで画像を配置することが可能である。このため、画像Ａ及び画像Ｂが縦長であれば、図１６（Ｂ）に示すように、縦長のアスペクト比のまま、ディスプレイ４のサイズを活用した表示が可能になる。また、画像Ａ及び画像Ｂが横長であれば、図１６（Ｃ）に示すように、横長のアスペクト比のまま、ディスプレイ４のサイズを活用した表示が可能になる。

＜実施の形態３＞
前述の実施の形態では、境界線４１（図２参照）が１箇所の場合について説明したが、境界線４１は２つ以上でもよい。
図１７は、２つのヒンジ３を有する携帯端末１Ｂの構成例を説明する図である。（Ａ）は携帯端末１Ｂを正面から見た図であり、（Ｂ）は携帯端末１Ｂを側面から見た図であり、（Ｃ）は携帯端末１Ｂの変形例を説明する図である。
なお、本実施の形態で使用するヒンジ３は、実施の形態１とは異なり、ディスプレイ４が配置されている側の面が、尾根側にも谷側にも変形が可能である。
図１７に示す携帯端末１Ｂは、３つの本体パネル２Ａ、２Ｂ、２Ｃにより構成され、それぞれは２つのヒンジ３により連結されている。携帯端末１Ｂを変形すると、２つの境界線４１（図２参照）が現れ、３つの表示領域４Ａ、４Ｂ、４Ｃに分割される。

図１８は、３つの表示領域４Ａ、４Ｂ、４Ｃに対する画像の配置例を説明する図である。（Ａ）は２つ又は３つの表示領域に跨って画像を配置する例を示し、（Ｂ）は１つの表示領域に１つの画像を配置する比較例を示す。
本実施の形態の場合、画像Ａ、画像Ｂ、文書はいずれも優先度が「１」である。ただし、画像のサイズやデータ量の観点から、画像Ｂ、画像Ａ、文書の順番に配置が決定される。このため、サイズやデータ量が最も大きい画像Ｂが３つの表示領域４Ａ、４Ｂ、４Ｃを跨るように、ディスプレイ４の下段に配置されている。また、サイズやデータ量が２番目に大きい画像Ａは、２つの表示領域４Ａ、４Ｂを跨るように、ディスプレイ４の上段に配置されている。文書は、空き領域であるディスプレイ４の上段右端に配置されている。
なお、比較例の場合は、横幅が１つの表示領域に制限されながらもアスペクト比を維持するため、画像Ａと画像Ｂの表示のサイズが小さくなり視認性が低くなる。

＜他の実施の形態＞
以上、本発明の実施の形態について説明したが、本発明の技術的範囲は前述した実施の形態に記載の範囲に限定されない。前述した実施の形態に、種々の変更又は改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。

（１）前述の実施の形態では、携帯端末１（図１参照）等のディスプレイ４（図１参照）が常に露出している場合について説明した。しかし、ディスプレイ４は、使用する場合に限り引き出され、使用しない場合には収容される構造でもよい。
図１９は、他の携帯端末１Ｃの外観構成の一例を説明する図である。携帯端末１Ｃも情報処理装置の一例である。

図１９に示す携帯端末１Ｃは、変形可能な表示面を有する１枚のディスプレイ４が設けられているフィルム状の本体２を巻き取った状態で収容する装置本体２０Ａと、本体２の他端側に取り付けられる引き出し部材２０Ｂとを有している。
図１９の場合、装置本体２０Ａから引き出されたディスプレイ４は、変形により波打った形状を有している。このため、３つの境界線４１が設けられている。この場合、３つの境界線４１により区分される４つの表示領域４Ａ～４Ｄのうちの２つ又は４つを跨いで画像を配置することが可能になる。なお、図１９では、境界線４１が３つ形成されているが、境界線４１が形成されない場合もあれば、境界線４１が１つだけ形成される場合、境界線４１が２つ形成される場合、４つ以上形成される場合も起こりうる。

（２）前述の実施の形態１においては、携帯端末１（図１参照）等に変形可能な１枚のディスプレイ４（図１参照）を有する場合について説明した。しかし、ディスプレイ４は複数枚でもよい。
図２０は、他の携帯端末１Ｄの外観構成の一例を説明する図である。（Ａ）は携帯端末１Ｄを正面から見た図であり、（Ｂ）は携帯端末１Ｄを側面から見た図である。図２０には、図１との対応する部分に対応する符号を付して示している。携帯端末１Ｄも情報処理装置の一例である。

図２０に示す携帯端末１Ｄは、２枚のディスプレイ４により表示面が構成される。これら２枚のディスプレイ４は、それぞれ独立した表示領域を構成する。各アプリの画像は１つの表示領域にのみ表示してもよいし、２枚のディスプレイ４に跨いで表示してもよい。
携帯端末１Ｄの場合、本体パネル２Ａと本体パネル２Ｂは、ヒンジ３Ａに対して両方向に回転が可能に取り付けられている。ヒンジ３Ａには、本体パネル２Ａを両方向に回転が自在に取り付ける回転軸と、本体パネル２Ｂを両方向に回転が自在に取り付ける回転軸とが内蔵されている。このため、ディスプレイ４を内側に折り畳むことも、ディスプレイ４を外側に折り畳むことも可能である。
本実施の形態で使用する本体パネル２Ａ、本体パネル２Ｂ、ディスプレイ４は、いずれも剛性が高く、それ自体は変形しない。

（３）前述の実施の形態におけるディスプレイ４の長辺の長さＬｙは、短辺の長さＬｘの２倍以上である場合について説明したが、長辺の長さＬｙが短辺の長さＬｘの２倍以下でも構わない。
（４）前述の実施の形態では、ディスプレイ４の形状として矩形形状を想定しているが、長方形の４つの角のうち少なくとも１つを面取り加工した形状や丸めた加工した形状でもよい。この形状の例には、長方形の４つの角の全てを丸め加工した形状がある。
また、ディスプレイ４の形状は、矩形形状に限定されず、例えば多角形の形状や閉曲線の形状でもよい。多角形の形状は、正多角形に限らず、凸多角形でもよい。また、閉曲線の形状は、楕円形状や円形状、ハート形状でもよい。

（５）前述した各実施の形態におけるプロセッサは、広義的な意味でのプロセッサを指し、汎用的なプロセッサ（例えばＣＰＵ：Central Processing Unit）の他、専用的なプロセッサ（例えばＧＰＵ（＝Graphical Processing Unit）、ＡＳＩＣ（＝Application Specific Integrated Circuit）、ＦＰＧＡ（＝Field Programmable Gate Array）、プログラム論理デバイス等）を含む。
また、前述した各実施の形態におけるプロセッサの動作は、１つのプロセッサが単独で実行してもよいが、物理的に離れた位置に存在する複数のプロセッサが協働して実行してもよい。また、プロセッサにおける各動作の実行の順序は、前述した各実施の形態に記載した順序のみに限定されるものでなく、個別に変更してもよい。

１、１Ａ、１Ｂ、１Ｃ、１Ｄ…携帯端末、２…本体、２Ａ、２Ｂ、２Ｃ…本体パネル、３、３Ａ…ヒンジ、４…ディスプレイ、４Ａ、４Ｂ、４Ｃ、４Ｄ…表示領域、５…歪ゲージ、４１…境界線、２０Ａ…装置本体、２０Ｂ…引き出し部材、１０１…プロセッサ、１０２…フィルムセンサ、１０３…ヒンジ角センサ、１０４…慣性センサ、１０５…マイク、１０６…スピーカ、１０７…内部メモリ、１０８…外部メモリ、１０９…通信モジュール

Claims (8)

1. プロセッサを有し、
   前記プロセッサは、
   変形可能な表示部の変形に伴う曲げ部の位置を境に１つの表示面が複数の領域に分けられる場合、表示の対象である複数の画像の内容に応じて、当該表示面に対する当該画像の配置を決定する、
   情報処理装置。
2. 前記プロセッサは、
   複数の前記画像のうち優先度が高い画像の画面比率が横長の場合、前記表示面内に横長の領域を割り当て、残りの領域に他の画像を優先度の順番に割り当てる、
   請求項１に記載の情報処理装置。
3. 前記プロセッサは、
   複数の前記画像のうち優先度が高い画像の画面比率が縦長の場合、前記表示面内に縦長の領域を割り当て、残りの領域に他の画像を優先度の順番に割り当てる、
   請求項１に記載の情報処理装置。
4. 前記画像の優先度は、ユーザの設定により定まる、請求項２又は３に記載の情報処理装置。
5. 動画像及び静止画像及び文書の優先度は、メモ及び操作子及びウィジェットの優先度よりも高く設定される、請求項２又は３に記載の情報処理装置。
6. 前記画像の優先度は、データ量の大きさにより定まる、請求項２又は３に記載の情報処理装置。
7. 前記プロセッサは、
   前記画像が複数のページで構成される場合、ページの移動を伴うスクロールの方向に応じ、前記表示面内における領域の割り当てを決定する、請求項１に記載の情報処理装置。
8. コンピュータに、
   変形可能な表示部の変形に伴う曲げ部の位置を境に１つの表示面が複数の領域に分けられる場合、表示の対象である複数の画像の内容に応じて、当該表示面に対する当該画像の配置を決定させる機能
   を実現させるプログラム。

Images