JPWO2014010458A1 - 操作処理装置および操作処理方法、並びにプログラム - Google Patents

Abstract

本開示は、より使い易いユーザインタフェースを提供することができるようにする操作処理装置および操作処理方法、並びにプログラムに関する。タッチ操作端末は、操作が入力される入力部、および、画面を表示する表示部がヒンジ部により開閉可能に接続されて構成される。そして、入力部に対して行われるスワイプ操作により示された方向を示す入力方向が取得されると、入力部と表示部との相対的な位置関係が検出されて、その相対的な位置関係に従って、入力方向に対する出力方向の向きが決定され、その出力方向に従って表示部の画面の表示がスクロールされる。本技術は、例えば、タッチパネルを備える端末に適用できる。

Description

本開示は、情報処理装置および情報処理方法、並びにプログラムに関し、特に、より使い易いユーザインタフェースを提供することができるようにした情報処理装置および情報処理方法、並びにプログラムに関する。

従来、ノート型のパーソナルコンピュータのように、液晶パネルなどの表示部およびタッチセンサなどの入力部を有する装置が普及している。通常、ノート型のパーソナルコンピュータは、表示部と入力部とのなす相対角度は０°から１８０°までの範囲（実際の使用時には１２０°など３０°から１８０°までの範囲）となるように構成されている。そのため、ユーザが入力部に対してタッチ操作を行う場合、入力部に対する入力方向と、表示部において表示が変化する出力方向とが同方向となるユーザインタフェースを採用することで、ユーザは違和感なく操作を行うことができる。

ところで、本願出願人は、表示部と入力部とのなす相対角度が１８０°以上とすることが可能なヒンジ部を備えた折畳型の電子機器を提案している（例えば、特許文献１参照）。

このような電子機器において、入力方向と出力方向とが同方向となるユーザインタフェースを用いた場合、相対位置が１８０°から３６０°までの範囲（特に、３６０°近辺）では、ユーザが、入力方向に対する出力方向が逆方向であると感じることがある。なお、表示部および入力部の相対角度が３６０°で固定されている装置、即ち、表示部の背面側に入力部が存在するような装置では、入力方向と出力方向とが同方向となるユーザインタフェースが用いられている。

特開２０１２−０５７６６２号公報

上述したように、単に、入力方向と出力方向とが同方向となるユーザインタフェースを用いた場合、ユーザが、入力方向に対する出力方向が逆方向であると感じてしまい、違和感なく操作を行うことが難しいことがあった。従って、このような違和感のないように操作を行うことが可能な、より使い易いユーザインタフェースが求められている。

本開示は、このような状況に鑑みてなされたものであり、より使い易いユーザインタフェースを提供することができるようにするものである。

本開示の一側面の操作処理装置は、操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報を取得する入力方向取得部と、画像を表示する表示部に対して、前記入力部に対する操作に応答して前記表示部の画像を変化させる方向である出力方向を指示する出力方向指示部と、前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に対する前記出力方向の向きを決定する決定部とを備える。

本開示の一側面の操作処理方法またはプログラムは、操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報を取得し、画像を表示する表示部に対して、前記入力部に対する操作に応答して前記表示部の画像を変化させる方向である出力方向を指示し、前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に対する前記出力方向の向きを決定するステップを含む。

本開示の一側面においては、操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報が取得され、画像を表示する表示部に対して、入力部に対する操作に応答して表示部の画像の表示を変化させる方向である出力方向が指示される。そして、入力部と表示部との相対的な位置関係に従って、入力方向に対する出力方向の向きが決定される。

本開示の一側面によれば、より使い易いユーザインタフェースを提供することができる。

本技術を適用したタッチ操作端末の第１の実施の形態の構成例を示す斜視図である。 ヒンジ部を有するタッチ操作端末における水平方向および垂直方向を説明する図である。 入力方向と出力方向との関係を説明する図である。 タッチ操作端末の操作処理部の機能的な構成例を示すブロック図である。 操作処理を説明するフローチャートである。 ユーザとの位置関係に従ったスクロール速度の調整について説明する図である。 本技術を適用したタッチ操作端末の第２の実施の形態の構成例を示す斜視図である。 タッチ操作端末が折り曲げられた状態を示す図である。 タッチ操作端末が折り曲げられることにより表示されるメニュー画面を示す図である。 本技術を適用したコンピュータの一実施の形態の構成例を示すブロック図である。

以下、本技術を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。

図１は、本技術を適用した情報処理装置の第１の実施の形態の構成例を示す斜視図である。

図１において、タッチ操作端末１１は、第１の筐体１２、第２の筐体１３、ヒンジ部１４、入力部１５、および表示部１６を備えて構成されている。

第１の筐体１２の一方の側面には入力部１５が配置されており、第２の筐体１３の一方の側面には表示部１６が配置されている。そして、第１の筐体１２および第２の筐体１３は、閉じられた状態で入力部１５および表示部１６が向かい合うように、ヒンジ部１４を介して開閉可能に接続されており、ヒンジ部１４を中心として相対的に位置関係を変化させることができる。

例えば、タッチ操作端末１１は、第１の筐体１２の入力部１５の表面と、第２の筐体１３の表示部１６の表面とのなす相対角度θが、ヒンジ部１４を中心として、０°から３６０°までの範囲で変化することができるように構成されている。即ち、ヒンジ部１４は、入力部１５および表示部１６が互いに向かい合う角度（０°）から、入力部１５および表示部１６が互いに反対側を向く角度（３６０°）までの範囲で、第１の筐体１２および第２の筐体１３を開閉可能に接続する。これにより、タッチ操作端末１１は、図１において相対角度θ’で示されるように、第１の筐体１２の入力部１５の表面と、第２の筐体１３の表示部１６の表面とが１８０°以上に開くことが可能となるように構成されている。

入力部１５は、例えば、ユーザの指が表面にかける圧力の変化や、ユーザの指が表面に接触（または近接）することによる静電気の変化などを利用して、ユーザの指の動きを検知する。例えば、入力部１５は、ユーザが入力部１５の表面に指をタッチしたまま任意の方向へ移動させて方向を指示する操作（以下適宜、スワイプ操作と称する）を行うと、ユーザの指の動きを検知し、指が移動する方向に従った入力方向を示す操作情報を取得する。

表示部１６は、例えば、液晶パネルや有機ＥＬ（Electro Luminescence）パネルなどを有して構成され、絵や写真、図形、文字、GUI（Graphical User Interface）などにより表示内容が構成された画像である表示画面を表示する。そして、表示部１６は、入力部１５に対するユーザのスワイプ操作に応じた出力方向に沿って、例えば、表示画面をスクロールして表示したり、表示画面に表示されるポインタやカーソルなどを移動させたりして、表示画面の表示を変化させる。

このようにタッチ操作端末１１は構成されており、ユーザは、第１の筐体１２および第２の筐体１３が所望の相対角度θとなるように調整してタッチ操作端末１１を使用することができる。また、ユーザが入力部１５に対するスワイプ操作を行うと、タッチ操作端末１１では、入力部１５が取得する操作情報に基づいて、そのスワイプ操作に応答する操作処理が行われ、表示部１６の表示画面の表示が制御される。例えば、ユーザが水平方向へ指を移動させるスワイプ操作を行うと、タッチ操作端末１１では、表示部１６の表示画面が水平方向へスクロールするように操作処理が行われる。

そして、タッチ操作端末１１は、垂直方向に対するスワイプ操作における操作処理では、第１の筐体１２および第２の筐体１３の相対角度θに従って、入力方向に対する出力方向を切り替える処理を行う。

例えば、図２に示すように、ヒンジ部１４を有するタッチ操作端末１１において、ヒンジ部１４に沿った方向を水平方向とする。また、入力部１５の表面において、水平方向と直交し、かつ、入力部１５の法線方向αと直交する方向と、表示部１６の表面において、水平方向と直交し、かつ、表示部１６の法線方向βと直交する方向とを垂直方向とする。即ち、垂直方向は、図２に示すように、相対角度θが１８０°であるときは一直線となり、相対角度θが１８０°以外であるときは、相対角度θに従って屈曲するものとする。

また、タッチ操作端末１１には、垂直方向のスワイプ操作に対して、入力方向に対する出力方向を同方向として処理を行う相対角度θの所定範囲が設定されている。そして、タッチ操作端末１１は、相対角度θが所定範囲内であるか否かによって、入力方向に対する出力方向を切り替えることができる。つまり、タッチ操作端末１１は、相対角度θが所定範囲内であれば入力方向に対する出力方向を同方向とし、相対角度θが所定範囲内でなければ入力方向に対する出力方向を逆方向とする。なお、この所定範囲は、例えば、ユーザが違和感なくスワイプ操作を行うことができるかを開発段階で評価することにより予め設定される。

具体的には、タッチ操作端末１１には、所定範囲として０°から１８０°までが設定される。従って、タッチ操作端末１１は、相対角度θが０°以上で１８０°以下の範囲（０°≦θ≦１８０°）である場合には、垂直方向のスワイプ操作に対して、入力方向に対する出力方向が同方向となるように操作処理を行う。一方、タッチ操作端末１１は、相対角度θが１８０°より大きく３６０°以下の範囲（１８０°＜θ≦３６０°）である場合には、垂直方向のスワイプ操作に対して、入力方向に対する出力方向が逆方向となるように操作処理を行う。

なお、タッチ操作端末１１では、水平方向に対しては相対角度θの変化に拘らず、入力方向と出力方向とが切り替わることがない（即ち、入力方向が右方向なら、出力方向は常に右方向となる）ように操作処理を行う。また、垂直方向へのスワイプ操作とは、垂直方向に完全に一致する指の動きだけではなく、垂直方向の成分を含む斜め方向への指の動きを含むものとする。

次に、図３を参照して、入力部１５に対する入力方向と、表示部１６における出力方向との関係について説明する。

図３のＡには、相対角度θが９０°とされたタッチ操作端末１１が示されており、図３のＢには、相対角度θが１８０°とされたタッチ操作端末１１が示されている。また、図３のＣには、相対角度θが２７０°とされたタッチ操作端末１１が示されており、図３のＤには、相対角度θが３６０°とされたタッチ操作端末１１が示されている。

図３のＡに示すように、入力部１５および表示部１６の相対角度θが９０°である場合、タッチ操作端末１１は、入力方向ＩＮに対して出力方向ＯＵＴが同方向となるように操作処理を行う。また、図３のＢに示すように、入力部１５および表示部１６の相対角度θが１８０°である場合、タッチ操作端末１１は、入力方向ＩＮに対して出力方向ＯＵＴが同方向となるように操作処理を行う。

一方、図３のＣに示すように、入力部１５および表示部１６の相対角度θが２７０°である場合、タッチ操作端末１１は、入力方向ＩＮに対して出力方向ＯＵＴが逆方向となるように操作処理を行う。また、図３のＤに示すように、入力部１５および表示部１６の相対角度θが３６０°である場合、即ち、入力部１５の背面側に表示部１６が配置される場合、タッチ操作端末１１は、入力方向ＩＮに対して出力方向ＯＵＴが逆方向（ここでは、図２を参照して説明したように、相対角度θに従って垂直方向が屈曲する座標系において逆方向）となるように操作処理を行う。

このように、タッチ操作端末１１は、相対角度θが０°から１８０°までの範囲であるか否かによって、入力方向に対する出力方向を、同方向と逆方向とで切り替える操作処理を行う。

次に、図４は、タッチ操作端末１１の操作処理部の機能的な構成例を示すブロック図である。

図４に示すように、操作処理部２１は、入力方向取得部２２、相対角度検出部２３、出力方向決定部２４、および表示指示部２５を備えて構成される。なお、操作処理部２１は、具体的には、タッチ操作端末１１に内蔵されるCPU（Central Processing Unit）や、ROM（Read Only Memory）、RAM（Random Access Memory）、不揮発性メモリ（例えば、EEPROM（Electronically Erasable and Programmable Read Only Memory））などにより構成され、CPUがROMまたは不揮発性メモリに記憶されているプログラムをRAMに読み出して実行することによって各部の機能が実現される。

入力方向取得部２２は、入力部１５に接続されており、ユーザがスワイプ操作を行うと入力部１５から操作情報が供給され、その操作情報に基づいて、ユーザのスワイプ操作による入力方向を取得する。

相対角度検出部２３は、ヒンジ部１４に対して取り付けられている角度センサ（図示せず）に接続されており、第１の筐体１２および第２の筐体１３の相対角度θを検出する。

出力方向決定部２４は、入力方向取得部２２が入力方向を取得すると、相対角度検出部２３が検出した相対角度θに基づいて、入力方向に対する出力方向の向き（同方向または逆方向）を決定する。即ち、出力方向決定部２４は、相対角度θが所定範囲内であるか否かに従って、入力方向に対する出力方向の向きを切り替える処理を行う。例えば、出力方向決定部２４は、上述したように、相対角度θが所定範囲内（例えば、０°≦θ≦１８０°）である場合には、入力方向に対して出力方向を同方向にすると決定する。一方、出力方向決定部２４は、相対角度θが所定範囲内でない場合には、入力方向に対して出力方向を逆方向にすると決定する。

表示指示部２５は、表示部１６に接続されており、出力方向決定部２４により決定された出力方向で表示部１６の表示画面における表示が変化するように、表示画面の表示を指示する制御信号を表示部１６に対して供給する。従って、表示部１６では、相対角度θが所定範囲内（例えば、０°≦θ≦１８０°）であるか否かによって、例えば、表示画面がスクロールする方向が、入力方向に対して同方向および逆方向のいずれかに切り替えられる。

以上のように操作処理部２１は構成されており、相対角度検出部２３により検出された相対角度θに従って、入力方向取得部２２により取得された入力方向に対する出力方向が決定され、その出力方向となるように表示部１６に対する表示の指示が行われる。

次に、図５は、操作処理部２１が実行する操作処理を説明するフローチャートである。

例えば、入力部１５は、ユーザによるタッチ操作を検知することができる状態で待機しており、ユーザによりスワイプ操作が行われたことを検知すると処理が開始される。ステップＳ１１において、入力部１５は、ユーザによるスワイプ操作に応じて取得した操作情報を入力方向取得部２２に供給し、入力方向取得部２２は、その操作情報から入力方向を取得して出力方向決定部２４に供給する。

ステップＳ１２において、相対角度検出部２３は、ヒンジ部１４に対して取り付けられている角度センサ（図示せず）から出力される信号に基づいて、第１の筐体１２および第２の筐体１３の相対角度θを検出して出力方向決定部２４に供給する。

ステップＳ１３において、出力方向決定部２４は、ステップＳ１２で相対角度検出部２３が検出した相対角度θが、所定範囲内であるか否かを判定する。

ステップＳ１３において、相対角度θが所定範囲内であると判定された場合、処理はステップＳ１４に進み、出力方向決定部２４は、ステップＳ１１で入力方向取得部２２が取得した入力方向に対して出力方向を同方向にすると決定して表示指示部２５に通知する。

一方、ステップＳ１３において、相対角度θが所定範囲内でないと判定された場合、処理はステップＳ１５に進む。ステップＳ１５において、出力方向決定部２４は、ステップＳ１１で入力方向取得部２２が取得した入力方向に対して出力方向を逆方向にすると決定して表示指示部２５に通知する。

ステップＳ１４またはＳ１５の処理後、処理はステップＳ１６に進み、表示指示部２５は、出力方向決定部２４により決定された出力方向で表示部１６の表示画面における表示が変化するように、表示画面の表示を指示する制御信号を表示部１６に対して供給する。そして、ステップＳ１６の処理後、操作処理は終了する。

以上のように、タッチ操作端末１１は、相対角度θに従って、入力方向に対する出力方向の向きを決定して、出力方向を切り替えることにより、ユーザが操作する際に違和感のない、より使い易いユーザインタフェースを提供することができる。

なお、タッチ操作端末１１では、入力方向に対する出力方向の向きが切り替わったことをユーザに提示するようなアイコンやインジケータを表示部１６に表示してもよい。また、ヒンジ部１４の機構的に、入力方向に対する出力方向の向きが切り替わったことをユーザに感知させるようにしてもよい。

また、タッチ操作端末１１は、スワイプ操作の他、複数点のタッチを検出することによるズーム操作に対しても同様の操作処理を適用することができる。また、ヒンジ部１４以外の機械的な構造によって、入力部１５および表示部１６の相対角度θが変わるようにしてもよい。さらに、入力部１５および表示部１６のねじれを検出して操作処理を行ってもよい。

なお、入力方向および出力方向には、直線的な方向だけでなく、回転方向を適用することができる。例えば、タッチ操作端末１１は、入力方向が右回転であった場合、相対角度θが所定範囲内であるには出力方向を右回転とし、相対角度θが所定範囲内でないには出力方向を左回転とすることができる。なお、タッチ操作端末１１は、複数点のタッチを検出することにより回転方向を入力したり、１点のタッチを検出して、その１点をタッチしている指の回転を検出することにより回転方向を入力したりすることができる。

また、入力方向に対する出力方向を切り替える所定範囲の角度は１８０°に限定されるものではなく、タッチ操作端末１１で実行されるアプリケーションプログラムや、タッチ操作端末１１の構造によって適切な角度に設定することが出る。さらに、入力部１５および表示部１６を開く操作と閉じる操作とで、所定範囲の角度が異なるようにしてもよい。

さらに、タッチ操作端末１１は、入力部１５および表示部１６がヒンジ部１４を介して接続される構成の他、入力部１５および表示部１６が独立した構成を採用することができる。この場合、入力部１５および表示部１６が、それぞれ加速度センサなどを備えることにより互いの相対的な姿勢を検知して、入力方向に対する出力方向を切り替えるようにすることができる。

また、入力部１５は、タッチセンサを備えたデバイスに限定されることはなく、例えば、ボタンや、ダイヤル、ホイールなどの各種の入力デバイス、即ち、方向を指示することができる入力デバイスを採用することができる。

なお、タッチ操作端末１１では、相対角度θの大きさに従って、入力部１５に対するスワイプ操作の入力量（即ち、ユーザがタッチしたまま指を移動させた移動量）に対して、表示部１６の表示画面の表示を変化させる変化量を調整することができる。例えば、タッチ操作端末１１は、相対角度θが大きいときには、スワイプ操作の入力量に対する表示画面のスクロールの速度を増加させ、相対角度θが小さいときには、スワイプ操作の入力量に対する表示画面のスクロールの速度を低減させるように操作処理を行う。同様に、タッチ操作端末１１は、相対角度θの大きさに従って、スワイプ操作の入力量に対する表示画面においてカーソルが移動する速度を調整するように操作処理を行うことができる。

さらに、タッチ操作端末１１は、ユーザと表示部１６との位置関係に従って、表示画面のスクロールの速度を調整したり、表示画面に表示されるカーソルが移動する速度を調整したりすることができる。

図６を参照して、ユーザと表示部１６との位置関係に従って、表示部１６における表示画面のスクロールの速度を調整する処理について説明する。

図６のＡには、表示部１６に対してユーザが正面を向いて対向している状態が示されており、図６のＢには、表示部１６に対してユーザが傾いて対向している状態が示されている。

タッチ操作端末１１は、例えば、図示しない撮像装置を備えており、その撮像装置により撮像された画像からユーザの目Ｅと表示部１６との相対角度を検出することができる。そして、表示部１６に対してユーザが正面を向いて対向している状態（図６のＡ）では、ユーザの目Ｅと表示部１６との相対角度は９０°であると検出され、タッチ操作端末１１は、表示部１６の表示画面を所定のスクロール速度Ｖで、上述した出力方向へスクロールする。

一方、表示部１６に対してユーザが傾いて対向している状態（図６のＢ）では、ユーザの目Ｅと表示部１６との相対角度は角度φであると検出される。このとき、スクロール速度Ｖで表示画面をスクロールすると、ユーザから見て垂直方向にスクロールする速度はＶ×Ｓｉｎφとなる。即ち、表示部１６に対してユーザが傾いて対向していることにより、表示部１６に対してユーザが正面を向いて対向している状態におけるスクロール速度Ｖよりも、垂直方向にスクロールする速度が低下して見えることになる。

そこで、タッチ操作端末１１は、スクロール速度が低下した分を補正するために、補正後のスクロール速度Ｖ’をＶ’＝Ｖ×（１／Ｓｉｎφ）とする。これにより、ユーザから見て垂直方向にスクロールする速度がスクロール速度Ｖ（＝Ｖ×Ｓｉｎφ×（１／Ｓｉｎφ））となる。このように、タッチ操作端末１１は、表示部１６の表示画面を、スクロール速度Ｖに対して角度φに応じて調整されたスクロール速度Ｖ’でスクロールすることができる。

このように、タッチ操作端末１１は、角度φに従って、入力部１５に対するスワイプ操作の入力量に対する表示部１６の表示画面のスクロール速度を調整することができ、これにより、より操作しやすいユーザインタフェースを提供することができる。

また、タッチ操作端末１１は、角度φに従って、入力部１５に対するスワイプ操作の入力量に対する表示部１６に表示されるカーソルの移動スピードを調整してもよい。

なお、タッチ操作端末１１は、図１に示したようなヒンジ部１４を有する構成に限られるものではない。例えば、タッチ操作端末１１としては、任意の箇所で柔軟に折り曲げることが可能なフレキシブル性を備えて任意の箇所で入力部１５と表示部１６との相対角度θを変更することが可能な構成を採用することができる。

次に、図７は、本技術を適用したタッチ操作端末の第２の実施の形態の構成例を示す斜視図である。図７のＡには、タッチ操作端末５１の表面側が示されており、図７のＢには、タッチ操作端末５１の裏面側が示されている。

タッチ操作端末５１は、全体的に、柔軟で可撓を有した薄い本体５２により構成されており、本体５２の表面側に表示部５３が配置され、本体５２の裏面側に入力部５４が配置されて構成されている。即ち、表示部５３および入力部５４は、互いに反対側を向くように配置されている。

タッチ操作端末５１における操作処理では、図３のＤに示した相対角度θが３６０°とされた状態と同様に、入力方向と出力方向が逆方向とされる。

表示部５３は、フレキシブルディスプレイであり、図１の表示部１６と同様に、相対角度θに応じて入力方向に対する向きが切り替えられる出力方向で表示画面の表示が制御される。入力部５４は、フレキシブルタッチパネルであり、図１の入力部１５と同様に、ユーザのスワイプ操作に応じて入力方向を示す操作情報を取得する。なお、図示しないが、タッチ操作端末５１は、フレキシブル基板により実装される操作処理部２１（図２）を本体５２に内蔵している。

図８に示すように、タッチ操作端末５１は任意の箇所で柔軟に折り曲げられることによって、表示部５３の向く方向（表面側）に入力部５４の一部が向く状態とすることができる。即ち、タッチ操作端末５１は、折り曲げることにより、表示部５３と入力部５４との相対角度が変更され、その相対角度が、操作処理部２１の相対角度検出部２３により検出可能とされている。そして、タッチ操作端末５１では、相対角度検出部２３が、表示部５３の向く方向に入力部５４の一部が向く状態となるような相対角度であることを検出すると、入力部５４の一部（図８において紙面の表側を向く一部）には、画像が表示される。また、この入力部５４の一部は、ユーザによるスワイプ操作を入力することができる。

このとき、表面側を向く入力部５４の一部に対するスワイプ操作と、裏面側を向く入力部５４の一部に対するスワイプ操作とで、それぞれ入力方向に対する出力方向が切り替えられる。即ち、相対角度検出部２３が検出する相対角度に従って、表面側を向いていると判断された入力部５４の一部では、入力方向と出力方向とが同方向となるように操作処理が行われる。

また、このようにタッチ操作端末５１を折り曲げることによって、入力部５４の一部が表面側を向くことによって、タッチ操作端末５１の背面部分の面積、即ち、裏面側を向く入力部５４の面積は狭くなる。なお、タッチ操作端末５１を、図８とは逆方向に折り曲げた状態、即ち、入力部５４の向く方向（裏面側）に表示部５３の一部が向く状態としたときにも同様である。

さらに、タッチ操作端末５１では、表示部５３および入力部５４を折り曲げた際に表示されるユーザインタフェースを変更することができる。

即ち、図９に示すように、タッチ操作端末５１は、表示部５３および入力部５４を折り曲げることにより表面側を向く入力部５４の一部に、表示部５３に表示されている表示画面に対する操作を行うのに用いるメニュー画面５５を表示することができる。メニュー画面５５には、１または複数のGUI（Graphical User Interface）が表示される。

このように、タッチ操作端末５１では、折り曲げられたことを検出すると、メニュー画面５５が表示される。さらに、タッチ操作端末５１では、折り曲げられる位置を検出して、その位置に応じてメニュー画面５５の大きさを変更するとともに、メニュー画面５５に表示されるGUIの数を変更することができる。つまり、タッチ操作端末５１を折り曲げることにより表面側を向く入力部５４の一部が大きくなれば、メニュー画面５５が大きく表示され、メニュー画面５５には多くのGUIが表示される。

また、タッチ操作端末５１では、表示部５３および入力部５４を折り曲げる角度に応じて、入力方向に対する出力方向を切り替える他、入力量に対する出力量（例えば、スクロール速度）を調整してもよい。さらに、タッチ操作端末５１は、図８および図９に示したような二つ折りの他、三つ折りまたは四つ折りにすることができ、それぞれの折り方に応じて操作処理が異なるようにしてもよい。

また、タッチ操作端末５１では、表示部５３および入力部５４として半透明の部材を採用することができ、折り曲げることによって、入力部５４を透かして表示部５３を視認することができるようにしてもよい。

なお、上述のフローチャートを参照して説明した各処理は、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。また、プログラムは、１のCPUにより処理されるものであっても良いし、複数のCPUによって分散処理されるものであっても良い。

また、上述した一連の処理（情報処理方法）は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な汎用のコンピュータなどに、プログラムが記録されたプログラム記録媒体からインストールされる。

図１０は、上述した一連の処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。

コンピュータ１０１において、CPU１０２，ROM１０３，RAM１０４，EEPROM１０５がバス１０６を介して、互いに接続されている。また、バス１０６には、入出力インタフェース１０７が接続されており、入出力インタフェース１０７に外部の装置、例えば、図１の入力部１５および表示部１６が接続されている。

このように構成されるコンピュータ１０１では、CPU１０２が、例えば、ROM１０３またはEEPROM１０５に記憶されているプログラムを、バス１０６を介して、RAM１０４にロードして実行することにより、上述した一連の処理が行われる。また、コンピュータ（CPU１０２）が実行するプログラムは、ROM１０３またはEEPROM１０５に予め記憶されている他、例えば、図示しない記録媒体や各種の通信ネットワークなどを介して提供され、EEPROM１０５にインストールすることができる。

なお、本技術は以下のような構成も取ることができる。
（１）
操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報を取得する入力方向取得部と、
画像を表示する表示部に対して、前記入力部に対する操作に応答して前記表示部の画像を変化させる方向である出力方向を指示する出力方向指示部と、
前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に対する前記出力方向の向きを決定する決定部と
を備える操作処理装置。
（２）
前記入力部および前記表示部を開閉可能に接続する接続部をさらに備え、
前記決定部は、前記接続部を中心とした前記入力部および前記表示部の相対的な角度に従って、前記入力方向に対する前記出力方向の向きを決定する
上記（１）に記載の操作処理装置。
（３）
前記接続部は、前記入力部および前記表示部が互いに向かい合う角度から、前記入力部および前記表示部が互いに反対側を向く角度までの範囲で、前記入力部および前記表示部を開閉可能に接続する
上記（１）または（２）に記載の操作処理装置。
（４）
前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に沿った入力量に対する前記出力方向に沿った出力量が調整される
上記（１）から（３）までのいずれかに記載の操作処理装置。
（５）
前記入力部に対する入力を行うユーザと前記表示部との相対的な位置関係に従って、前記入力方向に沿った入力量に対する前記出力方向に沿った出力量が調整される
上記（１）から（４）までのいずれかに記載の操作処理装置。
（６）
前記入力部および前記表示部は、任意の箇所で柔軟に折り曲げることが可能なフレキシブル性を備えて構成され、互いに反対側を向くように配置される
上記（１）から（５）までのいずれかに記載の操作処理装置。
（７）
前記入力部および前記表示部が折り曲げられることによって、前記表示部の向く方向に前記入力部の一部が向く状態である場合には、前記表示部と同方向を向く前記入力部の一部に画像が表示される
上記（１）から（６）までのいずれかに記載の操作処理装置。
（８）
前記表示部と同方向を向く前記入力部の一部には、前記表示部に表示されている画像に対する操作を行う際のインタフェースとなる画像が表示される
上記（１）から（７）までのいずれかに記載の操作処理装置。
（９）
前記入力部および前記表示部が折り曲げられる位置に応じて、前記入力部の一部に表示される画像である操作画面のインタフェースの内容が変化する
上記（１）から（８）までのいずれかに記載の操作処理装置。

なお、本実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。

１１ タッチ操作端末， １２ 第１の筐体， １３ 第２の筐体， １４ ヒンジ部， １５ 入力部， １６ 表示部， ２１ 操作処理部， ２２ 入力方向取得部， ２３ 相対角度検出部， ２４ 出力方向決定部， ２５ 表示指示部， ５１ タッチ操作端末， ５２ 本体， ５３ 表示部， ５４ 入力部

Claims (11)

1. 操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報を取得する入力方向取得部と、
   画像を表示する表示部に対して、前記入力部に対する操作に応答して前記表示部の画像を変化させる方向である出力方向を指示する出力方向指示部と、
   前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に対する前記出力方向の向きを決定する決定部と
   を備える操作処理装置。
2. 前記入力部および前記表示部を開閉可能に接続する接続部をさらに備え、
   前記決定部は、前記接続部を中心とした前記入力部および前記表示部の相対的な角度に従って、前記入力方向に対する前記出力方向の向きを決定する
   請求項１に記載の操作処理装置。
3. 前記接続部は、前記入力部および前記表示部が互いに向かい合う角度から、前記入力部および前記表示部が互いに反対側を向く角度までの範囲で、前記入力部および前記表示部を開閉可能に接続する
   請求項２に記載の操作処理装置。
4. 前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に沿った入力量に対する前記出力方向に沿った出力量が調整される
   請求項１に記載の操作処理装置。
5. 前記入力部に対する入力を行うユーザと前記表示部との相対的な位置関係に従って、前記入力方向に沿った入力量に対する前記出力方向に沿った出力量が調整される
   請求項１に記載の操作処理装置。
6. 前記入力部および前記表示部は、任意の箇所で柔軟に折り曲げることが可能なフレキシブル性を備えて構成され、互いに反対側を向くように配置される
   請求項１に記載の操作処理装置。
7. 前記入力部および前記表示部が折り曲げられることによって、前記表示部の向く方向に前記入力部の一部が向く状態である場合には、前記表示部と同方向を向く前記入力部の一部に画像が表示される
   請求項６に記載の操作処理装置。
8. 前記表示部と同方向を向く前記入力部の一部には、前記表示部に表示されている画像に対する操作を行う際のインタフェースとなる画像が表示される
   請求項７に記載の操作処理装置。
9. 前記入力部および前記表示部が折り曲げられる位置に応じて、前記入力部の一部に表示される画像である操作画面のインタフェースの内容が変化する
   請求項８に記載の操作処理装置。
10. 操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報を取得し、
    画像を表示する表示部に対して、前記入力部に対する操作に応答して前記表示部の画像を変化させる方向である出力方向を指示し、
    前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に対する前記出力方向の向きを決定する
    ステップを含む操作処理方法。
11. 操作が入力される入力部に対して行われる方向を指示する操作に応じて生成される前記方向に従った入力方向を示す情報を取得し、
    画像を表示する表示部に対して、前記入力部に対する操作に応答して前記表示部の画像を変化させる方向である出力方向を指示し、
    前記入力部と前記表示部との相対的な位置関係に従って、前記入力方向に対する前記出力方向の向きを決定する
    ステップを含む操作処理をコンピュータに実行させるプログラム。

Images