WO2014054367A1

WO2014054367A1 - 情報処理装置、情報処理方法及び記録媒体

Info

Publication number: WO2014054367A1
Application number: PCT/JP2013/073648
Authority: WO
Inventors: 敦彦上島
Original assignee: Ｎｅｃカシオモバイルコミュニケーションズ株式会社
Priority date: 2012-10-01
Filing date: 2013-09-03
Publication date: 2014-04-10
Also published as: EP2905685A4; CN104704441B; EP2905685A1; CN104704441A; JPWO2014054367A1; US20150261253A1; US9733667B2; JP6225911B2

Abstract

　画像情報記憶部（１３２）は、操作対象画像毎に表示領域、画層（操作対象画像が表示階層のなかでいずれの階層に配置されるかを示す情報）等を対応付けて記憶する。第１の入力部（１１０Ａ）と第２の入力部（１１０Ｂ）のいずれか一方が接触を検出すると、制御部（１２０）は、接触された位置を表示領域に含む操作対象画像を特定し、第１の入力部（１１０Ａ）と第２の入力部（１１０Ｂ）のいずれで接触があったかに応じて、特定した操作対象画像のうち上層に配置された画像を操作するか、下層に配置された画像を操作するかを決定する。

Description

情報処理装置、情報処理方法及び記録媒体

　本発明は、情報処理装置、情報処理方法及び記録媒体に関する。

　携帯端末、ゲーム機、タブレットＰＣ（Personal Computer）等の情報処理装置において、入力部としてタッチパネルを備えるものが増えている。タッチパネルによりユーザがタッチパネルに触れた位置を特定する。そして、この特定した位置がアイコンやボタン等の画像の表示領域内であれば、情報処理装置は、画像に対応付けられた所定のプログラムを実行する。よって、ユーザは、画面に表示されたアイコンやボタン等の画像に触れるだけで所望の入力を行うことができる。すなわち、タッチパネルを備える情報処理装置は、容易な操作による入力をユーザに提供する。

　特許文献１には、タッチパネルを備え、ユーザがタッチパネルの画面に触れることで入力可能なタッチセンサ装置が開示されている。

特開２０１０－２６２６２６号公報

　通常、タッチパネルには、アイコン、ボタン、ツールバー等を含む操作対象画像と、壁紙と、が重ねて表示される。これらの操作対象画像を操作（タッチ、タッピング等）することにより、アプリケーションの起動・実行等の指示が入力される。さらに、壁紙のなかには、壁紙自体が操作対象画像として、プログラム等と関連付けられることがある。この壁紙の操作によりプログラムが実行されたり、コマンドや指示、データ等が入力されたりするものがある。
　しかし、壁紙の上に多数のアイコン等が配置されている場合には、アイコン等に触れずに壁紙に触れることが難しい。このため、壁紙を介して指示を入力することが難しい。
　このように、多数のアイコンが表示された状態のまま、壁紙に対応付けられたプログラムを実行するには、例えば、これらの操作対象画像の表示位置を移動させたり、いくつかの操作対象画像を非表示にしたりする余分な操作が必要だった。

　本発明は以上のような背景に鑑みて成されたものであり、操作対象画像が重なって表示されている状況でも、容易な操作入力が可能な情報処理装置、情報処理方法及び記録媒体を提供する。

　上記目的を達成するために、本発明の第１の観点に係る情報処理装置は、
　筐体の一面に配置された表示部と、
　複数画層に配置された操作対象画像を表示するように前記表示部を制御する表示制御部と、
　前記表示部上に配置され、該表示部におけるタッチ位置を検出する第１の入力部と、
　前記筐体の一面に対向する対向面に配置され、前記表示部におけるタッチ位置を検出する第２の入力部と、
　前記第１の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記第２の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部と、
　前記特定部が特定した操作対象画像に対応するアクションを実行する実行部と、
　を備えることを特徴とする。

　また、本発明の第２の観点に係る情報処理方法は、
　複数画層に配置された操作対象画像を表示するように、筐体の一面に配置された表示部を制御する表示制御ステップと、
　前記表示部上に配置された第１の入力部が検出した前記表示部におけるタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記筐体の一面に対向する対向面に配置された第２の入力部が検出した前記表示部におけるタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定ステップと、
　前記特定した操作対象画像に対応するアクションを実行する実行ステップと、
　を備えたことを特徴とする。

　また、本発明の第３の観点に係る記録媒体は、
　コンピュータを、
　筐体の一面に配置された表示部、
　複数画層に配置された操作対象画像を表示するように前記表示部を制御する表示制御部、
　前記表示部上に配置され、該表示部におけるタッチ位置を検出する第１の入力部、
　前記筐体の一面に対向する対向面に配置され、前記表示部におけるタッチ位置を検出する第２の入力部、
　前記第１の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記第２の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部、
　前記特定部が特定した操作対象画像に対応するアクションを実行する実行部、
　として機能させるプログラムを記録したコンピュータ読み取り可能な記録媒体である。

　本発明によれば、操作対象画像が重なって表示されている状況でも、容易な操作入力が可能になる。

第１の実施形態に係る携帯端末の外観図である。第１の実施形態に係る携帯端末の構成を示す図である。第１の実施形態において、表示部の画面に表示されている画像を示す図である。第１の実施形態において、画層により構成される論理的な画像の表示階層を示す図である。第１の実施形態に係る画像情報テーブルを示す図である。第１の実施形態に係る操作画像特定処理のフローチャートである。携帯端末の前面に配置された入力部を介して、ユーザの指がアイコンを操作している状態を示す図である。携帯端末の前面に配置された入力部を介して、ユーザの指が壁紙を操作している状態を示す図である。携帯端末の背面に配置された入力部を介して、ユーザの指が壁紙を操作している状態を示す図である。第２の実施形態において、表示部の画面に表示されている画像を示す図である。第２の実施形態において、画層により構成される論理的な画像の表示階層を示す図である。携帯端末の筐体が回転可能であることを示す図である。２つの表示部が外部に向いた状態で折り畳まれている携帯端末を示す図である。本発明に係る情報処理装置の構成を示す図である。

　本発明の実施形態に係る情報処理装置を以下に説明する。

＜第１の実施形態＞
　本実施形態に係る情報処理装置は、図１に示すように、情報処理装置の筐体の前面に第１の入力部１１０Ａ、背面に第２の入力部１１０Ｂを備える携帯端末１０である。なお、この携帯端末１０の筐体の表示部１００が配置された面を前面、前面に対向する面を背面と呼ぶ。この携帯端末１０は、壁紙とアイコンの表示領域の一部が重なるとき、第１の入力部１１０Ａからの入力によりアイコンに対応付けられたプログラムを実行し、第２の入力部１１０Ｂからの入力により壁紙に対応付けられたプログラムを実行する。
　以下、図２を参照して、本実施形態に係る携帯端末１０の構成を説明する。
　携帯端末１０は、表示部１００、第１の入力部（前面入力部）１１０Ａ、第２の入力部（背面入力部）１１０Ｂ、制御部１２０、記憶部１３０から構成される。

　表示部１００は、例えば、ＬＣＤ(Liquid Crystal Display)や有機ＥＬ（Electro Luminescence）ディスプレイ等の表示画面から構成され、携帯端末１０の筐体の前面に配置されている。また、表示部１００は、制御部１２０の制御に従って、壁紙、ウィンドウ、アイコン、ボタン等の画像を、画像毎に割り当てられた後述する「画層」に表示する。

　第１の入力部（前面入力部）１１０Ａは、タッチされた位置を検出するタッチセンサ（タッチパネル）を備える。第１の入力部１１０Ａは、携帯端末１０の筐体の前面で表示部１００を覆うように配置されており、表示部１００と組み合わされてタッチ式のタッチスクリーンを構成する。
　第２の入力部（背面入力部）１１０Ｂは、タッチされた位置を検出するタッチセンサを備え、携帯端末１０の筐体の背面（第１の入力部１１０Ａに対向する面）に配置されている。
　第１の入力部１１０Ａ、第２の入力部１１０Ｂは、タッチセンサで指やペン等の接触（タッチ）を検出すると、接触があった位置の情報を含む信号を制御部１２０へ送信する。

　制御部１２０は、ＣＰＵ（Central Processing Unit）、基本動作プログラムを記憶するＲＯＭ（Read Only Memory）、ワークエリアとなるＲＡＭ（Random Access Memory）等から構成される。制御部１２０は、記憶部１３０に格納されているプログラムに従って各部の動作を制御し、後述する操作画像特定処理を含む種々の処理を実行する。

　記憶部１３０は、フラッシュメモリ、ハードディスク等の記憶装置から構成され、操作画像特定プログラム１３１、画像情報記憶部１３２等を含む。

　操作画像特定プログラム１３１は、第１の入力部１１０Ａ及び第２の入力部１１０Ｂでの接触（タッチ）を検出したとき、接触があった位置（タッチ位置）を表示領域に含む操作対象画像を特定する。操作画像特定プログラム１３１は、その操作対象画像に割り当てられた所定の指示の入力を行うか否かを判別するプログラムである。所定の指示の入力を行うか否かについては、操作対象画像に割り当てられた後述する「画層」と第１の入力部１１０Ａ、第２の入力部１１０Ｂのいずれで接触があったかを示す情報との組み合わせに基づいて判別される。ここで、画層とは、操作対象画像の表示階層を構成する各階層を示す情報（操作対象画像の奥行きを示す情報）である。画層は、操作対象画像毎に割り当てられる。例えば、図３に示す壁紙２００と複数のアイコン２１０に割り当てられた画層と、その画層から構成される表示階層とを図４に示す。なお、この例では、壁紙２００にも、所定の指示の入力が割り当てられているものとする。

　図４に示す例では、壁紙２００とアイコン２１０の画像は表示領域が重複しており、壁紙２００には「画層１」、アイコン２１０には「画層２」がそれぞれ割り当てられている。数字の値は、値が大きい画層のほうが、値の小さい画層より上層の画層であることを示す。よって、画層２を割り当てられたアイコン２１０は、画層１を割り当てられた壁紙２００より上層の画層に表示される画像である。このように、画像に画層という情報を割り当てることで、画像の表示階層を論理的に定義することができる。複数の画像の表示領域が重なる場合、画層が最も高い画像が表示部１００に表示され（透明、半透明処理等をおこなっていない場合）、画層が低い画像ほど上層の画像の陰になって表示されなくなる。

　図２に示す画像情報記憶部１３２は、図５に示す画像情報テーブル１３２１を記憶する。画像情報テーブル１３２１は、操作対象画像ＩＤカラム、素材ＩＤカラム、画層カラム、表示領域（Ｘ軸方向）カラム、表示領域（Ｙ軸方向）カラム、アクションＩＤカラムから構成される。操作対象画像ＩＤカラムは、画面に表示された操作対象画像を識別するＩＤを記憶する。素材ＩＤカラムは、操作対象画像の素材（アイコンやボタン等）となる画像を識別するＩＤを記憶する。画層カラムは、操作対象画像に割り当てられた画層を識別する番号を記憶する。

　表示領域（Ｘ軸方向）カラム、及び表示領域（Ｙ軸方向）カラムは、画面上で操作対象画像が表示される領域を示す情報を記憶する。具体的には、表示領域（Ｘ軸方向）カラムは、画面上における操作対象画像の表示領域のＸ軸方向の両端を示す座標を記憶する。表示領域（Ｙ軸方向）カラムは、画面上における操作対象画像の表示領域のＹ軸方向の両端を示す座標を記憶する。アクションＩＤカラムは、操作対象画像毎に割り当てられた所定の指示の入力を識別するＩＤを記憶する。

　次に、上記構成を有する携帯端末１０の動作を説明する。
　携帯端末１０の電源がＯＮすると、制御部１２０は、図５に示す画像情報テーブル１３２１を参照し、図４に示すように、各操作対象画像を対応する表示領域と画層（１又は２）に配置して表示画面を生成し、図３に示すように表示部１００に表示する。このとき、制御部１２０は、図３に示す壁紙２００とアイコン２１０のように、異なる画層に配置した操作対象画像の表示領域が重なる領域においては、上層の画層に配置された操作対象画像をユーザから見て手前に表示する（操作対象画像に透明処理等が施さない場合）。

　ユーザは、表示されている操作対象画像を操作（タッチ、タッピング等）することで所望の指示を入力する。通常、操作対象画像が重なっている領域では、最上層に表示されている操作対象画像しか操作できない。しかし、携帯端末１０では、操作対象画像が重なっている場合、最上層の操作対象画像をユーザに面している第１の入力部１１０Ａから操作し、最下層の操作対象画像を、背面に配置されている第２の入力部１１０Ｂから操作することが可能である。これによって、ユーザは、操作対象画像を表面（前面）側及び裏面（背面）側から操作することが可能となる。従って、容易な操作で重なっている操作対象画像の操作が可能である。以下、このような操作を可能にする仕組みを、図６を参照して説明する。

　ユーザが表示部１００に表示されている操作対象画像を前面側或いは背面側から操作（タッチ、タッピング等）する。このため、第１の入力部１１０Ａ又は第２の入力部１１０Ｂは、送信元を特定する情報を含むタッチ検出信号を、制御部１２０に送信する。

　このタッチ検出信号に応答して、制御部１２０は、図６に示す操作画像特定処理を開始する。まず制御部１２０は、受信したタッチ検出信号から送信元を特定する情報を読み出し、タッチ検出信号が第１の入力部１１０Ａから送信された信号か否かを判別する（ステップＳ１００）。第１の入力部１１０Ａから送信された信号であると判別した場合（ステップＳ１００；Ｙｅｓ）、制御部１２０は、タッチ検出信号から、タッチされた位置の表示画面上の座標を特定する（ステップＳ１１０ａ）。なお、第１の入力部１１０Ａ上の座標と表示部１００上の座標の対応関係は、携帯端末１０の製造時に設定されている。

　続いて、制御部１２０は、図５に示す画像情報テーブル１３２１を参照し、特定した座標を表示領域に含む操作対象画像を特定する（ステップＳ１２０ａ）。そして、制御部１２０は、特定した操作対象画像のうち、最も上層の画層に配置された操作対象画像（ユーザから見て最も手前に配置されている操作対象画像）の操作対象画像ＩＤを取得する（ステップＳ１３０ａ）。

　次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、取得したと判別した場合（ステップＳ１４０；Ｙｅｓ）、操作対象画像ＩＤに対応するアクションＩＤを取得する（ステッＳ１５０）。そして、制御部１２０は、取得したアクションＩＤにより特定されるアクション、例えば、対応するプログラムを起動する等のアクションを実行する。なお、タッチされた位置の座標を表示領域に含む操作対象画像が存在しないと判別した場合（ステップＳ１４０；Ｎｏ）、制御部１２０は、操作画像特定処理を終了する。

　一方、ステップＳ１００で、タッチ検出信号が第２の入力部１１０Ｂから送信された信号であると判別された場合（ステップＳ１００；Ｎｏ）、制御部１２０は、タッチ検出信号から、タッチされた位置の表示画面上の座標を特定する（ステップＳ１１０ｂ）。なお、第２の入力部１１０Ｂ上の座標と表示部１００上の座標の対応関係は、携帯端末１０の製造時に設定されている。

　続いて、制御部１２０は、画像情報テーブル１３２１を参照し、特定した座標を表示領域に含む操作対象画像を特定する（ステップＳ１２０ｂ）。そして、制御部１２０は、特定した操作対象画像のうち、最も下層の画層に配置された操作対象画像（ユーザから見て最も奥に配置されている操作対象画像）の操作対象画像ＩＤを取得する（ステップＳ１３０ｂ）。次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、取得したと判別した場合（ステップＳ１４０；Ｙｅｓ）、操作対象画像ＩＤに対応するアクションＩＤを取得する（ステップＳ１５０）。そして、制御部１２０は、取得したアクションＩＤにより特定されるアクション、例えば、操作された操作対象画像に対応するプログラムを起動する等のアクションを実行する。

　以上の処理によって、本実施形態に係る携帯端末１０では、表示部１００の表示画面上に配置されている操作対象画像のうち、手前に配置されている操作対象画像を前面側からタッチ等することで操作することができる。一方で、奥側に配置されていて、前面側からタッチできない操作対象画像を背面側からタッチ等することで操作することができる。これによって、ユーザは、容易な操作入力が可能となる。

　以上の動作を、具体例に基づいて説明する。ここでは、図３に示すように、操作対象画像として壁紙２００とアイコン２１０が表示部１００の表示画面上に表示されており、この壁紙２００とアイコン２１０により２階層の表示階層が構成されている例を用いて、より具体的に操作画像特定処理の動作を説明する。

　ここで、ユーザが表示部１００に表示されているアイコン２１０を操作（タッチ）したいとする。この場合、ユーザは、図７に示すように、携帯端末１０の前面側に配置されている第１の入力部１１０Ａを介してアイコン２１０にタッチする。すると、制御部１２０は、第１の入力部１１０Ａからタッチ検出信号を受信し、タッチ検出信号が第１の入力部１１０Ａから送信された信号か否かを判別し（図６ステップＳ１００）、信号の送信元が第１の入力部１１０Ａであると判別する（ステップＳ１００；Ｙｅｓ）。

　次に、制御部１２０は、タッチされた位置の座標を特定する（ステップＳ１１０ａ）。ここで特定された座標は座標（１５０、１５０）であるとする。制御部１２０は、図５に示す画像情報テーブル１３２１を参照して、座標（１５０、１５０）を表示領域に含む操作対象画像を特定する（ステップＳ１２０ａ）。この例では、アイコン２１０（操作対象画像ＩＤ「１０００２」）と壁紙２００（操作対象画像ＩＤ「１０００１」）が操作対象画像として特定される。そして、制御部１２０は、アイコン２１０の画層が「２」、壁紙２００の画層が「１」であるため、上層の画層に配置されている（手前に配置されている）アイコン２１０に対応付けられた操作対象画像ＩＤ「１０００２」を取得する（ステップＳ１３０ａ）。次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、操作対象画像ＩＤを取得していると判別し（ステップＳ１４０；Ｙｅｓ）、操作対象画像ＩＤ「１０００２」に対応するアクションＩＤ「ＤＤ」を取得する（ステップＳ１５０）。そして、制御部１２０は、アクションＩＤ「ＤＤ」により特定されるアクション、例えば、操作されたアイコン２１０に対応するプログラムを起動する等のアクションを行う。

　次に、ユーザが表示部１００に表示されている壁紙２００を操作（タッチ）したいとする。この場合、ユーザは、図８に示すように、携帯端末１０の前面側に配置されている第１の入力部１１０Ａを介してアイコン２１０の間の壁紙２００が露出して表示されている部分にタッチする。または、図９に示すように、第２の入力部１１０Ｂを介して背面側から壁紙２００の任意の位置にタッチする。

　ユーザが前面側から第１の入力部１１０Ａにタッチした場合、制御部１２０は、タッチされた位置の座標を特定する（ステップＳ１１０ａ）。ここで特定された座標は座標（２５０、３５０）であるとする。制御部１２０は、図５に示す画像情報テーブル１３２１を参照して、座標（２５０、３５０）を表示領域に含む操作対象画像を特定する（ステップＳ１２０ａ）。この例では、壁紙２００（操作対象画像ＩＤ「１０００１」）のみが操作対象画像として特定される。よって、制御部１２０は、壁紙２００に対応付けられている操作対象画像ＩＤ「１０００１」を取得する（ステップＳ１３０ａ）。次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、操作対象画像ＩＤを取得していると判別し（ステップＳ１４０；Ｙｅｓ）、操作対象画像ＩＤ「１０００１」に対応するアクションＩＤ「ＡＡ」を取得する（ステップＳ１５０）。そして、制御部１２０は、取得したアクションＩＤ「ＡＡ」により特定されるアクション、例えば、操作された壁紙２００に対応するプログラムの起動等のアクションを行う。

　ユーザが背面側から第２の入力部１１０Ｂにタッチした場合、制御部１２０は、タッチされた位置の座標を特定し（ステップＳ１１０ｂ）、特定した座標を表示領域に含む操作対象画像を特定する（ステップＳ１２０ｂ）。この例では、タッチされた位置に応じて、壁紙２００のみ又は壁紙２００とアイコン２１０が操作対象画像として特定される。そして、制御部１２０は、最も下層の画層に配置されている操作対象画像、すなわち、画層が「１」の壁紙２００（操作対象画像ＩＤ「１０００１」）を特定し、壁紙２００に対応付けられている操作対象画像ＩＤ「１０００１」を取得する（ステップＳ１３０ｂ）。次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、操作対象画像ＩＤを取得していると判別し（ステップＳ１４０；Ｙｅｓ）、操作対象画像ＩＤ「１０００１」に対応するアクションＩＤ「ＡＡ」を取得する（ステップＳ１５０）。さらに、制御部１２０は、取得したアクションＩＤ「ＡＡ」により特定されるアクション、例えば、操作された壁紙２００に対応するプログラムの起動等のアクションを行う。

　以上説明したように、ユーザは、階層的に表示されている複数の操作対象画像について、前面側（正面側）から接触（タッチ）等できる操作対象画像の場合には、第１の入力部１１０Ａを使って前面側から接触して操作できる。また、他の操作対象画像の下になって前面側から接触等しにくい操作対象画像の場合には、第２の入力部１１０Ｂを使って背面側からタッチ等して操作することができる。従って、従来に比して、より直感的、且つ容易な操作で種々の入力が可能となる。

　なお、操作対象画像の配置変更・追加・削除等をする場合には、これらの処理に応じて画像情報テーブル１３２１が記憶する情報もあわせて修正することにより、対応が可能である。

＜第２の実施形態＞
　第１の実施形態では、２階層の表示階層に配置された操作対象画像を例にとり、本発明に係る携帯端末１０の仕組みを説明した。しかし、壁紙２００、アイコン２１０の他にもテキストウィンドウ等が重ねて表示される場合、表示階層は３階層以上となることが多い。そこで、本実施形態では、３階層以上の表示階層に配置された操作対象画像を例にとり、本発明に係る携帯端末１０の仕組みを説明する。

　本実施形態では、携帯端末１０は、図１０に示すように、操作対象画像として壁紙２００、アイコン２１０、アプリケーション固有の入力画面２２０を表示部１００の表示画面に重ねて表示する。これらの操作対象画像は、それぞれ壁紙２００が奥、アイコン２１０が中間、アプリケーション固有の入力画面２２０が手前に配置されており、３階層の表示階層を構成する。
　なお、本実施形態に係る携帯端末１０の構成は、第１の実施形態に係る携帯端末１０の構成と同じである。

　以下、本実施形態における携帯端末１０の動作を説明する。
　携帯端末１０の電源がＯＮされると、制御部１２０は、図１１に示すように、壁紙２００に画層１を割り当て、アイコン２１０に画層２を割り当て、アプリケーション固有の入力画面２２０に画層３を割り当て、それぞれ、予め設定されている座標に表示する。

　ユーザは、表示されている操作対象画像である壁紙２００、アイコン２１０、アプリケーション固有の入力画面２２０を操作することで所望の指示を入力する。例えば、ユーザが、表示部１００に表示されているアプリケーション固有の入力画面２２０を操作（タッチ）したいとする。この場合、ユーザは、携帯端末１０の前面側に配置されている第１の入力部１１０Ａを介してアプリケーション固有の入力画面２２０にタッチする。すると、制御部１２０は、第１の入力部１１０Ａからタッチ検出信号を受信し、タッチ検出信号が第１の入力部１１０Ａから送信された信号か否かを判別し（図６ステップＳ１００）、信号の送信元が第１の入力部１１０Ａであると判別する（ステップＳ１００；Ｙｅｓ）。

　次に、制御部１２０は、タッチされた位置の座標を特定し（ステップＳ１１０ａ）、特定した座標を表示領域に含む操作対象画像を特定する（ステップＳ１２０ａ）。このとき特定される操作対象画像は、壁紙２００、アイコン２１０、及びアプリケーション固有の入力画面２２０、又はアプリケーション固有の入力画面２２０と壁紙２００である。特定された操作対象画像がアプリケーション固有の入力画面２２０、壁紙２００の場合、制御部１２０は、アプリケーション固有の入力画面２２０の画層が「３」、壁紙２００の画層が「１」であるため、画層の大きい（手前に配置されている）アプリケーション固有の入力画面２２０に対応付けられている操作対象画像ＩＤを取得する（ステップＳ１３０ａ）。次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、取得したと判別した場合（ステップＳ１４０；Ｙｅｓ）、操作対象画像ＩＤに対応するアクションＩＤを取得する（ステッＳ１５０）。そして、制御部１２０は、取得したアクションＩＤにより特定されるアクション、例えば、操作されたアプリケーション固有の入力画面２２０に対応するプログラムを起動する等のアクションを行う。

　一方、ユーザが背面側から第２の入力部１１０Ｂにタッチした場合、制御部１２０は、タッチされた位置の座標を特定し（ステップＳ１１０ｂ）、特定した座標を表示領域に含む操作対象画像を特定する（ステップＳ１２０ｂ）。このとき特定される操作対象画像は、壁紙２００のみ、又はアイコン２１０と壁紙２００、又はアプリケーション固有の入力画面２２０、アイコン２１０、及び壁紙２００である。特定された操作対象画像がアプリケーション固有の入力画面２２０、壁紙２００の場合、制御部１２０は、最も下層の画層に配置されている操作対象画像、すなわち、画層が「１」の壁紙２００の操作対象画像ＩＤを取得する（ステップＳ１３０ｂ）。次に、制御部１２０は、操作対象画像ＩＤを取得したか否かを判別し（ステップＳ１４０）、取得したと判別した場合（ステップＳ１４０；Ｙｅｓ）、取得した操作対象画像ＩＤに対応付けられているアクションＩＤを取得する（ステップＳ１５０）。そして、制御部１２０は、取得したアクションＩＤに対応するアクション、例えば、操作された壁紙２００に対応するプログラムを起動する等のアクションを行う。

　以上説明したように、ユーザは、３階層以上の表示階層に表示されている複数の操作対象画像について、前面側（正面側）から接触（タッチ）等できる操作対象画像の場合には、第１の入力部１１０Ａを使って前面側から接触して操作できる。また、他の操作対象画像の下になって前面側から接触等しにくい操作対象画像の場合には、第２の入力部１１０Ｂを使って背面側からタッチ等して操作することができる。従って、従来に比して、より直感的、且つ容易な操作で種々の入力が可能となる。

　また、上記実施形態において、タッチパネル上で接触位置を検出する方法は任意であり、例えば、静電式検知方法、抵抗式検知方法等でもよい。

　さらに、操作対象画像がタッチ又は指示されたときに実行されるアクションは、プログラムを起動する例に限定されず、任意である。

　また、上記実施形態では、操作対象画像として、アイコン、ボタン、ツールバー、壁紙を例示したが、領域を特定可能ならば任意の画像を操作対象画像とすることができる。例えば、画像でもテキストでもよく、画像は静止画でも動画でもよい。

　例えば、テレビ放送の映像（画像）と、電子番組表と、データ放送のデータ、字幕等をそれぞれ操作対象画像とし、操作対象画像の個性に応じたアクションを割り当ててもよい。具体例で示すと、例えば、奥（画層１）にテレビ放送の映像（画像）を表示し、該映像の手前（画層２）に電子番組表を表示し、電子番組表がタッチされたことを検出すると、対応するアクションとして電子番組表のページをめくり、テレビ放送の映像がタッチされたことを検出するとチャネルを変更するように、操作対象画像とアクションとを設定してもよい。或いは、奥にテレビ放送の映像を表示し、手前にデータ放送のデータ・字幕等を表示し、データ・字幕等がタッチされたと検出すると、これらの画像を拡大・縮小するように操作対象画像とアクションとを対応付けてもよい。

　本発明は、上記実施形態に限定されず、様々な変形及び応用が可能である。
　上記実施形態では、第１の入力部１１０Ａ又は第２の入力部１１０Ｂがタッチ位置を検出すると、操作画像特定処理を実行する。しかし、本発明はこれに限定されず、タッチ方法に応じて、操作対象画像に対応するアクションとは異なる任意のアクションを実行するように構成してもよい。例えば、制御部１２０は、第１の入力部１１０Ａ又は第２の入力部１１０Ｂのうち一方の入力部がタッチ位置を検出しているときに、他方の入力部がタッチ位置を検出すると、一方の入力部が検出しているタッチ位置に操作対象画像があるか否かを判別する。操作対象画像が電子番組表であれば、この電子番組表に対応するアクションとは異なるアクションである番組の録画予約をしてもよい。または、操作対象画像が壁紙であれば、この壁紙に対応するアクションとは異なるアクション（例えば、候補となる壁紙が表示部１００に複数表示されているような場合における壁紙の選択アクション）を実行してもよい。

　上記実施形態では、表示部１００に表示されている操作対象画像を筐体の前面と背面に配置された入力部から操作することで、直感的な操作を実現した。しかし、本発明はこれに限定されず、直感的な操作が損なわれないのであれば、背面に表示部を配置し、該表示部に表示されている操作対象画像を前面と背面の入力部から操作するように構成してもよい。

　さらに、本発明は、筐体の前面と背面に配置された入力部を介して異なる画層に表示されている操作対象画像を直感的に操作できれば、表示部上での操作対象画像の見せ方については任意である。例えば、筐体の前面に配置された表示部１００では、最上層の画層に配置された操作対象画像をユーザから見て手前に表示する。一方で、筐体の背面に配置された表示部では、最下層の画層に配置された操作対象画像をユーザから見て手前に表示する。このことにより、筐体が透過したような感覚をユーザに与えるように操作対象画像を表示してもよい。

　また、上記実施形態では、携帯端末を例にこの発明を説明した。しかし、この発明は、これに限定されず、筐体の両主面にタッチセンサを備えていれば、どのような情報処理装置にも適用可能である。例えば、ＰＨＳ（Personal Handy-phone System）、ＰＤＡ（Personal Digital Assistant又はPersonal Data Assistance）、スマートフォン、タブレットＰＣ（Personal Computer）、ゲーム機器、携帯型音楽再生装置等であってもよい。

　さらに、上記実施形態では、直方体状の単一の筐体から構成される携帯端末１０を例にこの発明を説明した。しかし、本発明は、これに限定されず、筐体の形状や筐体の数は任意である。例えば、図１２Ａに示すように、２軸ヒンジ１５０により連結する第１の筐体１４０Ａと第２の筐体１４０Ｂを備え、各筐体が２軸ヒンジ１５０の２軸を回転軸として２方向に回転可能な携帯端末１０であってもよい。

　また、図１２Ａに示す携帯端末１０は、図１２Ｂに示すように閉じた状態で第１の入力部１１０Ａと第２の入力部１１０Ｂが外側を向いていることを姿勢センサが検出すると、検出信号を制御部１２０に送信する。検出信号を受信した制御部１２０は、第１の入力部１１０Ａと第２の入力部１１０Ｂのいずれかタッチされたことを検出すると、図６に示す操作画像特定処理を開始し、上記実施の形態と同様の動作を行ってもよい。

　以上説明したように、本発明に係る情報処理装置は、図１３に示すような、筐体の一面に配置された表示部３００と、複数画層に配置された操作対象画像を表示するように表示部３００を制御する表示制御部３１０と、表示部３００上に配置され、タッチされた位置を検出するタッチ式の第１の入力部３２０Ａと、筐体の前記一面に対向する面に配置され、タッチされた位置を検出するタッチ式の第２の入力部３２０Ｂと、第１の入力部３２０Ａが検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、第２の入力部３２０Ｂが検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部３３０と、特定部３３０が特定した操作対象画像に対応するアクションを実行する実行部３４０と、を備える情報処理装置の実施形態を広く含むものである。

　例えば、表示部３００は、前述の表示部１００と同様の構成及び機能を有す。表示制御部３１０は、制御部１２０と記憶部１３０の表示制御に関わる機能等を備える。第１の入力部３２０Ａと第２の入力部３２０Ｂとは、第１の入力部１１０Ａ、第２の入力部１１０Ｂ等と同様の構成と機能を備える。特定部３３０は、制御部１２０が記憶部１３０に記憶されたプログラムを実行することによって、いずれか入力部を介して操作された操作対象画像を特定する機能を備える。実行部３４０は、制御部１２０が記憶部１３０に記憶されたプログラムを実行することによって、特定された操作対象画像に割り付けられているアクションを実行する機能等を備える。

　なお、上記各実施形態において、実行されるプログラムは、フレキシブルディスク、ＣＤ－ＲＯＭ（Compact Disc Read-Only Memory）、ＤＶＤ（Digital Versatile Disc）、ＭＯ（Magneto-Optical disc）等のコンピュータ読み取り可能な記録媒体に格納して配布し、そのプログラムをインストールすることにより、上述の処理を実行するシステムを構成することとしてもよい。

　また、プログラムをインターネット等の通信ネットワーク上の所定のサーバ装置が有するディスク装置等に格納しておき、例えば、搬送波に重畳させて、ダウンロード等するようにしてもよい。

　なお、上述の機能を、ＯＳが分担して実現する場合又はＯＳとアプリケーションとの協働により実現する場合等には、ＯＳ以外の部分のみを媒体に格納して配布してもよく、また、ダウンロード等してもよい。

　本発明は、本発明の広義の精神と範囲を逸脱することなく、様々な実施の形態や変形が可能である。また、上述した実施の形態は、本発明を説明するためのものであり、本発明の範囲を限定するものではない。すなわち、本発明の範囲は、実施の形態ではなく、特許請求の範囲によって示される。そして、特許請求の範囲内及びそれと同等の発明の意義の範囲内で施される様々な変形が、本発明の範囲内とみなされる。
　上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

（付記１）
　筐体の一面に配置された表示部と、
　複数画層に配置された操作対象画像を表示するように前記表示部を制御する表示制御部と、
　前記表示部上に配置され、該表示部におけるタッチ位置を検出する第１の入力部と、
　前記筐体の一面に対向する対向面に配置され、前記表示部におけるタッチ位置を検出する第２の入力部と、
　前記第１の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記第２の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部と、
　前記特定部が特定した操作対象画像に対応するアクションを実行する実行部と、
　を備えることを特徴とする情報処理装置。

（付記２）
　前記筐体の対向面に配置された表示部をさらに有し、
　前記第２の入力部は、前記対向面に配置された表示部上に配置され、
　前記表示制御部は、最上層の画層に配置された操作対象画像を、ユーザから見て画面の手前に表示するように前記一面に配置された表示部を制御し、最下層の画層に配置された操作対象画像を、ユーザから見て画面の手前に表示するように前記対向面に配置された表示部を制御する、
　ことを特徴とする付記１に記載の情報処理装置。

（付記３）
　前記特定部は、前記第１の入力部又は前記第２の入力部のうち一方の入力部がタッチ位置を検出しているときに、他方の入力部がタッチ位置を検出すると、前記一方の入力部が検出しているタッチ位置に操作対象画像があるか否かを判別し、
　前記実行部は、前記特定部が操作対象画像があると判別すると、該操作対象画像に対応するアクションとは異なるアクションを実行する、
　付記１又は２に記載の情報処理装置。

（付記４）
　複数画層に配置された操作対象画像を表示するように、筐体の一面に配置された表示部を制御する表示制御ステップと、
　前記表示部上に配置された第１の入力部が検出した前記表示部におけるタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記筐体の一面に対向する対向面に配置された第２の入力部が検出した前記表示部におけるタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定ステップと、
　前記特定した操作対象画像に対応するアクションを実行する実行ステップと、
　を備えたことを特徴とする情報処理方法。

（付記５）
　コンピュータを、
　筐体の一面に配置された表示部、
　複数画層に配置された操作対象画像を表示するように前記表示部を制御する表示制御部、
　前記表示部上に配置され、該表示部におけるタッチ位置を検出する第１の入力部、
　前記筐体の一面に対向する対向面に配置され、前記表示部におけるタッチ位置を検出する第２の入力部、
　前記第１の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記第２の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部、
　前記特定部が特定した操作対象画像に対応するアクションを実行する実行部、
　として機能させるプログラムを記録したコンピュータ読み取り可能な記録媒体。

　本発明は、２０１２年１０月１日に出願された日本国特許出願２０１２－２１９６９１号に基づく。本明細書中に日本国特許出願２０１２－２１９６９１号の明細書、特許請求の範囲、図面全体を参照として取り込むものとする。

１０　携帯端末
１００、３００　表示部
１１０Ａ、３２０Ａ　第１の入力部
１１０Ｂ、３２０Ｂ　第２の入力部
１２０　制御部
１３０　記憶部
１３１　操作画像特定プログラム
１３２　画像情報記憶部
１３２１　画像情報テーブル
１４０Ａ　第１の筐体
１４０Ｂ　第２の筐体
１５０　２軸ヒンジ
２００　壁紙
２１０　アイコン
２２０　アプリケーション固有の入力画面
３１０　表示制御部
３３０　特定部
３４０　実行部

Claims

　筐体の一面に配置された表示部と、
　複数画層に配置された操作対象画像を表示するように前記表示部を制御する表示制御部と、
　前記表示部上に配置され、該表示部におけるタッチ位置を検出する第１の入力部と、
　前記筐体の一面に対向する対向面に配置され、前記表示部におけるタッチ位置を検出する第２の入力部と、
　前記第１の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記第２の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部と、
　前記特定部が特定した操作対象画像に対応するアクションを実行する実行部と、
　を備えることを特徴とする情報処理装置。
　前記筐体の対向面に配置された表示部をさらに有し、
　前記第２の入力部は、前記対向面に配置された表示部上に配置され、
　前記表示制御部は、最上層の画層に配置された操作対象画像を、ユーザから見て画面の手前に表示するように前記一面に配置された表示部を制御し、最下層の画層に配置された操作対象画像を、ユーザから見て画面の手前に表示するように前記対向面に配置された表示部を制御する、
　ことを特徴とする請求項１に記載の情報処理装置。
　前記特定部は、前記第１の入力部又は前記第２の入力部のうち一方の入力部がタッチ位置を検出しているときに、他方の入力部がタッチ位置を検出すると、前記一方の入力部が検出しているタッチ位置に操作対象画像があるか否かを判別し、
　前記実行部は、前記特定部が操作対象画像があると判別すると、該操作対象画像に対応するアクションとは異なるアクションを実行する、
　請求項１又は２に記載の情報処理装置。
　複数画層に配置された操作対象画像を表示するように、筐体の一面に配置された表示部を制御する表示制御ステップと、
　前記表示部上に配置された第１の入力部が検出した前記表示部におけるタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記筐体の一面に対向する対向面に配置された第２の入力部が検出した前記表示部におけるタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定ステップと、
　前記特定した操作対象画像に対応するアクションを実行する実行ステップと、
　を備えたことを特徴とする情報処理方法。
　コンピュータを、
　筐体の一面に配置された表示部、
　複数画層に配置された操作対象画像を表示するように前記表示部を制御する表示制御部、
　前記表示部上に配置され、該表示部におけるタッチ位置を検出する第１の入力部、
　前記筐体の一面に対向する対向面に配置され、前記表示部におけるタッチ位置を検出する第２の入力部、
　前記第１の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最上層の画層に配置されている操作対象画像を特定し、前記第２の入力部が検出したタッチ位置に表示されている操作対象画像のうち、最下層の画層に配置されている操作対象画像を特定する特定部、
　前記特定部が特定した操作対象画像に対応するアクションを実行する実行部、
　として機能させるプログラムを記録したコンピュータ読み取り可能な記録媒体。