JP6724259B2 - 操作装置、その作動方法および作動プログラム - Google Patents

Description

本発明は、操作装置、その作動方法および作動プログラムに関する。

タッチパネルディスプレイを搭載した操作装置が普及している。タッチパネルディスプレイは、液晶ディスプレイ等の表示部、および表示部の画面に重ねて配置される透明なタッチ式操作部（タッチパッドともいう）で構成される。タッチパネルディスプレイは、表示部の画面に操作対象を表示し、かつタッチ式操作部に対するユーザの指の接触によるジェスチャー操作（以下、第１操作）を認識する。

第１操作には、例えばスワイプ操作とフリック操作がある。スワイプ操作は、タッチ式操作部に指を接触させ、そのまま一定方向にゆっくり指を移動させ、その後タッチ式操作部から指を離す操作である。フリック操作は、タッチ式操作部に指を接触させ、そのまま一定方向に素早く指を払ってタッチ式操作部から指を離す操作である。

タッチパネルディスプレイを搭載した操作装置では、操作対象として、一覧画像あるいはカーソルが表示部の画面に表示される。一覧画像は、複数の選択候補が配列されたものであり、カーソルは、一覧画像内に配列された複数の選択候補のうちの１つを選択するためのものである。一覧画像あるいはカーソルは、上記のスワイプ操作またはフリック操作に応じて、画面に対して移動される。

タッチパネルディスプレイを搭載した操作装置には、例えば特許文献１に記載のデジタルカメラのように、タッチ式操作部では不自由な操作を補うために、タッチ式操作部に加えて、機械式操作部を備えるものがある。機械式操作部は、方向指示キーや回転ホイールといった、機械的な構造を有し、凹凸形状等の触覚的に知覚可能な形状および操作感をもつ操作部である。

特許文献１に記載のデジタルカメラでは、複数の撮影画像を配列した一覧画像が、操作対象として表示部の画面に表示される。そして、この一覧画像の画面に対する上下方向の移動（スクロール）を、以下の３つの方法のいずれかで指示している。まず第１の方法は、方向指示キーの上方向の操作で、一覧画像を画面に対して下方向に移動させ、逆に方向指示キーの下方向の操作で、一覧画像を画面に対して上方向に移動させるものである。一覧画像が画面に対して下方向に移動されると、それまで画面上方に非表示になっていた一覧画像の部分が画面に表示されることとなる。反対に一覧画像が画面に対して上方向に移動されると、画面下方に非表示になっていた一覧画像の部分が画面に表示される。

一覧画像の画面に対する上下方向の移動を指示する第２の方法は、回転ホイールの時計回りの操作で、一覧画像を画面に対して上方向に移動させ、逆に回転ホイールの反時計回りの操作で、一覧画像を画面に対して下方向に移動させるものである。第３の方法は、タッチ式操作部への上方向のスワイプ操作またはフリック操作で、一覧画像を画面に対して上方向に移動させ、逆にタッチ式操作部への下方向のスワイプ操作またはフリック操作で、一覧画像を画面に対して下方向に移動させるものである。なお、以下では、方向指示キーや回転ホイールといった機械式操作部に対して行われる操作を、第２操作という。

特開２０１２−０３７９７４号公報

特許文献１に記載のデジタルカメラのように、操作装置では、第１操作および第２操作の方向と、各操作に応じて画面に対して移動する操作対象（特許文献１では一覧画像）の移動方向とは、予め設定されていて固定である。したがって、この固定された設定に最初の操作で違和感を覚えたユーザは、慣れるまでは違和感を引き摺ったまま操作を行わなければならなかった。

例えば、タッチ式操作部と方向指示キーとで、第１操作および第２操作の方向と操作対象の移動方向の設定が一致している操作装置に慣れ親しんだユーザがいたとする。このユーザが、特許文献１に記載のデジタルカメラのように、タッチ式操作部と方向指示キーとで、第１操作および第２操作の方向と操作対象の移動方向の設定が異なる操作装置を操作した場合を考える。この場合、当該ユーザは、慣れ親しんだ操作装置と設定が異なるために戸惑い、操作前に一瞬考えてしまったり操作ミスを犯してしまったりする。

本発明は、ユーザが違和感を覚えることなく操作することが可能な操作装置、その作動方法および作動プログラムを提供することを目的とする。

上記課題を解決するために、本発明の操作装置は、操作対象を表示する画面を有する表示部、および画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部と、タッチ式操作部に対して行われる第１操作の方向と、第１操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第１対応関係、および機械式操作部に対して行われる第２操作の方向と、第２操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付部と、第１対応関係および第２対応関係を、設定指示に応じて設定する設定部と、第１操作または第２操作が行われた場合に、設定部で設定された第１対応関係または第２対応関係に基づいて画面に対する操作対象の移動方向を決定する決定部と、決定部で決定された移動方向に操作対象を移動させる表示制御部とを備える。

設定部は、操作対象別に第１対応関係および第２対応関係を設定することが好ましい。

操作対象は、複数の選択候補が配列された一覧画像、または一覧画像内に配列された複数の選択候補のうちの１つを選択するためのカーソルの少なくとも１つを含むことが好ましい。

カーソルが画面の範囲内で移動している場合は、カーソルが操作対象となり、カーソルが画面の端に移動されて、さらにカーソルを画面の範囲外に移動させる方向に第１操作、もしくは第２操作が行われた場合は、一覧画像が操作対象に変更されることが好ましい。

画面には、固定された背景画像に対して、複数の選択候補が配列された一覧画像が操作対象として表示され、選択候補に対応する部分への第１操作を、選択候補を第１操作の方向に移動させる旨のコマンドに変換し、背景画像に対応する部分への第１操作を、第１対応関係に基づいて一覧画像を移動させる旨のコマンドに変換して表示制御部に出力するコマンド出力部を備えることが好ましい。

前回の第１操作、もしくは前回の第２操作からの経過時間を計時する計時部を備え、表示制御部は、経過時間が予め設定された閾値以上であった場合と、経過時間が閾値未満であって、かつ前回の操作と今回の操作のいずれも第１操作または第２操作であった場合は、第１対応関係および第２対応関係のうちの今回の操作に関する対応関係に基づく操作対象の移動を実行し、経過時間が閾値未満であって、かつ前回の操作が第１操作で今回の操作が第２操作であった場合、もしくは前回の操作が第２操作で今回の操作が第１操作であった場合は、第１対応関係および第２対応関係のうちの前回の操作に関する対応関係に基づく操作対象の移動を実行することが好ましい。

第１操作は、タッチ式操作部に指を接触させ、そのまま一定方向にゆっくり指を移動させ、その後タッチ式操作部から指を離すスワイプ操作、または、タッチ式操作部に指を接触させ、そのまま一定方向に素早く指を払ってタッチ式操作部から指を離すフリック操作の少なくとも１つを含むことが好ましい。

機械式操作部は、上下左右方向に操作される方向指示キー、または、時計回りおよび反時計回りに回転操作される回転ホイールの少なくとも１つであることが好ましい。

撮像装置に用いられることが好ましい。

本発明の操作装置の作動方法は、操作対象を表示する画面を有する表示部、および画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部とを備える操作装置の作動方法において、タッチ式操作部に対して行われる第１操作の方向と、第１操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第１対応関係、および機械式操作部に対して行われる第２操作の方向と、第２操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付ステップと、第１対応関係および第２対応関係を、設定指示に応じて設定する設定ステップと、第１操作または第２操作が行われた場合に、設定ステップで設定された第１対応関係または第２対応関係に基づいて画面に対する操作対象の移動方向を決定する決定ステップと、決定ステップで決定された移動方向に操作対象を移動させる表示制御ステップとを備える。

本発明の操作装置の作動プログラムは、操作対象を表示する画面を有する表示部、および画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部とを備える操作装置の作動プログラムにおいて、タッチ式操作部に対して行われる第１操作の方向と、第１操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第１対応関係、および機械式操作部に対して行われる第２操作の方向と、第２操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付機能と、第１対応関係および第２対応関係を、設定指示に応じて設定する設定機能と、第１操作または第２操作が行われた場合に、設定機能で設定された第１対応関係または第２対応関係に基づいて画面に対する操作対象の移動方向を決定する決定機能と、決定機能で決定された移動方向に操作対象を移動させる表示制御機能とを、コンピュータに実行させる。

本発明は、タッチ式操作部に対して行われる第１操作の方向と、第１操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第１対応関係、および機械式操作部に対して行われる第２操作の方向と、第２操作に応じて操作対象が画面に対して移動する移動方向との対応関係である第２対応関係を、設定指示に応じて設定し、第１操作または第２操作が行われた場合に、設定された第１対応関係または第２対応関係に基づいて画面に対する操作対象の移動方向を決定して、決定された移動方向に操作対象を移動させるので、ユーザの好みに応じた第１対応関係および第２対応関係を設定することができ、これらの対応関係に基づいて操作対象を移動させることができる。したがって、ユーザが違和感を覚えることなく操作することが可能な操作装置、その作動方法および作動プログラムを提供することができる。

デジタルカメラの正面外観斜視図である。 デジタルカメラの背面外観斜視図である。 タッチパネルディスプレイの模式図である。 スワイプ操作またはフリック操作の様子を示す図である。 一覧画像を示す図である。 設定画像を示す図である。 デジタルカメラのブロック図である。 デジタルカメラのＣＰＵのブロック図である。 第１操作認識用情報を示す図である。 コマンド変換用情報を示す図である。 第１対応関係情報を示す図である。 第２対応関係情報を示す図である。 第１対応関係および第２対応関係を設定する様子を概略的に示す図である。 第１対応関係に基づいて一覧画像の移動方向を決定し、決定した移動方向に一覧画像を移動させる様子を概略的に示す図である。 第２対応関係に基づいて一覧画像の移動方向を決定し、決定した移動方向に一覧画像を移動させる様子を概略的に示す図である。 デジタルカメラの処理手順を示すフローチャートである。 デジタルカメラの処理手順を示すフローチャートである。 デジタルカメラの処理手順を示すフローチャートである。 カーソルが操作対象とされる第２実施形態の一覧画像を示す図である。 第２実施形態の第１対応関係情報を示す図である。 第２実施形態の第２対応関係情報を示す図である。 第２実施形態のコマンド変換用情報を示す図である。 第１対応関係に基づいてカーソルの移動方向を決定し、決定した移動方向に一覧画像を移動させる様子を概略的に示す図である。 第３実施形態の第１対応関係情報を示す図である。 第３実施形態の第２対応関係情報を示す図である。 第３実施形態のコマンド変換用情報を示す図である。 カーソルが操作対象となる場合を示す図である。 一覧画像が操作対象となる場合を示す図である。 第１対応関係に基づいて一覧画像の移動方向を決定し、決定した移動方向に一覧画像を移動させる様子を概略的に示す図である。 第３実施形態のデジタルカメラの処理手順を示すフローチャートである。 項目に対応する部分にスワイプ操作またはフリック操作が行われている様子を示す図である。 背景画像に対応する部分にスワイプ操作またはフリック操作が行われている様子を示す図である。 第４実施形態のコマンド変換用情報を示す図である。 項目に対応する部分へのスワイプ操作またはフリック操作に応じて項目を移動させる様子を概略的に示す図である。 第５実施形態のコマンド出力部を示すブロック図である。 第５実施形態のデジタルカメラの処理手順を示すフローチャートである。 回転ホイールを有する機械式操作部群を示す図である。 図３７に示す機械式操作部群を用いた場合の第２対応関係情報を示す図である。

［第１実施形態］
図１および図２において、撮像装置としてのデジタルカメラ１０の正面には、レンズ鏡筒１１が設けられている。レンズ鏡筒１１には、撮像光学系１２が内蔵されている。レンズ鏡筒１１は交換可能であり、デジタルカメラ１０はいわゆるレンズ交換式である。

レンズ鏡筒１１の奥には、イメージセンサ１３が配置されている（図７参照）。イメージセンサ１３は、例えば、ＣＣＤ（Charge Coupled Device）型、あるいはＣＭＯＳ（Complementary Metal Oxide Semiconductor）型であり、矩形状の撮像面を有している。撮像面には、複数の画素がマトリックス状に配列されている。画素は、撮像光学系１２を介して撮像面に結像された被写体像を光電変換して、被写体の画像データの元となる撮像信号を出力する。

デジタルカメラ１０の上面には、電源レバー１４、レリーズスイッチ１５、ホットシュー１６等が設けられている。電源レバー１４は、デジタルカメラ１０の電源をオンオフする際に操作される。ホットシュー１６には、外付けのフラッシュ装置が着脱自在に取り付けられる。

レリーズスイッチ１５は、静止画撮影を指示する際、あるいは動画撮影の開始、終了を指示する際に操作される。レリーズスイッチ１５は２段押下型である。レリーズスイッチ１５が１段目まで押された（半押しされた）場合、自動焦点調節や自動露出制御等の周知の撮影準備処理が実行される。レリーズスイッチ１５が２段目まで押された（全押しされた）場合、イメージセンサ１３に本撮影動作（画素に電荷を蓄積させ、蓄積電荷に応じた撮像信号を出力させる動作）を実行させ、これによりイメージセンサ１３から出力された画像データを撮影画像として記録する撮影処理が実行される。

ファインダ部１７は、正面に配され、被写体像を取り込む対物窓１８と、背面に配され、ユーザの眼が接眼される接眼窓１９とを有する。ユーザは、このファインダ部１７を通じて、撮影する被写体像の構図を確認することができる。

デジタルカメラ１０の背面には、タッチパネルディスプレイ２０、機械式操作部群２１等が設けられている。タッチパネルディスプレイ２０は、イメージセンサ１３からの画像データで表される被写体の撮影画像をリアルタイムで表示する、いわゆるライブビュー表示を行う。ライブビュー表示の他にも、タッチパネルディスプレイ２０は、記録された撮影画像の再生表示を行ったり、選択候補としての各種項目３６が配列された一覧画像３５（図５参照）や、第１対応関係および第２対応関係を設定するための設定画像４０（図６参照）といった各種画像の表示を行う。

機械式操作部群２１は、方向指示キー２２と、メニュー／決定ボタン２３とで構成される。これらは機械的な構造を有し、凹凸形状等の触覚的に知覚可能な形状および操作感をもつ。方向指示キー２２は、上下左右方向の各方向を指示するための４個のキーで構成され、各種項目３６を選択する際等に操作される。メニュー／決定ボタン２３は、機械式操作部群２１の中央に配され、一覧画像３５を表示させる際、各種項目の選択を確定する際等に操作される。なお、図１および図２において符号２４で示す部分は、メモリカード６６（図７参照）が着脱可能に装着されるメモリカードスロットを覆う蓋である。

図３は、タッチパネルディスプレイ２０の構成を模式的に表したものである。タッチパネルディスプレイ２０は、表示部３０とタッチ式操作部３１とで構成される。表示部３０は、例えば液晶ディスプレイであり、その画面３２には前述のように各種画像が表示される。タッチ式操作部３１は、周知のように、互いに直交する２層の透明電極と、２層の透明電極を隔てる透明な絶縁層と、最上層に被せられる透明な保護カバーとを有する。タッチ式操作部３１は、透明電極でユーザの指Ｆ（図４参照）の接触を感知して検知信号を出力する。タッチ式操作部３１は、表示部３０の画面３２に重ねて配置される。タッチパネルディスプレイ２０は、これら表示部３０およびタッチ式操作部３１が一体化された状態で、図２で示したようにデジタルカメラ１０の背面に取り付けられる。

タッチパネルディスプレイ２０は、タッチ式操作部３１に対するユーザの指Ｆの接触によるジェスチャー操作である第１操作を認識する。第１操作には、例えばスワイプ操作とフリック操作がある。スワイプ操作は、タッチ式操作部３１に指Ｆを接触させ、そのまま一定方向にゆっくり指Ｆを移動させ、その後タッチ式操作部３１から指Ｆを離す操作である。フリック操作は、タッチ式操作部３１に指Ｆを接触させ、そのまま一定方向に素早く指Ｆを払ってタッチ式操作部３１から指Ｆを離す操作である。スワイプ操作またはフリック操作は、機械式操作部群２１の方向指示キー２２と同じく、各種項目３６を選択する際等に行われる。

図４は、タッチ式操作部３１への上方向のスワイプ操作またはフリック操作の様子を示している。ユーザは、タッチ式操作部３１の適当な位置に指Ｆ（ここでは人差し指）を接触させ、破線の矢印で示すように、上方向にゆっくり指Ｆを移動させるか（スワイプ操作）、上方向に素早く指Ｆを払い（フリック操作）、その後タッチ式操作部３１から指Ｆを離す。

第１操作としては、図４に例示したスワイプ操作、フリック操作の他に、タップ操作、ピンチイン操作、ピンチアウト操作等がある。タップ操作は、タッチ式操作部３１を指Ｆで叩く操作であり、１回叩くシングルタップ操作と２回連続して叩くダブルタップ操作がある。ピンチイン操作は、親指と人差し指等の少なくとも２本の指Ｆを離した状態でタッチ式操作部３１に接触させた後、２本の指Ｆを互いに近付く方向に移動させる操作である。ピンチアウト操作は逆に、２本の指Ｆを近付けた状態でタッチ式操作部３１に接触させた後、２本の指Ｆを互いに離れる方向に移動させる操作である。

タップ操作は、機械式操作部群２１のメニュー／決定ボタン２３と同じく、項目３６の選択を確定する際等に行われる。ピンチイン操作は、再生表示された撮影画像を縮小する際等に行われ、ピンチアウト操作は、再生表示された撮影画像を拡大する際等に行われる。

図５において、一覧画像３５は、選択候補としての項目３６（項目Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、・・・）を縦方向に配列したものである。一覧画像３５は、縦方向のサイズが画面３２に一度に収まりきらない大きさである。このため、一覧画像３５は、矢印で示すように、第１操作および第２操作に応じて、画面３２に対して上下に移動する。すなわち、本実施形態においては、一覧画像３５が操作対象となる。

第１操作は、具体的には上方向のスワイプ操作およびフリック操作と、下方向のスワイプ操作およびフリック操作である。第２操作は、機械式操作部である方向指示キー２２を通じて行われる操作であり、具体的には方向指示キー２２の上方向の操作と、方向指示キー２２の下方向の操作である。

一覧画像３５には、複数の項目３６のうちの１つを選択するためのカーソル３７が表示される。カーソル３７は、画面３２の上端に表示が固定されている。このため、本実施形態においては、カーソル３７は操作対象ではない。なお、項目３６は、例えば撮影画像に施す視覚エフェクト（モノクロ、セピア、ビビット等）の選択肢である。

一覧画像３５は、ハッチングで示す背景画像３８に重畳される。背景画像３８は、例えば予め設定された無地の画像、もしくはユーザが選択した撮影画像であり、画面３２に対して表示が固定されている。なお、図５では、一覧画像３５の幅を項目３６の幅よりも大きくし、一覧画像３５に余白を設けているが、一覧画像３５の幅を項目３６の幅と同じにし、一覧画像３５に余白を設けなくてもよい。

図６において、設定画像４０は、第１対応関係および第２対応関係を設定する際に表示部３０の画面３２に表示される操作画像である。第１対応関係とは、第１操作の方向と、第１操作に応じて操作対象である一覧画像３５が画面３２に対して移動する移動方向との対応関係である。また、第２対応関係とは、第２操作の方向と、第２操作に応じて一覧画像３５が画面３２に対して移動する移動方向との対応関係である。

設定画像４０には、各操作の方向に対する一覧画像３５の移動方向を、上下のいずれかに択一的に設定するためのラジオボタン４１と、設定ボタン４２とキャンセルボタン４３とが設けられる。設定ボタン４２が選択された場合、そのときのラジオボタン４１の選択状態が第１対応関係および第２対応関係として設定される。一方、キャンセルボタン４３が選択された場合は、設定画像４０が画面３２から消去される。

図６では、上方向のスワイプ操作およびフリック操作に対して、一覧画像３５の移動方向に下が設定されている。一方、下方向のスワイプ操作およびフリック操作に対しては、一覧画像３５の移動方向に上が設定されている。そして、方向指示キー２２の上方向の操作に対して、一覧画像３５の移動方向に上、方向指示キー２２の下方向の操作に対して、一覧画像３５の移動方向に下がそれぞれ設定されている。

図７において、撮像光学系１２は、移動レンズ５０と、絞り機構５１とを備える。移動レンズ５０は、焦点調節用のフォーカスレンズおよびズーム用のズームレンズであり、光軸ＯＡに沿って移動する。絞り機構５１は、周知のように、複数枚の絞り羽根を有する。絞り羽根は略円形の絞り開口を形成し、この絞り開口の大きさを変化させることで入射光量を制限する。なお、図示および説明は省略するが、撮像光学系１２は、移動レンズ５０の他にも様々なレンズを有している。

デジタルカメラ１０は、アナログ処理部（ＡＦＥ；Analog Front End）５５およびデジタル信号処理部（ＤＳＰ；Digital Signal Processor）５６、センサ制御部５７、光学系制御部５８、ＣＰＵ（Central Processing Unit）５９、フレームメモリ６０、カード制御部６１、および記憶部６２を備える。これらはデータバス６３で相互に接続されている。

ＡＦＥ５５は、イメージセンサ１３からのアナログの撮像信号に対して、相関二重サンプリング処理や増幅処理、アナログ／デジタル変換処理を施し、所定のビット数に応じた階調値を持つ画像データに変換してＤＳＰ５６に出力する。ＤＳＰ５６は、ＡＦＥ５５からの画像データに対して、ガンマ補正処理、欠陥画素補正処理、ホワイトバランス補正処理、同時化処理等の周知の信号処理を施す。

センサ制御部５７はイメージセンサ１３の動作を制御する。具体的には、センサ制御部５７は、ＣＰＵ５９から入力される基準クロック信号に同期したセンサ制御信号をイメージセンサ１３に出力し、イメージセンサ１３に所定のフレームレートで撮像信号を出力させる。

光学系制御部５８は、自動焦点調節時、移動レンズ５０を合焦位置に移動させる。また、光学系制御部５８は、自動露出制御時、演算した開度となるよう絞り機構５１の絞り羽根を開閉させる。

ＣＰＵ５９は、記憶部６２に記憶された作動プログラム６５に基づいて、デジタルカメラ１０の各部の動作を統括的に制御する。例えばＣＰＵ５９は、レリーズスイッチ１５の半押しに応じて撮影準備処理を実行し、レリーズスイッチ１５の全押しに応じて撮影処理を実行する。また、ＣＰＵ５９は、機械式操作部群２１からの操作信号に応じた処理を実行する。なお、図７では、レリーズスイッチ１５および機械式操作部群２１のみを図示しているが、前述の電源レバー１４をはじめとした他の機械式操作部もデータバス６３に接続され、これらからの操作信号に応じた処理がＣＰＵ５９で実行される。

フレームメモリ６０は、ＤＳＰ５６で各種信号処理が施された１フレーム分の画像データを記憶する。フレームメモリ６０に記憶される画像データは、所定のフレームレートで随時更新される。

カード制御部６１は、メモリカード６６への撮影画像の記録、およびメモリカード６６からの撮影画像の読み出しを制御する。レリーズスイッチ１５の全押しに伴う撮影処理においては、カード制御部６１は、そのときフレームメモリ６０に記憶されていた画像データを、撮影画像としてメモリカード６６に記録する。

図８において、記憶部６２には、前述の作動プログラム６５に加えて、第１操作認識用情報７０（図９参照）、コマンド変換用情報７１（図１０参照）、第１対応関係情報７２（図１１参照）、および第２対応関係情報７３（図１２参照）が記憶されている。

作動プログラム６５が起動されると、ＣＰＵ５９は、第１受付部８０、第２受付部８１、認識部８２、コマンド出力部８３、情報管理部８４、および表示制御部８５として機能する。

第１受付部８０は、タッチ式操作部３１に対して行われる第１操作による操作指示（以下、第１操作指示）を受け付ける。第１受付部８０は、第１操作指示を認識部８２に出力する。一方、第２受付部８１は、機械式操作部群２１に対して行われる第２操作による操作指示（以下、第２操作指示）を受け付ける。第２受付部８１は、第２操作指示をコマンド出力部８３に出力する。

第１操作指示は、タッチ式操作部３１に対する指Ｆの接触位置、および移動軌跡を示す座標情報、タッチ式操作部３１に対する指Ｆの接触本数、接触時間、単位時間当たりの接触回数といった情報を含む。座標は、例えば、タッチ式操作部３１を構成する、互いに直交する２層の透明電極の交点を示す２組の数字である。一方、第２操作指示は、方向指示キー２２の上下左右の各キーのいずれかの操作信号と、その操作時間を示す情報、並びにメニュー／決定ボタン２３の操作信号である。

第１操作指示および第２操作指示には、第１対応関係および第２対応関係の設定指示が含まれる。設定指示は、設定画像４０の設定ボタン４２が選択されたときに、タッチ式操作部３１から第１受付部８０に、もしくは機械式操作部群２１から第２受付部８１に出力される。つまり、第１受付部８０および第２受付部８１は、設定指示を受け付ける受付部に相当し、設定指示の受付機能を担う。

認識部８２は、第１操作認識用情報７０を参照して、第１受付部８０からの第１操作指示の元である第１操作が、前述のスワイプ操作、フリック操作、タップ操作、ピンチイン操作、ピンチアウト操作等のいずれであるかを認識する。そして、スワイプ操作、フリック操作、ピンチイン操作、ピンチアウト操作の場合は、指Ｆの移動軌跡から指Ｆの移動量および移動速度を認識する。認識部８２は、認識結果をコマンド出力部８３に出力する。

コマンド出力部８３は、コマンド変換用情報７１と表示制御部８５からの表示ステータスとを参照して、認識部８２からの認識結果、および第２受付部８１からの第２操作指示をコマンドに変換する。そして、変換したコマンドを、情報管理部８４、表示制御部８５といった各種処理部に出力する。コマンドは、認識結果（言い換えれば第１操作指示）および第２操作指示を、情報管理部８４、表示制御部８５等が理解可能な形態に変換したものである。表示ステータスは、撮影画像の再生表示状態、一覧画像３５の表示状態等、表示部３０の画面３２への各種画像の表示状況を示す情報である。

情報管理部８４は、各種情報７０〜７３の記憶部６２への書き込み、および各種情報７０〜７３の記憶部６２からの読み出しを管理する。例えば、情報管理部８４は、第１操作認識用情報７０を認識部８２に受け渡し、コマンド変換用情報７１をコマンド出力部８３に受け渡す。

表示制御部８５は、表示部３０の画面３２への各種画像の表示を制御する表示制御機能を担う。表示制御部８５は、各種画像の表示状態を表示ステータスとしてコマンド出力部８３に出力する。このため、コマンド出力部８３は表示ステータスを常に把握している。

なお、ＣＰＵ５９には、これら各部の他にも、一覧画像３５で項目３６として選択された視覚エフェクトを撮影画像に施す画像処理部等が設けられている。

図９において、第１操作認識用情報７０は、タッチ式操作部３１への指Ｆの接触本数、移動軌跡、接触時間、単位時間当たりの接触回数に対する第１操作を登録したものである。例えば接触本数が１本、移動軌跡が１点、接触時間がＴ１（例えば１秒未満）、接触回数が１回の場合はシングルタップ操作が登録されている。また、接触本数が１本、移動軌跡が上方向、接触時間がＴ２（例えば１秒以上）の場合は上方向のスワイプ操作が、接触本数および移動軌跡は同じで、接触時間がＴ１の場合は上方向のフリック操作が、それぞれ登録されている。

認識部８２は、第１受付部８０からの第１操作指示に含まれるタッチ式操作部３１への指Ｆの接触本数、移動軌跡、接触時間、単位時間当たりの接触回数と一致する第１操作を、第１操作認識用情報７０から抽出する。そして、この抽出した第１操作を認識結果としてコマンド出力部８３に出力する。例えば第１操作指示に含まれるタッチ式操作部３１への指Ｆの接触本数が２本、移動軌跡が近付く方向であった場合、認識部８２は、第１操作認識用情報７０からピンチイン操作を抽出し、これをコマンド出力部８３に出力する。

図１０において、コマンド変換用情報７１は、認識結果（第１操作）または第２操作と、表示ステータスとに対するコマンドを登録したものである。例えば、一覧画像３５において所望の項目３６がカーソル３７で選択されている表示ステータスで、第１操作としてシングルタップ操作が行われた場合、または第２操作としてメニュー／決定ボタン２３が操作された場合は、項目３６の選択を確定する旨のコマンドが登録されている。一方、設定画像４０において設定ボタン４２が選択されている表示ステータスで、第１操作としてシングルタップ操作が行われた場合、または第２操作としてメニュー／決定ボタン２３が操作された場合は、第１対応関係および第２対応関係を設定する旨のコマンドが登録されている。このように、表示ステータスが異なれば、第１操作および第２操作が同じでもコマンドは異なる。

さらに、一覧画像３５において項目３６が選択されている表示ステータスで、第１操作として上方向のスワイプ操作またはフリック操作が行われた場合は、一覧画像３５を下方向に移動させる旨のコマンドが登録されている。一方、第２操作として方向指示キー２２の上方向の操作が行われた場合は、一覧画像３５を上方向に移動させる旨のコマンドが登録されている。

また、一覧画像３５において項目３６が選択されている表示ステータスで、第１操作として下方向のスワイプ操作またはフリック操作が行われた場合は、一覧画像３５を上方向に移動させる旨のコマンドが登録されている。一方、第２操作として方向指示キー２２の下方向の操作が行われた場合は、一覧画像３５を下方向に移動させる旨のコマンドが登録されている。

図１１において、第１対応関係情報７２は、第１操作の方向と操作対象である一覧画像３５の画面３２に対する移動方向、すなわち第１対応関係を登録したものである。同様に図１２において、第２対応関係情報７３は、第２操作の方向と一覧画像３５の画面３２に対する移動方向、すなわち第２対応関係を登録したものである。図１１および図１２では、図６で示した第１対応関係および第２対応関係がそれぞれ登録されている。なお、第１対応関係情報７２と第２対応関係情報７３を統合して１つの対応関係情報としてもよい。

図１３に示すように、コマンド出力部８３は、第１受付部８０または第２受付部８１からの設定指示に応じて、第１対応関係および第２対応関係を設定する旨のコマンドを情報管理部８４に出力する。情報管理部８４は、当該コマンドに応じて、第１対応関係を第１対応関係情報７２に、第２対応関係を第２対応関係情報７３に、それぞれ登録する。また、情報管理部８４は、コマンド変換用情報７１のスワイプ操作またはフリック操作の部分９０Ａ（図１０参照）のコマンドを、第１対応関係情報７２に基づいて登録し、方向指示キー２２の操作の部分９０Ｂ（図１０参照）のコマンドを、第２対応関係情報７３に基づいて登録する。これにより第１対応関係および第２対応関係が設定される。すなわち、情報管理部８４は、第１受付部８０または第２受付部８１で受け付けた設定指示に応じて第１対応関係および第２対応関係を設定する設定部に相当し、設定機能を担う。

なお、設定指示は、実際には認識部８２で認識されて、コマンド出力部８３には認識結果が出力されるが、図１３では説明を単純化するため、設定指示は第１受付部８０からコマンド出力部８３に出力されるとしている。

コマンド出力部８３は、第１操作または第２操作が行われた場合に、第１対応関係または第２対応関係に基づいて画面３２に対する一覧画像３５の移動方向を決定する。すなわち、コマンド出力部８３は決定部に相当し、決定機能を担う。コマンド出力部８３は、決定した移動方向に一覧画像３５を移動させる旨のコマンドを表示制御部８５に出力する。表示制御部８５は、コマンドで示される移動方向に一覧画像３５を移動させる。

図１４は、一覧画像３５において項目３６が選択されている表示ステータスで、第１操作として上方向のスワイプ操作またはフリック操作が行われた場合を示している。この場合、コマンド出力部８３は、第１対応関係情報７２に基づいて部分９０Ａが生成されたコマンド変換用情報７１を参照して、一覧画像３５を下方向に移動させる旨のコマンドを表示制御部８５に出力する。表示制御部８５は、当該コマンドに応じて、一覧画像３５を下方向に移動させる。

一覧画像３５は、上方向のスワイプ操作またはフリック操作が行われる前は、矢印Ａの左側に示すように、例えば項目Ｃがカーソル３７で選択された状態である。この状態から上方向のスワイプ操作またはフリック操作が行われた場合、一覧画像３５は、矢印Ａの右側に示すように下方向に移動されて、例えば項目Ｂがカーソル３７で選択された状態とされる。なお、下方向のスワイプ操作またはフリック操作が行われた場合は、一覧画像３５の移動方向が逆になるだけなので図示および説明を省略する。

一方、図１５は、一覧画像３５において項目３６が選択されている表示ステータスで、第２操作として方向指示キー２２の上方向の操作が行われた場合を示している。この場合、コマンド出力部８３は、図１４の場合とは逆に、一覧画像３５を上方向に移動させる旨のコマンドを表示制御部８５に出力する。表示制御部８５は、当該コマンドに応じて、一覧画像３５を上方向に移動させる。

矢印Ｂの左側は、図１４の矢印Ａの左側と同じく、項目Ｃがカーソル３７で選択された状態である。この状態から方向指示キー２２の上方向の操作が行われた場合、一覧画像３５は、矢印Ｂの右側に示すように上方向に移動されて、例えば項目Ｄがカーソル３７で選択された状態とされる。なお、方向指示キー２２の下方向の操作が行われた場合は、一覧画像３５の移動方向が逆になるだけなので図示および説明を省略する。

一覧画像３５の画面３２に対する移動量は、指Ｆの移動量および移動速度に依存する。指Ｆの移動量が大きく、かつ移動速度が速い程、一覧画像３５の画面３２に対する移動量は大きくなる。

前述のように、第１受付部８０および第２受付部８１は受付部に相当し、情報管理部８４は設定部に相当する。そして、コマンド出力部８３は決定部に相当する。したがって本発明の操作装置は、タッチパネルディスプレイ２０と、機械式操作部である方向指示キー２２と、受付部である第１受付部８０および第２受付部８１と、設定部である情報管理部８４と、決定部であるコマンド出力部８３と、表示制御部８５とで構成される。そして、本発明の操作装置は、撮像装置としてのデジタルカメラ１０に用いられる。

次に、上記構成による作用について、図１６〜図１８のフローチャートを参照して説明する。まず、図１６に示すように、設定画像４０において設定ボタン４２が選択されている表示ステータス（ステップＳＴ１００）で、シングルタップ操作またはメニュー／決定ボタン２３が操作された場合（ステップＳＴ１０１）、第１受付部８０または第２受付部８１で設定指示が受け付けられる（ステップＳＴ１０２、受付ステップ）。

図１３で示したように、設定指示は第１受付部８０または第２受付部８１からコマンド出力部８３に出力される。この設定指示に応じて、コマンド出力部８３から、第１対応関係および第２対応関係を設定する旨のコマンドが情報管理部８４に出力される（ステップＳＴ１０３）。そして、第１対応関係および第２対応関係を設定する旨のコマンドを受けた情報管理部８４により、第１対応関係が第１対応関係情報７２に、第２対応関係が第２対応関係情報７３に、それぞれ登録される。また、第１対応関係情報７２に基づいて、コマンド変換用情報７１のスワイプ操作またはフリック操作の部分９０Ａのコマンドが登録され、第２対応関係情報７３に基づいて、方向指示キー２２の操作の部分９０Ｂのコマンドが登録される。これにより第１対応関係および第２対応関係が設定される（ステップＳＴ１０４、設定ステップ）。

図１７に示すように、一覧画像３５において項目３６が選択されている表示ステータス（ステップＳＴ１１０）で、タッチ式操作部３１に対してスワイプ操作またはフリック操作が行われた場合（ステップＳＴ１１１でＹＥＳ）、図１４で示したように、コマンド出力部８３により、第１対応関係に基づいて一覧画像３５の画面３２に対する移動方向が決定される（ステップＳＴ１１２、決定ステップ）。

一方、スワイプ操作またはフリック操作ではなく、方向指示キー２２が操作された場合（ステップＳＴ１１１でＮＯ、ステップＳＴ１１３でＹＥＳ）、図１５で示したように、コマンド出力部８３により、第２対応関係に基づいて一覧画像３５の画面３２に対する移動方向が決定される（ステップＳＴ１１４、決定ステップ）。

一覧画像３５の移動方向の決定後、コマンド出力部８３から、決定した移動方向に一覧画像３５を移動させる旨のコマンドが表示制御部８５に出力される（ステップＳＴ１１５）。図１４の矢印Ａの右側および図１５の矢印Ｂの右側で示したように、表示制御部８５により、決定した移動方向に一覧画像３５が移動される（ステップＳＴ１１６、表示制御ステップ）。

図１８に示すように、一覧画像３５において項目３６が選択されている表示ステータス（ステップＳＴ１１０）で、シングルタップ操作またはメニュー／決定ボタン２３が操作された場合（ステップＳＴ１１７でＹＥＳ）、コマンド出力部８３から、項目３６の選択を確定する旨のコマンドが出力される（ステップＳＴ１１８）。これにより項目３６の選択が確定され、選択が確定された項目３６に応じた処理が実行される。例えば項目３６が撮影画像に施す視覚エフェクトの選択肢であった場合、選択を確定する旨のコマンドは画像処理部に出力され、画像処理部において、選択が確定された視覚エフェクトを撮影画像に施す処理が実行される。

これらステップＳＴ１１０〜ステップＳＴ１１８に示す処理は、一覧画像３５の表示が終了されるまで（ステップＳＴ１１９でＹＥＳ）、繰り返し実行される。

第１対応関係および第２対応関係を設定し、第１操作または第２操作が行われた場合に、設定された第１対応関係または第２対応関係に基づいて画面３２に対する一覧画像３５の移動方向を決定して、決定された移動方向に一覧画像３５を移動させるので、ユーザの好みに応じた第１対応関係および第２対応関係、例えば自身が慣れ親しんだ操作装置と同じ第１対応関係および第２対応関係を設定することができ、これらの対応関係に基づいて一覧画像３５を移動させることができる。

従来は第１対応関係および第２対応関係が設定不可で固定されており、この固定された設定に最初に違和感を覚えたユーザは、慣れるまでは違和感を引き摺ったまま操作を行わなければならなかった。対して本発明は、ユーザが好みの第１対応関係および第２対応関係を自由に設定することができるので、最初から違和感を覚えることなく操作することができる。

［第２実施形態］
図１９〜図２３に示す第２実施形態では、上記第１実施形態の一覧画像３５に替えて、カーソル３７が操作対象とされる。

図１９において、本実施形態の一覧画像１００は、縦方向のサイズが画面３２に一度に収まりきるサイズである。このため、本実施形態においては、一覧画像１００は画面３２に対して上下方向の表示が固定される。一方、カーソル３７は、矢印で示すように、第１操作および第２操作に応じて、画面３２に対して上下方向に移動する。すなわち、本実施形態においては、カーソル３７が操作対象となる。

この場合、図２０に示すように、第１対応関係情報１０１には、スワイプ操作またはフリック操作の方向と、操作対象であるカーソル３７の移動方向とが第１対応関係として登録される。また、図２１に示すように、第２対応関係情報１０２には、方向指示キー２２の操作の方向と、カーソル３７の移動方向とが第２対応関係として登録される。すなわち、上方向のスワイプ操作およびフリック操作に対して、カーソル３７の移動方向に上、下方向のスワイプ操作およびフリック操作に対して、カーソル３７の移動方向に下がそれぞれ設定されている。また、方向指示キー２２の上方向の操作に対して、カーソル３７の移動方向に上、方向指示キー２２の下方向の操作に対して、カーソル３７の移動方向に下がそれぞれ設定されている。そして、これら第１対応関係情報１０１および第２対応関係情報１０２に基づいて情報管理部８４により生成されたコマンド変換用情報１０５は、図２２に示すようになる。

図２３は、図１４の場合と同様に、一覧画像１００において項目３６が選択されている表示ステータスで、第１操作として下方向のスワイプ操作またはフリック操作が行われた場合を示している。この場合、コマンド出力部８３は、コマンド変換用情報１０５を参照して、カーソル３７を下方向に移動させる旨のコマンドを表示制御部８５に出力する。表示制御部８５は、当該コマンドに応じて、カーソル３７を下方向に移動させる。

カーソル３７は、下方向のスワイプ操作またはフリック操作が行われる前は、矢印Ｃの左側に示すように、例えば項目Ａを選択した状態である。この状態から下方向のスワイプ操作またはフリック操作が行われた場合、カーソル３７は、矢印Ｃの右側に示すように下方向に移動されて、例えば項目Ｂを選択した状態とされる。なお、上記第１実施形態の図１５に相当する、方向指示キー２２が操作された場合の例は図示および説明を省略する。

［第３実施形態］
図２４〜図３０に示す第３実施形態では、一覧画像３５とカーソル３７の両方が操作対象とされる。

この場合、図２４に示すように、第１対応関係情報１１０には、スワイプ操作またはフリック操作の方向と、操作対象である一覧画像３５およびカーソル３７の移動方向とが第１対応関係として登録される。また、図２５に示すように、第２対応関係情報１１１には、方向指示キー２２の操作の方向と、一覧画像３５およびカーソル３７の移動方向とが第２対応関係として登録される。なお、第１対応関係情報１１０は、上記第１実施形態の図１１で示した第１対応関係情報７２と、上記第２実施形態の図２０で示した第１対応関係情報１０１を合わせたものである。同様に、第２対応関係情報１１１は、上記第１実施形態の図１２で示した第２対応関係情報７３と、上記第２実施形態の図２１で示した第２対応関係情報１０２を合わせたものである。

これら第１対応関係情報１１０および第２対応関係情報１１１に基づいて情報管理部８４により生成されたコマンド変換用情報１１５は、図２６に示すようになる。このように、情報管理部８４は、操作対象別に第１対応関係および第２対応関係を設定する。

本実施形態においては、操作対象が一覧画像３５またはカーソル３７のいずれかに切り替わる。より詳しくは、カーソル３７が画面３２の範囲内で移動している場合は、カーソル３７が操作対象となる。対して、カーソル３７が画面３２の端に移動されて、さらにカーソル３７を画面３２の範囲外に移動させる方向に第１操作、もしくは第２操作が行われた場合は、一覧画像３５が操作対象に変更される。

例えば図２７に示すように、一覧画像３５の項目Ａ〜項目Ｅが画面３２に表示された状態において、カーソル３７が項目Ａ〜項目Ｅの範囲内で移動している場合は、カーソル３７が操作対象となる。一方、例えば図２８に示すように、下方向のスワイプ操作またはフリック操作で、カーソル３７が画面３２の端の項目Ｅに移動されて、さらに下方向のスワイプ操作またはフリック操作が行われた場合は、一覧画像３５が操作対象に変更される。

図２４に示す第１対応関係情報１１０において、下方向のスワイプ操作またはフリック操作に対しては、一覧画像３５の移動方向に上方向が登録されている。したがって、一覧画像３５が操作対象に変更された後は、例えば図２９の矢印Ｄの右側に示すように、カーソル３７は画面３２の下端に表示が固定されたまま、一覧画像３５が上方向に移動される。なお、図２９の矢印Ｄの左側は、図２８と同じ表示状態を示している。

本実施形態のフローチャートを図３０に示す。一覧画像３５において項目３６が選択されている表示ステータス（ステップＳＴ１１０）で、カーソル３７が画面３２の端に移動されていない状態で、スワイプ操作またはフリック操作、もしくは方向指示キー２２の操作が行われた場合（ステップＳＴ３００でＹＥＳ、ステップＳＴ３０１でＮＯ）、カーソル３７が操作対象となる（ステップＳＴ３０２）。一方、カーソル３７が画面３２の端に移動されて、さらにスワイプ操作またはフリック操作、もしくは方向指示キー２２の操作が、カーソル３７を画面３２の範囲外に移動させる方向に行われた場合（ステップＳＴ３００、ステップＳＴ３０１でともにＹＥＳ）は、一覧画像３５が操作対象に変更される（ステップＳＴ３０３）。

そして、スワイプ操作またはフリック操作の場合は第１対応関係情報１１０、方向指示キー２２の操作の場合は第２対応関係情報１１１に基づいて、カーソル３７または一覧画像３５の画面３２に対する移動方向が決定される（ステップＳＴ３０４Ａ、ＳＴ３０４Ｂ、決定ステップ）。次いで、決定した移動方向にカーソル３７または一覧画像３５を移動させる旨のコマンドがコマンド出力部８３から表示制御部８５に出力される（ステップＳＴ３０５Ａ、ＳＴ３０５Ｂ）。最後に、表示制御部８５により、決定した移動方向にカーソル３７または一覧画像３５が移動される（ステップＳＴ３０６Ａ、ＳＴ３０６Ｂ、表示制御ステップ）。

このように、操作対象別に第１対応関係および第２対応関係を設定するので、よりユーザの好みに合った第１対応関係および第２対応関係を設定することができる。また、カーソル３７が画面３２の範囲内で移動している場合は、カーソル３７が操作対象となり、カーソル３７が画面３２の端に移動されて、さらにカーソル３７を画面３２の範囲外に移動させる方向に第１操作、もしくは第２操作が行われた場合は、一覧画像３５が操作対象に変更されるので、一覧画像３５の表示ステータスに応じて、自動的に操作対象を切り替えることができる。

［第４実施形態］
図３１〜図３５に示す第４実施形態では、スワイプ操作またはフリック操作におけるタッチ式操作部３１に対する指Ｆの接触位置に応じて、第１操作に対するコマンドを変更する。上記各実施形態では、タッチ式操作部３１に対する指Ｆの接触位置に関して特に言及していないが、本実施形態では、タッチ式操作部３１に対する指Ｆの接触位置でコマンドを切り分ける。より詳しくは、選択候補である項目３６に対応する部分へのスワイプ操作またはフリック操作を、項目３６をスワイプ操作またはフリック操作の方向に移動（ドラッグ）させる旨のコマンドに変換する。一方、背景画像３８に対応する部分へのスワイプ操作またはフリック操作を、第１対応関係に基づいて一覧画像３５を移動させる旨のコマンドに変換する。

項目３６に対応する部分へのスワイプ操作またはフリック操作は、例えば図３１に示すものである。図３１では、項目Ｂに対応する部分に指Ｆが接触されて、上方向のスワイプ操作またはフリック操作が行われている様子を示している。一方、背景画像３８に対応する部分へのスワイプ操作またはフリック操作は、例えば図３２に示すものである。図３２では、一覧画像３５の右側の背景画像３８に対応する部分に指Ｆが接触されて、上方向のスワイプ操作またはフリック操作が行われている様子を示している。

図３３において、本実施形態のコマンド変換用情報１２０には、スワイプ操作またはフリック操作に関して、指Ｆの接触位置が項目３６であった場合と背景画像３８であった場合とで、異なるコマンドが登録されている。すなわち、指Ｆの接触位置が項目３６であった場合は、項目３６をスワイプ操作またはフリック操作の方向に移動させる旨のコマンドが登録されている。一方、指Ｆの接触位置が背景画像３８であった場合は、上記第１実施形態等と同じく、第１対応関係に基づいて一覧画像３５を移動させる旨のコマンドが登録されている。ここでは、上記第１実施形態の図１０で示したコマンド変換用情報７１の部分９０Ａと同じく、上方向のスワイプ操作またはフリック操作に対して、一覧画像３５を下方向に移動させる旨のコマンドが、下方向のスワイプ操作またはフリック操作に対して、一覧画像３５を上方向に移動させる旨のコマンドが、それぞれ登録されている。

図３４は、一覧画像３５において項目３６が選択されている表示ステータスで、項目３６への上方向のスワイプ操作またはフリック操作が行われた場合を示している。この場合、コマンド出力部８３は、コマンド変換用情報１２０を参照して、項目３６を上方向に移動させる旨のコマンドを表示制御部８５に出力する。表示制御部８５は、当該コマンドに応じて、項目３６を上方向に移動させる。

矢印Ｅの左側は、図３１と同じく、項目Ｂに対応する部分に指Ｆが接触されて、上方向のスワイプ操作またはフリック操作が行われた状態を示している。この場合、矢印Ｅの右側に示すように、項目Ｂが上方向に移動されて項目Ａと項目Ｂの順番が入れ替わった状態とされる。なお、背景画像３８へのスワイプ操作またはフリック操作が行われた場合は、上記第１実施形態の図１４で示した態様と同じであるため、図示および説明を省略する。

このように、本実施形態のコマンド出力部８３は、項目３６に対応する部分へのスワイプ操作またはフリック操作を、項目３６をスワイプ操作またはフリック操作の方向に移動させる旨のコマンドに変換し、背景画像３８に対応する部分へのスワイプ操作またはフリック操作を、第１対応関係に基づいて一覧画像３５を移動させる旨のコマンドに変換する。このため、項目３６に対するスワイプ操作またはフリック操作と、背景画像３８に対するスワイプ操作またはフリック操作を明確に切り分けることができる。項目３６に対するスワイプ操作またはフリック操作の場合は、これに伴い項目３６の表示順が入れ替わるので、例えば頻繁に使用する項目３６を先頭に配置する等、項目３６のカスタマイズが可能となる。

［第５実施形態］
図３５および図３６に示す第５実施形態では、前回の操作からの経過時間を計時し、経過時間と予め設定された閾値との大小等に応じて、参照する対応関係を変更する。

図３５において、本実施形態のコマンド出力部１３０には、計時部１３１が設けられる。計時部１３１は、前回のスワイプ操作またはフリック操作、もしくは前回の方向指示キー２２の操作からの経過時間を計時する。より具体的には、計時部１３１は、スワイプ操作またはフリック操作、もしくは方向指示キー２２の操作に応じて、操作対象を移動させる旨のコマンドをコマンド出力部１３０から表示制御部８５に出力したときに、経過時間の計時を開始する。

また、計時部１３１は、前回の操作がスワイプ操作またはフリック操作であったか、方向指示キー２２の操作であったかを一時的に記憶している。なお、図３５では、第１受付部８０、第２受付部８１、認識部８２等の図示を省略している。

この場合、図３６のフローチャートに示すように、経過時間が閾値以上であった場合（ステップＳＴ４００でＹＥＳ）、コマンド出力部１３０により、第１対応関係および第２対応関係のうちの今回の操作に関する対応関係に基づいて操作対象の画面３２に対する移動方向が決定される（ステップＳＴ４０２Ａ、決定ステップ）。また、経過時間が閾値未満であって、かつ前回の操作と今回の操作のいずれもスワイプ操作またはフリック操作であった場合、もしくは前回の操作と今回の操作のいずれも方向指示キー２２の操作であった場合（ステップＳＴ４００、ステップＳＴ４０１でともにＮＯ）も、同じく今回の操作に関する対応関係に基づいて操作対象の画面３２に対する移動方向が決定される。

対して、経過時間が閾値未満であって、かつ前回の操作がスワイプ操作またはフリック操作で今回の操作が方向指示キー２２の操作であった場合、もしくは前回の操作が方向指示キー２２の操作で今回の操作がスワイプ操作またはフリック操作であった場合（ステップＳＴ４００でＮＯ、ステップＳＴ４０１でＹＥＳ）は、コマンド出力部１３０により、第１対応関係および第２対応関係のうちの前回の操作に関する対応関係に基づいて操作対象の画面３２に対する移動方向が決定される（ステップＳＴ４０２Ｂ、決定ステップ）。

操作対象の移動方向の決定後は、決定した移動方向に操作対象を移動させる旨のコマンドがコマンド出力部１３０から表示制御部８５に出力される（ステップＳＴ４０３）。最後に、表示制御部８５により、決定した移動方向に操作対象が移動される（ステップＳＴ４０４、表示制御ステップ）。

こうすると、第１対応関係および第２対応関係が、例えば上記第３実施形態の図２７および図２８で示した第１対応関係情報１１０および第２対応関係情報１１１の場合、操作対象が一覧画像３５で、上方向のスワイプ操作またはフリック操作を行ってから、閾値未満の期間に方向指示キー２２の上方向の操作を行った場合、第１対応関係に倣って、一覧画像３５が下方向に移動される。

本実施形態は、端的に言うと、第１操作と第２操作の間隔が閾値未満と比較的短い場合には、今回の操作が第１操作であるか第２操作であるかに関わらず、前回の操作に関する対応関係を踏襲して操作対象を移動させる、というものである。したがって、第１操作または第２操作の一方の操作の後すぐに他方の操作を行った場合でも、操作対象の移動方向は直近の操作の移動方向と変わらないので、ユーザに違和感を与えるおそれがない。なお、閾値は例えば３秒〜１０秒程度である。

上記各実施形態では、機械式操作部として方向指示キー２２を例示したが、本発明はこれに限定されない。図３７に示す機械式操作部群１３５のように、方向指示キー２２に加えて、回転ホイール１３６を設けてもよい。回転ホイール１３６は、矢印で示すように、時計回りおよび反時計回りに回転操作される。この場合、第２対応関係情報は、例えば図３８に示すようになる。

図３８に示す第２対応関係情報１４０は、方向指示キー２２の操作の方向に加えて、回転ホイール１３６の操作の方向に対する一覧画像３５の移動方向を登録したものである。すなわち、回転ホイール１３６の時計回りの操作に対して、一覧画像３５の移動方向に上が設定され、回転ホイール１３６の反時計回りの操作に対して、一覧画像３５の移動方向に下が設定されている。

上記各実施形態では、上下方向のスワイプ操作またはフリック操作、もしくは方向指示キー２２の上下方向の操作のみを取り扱い、左右方向の操作については記載していないが、もちろん左右方向の操作についても第１対応関係および第２対応関係を設定してもよい。

上記各実施形態において、例えば、受付部に相当する第１受付部８０および第２受付部８１、認識部８２、決定部に相当するコマンド出力部８３、設定部に相当する情報管理部８４、表示制御部８５、計時部１３１といった各種の処理を実行する処理部（processing
unit)のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。

各種のプロセッサには、ＣＰＵ、プログラマブルロジックデバイス（Programmable Logic Device:ＰＬＤ）、専用電気回路等が含まれる。ＣＰＵは、周知のとおりソフトウエア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサである。ＰＬＤは、ＦＰＧＡ(Field Programmable Gate Array)等の、製造後に回路構成を変更可能なプロセッサである。専用電気回路は、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである。

１つの処理部は、これら各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合せ（例えば、複数のＦＰＧＡや、ＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、１つ以上のＣＰＵとソフトウエアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:ＳｏＣ）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣチップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）である。

上記記載から、以下の付記項１に記載の操作装置を把握することができる。

［付記項１］
操作対象を表示する画面を有する表示部、および前記画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、前記タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部とを備える操作装置において、
前記タッチ式操作部に対して行われる第１操作の方向と、前記第１操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第１対応関係、および前記機械式操作部に対して行われる第２操作の方向と、前記第２操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付プロセッサと、
前記第１対応関係および前記第２対応関係を、前記設定指示に応じて設定する設定プロセッサと、
前記第１操作または前記第２操作が行われた場合に、前記設定プロセッサで設定された前記第１対応関係または前記第２対応関係に基づいて前記画面に対する前記操作対象の移動方向を決定する決定プロセッサと、
前記決定プロセッサで決定された移動方向に前記操作対象を移動させる表示制御プロセッサとを備える操作装置。

選択候補は、上記各実施形態の項目３６に限らない。撮影画像のサムネイルを選択候補としてもよい。また、操作対象は一覧画像３５およびカーソル３７に限らない。設定画像４０を操作対象としてもよい。

上記各実施形態では、撮像装置としてレンズ交換式のデジタルカメラ１０を例示したが、本発明はこれに限らない。レンズ部がカメラ本体に一体的に備え付けられているデジタルカメラにも本発明は適用可能である。また、ビデオカメラやカメラ付き携帯電話等にも本発明は適用可能である。

上記各実施形態では、本発明の操作装置を撮像装置に用いた例を記載したが、本発明の操作装置は、撮像装置に限らず、例えば携帯型ゲーム機やパーソナルコンピュータ等の他のあらゆる電子機器に適用することが可能である。

本発明は、上記各実施形態に限らず、本発明の要旨を逸脱しない限り種々の構成を採用し得ることはもちろんである。

１０ デジタルカメラ（撮像装置）
１１ レンズ鏡筒
１２ 撮像光学系
１３ イメージセンサ
１４ 電源レバー
１５ レリーズスイッチ
１６ ホットシュー
１７ ファインダ部
１８ 対物窓
１９ 接眼窓
２０ タッチパネルディスプレイ
２１、１３５ 機械式操作部群
２２ 方向指示キー
２３ メニュー／決定ボタン
２４ 蓋
３０ 表示部
３１ タッチ式操作部
３２ 画面
３５、１００ 一覧画像
３６ 項目
３７ カーソル
４０ 設定画像
４１ ラジオボタン
４２ 設定ボタン
４３ キャンセルボタン
５０ 移動レンズ
５１ 絞り機構
５５ アナログ処理部（ＡＦＥ）
５６ デジタル信号処理部（ＤＳＰ）
５７ センサ制御部
５８ 光学系制御部
５９ ＣＰＵ
６０ フレームメモリ
６１ カード制御部
６２ 記憶部
６３ データバス
６５ 作動プログラム
６６ メモリカード
７０ 第１操作認識用情報
７１、１０５、１１５、１２０ コマンド変換用情報
７２、１０１、１１０ 第１対応関係情報
７３、１０２、１１１、１４０ 第２対応関係情報
８０、８１ 第１、第２受付部（受付部）
８２ 認識部
８３、１３０ コマンド出力部（決定部）
８４ 情報管理部（設定部）
８５ 表示制御部
９０Ａ コマンド変換用情報のスワイプ操作またはフリック操作の部分
９０Ｂ コマンド変換用情報の方向指示キーの操作の部分
１３１ 計時部
Ｆ 指
ＯＡ 光軸
Ａ〜Ｅ 矢印
ＳＴ１００〜ＳＴ１０４、ＳＴ１１０〜ＳＴ１１９、ＳＴ３００〜ＳＴ３０３、ＳＴ３０４Ａ〜ＳＴ３０６Ａ、ＳＴ３０４Ｂ〜ＳＴ３０６Ｂ、ＳＴ４００、ＳＴ４０１、ＳＴ４０２Ａ、ＳＴ４０２Ｂ、ＳＴ４０３、ＳＴ４０４ ステップ

Claims (10)

1. 操作対象を表示する画面を有する表示部、および前記画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、
   前記タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部と、
   前記タッチ式操作部に対して行われる第１操作の方向と、前記第１操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第１対応関係、および前記機械式操作部に対して行われる第２操作の方向と、前記第２操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付部と、
   前記第１対応関係および前記第２対応関係を、前記設定指示に応じて設定する設定部と、
   前記第１操作または前記第２操作が行われた場合に、前記設定部で設定された前記第１対応関係または前記第２対応関係に基づいて前記画面に対する前記操作対象の移動方向を決定する決定部と、
   前記決定部で決定された移動方向に前記操作対象を移動させる表示制御部と、
   前回の前記第１操作、もしくは前回の前記第２操作からの経過時間を計時する計時部とを備え、
   前記表示制御部は、前記経過時間が予め設定された閾値以上であった場合と、前記経過時間が前記閾値未満であって、かつ前回の操作と今回の操作のいずれも前記第１操作または前記第２操作であった場合は、前記第１対応関係および前記第２対応関係のうちの前記今回の操作に関する対応関係に基づく前記操作対象の移動を実行し、
   前記経過時間が前記閾値未満であって、かつ前記前回の操作が前記第１操作で前記今回の操作が前記第２操作であった場合、もしくは前記前回の操作が前記第２操作で前記今回の操作が前記第１操作であった場合は、前記第１対応関係および前記第２対応関係のうちの前記前回の操作に関する対応関係に基づく前記操作対象の移動を実行する操作装置。
2. 前記設定部は、前記操作対象別に前記第１対応関係および前記第２対応関係を設定する請求項１に記載の操作装置。
3. 前記操作対象は、複数の選択候補が配列された一覧画像、または前記一覧画像内に配列された複数の前記選択候補のうちの１つを選択するためのカーソルの少なくとも１つを含む請求項２に記載の操作装置。
4. 前記カーソルが前記画面の範囲内で移動している場合は、前記カーソルが前記操作対象となり、前記カーソルが前記画面の端に移動されて、さらに前記カーソルを前記画面の範囲外に移動させる方向に前記第１操作、もしくは前記第２操作が行われた場合は、前記一覧画像が前記操作対象に変更される請求項３に記載の操作装置。
5. 前記画面には、固定された背景画像に対して、複数の選択候補が配列された一覧画像が前記操作対象として表示され、
   前記選択候補に対応する部分への前記第１操作を、前記選択候補を前記第１操作の方向に移動させる旨のコマンドに変換し、前記背景画像に対応する部分への前記第１操作を、前記第１対応関係に基づいて前記一覧画像を移動させる旨のコマンドに変換して前記表示制御部に出力するコマンド出力部を備える請求項１ないし４のいずれか１項に記載の操作装置。
6. 前記第１操作は、前記タッチ式操作部に指を接触させ、そのまま一定方向にゆっくり指を移動させ、その後前記タッチ式操作部から指を離すスワイプ操作、または、前記タッチ式操作部に指を接触させ、そのまま一定方向に素早く指を払って前記タッチ式操作部から指を離すフリック操作の少なくとも１つを含む請求項１ないし５のいずれか１項に記載の操作装置。
7. 前記機械式操作部は、上下左右方向に操作される方向指示キー、または、時計回りおよび反時計回りに回転操作される回転ホイールの少なくとも１つである請求項１ないし６のいずれか１項に記載の操作装置。
8. 撮像装置に用いられる請求項１ないし７のいずれか１項に記載の操作装置。
9. 操作対象を表示する画面を有する表示部、および前記画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、前記タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部とを備える操作装置の作動方法において、
   前記タッチ式操作部に対して行われる第１操作の方向と、前記第１操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第１対応関係、および前記機械式操作部に対して行われる第２操作の方向と、前記第２操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付ステップと、
   前記第１対応関係および前記第２対応関係を、前記設定指示に応じて設定する設定ステップと、
   前記第１操作または前記第２操作が行われた場合に、前記設定ステップで設定された前記第１対応関係または前記第２対応関係に基づいて前記画面に対する前記操作対象の移動方向を決定する決定ステップと、
   前記決定ステップで決定された移動方向に前記操作対象を移動させる表示制御ステップ
   と、
   前回の前記第１操作、もしくは前回の前記第２操作からの経過時間を計時する計時ステップとを備え、
   前記表示制御ステップは、前記経過時間が予め設定された閾値以上であった場合と、前記経過時間が前記閾値未満であって、かつ前回の操作と今回の操作のいずれも前記第１操作または前記第２操作であった場合は、前記第１対応関係および前記第２対応関係のうちの前記今回の操作に関する対応関係に基づく前記操作対象の移動を実行し、
   前記経過時間が前記閾値未満であって、かつ前記前回の操作が前記第１操作で前記今回の操作が前記第２操作であった場合、もしくは前記前回の操作が前記第２操作で前記今回の操作が前記第１操作であった場合は、前記第１対応関係および前記第２対応関係のうちの前記前回の操作に関する対応関係に基づく前記操作対象の移動を実行する操作装置の
   作動方法。
10. 操作対象を表示する画面を有する表示部、および前記画面に重ねて配置される透明なタッチ式操作部で構成されるタッチパネルディスプレイと、前記タッチ式操作部とは別に設けられ、機械的な構造を有する機械式操作部とを備える操作装置の作動プログラムにおいて、
    前記タッチ式操作部に対して行われる第１操作の方向と、前記第１操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第１対応関係、および前記機械式操作部に対して行われる第２操作の方向と、前記第２操作に応じて前記操作対象が前記画面に対して移動する移動方向との対応関係である第２対応関係の設定指示を受け付ける受付機能と、
    前記第１対応関係および前記第２対応関係を、前記設定指示に応じて設定する設定機能と、
    前記第１操作または前記第２操作が行われた場合に、前記設定機能で設定された前記第１対応関係または前記第２対応関係に基づいて前記画面に対する前記操作対象の移動方向を決定する決定機能と、
    前記決定機能で決定された移動方向に前記操作対象を移動させる表示制御機能と、
    前回の前記第１操作、もしくは前回の前記第２操作からの経過時間を計時する計時機能とを、をコンピュータに実行させ、
    前記表示制御機能は、前記経過時間が予め設定された閾値以上であった場合と、前記経過時間が前記閾値未満であって、かつ前回の操作と今回の操作のいずれも前記第１操作または前記第２操作であった場合は、前記第１対応関係および前記第２対応関係のうちの前記今回の操作に関する対応関係に基づく前記操作対象の移動を実行し、
    前記経過時間が前記閾値未満であって、かつ前記前回の操作が前記第１操作で前記今回の操作が前記第２操作であった場合、もしくは前記前回の操作が前記第２操作で前記今回の操作が前記第１操作であった場合は、前記第１対応関係および前記第２対応関係のうちの前記前回の操作に関する対応関係に基づく前記操作対象の移動を実行する操作装置の作動プログラム。

Images