JP2014071765A - 画像表示制御装置、画像表示装置、プログラム及び画像表示方法 - Google Patents

画像表示制御装置、画像表示装置、プログラム及び画像表示方法 Download PDF

Info

Publication number
JP2014071765A
JP2014071765A JP2012218679A JP2012218679A JP2014071765A JP 2014071765 A JP2014071765 A JP 2014071765A JP 2012218679 A JP2012218679 A JP 2012218679A JP 2012218679 A JP2012218679 A JP 2012218679A JP 2014071765 A JP2014071765 A JP 2014071765A
Authority
JP
Japan
Prior art keywords
image
display
area
displayed
designated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012218679A
Other languages
English (en)
Other versions
JP5844707B2 (ja
Inventor
Yuzo Aoshima
雄三 青島
Takeo Okabe
雄生 岡部
Chinatsu Hisamoto
千夏 久本
Yasushi Ichinoto
靖 一ノ渡
Tomofumi Takagi
友史 高木
Hisashi Mishima
悠 三島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2012218679A priority Critical patent/JP5844707B2/ja
Priority to US13/859,213 priority patent/US20140096052A1/en
Priority to CN201310168346.8A priority patent/CN103713839A/zh
Publication of JP2014071765A publication Critical patent/JP2014071765A/ja
Priority to US14/806,748 priority patent/US10222968B2/en
Application granted granted Critical
Publication of JP5844707B2 publication Critical patent/JP5844707B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

【課題】ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができる画像表示制御装置を提供する。
【解決手段】表示領域の表面にタッチパネルが設けられた表示手段を備え、表示された画像がタッチパネルを介して指定された場合、予め定められたメニュー項目を含むメニュー画面を表示領域における画像に隣接する周辺領域の一部に空き領域を有する状態で表示させ、メニュー画面が表示手段により表示された状態で、画像がタッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面のメニュー項目上に移動された場合は、移動先のメニュー項目が指定されたものと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じたドラッグ操作が指定されたと判断し、判断結果に応じた処理を実行する。
【選択図】図5

Description

本発明は、画像表示制御装置、画像表示装置、プログラム及び画像表示方法に係り、特に、表示した画像に対する操作指示を受け付ける画像表示制御装置、当該画像表示制御装置を有する画像表示装置、上記画像表示制御装置により実行されるプログラム、及び表示した画像に対する操作指示を受け付ける画像表示方法に関する。
近年、携帯電話端末装置の発展に伴い、従来の携帯電話端末装置よりもサイズが大きなディスプレイを有する、スマートフォンと呼ばれる多機能化した携帯電話端末装置が開発されている。また、多くのスマートフォンでは、ディスプレイのサイズを可能な限り大きくする一方、筐体のサイズを小さく維持するために、従来の携帯電話端末装置では用いていたハードウェアのキーボードを採用していない。そして、この種のスマートフォンでは、オン/オフボタンなどの少数の操作ボタンのみをハードウェアの操作部とすると共に、ディスプレイがタッチパネルを兼ねるように構成されることでディスプレイをメインの操作手段として利用している。
しかしながら、この構成では、操作指示を入力する場合、マウスなどのポインティングデバイスを用いる装置のようにカーソルの移動およびクリックという2段階の操作を行うことができない。そのため、スマートフォンにおいて、ディスプレイ上で操作された際に何れの操作がされたのかを判断する処理が必要となるという問題もある。この問題は、スマートフォンに限らず、画像を表示する表示部を有するあらゆる装置に生じ得る問題である。
この問題を解決するために適用し得る技術として、特許文献1には、タッチ操作の競合を解消しつつ、簡単なタッチ操作で良好な所定操作(リンク選択の操作)を実現する端末装置が開示されている。この端末装置は、タッチ位置の座標を検出するタッチパネルと、少なくとも一部の表示領域においてタッチパネルのタッチ領域が重複した表示部とを備える。また、この端末装置は、リンクが設定された文書データから表示部に表示される表示情報を生成し、タッチされた位置を含む所定範囲をリンク有効領域として設定し、リンク有効領域内でのみリンクの選択を許容する。さらに、この端末装置は、リンク有効領域内でのタッチ離脱時にタッチ状態にあったリンクのリンク先に移行し、タッチがそのタッチ状態を維持したままリンク有効領域内からその外側へ移動したときリンク選択以外の所定の処理を実行する。
WO2009/044770号公報
ところで、従来の画像表示装置では、一般に、表示した画像に対して各種処理を実行させるために各種処理を示すメニュー項目を表示させる操作に引き続き、当該メニュー項目の何れかを選択する操作がユーザによって行われる。また、従来の画像表示装置では、表示されている画像に対するドラッグ操作もユーザによって行われる。
従って、画像表示装置に対し、表示した画像が選択された際に、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別できる技術が要望されている。
しかしながら、上記特許文献1に開示されている技術では、タッチ位置がリンク有効領域内からその外側へ移動したときに、リンク選択(メニュー項目の選択に相当)以外の操作が実行される。そのため、ドラッグ操作を行おうとしていると判定するためには、タッチパネル上でのタッチ位置がリンク有効領域を超えるまで移動操作が継続される必要がある。よって、リンク有効領域の形状によっては当該移動操作に手間や時間がかかってしまい、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを必ずしも簡単な操作で識別することができなかった。
本発明は上記課題に鑑みてなされたものであり、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができる画像表示制御装置、画像表示装置、プログラム及び画像表示方法を提供することを目的とする。
上記目的を達成するために、本発明に係る画像表示装置は、画像を表示させる表示領域を有すると共に、当該表示領域の表面にタッチパネルが設けられた表示手段に表示させた画像が前記タッチパネルを介して指定された場合、予め定められた複数のメニュー項目の各々を示すメニュー画面を前記表示領域における前記表示させた画像に隣接する周辺領域の一部に空き領域を設けた状態でメニュー項目毎に表示させる制御を行う表示制御手段と、前記メニュー画面を前記表示領域に表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じたドラッグ操作が指定されたと判断する判断手段と、前記判断手段による判断結果に応じた処理を実行する実行手段と、を備えている。
本発明に係る画像表示装置によれば、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができる。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記判断手段による判断が終了した後に前記メニュー画像の表示を中止させる制御を行うようにしても良い。これにより、メニュー画面の表示によって表示内容が隠れてしまうことを防止できる。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記画像をマトリックス状に配列させて前記表示領域に表示させる制御を行うと共に、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、指定された画像に隣接する周辺領域のうち、行方向及び列方向の少なくとも一方に隣接する画像間の領域の一部に前記空き領域を生じさせて前記メニュー画面を表示させる制御を行うようにしても良い。これにより、ドラッグ操作をスムーズに開始することができる。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、前記指定された画像の少なくとも1つの辺に隣接する周辺領域の一部に空き領域を設けた状態で、前記指定された画像の他の辺に隣接する周辺領域の一部に前記メニュー画面を表示させる制御を行うようにしても良い。これにより、ドラッグ操作をスムーズに開始することができる。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記判断手段による判断が終了する前に前記タッチパネルを介した指定が解除された場合、前記メニュー画像の表示を中止させる制御を行うようにしても良い。これにより、ユーザ操作によりメニュー画面の表示を停止させることができる。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、前記予め定められたメニュー項目を噴き出しで表示させたメニュー画面を前記画像に隣接する周辺領域の一部に空き領域を有する状態で前記表示領域に表示させる制御を行うようにしても良い。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記メニュー画面を前記表示領域に表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記表示領域上で移動された場合は、指定位置の移動に応じた表示位置に前記指定された画像を移動させながら表示させる制御を行い、前記判断手段によりメニュー項目が指定されたと判断された場合には、前記指定された画像を元の位置に移動させて表示させ、前記判断手段によりドラッグ操作が指定されたと判断された場合には、前記指定された画像を空き領域の指定位置に停止させて表示させる制御を行うようにしても良い。
また、本発明に係る画像表示装置において、前記表示制御手段は、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、指定位置または指定された画像の中心を中心とした円弧状のメニュー画面を前記画像に隣接する周辺領域の一部に空き領域を有する状態で前記表示領域に表示させる制御を行うようにしても良い。
一方、上記目的を達成するために、本発明に係る記載の画像表示装置は、本発明に係る画像表示制御装置と、画像表示すると共に表示された画像を選択するための情報を入力するタッチパネルを供えた表示手段と、を含む。
従って、本発明に係る画像表示装置によれば、本発明に係る画像表示制御装置と同様に作用することができるので、本発明に係る画像表示制御装置と同様に、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができことができる。
一方、上記目的を達成するために、本発明に係る記載のプログラムは、コンピュータを、予め定められた画像を表示させる表示領域を有すると共に当該表示領域の表面にタッチパネルが設けられた表示手段に表示させた画像が、前記タッチパネルを介して指定された場合、ドラッグ操作を行う際の移動方向を示す項目を含むメニュー項目の各々毎を示すメニュー画面を前記表示手段の表示領域における前記画像に隣接する周辺領域の一部に空き領域を有する状態で表示させる制御を行う表示制御手段と、前記メニュー画面を前記表示手段により表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたものと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じた前記ドラッグ操作が指定されたと判断する判断手段と、前記判断手段による判断結果に応じた処理を実行する実行手段と、として機能させるためのプログラムである。
従って、本発明に係るプログラムによれば、コンピュータを本発明に係る画像表示装置と同様に作用させることができるので、本発明に係る画像表示装置と同様に、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができる。
また、上記目的を達成するために、本発明に係る画像表示方法は、予め定められた画像を表示させる表示領域を有すると共に当該表示領域の表面にタッチパネルが設けられた表示手段に表示させた画像が、前記タッチパネルを介して指定された場合、ドラッグ操作を行う際の移動方向を示す項目を含むメニュー項目の各々毎を示すメニュー画面を前記表示手段の表示領域における前記画像に隣接する周辺領域の一部に空き領域を有する状態で表示させる制御を行う表示制御ステップと、前記メニュー画面を前記表示手段により表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたものと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じた前記ドラッグ操作が指定されたと判断する判断ステップと、前記判断ステップによる判断結果に応じた処理を実行する実行ステップと、を行う。
従って、本発明に係る画像表示方法によれば、本発明に係る画像表示装置と同様に作用することができるので、本発明に係る画像表示装置と同様に、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができる。
本発明によれば、ドラッグ操作を行おうとしているのか、メニュー項目を選択する操作を行おうとしているのかを簡単な操作で識別可能とすることができる、という効果を奏する。
実施形態に係るスマートフォンの外観を示す斜視図である。 実施形態に係るスマートフォンの構成を示すブロック図である。 実施形態に係る表示制御処理プログラムの処理の流れを示すフローチャートである。 実施形態に係る表示制御処理プログラムの実行により表示される画面の構成例を示す構成図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の構成例を示す構成図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の構成例を示す構成図である。 実施形態に係るドラッグ操作に応じた処理の説明に供する説明図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の他の構成例を示す構成図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の他の構成例を示す構成図である。 実施形態に係るメニュー画面の一例を示す構成図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の他の構成例を示す構成図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の他の構成例を示す構成図である。 実施形態に係る表示制御処理プログラムの実行により表示される画面の他の構成例を示す構成図である。
以下、図面を参照して、本発明を実施するための形態について詳細に説明する。なお、本実施形態では、本発明をスマートフォンに適用した場合を例に挙げて説明するが、これに限らず、本発明は、例えば、携帯電話機、PDA(Personal Digital Assistants)、携帯型ゲーム機等、表示画面を有する他の装置に適用可能であることは言うまでもない。
図1は、本実施形態に係るスマートフォン10の外観を示す斜視図である。図1に示すスマートフォン10は、平板状の筐体12を有し、筐体12の一方の面に表示部としての表示パネル14Aと、入力部としての操作パネル14Bとが一体となった表示入力部14を備えている。また、係る筐体12は、スピーカ16と、マイクロホン18と、操作部20と、カメラ部22とを備えている。なお、筐体12の構成はこれに限定されず、例えば、折り畳み構造やスライド機構を有する構成を採用したりすることもできる。
図2は、本実施形態に係るスマートフォン10の構成を示すブロック図である。図2に示すように、スマートフォン10の主たる構成要素として、無線通信部24と、表示入力部14と、通話部26と、操作部20と、カメラ部22と、記憶部28と、外部入出力部30とを備えている。また、スマートフォン10の主たる構成要素として、GPS(Global Positioning System)受信部32と、モーションセンサ部34と、電源部36と、主制御部38とを備える。さらに、スマートフォン10の主たる機能として、基地局装置と移動通信網とを介した移動無線通信を行う無線通信機能を備える。
無線通信部24は、主制御部38の指示にしたがって、移動通信網に収容された基地局装置に対し無線通信を行うものである。係る無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータなどの送受信や、Webデータやストリーミングデータなどの受信を行う。
表示入力部14は、主制御部38の制御により、画像(静止画像および動画像)や文字情報などを表示して視覚的にユーザに情報を伝達するとともに、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルディスプレイである。表示入力部14は、表示パネル14Aと、操作パネル14Bとを備える。
表示パネル14Aは、LCD(Liquid Crystal Display)、OELD(Organic Electro-Luminescence Display)などを表示デバイスとして用いたものである。操作パネル14Bは、表示パネル14Aの表示面上に表示される画像を視認可能に載置され、ユーザの指先や尖筆によって操作される一又は複数の座標を検出するデバイスである。係るデバイスをユーザの指先や尖筆によって操作すると、操作に起因して発生する検出信号を主制御部38に出力する。次いで、主制御部38は、受信した検出信号に基づいて、表示パネル14A上の操作位置(座標)を検出する。
なお、表示領域の大きさと表示パネル14Aの大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル14Bで採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式などが挙げられ、いずれの方式を採用することもできる。
通話部26は、スピーカ16やマイクロホン18を備え、マイクロホン18を通じて入力されたユーザの音声を主制御部38にて処理可能な音声データに変換して主制御部38に出力したり、無線通信部24あるいは外部入出力部30により受信された音声データを復号してスピーカ16から出力するものである。また、図1に示すように、例えば、スピーカ16を表示入力部14が設けられた面と同じ面に搭載し、マイクロホン18を筐体12の側面に搭載することができる。
操作部20は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図1に示すように、操作部20は、スマートフォン10の筐体12の側面に搭載され、指などで押下されるとオンとなり、指を離すとバネなどの復元力によってオフ状態となる押しボタン式のスイッチである。
記憶部28は、主制御部38の制御プログラムや制御データ、アプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、WebブラウジングによりダウンロードしたWebデータや、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータなどを一時的に記憶するものである。また、記憶部28は、スマートフォン内蔵の内部記憶部28Aと着脱自在な外部メモリスロットを有する外部記憶部28Bにより構成される。なお、記憶部28を構成するそれぞれの内部記憶部28Aと外部記憶部28Bは、フラッシュメモリタイプ(flash memory type)、ハードディスクタイプ(hard disk type)、マルチメディアカードマイクロタイプ(multimedia card micro type)、カードタイプのメモリ(例えば、MicroSD(登録商標)メモリ等)、RAM(Random Access Memory)、ROM(Read Only Memory)などの格納媒体を用いて実現される。
外部入出力部30は、スマートフォン10に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等(例えば、ユニバーサルシリアルバス(USB)、IEEE1394など)又はネットワーク(例えば、インターネット、無線LAN、ブルートゥース(Bluetooth)(登録商標)、RFID(Radio Frequency Identification)、赤外線通信(Infrared Data Association:IrDA)(登録商標)、UWB(Ultra Wideband)(登録商標)、ジグビー(ZigBee)(登録商標)など)により直接的又は間接的に接続するためのものである。
スマートフォン10に連結される外部機器としては、例えば、有/無線ヘッドセット、有/無線外部充電器、有/無線データポート、カードソケットを介して接続されるメモリカード(Memory card)やSIM(Subscriber Identity Module Card)/UIM(User Identity Module Card)カード、オーディオ・ビデオI/O(Input/Output)端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有/無線接続されるスマートフォン、有/無線接続されるパーソナルコンピュータ、有/無線接続されるPDA、有/無線接続されるパーソナルコンピュータ、イヤホンなどがある。外部入出力部30は、このような外部機器から伝送を受けたデータをスマートフォン10の内部の各構成要素に伝達することや、スマートフォン10の内部のデータが外部機器に伝送されるようにすることができる。
GPS受信部32は、主制御部38の指示にしたがって、GPS衛星ST1〜STnから送信されるGPS信号を受信し、受信した複数のGPS信号に基づく測位演算処理を実行し、当該スマートフォン10の緯度、経度、高度からなる位置を検出する。GPS受信部32は、無線通信部24や外部入出力部30(例えば、無線LAN)から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
モーションセンサ部34は、例えば、3軸の加速度センサなどを備え、主制御部38の指示にしたがって、スマートフォン10の物理的な動きを検出する。スマートフォン10の物理的な動きを検出することにより、スマートフォン10の動く方向や加速度が検出される。係る検出結果は、主制御部38に出力されるものである。
電源部36は、主制御部38の指示にしたがって、スマートフォン10の各部に、バッテリ(図示しない)に蓄えられる電力を供給するものである。
主制御部38は、マイクロプロセッサを備え、記憶部28が記憶する制御プログラムや制御データにしたがって動作し、スマートフォン10の各部を統括して制御するものである。また、主制御部38は、無線通信部24を通じて、音声通信やデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
アプリケーション処理機能は、記憶部28が記憶するアプリケーションソフトウェアにしたがって主制御部38が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部30を制御して対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、Webページを閲覧するWebブラウジング機能などがある。
また、主制御部38は、受信データやダウンロードしたストリーミングデータなどの画像データ(静止画像や動画像のデータ)に基づいて、映像を表示入力部14に表示する等の画像処理機能を備える。画像処理機能とは、主制御部38が、上記画像データを復号し、係る復号結果に画像処理を施して、画像を表示入力部14に表示する機能のことをいう。
更に、主制御部38は、表示パネル14Aに対する表示制御と、操作部20、操作パネル14Bを通じたユーザ操作を検出する操作検出制御とを実行する。
表示制御の実行により、主制御部38は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、あるいは電子メールを作成するためのウィンドウを表示したりする。なお、スクロールバーとは、表示パネル14Aの表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
また、操作検出制御の実行により、主制御部38は、操作部20を通じたユーザ操作を検出したり、操作パネル14Bを通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付ける。
更に、操作検出制御の実行により主制御部38は、操作パネル14Bに対する操作位置が、表示パネル14Aに重なる重畳部分(表示領域)か、それ以外の表示パネル14Aに重ならない外縁部分(非表示領域)かを判定し、操作パネル14Bの感応領域や、ソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
また、主制御部38は、操作パネル14Bに対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも1つについて軌跡を描く操作を意味する。
カメラ部22は、CMOS(Complementary Metal Oxide Semiconductor)やCCD(Charge-Coupled Device)などの撮像素子を用いて電子撮影するデジタルカメラである。また、カメラ部22は、主制御部38の制御により、撮像によって得た画像データを例えばJPEG(Joint Photographic coding Experts Group)などの圧縮した画像データに変換し、記憶部28に記録したり、外部入出力部30や無線通信部24を通じて出力したりすることができる。図1に示すにスマートフォン10において、カメラ部22は表示入力部14と同じ面に搭載されているが、カメラ部22の搭載位置はこれに限らず、表示入力部14の背面に搭載されてもよいし、あるいは、複数のカメラ部22が搭載されてもよい。なお、複数のカメラ部22が搭載されている場合には、撮影に供するカメラ部22を切り替えて単独にて撮影したり、あるいは、複数のカメラ部22を同時に使用して撮影したりすることもできる。
また、カメラ部22はスマートフォン10の各種機能に利用することができる。例えば、表示パネル14Aにカメラ部22で取得した画像を表示することや、操作パネル14Bの操作入力のひとつとして、カメラ部22の画像を利用することができる。また、GPS受信部32が位置を検出する際に、カメラ部22からの画像を参照して位置を検出することもできる。更には、カメラ部22からの画像を参照して、3軸の加速度センサを用いずに、或いは、3軸の加速度センサと併用して、スマートフォン10のカメラ部22の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部22からの画像をアプリケーションソフトウェア内で利用することもできる。
その他、静止画又は動画の画像データにGPS受信部32により取得した位置情報、マイクロホン18により取得した音声情報(主制御部38等により、音声テキスト変換を行ってテキスト情報となっていてもよい)、モーションセンサ部34により取得した姿勢情報等などを付加して記憶部28に記録したり、外部入出力部30や無線通信部24を通じて出力したりすることもできる。
ところで、本実施形態に係るスマートフォン10は、内部記憶部28Aまたは外部記憶部28Bの少なくとも一方に画像情報が記憶され、かつユーザ操作によって当該画像情報の一覧表示が指示された場合、表示パネル14Aに当該一覧表示を行わせる制御を行う。このとき、スマートフォン10は、ユーザ操作に応じて、表示した画像に対して各種処理を実行したり、表示した画像に対してドラッグ操作を行う処理を実行したりする。
次に、図3を参照して、本実施形態に係るスマートフォン10の作用を説明する。なお、図3は、操作パネル14Bまたは操作部20を介して実行指示が入力された際にスマートフォン10の主制御部38によって実行される表示制御処理プログラムの処理の流れを示すフローチャートである。当該プログラムは、内部記憶部28Aの所定領域に予め記憶されている。
また、ここでは、錯綜を回避するため、記憶部28に複数の画像情報が記憶されている場合について説明する。
まず、ステップS100では、表示パネル14Aに、画面遷移の起点となるトップ画面42を表示させる制御を行う。
図4(A)は、本実施形態に係るトップ画面42の一例を示している。図4(A)に示すように、トップ画面42は、例えばメール機能の起動を指示するためのメールボタン44a、ウェブブラウジング機能の起動を指示するためのウェブボタン44b、カメラ機能の起動を指示するためのカメラボタン44cを有している。また、トップ画面42は、画像一覧機能の起動を指示するための画像一覧ボタン44d、通話機能の起動を指示するための通話ボタン44e、各種設定機能の起動を指示するための設定ボタン44fなどの選択ボタンを有している。
ユーザは、トップ画面42において所望の選択ボタンに触れることにより起動対象の機能を選択する一方、主制御部38は、ユーザ操作により選択された選択ボタンに応じて各種機能を起動する。
そこで、次のステップ101では、ユーザによる何れかのメニューボタンの選択待ちを行う。次のステップ102では、ユーザによって選択されたメニューボタンが画像一覧ボタン44dであったか否かを判定して、否定判定となった場合はステップS103に移行し、選択されたメニューボタンに対応する機能を実行した後に、本プログラムを終了する。一方、肯定判定となった場合は、ステップS104に移行する。
ステップS104では、記憶部28に記憶されている複数の画像を一覧表示する一覧表示画面を表示パネル14Aに表示するように制御する。
図5(B)は、本実施形態に係る画像一覧画面46の一例を示している。図5(B)に示すように、画像一覧画面46は、複数の画像48をマトリックス状に表示すると共に、表示制御処理プログラムを終了させる際に指定される終了ボタン50を表示する。なお、複数の画像48は、記憶部28に記憶されている各画像情報が示す画像である。
ステップS105では、操作パネル14Bを介した入力操作があったか否かを判定する。
ステップS105において入力操作があったと判定した場合、ステップS106に移行し、接触指定されたボタンが終了ボタン50であるか否かにより、当該入力操作が表示制御処理プログラムを終了させる指示の入力操作であるか否かを判定する。
ステップS106において表示制御処理プログラムを終了させる指示の入力操作でないと判定した場合、ステップS107に移行し、上記入力操作が、画像の選択のための入力操作であるか否かを判定する。ステップS107において画像の選択のための入力操作でないと判定した場合、上記ステップS105に戻る。
一方、ステップS107において画像の選択のための入力操作がされたと判定した場合、ステップS108に移行し、予め定められた複数のメニュー項目が含まれるメニュー画面52を表示パネル14Aに表示するように制御する。なお、本実施形態におけるメニュー項目は、画像情報を複製する処理、画像情報を削除する処理、画像情報に関する設定を行う処理、及び画像情報に対して不図示の画像処理プログラムを用いて画像処理を行う処理などである。
図5(A)及び(B)は、本実施形態に係る画像一覧画面46の一例を示している。図5(A)に示すように、画像一覧画面46に表示されている複数の画像48のうちの何れかの画像48が選択された場合、当該画像一覧画面46に重畳されて、メニュー画面52が表示される。また、図5(B)に示すように、本実施形態では、メニュー画面52として、メニュー項目A乃至メニュー項目Dの4つのメニュー項目の何れかを選択するための領域として、それぞれメニュー項目選択部52a乃至52dが表示される。ここで、各々のメニュー項目選択部52a乃至52dは、選択された画像に隣接する周辺領域の一部に空き領域を有する状態で表示される。そして、空き領域のうち、選択された画像に隣接する一部を、ドラッグ操作を指示するためのドラッグ指示領域54a乃至54dとする。
本実施形態では、選択された画像に対して、複数の画像48の列方向(表示パネル14Aの正面視上下方向)及び行方向(表示パネル14Aの正面視左右方向)に隣接する両側の領域をそれぞれ空き領域とする。すなわち、画像一覧画面46には、メニュー項目選択部52a乃至52dが表示された状態において、選択された画像の正面視上側、下側、左側、及び右側の各々に、ドラッグ指示領域54a乃至54dがそれぞれ設けられる。
ユーザが画像一覧画面46に表示された何れかの画像に対してドラッグ操作を行いたい場合には、当該画像の表示位置を変更する処理などが想定される。本実施形態では、上記のように、ドラッグ指示領域54a乃至54dが、選択された画像の列方向または行方向に設けているので、ドラッグ操作を指示するための操作に引き続いてスムーズにドラッグ操作を継続させることができる。
次のステップS109では、ユーザによる操作パネル14B上での指先による指定位置が、その後継続して移動したか否かを判定する。この際、主制御部38は、例えば上記指定位置が予め定められた距離(画素数)以上移動した場合に、当該指定位置が移動したと判定する。
ステップS109において指定位置が移動していないと判定した場合、ステップS111に移行し、ユーザによる画像の選択が解除されたか否かを判定する。この際、主制御部38は、ユーザの指先が操作パネル14Bから離れる等により、操作パネル14Bがユーザ操作に起因して発生する検出信号を出力しなくなった場合に、画像の選択が解除されたと判定する。
ステップS111において画像の選択が解除されたと判定した場合、ステップS113に移行し、ステップS107において表示したメニュー項目選択部52a乃至52dの表示を終了して、上記ステップS103に戻る。
一方、ステップS111において画像の選択が解除されていないと判定した場合、ステップS115に移行し、ユーザの指先による指定位置がメニュー項目選択部52a乃至52dが表示されている領域の何れかの領域に到達したか否かを判定する。この際、主制御部38は、指定位置が、メニュー項目選択部52a乃至52dの何れか1つの表示領域の内部に位置する場合に、指定位置がメニュー項目選択部52a乃至52dが表示されている領域の何れか1つの領域に到達したと判定する。
ステップS115において何れかのメニュー項目選択部52a乃至52dの領域に到達したと判定した場合には、ステップS117に移行し、ステップS107において表示されたメニュー項目選択部52a乃至52dの表示を終了する。また、次のステップS119では、ユーザの指先による指定位置が到達した領域に対応するメニュー項目選択部52a乃至52dの何れかに応じた処理を実行する。
このように、ユーザは、操作パネル14Bを介して、所望の処理を実行させたい画像の表示領域に触れることにより当該画像を指定する。そして、ユーザは、当該画像に隣接して表示されたメニュー項目選択部52a乃至52dの表示領域のうち上記所望の処理に対応する領域に移動させる。これにより、ユーザは、所望の画像に対して所望の処理を簡単に実行させることができる。
図5(A)に示すように、ユーザの指先の移動に伴って指定位置が移動し、図5(B)に示すように、「メニューB」のメニュー項目選択部52bの表示領域に指定位置が位置した場合に、「メニューB」の選択に応じた処理が行われる。
一方、ステップS115において到達していないと判定した場合、ステップS121に移行し、ユーザの指先による指定位置がドラッグ指示領域54a乃至54dの何れか1つの領域に到達したか否かを判定する。
ステップS121において到達したと判定した場合、ステップS123に移行し、ステップS107において表示されたメニュー項目選択部52a乃至52dの表示を終了する。そして、次のステップS125では、選択された画像の移動に応じたドラッグ操作を行う。
図6(A)に示すように、ユーザの指先の移動に伴って操作パネル14B上の指定位置が移動し、図6(B)に示すように、正面視右側のドラッグ指示領域54dに指定位置が位置した場合、メニュー項目選択部52a乃至52dの表示を終了する。そして、このドラッグ操作に応じた処理が実行される。
図7(A)乃至(F)は、本実施形態に係るドラッグ操作に応じた処理の一例を示す模式図である。例えば、図7(A)及び(B)に示すように、1番乃至5番の画像が1列に表示されている際に、ユーザ操作によって、1番の画像がドラッグ操作の処理対象として指定され、2番乃至5番の画像が存在する方向(正面視右方向)に移動されたとする。この場合、図7(C)に示すように、1番の画像と2番の画像とが重なった状態で、1番の画像の指定が継続(長押し)された場合、主制御部38は、1番の画像と2番の画像との集約が指示されたとし、1番の画像と2番の画像とを集約する。この際、例えば、図7(D)に示すように、1番の画像が存在する位置に新しいフォルダが作成させ、作成されたフォルダ内に1番の画像と2番の画像とが格納される。
その後、図7(E)及び(F)に示すように、さらに1番の画像の指定が継続(長押し)された場合、3番の画像、4番の画像、と順次集約されていく。そして、図7(G)に示すように、4番まで集約した段階で1番の画像の指定(長押し)が解除されると、上記作成したフォルダに1番乃至4番の画像が集約された状態で、集約(同一フォルダ内への保存)が終了される。
このように、ユーザは、操作パネル14Bを介して、所望の画像の表示領域に触れることにより画像を指定すると共に、指を指定した画像に隣接するドラッグ指示領域54a乃至54dに移動させる。これにより、ユーザは、指定した画像に対してドラッグ操作に対応する処理を簡単に実行させることができる。
ステップS127では、接触指定されたボタンが終了ボタン50であるか否かにより、表示制御処理プログラムを終了させる指示の入力操作がされたか否かを判定する。
次のステップS127において表示制御処理プログラムを終了させる指示の入力操作がされていないと判定した場合、上記ステップS105に戻る。
一方、ステップS103またはS127において表示制御処理プログラムを終了させる指示の入力操作がされたと判定した場合には、ステップS129に移行し、画像一覧画面46の表示を終了するように制御した後、本表示制御処理プログラムを終了させる。
このように、スマートフォン10は、画像を表示させる表示領域を有すると共に、当該表示領域の表面にタッチパネルである操作パネル14Bが設けられた表示手段である表示パネル14Aに表示させた画像が前記タッチパネルを介して指定されたとする。この場合、予め定められた複数のメニュー項目の各々を示すメニュー画面を表示領域における表示させた画像に隣接する周辺領域の一部に空き領域を設けた状態でメニュー項目毎に表示させる。また、メニュー画面を表示領域に表示させた状態で、画像がタッチパネルを介して指定されたことに引き続き、指定位置がメニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたと判断する。一方、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じたドラッグ操作が指定されたと判断する。そして、判断結果に応じた処理を実行する。
また、画像に隣接する周辺領域の一部を空き領域とすることで、移動操作中に操作する指がユーザの意図に反してタッチパネルから離れてしまい、携帯端末装置に指が離れた位置で実行指示が入力されたとみなされることが防止される。すなわち、ユーザの意図に反したメニュー操作が実行されてしまうことが防止される。
なお、本実施形態では、選択された画像の周囲にメニュー画面を表示させるが、本発明は、これに限定されない。表示パネル14Aの表示領域において、選択された画像に重ならない位置に、各メニュー項目を指示するための移動方向を示すメニュー画面を表示させても良い。
図8(A)及び(B)と、図9(A)及び(B)とは、本実施形態に係る画像一覧画面46の他の例を示している。この場合、スマートフォン10は、画像一覧画面46においてユーザ操作により画像が選択された場合に、一例として図8(A)に示すように、選択された画像の正面視上側にメニュー画面60を表示させる。メニュー画面60において、選択された画像の位置を示す基準画像位置60aが中央に表示され、基準画像位置60aを基準として指定位置をどの方向に移動させるとどの処理が実行されるかを示している。
ユーザが、メニュー画面60を参照しながら、図8(B)に示すように、指定位置をメニュー画面60においてメニューBが位置する方向(正面視斜め右上方向)に移動させたとする。この場合、主制御部38は、メニューBに対応する処理を実行する。
一方、ユーザが、図9(A)に示すメニュー画面60を参照しながら、図9(B)に示すように、指定位置をメニュー画面60においてドラッグ操作が位置する方向(正面視右方向)に予め定められた距離以上移動させたとする。この場合、主制御部38は、ドラッグ操作に対応する処理を実行する。
ユーザがメニュー画面60を参照して操作パネル14Bにおける指定位置を移動させている際に、図10に示すように、メニュー画面60に、指定位置を示す基準位置情報60bを指定位置の移動に応じて移動させながら表示させても良い。これにより、ユーザは、メニュー画面60における基準位置情報60bの位置を確認しながら、メニュー項目に対応する処理またはドラッグ操作に対応する処理の実行を指示することができる。
また、本実施形態では、選択された画像の周囲に各メニュー項目を噴出しとして表示させたが、これに限定されない。表示パネル14Aの表示領域において、選択された画像の周囲に円弧状に、各メニュー項目を指示するための移動方向を示すメニュー画面を表示させても良い。
図11は、本実施形態に係る画像一覧画面46の他の例を示している。スマートフォン10は、画像一覧画面46においてユーザ操作により画像が選択された場合に、一例として図11に示すように、指定位置または選択された画像の中心を中心とした円環状の領域にメニュー画面を表示させても良い。この場合、上記円環状の領域における一部分の角度に対応する領域にメニュー項目選択部62a乃至62dを表示させると良い。この際、上記円環状の領域における他の部分の角度に対応する領域を空き領域とし、当該空き領域をドラッグ操作を指示するための領域62eとする。
また、本実施形態では、選択された画像の周囲に各メニュー項目を噴出しとして表示させるが、これに限定されない。表示パネル14Aの表示領域において、メニュー項目が4つ未満であった場合、複数の画像の配列において選択された画像の行方向または列方向に隣接する領域に、それぞれメニュー項目を表示させても良い。この場合、複数の画像の配列において選択された画像の行方向または列方向に隣接する領域で、かつメニュー項目が表示されない領域を空き領域とし、当該空き領域を、ドラッグ操作を指示するための領域とすると良い。
図12(A)及び(B)は、本実施形態に係る画像一覧画面46の他の例を示している。例えば、メニュー項目が2つであった場合、図12(A)に示すように、選択された画像の正面視上側の領域及び正面視下側の領域にメニュー項目選択部64a及び64bを表示させる。この場合、正面視左側の領域及び正面視右側の領域を空き領域とし、当該空き領域を、ドラッグ操作を指示するための領域64cとすると良い。
また、本実施形態では、指定位置がメニュー項目またはドラッグ操作を指示するための領域に移動した場合に各種処理を実行するが、これに限定されない。すなわち、ユーザ操作により画像が選択された場合、ドラッグ操作が指示されたと一旦仮定し、指定位置の移動に応じて選択された画像の表示位置を移動させるなどのドラッグ操作に対応する処理を行う。そして、選択された画像の表示位置がメニュー項目またはドラッグ操作を指示するための領域に移動した場合に各種処理を実行するようにしても良い。
図13(A)及び(B)は、本実施形態に係る画像一覧画面46の他の例を示している。スマートフォン10は、画像一覧画面46においてユーザ操作により画像が選択された場合に、選択された画像の周辺領域にメニュー項目選択部66a乃至66dを表示させる。この際、スマートフォン10は、例えば、図13(A)に示すように、選択された画像を中心とした円環状の領域における一部分の角度に対応する領域にメニュー項目選択部66a乃至66dを表示させる。この際、上記円環状の領域における他の部分の角度に対応する領域を空き領域とし、当該空き領域をドラッグ操作を指示するための領域66eとする。
スマートフォン10は、ユーザ操作により、選択された画像の表示位置がメニュー項目選択部66a乃至66dに到達した場合には、メニュー項目選択部66a乃至66dの表示を停止させ、メニュー項目に対応する処理を実行する。一方、スマートフォン10は、ドラッグ操作を指示するための領域に到達した場合には、メニュー項目選択部66a乃至66dの表示を停止させ、ドラッグ操作に対応する処理を実行する。
図13(B)に示すように、例えば、選択された画像の表示位置が「メニューA」のメニュー項目選択部66aに到達した場合には、ドラッグ操作に対応する処理を中止し、メニューAに対応する処理が実行される。一方、選択された画像の表示位置がドラッグ操作を指示するための領域に到達した場合には、メニュー項目選択部66a乃至66dの表示を停止し、ドラッグ操作が継続される。
この際、選択された画像の表示位置が各領域に到達したか否かの判定は、選択された画像の一部分が各領域内に位置した場合に到達したと判定すると良い。なお、判定方法はこれに限定されず、選択された画像における予め定められた面積以上の領域が各領域内に位置した場合に到達したと判定しても良い。
さらに、上記実施の形態では、本発明をコンピュータ・プログラムの実行によるソフトウェアにより実現した場合について説明したが、本発明はこれに限定されるものではなく、本発明はハードウェアのみにより実現してもよく、ハードウェアとソフトウェアとの組み合わせによって実現してもよいことは言うまでもない。
10 スマートフォン
14A 表示パネル
14B 操作パネル
28 記憶部
38 主制御部
46 画像一覧画面。

Claims (11)

  1. 画像を表示させる表示領域を有すると共に、当該表示領域の表面にタッチパネルが設けられた表示手段に表示させた画像が前記タッチパネルを介して指定された場合、予め定められた複数のメニュー項目の各々を示すメニュー画面を前記表示領域における前記表示させた画像に隣接する周辺領域の一部に空き領域を設けた状態でメニュー項目毎に表示させる制御を行う表示制御手段と、
    前記メニュー画面を前記表示領域に表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じたドラッグ操作が指定されたと判断する判断手段と、
    前記判断手段による判断結果に応じた処理を実行する実行手段と、
    を備えた画像表示制御装置。
  2. 前記表示制御手段は、前記判断手段による判断が終了した後に前記メニュー画像の表示を中止させる制御を行う
    請求項1記載の画像表示制御装置。
  3. 前記表示制御手段は、前記画像をマトリックス状に配列させて前記表示領域に表示させる制御を行うと共に、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、指定された画像に隣接する周辺領域のうち、行方向及び列方向の少なくとも一方に隣接する画像間の領域の一部に前記空き領域を生じさせて前記メニュー画面を表示させる制御を行う
    請求項1または2記載の画像表示制御装置。
  4. 前記表示制御手段は、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、前記指定された画像の少なくとも1つの辺に隣接する周辺領域の一部に空き領域を設けた状態で、前記指定された画像の他の辺に隣接する周辺領域の一部に前記メニュー画面を表示させる制御を行う
    請求項3記載の画像表示制御装置。
  5. 前記表示制御手段は、前記判断手段による判断が終了する前に前記タッチパネルを介した指定が解除された場合、前記メニュー画像の表示を中止させる制御を行う
    請求項1乃至4の何れか1項記載の画像表示制御装置。
  6. 前記表示制御手段は、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、前記予め定められたメニュー項目を噴き出しで表示させたメニュー画面を前記画像に隣接する周辺領域の一部に空き領域を有する状態で前記表示領域に表示させる制御を行う
    請求項1乃至5の何れか1項記載の画像表示制御装置。
  7. 前記表示制御手段は、前記メニュー画面を前記表示領域に表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記表示領域上で移動された場合は、指定位置の移動に応じた表示位置に前記指定された画像を移動させながら表示させる制御を行い、前記判断手段によりメニュー項目が指定されたと判断された場合には、前記指定された画像を元の位置に移動させて表示させ、前記判断手段によりドラッグ操作が指定されたと判断された場合には、前記指定された画像を空き領域の指定位置に停止させて表示させる制御を行う
    請求項1乃至6の何れか1項記載の画像表示制御装置。
  8. 前記表示制御手段は、前記表示領域に表示させた画像が前記タッチパネルを介して指定された場合、指定位置または指定された画像の中心を中心とした円弧状のメニュー画面を前記画像に隣接する周辺領域の一部に空き領域を有する状態で前記表示領域に表示させる制御を行う
    請求項1乃至7の何れか1項記載の画像表示制御装置。
  9. 請求項1乃至8の何れか1項記載の画像表示制御装置と、
    画像表示させると共に表示させた画像を選択するための情報を入力するタッチパネルを供えた表示手段と、
    を含む画像表示装置。
  10. コンピュータを、
    予め定められた画像を表示させる表示領域を有すると共に当該表示領域の表面にタッチパネルが設けられた表示手段に表示させた画像が、前記タッチパネルを介して指定された場合、ドラッグ操作を行う際の移動方向を示す項目を含むメニュー項目の各々毎を示すメニュー画面を前記表示手段の表示領域における前記画像に隣接する周辺領域の一部に空き領域を有する状態で表示させる制御を行う表示制御手段と、
    前記メニュー画面を前記表示手段により表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたものと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じた前記ドラッグ操作が指定されたと判断する判断手段と、
    前記判断手段による判断結果に応じた処理を実行する実行手段と、
    として機能させるためのプログラム。
  11. 予め定められた画像を表示させる表示領域を有すると共に当該表示領域の表面にタッチパネルが設けられた表示手段に表示させた画像が、前記タッチパネルを介して指定された場合、ドラッグ操作を行う際の移動方向を示す項目を含むメニュー項目の各々毎を示すメニュー画面を前記表示手段の表示領域における前記画像に隣接する周辺領域の一部に空き領域を有する状態で表示させる制御を行う表示制御ステップと、
    前記メニュー画面を前記表示手段により表示させた状態で、前記画像が前記タッチパネルを介して指定されたことに引き続き、指定位置が前記メニュー画面上に移動された場合は、移動先のメニュー画面のメニュー項目が指定されたものと判断し、指定位置が前記空き領域に移動した場合は、指定された画像の当該指定位置の移動に応じた前記ドラッグ操作が指定されたと判断する判断ステップと、
    前記判断ステップによる判断結果に応じた処理を実行する実行ステップと、
    を行う画像表示制御方法。
JP2012218679A 2012-09-28 2012-09-28 画像表示制御装置、画像表示装置、プログラム及び画像表示方法 Active JP5844707B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2012218679A JP5844707B2 (ja) 2012-09-28 2012-09-28 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
US13/859,213 US20140096052A1 (en) 2012-09-28 2013-04-09 Image display control apparatus, image display apparatus, non-transitory computer readable medium, and image display control method
CN201310168346.8A CN103713839A (zh) 2012-09-28 2013-05-09 图像显示控制设备、图像显示设备以及图像显示控制方法
US14/806,748 US10222968B2 (en) 2012-09-28 2015-07-23 Image display control apparatus, image display apparatus, non-transitory computer readable medium, and image display control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012218679A JP5844707B2 (ja) 2012-09-28 2012-09-28 画像表示制御装置、画像表示装置、プログラム及び画像表示方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015227147A Division JP6153990B2 (ja) 2015-11-19 2015-11-19 画像表示制御プログラム、画像表示制御装置、及び画像表示制御方法

Publications (2)

Publication Number Publication Date
JP2014071765A true JP2014071765A (ja) 2014-04-21
JP5844707B2 JP5844707B2 (ja) 2016-01-20

Family

ID=50386508

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012218679A Active JP5844707B2 (ja) 2012-09-28 2012-09-28 画像表示制御装置、画像表示装置、プログラム及び画像表示方法

Country Status (3)

Country Link
US (2) US20140096052A1 (ja)
JP (1) JP5844707B2 (ja)
CN (1) CN103713839A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016181207A (ja) * 2015-03-25 2016-10-13 コニカミノルタ株式会社 画像形成装置、制御方法、および制御プログラム
KR20170029445A (ko) * 2017-02-23 2017-03-15 고동균 터치-드래그를 이용한 사용자 인터페이스 제공방법

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5844707B2 (ja) 2012-09-28 2016-01-20 富士フイルム株式会社 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
USD771087S1 (en) * 2013-12-05 2016-11-08 Lg Electronics Inc. Display of a television receiver with graphical user interface
USD766286S1 (en) * 2013-12-05 2016-09-13 Lg Electronics Inc. Display of a television receiver with graphical user interface
USD754680S1 (en) * 2013-12-05 2016-04-26 Lg Electronics Inc. Display of a television receiver with graphical user interface
USD766288S1 (en) * 2013-12-05 2016-09-13 Lg Electronics Inc. Display of a television receiver with graphical user interface
USD766287S1 (en) * 2013-12-05 2016-09-13 Lg Electronics Inc. Display of a television receiver with graphical user interface
USD755202S1 (en) * 2013-12-30 2016-05-03 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD754678S1 (en) * 2013-12-30 2016-04-26 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US20160028961A1 (en) * 2014-07-23 2016-01-28 Indran Rehan Thurairatnam Visual Media Capture Device For Visual Thinking
DE102014014498B4 (de) 2014-09-25 2024-08-08 Alcon Inc. Mit einem Touchscreen ausgestattetes Gerät sowie Verfahren zur Steuerung eines derartigen Geräts
US10019133B1 (en) * 2017-04-02 2018-07-10 Charles Russell McNeill Unified computing device interface for assembly of a plurality of types of digital content for transmission to a plurality of target destinations
JP6915492B2 (ja) * 2017-10-11 2021-08-04 トヨタ自動車株式会社 表示制御装置
CN111309206A (zh) * 2020-02-04 2020-06-19 北京达佳互联信息技术有限公司 数据处理方法、装置、电子设备及存储介质
JP7477235B1 (ja) 2023-12-25 2024-05-01 Art-Tra株式会社 電子機器、表示制御方法及びアプリケーションプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099172A (ja) * 2001-07-10 2003-04-04 Hewlett Packard Co <Hp> ポップアップ・メニュー・システムを含むオペレータ・インタフェース
JP2011138536A (ja) * 2008-04-22 2011-07-14 Apple Inc デバイス上の言語入力インターフェース
JP2012048325A (ja) * 2010-08-24 2012-03-08 Canon Inc 情報処理装置、その制御方法、プログラム及び記憶媒体

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5583984A (en) * 1993-06-11 1996-12-10 Apple Computer, Inc. Computer system with graphical user interface including automated enclosures
US5715416A (en) * 1994-09-30 1998-02-03 Baker; Michelle User definable pictorial interface for a accessing information in an electronic file system
JP3237436B2 (ja) 1995-02-15 2001-12-10 日本電気株式会社 タッチパネル座標操作方法およびその方法を用いた情報処理装置
US6433800B1 (en) * 1998-08-31 2002-08-13 Sun Microsystems, Inc. Graphical action invocation method, and associated method, for a computer system
US7370281B2 (en) * 2002-02-22 2008-05-06 Bea Systems, Inc. System and method for smart drag-and-drop functionality
US20040095390A1 (en) * 2002-11-19 2004-05-20 International Business Machines Corporaton Method of performing a drag-drop operation
US7386532B2 (en) * 2002-12-19 2008-06-10 Mathon Systems, Inc. System and method for managing versions
US20040217990A1 (en) * 2003-04-30 2004-11-04 International Business Machines Corporation Method and apparatus for dynamic sorting and displaying of listing data composition and automating the activation event
US20050060653A1 (en) * 2003-09-12 2005-03-17 Dainippon Screen Mfg. Co., Ltd. Object operation apparatus, object operation method and object operation program
US7665032B2 (en) * 2005-08-18 2010-02-16 Microsoft Corporation Sidebar engine, object model and schema
US7552399B2 (en) * 2005-12-27 2009-06-23 International Business Machines Corporation Extensible icons with multiple drop zones
KR100772396B1 (ko) * 2006-02-10 2007-11-01 삼성전자주식회사 데이터 객체 병합 방법 및 장치
US9086785B2 (en) * 2007-06-08 2015-07-21 Apple Inc. Visualization object receptacle
US8074178B2 (en) 2007-06-12 2011-12-06 Microsoft Corporation Visual feedback display
CN101809531A (zh) * 2007-10-02 2010-08-18 株式会社爱可信 终端装置、链接选择方法以及显示程序
US8526767B2 (en) * 2008-05-01 2013-09-03 Atmel Corporation Gesture recognition
KR100969790B1 (ko) * 2008-09-02 2010-07-15 엘지전자 주식회사 이동단말기 및 그 컨텐츠 합성방법
US8683390B2 (en) * 2008-10-01 2014-03-25 Microsoft Corporation Manipulation of objects on multi-touch user interface
US8321802B2 (en) 2008-11-13 2012-11-27 Qualcomm Incorporated Method and system for context dependent pop-up menus
ES2630408T3 (es) * 2008-12-01 2017-08-21 Lg Electronics Inc. Procedimiento de operación de un icono de ejecución de terminal móvil
US20100169828A1 (en) * 2008-12-29 2010-07-01 International Business Machines Corporation Computer desktop organization via magnet icons
KR101521932B1 (ko) * 2009-01-19 2015-05-20 엘지전자 주식회사 단말기 및 그 제어 방법
US9405456B2 (en) * 2009-06-08 2016-08-02 Xerox Corporation Manipulation of displayed objects by virtual magnetism
JP5402322B2 (ja) 2009-07-02 2014-01-29 ソニー株式会社 情報処理装置および情報処理方法
JP2011107823A (ja) 2009-11-13 2011-06-02 Canon Inc 表示制御装置及び表示制御方法
KR101651926B1 (ko) * 2010-01-07 2016-08-29 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2011123577A2 (en) * 2010-03-31 2011-10-06 Phunware Inc. Methods and systems for interactive user interface objects
US8386950B2 (en) * 2010-04-05 2013-02-26 Sony Ericsson Mobile Communications Ab Methods, systems and computer program products for arranging a plurality of icons on a touch sensitive display
US20110252349A1 (en) * 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Folders
JPWO2011152335A1 (ja) 2010-05-31 2013-08-01 日本電気株式会社 タッチパネル入力を用いた電子機器及びそれによる操作受付方法
US8799815B2 (en) * 2010-07-30 2014-08-05 Apple Inc. Device, method, and graphical user interface for activating an item in a folder
US9582187B2 (en) * 2011-07-14 2017-02-28 Microsoft Technology Licensing, Llc Dynamic context based menus
US9916538B2 (en) * 2012-09-15 2018-03-13 Z Advanced Computing, Inc. Method and system for feature detection
JP5844707B2 (ja) 2012-09-28 2016-01-20 富士フイルム株式会社 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
US9940016B2 (en) * 2014-09-13 2018-04-10 Microsoft Technology Licensing, Llc Disambiguation of keyboard input

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099172A (ja) * 2001-07-10 2003-04-04 Hewlett Packard Co <Hp> ポップアップ・メニュー・システムを含むオペレータ・インタフェース
JP2011138536A (ja) * 2008-04-22 2011-07-14 Apple Inc デバイス上の言語入力インターフェース
JP2012048325A (ja) * 2010-08-24 2012-03-08 Canon Inc 情報処理装置、その制御方法、プログラム及び記憶媒体

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016181207A (ja) * 2015-03-25 2016-10-13 コニカミノルタ株式会社 画像形成装置、制御方法、および制御プログラム
KR20170029445A (ko) * 2017-02-23 2017-03-15 고동균 터치-드래그를 이용한 사용자 인터페이스 제공방법

Also Published As

Publication number Publication date
US10222968B2 (en) 2019-03-05
US20140096052A1 (en) 2014-04-03
JP5844707B2 (ja) 2016-01-20
CN103713839A (zh) 2014-04-09
US20150324082A1 (en) 2015-11-12

Similar Documents

Publication Publication Date Title
JP5844707B2 (ja) 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
US11336820B2 (en) Method and terminal for acquire panoramic image
JP5925655B2 (ja) 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
RU2662690C2 (ru) Устройство и способ управления объектом пользовательского прибора
JP5370259B2 (ja) 携帯型電子機器
JP6025483B2 (ja) 表示制御装置、画像表示装置、およびプログラム
US20160062636A1 (en) Mobile terminal and control method thereof
JP6025482B2 (ja) 表示制御装置、画像表示装置、およびプログラム
JP5925656B2 (ja) 画像表示制御装置、画像表示装置、プログラム及び画像表示方法
JP2019500688A (ja) 迅速な画面分割方法、装置、および電子デバイス、表示ui、および記憶媒体
JP5977132B2 (ja) 表示制御装置、画像表示装置、およびプログラム
CN109040580B (zh) 移动终端及其拍照的控制方法和装置
JP6153990B2 (ja) 画像表示制御プログラム、画像表示制御装置、及び画像表示制御方法
JP5510008B2 (ja) 携帯端末装置
JP6429814B2 (ja) 表示制御装置、画像表示装置、およびプログラム
JP6410900B2 (ja) 表示制御装置、画像表示装置、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141205

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151014

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151020

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151119

R150 Certificate of patent or registration of utility model

Ref document number: 5844707

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250