JP7363235B2 - 情報処理装置及び情報処理プログラム - Google Patents

情報処理装置及び情報処理プログラム Download PDF

Info

Publication number
JP7363235B2
JP7363235B2 JP2019164918A JP2019164918A JP7363235B2 JP 7363235 B2 JP7363235 B2 JP 7363235B2 JP 2019164918 A JP2019164918 A JP 2019164918A JP 2019164918 A JP2019164918 A JP 2019164918A JP 7363235 B2 JP7363235 B2 JP 7363235B2
Authority
JP
Japan
Prior art keywords
display
movement
operator
instruction
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019164918A
Other languages
English (en)
Other versions
JP2021043680A (ja
Inventor
洋平 内海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2019164918A priority Critical patent/JP7363235B2/ja
Priority to US16/749,169 priority patent/US20210072884A1/en
Publication of JP2021043680A publication Critical patent/JP2021043680A/ja
Application granted granted Critical
Publication of JP7363235B2 publication Critical patent/JP7363235B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files
    • G06F9/4451User profiles; Roaming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Description

本発明は、情報処理装置及び情報処理プログラムに関する。
従来、情報処理装置上で動作するアプリケーションにおいて、操作者の表示指示に応じて、例えばコンテキストメニューやポップアップメッセージなどの表示ウィンドウが新たにディスプレイに表示される場合があった。
特許文献1には、電子文書の編集を行うアプリケーションにおいて、操作者が右クリックを実行すると表示指示が入力され、当該アプリケーションに種々の命令を入力するための種々のボタンを含む領域メニューがマウスカーソルの近傍に表示されることが開示されている。
特表2011-526033号公報
ところで、操作者の表示指示に応じて表示ウィンドウが表示される場合、表示ウィンドウは、所定の規則に従って決定される基本表示位置に表示されていた。例えば、表示指示が右クリックであれば、右クリックされたときのマウスカーソルの位置が表示ウィンドウの左上隅となるように表示ウィンドウが表示されていた。
しかしながら、表示ウィンドウを表示させたい位置は、操作者によって異なる場合がある。
本発明の目的は、操作者の表示指示に応じてディスプレイに表示ウィンドウが表示される情報処理装置において、所定の規則に従って決定される基本表示位置よりも操作者に適合した位置に表示ウィンドウを表示させることにある。
求項に係る発明は、操作者の表示指示に応じてディスプレイに表示ウィンドウを表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させるプロセッサと、を備え、前記プロセッサは、前記操作者から前記表示指示を受け付けた際に、過去における前記操作者の前記移動指示による前記表示ウィンドウの移動を示す移動履歴情報に基づいて、所定の規則に従って決定される基本表示位置から変更された変更表示位置を演算し、前記変更表示位置、及び、前記変更表示位置の1又は複数の近傍位置それぞれについて、前記表示ウィンドウが表示されたことによって隠れてしまう、前記表示ウィンドウが表示される前に前記ディスプレイに表示された画面のエッジの量が大きい程大きくなり、且つ、前記変更表示位置からの距離が大きい程大きくなる指標値を演算し、前記指標値が最も小さくなる位置に前記表示ウィンドウを表示させる、ことを特徴とする情報処理装置である。
請求項に係る発明は、操作者の表示指示に応じて、複数種類のボタンを含む表示ウィンドウをディスプレイに表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させるプロセッサと、を備え、前記プロセッサは、過去における前記操作者の前記移動指示による前記表示ウィンドウの移動、及び、所定の規則に従って決定される基本表示位置からの前記表示ウィンドウの移動方向及び移動後に操作されたボタンを示す移動履歴情報に基づいて、前記操作者が、第1の移動方向に前記表示ウィンドウを移動させた後第1のボタンを操作する傾向があり、第2の移動方向に前記表示ウィンドウを移動させた後第2のボタンを操作する傾向がある場合は、前記操作者から前記表示指示を受け付けた際に、前記基本表示位置から、前記第1の移動方向へ移動した位置に前記第1のボタンを含む分割ウィンドウを表示し、前記第2の移動方向へ移動した位置に前記第2のボタンを含む分割ウィンドウを表示する、ことを特徴とする情報処理装置である。
請求項に係る発明は、コンピュータに、操作者の表示指示に応じてディスプレイに表示ウィンドウを表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させ、前記操作者から前記表示指示を受け付けた際に、過去における前記操作者の前記移動指示による前記表示ウィンドウの移動を示す移動履歴情報に基づいて、所定の規則に従って決定される基本表示位置から変更された変更表示位置を演算させ前記変更表示位置、及び、前記変更表示位置の1又は複数の近傍位置それぞれについて、前記表示ウィンドウが表示されたことによって隠れてしまう、前記表示ウィンドウが表示される前に前記ディスプレイに表示された画面のエッジの量が大きい程大きくなり、且つ、前記変更表示位置からの距離が大きい程大きくなる指標値を演算させ、前記指標値が最も小さくなる位置に前記表示ウィンドウを表示させる、ことを特徴とする情報処理プログラムである。
請求項4に係る発明は、コンピュータに、操作者の表示指示に応じて、複数種類のボタンを含む表示ウィンドウをディスプレイに表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させ、過去における前記操作者の前記移動指示による前記表示ウィンドウの移動、及び、所定の規則に従って決定される基本表示位置からの前記表示ウィンドウの移動方向及び移動後に操作されたボタンを示す移動履歴情報に基づいて、前記操作者が、第1の移動方向に前記表示ウィンドウを移動させた後第1のボタンを操作する傾向があり、第2の移動方向に前記表示ウィンドウを移動させた後第2のボタンを操作する傾向がある場合は、前記操作者から前記表示指示を受け付けた際に、前記基本表示位置から、前記第1の移動方向へ移動した位置に前記第1のボタンを含む分割ウィンドウを表示させ、前記第2の移動方向へ移動した位置に前記第2のボタンを含む分割ウィンドウを表示させる、ことを特徴とする情報処理プログラムである。
請求項1又はに係る発明によれば、変更表示位置からの距離も考慮した上で、変更表示位置及び変更表示位置の近傍位置の中から決定された、表示ウィンドウによって隠されてしまう画面の情報量がより少なくなる位置に表示ウィンドウを表示させることができる。
請求項2又は4に係る発明によれば、操作者の過去の表示ウィンドウの移動方向及び移動後に操作されたボタンに基づいて、基本表示位置から見て互いに異なる方向に複数の分割ウィンドウを表示することができる。
本実施形態に係る情報処理装置の構成概略図である。 基本表示位置にツールボックスが表示された様子を示す図である。 移動履歴DBの内容の例を示す図である。 変更表示位置にツールボックスが表示された様子を示す図である。 移動データの分布とクラスタの例を示す図である。 変更表示位置に表示されたツールボックスによって隠される画面のエッジを示す図である。 補正変更表示位置にツールボックスが表示された様子を示す図である。 分割ツールボックスが表示された様子を示す図である。 本実施形態に係る情報処理装置の処理の流れを示すフローチャートである。
図1は、本実施形態に係る情報処理装置10の構成概略図である。本実施形態においては、情報処理装置10はパーソナルコンピュータであるが、情報処理装置10としては、以下に説明するような機能を有している限りにおいてどのような装置であってもよい。例えば、タブレット端末やスマートフォンなどの携帯端末であってもよい。
通信インターフェース12は、例えば有線又は無線のLANアダプタなどを含んで構成される。通信インターフェース12は、LANあるいはインターネットなどの通信回線を介した、他の装置と通信する機能を発揮する。例えば、通信インターフェース12を介して、他の装置から電子文書を受信することが可能となる。
ディスプレイ14は、例えば液晶ディスプレイなどを含んで構成される。ディスプレイ14には、種々の画面が表示される。特に、ディスプレイ14には、後述する文書アプリケーション20の画面が表示される。
入力インターフェース16は、例えば、マウス、キーボード、あるいはタッチパネルなどを含んで構成される。入力インターフェース16は、情報処理装置10に対するユーザの指示を入力するために用いられる。
メモリ18は、例えばハードディスク、SSD(Solid State Drive)、eMMC(embedded Multi Media Card)、ROM、あるいはRAMなどを含んで構成されている。メモリ18は、後述のプロセッサ24とは別に設けられてもよいし、少なくとも一部がプロセッサ24の内部に設けられていてもよい。メモリ18には、情報処理装置10の各部を動作させるための情報処理プログラムが記憶される。
また、図1に示す通り、メモリ18には、文書アプリケーション20がインストールされる。文書アプリケーション20は、情報処理装置10上で動作可能なアプリケーションであり、メモリ18に記憶された電子文書を表示し、当該電子文書を編集するアプリケーションである。
図2は、文書アプリケーション20が実行されたときのディスプレイ14の画面の例を示す図である。文書アプリケーション20が実行されると、選択された電子文書Dが文書アプリケーション20のウィンドウ内に表示される。
文書アプリケーション20が操作対象として選択されている場合(換言すればフォーカスされている場合)に、操作者(すなわちユーザ)が入力インターフェース16から表示指示を入力すると、表示ウィンドウとしてのツールボックス30がディスプレイ14に新たに表示される。
ツールボックス30は、文書アプリケーション20にて開かれた電子文書Dに対して種々の編集を行うための複数種類のボタン32を含んでいる。図2の例では、ツールボックス30には、電子文書Dにテキストボックスを付加するためのテキストボタン32a、電子文書Dに付箋を付加するための付箋ボタン32b、電子文書Dに曲線を付加するための曲線ボタン32c、及び、電子文書Dに矢印を付加するための矢印ボタン32dを含んで構成されている。もちろん、ツールボックス30にはその他の種類のボタン32が含まれていてもよい。
ツールボックス30は、画面のレイヤー構造において、文書アプリケーション20のウィンドウや電子文書Dよりも前面側(すなわち手前側)に表示され、且つ、不透明となっている。あるいは、ツールボックス30は、画面のレイヤー構造における最前面に表示される。したがって、ツールボックス30が表示されると、ツールボックス30が表示された位置に元々表示されていた文書アプリケーション20の画面が隠されることとなる。
本実施形態では、ユーザの表示指示に応じてディスプレイ14に表示される表示ウィンドウはツールボックス30であるが、表示ウィンドウとしては、文書アプリケーション20のウィンドウや電子文書Dよりも前面側に表示され、且つ、不透明である限りにおいて、他のウィンドウであってもよい。例えば、表示ウィンドウは、種々のコマンド入力メニューボタンを含むコンテキストメニューであってもよい。また、表示ウィンドウとしては、例えばユーザへのメッセージ文を含むメッセージウィンドウのように、ユーザが操作するボタンを含まないものであってもよい。
本実施形態では、表示ウィンドウとしてのツールボックス30を表示させるためのユーザの表示指示は、入力インターフェース16に含まれるマウスに対してユーザが右クリックすることで情報処理装置10に入力される。すなわち、ユーザがマウスを右クリックすると、図2に示すようにツールボックス30がディスプレイ14に表示される。表示ウィンドウを表示させる表示指示を入力するための操作は、その他の操作であってもよい。ユーザがマウスを左クリックすること、マウスのホイールを押下すること、キーボードに含まれる特定のキーを押下することであってもよい。また、表示ウィンドウを表示させるためのユーザの表示指示を入力するための操作は、マウスの操作に応じてディスプレイ14上を移動するマウスカーソルCuを特定の位置に移動させることであってもよい。例えば、電子文書Dに含まれる画像あるいは文章の上にマウスカーソルCuを移動させると、文書アプリケーション20はそれをユーザからの表示指示であると認識し、表示ウィンドウ(例えばメッセージウィンドウ)を表示させるようにしてもよい。
原則的には、ツールボックス30は、所定の規則に従って決定される基本表示位置40に表示される。本実施形態では、ユーザが表示指示としてのマウスを右クリックして表示指示を入力したときのマウスカーソルCuの位置(すなわち座標)、つまり、ユーザからの表示指示の入力位置に応じた位置が基本表示位置40となる。具体的には、図2に示す通り、ユーザが表示指示を入力したときのマウスカーソルCuの位置からx軸方向に所定距離(すなわち所定画素数)移動した位置が基本表示位置40であり、ツールボックス30内の基準点(本実施形態では左上隅)が基本表示位置40に一致するようにツールボックス30が表示される。このように、基本表示位置40を基準としてツールボックス30が表示されることを、ツールボックス30が基本表示位置40に表示される、と表現する。なお、ディスプレイ14における各画素の座標は、左上隅の画素がx軸座標が1、y軸座標が1の画素であり、右隅の画素のx軸座標が最大となり、下隅の画素のy軸座標が最大となるようになっている。もちろん、表示指示の入力位置と基本表示位置40の位置関係は、その他の位置関係であってもよい。例えば、表示指示の入力位置と基本表示位置40とが一致していてもよい。
本実施形態では、基本表示位置40は、表示指示の入力位置に対する相対位置で規定される。例えば、(x軸方向の相対位置,y座標方向の相対位置)=(15,0)と規定される。これは、表示指示の入力位置からx軸方向に15画素、y軸方向に0画素分移動した位置が基本表示位置40であることを表している。このような基本表示位置40を表す表示指示の入力位置に対する相対表現((15,0)など)を相対基本位置と呼ぶ。
このように、本実施形態では、基本表示位置40は、表示指示の入力位置に対する相対的な位置で定められるものであり、表示指示の入力位置に従ってその位置が変動するものとなっている。しかし、基本表示位置40を決定する所定の規則とは、ディスプレイ14上の特定の位置を指し示すものであってもよい。この場合、原則的には、ユーザの表示指示の入力位置に関わらず、いつも決まった位置にツールボックス30が表示されることになる。
基本表示位置40に表示されたツールボックス30は、ユーザの移動指示に応じてディスプレイ上を移動可能となっている。本実施形態では、ユーザは、ツールボックス30のボタン32以外の位置にマウスカーソルCuを移動させ、左クリックを押しながらマウスを移動させる操作(つまりドラッグ操作)を行うことで、ツールボックス30の移動指示を入力することができる。これにより、ドラッグ操作に応じた位置にツールボックス30が移動する。もちろん、ツールボックス30に対する移動指示を入力する操作は他の操作であってもよい。
なお、本実施形態では、メモリ18に文書アプリケーション20がインストールされており、本実施形態に係る処理は文書アプリケーション20上において実行されるものであるが、ユーザからの表示指示に応じて表示ウィンドウが新たに表示されるアプリケーションであれば、その他のアプリケーション(例えば画像処理アプリケーションなど)がメモリ18にインストールされていてよく、本実施形態に係る処理が当該他のアプリケーションで実行されてもよい。
図1に戻り、メモリ18には、さらに、移動履歴DB(データベース)22が記憶される。移動履歴DB22は、ユーザ毎の、文書アプリケーション20における過去のツールボックス30の移動を示す移動履歴情報が格納される。
図3は、移動履歴DB22の内容の例を示す図である。図3に示す通り、移動履歴DB22においては、ユーザID、操作ID、移動ベクトル情報、及び、操作ボタン情報とが互いに関連付けられている。ユーザID、操作ID、移動ベクトル情報、及び操作ボタン情報との一組を移動データと呼ぶ。後述のプロセッサ24は、文書アプリケーション20においてユーザがツールボックス30を表示させ、且つ、ツールボックス30を移動させる度に、移動データを移動履歴DB22に蓄積記憶させていく。
ユーザIDは、ツールボックス30を移動させたユーザを識別する情報である。本実施形態では、情報処理装置10を起動する際にユーザ認証処理(すなわちログイン処理)が必要となっており、ユーザ認証処理によって、文書アプリケーション20を操作するユーザ、すなわちツールボックス30を移動させたユーザを特定可能となる。
操作IDは、ユーザの移動操作を識別する情報であり、ユーザがツールボックス30を移動させる度に、プロセッサ24により自動的に取得される。
移動ベクトル情報は、基本表示位置40からのツールボックス30の移動方向及び移動量を示す情報である。移動ベクトル情報は、(x軸方向への移動量,y軸方向への移動量)で示されている。例えば、図3に示されたテーブルの一番上のレコード(すなわち移動データ)においては、ツールボックス30は、基本表示位置40から、x軸方向に25画素、y軸方向に76画素の位置に移動されたことを示している。なお、本実施形態では、基本表示位置40は、ツールボックス30の左上隅の位置を示すものであるから、移動後のツールボックス30の左上隅の位置が、基本表示位置40からx軸方向に25画素、y軸方向に76画素の位置となる。
操作ボタン情報は、ツールボックス30に含まれるボタン32のうち、ユーザがツールボックス30を移動させた後に操作したボタン32を示す情報である。ツールボックス30の移動後にユーザがボタン32を操作しなかった場合の操作ボタン情報は「なし」となる。また、ツールボックス30の移動後にユーザが複数のボタン32を操作した場合には、操作された複数のボタン32を示す情報が操作ボタン情報として格納される。
ユーザは、ツールボックス30を基本表示位置40から移動させない場合もある。その場合は、移動履歴DB22には移動データは蓄積されないが、プロセッサ24は、ユーザ毎に、ツールボックス30を表示させた回数をカウントして移動履歴DB22に保持しておく。ユーザ毎のツールボックス30を移動させた回数は、移動データの数によって把握可能であるから、ユーザ毎のツールボックス30を表示させた回数を保持しておくことで、ツールボックス30を表示させた回数に対するツールボックス30を移動させた回数、すなわち移動操作の実行頻度をユーザ毎に把握することができる。
なお、本実施形態においては、移動履歴DB22が情報処理装置10のメモリ18に記憶されていたが、移動履歴DB22は他の装置であって情報処理装置10からアクセス可能な装置に記憶されるようにしてもよい。
プロセッサ24は、広義的な処理装置を指し、汎用的な処理装置(例えばCPU(Central Processing Unit)など)、及び、専用の処理装置(例えばGPU(Graphics Processing Unit)、ASIC(Application Specific Integrated Circuit)、FPGA(Field Programmable Gate Array)、あるいは、プログラマブル論理デバイスなど)の少なくとも1つを含んで構成される。プロセッサ24としては、1つの処理装置によるものではなく、物理的に離れた位置に存在する複数の処理装置の協働により構成されるものであってもよい。プロセッサ24は、メモリ18に記憶された情報処理プログラムとの協働により、図1に示すように、表示制御部26及び位置演算部28の機能を発揮する。
表示制御部26は、ディスプレイ14に表示される種々の画面の表示制御を行う。具体的には、表示制御部26は、上述の文書アプリケーション20のウィンドウ、電子文書D、及びマウスカーソルCuなどの表示制御を行う。また、表示制御部26は、ユーザからの表示指示に応じて、ツールボックス30を表示させる制御を行う。また、ユーザからの移動指示に応じて、移動後の位置にツールボックス30を表示させる制御を行う。
表示制御部26は、上述のように、ユーザからの表示指示に応じて、基本表示位置40にツールボックス30を表示することが可能であるが、後述の位置演算部28により演算される変更表示位置にツールボックス30を表示させることも可能となっている。本実施形態では、表示制御部26は、ユーザから表示指示を受けた場合に、移動履歴DB22に当該ユーザに係る移動データが所定数以上(例えば50個以上)蓄積されている場合に、変更表示位置にツールボックス30を表示させ、移動履歴DB22に当該ユーザに係る移動データが所定数未満しか蓄積されていない場合に、基本表示位置40にツールボックス30を表示させる。また、ツールボックス30を基本表示位置40に表示させるか、後述の変更表示位置に表示させるかは、ユーザ設定によって切り替え可能であってもよい。
位置演算部28は、移動履歴DB22に基づいて変更表示位置を演算する。本実施形態では、位置演算部28は以下の処理によって変更表示位置を演算する。まず、文書アプリケーション20を操作するユーザからツールボックス30の表示指示を受け付けると、位置演算部28は、当該ユーザの認証情報に基づいて、当該ユーザのユーザIDを特定する。その上で、移動履歴DB22を参照し、特定したユーザIDに係る移動データを抽出する。
次に、位置演算部28は、抽出した移動データの移動ベクトル情報に基づいて、変更表示位置を演算する。位置演算部28は、基本表示位置40から、抽出した移動データの移動ベクトル情報に基づいて演算される移動方向及び移動量に移動した位置を変更表示位置とする。
本実施形態では、表示指示の入力位置に対する変更表示位置の相対位置を表す相対変更位置は、以下の(式1)で演算される。
相対変更位置=相対基本位置+(代表移動ベクトル)×(移動操作の実行頻度)
・・・ (式1)
代表移動ベクトルとは、移動履歴DB22から抽出した各移動データの移動ベクトル情報から演算される代表的な移動方向及び移動量を示すものである。本実施形態では、代表移動ベクトルは、(x軸方向への移動量,y軸方向への移動量)で表さる。本実施形態では、代表移動ベクトルは、(抽出した各移動データのx軸方向への移動量の平均値,抽出した各移動データのy軸方向への移動量の平均値)で演算される。仮に、図3に示す操作ID「O00001」~「O00006」に係る6つの移動データが移動履歴DB22に記憶されていたとすると、ユーザID「U00001」が示すユーザのx軸方向への移動量の平均は、(25+20+32+70+15+32)/6=32.3となり、y軸方向への移動量の平均は、(76+21+42+105+(-21)+56)/6=46.5となる。したがって、代表移動ベクトルは、(32.3,46.5)となる。
移動操作の実行頻度は、当該ユーザがツールボックス30を表示させた回数に対するツールボックス30を移動させた回数である。仮に、ユーザID「U00001」が示すユーザが、ツールボックス30を150回表示させたうち、ツールボックス30の移動操作を45回行ったとすると、ユーザID「U00001」が示すユーザの移動操作の実行頻度は45/150=0.3となる。上述のように、ユーザ毎の移動操作の実行頻度は移動履歴DB22に記憶されているから、位置演算部28は、移動履歴DB22を参照することで、当該ユーザの移動操作の実行頻度を取得できる。
そして、仮に、相対基本位置が(15,0)で表される場合、(式1)に基づいて、相対変更位置は、(15+32.3×0.3,0+46.5×0.3)、すなわち、(25,14)となる。なお、上述の例では、移動量の平均の演算において小数点2位以下を四捨五入し、相対変更位置の演算において小数点1位以下を四捨五入しているが、これらは切り上げあるいは切り捨てとしてもよい。
表示制御部26は、位置演算部28が演算した相対変更位置が示す変更表示位置にツールボックス30を表示させることができる。具体的には、表示指示の入力位置から相対変更位置が示す分移動させた位置が変更表示位置となる。上述の例では、図4に示すように、表示指示が入力されたときのマウスカーソルCuの位置から、x軸方向に25画素、y軸方向に14画素移動した位置が変更表示位置42となり、表示制御部26は、ツールボックス30内の基準点(本実施形態ではツールボックス30の左上隅)が変更表示位置42に一致するようにツールボックス30を表示する。このように、変更表示位置42を基準としてツールボックス30が表示されることを、ツールボックス30が変更表示位置42に表示される、と表現する。
(式1)における代表移動ベクトルは、その他の方法によって演算されてもよい。例えば、(抽出した各移動データのx軸方向への移動量の最頻値,抽出した各移動データのy軸方向への移動量の最頻値)、あるいは、(抽出した各移動データのx軸方向への移動量の中央値,抽出した各移動データのy軸方向への移動量の中央値)などで演算されてもよい。
また、例えば、位置演算部28は、移動履歴DB22に記憶された複数の移動データを、その移動ベクトル情報に従って、x軸及びy軸からなる2次元マップ上にプロットし、当該2次元マップ上において移動データが密集している1又は複数のクラスタを特定し、特定された1又は複数のクラスタの中から選択された1つのクラスタの重心座標を代表移動ベクトルとしてもよい。
例えば、位置演算部28が、図5に示すように、移動履歴DB22に記憶された複数の移動データをx軸及びy軸からなる2次元マップ上にプロットしたとする。図5において、1つの黒丸が1つの移動データに対応している。その上で、位置演算部28は、2つのクラスタCl1及びCl2を特定したとする。なお、クラスタClの特定方法は既知の技術を用いることができるため、ここでは詳細な説明は省略する。本実施形態では、複数のクラスタClが特定された場合、位置演算部28は、クラスタClに含まれる移動データの数が多い方を選択する。図5の例では、クラスタCl1とCl2とを比較すると、クラスタCl2に比してクラスタCl1の方が移動データがより多く所属しているので、位置演算部28はクラスタCl1を選択する。なお、クラスタClの選択方法は他の方法であってよい。そして、位置演算部28は、クラスタCl1の重心座標を代表移動ベクトルとする。
例えば、あるユーザが、表示されたツールボックス30を基本表示位置40から一定量下側に移動させることが多い場合、当該ユーザにとっては、基本表示位置40から一定量下側の位置が、ツールボックス30を表示させる位置としてより適合した位置であると考えられる。本実施形態においては、上述のように、位置演算部28により演算される変更表示位置42は、文書アプリケーション20におけるユーザの過去のツールボックス30の移動を示す移動履歴DB22に基づいて演算される。したがって、例えば、上述のユーザが過去にツールボックス30を基本表示位置40から下側に移動させた頻度が多いのであれば、当該ユーザが表示指示を入力した場合、基本表示位置40の一定量下側の位置である変更表示位置42に初めからツールボックス30が表示されることとなる。これにより、当該ユーザは、ツールボックス30を移動させる必要なく、当該ユーザに適合した位置にツールボックス30を表示させることができる。
基本表示位置40に応じて、ツールボックス30の移動方向又は移動量の傾向に違いが生じる場合も考えられる。例えば、あるユーザは、画面の中央から左側が基本表示位置40となった場合、すなわち画面の左側にツールボックス30が表示された場合にはツールボックス30を左側に動かす頻度が高く、画面の中央から右側が基本表示位置40となった場合、すなわち画面の右側にツールボックス30が表示された場合にはツールボックス30を右側に動かす頻度が高い場合がある。
このような場合に応じて、移動履歴DB22に蓄積される移動データに、基本表示位置40、すなわちツールボックス30が表示された位置を示す基本表示位置情報を含めるようにしてもよい。そして、位置演算部28は、変更表示位置42の演算にあたり、移動履歴DB22の中から、各移動データの基本表示位置情報を参照し、今回ユーザがツールボックス30の表示指示を入力した位置に対応する移動データのみを抽出するようにしてもよい。例えば、ディスプレイ14の画面を複数の領域に概念上分割し、今回のユーザの表示指示を入力した位置が当該複数の領域のうちの第1領域である場合、移動履歴DB22の中から、基本表示位置情報が当該第1領域内の位置を示す移動データのみを抽出して変更表示位置42を演算するようにしてもよい。
上述のように、ツールボックス30は、画面のレイヤー構造において前面側に表示され、且つ、不透明となっているから、ツールボックス30が表示されると、ツールボックス30が表示された位置に元々表示されていた画面が隠されてしまう。ここで、ディスプレイ14に表示された画面において情報量が多い部分がツールボックス30により隠されてしまうのは適切ではない。
したがって、位置演算部28は、以下に説明する近傍探索処理によって、表示されるツールボックス30によって、ディスプレイ14に表示された画面において情報量が多い部分ができるだけ隠されないように、ツールボックス30の表示位置を補正することができる。近傍探索処理を行うか否かは、ユーザ設定などによって切り替え可能であってよい。なお、以下においては、ツールボックス30の表示位置を変更表示位置42からさらに補正する場合について近傍探索処理を説明するが、近傍探索処理によって、ツールボックス30の表示位置を基本表示位置40から補正することも可能である。
本実施形態では、ディスプレイ14に表示された画面における情報量は、画面のエッジの量に基づいて推認する。すなわち、エッジの量が多い箇所程、情報量が多く、エッジの量が少ない箇所程、情報量が少ないとする。エッジとは、隣接する画素において、画素値(輝度値又は色値)が所定値以上の画素を意味し、エッジの量とは、エッジとして認定されたエッジ画素の数を意味する。また、エッジの量は、各エッジ画素の隣接する画素との画素値の差を考慮して演算されてもよい。
図6に、仮に変更表示位置42にツールボックス30が表示されたことによって隠れてしまう画面のエッジ画素が示されている。図6において破線で示された画素がエッジ画素である。
位置演算部28は、変更表示位置42、及び、変更表示位置42の1又は複数の近傍位置のそれぞれについて、仮にツールボックス30が表示された場合における、ツールボックス30が表示されたことによって隠れてしまう画面のエッジの量を演算する。なお、変更表示位置42の近傍位置とは、例えば、変更表示位置42からx軸方向に±5画素、y軸方向に±5画素の範囲に属する位置である。なお、位置演算部28が演算するエッジの量に勘案されるエッジ画素は、画面全体の画素ではなく、文書アプリケーション20のウィンドウ内に含まれる画素に限定してもよい。
そして、位置演算部28は、各位置において演算したエッジの量を比較し、よりエッジの量が小さい位置を特定する。当該特定された位置を補正変更表示位置と呼ぶ。そして、図7に示すように、表示制御部26は、ツールボックス30内の基準点(本実施形態ではツールボックス30の左上隅)が補正変更表示位置44に一致するようにツールボックス30を表示する。このように、補正変更表示位置44を基準としてツールボックス30が表示されることを、ツールボックス30が補正変更表示位置44に表示される、と表現する。
変更表示位置42は、移動履歴DB22に基づいて演算された位置であり、すなわち、ユーザにとってツールボックス30が表示されるのに適合した位置である。したがって、近傍探索処理によって演算される補正変更表示位置44が、変更表示位置42から大きく離れてしまうのは適切でない場合がある。
したがって、位置演算部28は、ツールボックス30が表示されたことによって隠れてしまう画面のエッジの量のみならず、変更表示位置42からの距離も考慮して補正変更表示位置44を決定するようにしてもよい。具体的には、位置演算部28は、変更表示位置42、及び、変更表示位置42の1又は複数の近傍位置のそれぞれについて、ツールボックス30が表示されたことによって隠れてしまう画面のエッジの量が大きい程大きくなり、且つ、変更表示位置42からの距離が大きい程大きくなる指標値を演算し、当該指標値がより小さい位置を補正変更表示位置44とするようにしてもよい。
本実施形態では、位置演算部28は、上述の指標値を以下の(式2)で演算する。
指標値=(ツールボックス30によって隠されるエッジの量)×(距離係数)
・・・ (式2)
距離係数は、変更表示位置42からの距離が大きい程大きくなる係数である。具体的には距離係数は、以下の(式3)で演算される。
距離係数=0.2×N+1.0 ・・・ (式3)
(式3)において、Nは変更表示位置42からの距離を表す。
なお、指標値の演算方法は、ツールボックス30が表示されたことによって隠れてしまう画面のエッジの量が大きい程大きくなり、且つ、変更表示位置42からの距離が大きい程大きくなる限りにおいて他の方法で演算されてもよい。
上述の指標値に基づいて補正変更表示位置44を決定することで、単にツールボックス30が隠してしまう画面のエッジの量に基づいて補正変更表示位置44を決定する場合に比して、補正変更表示位置44が変更表示位置42から離れることを抑制することができる。
本実施形態のように、ツールボックス30が複数のボタン32を含む場合、ツールボックス30の複数の移動方向それぞれと、移動後に操作されたボタン32の種類との間に関連性が生じる場合がある。例えば、特定のユーザは、ツールボックス30を上側に移動させた場合にはテキストボタン32a(図2参照)を操作することが多く、ツールボックス30を右側に移動させた場合には曲線ボタン32cを操作することが多い、の如くである。
このような場合、当該ユーザにとっては、テキストボタン32aが基本表示位置40の上側に表示され、曲線ボタン32cが基本表示位置40の右側に表示されるのが好ましいと考えられる。したがって、位置演算部28は、ツールボックス30の複数の移動方向それぞれと、移動後に操作されたボタン32の種類との間に関連性がある場合、複数の変更表示位置42を演算し、表示制御部26は、当該複数の変更表示位置42にツールボックス30を分割して表示するようにしてもよい。
詳しくは、位置演算部28は、移動履歴DB22の移動ベクトル情報及び操作ボタン情報とに基づいて、ツールボックス30の表示指示を入力したユーザが、第1の移動方向にツールボックス30を移動させた後第1のボタンを操作する傾向があり、第2の移動方向にツールボックス30を移動させた後第2のボタンを操作する傾向がある場合は、基本表示位置40から第1の移動方向に移動した位置を第1の変更表示位置42とし、基本表示位置40から第2の移動方向に移動した位置を第2の変更表示位置42とする。その上で、表示制御部26は、第1の変更表示位置42に第1のボタンを含む第1分割ウィンドウを表示し、第2の変更表示位置42に第2のボタンを含む第2分割ウィンドウを表示する。
本実施形態では、位置演算部28は、第1及び第2の変更表示位置42を以下のように決定する。位置演算部28は、図5に示したように、移動履歴DB22に記憶された複数の移動データをx軸及びy軸からなる2次元マップ上にプロットし、複数のクラスタClを特定する。そして、各クラスタClについて、クラスタClに含まれる各移動データの操作ボタン情報を参照し、使用頻度が高いボタン32が有るか否かを判定する。例えば、各クラスタClに含まれる移動データを母数とした使用回数、すなわち使用頻度が所定値以上であるボタン32が有るか否かを判定する。そして、複数のクラスタClが使用頻度が高いボタン32をそれぞれ有し、且つ、複数のクラスタClにおける使用頻度が高いボタン32の種類が互いに異なる場合、当該複数のクラスタClそれぞれの重心座標を求め、求めた複数の重心座標を複数の代表移動ベクトルとする。このように特定された複数の代表移動ベクトルを用い、上述の(式1)にて複数の変更表示位置42を決定する。
例えば、図5の例では、クラスタCl1に含まれる各移動データにおいてはテキストボタン32a及び付箋ボタン32bが使用頻度が高いボタン32であり、クラスタCl2に含まれる各移動データにおいては曲線ボタン32c及び矢印ボタン32dが使用頻度が高いボタン32である場合、位置演算部28は、クラスタCl1の重心座標に基づいて第1の代表移動ベクトルを演算し、(式1)に基づいて、第1の代表移動ベクトルに基づいて第1の相対変更位置を演算する。また、位置演算部28は、クラスタCl2の重心座標に基づいて第2の代表移動ベクトルを演算し、(式1)に基づいて、第2の代表移動ベクトルに基づいて第2の相対変更位置を演算する。
そして、図8に示すように、表示制御部26は、ツールボックス30の表示指示の入力位置、すなわち表示指示が入力されたときのマウスカーソルCuの位置から第1相対変更位置が示す分移動させた位置を第1の変更表示位置42aとし、第1の変更表示位置42aにテキストボタン32a及び付箋ボタン32bを含む第1の分割ウィンドウ30aを表示し、ツールボックス30の表示指示の入力位置から第2相対変更位置が示す分移動させた位置を第2の変更表示位置42bとし、第2の変更表示位置42bに曲線ボタン32c及び矢印ボタン32dを含む第2の分割ウィンドウ30bを表示する。
なお、図8の例では、2つの分割ウィンドウ30a,30bが表示されているが、3つ以上の変更表示位置42が特定され、3つ以上の分割ウィンドウが表示されてもよい。また、第1の分割ウィンドウ30a及び第2の分割ウィンドウ30bそれぞれについて上述の近傍探索処理を行い、それぞれについての補正変更表示位置44が演算され、第1の分割ウィンドウ30a及び第2の分割ウィンドウ30bは、補正変更表示位置44に表示されるようにしてもよい。
以下、図9に示すフローチャートに従って、本実施形態における情報処理装置10の処理の流れを説明する。
ステップS10において、位置演算部28は、ユーザからツールボックス30の表示指示が入力されたか否かを判定する。位置演算部28は、表示指示が入力されるまで待機し、入力された場合にはステップS12に進む。
ステップS12において、位置演算部28は、ステップS10で表示指示を入力したユーザのユーザIDを特定し、移動履歴DB22を参照して、当該ユーザIDに係る移動データが所定数以上蓄積されているか否かを判定する。移動履歴DB22に蓄積された当該ユーザIDに係る移動データが所定数未満である場合は、ステップS14に進む。
ステップS14において、表示制御部26は、表示指示が入力された位置に応じた位置である基本表示位置40にツールボックス30を表示させる。
移動履歴DB22に蓄積された当該ユーザIDに係る移動データが所定数以上である場合は、ステップS12からステップS16に進む。
ステップS16において、位置演算部28は、上述の処理により、移動履歴DB22に基づいて変更表示位置を特定する。
ステップS18において、位置演算部28は、近傍探索処理を実行するか否かを判定する。ユーザ設定によって、近傍探索処理を実行しない、と設定されている場合はステップS20に進む。
ステップS20において、表示制御部26は、ステップS16で特定した変更表示位置42にツールボックス30を表示させる。
ユーザ設定によって、近傍探索処理を実行する、と設定されている場合は、ステップS18からステップS22に進む。
ステップS22において、位置演算部28は上述の近傍探索処理を実行し、補正変更表示位置44を特定する。
ステップS24において、表示制御部26は、ステップS22で特定した補正変更表示位置44にツールボックス30を表示させる。
ステップS26において、プロセッサ24は、ステップS14、S20、又はS24で表示されたツールボックス30がユーザによって移動されたか否かを判定する。移動された場合はステップS28に進み、移動されなかった場合はステップS28をバイパスして処理を終了する。
ステップS28において、プロセッサ24は、ユーザのツールボックス30の移動に応じた移動データを移動履歴DB22に記憶させる。
以上、本発明に係る実施形態を説明したが、本発明は上記実施形態に限られるものではなく、本発明の趣旨を逸脱しない限りにおいて種々の変更が可能である。
10 情報処理装置、12 通信インターフェース、14 ディスプレイ、16 入力インターフェース、18 メモリ、20 文書アプリケーション、22 移動履歴DB、24 プロセッサ、26 表示制御部、28 位置演算部。

Claims (4)

  1. 操作者の表示指示に応じてディスプレイに表示ウィンドウを表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させるプロセッサと、
    を備え、
    前記プロセッサは、
    前記操作者から前記表示指示を受け付けた際に、過去における前記操作者の前記移動指示による前記表示ウィンドウの移動を示す移動履歴情報に基づいて、所定の規則に従って決定される基本表示位置から変更された変更表示位置を演算し、
    記変更表示位置、及び、前記変更表示位置の1又は複数の近傍位置それぞれについて、前記表示ウィンドウが表示されたことによって隠れてしまう、前記表示ウィンドウが表示される前に前記ディスプレイに表示された画面のエッジの量が大きい程大きくなり、且つ、前記変更表示位置からの距離が大きい程大きくなる指標値を演算し、前記指標値が最も小さくなる位置に前記表示ウィンドウを表示させる、
    ことを特徴とする情報処理装置。
  2. 操作者の表示指示に応じて、複数種類のボタンを含む表示ウィンドウをディスプレイに表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させるプロセッサと、
    を備え、
    前記プロセッサは、
    過去における前記操作者の前記移動指示による前記表示ウィンドウの移動、及び、所定の規則に従って決定される基本表示位置からの前記表示ウィンドウの移動方向及び移動後に操作されたボタンを示す移動履歴情報に基づいて、前記操作者が、第1の移動方向に前記表示ウィンドウを移動させた後第1のボタンを操作する傾向があり、第2の移動方向に前記表示ウィンドウを移動させた後第2のボタンを操作する傾向がある場合は、前記操作者から前記表示指示を受け付けた際に、前記基本表示位置から、前記第1の移動方向へ移動した位置に前記第1のボタンを含む分割ウィンドウを表示し、前記第2の移動方向へ移動した位置に前記第2のボタンを含む分割ウィンドウを表示する、
    ことを特徴とする情報処理装置。
  3. コンピュータに、
    操作者の表示指示に応じてディスプレイに表示ウィンドウを表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させ、
    前記操作者から前記表示指示を受け付けた際に、過去における前記操作者の前記移動指示による前記表示ウィンドウの移動を示す移動履歴情報に基づいて、所定の規則に従って決定される基本表示位置から変更された変更表示位置を演算させ
    前記変更表示位置、及び、前記変更表示位置の1又は複数の近傍位置それぞれについて、前記表示ウィンドウが表示されたことによって隠れてしまう、前記表示ウィンドウが表示される前に前記ディスプレイに表示された画面のエッジの量が大きい程大きくなり、且つ、前記変更表示位置からの距離が大きい程大きくなる指標値を演算させ、前記指標値が最も小さくなる位置に前記表示ウィンドウを表示させる、
    ことを特徴とする情報処理プログラム。
  4. コンピュータに、
    操作者の表示指示に応じて、複数種類のボタンを含む表示ウィンドウをディスプレイに表示させ、前記操作者の移動指示に応じて前記表示ウィンドウを移動させ、
    過去における前記操作者の前記移動指示による前記表示ウィンドウの移動、及び、所定の規則に従って決定される基本表示位置からの前記表示ウィンドウの移動方向及び移動後に操作されたボタンを示す移動履歴情報に基づいて、前記操作者が、第1の移動方向に前記表示ウィンドウを移動させた後第1のボタンを操作する傾向があり、第2の移動方向に前記表示ウィンドウを移動させた後第2のボタンを操作する傾向がある場合は、前記操作者から前記表示指示を受け付けた際に、前記基本表示位置から、前記第1の移動方向へ移動した位置に前記第1のボタンを含む分割ウィンドウを表示させ、前記第2の移動方向へ移動した位置に前記第2のボタンを含む分割ウィンドウを表示させる、
    ことを特徴とする情報処理プログラム。
JP2019164918A 2019-09-10 2019-09-10 情報処理装置及び情報処理プログラム Active JP7363235B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2019164918A JP7363235B2 (ja) 2019-09-10 2019-09-10 情報処理装置及び情報処理プログラム
US16/749,169 US20210072884A1 (en) 2019-09-10 2020-01-22 Information processing apparatus and non-transitory computer readable medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019164918A JP7363235B2 (ja) 2019-09-10 2019-09-10 情報処理装置及び情報処理プログラム

Publications (2)

Publication Number Publication Date
JP2021043680A JP2021043680A (ja) 2021-03-18
JP7363235B2 true JP7363235B2 (ja) 2023-10-18

Family

ID=74850074

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019164918A Active JP7363235B2 (ja) 2019-09-10 2019-09-10 情報処理装置及び情報処理プログラム

Country Status (2)

Country Link
US (1) US20210072884A1 (ja)
JP (1) JP7363235B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20240069694A1 (en) * 2022-08-26 2024-02-29 Truist Bank Drawer page overlay for multitasking

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012032474A (ja) 2010-07-29 2012-02-16 Funai Electric Co Ltd オンスクリーンディスプレイ装置
JP2019021042A (ja) 2017-07-18 2019-02-07 株式会社富士通アドバンストエンジニアリング 表示制御プログラム、表示制御方法および表示制御装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6801230B2 (en) * 2001-12-18 2004-10-05 Stanley W. Driskell Method to display and manage computer pop-up controls
JP2004126786A (ja) * 2002-09-30 2004-04-22 Konami Co Ltd 通信装置、プログラム、ならびに通信方法
WO2010037146A2 (en) * 2008-09-29 2010-04-01 Fisher-Rosemount Systems, Inc. Efficient design and configuration of elements in a process control system
US8627228B2 (en) * 2009-05-24 2014-01-07 International Business Machines Corporation Automatic sash configuration in a GUI environment
US8724908B2 (en) * 2010-09-03 2014-05-13 Adobe Systems Incorporated System and method for labeling a collection of images
US9652109B2 (en) * 2013-01-11 2017-05-16 Microsoft Technology Licensing, Llc Predictive contextual toolbar for productivity applications
US20170039030A1 (en) * 2013-12-27 2017-02-09 Sony Corporation Display control device, display control method, and program
US20170177198A1 (en) * 2015-12-18 2017-06-22 Arbor Networks, Inc. System and method to display selectable attribute information associated with data elements
US11099731B1 (en) * 2016-08-02 2021-08-24 Amazon Technologies, Inc. Techniques for content management using a gesture sensitive element
US10860175B2 (en) * 2016-12-30 2020-12-08 Google Llc Dynamically generating custom sets of application settings
JP6868427B2 (ja) * 2017-03-23 2021-05-12 シャープ株式会社 入力機能付き表示装置
JP7118656B2 (ja) * 2018-02-08 2022-08-16 キヤノン株式会社 情報処理装置、その制御方法、及びプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012032474A (ja) 2010-07-29 2012-02-16 Funai Electric Co Ltd オンスクリーンディスプレイ装置
JP2019021042A (ja) 2017-07-18 2019-02-07 株式会社富士通アドバンストエンジニアリング 表示制御プログラム、表示制御方法および表示制御装置

Also Published As

Publication number Publication date
JP2021043680A (ja) 2021-03-18
US20210072884A1 (en) 2021-03-11

Similar Documents

Publication Publication Date Title
US10379733B2 (en) Causing display of a three dimensional graphical user interface with dynamic selectability of items
JP5751934B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US20170300227A1 (en) Method for adjusting input virtual keyboard and input apparatus
US20120013645A1 (en) Display and method of displaying icon image
JP5867198B2 (ja) 領域指定方法及び領域指定装置
JP5910345B2 (ja) 文字入力プログラム、情報処理装置および文字入力方法
EP3035186A1 (en) Object operation system, object operation control program and object operation control method
US8988380B2 (en) Display apparatus, display method, and display program
US20150363037A1 (en) Control method of touch panel
JP5854162B2 (ja) 領域判定装置、領域判定方法およびプログラム
US20150199096A1 (en) Electronic device and method of displaying data
JP5567097B2 (ja) 電子機器、手書き文書表示方法、及び表示プログラム
US20130342441A1 (en) Character input method and information processing apparatus
US20150205483A1 (en) Object operation system, recording medium recorded with object operation control program, and object operation control method
US20140247220A1 (en) Electronic Apparatus Having Software Keyboard Function and Method of Controlling Electronic Apparatus Having Software Keyboard Function
JP6241320B2 (ja) 画像処理装置、画像処理方法、画像処理システムおよびプログラム
JP7363235B2 (ja) 情報処理装置及び情報処理プログラム
JP5618554B2 (ja) 情報入力装置、情報入力方法及びプログラム
US20160034027A1 (en) Optical tracking of a user-guided object for mobile platform user input
US10073612B1 (en) Fixed cursor input interface for a computer aided design application executing on a touch screen device
JP5834253B2 (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
JP6373664B2 (ja) 電子機器、方法及びプログラム
JP2022185872A (ja) 画像処理装置、画像処理方法、撮像装置
CN113485590A (zh) 触控操作方法及装置
US20150286400A1 (en) Information processing apparatus, control method, and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220831

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230412

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230628

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230905

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230918

R150 Certificate of patent or registration of utility model

Ref document number: 7363235

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150