JP5828050B1 - キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法 - Google Patents

キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法 Download PDF

Info

Publication number
JP5828050B1
JP5828050B1 JP2015011879A JP2015011879A JP5828050B1 JP 5828050 B1 JP5828050 B1 JP 5828050B1 JP 2015011879 A JP2015011879 A JP 2015011879A JP 2015011879 A JP2015011879 A JP 2015011879A JP 5828050 B1 JP5828050 B1 JP 5828050B1
Authority
JP
Japan
Prior art keywords
key
input
display
key input
history
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015011879A
Other languages
English (en)
Other versions
JP2016136369A (ja
Inventor
健朗 徳留
健朗 徳留
周作 遠矢
周作 遠矢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
INVIO,INC.
Original Assignee
INVIO,INC.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by INVIO,INC. filed Critical INVIO,INC.
Priority to JP2015011879A priority Critical patent/JP5828050B1/ja
Application granted granted Critical
Publication of JP5828050B1 publication Critical patent/JP5828050B1/ja
Priority to JP2016570738A priority patent/JPWO2016117710A1/ja
Priority to PCT/JP2016/052051 priority patent/WO2016117710A1/ja
Priority to US15/545,180 priority patent/US10969958B2/en
Publication of JP2016136369A publication Critical patent/JP2016136369A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04895Guidance during keyboard input operation, e.g. prompting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

【解決課題】アプリケーションに対するキー入力を、表示装置に表示されている当該アプリケーションの実行画面に表示するキー入力表示装置について、アプリケーションの使用方法の伝達を支援する技術を提供する。【解決手段】キー入力表示装置は、キー入力を行ったキー操作履歴を順に送りながら表示する入力履歴表示画面25を、アプリケーションの実行画面とは別画面で並べて表示装置に出力する入力履歴表示制御部22を備える。これによりアプリケーションに対するキー入力が可視化されるため、キーボード等の入力装置における入力操作とアプリケーションの実行画面とを交互に目で追う必要がなく、アプリケーションの実行画面と並んで表示される入力履歴表示画面25を見れば、容易にキー入力を把握することができる。【選択図】図2

Description

本発明は、実行中のアプリケーションに対するキーボード等の入力装置によるキー入力を表示装置の画面に表示する技術に関する。
文書作成ソフト、表計算ソフト、CADソフト、電子メールソフト、プログラミングソフト等、目的に応じて多くの機能を持つアプリケーションが、企業や組織で利用されている。そのようなアプリケーションには多くの機能が実装されているのが通常で、それを使いこなして作業効率を高めるには、使用方法に関する多くの知識と経験に基づく相当な習熟度が求められる。アプリケーションの使用方法を説明する方法としては、例えば解説本のように、アプリケーションの実行画面をスクリーンショットして、それに説明文を書き加えるような方法がある。また、オペレータが操作を実演しつつ口頭で説明していく方法もある。
しかしながら、アプリケーションの実行画面をスクリーンショットして使用方法を説明する方法では、アプリケーションが持つ機能ごとに説明を作成するのに膨大な手間と時間が必要になる。したがって解説本によりアプリケーションの使用方法を説明するのは、あまり現実的な方法とは言えない。また実演し口頭で説明する方法では、オペレータがキーボードに対するキー入力のスピードを相当落とさないと、口頭による説明が追いつかないことが多い。特に習熟したオペレータほど操作を効率的に行うために、それ単独では押したことが実行画面に表示されない修飾キーを使った複合的なキー入力を行っていることが多く、オペレータもその説明を受ける学習者も、実行画面とキーボードへの操作を交互に目で追いながら使用方法を習得するのはとても困難である。
このように、これまでのアプリケーションの使用方法の説明では、手間と時間が掛かり非効率であることから、アプリケーションの効率的、効果的な使用方法に習熟していたならば期待できる作業効率や生産性の向上を実現できていないのが現実である。例えば熟練プログラマーの作業効率の高いプログラミングスキルを習得する場面では、前述のように教え方が難しいことから技能伝承が進まず放置されている現場も多い。そのほか、文書作成ソフト、表計算ソフト、CADソフトでの修飾キーの利用も作業効率や生産性を高める上で有用だが、その習得は個人の努力に委ねられている。
以上のような従来技術を背景になされたのが本発明である。その目的は、アプリケーションの使用方法の伝達を支援する技術を提供することにある。
本発明は、以下のキー入力表示装置、キー入力表示プログラム、キー入力表示方法により、上記目的を達成するものである。
キー入力表示装置に係る本発明は、アプリケーションに対するキー入力を、表示装置に表示されている当該アプリケーションの実行画面に表示するキー入力表示装置について、前記キー入力を行ったキー操作履歴を順に送りながら表示する入力履歴表示画面を前記アプリケーションの実行画面とは別画面で並べて表示装置に出力する入力履歴表示制御部を備えることを特徴とする。
キー入力表示プログラムに係る本発明は、コンピュータを、アプリケーションに対するキー入力を当該アプリケーションの実行画面に表示するキー入力表示装置として機能させるキー入力表示プログラムについて、コンピュータを、前記キー入力を行ったキー操作履歴を順に送りながら表示する入力履歴表示画面を前記アプリケーションの実行画面とは別画面で並べて表示装置に出力する入力履歴表示制御部として機能させることを特徴とする。
キー入力表示方法に係る本発明は、アプリケーションに対するキー入力を、当該アプリケーションの実行画面に表示するキー入力表示方法について、前記アプリケーションに対するキー入力により生成される入力データを取得するステップと、前記入力データを利用して、前記キー入力を行ったキー操作履歴を順に送りながら表示する入力履歴表示画面を前記アプリケーションの実行画面とは別画面で並べて表示装置に出力するステップを実行することを特徴とする。
前記本発明では、アプリケーションに対するキー入力を行ったキー操作履歴が、入力履歴表示画面に表示されて可視化される。このためキーボード等の入力装置における入力操作とアプリケーションの実行画面とを交互に目で追う必要がなく、アプリケーションの実行画面と並んで表示される入力履歴表示画面を見れば、容易にキー入力を把握することができる。その入力履歴表示画面は、アプリケーションの実行画面とは独立した専用画面(別画面)として表示するため、視認性を高めることができる。そして、入力履歴表示画面に表示するキー操作履歴は、キー入力の順に送りながら表示されるため、キー入力の入力操作を一連の流れとして把握することができる。したがって速くて複合的なキー入力であっても操作の前後関係を把握することが可能であり、オペレータによるアプリケーションの操作を学習者に対して効果的・効率的に伝達することができる。
前記本発明の入力履歴表示制御部は、入力履歴表示画面に、アプリケーションに対するキー入力とリアルタイムでキー操作履歴を表示する。
これによれば、アプリケーションの実行画面の変化に、入力履歴表示画面で表示するキー操作履歴をリアルタイムで連動して表示することができる。
前記本発明の入力履歴表示制御部は、入力履歴表示画面にキー入力ごとのキー操作履歴を一行ごとに表示する。
これによれば、キー入力ごとのキー操作履歴が一行ごとに表示されるので、視認性が良く、キー操作履歴を容易に把握することができる。
前記本発明は、実行中の複数のアプリケーションの中から選択されたアプリケーションについて当該アプリケーションに対するキー入力により生成されるキー入力データを取得する入力データ取得部を備える。
これによれば、入力データ取得部によって複数のアプリケーションが立ち上がっていても、選択したアプリ−ションのキー入力データを取得することができ、一つの入力履歴表示画面に各アプリケーションのキー操作履歴を表示できる。
前記本発明の入力履歴表示制御部は、入力履歴表示画面にキー操作履歴として、キー入力された単一のキーを表示する。また、入力履歴表示制御部は、入力履歴表示画面にキー操作履歴として、連続してキー入力された複数のキーを表示する。
これによれば、キー操作履歴として、キー入力された単一のキーが表示されるほか、連続してキー入力された複数のキーも表示される。したがって、例えば修飾キーのように複合的にキー入力される複数のキーを一つのキー操作履歴として表示されることから、そうした入力操作を容易に把握することができる。この点をより具体的に説明すると次のようである。
例えばキーボードを使ったキー入力には、修飾キー、ファンクションキー、ロックキーのように、そのキー入力を行ってもアプリケーションの実行画面に表示されないものがある。しかしながら、アプリケーションについて熟練したオペレータは、それらのキーを積極的に使うことで効率的に操作している。簡単な例を挙げれば、文書作成ソフトでは、選択した文字列のカットを〔CTRL+X〕を行い、ペーストを〔CTRL+V〕で行うことで、マウスを操作する煩雑な作業を避けている。ところが、〔CTRL+V〕のような各々のキー入力自体はアプリケーションの実行画面に表示されない。そのためオペレータの操作を見ている学習者は、どのような操作でカット&ペーストが行われたのか知ることができない。それを知るにはオペレータがその都度教えたり、学習者が質問する必要がある。そのようなアプリケーションの実行画面に表示されない隠れたキー入力を可視化するところが本発明の特徴となる。そこで、前記本発明の入力履歴表示制御部は、入力履歴表示画面にキー操作履歴として、連続してキー入力された複数のキーを表示する。
またさらに前記本発明の入力履歴表示制御部は、入力履歴表示画面に、キー入力が前記アプリケーションの実行画面に表示されない非表示キーのキー操作履歴を表示する。そして、そうした非表示キーは修飾キー、ファンクションキー、ロックキーの少なくとも何れかとすることができる。
これによれば、修飾キー、ファンクションキー、ロックキーのような非表示キーであってもキー入力が可視化されるため、アプリケーションの実行画面からでは分からないキー入力を容易に知ることができる。
本発明によれば、キーボード等の入力装置にて行うアプリケーションのキー入力の流れを一連のキー操作履歴として前後関係を把握できるように可視化できる。そのため視覚を通じて効率的で効果的なキー入力によるアプリケーションの操作方法を容易に伝達することができる。よってアプリケーションの使用による作業効率や生産性の向上の実現に貢献することができる。
一実施形態によるキー入力表示装置のハードウェア構成を示す説明図。 一実施形態によるキー入力表示装置の機能構成を示すブロック図。 一実施形態によるデータテーブルを示す説明図。 一実施形態によるキー入力表示装置の表示画面の例を示す説明図。 図4に続く表示画面の例を示す説明図。 図5に続く表示画面の例を示す説明図。 図6に続く表示画面の例を示す説明図。 一実施形態によるキー入力表示装置及びキー入力表示方法による動作を示すフローチャート。
本発明のキー入力表示装置、キー入力表示プログラム、キー入力表示方法の実施形態について図面を参照して説明する。
図1は、本実施形態によるキー入力表示装置1のハードウェア構成の一例を示すブロック図である。キー入力表示装置1は、演算処理部11、ROM12、RAM13、記憶部14と、表示部15と、入力部16とを備え、それらバス17により接続されている。これはコンピュータにより実現される。具体的にはノートブックパソコン、デスクトップパソコン、タブレット端末等である。
コンピュータでは、演算処理部11が、OSとOS上で実行されるアプリケーションを実行し、その機能を実現する。アプリケーションはどのようなものでもよく、例えば文書作成ソフト、表計算ソフト、プログラミングソフト、CADソフト等とすることができる。キー入力表示プログラムPは、それらのアプリケーションのバックグラウンドで動作する。そしてキー入力表示装置1、キー入力表示プログラムP、キー入力表示方法は、入力部16を操作して行われるOSや実行中のアプリケーションに対するキー入力を可視化し、視覚を通じて効率的で効果的なキー入力によるアプリケーションの操作方法を伝達できるようにする。
演算処理部11は、CPU等の演算装置でなる。演算処理部11は記憶部14に記憶されたキー入力表示プログラムPを実行することにより、キー入力表示装置1の全体の動作を制御する。また、同プログラムを実行することにより、後述する各機能部(表示制御部18、入力データ取得部19、キー種類判定部20、表示設定部21、入力履歴表示制御部22、表示設定記憶部23、表示データ記憶部24、入力履歴表示部25)を実現する。
ROM12は、読み出し専用の記憶装置であり、BIOS等を記憶する。RAM13は、一次記憶装置であり、データを書き換え可能に一時記憶する。
記憶部14は、HDDや半導体記憶装置等の不揮発性の記憶装置にて構成される。記憶部14にはキー入力表示プログラムPが格納されており、また操作されるキーについて後述する入力履歴表示部25に「キー操作履歴」として表示する「キー表示」を対応付けたデータテーブルPdが格納されている。
表示部15は、液晶パネルディスプレイ等の表示装置であり、演算処理部11からの表示信号に基づいてその画面に各種情報を表示する。
入力部16は、キーボード、タッチパネル、マウス等の入力装置でなり、それらの入力操作によりキー入力データを生成して演算処理部11に出力する。
図2は、演算処理部11により実現されるキー入力表示装置1の機能構成を示すブロック図である。演算処理部11は、記憶部14に記憶されたキー入力表示プログラムPを実行することにより表示制御部18を構成する。表示制御部18は、入力データ取得部19と、キー種類判定部20と、表示設定部21と、入力履歴表示制御部22とを機能部として実行する。また、RAM13又は記憶部14を表示設定記憶部23、表示データ記憶部24として実現し、表示部15を「入力履歴表示画面」である入力履歴表示部25として実現する。
表示制御部18は、入力データ取得部19、キー種類判定部20、表示設定部21、入力履歴表示制御部22を有しており、ROM12や記憶部14に記憶されたデータや、演算処理部11により生成される各種データの表示部15への表示を制御する。
入力データ取得部19は、OSやOS上で実行される各種アプリケーションに対するキー入力により生成されるキー入力データを取得する。ここで「キー入力」とは前述の入力部16を操作して行われる入力を意味する。したがって必ずしもキーボードやタッチパネルに表示される仮想キーボードのようなキー配列を有するものに限られない。キー配列の無いマウス単独やキーボードと連携して入力操作が可能であり可視化する必要性があるからである。
なお、本実施形態ではマウスの操作による入力もキー入力とするが、キー入力を可視化するアプリケーションによってはキーボードに限定してもよい。プログラミングソフトのように、ほとんどマウスを使わずキーボードを使って高速で入力操作するものがあるからである。
キー種類判定部20は、キー入力データを生成したキーの種類を判定する。例えばキーボードを使用する場合、そのまま入力履歴表示部25に表示できるキーと、表示できないキーとがある。キー種類判定部20は入力データ取得部19が取得したキー入力データがそのどちらなのかを判定する。
前者は、例えば文書作成ソフトで英文字「A」のキートップを入力操作すると、その文書作成ソフトの実行画面には英文字「A」が表示されることから、操作者でなくても操作したキーを実行画面から知ることができる。アプリケーションにおける入力操作と入力結果の画面表示とが一致する場合には、入力履歴表示部25には「A」が表示される。
これに対して、例えば文書作成ソフトで「修飾キー」(シフトキー、コントロールキー等)のキートップを入力操作しても、文書作成ソフトの実行画面には何も表示されない。こうした「非表示キー」が操作された場合、オペレータ以外の者はどのキーが操作がされたのか実行画面からは分からず、操作されたことにも気づかない。つまり、入力操作と入力結果の画面表示とが一致しない。しかしながら、熟練者の入力操作は修飾キーを多用することで入力作業を効率的・効果的に行っていることが多く、そこから学ぶべきことは多い。したがって本実施形態では、修飾キーのような「非表示キー」はそれと組み合わせて使用される他のキーと一体としてキー操作履歴として入力履歴表示部25に表示するようにする。例えばコントロールキー「CTRL」の後に英文字「C」のキートップが操作された場合には、入力履歴表示部25には「CTRL+C」が表示される。
キャピタルロックキー(CAPS)等の「ロックキー」、エスケープキー、半角/全角キー、変換キー、無変換キー、ファンクションキー、カタカナ/ひらがなキー、4方向キー等のような各種の「機能キー」も、「非表示キー」として修飾キーと同じようにアプリケーションにおける入力操作と入力結果の画面表示とが一致しない。したがってそうした機能キーが操作された場合には、各機能キーに対応するキー操作履歴が入力履歴表示部25に表示される。例えばカーソルを動かす右方向キーが操作された場合、入力履歴表示部25には「→」が表示される。なお、カーソルはアプリケーションの実行画面に表示されており、方向キーを操作すれば移動して実行画面に表示される。しかしながら、分かり難いことから、本実施形態では方向キーについても「非表示キー」として扱うようにしている。
表示設定部21は、先ず、アプリケーションごとに、キー入力ごとに入力履歴表示部25で表示するキー表示の関係付けを行う。これには例えば次のような3パターンがある。
第1は、修飾キーや機能キーのような非表示キーについては、その後に続くキー入力を待ち、そのキーと合わせて「一つのキー表示」として設定する。この例としては「CTRL」が長押し操作されて、その後に「C」が操作されたことを検知して、「CTRL+C」を「一つのキー表示」とする。
第2は、アプリケーションで定義されている特定の文字列を「一つのキー表示」として扱うパターンである。例えばプログラミングソフトの場合、C言語で使われる関数は定義されており、例えば関数“fprintf”の文字列を一文字ごと一行ずつ表示してしまうと却って分かり難くなる。こうした場合には、関数“fprintf”の文字列を「一つのキー表示」として設定する。これはアプリケーションごとに、その特長に応じて設定されることになる。
第3は、一つのキー入力を「一つのキー表示」として設定するパターンである。例えば英文字「A」がキー入力された場合には、そのまま「A」をキー表示とするパターンである。また「ENTER」キーについては「ENTER」の文字列・ロゴ・記号を「一つのキー表示」として設定する。
表示設定部21では、例えば以上のようにして、アプリケーションごとに、キー入力に応じて入力履歴表示部25で表示する「一つのキー表示」の関係付けを行う。そのほかにも表示設定部21では、入力履歴表示部25で一行ごとに表示するキー表示を設定する。例えば、第1に、一行につき「一つのキー表示」のみを表示するように設定できる。第2に、一行に表示する「一つのキー表示」の上限数を決めて表示するように設定することも可能である。第3として、入力履歴表示部25の表示画面の幅に応じて一行に表示する「一つのキー表示」の数を設定することもできる。第4として、キー入力操作の停止時間に上限を設定して、それを超えた場合には次行に表示するように設定できる。そして第5として、前述の第2〜第4を任意で組み合わせて表示するように設定することも可能である。但し、一行あたりに表示するキー表示の数があまりに多いと、高速で複雑なキー入力を把握することが困難となるため、複数の表示する場合であっても2〜4つ程度のキー表示とするのが好ましい。この一行で表示するキー表示の設定は、アプリケーションごとの特長や必要性に応じてアプリケーションごとに行われる。
入力履歴表示制御部は、キー入力表示プログラムPを適用するアプリケーションについて、後述する表示設定のデータテーブルPdを参照して、キー入力に対応するキー表示を入力履歴表示部25に順次出力する制御を行う。
表示設定記憶部23は、表示設定部21で設定した所定のキー入力に対して表示するキー表示の設定が記憶されている。表示設定記憶部23には、例えば図3で示すようなデータテーブルPdが格納されている。データテーブルPdには、キー入力に対する「キー表示(キー操作履歴)」と、それが適用されるアプリケーションが対応付けられている。そして同じキー入力であってもアプリケーションごとに異なるキー表示を適用できるようにされている。
表示データ記憶部24は、表示設定部21でキー入力ごとに表示するキー表示として使用する画像データを格納している。画像データは標準的な文字でも、図案化・装飾化されたロゴでも、図形でも、記号でも良い。
図4から図7は、表示部15における表示画面の一例である。デスクトップ画面W1にはテキスト編集を行うアプリケーションの実行画面W2が表示されている。その右側には「入力履歴表示画面」となる入力履歴表示部25が並んで表示されている。本実施形態の入力履歴表示部25は縦長の矩形状とされている。入力履歴表示部25の内側の下側に表示されている文字列がキー表示25aである。入力履歴表示部25では、画面の下から上に一行ごとにキー入力によるキー表示25aが表示されることになる。
ここで図4〜図7の入力例について説明する。ここではプログラミング中の入力を想定し、「一行目をコピーし、二行目にペーストし、一部を編集する」という一連の作業を行う。
図4で示すように、アプリケーションに「fprintf・・・」の文字列がキー入力されると、実行画面W2にそれが表示され、それと連動して入力履歴表示部25の1行目に「fprintf(」のキー表示が表示される。それに続くキー入力と連動して2行目には「Stderr,□」のキー表示が表示される。なお、「□」はスペースキーのキー表示である。引き続きキー入力がなされると、上記と同様に3行目、4行目、5行目、6行目にはそれぞれ図示のキー表示が表示される。
次に、図5に示すキー入力が行われるが、これはキー入力が画面に表示されない操作である。即ち、実行画面W2に表示されている「fprintf(・・・x);」の一行を選択してコピーを行う。このコピーを行った際の実行画面W2の変化は、選択した際の反転表示のみである。しかしながら、キー入力としては、入力履歴表示部25で示すように、7行目に「HOMEキー」(行頭へカーソルを移動)、8行目に「SHIFT+END」(行末までを選択)、9行目に「CTRL+C」(コピー)というキー表示が表示されており、こうした複雑な操作がなされていることが分かる。
図5に続く図6はペーストする作業である。実行画面W2ではその2行目に1行目と同じキー入力をされたかのように見えるが、実際のキー入力では入力履歴表示部25の10行目で示すように実行画面W2の1行目の文字列の選択状態を方向キー「→」によって解除するとともにカーソルを移動させ、改行のために「ENTER」キーを操作している。そして11行目に示すように「CTRL+V」(ペースト)というキー表示が表示されており、複合的なキー入力がなされていることが分かる。
そして、最後に図6に続く図7では、入力履歴表示部25の12行目で示すように削除キーのキー入力によってペーストした2行目の文字「x」を削除したキー表示が表示されている。そして13行目で示すように、新たに文字「y」をキー入力したキー表示が表示されている。以上のようにして本実施形態ではキー入力のキー操作履歴をキー表示として行送りしつつ表示することで可視化するようにしている。
図8は、キー入力表示プログラムPを実行するキー入力表示装置1の動作フローチャートである。
キー入力表示プログラムPが起動されると(S1)、選択されたアプリケーションについてキー入力がなされるのを待機する状態となる(S3)。具体的には、入力データ取得部19が入力部15へのキー入力により生成されるキー入力データを取得するのを待っている状態となる。
そして入力データ取得部19がキー入力データを取得すると(S5)、キー種類判定部20はそのキー入力データが「一つのキー表示」に対応するキー入力であるか否かを判定する(S7)。例えば「CTRL」のキー入力によるキー入力データを取得した場合、キー種類判定部20はそれ単独では「一つのキー表示」と判定せず、次入力を待機する状態となる(S9)。
他方、例えば英文字「A」のキー入力によるキー入力データを取得した場合、キー種類判定部20はそれ単独で「一つのキー表示」と判定する(S7)。すると入力履歴表示制御部22は、そのキー入力に対応するキー表示「A」を入力履歴表示部25に出力する処理を実行し(S17)、表示部15の入力履歴表示部25でキー表示「A」が表示されることになる(S19)。
ステップを戻って、ステップS9で次入力を待機する状態となり、次のキー入力がなされると、入力データ取得部19がキー入力データを取得し(S11)、上記と同様にキー種類判定部20はそのキー入力データが、その直前のキー入力データと組み合わせて「一つのキー表示」を構成するキー入力に該当するか否かを判定する(S13)。ここでは「CTRL」の直後のキー入力であるため、それと組み合わされて入力操作として完結するキーが入力されたか否かを判定する。ここで例えば図5の「c」や図6の「v」がキー入力されていれば、「CTRL+C」、「CTRL+V」を「一つのキー表示」として判定する。そして入力履歴表示制御部22は、それに対応するキー表示「CTRL+C」「CTRL+V」を表示データ記憶部24から読み出して入力履歴表示部25に出力する処理を実行し(S17)、表示部15ではそれが「一つのキー表示」として入力履歴表示部25に表示されることになる(S19)。
他方、ステップ13で、次入力がその直前の「CTRL」と結合して入力操作として完結しないキー入力であると判定された場合には、入力履歴表示制御部22はそれらのキー入力に対応するキー表示を入力順に表示部15へ出力し(S15)、表示部15ではそれが「一つのキー表示」として入力履歴表示部25に表示されることになる(S19)。
以上のような一連のステップは、キー入力ごとに処理が実行される。そしてキー入力表示プログラムPの実行を終了した場合やアプリケーションを終了した場合には、キー入力表示プログラムPも終了する。
以上のようなキー入力表示装置1、キー入力表示プログラムP、キー入力表示方法によれば、選択したアプリケーションに対して行ったすべてのキー入力が入力履歴表示部25に表示されて可視化される。このためキーボード等の入力部16における入力操作とアプリケーションの実行画面W2とを交互に目で追う必要がなく、アプリケーションの実行画面W2と並んで表示される入力履歴表示部25を見れば、容易にキー入力の流れをリアルタイムで順を追って把握することができる。その入力履歴表示部25は、アプリケーションの実行画面W2とは独立した専用画面(別画面)として表示するため、視認性を高めることができる。そして、入力履歴表示部25に表示するキー操作履歴としてのキー表示は、キー入力の順に送りながら表示されるため、キー入力の入力操作を一連の流れとして把握することができる。したがって速くて複合的なキー入力であっても操作の前後関係を把握することが可能であり、オペレータによるアプリケーションの操作を学習者に対して効果的・効率的に伝達することができる。
図4〜図8で示すように、キー入力を可視化する入力履歴表示部25には一行につき2〜4つのキー表示を表示するだけであるため、次々と行送りで表示されても容易に把握することができる。
以上、本発明の実施の形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の主旨を逸脱しない範囲での種々の変更、置換、追加などが可能である。
例えば、上記実施形態のキー入力表示プログラムを、コンピュータで読取り可能な記憶媒体として提供することも可能である。記憶媒体としては、磁気ディスク、光ディスク(CD−ROM、CD−R、DVD等)、光磁気ディスク(MO等)、半導体メモリ等、プログラムを記憶でき、コンピュータで読取れる記憶媒体であれば記憶形式は何れの形態であってもよい。
また、上記実施形態のキー入力表示プログラムPを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。
本発明のキー入力表示装置1、キー入力表示プログラムP、キー入力表示方法は、本実施形態の冒頭で述べたパーソナルコンピュータ、タブレット端末のほかにも、スマートホン、ゲーム機、産業用機器にも適用することができる。これらについても表示装置にキー入力によるキー操作履歴を表示することができるからである。
1 キー入力表示装置
11 演算処理部
12 ROM
13 RAM
14 記憶部
15 表示部
16 入力部
17 バス
18 表示制御部
19 入力データ取得部
20 キー種類判定部
21 表示設定部
22 入力履歴表示制御部
23 表示設定記憶部
24 表示データ記憶部
25 入力履歴表示部(入力履歴表示画面)
P キー入力表示プログラム
Pd データテーブル

Claims (9)

  1. キー入力により操作される複数のアプリケーションのうち現在操作中のアプリケーションへのキー入力に対応するキー表示を、表示装置に表示されている当該アプリケーションの実行画面と、当該アプリケーションのバックグラウンドで動作するキー入力表示プログラムにより表示される前記実行画面とは別画面の入力履歴表示画面とにリアルタイムで表示するキー入力表示装置であって、
    現在操作中のアプリケーションへのキー入力により生成されるキー入力データを取得する入力データ取得部と、
    前記キー入力データが、現在操作中のアプリケーションの実行画面に表示されるキーへのキー入力によるものか又は当該実行画面に表示されない非表示キーへのキー入力によるものかを判定するキー種類判定部と、
    前記複数のアプリケーションごとに、前記非表示キーについて、前記入力履歴表示画面に表示するキー表示を設定する表示設定部と、
    前記キー表示をキー操作履歴として順に送りながら表示する前記入力履歴表示画面を、前記表示装置に出力する入力履歴表示制御部と、を備えるキー入力表示装置。
  2. 入力履歴表示制御部は、入力履歴表示画面にキー入力ごとのキー操作履歴を一行ごとに表示する請求項1記載のキー入力表示装置。
  3. 入力履歴表示制御部は、入力履歴表示画面に、先に選択されたアプリケーションのキー操作履歴に続けて、後に選択されたアプリケーションのキー操作履歴を一方向へ送りながら出力する請求項1又は請求項2記載のキー入力表示装置。
  4. 入力履歴表示制御部は、入力履歴表示画面にキー操作履歴として、キー入力された単一のキーを表示する請求項1〜請求項3何れか1項記載のキー入力表示装置。
  5. 入力履歴表示制御部は、入力履歴表示画面にキー操作履歴として、連続してキー入力された複数のキーを表示する請求項1〜請求項4何れか1項記載のキー入力表示装置。
  6. 入力履歴表示制御部は、入力履歴表示画面に、キー入力が前記アプリケーションの実行画面に表示されない非表示キーのキー操作履歴を表示する請求項1〜請求項5何れか1項記載のキー入力表示装置。
  7. 前記非表示キーが、修飾キー、ファンクションキー、ロックキーの少なくとも何れかである請求項6記載のキー入力表示装置。
  8. 表示設定部は、キー入力操作の停止時間に上限を設定し、キー入力がそれを超えた場合には当該キー入力によるキー表示を一行に表示する請求項1〜請求項7何れか1項記載のキー入力表示装置。
  9. コンピュータを、キー入力により操作される複数のアプリケーションのうち現在操作中のアプリケーションへのキー入力に対応するキー表示を、当該アプリケーションの実行画面とは別画面でなる入力履歴表示画面を生成してリアルタイムで表示するキー入力表示装置として機能させるキー入力表示プログラムであって、
    コンピュータを、
    現在操作中のアプリケーションへのキー入力により生成されるキー入力データを取得する入力データ取得部、
    前記キー入力データが、現在操作中のアプリケーションの実行画面に表示されるキーへのキー入力によるものか又は当該実行画面に表示されない非表示キーへのキー入力によるものかを判定するキー種類判定部、
    前記複数のアプリケーションごとに、前記非表示キーについて、前記入力履歴表示画面に表示するキー表示を設定する表示設定部、
    前記キー表示をキー操作履歴をとして順に送りながら表示する前記入力履歴表示画面を、前記表示装置に出力する入力履歴表示制御部として機能させるキー入力表示プログラム。
JP2015011879A 2015-01-24 2015-01-24 キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法 Active JP5828050B1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2015011879A JP5828050B1 (ja) 2015-01-24 2015-01-24 キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法
JP2016570738A JPWO2016117710A1 (ja) 2015-01-24 2016-01-25 キー入力表示装置、キー入力表示システムおよびキー入力表示プログラム
PCT/JP2016/052051 WO2016117710A1 (ja) 2015-01-24 2016-01-25 キー入力表示装置、キー入力表示システムおよびキー入力表示プログラム
US15/545,180 US10969958B2 (en) 2015-01-24 2016-01-25 Key-input display apparatus, key-input display system, and key-input display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015011879A JP5828050B1 (ja) 2015-01-24 2015-01-24 キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015205272A Division JP6487309B2 (ja) 2015-10-19 2015-10-19 キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法

Publications (2)

Publication Number Publication Date
JP5828050B1 true JP5828050B1 (ja) 2015-12-02
JP2016136369A JP2016136369A (ja) 2016-07-28

Family

ID=54776832

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015011879A Active JP5828050B1 (ja) 2015-01-24 2015-01-24 キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法
JP2016570738A Pending JPWO2016117710A1 (ja) 2015-01-24 2016-01-25 キー入力表示装置、キー入力表示システムおよびキー入力表示プログラム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2016570738A Pending JPWO2016117710A1 (ja) 2015-01-24 2016-01-25 キー入力表示装置、キー入力表示システムおよびキー入力表示プログラム

Country Status (3)

Country Link
US (1) US10969958B2 (ja)
JP (2) JP5828050B1 (ja)
WO (1) WO2016117710A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2016117710A1 (ja) * 2015-01-24 2018-05-10 株式会社インビオ キー入力表示装置、キー入力表示システムおよびキー入力表示プログラム

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7243134B2 (ja) * 2018-11-06 2023-03-22 日本電気株式会社 入力操作の作業効率管理装置、入力操作の作業効率管理方法、及び、入力操作の作業効率管理プログラム

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1021191A (ja) * 1996-07-01 1998-01-23 Canon Inc 情報処理装置のコマンド履歴管理装置
JP2008116509A (ja) * 2006-10-31 2008-05-22 Casio Comput Co Ltd 計算機エミュレーション装置およびその制御プログラム
JP2009211661A (ja) * 2008-03-06 2009-09-17 Casio Comput Co Ltd 計算機エミュレーション装置および計算機エミュレーションプログラム
JP2009237659A (ja) * 2008-03-26 2009-10-15 Sky Co Ltd 操作ログ情報表示システム
JP2010079661A (ja) * 2008-09-26 2010-04-08 Casio Computer Co Ltd 計算機エミュレーション装置および計算機エミュレーションプログラム
JP2011175401A (ja) * 2010-02-24 2011-09-08 Casio Computer Co Ltd 計算機エミュレーション装置及び計算機エミュレーションプログラム
JP2013168108A (ja) * 2012-02-17 2013-08-29 Buffalo Inc キーボード、情報処理システム、情報処理装置、及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003036130A (ja) 2001-07-23 2003-02-07 Toshiba Corp ユーザ操作管理処理プログラム、ユーザ操作管理方法、及びユーザ操作管理装置
JP2003162215A (ja) 2001-11-27 2003-06-06 Kernel:Kk パソコン入力操作表示システム
JP2003186383A (ja) 2001-12-20 2003-07-04 Casio Comput Co Ltd 電子機器およびプログラム
JP2004355059A (ja) 2003-05-27 2004-12-16 Hitachi Ltd 操作表示方法
JP2006277771A (ja) 2006-07-10 2006-10-12 Hitachi Ltd 計算機ネットワーク用の端末装置および操作履歴記録方法
KR101911804B1 (ko) * 2011-10-17 2018-10-25 삼성전자 주식회사 터치 디바이스에서 검색 기능 제공 방법 및 장치
CN105359065B (zh) * 2013-05-02 2019-04-02 辛纳普蒂克斯公司 提供附加功能和各功能预览的多功能按键
WO2015147549A1 (ko) * 2014-03-25 2015-10-01 박인기 한자 입력장치와 한자 입력방법 및 이를 이용한 한자 검색방법
JP5828050B1 (ja) * 2015-01-24 2015-12-02 株式会社インビオ キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1021191A (ja) * 1996-07-01 1998-01-23 Canon Inc 情報処理装置のコマンド履歴管理装置
JP2008116509A (ja) * 2006-10-31 2008-05-22 Casio Comput Co Ltd 計算機エミュレーション装置およびその制御プログラム
JP2009211661A (ja) * 2008-03-06 2009-09-17 Casio Comput Co Ltd 計算機エミュレーション装置および計算機エミュレーションプログラム
JP2009237659A (ja) * 2008-03-26 2009-10-15 Sky Co Ltd 操作ログ情報表示システム
JP2010079661A (ja) * 2008-09-26 2010-04-08 Casio Computer Co Ltd 計算機エミュレーション装置および計算機エミュレーションプログラム
JP2011175401A (ja) * 2010-02-24 2011-09-08 Casio Computer Co Ltd 計算機エミュレーション装置及び計算機エミュレーションプログラム
JP2013168108A (ja) * 2012-02-17 2013-08-29 Buffalo Inc キーボード、情報処理システム、情報処理装置、及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2016117710A1 (ja) * 2015-01-24 2018-05-10 株式会社インビオ キー入力表示装置、キー入力表示システムおよびキー入力表示プログラム

Also Published As

Publication number Publication date
JP2016136369A (ja) 2016-07-28
JPWO2016117710A1 (ja) 2018-05-10
WO2016117710A1 (ja) 2016-07-28
US20170371516A1 (en) 2017-12-28
US10969958B2 (en) 2021-04-06

Similar Documents

Publication Publication Date Title
US7925988B2 (en) System and method for providing sticky applications
WO2018151303A1 (ja) 操作表示装置及び操作表示プログラム
JPWO2008044321A1 (ja) 操作支援コンピュータプログラム、操作支援コンピュータシステム
JP2011511344A (ja) テキスト編集の方法、コンピュータプログラム及びデバイス
CN107608596A (zh) 一种电子书翻页的方法、终端及存储介质
JP2016170613A (ja) 会議支援装置、会議支援システム、会議支援プログラム、及び会議支援方法
JP5092985B2 (ja) コンテンツ装飾装置、コンテンツ装飾方法およびコンテンツ装飾プログラム
US7017124B2 (en) Method for controlling electronic devices using digital recall tool
CN106716330A (zh) 多屏显示位置交换方法、信息处理装置以及信息处理装置的控制方法和控制程序
JP5828050B1 (ja) キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法
JP2016085523A (ja) ノードを表示する方法、並びに、ノードを表示するためのコンピュータ及びそのコンピュータ・プログラム
WO2016042827A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP6487309B2 (ja) キー入力表示装置、キー入力表示プログラムおよびキー入力表示方法
JP2015141688A (ja) 情報処理装置
CN104516860A (zh) 选择被显示文档内的文本的方法和系统
WO2012017992A1 (ja) プログラム作成装置及び画像制御システム
JP6369937B2 (ja) アイコン表示装置及びアイコン表示プログラム
JPWO2014103635A1 (ja) オブジェクト選択方法、プログラムを記憶する記憶媒体及び情報処理装置
CN103207724A (zh) 操作计算机物件的方法及其程序产品
KR102093084B1 (ko) 터치 제어 방법, 장치, 프로그램 및 컴퓨터 판독가능 기록매체
JPWO2014136245A1 (ja) エンジニアリングツール
KR102093580B1 (ko) 터치 제어 방법, 장치, 프로그램 및 컴퓨터 판독가능 기록매체
JP2011175401A (ja) 計算機エミュレーション装置及び計算機エミュレーションプログラム
JP2010032968A (ja) 模擬ソフトウェアシステム及びその実行方法
Komischke The impact of rich application frameworks on user experience design

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150918

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151019

R150 Certificate of patent or registration of utility model

Ref document number: 5828050

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250