JP2019133387A - 電子機器、ウェアラブル機器および文字入力制御方法 - Google Patents

電子機器、ウェアラブル機器および文字入力制御方法 Download PDF

Info

Publication number
JP2019133387A
JP2019133387A JP2018014664A JP2018014664A JP2019133387A JP 2019133387 A JP2019133387 A JP 2019133387A JP 2018014664 A JP2018014664 A JP 2018014664A JP 2018014664 A JP2018014664 A JP 2018014664A JP 2019133387 A JP2019133387 A JP 2019133387A
Authority
JP
Japan
Prior art keywords
input
character
predetermined number
next candidate
presented
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018014664A
Other languages
English (en)
Inventor
波多野 亮
Akira Hatano
亮 波多野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dynabook Inc
Original Assignee
Dynabook Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dynabook Inc filed Critical Dynabook Inc
Priority to JP2018014664A priority Critical patent/JP2019133387A/ja
Priority to US16/108,806 priority patent/US10705726B2/en
Publication of JP2019133387A publication Critical patent/JP2019133387A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G06F1/1692Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes the I/O peripheral being a secondary touch screen used as control interface, e.g. virtual buttons or sliders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0234Character input methods using switches operable in different directions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/724094Interfacing with a device worn on the user's body to provide access to telephonic functionalities, e.g. accepting a call, reading or composing a message
    • H04M1/724097Worn on the head
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/70Details of telephonic subscriber devices methods for entering alphabetical characters, e.g. multi-tap or dictionary disambiguation

Abstract

【課題】パスワードなどを少数ボタンによってスムーズに入力することができる電子機器を提供することにある。【解決手段】実施形態によれば、電子機器は、操作部と、文字入力制御部とを具備する。文字入力制御部は、各々が1つの文字を表すオブジェクトが提示される所定数の入力領域を第1方向に並べたソフトウェアキーボードを表示し、第1方向を指示する第1操作またはこれと対向する第2方向を指示する第2操作が行われた場合、所定数の入力領域の中で入力対象とする入力領域を第1方向または第2方向へ移動させ、第1方向と直交する第3方向を指示する第3操作またはこれと対向する第4方向を指示する第4操作が行われた場合、所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを他の文字を表すオブジェクトに切り替える。【選択図】図9

Description

本発明の実施形態は、電子機器、ウェアラブル機器および文字入力制御方法に関する。
最近、多くのモノがインターネットでつながるIoT時代となり、オフィス、工場、その他様々な場面において、ネットワークコミュニケーションや情報共有のツールとしてエッジコンピューティングと呼ばれる技術が求められている。このエッジコンピューティングを実現するためにはデータセンター(或いはクラウド)とは別に作業者(ユーザ)がその場で使用可能な、高度の汎用性と処理能力を持つ実用的なモバイルエッジコンピューティングデバイスの開発が必要とされている。これにより、作業現場等での業務効率化や生産性向上、或いは、データの負荷分散やネットワーク環境の改善等を図ることが期待される。
また、従来、携帯電話、スマートフォン、携帯ゲーム機等のモバイル機器において、たとえばパスワードなどを入力する場合がある。フルキーボードを搭載することが現実的ではないモバイル機器においては、たとえばパスワードなどを少数ボタンによってスムーズに入力することが困難な場合があった。
特開2007−199882号公報
本発明が解決しようとする課題は、パスワードなどを少数ボタンによってスムーズに入力することができる電子機器、ウェアラブル機器および文字入力制御方法を提供することにある。
実施形態によれば、電子機器は、ウェアラブル機器に接続可能である。ウェアラブル機器は、表示部を具備する。電子機器は、操作部と、ソフトウェアキーボードを前記表示部に表示し、前記ソフトウェアキーボードに対する前記操作部の操作に応じた文字の入力を制御する文字入力制御部とを具備する。文字入力制御部は、各々が1つの文字を表すオブジェクトが提示される所定数の入力領域を第1方向に並べて構成される前記ソフトウェアキーボードを前記表示部に表示し、前記第1方向を指示する第1操作または前記第1方向と対向する第2方向を指示する第2操作が行われた場合、前記所定数の入力領域の中で入力対象とする入力領域を前記第1方向または前記第2方向へ移動させ、前記第1方向と直交する第3方向を指示する第3操作または前記第3方向と対向する第4方向を指示する第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを他の文字を表すオブジェクトに切り替える。
実施形態の電子機器を含む遠隔支援システムの一例を示すブロック図。 図1中のオペレータ端末12の一例を示すブロック図。 図1中のモバイルPC16に接続されるウェアラブルデバイス23の外観の一例を示す図。 ウェアラブルデバイス23の本体24の外観の一例を示す図。 モバイルPC16とウェアラブルデバイス本体24との接続の一例を示す図。 ウェアラブルデバイス本体24の一例を示すブロック図。 モバイルPC16の外観の一例を示す図。 モバイルPC16の一例を示すブロック図。 パスワード入力画面および当該パスワード入力画面上における少数キーによるパスワードの入力を説明するための図。 モバイルPC16による少数キーによるパスワードの入力制御の一例を示すフローチャート。
以下、実施の形態について図面を参照して説明する。なお、開示はあくまで一例にすぎず、以下の実施形態に記載した内容により発明が限定されるものではない。当業者が容易に想到し得る変形は、当然に開示の範囲に含まれる。説明をより明確にするため、図面において、各部分のサイズ、形状等を実際の実施態様に対して変更して模式的に表す場合もある。複数の図面において、対応する要素には同じ参照数字を付して、詳細な説明を省略する場合もある。
[遠隔支援システム]
図1は、エッジコンピューティングを実現するための遠隔支援システムの一例を示すブロック図である。遠隔支援システムは、ユーザ、例えば作業現場の作業者を後方のオペレータが遠隔地から支援するためのシステムである。現場の作業の例は、複雑なメンテナンス業務、物流倉庫のピッキング作業、作業現場の監視、災害救助・医療サポート等がある。作業現場の作業者側をフロントエンド、後方のオペレータ側をバックエンドとも称する。遠隔支援システムは、作業者が携帯するモバイルパーソナルコンピュータ(PC)(モバイルエッジコンピューティングデバイスと呼ぶこともある)16と作業者から離れた位置にある遠隔支援センター(データセンター)18をネットワーク22を介して相互に接続され、通信可能となっている。モバイルPC16と遠隔支援センター18は有線のLANケーブルによりネットワーク22に接続されてもよいし、無線LAN、ブルートゥース(登録商標)等によりネットワーク22に接続されてもよい。
ウェアラブルデバイス23はモバイルPC16と接続される。図1では、ウェアラブルデバイス23はケーブルによりモバイルPC16に接続される例を示すが、ウェアラブルデバイス23は無線LAN、ブルートゥース等によりモバイルPC16と接続されてもよい。ウェアラブルデバイス23はカメラ、ディスプレイを備え、カメラで撮影した画像をモバイルPC16に送信し、モバイルPC16から送信される画像をディスプレイで表示する。
図1に示すように複数の作業者がネットワークを介して相互に通信することも可能である。この場合、遠隔支援センターを経由してもよいし、遠隔支援センターのオペレータを介さずに作業者同士のみで通信するようにすることも可能である。
遠隔支援センター18はオペレータ端末12とサーバ14を備える。遠隔支援センター18はモバイルPC16(及びウェアラブルデバイス23)とオペレータ端末12間で音声通話を行う又は情報をやり取りする。モバイルPC16に接続されるウェアラブルデバイス23のリアルタイム映像をオペレータ端末12にビデオ配信することや、モバイルPC16とオペレータ端末12間で画像を相互に送受信することができる。また、オペレータ端末12からモバイルPC16にテキストメッセージを送信することもできる。例えば、物流倉庫ピッキング作業では、メガネ型のウェアラブルデバイス23にピッキング品の場所を表示させ、ハンズフリーでのピッキングを実現できる。
遠隔支援としては、典型的には、例えば以下の機能を含む。
(1)モバイルPC16とオペレータ端末12との双方向の音声通話を行う音声通話機能。
(2)音声通話中にウェアラブルデバイス23のリアルタイム映像をオペレータ端末12にビデオ配信するライブ映像配信機能。
(3)音声通話中にモバイルPC16とオペレータ端末12間で静止画を送受信する静止画像の送受信機能(モバイルPC16は撮影した静止画やビデオ配信中のキャプチャ画像をオペレータ端末12に送信し、オペレータ端末12は受信した画像に文字や絵などを書き込み、編集した画像をモバイルPC16に送信する機能。モバイルPC16で受信した静止画像は、モバイルPC16内のフォルダーに保存され、閲覧可能である)。
(4)音声通話中にオペレータ端末12のデスクトップ画面全体又は任意のアプリケーションのウィンドウをウェアラブルデバイス23に表示する画面共有機能。
(5)オペレータ端末12からモバイルPC16に対してテキストメッセージを送信するテキストメッセージの送信機能。
サーバ14は遠隔支援のための処理をオペレータ端末12に代わって又は協働して行うものであり、プロセッサ(CPU)28、ROM30、RAM32、ハードディスクドライブ(HDD)又はソリッドステートドライブ(SSD)からなるストレージデバイス34、インターフェース36を備える。なお、サーバ14の機能を全てオペレータ端末12に持たせ、サーバ14を省略してもよい。
[オペレータ端末12]
図2はオペレータ端末12の一例を示すブロック図である。オペレータ端末12はデスクトップ型PC又はノートブック型PC等からなる。
オペレータは、オペレータ端末12を用いて作業現場の状況をリアルタイム映像で確認しながら、会話や画像によってモバイルPC16の作業者に指示を行う。オペレータは、オペレータ端末12を用いてモバイルPC16から受信した画像ファイルに絵や文字などの書き込みを行い、編集した画像ファイルをモバイルPC16に送信することや、オペレータ端末12に保存することができる。
オペレータ端末12は、プロセッサを含むシステムコントローラ42を備え、システムコントローラ42には、主メモリ44、BIOS−ROM50、HDD又はSSDからなるストレージデバイス52、オーディオコーデック54、グラフィクスコントローラ62、タッチパネル70、USB(登録商標)コネクタ72、無線LANデバイス74、ブルートゥースデバイス76、有線LANデバイス78、PCIExpress(登録商標)カードコントローラ80、メモリカードコントローラ82、エンベデッドコントローラ/キーボードコントローラ(EC/KBC)84等が接続される。
システムコントローラ42はストレージデバイス52から主メモリ44にロードされる様々なプログラムを実行する。これらプログラムは、オペレーティングシステム(OS)46、遠隔支援のためのバックエンドアプリケーションプログラム48を含む。システムコントローラ42は不揮発性メモリであるBIOS−ROM50に格納された基本入出力システム(BIOS)も実行する。BIOSはハードウェア制御のためのシステムプログラムである。
オーディオコーデック54は、再生対象のデジタルのオーディオ信号をアナログのオーディオ信号に変換して、ヘッドフォン58又はスピーカ60に供給する。また、オーディオコーデック54は、マイク56から入力されるアナログのオーディオ信号をデジタル信号に変換する。マイク56とヘッドフォン58は単独で設けてもよいが、インカムとして一体的に設けてもよい。
グラフィックスコントローラ62は、オペレータ端末12のディスプレイモニタとして使用される液晶表示器(LCD)64を制御する。LCD64の画面上にタッチパネル70が重ねられ、LCD64の画面にタッチペン等により手書き入力操作が行えるように構成されている。グラフィックスコントローラ62にはHDMI(登録商標)コントローラ66も接続される。HDMIコントローラ66は外部の表示デバイスとの接続のためのHDMIコネクタ68に接続される。
無線LANデバイス74は、ネットワーク22との接続のためにIEEE802.11規格の無線LAN通信を実行する。ブルートゥースデバイス76は、外部機器との接続のためにブルートゥース規格の無線通信を実行する。有線LANデバイス78は、ネットワーク22との接続のためにIEEE802.3規格の有線LAN通信を実行する。このように、オペレータ端末12とネットワーク22との接続は無線通信によってもよいし、有線通信によってもよい。
PCIExpressカードコントローラ80はオペレータ端末12と外部機器との間でPCIExpress規格の通信を行なう。メモリカードコントローラ82は、記憶媒体、例えばSDカード(登録商標)等のメモリカードにデータを書き込み、メモリカードからデータを読み出す。
EC/KBC84は電力管理コントローラであり、キーボード88を制御するキーボードコントローラも内蔵したワンチップマイクロコンピュータとして実現されている。EC/KBC84は、電源スイッチ86の操作に応じてオペレータ端末12をパワーオン又はパワーオフする機能を有する。パワーオン及びパワーオフの制御は、EC/KBC84と電源回路90との協働動作によって実行される。EC/KBC84はオペレータ端末12がパワーオフされている期間中も、バッテリ92又はACアダプタ94からの電力によって動作する。電源回路90は、バッテリ92からの電力又は外部電源として接続されるACアダプタ94からの電力を用いて、各コンポーネントへ供給すべき電力を生成する。
[ウェアラブルデバイス23]
図3はモバイルPC16に接続されるウェアラブルデバイス23の外観の一例を示す。ウェアラブルデバイス23はメガネフレーム142とウェアラブルデバイス本体24を備える。メガネフレーム142は一般的なメガネからレンズを取り除いた形状でもよく、作業者の顔に装着される。メガネフレーム142はメガネが取り付けられる構造としてもよい。作業者がメガネを常用する場合、常用しているメガネと同様な度数のレンズがメガネフレーム142に取り付けられてもよい。
メガネフレーム142はウェアラブルデバイス本体24が着脱される取付具144を左右のテンプルに備える。図3では作業者の右側のテンプルの取付具144はウェアラブルデバイス本体24に隠されているので、図示されない。上述したようにウェアラブルデバイス本体24はディスプレイ124(図4に示す)を備え、ディスプレイ124は片目で目視されるようになっているので、ウェアラブルデバイス本体24が利き目側に取り付けられるように取付具144は左右のテンプルに備えられている。なお、ウェアラブルデバイス本体24を取付具144によりメガネフレーム142に着脱自在に取り付ける必要はなく、ウェアラブルデバイス本体24がメガネフレーム142に固定された右眼用、左眼用のウェアラブルデバイス23を用意してもよい。さらに、ウェアラブルデバイス本体24をメガネフレーム142ではなく、ヘルメット、ゴーグル等を用いて作業者の頭部に装着してもよい。
ウェアラブルデバイス本体24は、その係合片128(図4に示す)が取付具144の上下の枠内に押し込まれることにより、メガネフレーム142に取り付けられる。ウェアラブルデバイス本体24をメガネフレーム142から取り外す場合は、ウェアラブルデバイス本体24が取付具144から引き抜かれる。
ウェアラブルデバイス本体24は取付具144に取り付けられた状態で、係合片128は取付具144内で前後に多少は移動可能である。このため、作業者の焦点がディスプレイ124に合うようにウェアラブルデバイス本体24は前後位置が調整可能である。さらに、取付具144はテンプルに直交する軸144Aを中心に回転可能であり、ウェアラブルデバイス本体24がメガネフレーム142に取り付けられた後、ディスプレイ124が作業者の視線上に位置するように上下位置が調整可能である。さらに、取付具144の回転角度は90度程度であり、取付具144を上方向に大きく回転することにより、ウェアラブルデバイス本体24をメガネフレーム142からはね上げることができる。これにより、ウェアラブルデバイス本体24により視野が邪魔され実物を見ることが困難な場合や、狭い場所でウェアラブルデバイス本体24が周囲の物体に干渉する場合でも、ウェアラブルデバイス23全体を顔から外す/再装着することなく、ウェアラブルデバイス本体24を作業者の視野から一時的に外す/戻すことができる。
[ウェアラブルデバイス本体24]
ウェアラブルデバイス本体24はメガネフレーム142のテンプルに沿った側面部と作業者の一方の眼球の視線上に位置する前面部とからなる。側面部に対する前面部の角度は調節可能である。
図3に示すように、前面部の外側表面にはカメラ116、ライト118、カメラLED120が設けられる。ライト118は暗部の撮影時に発光する補助照明である。カメラLED120は写真や動画の撮影時に点灯し、撮影対象者に撮影していることを認識させるためのものである。
右側のテンプルに取り付けられたウェアラブルデバイス本体24の側面部の上側面に第1、第2、第3ボタン102、104、106が設けられる。なお、作業者の利き目が左眼の場合、ウェアラブルデバイス本体24は左側のテンプルに取り付けられる。右側に取り付けられるか左側に取り付けられるかで、ウェアラブルデバイス本体24の上下が反転するので、側面部の上側面と下側面の両面に第1、第2、第3ボタン102、104、106を設けてもよい。
側面部の外側表面にはタッチパッド110、第4ボタン108、マイク112、照度センサ114が設けられる。タッチパッド110と第4ボタン108は人差し指で操作可能である。ボタン102、104、106は、ウェアラブルデバイス本体24が右側に取り付けられた際、それぞれ人差し指、中指、薬指で操作可能な位置に配置される。タッチパッド110は、その表面上で矢印に示すように作業者が指を上下前後に移動させたことを検出できるようにしている。この移動の検出は、指を接触したまま移動するドラッグの動きに加え指をさっと擦るフリックの動きも含む。タッチパッド110は、作業者の指の上下前後移動を検出すると、コマンドを入力する。本明細書では、コマンドとはウェアラブルデバイス本体24に対する特定の処理の実行指令のことである。第1〜第4ボタン102、104、106、108、タッチパッド110の操作方法はアプリケーションプログラムによって決められている。
例えば、
第3ボタン106が1回押されると、項目の選択/項目の実行がなされ、
第3ボタン106が長押しされると、起動中のアプリケーションの一覧が表示され、
第2ボタン104が1回押されると、ホーム画面に戻り、
第2ボタン104が長押しされると、クイックセッティングのメニューが表示され、
第1ボタン102が1回押されると、操作の取り消し(キーボードのEscキーと同様の動作)が実行される。
タッチパッド110の操作に関しては、例えば、
上下にドラッグされると、カーソルが上下に移動され、
前にフリックされると、左のアイコンが選択され(連続してスクロール)、
後ろにフリックされると、右のアイコンが選択され(連続してスクロール)、
前にドラッグされると、左のアイコンが選択され(1項目ずつスクロール)、
後ろにドラックされると、右のアイコンが選択され(1項目ずつスクロール)る。
第1ボタン102は人差し指、第2ボタン104は中指、第3ボタン106は薬指、第4ボタン108は小指で操作できるような位置に配置される。なお、第4ボタン108が側面部の上部ではなく、側面部の外側表面に設けられるのは、スペースの関係上であり、第4ボタン108も第1〜第3ボタン102、104、106と同様に側面部の上部に設けられてもよい。照度センサ114はディスプレイの明るさを自動調整するために周囲の照度を検出する。
図4はウェアラブルデバイス本体24の裏面の外観の一例を示す。前面部の内側にはLCDからなるディスプレイ124が設けられる。側面部の内側にはマイク126、スピーカ130、係合片128が設けられる。マイク126は側面部の前方に、スピーカ130は側面部の後方に、係合片128は側面部の後方に設けられる。スピーカ130の代わりにヘッドフォンを用いてもよい。その場合、オペレータ端末12と同様にマイクとヘッドフォンをインカムとして一体的に設けてもよい。
図5はモバイルPC16とウェアラブルデバイス本体24との接続の一例を示す。側面部の後方にはUSBtype−C(登録商標)規格のケーブル146の一端のプラグ146Aが挿入されるレセプタクル132が設けられる。USBtype−C規格のケーブル146の他端のプラグ146BはモバイルPC16の上部端面のUSBtype−C規格のコネクタ207に挿入される。このようにウェアラブルデバイス本体24はUSBtype−C規格のケーブル146を介してモバイルPC16に接続され、画像信号等がウェアラブルデバイス本体24とモバイルPC16の間で伝送される。ウェアラブルデバイス本体24は無線LAN、ブルートゥース等の無線通信によりモバイルPC16に接続されてもよい。
実施形態ではウェアラブルデバイス本体24は駆動電源としてのバッテリ又はDC端子を備えず、駆動電源はモバイルPC16からUSBtype−Cケーブル146を介してウェアラブルデバイス本体24に供給される。しかし、ウェアラブルデバイス本体24が駆動電源を備えてもよい。
図6はウェアラブルデバイス本体24の一例を示すブロック図である。USBtype−Cコネクタ132がミキサ166に接続される。ディスプレイコントローラ170とUSBハブ164がミキサ166の第1端子、第2端子にそれぞれ接続される。ディスプレイ124がディスプレイコントローラ170に接続される。カメラコントローラ168、オーディオコーデック172、センサコントローラ162がUSBハブ164に接続される。カメラ116とライト118とカメラLED120がカメラコントローラ168に接続される。マイク112、126からのオーディオ信号がオーディオコーデック172に入力され、オーディオコーデック172からのオーディオ信号がアンプ174を介してスピーカ130に入力される。
センサコントローラ162に、モーションセンサ(例えば、加速度/地磁気/重力/ジャイロセンサ等)176、照度センサ114、近接センサ178、タッチパッド110、第1〜第4ボタン102、104、106、108、GPSセンサ180が接続される。センサコントローラ162はモーションセンサ176、照度センサ114、近接センサ178、タッチパッド110、第1〜第4ボタン102、104、106、108、GPSセンサ180からの検出信号を処理して、モバイルPC16へコマンドを供給する。図4には示していないが、モーションセンサ176、近接センサ178はウェアラブルデバイス本体24の内部に配置される。モーションセンサ176はウェアラブルデバイス本体24の動き、向き、姿勢等を検出する。近接センサ178は作業者の顔、指等の接近によりウェアラブルデバイス23の装着を検出する。
[モバイルPC16]
図7はモバイルPC(モバイルエッジコンピューティングデバイス)16の外観の一例を示す。モバイルPC16は片手で持てる小型PCであり、そのサイズは、幅が約10cm以下、高さが約18cm以下、厚さが2cm程度であり、重量は約300g程度と、小型で軽量である。このため、モバイルPC16は作業着のポケット、ベルトに装着されるホルスタあるいはショルダーケースに収納でき、ウェアラブルである。モバイルPC16はCPUや半導体メモリ等の半導体チップやSSD(Solid State Disk)等のストレージデバイスを収納するが、ディスプレイと文字入力用のハードウェアキーボードは備えない。
モバイルPC16の正面にはアップボタン202a、ライトボタン202b、ダウンボタン202c、レフトボタン202d、決定ボタン(センターボタン、エンターボタンとも称する)202eからなる5ボタン202が配置され、その下に指紋センサ204が配置される。文字入力用のハードウェアキーボードが備わっておらず暗証番号(PINとも称する)を入力することができないので、指紋センサ204はモバイルPC16のログイン時のユーザ認証のために用いられる。5ボタン202はコマンドを入力できる。
なお、5ボタン202の各ボタン202a〜202dに数字を割り当て、5ボタン202を用いて暗証番号を入力することにより、ログイン時のユーザ認証を行ってもよい。この場合、指紋センサ204は省略可能である。決定ボタン202e以外の4つのボタンに数字を割り当てるので、数字の種類は4つしかない。従って、ランダムに入力した数字が暗証番号に一致する可能性がある。しかし、暗証番号の桁数を大きくすれば、ランダムに入力した数字が暗証番号に一致する確率を小さくすることができる。指紋センサ204を備えるモバイルPC16でも5ボタン202による認証も可能としてもよい。1台のモバイルPC16を複数の作業者で共有することがあるが、指紋認証だけではこのような場合に対応できない。
5ボタン202はウェアラブルデバイス本体24のボタン102、104、106、108とタッチパッド110の操作と同じ操作が可能である。ウェアラブルデバイス本体24のボタン102、104、106、108とタッチパッド110で操作している様子を作業者は見ることができないので、作業者によっては意図した操作をするには慣れが必要な場合もある。また、ボタン102、104、106、108とタッチパッド110は小型であるので、操作しづらい場合もある。実施形態では、モバイルPC16の5ボタン202でも同じ操作ができるので、上記の懸念は解消される。5ボタン202の操作方法はアプリケーションプログラムによって決められている。
例えば、
決定ボタン202eが1回押されると、項目の選択/項目の実行がなされ(ウェアラブルデバイス本体24では、第3ボタン106の1回押しに対応)、
決定ボタン202eが長押しされると、終了又は操作の取り消しがなされ(ウェアラブルデバイス本体24では、第1ボタン102の1回押しが操作の取り消しに対応)、
アップボタン202aが1回押されると、カーソルが上に移動され(ウェアラブルデバイス本体24では、タッチパッド110で上にドラッグに対応)、
アップボタン202aが長押しされると、起動中のアプリケーションプログラムの一覧が表示され(ウェアラブルデバイス本体24では、第3ボタン106の長押しに対応)、
ダウンボタン202cが1回押されると、カーソルが下に移動され(ウェアラブルデバイス本体24では、タッチパッド110で下にドラッグに対応)、
ダウンボタン202cが長押しされると、クイックセッティングメニュー(後述)が表示され(ウェアラブルデバイス本体24では、第2ボタン104の長押しに対応)、
レフトボタン202dが1回押されると、右のアイコンが選択され(ウェアラブルデバイス本体24では、タッチパッド110で後ろにドラッグ/フリックに対応)、
ライトボタン202bが1回押されると、左のアイコンが選択される(ウェアラブルデバイス本体24では、タッチパッド110で前にドラッグ/フリックに対応)。
モバイルPC16の上部側面には、USB3.0規格のコネクタ206とUSBtype−C規格のコネクタ207とオーディオジャック208が設けられる。
モバイルPC16の一方の側面(正面から見て左側の側面)には、メモリカード用のカードスロット218が設けられる。メモリカードは、例えばSDカード、マイクロSDカード(登録商標)等を含む。
モバイルPC16の他方の側面(正面から見て右側の側面)には、ケンジントンロック(登録商標)のためのスロット210、電源スイッチ212、パワーLED213、DC IN/バッテリLED214、DC端子216、冷却用の通風口222が設けられる。パワーLED213は電源スイッチ212の近傍に配置され、電源オンの期間点灯する。DC IN/バッテリLED214はバッテリが充電中であるか否か等のモバイルPC16の状態とバッテリの残量を表示する。モバイルPC16はバッテリで駆動可能であるが、DC端子216にACアダプタを接続した状態でも駆動可能である。図示しないが、裏面はワンタッチでバッテリが交換可能に構成されている。
図8はモバイルPC16の一例を示すブロック図である。モバイルPC16はウェアラブルデバイス本体24で撮影した映像をオペレータ端末12へビデオ配信することや、オペレータ端末12から受信した画像を閲覧することができる。このため、モバイルPC16はカメラ機能とビューワ機能を備える。カメラ機能はウェアラブルデバイス本体24のカメラ116で写真やビデオを撮影する機能である。撮影した写真やビデオはカメラフォルダに保存され、ビューワ機能で閲覧できる。ビューワ機能はカメラフォルダに保存されているファイルを閲覧する機能である。ファイルの種類は、画像、動画、PDFファイル、カメラ機能で撮影した写真やビデオ、オペレータ端末12から受信した画像、オペレータ端末12へ送信した画像、ユーザフォルダに保存されたファイルがある。
モバイルPC16はシステムコントローラ302を備え、システムコントローラ302はプロセッサ(CPU)とコントローラ・ハブからなる。プロセッサには、主メモリ308、BIOS−ROM310、パワーLED213、DC IN/バッテリLED214、USBコントローラ322が接続される。コントローラ・ハブには、フラッシュメモリ326、メモリカードコントローラ328、HDD又はSSDからなるストレージデバイス330、USB切替器324、オーディオコーデック334、3G/LTE/GPSデバイス336、指紋センサ204、USB3.0コネクタ206、ブルートゥースデバイス/無線LANデバイス340、EC/KBC344が接続される。
システムコントローラ302はストレージデバイス330から主メモリ308にロードされる様々なプログラムを実行する。これらプログラムは、OS316、遠隔支援のためのフロントエンドアプリケーションプログラム314を含む。
オーディオコーデック334は、再生対象のデジタルのオーディオ信号をアナログのオーディオ信号に変換して、オーディオジャック208に供給する。また、オーディオコーデック334は、オーディオジャック208から入力されるアナログのオーディオ信号をデジタル信号に変換する。
メモリカードコントローラ328はメモリカードスロット218に挿入されるメモリカード、例えばSDカードにアクセスして、SDカードに対するデータの読み書きを制御する。
USBコントローラ322はUSBtype−Cコネクタ207に接続されるUSBtype−Cケーブル又はUSB3.0コネクタ206に接続されるUSB3.0ケーブル(図示せず)に対するデータの送受信を制御する。
図示しないが、USBtype−Cコネクタ207にはポート拡張アダプタも接続可能であり、HDMI等のインターフェースが使用可能である。
ブルートゥースデバイス/無線LANデバイス340はネットワーク22との接続のためにブルートゥース規格の無線通信又はIEEE802.11規格の無線LAN通信を実行する。なお、ネットワーク22との接続は無線通信によらず、IEEE802.3規格の有線LAN通信によってもよい。
指紋センサ204はモバイルPC16の起動時の指紋認証のために使用される。
EC/KBC344には、サブプロセッサ346、電源スイッチ212及び5ボタン202が接続される。EC/KBC344は、電源スイッチ212の操作に応じてモバイルPC16をパワーオン又はパワーオフする機能を有する。パワーオン及びパワーオフの制御は、EC/KBC344と電源回路350との協働動作によって実行される。EC/KBC344はモバイルPC16がパワーオフされている期間中も、バッテリ352又はACアダプタ358からの電力によって動作する。電源回路350は、バッテリ352からの電力又は外部電源として接続されるACアダプタ358からの電力を用いて、各コンポーネントへ供給すべき電力を生成する。電源回路350は電圧レギュレータモジュール356を含み、電圧レギュレータモジュール356はプロセッサ304に接続される。
なお、モバイルPC16をウェアラブルデバイス本体24と別体として構成したが、モバイルPC16をウェアラブルデバイス本体24内に組み込んで、両者を一体として構成してもよい。
[文字入力制御]
図7を参照して上述したように、モバイルPC16には、ログイン時のユーザ認証のために用いられる指紋センサ204が設けられる。また、ログイン時のユーザ認証は、5ボタン202の各ボタン202a〜202eを用いて、パスワードを入力することにより行ってもよい。
5ボタン202の各ボタン202a〜202eを用いて、パスワードを入力することにより、ログイン時のユーザ認証を行うとした場合、仮に、5ボタン202の各ボタン202a〜202dを数字に割り当てるとすると、4つの数字の組み合わせからなるパスワードしか入力できないので、セキュリティとしての強度は制限されたものとなる。
このため、本実施形態は、たとえば5ボタン202の各ボタン202a〜202eなどの少数ボタンでフルキーボードに匹敵するキー入力を行えるように制御する。なお、ログイン時のユーザ認証のためのパスワードの入力は一例であって、少数ボタンでフルキーボードに匹敵するキー入力を行えるように制御することは、様々なシーンに適用することができる。
図9を参照して、本実施形態において、たとえば5ボタン202の各ボタン202a〜202eを用いてパスワードを入力する例について説明する。なお、5ボタン202に代えて、ウェアラブルデバイス本体24のタッチパッド110上でのタッチ操作でパスワードを入力することもできる。また、言うまでも無いが、5ボタン202と同じ操作が可能なウェアラブルデバイス本体24のボタン102、104、106、108によってもパスワードを入力することができる。
ここでは、ログイン時のユーザ認証のために、5桁の数字またはアルファベットの組み合わせからなるパスワードが入力されることを想定する。パスワード入力画面のディスプレイ124への表示と、当該パスワード入力画面に対する作業者の操作内容の入力は、フロントエンドアプリケーションプログラム314を実行するモバイルPC16によって制御される。あるいは、OS316または図8には示されないBIOSを実行するモバイルPC16によって制御されてもよい。つまり、ウェアラブルデバイス23のディスプレイ124へのパスワード入力画面の表示と、このパスワード入力画面の更新とは、モバイルPC16によって制御される。
図9中、(A1)は、モバイルPC16の正面中央の5ボタン202が設けられる領域のみを局所的に示している。(A2)は、ウェアラブルデバイス本体24の側面部のタッチパッド110が設けられる領域のみを局所的に示している。また、(B)は、モバイルPC16によってウェアラブルデバイス23のディスプレイ124に表示されるパスワード入力画面、より詳しくは、パスワードを入力するためのソフトウェアキーボードの一例を示している。
まず、モバイルPC16の5ボタン202の各ボタン202a〜202eの操作とウェアラブルデバイス本体24のタッチパッド110上でのタッチ操作との対応関係について説明する。
前述したように、ウェアラブルデバイス本体24は、メガネフレーム142の右のテンプルに取り付けられ得るし、メガネフレーム142の左のテンプルに取り付けられ得る。ウェアラブルデバイス本体24がメガネフレーム142の右のテンプルに取り付けられる場合、タッチパッド110の右端が作業者の視線方向に位置し、ウェアラブルデバイス本体24がメガネフレーム142の左のテンプルに取り付けられる場合、タッチパッド110の左端が作業者の視線方向に位置する。ここでは、タッチパッド110上での作業者の視線方向を指示するタッチ操作を5ボタン202のボタン202bの操作と対応づけ、タッチパッド110上での作業者の視線方向と対向する方向を指示するタッチ操作を5ボタン202のボタン202dの操作と対応づける。ウェアラブルデバイス本体24がメガネフレーム142の左右のどちらのテンプルに取り付けられているのかを、モバイルPC16は、たとえば、ウェアラブルデバイス本体24から送信される加速度/地磁気/重力/ジャイロセンサ等のモーションセンサ176や近接センサ178の検出結果に基づいて検出する。タッチパッド110上での作業者の上方向または下方向を指示するタッチ操作については、ウェアラブルデバイス本体24がメガネフレーム142の左右のどちらのテンプルに取り付けられているのかに関わらず、5ボタン202のボタン202aまたはボタン202cの操作と対応づける。また、タップなどと称される、タッチパッド110上を軽く叩くようなタッチパッド110上でのタッチ操作を、5ボタン202のボタン202eの操作と対応づける。
次に、5ボタン202の各ボタン202a〜202eの操作またはタッチパッド110上でのタッチ操作に伴う、ディスプレイ124上のパスワード入力画面の遷移について説明する。ここでは、パスワードを入力する操作が、5ボタン202の各ボタン202a〜202eによって行われる場合を想定する。
(B)に示されるように、5桁の数字またはアルファベットの組み合わせからなるパスワードを入力するためのパスワード入力画面内には、数字とアルファベットとが円柱面に1文字ずつ巡回的に表され、それらの文字の中の1つが選択対象となる回転自在のシリンダを模したオブジェクト(a1−n:a1−1〜5)が水平方向に5つ並べられて提示される。たとえば、数字0〜9の後にアルファベットA〜Zが続き、アルファベットZから数字0へ戻るように、オブジェクトa1−nは、数字とアルファベットとの中から1文字を数字順、アルファベット順に表す。数字とアルファベットとの順番は逆転させてもよいし、さらには、記号などを加えてもよい。あるいは、数字またはアルファベットの一方のみであってもよい。
また、このパスワード入力画面内には、5桁のうちの何桁目が入力対象となっているかを示すオブジェクト(a2)が提示される。つまり、本実施形態では、オブジェクトa1−nとオブジェクトa2とでソフトウェアキーボードを構成する。換言すれば、モバイルPC16は、当該ソフトウェアキーボードを含むパスワード入力画面をウェアラブルデバイス23のディスプレイ124に表示する。
モバイルPC16は、5ボタン202のボタン202aまたはボタン202cが操作された場合、入力対象となっているオブジェクトa1−nを上方向または下方向に回転させるように選択対象文字を切り換える。たとえば、「1」が選択対象となっているオブジェクトa1−2を示すようにオブジェクトa2が提示されている状態で、5ボタン202のボタン202aが操作された場合、モバイルPC16は、オブジェクトa1−2を上方向に回転させるように、つまり、オブジェクトa1−2で示す文字を「2」に切り換えるようにパスワード入力画面を遷移させる。5ボタン202のボタン202cが操作された場合には、モバイルPC16は、オブジェクトa1−2を下方向に回転させるように、つまり、当該オブジェクトa1−2で示す文字を「0」に切り換えるようにパスワード入力画面を遷移させる。
モバイルPC16は、各オブジェクトa1−nを表示する際、選択対象文字の他、前後の候補文字を、当該選択対象文字を挟むように上下に配置して提示する。より詳しくは、たとえば「1」に対する「0」のように降順で次候補となる文字を上部に配置して提示するとともに、たとえば「1」に対する「2」のように昇順で次候補となる文字を下部に配置して提示する、これにより、目的の文字を選択対象とするためにどちらの方向にオブジェクトa1−nを回転させればよいかが示される。
また、5ボタン202のボタン202bが操作された場合、モバイルPC16は、オブジェクトa2を右に移動させるように、つまり、オブジェクトa2が示すオブジェクトa1−2をオブジェクトa1−3に切り換えるようにパスワード入力画面を遷移させる。5ボタン202のボタン202dが操作された場合には、モバイルPC16は、オブジェクトa2を左に移動させるように、つまり、オブジェクトa2が示すオブジェクトa1−2をオブジェクトa1−1に切り換えるようにパスワード入力画面を遷移させる。
そして、5ボタン202のボタン202eが操作された場合、モバイルPC16は、各オブジェクトa1−nで示される5つの文字の組み合わせを入力パスワードとして受け付ける。モバイルPC16は、入力パスワードが正しければ、認証を成功させ、ログイン処理を実行する。一方、正しくなければ、再度、パスワード入力画面をディスプレイ124に表示して、パスワードの再入力を促す。認証の試行回数がしきい値に達した場合、モバイルPC16は、セキュリティ確保のため、たとえばシステム管理者などによって所定の解除操作が行われない限り使用できなくするといったシステムのロックを行う。
このように、本実施形態では、たとえば5ボタン202のボタン202aまたは202cによる垂直方向の指示操作で数字またはアルファベットの中から1つを選択することができ(図9:a3)、たとえば5ボタン202のボタン202bまたは202dによる水平方向の指示操作で入力対象位置を移動させることができるので(図9:a4)、数字またはアルファベットを組み合わせた複雑なパスワードも簡単に入力することができる。
図10は、モバイルPC16によるたとえば5ボタン202の各ボタン202a〜202eを用いたパスワードの入力制御の一例を示すフローチャートである。
モバイルPC16は、システムのブート時またはレジューム時、パスワードを入力させるためのパスワード入力画面をウェアラブルデバイス23のディスプレイ124に表示する(ステップA1)。モバイルPC16は、たとえば5ボタン202のボタン202aまたは202cによる垂直方向の指示操作を検知した場合(ステップA2:YES、ステップA3:YES)、入力対象桁の文字を切り換える(ステップA4)。一方、たとえば5ボタン202のボタン202bまたは202dによる水平方向の指示操作を検知した場合には(ステップA3:NO)、モバイルPC16は、入力対象桁を切り換える(ステップA5)。
モバイルPC16は、たとえば5ボタン202のボタン202eによる決定の指示が検知されない場合(ステップA6:NO)、上記ステップA2〜ステップA5の処理を繰り返す。決定の指示が検知された場合(ステップA6:YES)、モバイルPC16は、その時点において各入力対象桁で選択されている文字の組み合わせを入力パスワードとして受け付け、当該入力パスワードが正しいか否かによって認証の成否を判定する(ステップA7)。認証が成功した場合(ステップA7:YES)、モバイルPC16は、ログイン処理を実行する(ステップA8)。
一方、認証が失敗した場合(ステップA7:NO)、モバイルPC16は、認証試行回数がしきい値に達したか否かを調べる(ステップA9)。認証試行回数がしきい値に達していない場合(ステップA9:NO)、モバイルPC16は、ステップA1に戻り、パスワード入力画面をウェアラブルデバイス23のディスプレイ124に再度表示し、パスワードの再入力を促す。認証試行回数がしきい値に達している場合には(ステップA9:YES)、モバイルPC16は、セキュリティ確保のため、たとえばシステム管理者などによって所定の解除操作が行われない限り使用できなくするといったシステムのロックを行う(ステップA10)。
以上のように、本実施形態では、たとえばパスワードなどを5ボタン202の各ボタン202a〜202eといった少数ボタンによってスムーズに入力することができる。
なお、以上の説明では、ウェアラブルデバイス23のディスプレイ124にパスワード入力画面を表示し、5ボタン202の各ボタン202a〜202eなどによる、当該パスワード入力画像画面上でのパスワードの入力の移動を、モバイルPC16によって制御する例を示したが、たとえば単体で動作するウェアラブルデバイスにおいて、これと同様の制御を行うようにすることも可能である。
本実施形態の処理はコンピュータプログラムによって実現することができるので、このコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体を通じてこのコンピュータプログラムをコンピュータにインストールして実行するだけで、本実施形態と同様の効果を容易に実現することができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
12…オペレータ端末、14…サーバ、16…モバイルPC、18…遠隔支援サーバ、23…ウェアラブルデバイス、24…ウェアラブルデバイス本体、102、104、106、108…ボタン、110…タッチパッド、116…カメラ、124…ディスプレイ、126…マイク、128…レール、130…スピーカ、132…USBコネクタ、142…レンズ無しフレーム、144…レール取り付けシステム、176…モーションセンサ、178…近接センサ、202…5ボタン。

Claims (18)

  1. 表示部を具備するウェアラブル機器に接続可能な電子機器であって、
    操作部と、
    ソフトウェアキーボードを前記表示部に表示し、前記ソフトウェアキーボードに対する前記操作部の操作に応じた文字の入力を制御する文字入力制御部と、
    を具備し、
    前記文字入力制御部は、
    各々が1つの文字を表すオブジェクトが提示される所定数の入力領域を第1方向に並べて構成される前記ソフトウェアキーボードを前記表示部に表示し、
    前記第1方向を指示する第1操作または前記第1方向と対向する第2方向を指示する第2操作が行われた場合、前記所定数の入力領域の中で入力対象とする入力領域を前記第1方向または前記第2方向へ移動させ、
    前記第1方向と直交する第3方向を指示する第3操作または前記第3方向と対向する第4方向を指示する第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを他の文字を表すオブジェクトに切り替える、
    電子機器。
  2. 前記所定数の入力領域は、数字、アルファベットまたは記号の少なくとも1つを受け付け可能であり、
    前記文字入力制御部は、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトの前記第3操作または前記第4操作に伴う切り替えを、数字順、アルファベット順、または記号順の少なくとも1つに従って巡回的に行う、
    請求項1に記載の電子機器。
  3. 前記文字入力制御部は、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトを前記第3方向上において挟むように当該オブジェクトと隣接させて、昇順で次候補となる文字を表すオブジェクトと降順で次候補となる文字を表すオブジェクトとを前記表示部に表示する請求項2に記載の電子機器。
  4. 前記文字入力制御部は、
    前記第3操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを、前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの一方に切り換え、
    前記第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを、前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの他方に切り換える、
    請求項3に記載の電子機器。
  5. 前記文字入力制御部は、
    前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの一方を、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトの前記第3方向側に表示し、
    前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの他方を、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトの前記第4方向側に表示する、
    請求項4に記載の電子機器。
  6. 前記文字入力制御部は、ユーザ認証に用いるパスワードを入力するために前記ソフトウェアキーボードを前記表示部に表示する請求項1に記載の電子機器。
  7. 表示部と操作部とを具備するウェアラブル機器であって、
    ソフトウェアキーボードを前記表示部に表示し、前記ソフトウェアキーボードに対する前記操作部の操作に応じた文字の入力を制御する文字入力制御部を具備し、
    前記文字入力制御部は、
    各々が1つの文字を表すオブジェクトが提示される所定数の入力領域を第1方向に並べて構成される前記ソフトウェアキーボードを前記表示部に表示し、
    前記第1方向を指示する第1操作または前記第1方向と対向する第2方向を指示する第2操作が行われた場合、前記所定数の入力領域の中で入力対象とする入力領域を前記第1方向または前記第2方向へ移動させ、
    前記第1方向と直交する第3方向を指示する第3操作または前記第3方向と対向する第4方向を指示する第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを他の文字を表すオブジェクトに切り替える、
    ウェアラブル機器。
  8. 前記所定数の入力領域は、数字、アルファベットまたは記号の少なくとも1つを受け付け可能であり、
    前記文字入力制御部は、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトの前記第3操作または前記第4操作に伴う切り替えを、数字順、アルファベット順、または記号順の少なくとも1つに従って巡回的に行う、
    請求項7に記載のウェアラブル機器。
  9. 前記文字入力制御部は、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトを前記第3方向上において挟むように当該オブジェクトと隣接させて、昇順で次候補となる文字を表すオブジェクトと降順で次候補となる文字を表すオブジェクトとを前記表示部に表示する請求項8に記載のウェアラブル機器。
  10. 前記文字入力制御部は、
    前記第3操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを、前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの一方に切り換え、
    前記第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを、前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの他方に切り換える、
    請求項9に記載のウェアラブル機器。
  11. 前記文字入力制御部は、
    前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの一方を、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトの前記第3方向側に表示し、
    前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの他方を、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトの前記第4方向側に表示する、
    請求項10に記載のウェアラブル機器。
  12. 前記文字入力制御部は、ユーザ認証に用いるパスワードを入力するために前記ソフトウェアキーボードを前記表示部に表示する請求項7に記載のウェアラブル機器。
  13. 表示部と操作部とを具備するウェアラブル機器の文字入力制御方法であって、
    各々が1つの文字を表すオブジェクトが提示される所定数の入力領域を第1方向に並べて構成されるソフトウェアキーボードを前記表示部に表示し、
    前記第1方向を指示する第1操作または前記第1方向と対向する第2方向を指示する第2操作が行われた場合、前記所定数の入力領域の中で入力対象とする入力領域を前記第1方向または前記第2方向へ移動させ、
    前記第1方向と直交する第3方向を指示する第3操作または前記第3方向と対向する第4方向を指示する第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを他の文字を表すオブジェクトに切り替える、
    文字入力制御方法。
  14. 前記所定数の入力領域は、数字、アルファベットまたは記号の少なくとも1つを受け付け可能であり、
    前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトの前記第3操作または前記第4操作に伴う切り替えを、数字順、アルファベット順、または記号順の少なくとも1つに従って巡回的に行う、
    請求項13に記載の文字入力制御方法。
  15. 前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトを前記第3方向上において挟むように当該オブジェクトと隣接させて、昇順で次候補となる文字を表すオブジェクトと降順で次候補となる文字を表すオブジェクトとを前記表示部に表示する請求項14に記載の文字入力制御方法。
  16. 前記第3操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを、前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの一方に切り換え、
    前記第4操作が行われた場合、前記所定数の入力領域の中で入力対象となっている入力領域において提示するオブジェクトを、前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの他方に切り換える、
    請求項15に記載の文字入力制御方法。
  17. 前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの一方を、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトの前記第3方向側に表示し、
    前記昇順で次候補となる文字を表すオブジェクト及び前記降順で次候補となる文字を表すオブジェクトの他方を、前記所定数の入力領域の中で入力対象となっている入力領域において提示されているオブジェクトの前記第4方向側に表示する、
    請求項16に記載の文字入力制御方法。
  18. ユーザ認証に用いるパスワードを入力するために前記ソフトウェアキーボードを前記表示部に表示する請求項13に記載の文字入力制御方法。
JP2018014664A 2018-01-31 2018-01-31 電子機器、ウェアラブル機器および文字入力制御方法 Pending JP2019133387A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018014664A JP2019133387A (ja) 2018-01-31 2018-01-31 電子機器、ウェアラブル機器および文字入力制御方法
US16/108,806 US10705726B2 (en) 2018-01-31 2018-08-22 Electronic device, wearable device, and character input control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018014664A JP2019133387A (ja) 2018-01-31 2018-01-31 電子機器、ウェアラブル機器および文字入力制御方法

Publications (1)

Publication Number Publication Date
JP2019133387A true JP2019133387A (ja) 2019-08-08

Family

ID=67392091

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018014664A Pending JP2019133387A (ja) 2018-01-31 2018-01-31 電子機器、ウェアラブル機器および文字入力制御方法

Country Status (2)

Country Link
US (1) US10705726B2 (ja)
JP (1) JP2019133387A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWM593243U (zh) * 2019-12-26 2020-04-11 洪家傑 動作感測資訊匯流系統

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000347792A (ja) * 1999-06-02 2000-12-15 Sankyo Seiki Mfg Co Ltd 暗証番号入力装置
JP2004312240A (ja) * 2003-04-04 2004-11-04 Pentax Corp デジタルカメラ
JP2005250913A (ja) * 2004-03-04 2005-09-15 Sony Corp 設定項目入力方法及び電子機器
JP2011180664A (ja) * 2010-02-26 2011-09-15 Nikon Corp 文字入力装置及びヘッドマウントディスプレイ装置
US20140361997A1 (en) * 2013-06-09 2014-12-11 Sap Ag Motion-based input method and system for electronic device
JP2016085510A (ja) * 2014-10-23 2016-05-19 株式会社日立ソリューションズ 入力装置
US9678571B1 (en) * 2016-09-06 2017-06-13 Apple Inc. Devices, methods, and graphical user interfaces for generating tactile outputs
JP2017182228A (ja) * 2016-03-29 2017-10-05 セイコーエプソン株式会社 入力装置、入力方法、コンピュータープログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3858091B2 (ja) 2002-10-03 2006-12-13 独立行政法人産業技術総合研究所 パスワード認証装置およびパスワード認証方法
JP2005174023A (ja) 2003-12-11 2005-06-30 Canon Inc 認証システムおよびその方法
JP4341627B2 (ja) 2006-01-25 2009-10-07 セイコーエプソン株式会社 キーボードを有さない装置における文字入力
KR100753944B1 (ko) * 2006-06-26 2007-08-31 삼성전자주식회사 휠 입력 장치를 가지는 휴대 단말기의 가상 휠 인터페이스구조 및 이를 이용한 문자 입력 방법
JP6110717B2 (ja) 2013-04-18 2017-04-05 株式会社野村総合研究所 文字入力装置、文字入力方法、および文字入力プログラム
FR3045876A1 (fr) * 2015-12-17 2017-06-23 Abc Smart Card Procede d'elaboration d'un mot challenge, dispositif electronique, peripherique de consigne et systeme mettant en oeuvre ledit procede

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000347792A (ja) * 1999-06-02 2000-12-15 Sankyo Seiki Mfg Co Ltd 暗証番号入力装置
JP2004312240A (ja) * 2003-04-04 2004-11-04 Pentax Corp デジタルカメラ
JP2005250913A (ja) * 2004-03-04 2005-09-15 Sony Corp 設定項目入力方法及び電子機器
JP2011180664A (ja) * 2010-02-26 2011-09-15 Nikon Corp 文字入力装置及びヘッドマウントディスプレイ装置
US20140361997A1 (en) * 2013-06-09 2014-12-11 Sap Ag Motion-based input method and system for electronic device
JP2016085510A (ja) * 2014-10-23 2016-05-19 株式会社日立ソリューションズ 入力装置
JP2017182228A (ja) * 2016-03-29 2017-10-05 セイコーエプソン株式会社 入力装置、入力方法、コンピュータープログラム
US9678571B1 (en) * 2016-09-06 2017-06-13 Apple Inc. Devices, methods, and graphical user interfaces for generating tactile outputs

Also Published As

Publication number Publication date
US10705726B2 (en) 2020-07-07
US20190235746A1 (en) 2019-08-01

Similar Documents

Publication Publication Date Title
JP7073122B2 (ja) 電子機器、制御方法及びプログラム
US20170038838A1 (en) Information processing system and information processing method
WO2022134632A1 (zh) 作品处理方法及装置
US10067656B2 (en) Method and apparatus for context based application grouping in virtual reality
US11061565B2 (en) Electronic device and control method
US20200226893A1 (en) Electronic edge computing device
KR102352390B1 (ko) 디지털 디바이스 및 그 제어 방법
US20200098361A1 (en) Electronic device, recognition method, and non-transitory computer-readable storage medium
US20190236260A1 (en) Electronic apparatus, control system, control method, and storage medium
US10705726B2 (en) Electronic device, wearable device, and character input control method
JP6968689B2 (ja) 電子機器、ウェアラブル機器及び表示制御方法
EP3112991A1 (en) Method and apparatus for context based application grouping in virtual reality
US11042705B2 (en) Electronic device, recognition method, and non-transitory computer-readable storage medium
US11068573B2 (en) Electronic device and method of starting electronic device
JP6995650B2 (ja) ウェアラブル機器及びその操作方法
US10552360B2 (en) Electronic device, connection method, and storage medium
US10852548B2 (en) Electronic device, wearable device, and setting method
JP6995651B2 (ja) 電子機器、ウェアラブル機器および表示制御方法
US11063822B2 (en) Electronic apparatus and control method
CN112732133A (zh) 消息处理的方法、装置、电子设备及存储介质
KR20170024361A (ko) 이동 단말기 및 그 제어 방법
KR20160041710A (ko) 글래스 타입의 이동 단말기

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20181207

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210114

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211221

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220621