JP7287600B2 - 情報処理装置 - Google Patents

Description

本発明は、情報処理装置に関する。

Ｌｅａｐ Ｍｏｔｉｏｎ社が提供するＬｅａｐ Ｍｏｔｉｏｎ（登録商標）を用いて両手の動きを認識して、文字を入力する仮名文字入力方法が開示されている（例えば、非特許文献１）。この種の仮名文字入力方法では、例えば、右手で子音を選択し、左手で母音を選択することにより、文字を入力する。

山崎 宏樹、"両手の動きによる母音と子音の組み合わせを用いた仮名文字入力手法の研究"、［online］、２０１８年３月、東京工科大学 メディア学部 ゲームサイエンス プロジェクト、［平成３１年３月１９日検索］、インターネット〈URL：https://gamescience.jp/2017/Paper/Yamazaki_2017.pdf〉

しかし、文字入力に両手を使用する方法では、文字を入力できるユーザの状況が両手を自由に動かせる状況等に限定される。このため、従来の方法を採用した情報処理装置の使い勝手は必ずしもよいとはいえない。

以上の課題を解決するために、本発明の好適な態様に係る情報処理装置は、ユーザの片手の形状及び動きを検出する検出部と、入力文字の候補となる複数の候補文字が分類された複数の文字グループの中から、入力文字が属する一の文字グループを、検出部により検出された片手の形状及び動きの一方に基づいて特定し、一の文字グループに属する複数の候補文字の中から入力文字を、検出部により検出された片手の形状及び動きの他方に基づいて特定する特定部と、を備える。

本発明によれば、情報処理装置の使い勝手を向上させることができる。

第１実施形態に係る情報処理装置の構成を示すブロック図である。 第１実施形態に係る文字グループの一例を示す説明図である。 図１に示した情報処理装置の動作の概要を示す説明図である。 図１に示した情報処理装置の動作の一例を示すフローチャートである。 第２実施形態に係る情報処理装置の構成を示すブロック図である。 図５に示した情報処理装置の動作の概要を示す説明図である。 図５に示した情報処理装置の動作の一例を示すフローチャートである。 第３実施形態に係る情報処理装置の構成を示すブロック図である。 第３実施形態に係る文字グループの一例を示す説明図である。 図８に示した情報処理装置の動作の概要を示す説明図である。 図８に示した情報処理装置の動作の一例を示すフローチャートである。

[１．第１実施形態]
図１は、第１実施形態に係る情報処理装置１０の構成を示すブロック図である。以下の説明では、情報処理装置１０として、ユーザの頭部に装着されるウェアラブル端末を想定する。但し、情報処理装置１０としては、任意の情報処理装置を採用することができ、例えば、スマートフォン及びタブレット端末等の可搬型の情報端末であってもよい。ユーザの頭部に装着されるウェアラブル端末は、例えば、ヘッドマウントディスプレイ及びスマートグラス等である。例えば、情報処理装置１０は、ＡＲ（Augmented Reality）技術又はＭＲ（Mixed Reality）技術等を用いて、仮想空間の仮想物体と現実空間の実物体とを表示する。なお、情報処理装置１０は、ハーフミラーを用いて、実物体と仮想物体とをユーザに視認させる光学シースルー方式を採用してもよいし、ユーザの周囲の現実空間を撮像した画像に仮想物体を融合して、実物体と仮想物体とをユーザに視認させるビデオシースルー方式を採用してもよい。あるいは、情報処理装置１０は、ＶＲ（Virtual Reality）技術を用いて、仮想空間を表示してもよい。すなわち、情報処理装置１０は、ｘＲ（ＡＲ、ＭＲ及びＶＲ等の総称）技術を用いて、仮想空間等を表示してもよい。

情報処理装置１０は、処理装置１００、記憶装置１２０、表示装置１４０、撮像装置１６０及び通信装置１８０を有する。情報処理装置１０の複数の要素は、情報を通信するための単体又は複数のバスで相互に接続される。なお、本明細書における「装置」という用語は、回路、デバイス又はユニット等の他の用語に読替えてもよい。また、情報処理装置１０の複数の要素の各々を、単数又は複数の機器が構成してもよい。あるいは、情報処理装置１０の一部の要素は省略されてもよい。

処理装置１００は、情報処理装置１０の全体を制御するプロセッサであり、例えば、単数又は複数のチップで構成される。処理装置１００は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置（ＣＰＵ：Central Processing Unit）で構成される。なお、処理装置１００の機能の一部又は全部を、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、及び、ＦＰＧＡ（Field Programmable Gate Array）等のハードウェアによって実現してもよい。処理装置１００は、各種の処理を並列的又は逐次的に実行する。

処理装置１００は、例えば、記憶装置１２０から制御プログラムＰＲ１を読み出して実行することによって、検出部１１０及び特定部１１２として機能する。すなわち、情報処理装置１０は、検出部１１０及び特定部１１２を有する。

検出部１１０は、ユーザの片手の形状及び動きを検出する。なお、以下では、ユーザの片手の形状の変化、片手の形状の維持及び片手の動きを、ジェスチャと総称する場合がある。例えば、検出部１１０は、後述する撮像装置１６０が撮像したユーザの片手の画像を示す撮像データに基づいて、ユーザの片手のジェスチャを検出する。なお、検出部１１０におけるジェスチャの検出には、例えば、テンプレートマッチング等の画像処理技術を用いることができる。この場合、テンプレートマッチングに用いるテンプレート画像に関する情報等は、例えば、記憶装置１２０に記憶されていてもよい。また、検出部１１０におけるジェスチャの検出の判断基準は、例えば、機械学習等の結果に応じて変化してもよい。なお、検出部１１０におけるジェスチャの検出に用いる技術は、テンプレートマッチングに限定されない。

特定部１１２は、ユーザの片手のジェスチャにより情報処理装置１０に入力される文字を、検出部１１０により検出された片手のジェスチャに基づいて特定する。以下では、情報処理装置１０に入力される文字は、入力文字とも称される。例えば、特定部１１２は、入力文字の候補となる複数の候補文字が分類された複数の文字グループの中から、入力文字が属する一の文字グループを、検出部１１０により検出された片手の形状に基づいて特定する。そして、特定部１１２は、特定した一の文字グループに属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手の動きに基づいて特定する。文字グループについては、図２において説明する。また、特定部１１２の動作の詳細については、図３において説明する。

記憶装置１２０は、処理装置１００が読取可能な記録媒体であり、処理装置１００が実行する制御プログラムＰＲ１を含む複数のプログラム、及び処理装置１００が使用する各種のデータを記憶する。記憶装置１２０は、例えば、ＲＯＭ（Read Only Memory）、ＥＰＲＯＭ（Erasable Programmable ＲＯＭ）、ＥＥＰＲＯＭ（Electrically Erasable Programmable ＲＯＭ）及びＲＡＭ（Random Access Memory）等の少なくとも１つによって構成されてもよい。記憶装置１２０は、レジスタ、キャッシュ、又は、メインメモリ（主記憶装置）等と呼ばれてもよい。なお、制御プログラムＰＲ１は、インターネット等のネットワークを介して他の装置から送信されてもよい。

表示装置１４０は、外部への出力を実施するディスプレイ等の出力デバイスである。表示装置１４０は、表示部の一例であり、処理装置１００による制御のもとで、仮想物体等を表示する。例えば、液晶表示パネル及び有機ＥＬ（Electro Luminescence）表示パネル等の各種の表示パネルが表示装置１４０として好適に利用される。ここで、表示装置１４０は、実物体と仮想物体とをユーザに視認させるシースルー方式による表示を実現するための光源及び光学系等の各種構成を適宜に含む。

撮像装置１６０は、被写体を撮像し、撮像した被写体の画像を示す撮像データを出力する装置である。撮像装置１６０は、例えば、撮像光学系及び撮像素子を有する。撮像光学系は、少なくとも１つの撮像レンズを含む光学系である。例えば、撮像光学系は、プリズム等の各種の光学素子を有してもよいし、ズームレンズやフォーカスレンズ等を有してもよい。撮像素子は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサー又はＣＭＯＳ（Complementary MOS）イメージセンサー等である。ここで、撮像装置１６０の撮像可能な領域は、表示装置１４０の表示可能な領域の一部又は全部を含む。

通信装置１８０は、他の装置と通信を行うためのハードウェア（送受信デバイス）である。例えば、通信装置１８０は、移動体通信網又はネットワークを介して他の装置と通信する機能、及び、近距離無線通信によって他の装置と通信する機能の一方又は両方を有する。近距離無線通信には、例えばＢｌｕｅｔｏｏｔｈ（登録商標）、ＺｉｇＢｅｅ（登録商標）、又は、ＷｉＦｉ（登録商標）等が挙げられる。

なお、情報処理装置１０の構成は、図１に示す例に限定されない。例えば、情報処理装置１０は、表示装置１４０又は撮像装置１６０の姿勢の変化に応じたデータを出力する姿勢センサを有してもよい。この場合、検出部１１０は、撮像装置１６０が撮像したユーザの片手の画像を示す撮像データの他に、姿勢センサの検出結果も用いて、ユーザの片手のジェスチャを検出してもよい。また、通信装置１８０は、必要に応じて設けられればよく、省略されてもよい。

図２は、第１実施形態に係る文字グループＣＧＲの一例を示す説明図である。なお、図２は、図が煩雑になることを避けるため、複数の文字グループＣＧＲのうち、複数の母音グループＣＧＲｖ（ＣＧＲｖ１、ＣＧＲｖ２、ＣＧＲｖ３、ＣＧＲｖ４及びＣＧＲｖ５）と、数字グループＣＧＲｎｍとの一例を示している。すなわち、複数の文字グループＣＧＲのうちのいくつかは、複数の仮名文字が母音に基づいて分類された複数の母音グループＣＧＲｖであり、複数の文字グループＣＧＲのうちの１つは、数字及びアルファベットを含む数字グループＣＧＲｎｍである。

例えば、複数の仮名文字は、母音に基づいて、複数の母音グループＣＧＲｖに分類される。具体的には、母音グループＣＧＲｖ１には、「あ段」に属する文字が含まれる。なお。図２に示す例では、文字「ん」を母音グループＣＧＲｖ１に含めているが、文字「ん」は、母音グループＣＧＲｖ１以外の母音グループＣＧＲｖに含まれてもよい。また、母音グループＣＧＲｖ２には、「い段」に属する文字が含まれ、母音グループＣＧＲｖ３には、「う段」に属する文字が含まれる。そして、母音グループＣＧＲｖ４には、「え段」に属する文字が含まれ、母音グループＣＧＲｖ５には、「お段」に属する文字が含まれる。

また、複数の文字グループＣＧＲの各々には、片手ＨＮの形状が予め割り当てられている。例えば、複数の文字グループＣＧＲの各々には、複数のグループ指定形状ＣＦｇの何れかが割り当てられている。図２に示す例では、複数のグループ指定形状ＣＦｇの５つは、５つの母音指定形状ＣＦｖ（ＣＦｖ１１、ＣＦｖ１２、ＣＦｖ１３、ＣＦｖ１４及びＣＦｖ１５）であり、複数のグループ指定形状ＣＦｇの１つは、数字指定形状ＣＦｎｍである。例えば、母音グループＣＧＲｖ１には、５本の指のうちの親指のみを曲げた母音指定形状ＣＦｖ１１が割り当てられ、母音グループＣＧＲｖ２には、５本の指のうちの人差し指のみを曲げた母音指定形状ＣＦｖ１２が割り当てられている。また、母音グループＣＧＲｖ３には、５本の指のうちの中指のみを曲げた母音指定形状ＣＦｖ１３が割り当てられ、母音グループＣＧＲｖ４には、５本の指のうちの薬指のみを曲げた母音指定形状ＣＦｖ１４が割り当てられている。そして、母音グループＣＧＲｖ５には、５本の指のうちの小指のみを曲げた母音指定形状ＣＦｖ１５が割り当てられ、数字グループＣＧＲｎｍには、５本の指のうちの人差し指及び中指のみを伸ばした数字指定形状ＣＦｎｍが割り当てられている。すなわち、５つの母音指定形状ＣＦｖは、５つの母音と１対１に対応している。

なお、文字グループＣＧＲは、図２に示す例に限定されない。例えば、アルファベットは、数字が属する数字グループＣＧＲｎｍとは別の文字グループＣＧＲに含まれてもよい。また、複数の文字グループＣＧＲの各々に割り当てられるグループ指定形状ＣＦｇは、図２に示す例に限定されない。また、図２では、片手ＨＮの形状を、左手を例にして示しているが、グループ指定形状ＣＦｇは、左手の形状に限定されない。例えば、検出部１１０は、右手の５本の指のうちの親指のみを曲げた形状を、母音指定形状ＣＦｖ１１として検出可能である。なお、右手と左手とで互いに異なるグループ指定形状ＣＦｇが割り当てられてもよい。

図３は、図１に示した情報処理装置１０の動作の概要を示す説明図である。なお、図３では、複数の候補文字が図２に示した複数の文字グループＣＧＲに分類された場合を例にして、情報処理装置１０の動作の概要を説明する。

時刻ｔ０では、ユーザの片手ＨＮの形状は、複数の文字グループＣＧＲのいずれにも割り当てられていないニュートラル形状ＣＦｎｔである。このため、情報処理装置１０に入力文字を入力する文字入力は、開始されない。

時刻ｔ１において、ユーザは、片手ＨＮの形状を、ニュートラル形状ＣＦｎｔから母音指定形状ＣＦｖ１２に変化させる。このため、検出部１１０は、片手ＨＮの形状が５つの母音指定形状ＣＦｖ（ＣＦｖ１１、ＣＦｖ１２、ＣＦｖ１３、ＣＦｖ１４及びＣＦｖ１５）のうちの母音指定形状ＣＦｖ１２に一致したことを検出する。そして、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を開始する。

また、片手ＨＮの形状が母音指定形状ＣＦｖ１２に一致したことを検出部１１０が検出したため、特定部１１２は、母音指定形状ＣＦｖ１２に対応する母音が属する母音グループＣＧＲｖ２を、入力文字が属する文字グループＣＧＲとして特定する。そして、特定部１１２は、母音グループＣＧＲｖ２に属する複数の候補文字（「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」）の中から、一の候補文字を、検出部１１０が検出した片手ＨＮの動きに応じて選択する。なお、検出部１１０が片手ＨＮの動きの検出を開始した時刻ｔ１では、母音グループＣＧＲｖ２に属する複数の候補文字（「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」）のうち、予め決められた候補文字（図３に示す例では、「い」）が、選択されている。例えば、処理装置１００は、現時点において選択されている候補文字として、文字「い」を表示装置１４０に表示させてもよい。

図３に示す例では、候補文字「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」が、候補文字「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」の順に仮想的に配置されていると想定して、候補文字の選択等を説明する。

時刻ｔ１から時刻ｔ２にかけて、ユーザは、例えば、肘と手首とを通過するＹ軸を中心にして、片手ＨＮの形状を維持した状態で、片手ＨＮを回転方向ＲＯＴ１に回転させる。例えば、検出部１１０は、時刻ｔ２において、片手ＨＮの動きをとして、時刻ｔ１から時刻ｔ２までの片手ＨＮの回転量及び回転方向ＲＯＴを検出する。特定部１１２は、検出部１１０が検出した片手ＨＮの回転量に基づいて、母音グループＣＧＲｖ２に属する複数の候補文字のうちの候補文字「ひ」を選択する。すなわち、時刻ｔ２では、検出部１１０が検出した片手ＨＮの動きに応じて選択される候補文字は、検出部１１０が検出した片手ＨＮの回転量に基づいて、候補文字「い」から候補文字「ひ」に変更される。例えば、現時点において選択されている候補文字を表示装置１４０が表示している場合、処理装置１００は、候補文字の表示を、文字「い」から文字「ひ」に変更してもよい。

時刻ｔ２から時刻ｔ３にかけて、ユーザは、例えば、Ｙ軸を中心にして、片手ＨＮの形状を維持した状態で、片手ＨＮを回転方向ＲＯＴ２に回転させる。回転方向ＲＯＴ２は、回転方向ＲＯＴ１と反対の回転方向ＲＯＴである。例えば、検出部１１０は、時刻ｔ３において、片手ＨＮの動きをとして、時刻ｔ２から時刻ｔ３までの片手ＨＮの回転量及び回転方向ＲＯＴを検出する。特定部１１２は、検出部１１０が検出した片手ＨＮの回転量に基づいて、母音グループＣＧＲｖ２に属する複数の候補文字のうちの候補文字「し」を選択する。すなわち、時刻ｔ３では、検出部１１０が検出した片手ＨＮの動きに応じて選択される候補文字は、検出部１１０が検出した片手ＨＮの回転量に基づいて、候補文字「ひ」から候補文字「し」に変更される。例えば、現時点において選択されている候補文字を表示装置１４０が表示している場合、処理装置１００は、候補文字の表示を、文字「ひ」から文字「し」に変更してもよい。

図３に示す例では、片手ＨＮの回転方向ＲＯＴが回転方向ＲＯＴ１の場合、検出部１１０が検出した片手ＨＮの動きに応じて選択される候補文字は、候補文字「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」の順において、候補文字「い」から遠ざかる方向に変化する。また、片手ＨＮの回転方向ＲＯＴが回転方向ＲＯＴ２の場合、検出部１１０が検出した片手ＨＮの動きに応じて選択される候補文字は、候補文字「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」の順において、候補文字「い」に近づく方向に変化する。

時刻ｔ４において、ユーザは、片手ＨＮの形状を、母音指定形状ＣＦｖ１２からニュートラル形状ＣＦｎｔに変化させる。このため、検出部１１０は、片手ＨＮの形状が母音指定形状ＣＦｖ１２と異なるニュートラル形状ＣＦｎｔに変化したことを検出する。そして、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を終了する。なお、図３に示す例では、時刻ｔ３から時刻ｔ４にかけて、片手ＨＮの回転は停止している。したがって、検出部１１０が検出した片手ＨＮの動きに応じて選択される候補文字は、候補文字「し」に維持されている。

また、片手ＨＮの形状が母音指定形状ＣＦｖ１２と異なるニュートラル形状ＣＦｎｔに変化したことを検出部１１０が検出したため、特定部１１２は、母音グループＣＧＲｖ２に属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手ＨＮの動きに基づいて特定する。具体的には、特定部１１２は、母音グループＣＧＲｖ２に属する複数の候補文字（母音に対応する候補文字「い」、複数の子音に対応する候補文字「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」）のうち、検出部１１０が検出した片手ＨＮの動きに応じて選択された候補文字「し」を、入力文字として特定する。例えば、処理装置１００は、特定部１１２により特定された入力文字として、文字「し」を表示装置１４０に表示させてもよい。

このように、特定部１１２は、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０により検出された片手ＨＮの形状に基づいて特定し、特定した文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手ＨＮの動きに基づいて特定する。すなわち、情報処理装置１０は、検出部１１０により検出された片手ＨＮの形状及び動きに基づいて入力文字を特定できる。この結果、本実施形態では、情報処理装置１０の使い勝手を向上させることができる。例えば、ユーザは、片手ＨＮのジェスチャにより、入力文字を情報処理装置１０に入力することができる。また、本実施形態では、例えば、入力文字が属する文字グループＣＧＲの特定を示す片手ＨＮの形状が文字入力の開始を示す片手ＨＮの形状を兼ねる。このため、本実施形態では、入力文字が属する文字グループＣＧＲの特定を示すジェスチャが文字入力の開始を示すジェスチャと異なる場合に比べて、ユーザの操作負担を軽減することができる。

なお、情報処理装置１０の動作は、図３に示す例に限定されない。例えば、検出部１１０は、ユーザが手首を支点に片手ＨＮを傾けた場合の片手ＨＮの傾き等を、片手ＨＮの動きをとして検出してもよい。あるいは、検出部１１０は、ユーザが肘を支点に腕を傾けた場合の片手ＨＮの移動量等を、片手ＨＮの動きをとして検出してもよい。

また、検出部１１０は、片手ＨＮの動きの量と速度とを、片手ＨＮの動きをとして検出してもよい。具体的には、検出部１１０は、片手ＨＮの回転量と回転速度とを、片手ＨＮの動きをとして検出してもよい。この場合、特定部１１２は、例えば、母音指定形状ＣＦｖ１２に属する複数の候補文字の中から、検出部１１０が検出した片手ＨＮの動きに応じて選択する候補文字を、検出部１１０により検出された片手ＨＮの回転量と回転速度に基づいて決定してもよい。

例えば、片手ＨＮが角速度１０ラジアン毎秒で３０度回転したときに選択される候補文字が候補文字「い」から候補文字「し」に変化する場合を想定する。この場合、ユーザは、例えば、片手ＨＮを角速度６０ラジアン毎秒で３０度回転させることにより、候補文字「い」の位置に対して候補文字「し」の位置より遠い位置の候補文字（例えば、候補文字「り」）を選択することができる。このように、ユーザは、片手ＨＮの回転速度を速くすることにより、片手ＨＮの回転速度が遅い場合に比べて、遠くの位置の候補文字を選択することができる。換言すれば、ユーザは、片手ＨＮの回転速度を速くすることにより、片手ＨＮの回転速度が遅い場合に比べて、少ない回転量で所望の候補文字を選択することができる。

図４は、図１に示した情報処理装置１０の動作の一例を示すフローチャートである。なお、図４は、入力文字の１文字を特定する処理に関する情報処理装置１０の動作の一例を示す。

ステップＳ１００では、検出部１１０は、ユーザの片手ＨＮの形状が複数の文字グループＣＧＲと１対１に対応する複数のグループ指定形状ＣＦｇの何れかに一致したか否かを判定する。ステップＳ１００における判定の結果が肯定の場合、検出部１１０は、処理をステップＳ１１０に進める。一方、ステップＳ１００における判定の結果が否定の場合、入力文字の１文字を特定する処理に関する情報処理装置１０の動作は終了する。

ステップＳ１１０では、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を開始する。そして、検出部１１０は、処理をステップＳ１２０に進める。

ステップＳ１２０では、特定部１１２は、ステップＳ１００において検出部１１０が検出した片手ＨＮの形状に基づいて、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを特定する。そして、特定部１１２は、処理をステップＳ１３０に進める。

ステップＳ１３０では、特定部１１２は、入力文字が属する文字グループＣＧＲ（ステップＳ１２０において特定した文字グループＣＧＲ）に属する複数の候補文字の中から、１つの候補文字を、検出部１１０により検出された片手ＨＮの動きに基づいて選択する。そして、特定部１１２は、処理をステップＳ１４０に進める。

ステップＳ１４０では、検出部１１０は、ユーザの片手ＨＮの形状がステップＳ１００において検出したグループ指定形状ＣＦｇから他の形状（例えば、ニュートラル形状ＣＦｎｔ）に変化したか否かを判定する。ステップＳ１４０における判定の結果が肯定の場合、検出部１１０は、処理をステップＳ１５０に進める。一方、ステップＳ１４０における判定の結果が否定の場合、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を継続し、処理をステップＳ１３０に戻す。

ステップＳ１５０では、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を終了する。そして、検出部１１０は、処理をステップＳ１６０に進める。

ステップＳ１６０では、特定部１１２は、入力文字が属する文字グループＣＧＲ（ステップＳ１２０において特定した文字グループＣＧＲ）に属する複数の候補文字の中から、入力文字を、検出部１１０により検出された片手ＨＮの動きに基づいて特定する。例えば、特定部１１２は、ステップＳ１３０において選択した候補文字（ユーザの片手ＨＮの形状がグループ指定形状ＣＦｇから他の形状に変化したときに選択されている候補文字）を、入力文字として特定する。ステップＳ１６０において特定された入力文字が情報処理装置１０に入力され、入力文字の１文字を特定する処理に関する情報処理装置１０の動作は終了する。

なお、情報処理装置１０の動作は、図４に示す例に限定されない。例えば、ステップＳ１１０の処理は、ステップＳ１２０の処理の後に実行されてもよいし、ステップＳ１２０の処理と並列に実行されてもよい。また、例えば、ステップＳ１５０の処理は、ステップＳ１６０の処理の後に実行されてもよいし、ステップＳ１６０の処理と並列に実行されてもよい。

以上、第１実施形態では、情報処理装置１０は、ユーザの片手ＨＮの形状及び動きを検出する検出部１１０と、検出部１１０により検出された片手ＨＮの形状及び動きに基づいて入力文字を特定する特定部１１２とを有する。例えば、特定部１１２は、入力文字の候補となる複数の候補文字が分類された複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０により検出された片手ＨＮの形状に基づいて特定する。そして、特定部１１２は、片手ＨＮの形状に基づいて特定した文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手ＨＮの動きに基づいて特定する。

このように、本実施形態では、検出部１１０により検出された片手ＨＮの形状及び動きに基づいて入力文字を特定できる。このため、本実施形態では、情報処理装置１０の使い勝手を向上させることができる。例えば、ユーザは、片手ＨＮのジェスチャにより、入力文字を情報処理装置１０に入力することができる。また、本実施形態では、例えば、入力文字が属する文字グループＣＧＲを特定する契機となる片手ＨＮの形状が文字入力の開始の契機となる片手ＨＮの形状を兼ねる。このため、本実施形態では、入力文字が属する文字グループＣＧＲの特定と文字入力の開始とが互いに異なる契機により実行される場合に比べて、ユーザの操作負担を軽減することができる。

[２．第２実施形態]
図５は、第２実施形態に係る情報処理装置１０の構成を示すブロック図である。図１から図４で説明した要素と同様の要素については、同一の符号を付し、詳細な説明を省略する。図５に示す情報処理装置１０は、図１に示した情報処理装置１０と同一の構成である。例えば、情報処理装置１０は、処理装置１００、記憶装置１２０、表示装置１４０、撮像装置１６０及び通信装置１８０を有する。但し、記憶装置１２０に記憶される制御プログラムＰＲ２は、図１に示した制御プログラムＰＲ１と相違する。このため、例えば、処理装置１００が記憶装置１２０から制御プログラムＰＲ２を読み出して実行することによって実現される機能は、図１に示した処理装置１００により実現される機能と相違する。

図５に示す処理装置１００は、図１に示した制御プログラムＰＲ１の代わりに制御プログラムＰＲ２を実行することを除いて、図１に示した処理装置１００と同様である。例えば、処理装置１００は、記憶装置１２０から制御プログラムＰＲ２を読み出して実行することによって、検出部１１０、特定部１１２及び表示制御部１１４として機能する。すなわち、図５に示す情報処理装置１０は、検出部１１０、特定部１１２及び表示制御部１１４を有する。検出部１１０及び特定部１１２は、図１に示した検出部１１０及び特定部１１２と同様である。このため、図５では、表示制御部１１４について説明する。

表示制御部１１４は、仮想空間または現実空間を示す空間画像を表示装置１４０に表示させる。そして、表示制御部１１４は、特定部１１２が、入力文字が属する文字グループＣＧＲを特定した場合に、ユーザによる文字入力を補助するための入力補助情報を、表示装置１４０に表示させる。具体的には、表示制御部１１４は、入力文字が属する文字グループＣＧＲに属する複数の候補文字を、入力補助情報として、表示装置１４０に表示させる。なお、表示制御部１１４は、入力補助情報を表示装置１４０に表示させる場合、入力補助情報が空間画像に重なるように、空間画像及び入力補助情報を表示装置１４０に表示させてもよい。

図６は、図５に示した情報処理装置１０の動作の概要を示す説明図である。なお、図６では、複数の候補文字が図２に示した複数の文字グループＣＧＲに分類された場合を例にして、情報処理装置１０の動作の概要を説明する。図６に示す動作は、入力補助情報ＡＩＮＦがユーザに視認可能に表示されることを除いて、図３に示した動作と同様である。図３で説明した動作と同様の動作については、詳細な説明を省略する。

時刻ｔ０では、ユーザの片手ＨＮの形状は、複数の文字グループＣＧＲのいずれにも割り当てられていないニュートラル形状ＣＦｎｔである。このため、情報処理装置１０に入力文字を入力する文字入力は、開始されない。したがって、入力補助情報ＡＩＮＦは、表示されない。

時刻ｔ１において、ユーザは、片手ＨＮの形状を、ニュートラル形状ＣＦｎｔから母音指定形状ＣＦｖ１２に変化させる。このため、検出部１１０は、片手ＨＮの形状が母音指定形状ＣＦｖ１２に一致したことを検出する。そして、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を開始する。

また、片手ＨＮの形状が母音指定形状ＣＦｖ１２に一致したことを検出部１１０が検出したため、特定部１１２は、母音指定形状ＣＦｖ１２に対応する母音が属する母音グループＣＧＲｖ２を、入力文字が属する文字グループＣＧＲとして特定する。そして、特定部１１２は、母音グループＣＧＲｖ２に属する候補文字「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」のうち、候補文字「い」を選択する。

また、入力文字が属する母音グループＣＧＲｖ２を特定部１１２が特定したため、表示制御部１１４は、母音グループＣＧＲｖ２に属する複数の候補文字を、入力補助情報ＡＩＮＦとして、表示装置１４０に表示させる。この結果、母音グループＣＧＲｖ２に属する候補文字「い」、「き」、「し」、「ち」、「に」、「ひ」、「み」及び「り」を示す入力補助情報ＡＩＮＦが表示される。なお、時刻ｔ１では、上述したように、検出部１１０により検出された片手ＨＮの動きに応じて選択される候補文字として、候補文字「い」が選択されている。このため、表示制御部１１４は、片手ＨＮの動きに応じて選択されている候補文字を示す選択マーク（図６の網掛け部分）が候補文字「い」の表示位置に表示されるように、表示装置１４０を制御する。このように、表示制御部１１４は、母音グループＣＧＲｖ２に属する複数の候補文字のうち、検出部１１０が検出した片手ＨＮの動きに応じて選択されている候補文字を、他の候補文字と識別可能に表示装置１４０に表示させる。

時刻ｔ１から時刻ｔ２にかけて、ユーザは、例えば、肘と手首とを通過するＹ軸を中心にして、片手ＨＮの形状を維持した状態で、片手ＨＮを回転方向ＲＯＴ１に回転させる。例えば、検出部１１０は、時刻ｔ２において、片手ＨＮの動きをとして、時刻ｔ１から時刻ｔ２までの片手ＨＮの回転量及び回転方向ＲＯＴを検出する。特定部１１２は、検出部１１０が検出した片手ＨＮの回転量に基づいて、母音グループＣＧＲｖ２に属する複数の候補文字のうちの候補文字「ひ」を選択する。このため、時刻ｔ１から時刻ｔ２にかけて、表示制御部１１４は、選択マークの表示位置を、候補文字「い」の表示位置から候補文字「ひ」の表示位置に移動させる。

時刻ｔ２から時刻ｔ３にかけて、ユーザは、例えば、Ｙ軸を中心にして、片手ＨＮの形状を維持した状態で、片手ＨＮを回転方向ＲＯＴ２に回転させる。例えば、検出部１１０は、時刻ｔ３において、片手ＨＮの動きをとして、時刻ｔ２から時刻ｔ３までの片手ＨＮの回転量及び回転方向ＲＯＴを検出する。特定部１１２は、検出部１１０が検出した片手ＨＮの回転量に基づいて、母音グループＣＧＲｖ２に属する複数の候補文字のうちの候補文字「し」を選択する。このため、時刻ｔ２から時刻ｔ３にかけて、表示制御部１１４は、選択マークの表示位置を、候補文字「ひ」の表示位置から候補文字「し」の表示位置に移動させる。

時刻ｔ４において、ユーザは、片手ＨＮの形状を、母音指定形状ＣＦｖ１２からニュートラル形状ＣＦｎｔに変化させる。このため、検出部１１０は、片手ＨＮの形状が母音指定形状ＣＦｖ１２と異なるニュートラル形状ＣＦｎｔに変化したことを検出する。そして、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を終了する。

また、片手ＨＮの形状が母音指定形状ＣＦｖ１２と異なるニュートラル形状ＣＦｎｔに変化したことを検出部１１０が検出したため、特定部１１２は、母音グループＣＧＲｖ２に属する複数の候補文字のうち、検出部１１０が検出した片手ＨＮの動きに応じて選択された候補文字「し」を、入力文字として特定する。表示制御部１１４は、特定部１１２により特定された入力文字「し」が所定の位置に表示されるように、表示装置１４０を制御する。また、表示制御部１１４は、入力文字が特定されたため、入力補助情報ＡＩＮＦを非表示にする。

このように、表示制御部１１４は、入力文字が属する母音グループＣＧＲｖ２に属する複数の候補文字を入力補助情報ＡＩＮＦとして、表示装置１４０に表示させる。さらに、表示制御部１１４は、母音グループＣＧＲｖ２に属する複数の候補文字のうち、検出部１１０が検出した片手ＨＮの動きに応じて選択されている候補文字を、他の候補文字と識別可能に表示装置１４０に表示させる。このため、本実施形態では、ユーザは入力補助情報ＡＩＮＦを確認しながら入力文字を情報処理装置１０に入力することができる。したがって、本実施形態では、誤った文字が情報処理装置１０に入力されることを低減することができる。この結果、本実施形態では、情報処理装置１０の使い勝手を向上させることができる。また、本実施形態では、例えば、入力文字が属する文字グループＣＧＲの特定を示す片手ＨＮの形状が入力補助情報ＡＩＮＦの表示開始を示す片手ＨＮの形状を兼ねる。このため、本実施形態では、入力文字が属する文字グループＣＧＲの特定を示すジェスチャが入力補助情報ＡＩＮＦの表示開始を示すジェスチャと異なる場合に比べて、ユーザの操作負担を軽減することができる。

なお、情報処理装置１０の動作は、図６に示す例に限定されない。例えば、表示制御部１１４が、検出部１１０により検出された片手ＨＮの動きに応じて、選択マークの表示位置を決定してもよい。この場合、例えば、特定部１１２は、片手ＨＮの形状が母音指定形状ＣＦｖから母音指定形状ＣＦｖと異なる形状（例えば、ニュートラル形状ＣＦｎｔ）に変化したことを検出部１１０が検出したとき（例えば、時刻ｔ４）の選択マークの表示位置に対応する候補文字を、入力文字として特定してもよい。

また、例えば、検出部１１０は、片手ＨＮの回転量と回転速度とを、片手ＨＮの動きをとして検出してもよいし、ユーザが手首を支点に片手ＨＮを傾けた場合の片手ＨＮの傾き等を、片手ＨＮの動きをとして検出してもよい。あるいは、検出部１１０は、ユーザが肘を支点に腕を傾けた場合の片手ＨＮの移動量等を、片手ＨＮの動きをとして検出してもよい。

図７は、図５に示した情報処理装置１０の動作の一例を示すフローチャートである。なお、図７は、入力文字の１文字を特定する処理に関する情報処理装置１０の動作の一例を示す。図７に示す動作は、ステップＳ１２２の処理及びステップＳ１３２の処理が図４に示した動作に追加されることを除いて、図４に示した動作と同様である。図４で説明した動作については、詳細な説明を省略する。

ステップＳ１００では、検出部１１０は、ユーザの片手ＨＮの形状が複数のグループ指定形状ＣＦｇの何れかに一致したか否かを判定する。ステップＳ１００における判定の結果が肯定の場合、検出部１１０は、ステップＳ１１０において、文字入力に関する片手ＨＮの動きの検出を開始し、処理をステップＳ１２０に進める。一方、ステップＳ１００における判定の結果が否定の場合、入力文字の１文字を特定する処理に関する情報処理装置１０の動作は終了する。

ステップＳ１２０では、特定部１１２は、ステップＳ１００において検出部１１０が検出した片手ＨＮの形状に基づいて、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを特定する。そして、特定部１１２は、処理をステップＳ１２２に進める。

ステップＳ１２２では、表示制御部１１４は、入力文字が属する文字グループＣＧＲ（ステップＳ１２０において特定した文字グループＣＧＲ）に属する複数の候補文字を入力補助情報ＡＩＮＦとして、表示装置１４０に表示させる。そして、表示制御部１１４は、処理をステップＳ１３０に進める。

ステップＳ１３０では、特定部１１２は、入力文字が属する文字グループＣＧＲ（ステップＳ１２０において特定した文字グループＣＧＲ）に属する複数の候補文字の中から、１つの候補文字を、検出部１１０により検出された片手ＨＮの動きに基づいて選択する。そして、特定部１１２は、処理をステップＳ１３２に進める。

ステップＳ１３２では、表示制御部１１４は、片手ＨＮの動きに応じて選択された候補文字（ステップＳ１３０において特定部１１２により選択された候補文字）の表示位置に選択マークが表示されるように、表示装置１４０を制御する。すなわち、ステップＳ１３２において、表示装置１４０は、片手ＨＮの動きに応じて選択された候補文字の表示位置に選択マークを表示する。表示制御部１１４は、ステップＳ１３２の処理を実行した後、処理をステップＳ１４０に進める。

ステップＳ１４０では、検出部１１０は、ユーザの片手ＨＮの形状がステップＳ１００において検出したグループ指定形状ＣＦｇから他の形状（例えば、ニュートラル形状ＣＦｎｔ）に変化したか否かを判定する。ステップＳ１４０における判定の結果が肯定の場合、検出部１１０は、ステップＳ１５０において、文字入力に関する片手ＨＮの動きの検出を終了し、処理をステップＳ１６０に進める。一方、ステップＳ１４０における判定の結果が否定の場合、検出部１１０は、文字入力に関する片手ＨＮの動きの検出を継続し、処理をステップＳ１３０に戻す。

ステップＳ１６０では、特定部１１２は、例えば、ステップＳ１３０において選択した候補文字（ユーザの片手ＨＮの形状がグループ指定形状ＣＦｇから他の形状に変化したときに選択されている候補文字）を、入力文字として特定する。ステップＳ１６０において特定された入力文字が情報処理装置１０に入力され、入力文字の１文字を特定する処理に関する情報処理装置１０の動作は終了する。

なお、情報処理装置１０の動作は、図７に示す例に限定されない。例えば、ステップＳ１１０の処理は、ステップＳ１２０の処理の後に実行されてもよいし、ステップＳ１２０の処理と並列に実行されてもよい。また、例えば、ステップＳ１５０の処理は、ステップＳ１６０の処理の後に実行されてもよいし、ステップＳ１６０の処理と並列に実行されてもよい。

以上、第２実施形態においても、第１実施形態と同様の効果を得ることができる。また、第２実施形態では、処理装置１００は、ユーザによる文字入力を補助するための入力補助情報ＡＩＮＦを表示装置１４０に表示させる表示制御部１１４として機能する。例えば、表示制御部１１４は、入力文字が属する文字グループＣＧＲを特定部１１２が特定した場合に、特定部１１２により特定された文字グループＣＧＲに属する複数の候補文字を、入力補助情報ＡＩＮＦとして、表示装置１４０に表示させる。このため、本実施形態では、ユーザは入力補助情報ＡＩＮＦを確認しながら入力文字を情報処理装置１０に入力することができる。したがって、本実施形態では、情報処理装置１０の使い勝手を向上させることができる。

また、本実施形態では、例えば、入力文字が属する文字グループＣＧＲを特定する契機となる片手ＨＮの形状が入力補助情報ＡＩＮＦの表示を開始する契機となる片手ＨＮの形状を兼ねる。このため、本実施形態では、入力文字が属する文字グループＣＧＲの特定と入力補助情報ＡＩＮＦの表示開始とが互いに異なる契機により実行される場合に比べて、ユーザの操作負担を軽減することができる。

さらに、本実施形態では、表示制御部１１４は、入力文字が属する文字グループＣＧＲに属する複数の候補文字のうち、検出部１１０が検出した片手ＨＮの動きに応じて選択されている候補文字を、他の候補文字と識別可能に表示装置１４０に表示させる。このため、本実施形態では、ユーザは、選択されている候補文字を確認しながら入力文字を情報処理装置１０に入力することができる。したがって、本実施形態では、誤った文字が情報処理装置１０に入力されることを低減することができる。

[３．第３実施形態]
図８は、第３実施形態に係る情報処理装置１０の構成を示すブロック図である。図１から図７で説明した要素と同様の要素については、同一の符号を付し、詳細な説明を省略する。図８に示す情報処理装置１０は、図５に示した情報処理装置１０と同一の構成である。例えば、情報処理装置１０は、処理装置１００、記憶装置１２０、表示装置１４０、撮像装置１６０及び通信装置１８０を有する。但し、記憶装置１２０に記憶される制御プログラムＰＲ３は、図５に示した制御プログラムＰＲ２と相違する。このため、例えば、処理装置１００が記憶装置１２０から制御プログラムＰＲ３を読み出して実行することによって実現される機能は、図５に示した処理装置１００により実現される機能と相違する。

図８に示す処理装置１００は、図５に示した制御プログラムＰＲ２の代わりに制御プログラムＰＲ３を実行することを除いて、図５に示した処理装置１００と同様である。例えば、処理装置１００は、記憶装置１２０から制御プログラムＰＲ３を読み出して実行することによって、検出部１１０Ａ、特定部１１２Ａ及び表示制御部１１４Ａとして機能する。すなわち、図８に示す情報処理装置１０は、検出部１１０Ａ、特定部１１２Ａ及び表示制御部１１４Ａを有する。

検出部１１０Ａは、文字入力に関するユーザの片手ＨＮの形状を検出する際の検出対象の形状を除いて、図１及び図５に示した検出部１１０と同様である。例えば、検出部１１０Ａは、撮像装置１６０が撮像したユーザの片手ＨＮの画像を示す撮像データに基づいて、ユーザの片手ＨＮの形状及び動きを検出する。

特定部１１２Ａは、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０Ａにより検出された片手ＨＮの動きに基づいて特定する。そして、特定部１１２Ａは、片手ＨＮの動きに基づいて特定した文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０Ａにより検出された片手ＨＮの形状に基づいて特定する。なお、本実施形態に係る文字グループＣＧＲは、図２に示した文字グループＣＧＲと相違する。本実施形態に係る文字グループＣＧＲについては、図９において説明する。また、特定部１１２Ａの動作の詳細については、図１０において説明する。

表示制御部１１４Ａは、仮想空間または現実空間を示す空間画像を表示装置１４０に表示させる。そして、表示制御部１１４Ａは、ユーザの片手ＨＮの形状が仮名入力形状（例えば、図１０に示す仮名入力形状ＣＦｋａ）に一致したことを検出部１１０Ａが検出した場合に、ユーザによる文字入力を補助するための入力補助情報ＡＩＮＦを、表示装置１４０に表示させる。なお、仮名入力形状ＣＦｋａは、例えば、情報処理装置１０に仮名文字を入力する文字入力の開始の契機となる片手ＨＮの形状である。表示制御部１１４Ａでは、入力補助情報ＡＩＮＦを表示装置１４０に表示させる契機が、図５に示した表示制御部１１４と相違する。

図９は、第３実施形態に係る文字グループＣＧＲの一例を示す説明図である。なお、図９では、図が煩雑になることを避けるため、複数の文字グループＣＧＲのうち、複数の子音グループＣＧＲｃ（ＣＧＲｃ１－ＣＧＲｃ１１）と、複数の数字グループＣＧＲｎｍ（ＣＧＲｎｍ１－ＣＧＲｎｍ８）との一例を示している。すなわち、複数の文字グループＣＧＲのうちのいくつかは、複数の仮名文字が子音に基づいて分類された複数の子音グループＣＧＲｃであり、複数の文字グループＣＧＲのうちのいくつかは、数字又はアルファベットを含む複数の数字グループＣＧＲｎｍである。

例えば、複数の仮名文字は、子音に基づいて、複数の子音グループＣＧＲｃに分類される。具体的には、子音グループＣＧＲｃ１には、「あ行」に属する文字が含まれ、子音グループＣＧＲｃ２には、「か行」に属する文字が含まれる。子音グループＣＧＲｃ３には、「さ行」に属する文字が含まれ、子音グループＣＧＲｃ４には、「た行」に属する文字が含まれる。子音グループＣＧＲｃ５には、「な行」に属する文字が含まれ、子音グループＣＧＲｃ６には、「は行」に属する文字が含まれる。子音グループＣＧＲｃ７には、「ま行」に属する文字が含まれ、子音グループＣＧＲｃ８には、「や行」に属する文字が含まれる。子音グループＣＧＲｃ９には、「ら行」に属する文字が含まれ、子音グループＣＧＲｃ１０には、「わ行」に属する文字が含まれる。そして、子音グループＣＧＲｃ１０には、文字「ん」が含まれる。

また、数字グループＣＧＲｎｍ１には、数字「０」、「１」、「２」、「３」及び「４」が含まれ、数字グループＣＧＲｎｍ２には、数字「５」、「６」、「７」、「８」及び「９」が含まれる。数字グループＣＧＲｎｍ３－ＣＧＲｎｍ８の各々には、アルファベット「ａ」から「ｚ」までの順に５つアルファベットが含まれる。例えば、数字グループＣＧＲｎｍ３には、アルファベット「ａ」、「ｂ」、「ｃ」、「ｄ」及び「ｅ」が含まれ、数字グループＣＧＲｎｍ７には、アルファベット「ｕ」、「ｖ」、「ｗ」、「ｘ」及び「ｙ」が含まれる。そして、数字グループＣＧＲｎｍ８には、アルファベット「ｚ」が含まれる。

また、５つの母音の各々には、片手ＨＮの形状が予め割り当てられている。例えば、母音「あ」には、５本の指のうちの人差し指のみを伸ばした母音指定形状ＣＦｖ２１が割り当てられ、母音「い」には、５本の指のうちの人差し指及び中指のみを伸ばした母音指定形状ＣＦｖ２２が割り当てられている。また、母音「う」には、５本の指のうちの親指及び小指のみ曲げた母音指定形状ＣＦｖ２３が割り当てられ、母音「え」には、５本の指のうちの親指のみを曲げた母音指定形状ＣＦｖ２４が割り当てられている。そして、母音「お」には、５本の指のうちの親指のみを伸ばした母音指定形状ＣＦｖ２５が割り当てられている。このように、５つの母音指定形状ＣＦｖ（ＣＦｖ２１、ＣＦｖ２２、ＣＦｖ２３、ＣＦｖ２４及びＣＦｖ２５）は、５つの母音と１対１に対応している。

また、各数字グループＣＧＲｎｍに含まれる各文字には、５つの母音指定形状ＣＦｖのいずれかが割り当てられている。例えば、数字グループＣＧＲｎｍ１の数字「０」、数字グループＣＧＲｎｍ２の数字「５」、数字グループＣＧＲｎｍ３のアルファベット「ａ」等には、母音指定形状ＣＦｖ２１が割り当てられている。

なお、文字グループＣＧＲは、図９に示す例に限定されない。例えば、アルファベットは、３つ又は４つのアルファベット毎に文字グループＣＧＲに属するように分類されてもよい。また、５つの母音の各々に割り当てられる母音指定形状ＣＦｖは、図９に示す例に限定されない。また、図９では、片手ＨＮの形状を、左手を例にして示しているが、母音指定形状ＣＦｖは、左手の形状に限定されない。例えば、検出部１１０Ａは、右手の５本の指のうちの人差し指のみを伸ばした形状を、母音指定形状ＣＦｖ２１として検出可能である。なお、右手と左手との一方に母音指定形状ＣＦｖが割り当てられ、右手と左手との他方に母音の指定と異なる指示に対応する形状が割り当てられてもよい。

図１０は、図８に示した情報処理装置１０の動作の概要を示す説明図である。なお、図１０では、複数の候補文字が図９に示した複数の文字グループＣＧＲに分類された場合を例にして、情報処理装置１０の動作の概要を説明する。なお、図３又は図６で説明した動作と同様の動作については、詳細な説明を省略する。

時刻ｔ０では、ユーザの片手ＨＮの形状は、文字入力に関する指示（例えば、仮名文字の入力開始等）が割り当てられていないニュートラル形状ＣＦｎｔである。このため、情報処理装置１０に入力文字を入力する文字入力は、開始されない。したがって、入力補助情報ＡＩＮＦは、表示されない。

時刻ｔ１において、ユーザは、片手ＨＮの形状を、ニュートラル形状ＣＦｎｔから仮名入力形状ＣＦｋａに変化させる。このため、検出部１１０Ａは、片手ＨＮの形状が仮名入力形状ＣＦｋａに一致したことを検出する。そして、検出部１１０Ａは、文字入力に関する片手ＨＮの動きの検出を開始する。

また、片手ＨＮの形状が仮名入力形状ＣＦｋａに一致したことを検出部１１０Ａが検出したため、表示制御部１１４Ａは、複数の子音グループＣＧＲｃを示す複数の子音グループ情報を、入力補助情報ＡＩＮＦとして、表示装置１４０に表示させる。図１０に示す例では、複数の子音グループＣＧＲｃの母音「あ」に対応する文字「あ」、「か」、「さ」、「た」、「な」、「は」、「ま」、「や」、「ら」、「わ」及び「ん」を示す複数の子音グループ情報が、入力補助情報ＡＩＮＦとして、表示される。

なお、時刻ｔ１では、後述するように、検出部１１０Ａにより検出された片手ＨＮの動きに応じて選択される子音グループＣＧＲｃとして、文字「あ」を含む子音グループＣＧＲｃ１が選択されている。このため、表示制御部１１４Ａは、片手ＨＮの動きに応じて選択されている子音グループＣＧＲｃを示す選択マーク（図１０の網掛け部分）が子音グループＣＧＲｃ１を示す文字「あ」の表示位置に表示されるように、表示装置１４０を制御する。このように、表示制御部１１４Ａは、複数の子音グループ情報のうち、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択されている子音グループＣＧＲｃに対応する子音グループ情報を、他の子音グループ情報と識別可能に表示装置１４０に表示させる。

また、片手ＨＮの形状が仮名入力形状ＣＦｋａに一致したことを検出部１１０Ａが検出したため、特定部１１２Ａは、複数の子音グループＣＧＲｃの中から、１つの子音グループＣＧＲｃを、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択する。なお、検出部１１０Ａが片手ＨＮの動きの検出を開始した時刻ｔ１では、複数の子音グループＣＧＲｃのうち、予め決められた子音グループＣＧＲｃ（図１０に示す例では、文字「あ」を含む子音グループＣＧＲｃ１）が、選択されている。

図１０に示す例では、子音グループＣＧＲｃ１－ＣＧＲｃ１１が、子音グループＣＧＲｃ１－ＣＧＲｃ１１の順に仮想的に配置されていると想定して、子音グループＣＧＲｃの選択等を説明する。

時刻ｔ１から時刻ｔ２にかけて、ユーザは、例えば、肘と手首とを通過するＹ軸を中心にして、片手ＨＮの形状を維持した状態で、片手ＨＮを回転方向ＲＯＴ１に回転させる。例えば、検出部１１０Ａは、時刻ｔ２において、片手ＨＮの動きをとして、時刻ｔ１から時刻ｔ２までの片手ＨＮの回転量及び回転方向ＲＯＴを検出する。特定部１１２Ａは、検出部１１０Ａが検出した片手ＨＮの回転量に基づいて、複数の子音グループＣＧＲｃのうち、文字「は」を含む子音グループＣＧＲｃ６を選択する。すなわち、時刻ｔ２では、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択される子音グループＣＧＲｃは、検出部１１０Ａが検出した片手ＨＮの回転量に基づいて、文字「あ」を含む子音グループＣＧＲｃ１から、文字「は」を含む子音グループＣＧＲｃ６に変更される。このため、時刻ｔ１から時刻ｔ２にかけて、表示制御部１１４Ａは、選択マークの表示位置を、文字「あ」の表示位置から文字「は」の表示位置に移動させる。

時刻ｔ２から時刻ｔ３にかけて、ユーザは、例えば、Ｙ軸を中心にして、片手ＨＮの形状を維持した状態で、片手ＨＮを回転方向ＲＯＴ２に回転させる。例えば、検出部１１０Ａは、時刻ｔ３において、片手ＨＮの動きをとして、時刻ｔ２から時刻ｔ３までの片手ＨＮの回転量及び回転方向ＲＯＴを検出する。特定部１１２Ａは、検出部１１０Ａが検出した片手ＨＮの回転量に基づいて、複数の子音グループＣＧＲｃのうち、文字「さ」を含む子音グループＣＧＲｃ３を選択する。すなわち、時刻ｔ３では、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択される子音グループＣＧＲｃは、検出部１１０Ａが検出した片手ＨＮの回転量に基づいて、文字「は」を含む子音グループＣＧＲｃ６から、文字「さ」を含む子音グループＣＧＲｃ３に変更される。このため、時刻ｔ２から時刻ｔ３にかけて、表示制御部１１４Ａは、選択マークの表示位置を、文字「は」の表示位置から文字「さ」の表示位置に移動させる。

図１０に示す例では、片手ＨＮの回転方向ＲＯＴが回転方向ＲＯＴ１の場合、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択される子音グループＣＧＲｃは、子音グループＣＧＲｃ１－ＣＧＲｃ１１の順において、子音グループＣＧＲｃ１から遠ざかる方向に変化する。また、片手ＨＮの回転方向ＲＯＴが回転方向ＲＯＴ２の場合、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択される子音グループＣＧＲｃは、子音グループＣＧＲｃ１－ＣＧＲｃ１１の順において、子音グループＣＧＲｃ１に近づく方向に変化する。

時刻ｔ４において、ユーザは、片手ＨＮの形状を、仮名入力形状ＣＦｋａから母音指定形状ＣＦｖ２２に変化させる。このため、検出部１１０Ａは、片手ＨＮの形状が母音指定形状ＣＦｖ２２に仮名入力形状ＣＦｋａから変化したことを検出する。そして、検出部１１０Ａは、文字入力に関する片手ＨＮの動きの検出を終了する。なお、図１０に示す例では、時刻ｔ３から時刻ｔ４にかけて、片手ＨＮの回転は停止している。したがって、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択される子音グループＣＧＲｃは、文字「さ」を含む子音グループＣＧＲｃ３に維持されている。

また、片手ＨＮの形状が母音指定形状ＣＦｖ２２に仮名入力形状ＣＦｋａから変化したことを検出部１１０Ａが検出したため、特定部１１２Ａは、複数の子音グループＣＧＲｃのうち、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択されている子音グループＣＧＲｃ３を、入力文字が属する文字グループＣＧＲとして特定する。また、特定部１１２Ａは、入力文字が属する文字グループＣＧＲとして特定した子音グループＣＧＲｃ３に属する複数の候補文字「さ」、「し」、「す」、「せ」及び「そ」のうち、母音指定形状ＣＦｖ２２に対応する母音に基づく候補文字「し」を、入力文字として特定する。表示制御部１１４Ａは、特定部１１２Ａにより特定された入力文字「し」が所定の位置に表示されるように、表示装置１４０を制御する。

また、表示制御部１１４Ａは、入力文字が特定されたため、入力補助情報ＡＩＮＦを非表示にする。なお、入力補助情報ＡＩＮＦは、母音指定形状ＣＦｖ及び仮名入力形状ＣＦｋａのいずれにも一致しない形状（例えば、ニュートラル形状ＣＦｎｔ）に片手ＨＮの形状が変化するまで、非表示にされなくてもよい。すなわち、表示制御部１１４Ａは、母音指定形状ＣＦｖ及び仮名入力形状ＣＦｋａのいずれにも一致しない形状（例えば、ニュートラル形状ＣＦｎｔ）に片手ＨＮの形状が変化するまで、入力補助情報ＡＩＮＦの表示を維持してもよい。

図１０に示す動作では、特定部１１２Ａは、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０Ａにより検出された片手ＨＮの動きに基づいて特定し、特定した文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０Ａにより検出された片手ＨＮの形状に基づいて特定する。すなわち、情報処理装置１０は、検出部１１０により検出された片手ＨＮの形状及び動きに基づいて入力文字を特定できる。この結果、本実施形態では、情報処理装置１０の使い勝手を向上させることができる。例えば、ユーザは、片手ＨＮのジェスチャにより、入力文字を情報処理装置１０に入力することができる。また、本実施形態では、例えば、入力文字の子音の決定（入力文字が属する文字グループＣＧＲの決定）を示す片手ＨＮの形状が入力文字の母音の決定を示す片手ＨＮの形状を兼ねる。このため、本実施形態では、入力文字の子音を決定するジェスチャが入力文字の母音を決定するジェスチャと異なる場合に比べて、ユーザの操作負担を軽減することができる。

なお、情報処理装置１０の動作は、図１０に示す例に限定されない。例えば、表示制御部１１４Ａが、検出部１１０Ａにより検出された片手ＨＮの動きに応じて、選択マークの表示位置を決定してもよい。この場合、例えば、特定部１１２Ａは、片手ＨＮの形状が仮名入力形状ＣＦｋａから母音指定形状ＣＦｖに変化したことを検出部１１０Ａが検出したとき（例えば、時刻ｔ４）の選択マークの表示位置に対応する文字グループＣＧＲを、入力文字が属する文字グループＣＧＲとして特定してもよい。

また、例えば、検出部１１０Ａは、ユーザが手首を支点に片手ＨＮを傾けた場合の片手ＨＮの傾き等を、片手ＨＮの動きをとして検出してもよいし、ユーザが肘を支点に腕を傾けた場合の片手ＨＮの移動量等を、片手ＨＮの動きをとして検出してもよい。

あるいは、検出部１１０Ａは、片手ＨＮの回転量と回転速度とを、片手ＨＮの動きをとして検出してもよい。この場合、特定部１１２Ａは、例えば、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択する文字グループＣＧＲを、検出部１１０Ａにより検出された片手ＨＮの回転量と回転速度に基づいて決定してもよい。

例えば、片手ＨＮが角速度１０ラジアン毎秒で３０度回転したときに選択される子音グループＣＧＲｃが文字「あ」を含む子音グループＣＧＲｃ１から文字「さ」を含む子音グループＣＧＲｃ３に変化する場合を想定する。この場合、ユーザは、例えば、片手ＨＮを角速度６０ラジアン毎秒で３０度回転させることにより、子音グループＣＧＲｃ１の位置に対して子音グループＣＧＲｃ３の位置より遠い位置の子音グループＣＧＲｃ（例えば、文字「ら」を含む子音グループＣＧＲｃ９）を選択することができる。このように、ユーザは、片手ＨＮの回転速度を速くすることにより、片手ＨＮの回転速度が遅い場合に比べて、遠くの位置の子音グループＣＧＲｃを選択することができる。換言すれば、ユーザは、片手ＨＮの回転速度を速くすることにより、片手ＨＮの回転速度が遅い場合に比べて、少ない回転量で所望の子音グループＣＧＲｃを選択することができる。

図１１は、図８に示した情報処理装置１０の動作の一例を示すフローチャートである。なお、図１１は、入力文字が仮名文字である場合の情報処理装置１０の動作の一例を示す。図１１に示す動作は、入力文字の１文字を特定する処理に対応する。図４又は図７で説明した動作については、詳細な説明を省略する。

ステップＳ１００ａでは、検出部１１０Ａは、ユーザの片手ＨＮの形状が仮名入力形状ＣＦｋａに一致したか否かを判定する。ステップＳ１００ａにおける判定の結果が肯定の場合、検出部１１０Ａは、ステップＳ１１０において、文字入力に関する片手ＨＮの動きの検出を開始し、処理をステップＳ１２２ａに進める。一方、ステップＳ１００ａにおける判定の結果が否定の場合、入力文字の１文字を特定する処理に関する情報処理装置１０の動作は終了する。

ステップＳ１２２ａでは、表示制御部１１４Ａは、複数の子音グループＣＧＲｃを示す複数の子音グループ情報（例えば、文字「あ」、「か」、「さ」、「た」、「な」、「は」、「ま」、「や」、「ら」、「わ」及び「ん」）を、入力補助情報ＡＩＮＦとして、表示装置１４０に表示させる。そして、表示制御部１１４Ａは、処理をステップＳ１３０ａに進める。

ステップＳ１３０ａでは、特定部１１２Ａは、複数の子音グループＣＧＲｃの中から、１つの子音グループＣＧＲｃを、検出部１１０Ａにより検出された片手ＨＮの動きに基づいて選択する。そして、特定部１１２Ａは、処理をステップＳ１３２ａに進める。

ステップＳ１３２ａでは、表示制御部１１４Ａは、片手ＨＮの動きに応じて選択された子音グループＣＧＲｃ（ステップＳ１３０において特定部１１２により選択された子音グループＣＧＲｃ）を示す子音グループ情報の表示位置に選択マークが表示されるように、表示装置１４０を制御する。すなわち、ステップＳ１３２ａにおいて、表示装置１４０は、片手ＨＮの動きに応じて選択された子音グループＣＧＲｃを示す子音グループ情報の表示位置に選択マークを表示する。表示制御部１１４Ａは、ステップＳ１３２ａの処理を実行した後、処理をステップＳ１４０ａに進める。

ステップＳ１４０ａでは、検出部１１０Ａは、ユーザの片手ＨＮの形状がステップＳ１００ａにおいて検出した仮名入力形状ＣＦｋａから５つの母音指定形状ＣＦｖの何れかに変化したか否かを判定する。ステップＳ１４０ａにおける判定の結果が肯定の場合、検出部１１０Ａは、ステップＳ１５０において、文字入力に関する片手ＨＮの動きの検出を終了し、処理をステップＳ１６０ａに進める。一方、ステップＳ１４０ａにおける判定の結果が否定の場合、検出部１１０Ａは、文字入力に関する片手ＨＮの動きの検出を継続し、処理をステップＳ１３０ａに戻す。

ステップＳ１６０ａでは、特定部１１２Ａは、ステップＳ１３０ａにおいて選択した子音グループＣＧＲｃを、入力文字が属する子音グループＣＧＲｃとして特定し、特定した子音グループＣＧＲｃに属する複数の候補文字のうち、ステップＳ１４０ａにおいて検出部１１０Ａが検出した母音指定形状ＣＦｖに対応する母音に基づく候補文字を、入力文字として特定する。

このように、特定部１１２Ａは、ユーザの片手ＨＮの形状が仮名入力形状ＣＦｋａから５つの母音指定形状ＣＦｖの何れかに変化したことを検出部１１０Ａが検出した場合、複数の子音グループＣＧＲｃのうち、検出部１１０Ａが検出した片手ＨＮの動きに応じて選択されている子音グループＣＧＲｃを、入力文字が属する子音グループＣＧＲｃとして特定する。そして、特定部１１２Ａは、入力文字が属する子音グループＣＧＲｃに属する複数の候補文字のうち、検出部１１０Ａが検出した母音指定形状ＣＦｖに対応する母音に基づく候補文字を、入力文字として特定する。

すなわち、特定部１１２Ａは、ユーザの片手ＨＮの形状が仮名入力形状ＣＦｋａから５つの母音指定形状ＣＦｖの何れかに変化したことを契機として、入力文字の母音及び子音の両方を決定し、入力文字を特定する。ステップＳ１６０ａにおいて特定された入力文字が情報処理装置１０に入力され、入力文字の１文字を特定する処理に関する情報処理装置１０の動作は終了する。

なお、情報処理装置１０の動作は、図１１に示す例に限定されない。例えば、ステップＳ１１０の処理は、ステップＳ１２２ａの処理の後に実行されてもよいし、ステップＳ１２２ａの処理と並列に実行されてもよい。また、例えば、ステップＳ１５０の処理は、ステップＳ１６０ａの処理の後に実行されてもよいし、ステップＳ１６０ａの処理と並列に実行されてもよい。

以上、第３実施形態においても、第１実施形態及び第２実施形態と同様の効果を得ることができる。また、本実施形態では、例えば、入力文字の子音を決定する契機（子音グループＣＧＲｃの選択を確定する契機）となる片手ＨＮの形状が入力文字の母音を決定する契機となる片手ＨＮの形状を兼ねる。このため、本実施形態では、入力文字の子音の決定と入力文字の母音の決定とが互いに異なる契機により実行される場合に比べて、ユーザの操作負担を軽減することができる。

[４．変形例]
本発明は、以上に例示した実施形態に限定されない。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様を併合してもよい。

[第１変形例]
上述した第１実施形態では、特定部１１２が、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０により検出された片手ＨＮの形状に基づいて特定し、特定した文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手ＨＮの動きに基づいて特定する例を示した。しかし、特定部１１２は、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０により検出された片手ＨＮの動きに基づいて特定し、特定した文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手ＨＮの形状に基づいて特定してもよい。

すなわち、特定部１１２は、複数の文字グループＣＧＲの中から、入力文字が属する文字グループＣＧＲを、検出部１１０により検出された片手ＨＮの形状及び動きの一方に基づいて特定してもよい。そして、特定部１１２は、入力文字が属する文字グループＣＧＲに属する複数の候補文字の中から入力文字を、検出部１１０により検出された片手ＨＮの形状及び動きの他方に基づいて特定してもよい。第１変形例においても、第１実施形態と同様の効果を得ることができる。

[第２変形例]
上述した第３実施形態では、入力補助情報ＡＩＮＦとして表示される各文字に割り当てられる表示領域については特に説明していないが、表示領域の大きさは、文字の入力予測に基づいて変更されてもよい。例えば、表示制御部１１４Ａは、複数の子音グループ情報に割り当てる複数の表示領域のうち、文字の入力予測に基づいて予測された文字を含む子音グループＣＧＲｃに対応する子音グループ情報に割り当てる表示領域を、他の子音グループ情報に割り当てる表示領域より広くしてもよい。

この場合、複数の子音グループＣＧＲｃの各々には、片手ＨＮの動きに関連付けられた判定範囲が割り当てられてもよい。そして、特定部１１２Ａは、複数の子音グループＣＧＲｃに割り当てる複数の判定範囲のうち、文字の入力予測に基づいて予測された文字を含む子音グループＣＧＲｃに割り当てる判定範囲を、他の子音グループＣＧＲｃに割り当てる判定範囲より広くしてもよい。これにより、第２変形例では、特定部１１２Ａが、複数の判定範囲と検出部１１０Ａが検出した片手ＨＮの動きとに基づいて、複数の子音グループＣＧＲｃのうちの１つの子音グループＣＧＲｃを選択する場合、文字の入力予測に基づいて予測された文字を含む子音グループＣＧＲｃが選択されやすくなる。

[第３変形例]
上述した第１実施形態、第２実施形態、第３実施形態、第１変形例及び第２変形例では、入力文字の変換については特に説明していないが、情報処理装置１０は、所定のジェスチャに応じて、入力文字を漢字等に変換してもよい。例えば、変換範囲の選択には、５本の指のうちの親指及び小指のみを伸ばした範囲選択形状が割り当てられ、変換範囲の決定には、５本の指の全てを伸ばした範囲決定形状が割り当てられてもよい。そして、変換項目（変換の候補）の選択には、５本の指のうちの中指及び薬指のみを曲げた項目選択形状が割り当てられ、変換項目の決定には、５本の指の全てを伸ばした項目決定形状が割り当てられてもよい。

この場合、例えば、図３、図６又は図１０に示した動作等が繰り返されることにより、仮名文字の入力文字列が入力された後、ユーザは、片手ＨＮの形状を範囲選択形状にした状態で片手ＨＮを回転させて、入力文字列における変換範囲を選択する。そして、ユーザは、入力文字列における所望の範囲を選択した場合、片手ＨＮの形状を範囲選択形状から範囲決定形状に変化させる。これにより、入力文字列のうちの変換対象の文字列が決定される。そして、ユーザは、片手ＨＮの形状を項目選択形状にした状態で片手ＨＮを回転させて変換項目を選択し、所望の変換項目が選択された場合、片手ＨＮの形状を項目選択形状から項目決定形状に変化させる。これにより、変換対象の文字列は、所望の変換項目（例えば、所望の漢字等）に変換される。

上述の例では、例えば、検出部１１０は、片手ＨＮの形状が範囲選択形状に一致したことを検出した場合、変換範囲に関する片手ＨＮの動きの検出を開始し、片手ＨＮの形状が範囲選択形状から範囲決定形状に変化したことを検出した場合、変換範囲に関する片手ＨＮの動きの検出を終了する。同様に、検出部１１０は、片手ＨＮの形状が項目選択形状に一致したことを検出した場合、項目選択に関する片手ＨＮの動きの検出を開始し、片手ＨＮの形状が項目選択形状から項目決定形状に変化したことを検出した場合、項目選択に関する片手ＨＮの動きの検出を終了する。なお、上述の例では、範囲決定形状及び項目決定形状は、図３等に示したニュートラル形状ＣＦｎｔと同じため、ニュートラル形状ＣＦｎｔと異なる形状でもよい。範囲決定形状及び項目決定形状がニュートラル形状ＣＦｎｔと同じ場合でも、情報処理装置１０は、範囲決定形状又は項目決定形状に変化する前の片手ＨＮの形状を判別することにより、文字入力に関する指示に割り当てられた形状か否かを判別することができる。

また、上述の例では、情報処理装置１０は、片手ＨＮの形状が範囲選択形状から範囲決定形状に変化したことを検出部１１０が検出した場合、変換項目の一覧（変換の候補となる文字の一覧）を表示する。また、特定部１１２は、片手ＨＮの形状が範囲選択形状から範囲決定形状に変化したことを検出部１１０が検出したときに選択されている変換範囲を、入力文字列のうちの変換対象の文字列に特定する。また、特定部１１２は、片手ＨＮの形状が項目選択形状から項目決定形状に変化したことを検出部１１０が検出したときに選択されている変換項目を、ユーザの所望する変換項目に特定する。

また、仮名文字、数字及びアルファベット以外の文字についても、上述の実施形態で説明した仮名文字等の入力方法と同様の方法により、情報処理装置１０に入力されてもよい。第３変形例においても、例えば、ユーザは、片手ＨＮのジェスチャにより、所望の文字を情報処理装置１０に入力することができる。

[５．その他]
（１）上述した実施形態では、記憶装置１２０は、処理装置１００が読取可能な記録媒体であり、ＲＯＭ及びＲＡＭなどを例示したが、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、ＣＤ－ＲＯＭ（Compact Disc－ＲＯＭ）、レジスタ、リムーバブルディスク、ハードディスク、フロッピー（登録商標）ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体である。また、プログラムは、電気通信回線を介してネットワークから送信されてもよい。また、プログラムは、電気通信回線を介して通信網から送信されてもよい。

（２）上述した実施形態において、説明した情報、信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。

（３）上述した実施形態において、入出力された情報等は特定の場所（例えば、メモリ）に保存されてもよいし、管理テーブルを用いて管理してもよい。入出力される情報等は、上書き、更新、又は追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。

（４）上述した実施形態において、判定は、１ビットで表される値（０か１か）によって行われてもよいし、真偽値（Boolean：true又はfalse）によって行われてもよいし、数値の比較（例えば、所定の値との比較）によって行われてもよい。

（５）上述した実施形態において例示した処理手順、シーケンス、フローチャートなどは、矛盾の無い限り、順序を入れ替えてもよい。例えば、本開示において説明した方法については、例示的な順序を用いて様々なステップの要素を提示しており、提示した特定の順序に限定されない。

（６）図１、図５及び図８に例示された各機能は、ハードウェア及びソフトウェアの少なくとも一方の任意の組み合わせによって実現される。また、各機能ブロックの実現方法は特に限定されない。すなわち、各機能ブロックは、物理的又は論理的に結合した１つの装置を用いて実現されてもよいし、物理的又は論理的に分離した２つ以上の装置を直接的又は間接的に（例えば、有線、無線などを用いて）接続し、これら複数の装置を用いて実現されてもよい。機能ブロックは、上記１つの装置又は上記複数の装置にソフトウェアを組み合わせて実現されてもよい。

また、通信装置１８０は、有線ネットワーク及び無線ネットワークの少なくとも一方を介してコンピュータ間の通信を行うためのハードウェア（送受信デバイス）であり、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュールなどともいう。通信装置１８０は、例えば、周波数分割複信（ＦＤＤ：Frequency Division Duplex）及び時分割複信（ＴＤＤ：Time Division Duplex）の少なくとも一方を実現するために、高周波スイッチ、デュプレクサ、フィルタ、周波数シンセサイザなどを含んで構成されてもよい。

（７）上述した実施形態で例示したプログラムは、ソフトウェアは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語と呼ばれるか、他の名称で呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順、機能などを意味するよう広く解釈されるべきである。

また、ソフトウェア、命令、情報などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、有線技術（同軸ケーブル、光ファイバケーブル、ツイストペア、デジタル加入者回線（ＤＳＬ：Digital Subscriber Line）など）及び無線技術（赤外線、マイクロ波など）の少なくとも一方を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び無線技術の少なくとも一方は、伝送媒体の定義内に含まれる。

（８）前述の各形態において、「システム」及び「ネットワーク」という用語は、互換的に使用される。

（９）本開示において説明した情報、パラメータなどは、絶対値を用いて表されてもよいし、所定の値からの相対値を用いて表されてもよいし、対応する別の情報を用いて表されてもよい。例えば、無線リソースはインデックスによって指示されるものであってもよい。上述したパラメータに使用する名称はいかなる点においても限定的な名称ではない。さらに、これらのパラメータを使用する数式等は、本開示で明示的に開示したものと異なる場合もある。様々なチャネル（例えば、ＰＵＣＣＨ、ＰＤＣＣＨなど）及び情報要素は、あらゆる好適な名称によって識別できるので、これらの様々なチャネル及び情報要素に割り当てている様々な名称は、いかなる点においても限定的な名称ではない。

（１０）上述した実施形態において、情報処理装置１０は、移動局（ＭＳ：Mobile Station）である場合が含まれる。移動局は、当業者によって、加入者局、モバイルユニット、加入者ユニット、ワイヤレスユニット、リモートユニット、モバイルデバイス、ワイヤレスデバイス、ワイヤレス通信デバイス、リモートデバイス、モバイル加入者局、アクセス端末、モバイル端末、ワイヤレス端末、リモート端末、ハンドセット、ユーザエージェント、モバイルクライアント、クライアント、又はいくつかの他の適切な用語で呼ばれる場合もある。また、本開示においては、「移動局」、「ユーザ端末（user terminal）」、「ユーザ装置（ＵＥ：User Equipment）」、「端末」等の用語は、互換的に使用され得る。

（１１）上述した実施形態において、「接続された(connected)」、「結合された(coupled)」という用語、又はこれらのあらゆる変形は、２又はそれ以上の要素間の直接的又は間接的なあらゆる接続又は結合を意味し、互いに「接続」又は「結合」された２つの要素間に１又はそれ以上の中間要素が存在することを含むことができる。要素間の結合又は接続は、物理的なものであっても、論理的なものであっても、或いはこれらの組み合わせであってもよい。例えば、「接続」は「アクセス」で読み替えられてもよい。本開示で使用する場合、２つの要素は、１又はそれ以上の電線、ケーブル及びプリント電気接続の少なくとも一つを用いて、並びにいくつかの非限定的かつ非包括的な例として、無線周波数領域、マイクロ波領域及び光（可視及び不可視の両方）領域の波長を有する電磁エネルギーなどを用いて、互いに「接続」又は「結合」されると考えることができる。

（１２）上述した実施形態において、「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。

（１３）本開示で使用する「判断(determining)」、「決定(determining)」という用語は、多種多様な動作を包含する場合がある。「判断」、「決定」は、例えば、判定(judging)、計算(calculating)、算出(computing)、処理(processing)、導出(deriving)、調査(investigating)、探索(looking up、search、inquiry)（例えば、テーブル、データベース又は別のデータ構造での探索）、確認(ascertaining)した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、受信(receiving)（例えば、情報を受信すること）、送信(transmitting)(例えば、情報を送信すること)、入力(input)、出力(output)、アクセス(accessing)（例えば、メモリ中のデータにアクセスすること）した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、解決(resolving)、選択(selecting)、選定(choosing)、確立(establishing)、比較(comparing)などした事を「判断」「決定」したとみなす事を含み得る。つまり、「判断」「決定」は、何らかの動作を「判断」「決定」したとみなす事を含み得る。また、「判断（決定）」は、「想定する（assuming）」、「期待する（expecting）」、「みなす（considering）」などで読み替えられてもよい。

（１４）上述した実施形態において、「含む（include）」、「含んでいる（including）」及びそれらの変形が使用されている場合、これらの用語は、用語「備える（comprising）」と同様に、包括的であることが意図される。さらに、本開示において使用されている用語「又は（or）」は、排他的論理和ではないことが意図される。

（１５）本開示において、例えば、英語でのa, an及びtheのように、翻訳により冠詞が追加された場合、本開示は、これらの冠詞の後に続く名詞が複数形であることを含んでもよい。

（１６）本開示において、「ＡとＢが異なる」という用語は、「ＡとＢが互いに異なる」ことを意味してもよい。なお、当該用語は、「ＡとＢがそれぞれＣと異なる」ことを意味してもよい。「離れる」、「結合される」等の用語も、「異なる」と同様に解釈されてもよい。

（１７）本開示において説明した各態様／実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知（例えば、「Ｘであること」の通知）は、明示的に行うものに限られず、暗黙的（例えば、当該所定の情報の通知を行わない）ことによって行われてもよい。

以上、本開示について詳細に説明したが、当業者にとっては、本開示が本開示中に説明した実施形態に限定されるものではないということは明らかである。本開示は、請求の範囲の記載により定まる本開示の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本開示の記載は、例示説明を目的とするものであり、本開示に対して何ら制限的な意味を有するものではない。

１０…情報処理装置、１００…処理装置、１１０、１１０Ａ…検出部、１１２、１１２Ａ…特定部、１１４、１１４Ａ…表示制御部、１２０…記憶装置、１４０…表示装置、１６０…撮像装置、１８０…通信装置。

Claims (10)

1. ユーザの片手の形状及び動きを検出する検出部と、
   入力文字の候補となる複数の候補文字が分類された複数の文字グループの中から、前記入力文字が属する一の文字グループを、前記検出部により検出された前記片手の形状及び動きの一方に基づいて特定し、前記一の文字グループに属する複数の候補文字の中から前記入力文字を、前記検出部により検出された前記片手の形状及び動きの他方に基づいて特定する特定部と、
   を備える、
   ことを特徴とする情報処理装置。
2. 前記ユーザによる文字入力を補助するための入力補助情報を表示部に表示させる表示制御部を備え、
   前記特定部は、
   前記複数の文字グループの中から前記一の文字グループを、前記検出部により検出された前記片手の形状に基づいて特定し、前記一の文字グループに属する複数の候補文字の中から前記入力文字を、前記検出部により検出された前記片手の動きに基づいて特定し、
   前記表示制御部は、
   前記特定部が前記一の文字グループを特定した場合に、前記一の文字グループに属する複数の候補文字を、前記入力補助情報として、前記表示部に表示させる、
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記複数の文字グループのうちのいくつかは、複数の仮名文字が母音に基づいて分類された複数の母音グループであり、
   前記検出部は、
   前記片手の形状が５つの母音と１対１に対応する５つの母音指定形状のうちの一の母音指定形状に一致したことを検出した場合、前記文字入力に関する前記片手の動きの検出を開始し、前記片手の形状が前記一の母音指定形状と異なる形状に変化したことを検出した場合、前記文字入力に関する前記片手の動きの検出を終了し、
   前記特定部は、
   前記片手の形状が前記一の母音指定形状に一致したことを前記検出部が検出した場合、前記複数の母音グループのうち、前記一の母音指定形状に対応する一の母音が属する母音グループを、前記一の文字グループとして特定し、前記片手の形状が前記一の母音指定形状と異なる形状に変化したことを前記検出部が検出した場合、前記一の文字グループに属する複数の子音及び前記一の母音に対応する複数の候補文字のうち、前記検出部が検出した前記片手の動きに応じて選択された一の候補文字を、前記入力文字として特定する、
   ことを特徴とする請求項２に記載の情報処理装置。
4. 前記複数の文字グループのうちの１つは、数字を含む数字グループであり、
   前記検出部は、
   前記片手の形状が前記数字グループに割り当てられた数字指定形状に一致したことを検出した場合、前記文字入力に関する前記片手の動きの検出を開始し、前記片手の形状が前記数字指定形状と異なる形状に変化したことを検出した場合、前記文字入力に関する前記片手の動きの検出を終了し、
   前記特定部は、
   前記片手の形状が前記数字指定形状に一致したことを前記検出部が検出した場合、前記複数の文字グループのうちの前記数字グループを、前記一の文字グループとして特定し、前記片手の形状が前記数字指定形状と異なる形状に変化したことを前記検出部が検出した場合、前記数字グループに属する複数の候補文字のうち、前記検出部が検出した前記片手の動きに応じて選択された一の候補文字を、前記入力文字として特定する、
   ことを特徴とする請求項２又は３に記載の情報処理装置。
5. 前記表示制御部は、
   前記一の文字グループに属する複数の候補文字のうち、前記検出部が検出した前記片手の動きに応じて選択されている候補文字を、他の候補文字と識別可能に前記表示部に表示させる、
   ことを特徴とする請求項２から４のいずれか１項に記載の情報処理装置。
6. 前記ユーザによる文字入力を補助するための入力補助情報を表示部に表示させる表示制御部を備え、
   前記複数の文字グループのうちのいくつかは、複数の仮名文字が子音に基づいて分類された複数の子音グループであり、
   前記検出部は、
   前記片手の形状が予め決められた仮名入力形状に一致したことを検出した場合、前記文字入力に関する前記片手の動きの検出を開始し、前記片手の形状が５つの母音と１対１に対応する５つの母音指定形状のうちの一の母音指定形状に前記仮名入力形状から変化したことを検出した場合、前記文字入力に関する前記片手の動きの検出を終了し、
   前記表示制御部は、
   前記片手の形状が前記仮名入力形状に一致したことを前記検出部が検出した場合に、前記複数の子音グループを示す複数の子音グループ情報を、前記入力補助情報として、前記表示部に表示させ、
   前記特定部は、
   前記片手の形状が前記一の母音指定形状に前記仮名入力形状から変化したことを前記検出部が検出した場合、前記複数の子音グループのうち、前記検出部が検出した前記片手の動きに応じて選択された一の子音グループを、前記一の文字グループとして特定し、前記一の子音グループに属する複数の候補文字のうち、前記一の母音指定形状に対応する母音に基づく候補文字を、前記入力文字として特定する、
   ことを特徴とする請求項１に記載の情報処理装置。
7. 前記表示制御部は、
   前記複数の子音グループ情報のうち、前記検出部が検出した前記片手の動きに応じて選択されている子音グループに対応する子音グループ情報を、他の子音グループ情報と識別可能に前記表示部に表示させる、
   ことを特徴とする請求項６に記載の情報処理装置。
8. 前記表示制御部は、
   前記複数の子音グループ情報に割り当てる複数の表示領域のうち、文字の入力予測に基づいて予測された文字を含む子音グループに対応する子音グループ情報に割り当てる表示領域を、他の子音グループ情報に割り当てる表示領域より広くする、
   ことを特徴とする請求項６又は７に記載の情報処理装置。
9. 前記表示制御部は、
   仮想空間または現実空間を示す空間画像を前記表示部に表示させ、
   前記入力補助情報を前記表示部に表示させる場合、前記入力補助情報が前記空間画像に重なるように、前記空間画像及び前記入力補助情報を前記表示部に表示させる、
   ことを特徴とする請求項２から８のいずれか１項に記載の情報処理装置。
10. 前記検出部は、
    前記片手の動きの量及び速度を、前記片手の動きとして検出する、
    ことを特徴とする請求項１から９のいずれか１項に記載の情報処理装置。

Images