JP2015530669A - 非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置 - Google Patents

非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置 Download PDF

Info

Publication number
JP2015530669A
JP2015530669A JP2015533421A JP2015533421A JP2015530669A JP 2015530669 A JP2015530669 A JP 2015530669A JP 2015533421 A JP2015533421 A JP 2015533421A JP 2015533421 A JP2015533421 A JP 2015533421A JP 2015530669 A JP2015530669 A JP 2015530669A
Authority
JP
Japan
Prior art keywords
light intensity
signal
gesture
light
reflected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015533421A
Other languages
English (en)
Other versions
JP6114827B2 (ja
Inventor
▲強▼ 丁
▲強▼ 丁
莉 李
莉 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2015530669A publication Critical patent/JP2015530669A/ja
Application granted granted Critical
Publication of JP6114827B2 publication Critical patent/JP6114827B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • G06V40/113Recognition of static hand signs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

本発明の実施例は、非接触ジェスチャを使用して端末機器を制御するための方法及び装置であって、1つ又は複数の光センサを含む端末機器に適用できる方法及び装置を開示する。方法は、一定期間の光強度変化に従って光センサによって出力され、かつ光強度変化を反映する複数の光強度信号を受信するステップであって、光強度変化が非接触ジェスチャによって生成されるステップと、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、適合する場合、複数の光強度信号に対応する非接触ジェスチャを認識するステップと、認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するステップとを含む。本発明の実施例は、端末機器上でソフトウェア方法を介して簡単かつ能率的に非接触ジェスチャを使用して端末機器を制御することができ、それはユーザ体験を向上させる。

Description

本発明は、通信技術の分野に関し、特に、非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置に関する。
本願は、2012年9月29日に中国特許庁に出願され、“METHOD AND APPARATUS FOR CONTROLLING TERMINAL DEVICE BY USING NON-TOUCH GESTURE”と表題が付けられた中国特許出願第201210375886.9号、及び2012年10月12日に中国特許庁に出願され、“METHOD AND APPARATUS FOR CONTROLLING TERMINAL DEVICE BY USING NON-TOUCH GESTURE”と表題が付けられた中国特許出願第201210387215.4号に対する優先権を主張するとともに、その両方ともがそれらの全体における参照によってここに組み込まれている。
スマート端末機器の能力の継続的な発展によって、人々は、スマートフォン及びタブレットコンピュータ(タブレット型PC)のようなスマート端末上で複合的タスクを処理することができ、例えば、電子ブックを読むこと、マルチメディア画像をブラウズすること、音楽及びビデオを再生すること、そしてウェブページをブラウズすることができる。したがって、携帯型スマート端末と頻繁に情報をやりとりすること、例えば、画像の切り替え及びズーミング、音楽及びビデオの一時停止又は再生、ボリューム調整、そしてウェブブラウジングにおけるページドラッギングのような基本動作を行うことがユーザにとって必要である。
最も多く存在しているスマート端末は、入力のためにタッチジェスチャ(touch gesture:接触ジェスチャ)認識を一般に採用し、すなわち、タッチ画面上のシングルポイント若しくはマルチポイントタッチ、又はタッチ画面上の指若しくは手のひらの動作は、タッチ画面を通して感知されるとともに、対応する操作命令にマッピングされる。しかしながら、この入力アプローチは、ユーザがタッチ画面上で手によって操作を行わなければならないことを要求し、ユーザに対する多くの制限が存在するとともに、マン−マシン対話の体験が十分に自然ではない。
従来のタッチジェスチャ操作と比較すると、非接触ジェスチャ操作、そして特に、携帯型スマート端末を端末に触れずに手又は腕で制御することは、より滑らかでかつ自然な体験を実現することができるとともに、画面上で手によって操作を行うことがユーザにとって都合が悪いシナリオ(例えば、ユーザが台所で料理をしている場合、又はユーザが冬季に外にいる場合)において、ユーザに大きな利便性を提供することができる。
現存する非接触ジェスチャ認識技術は、2次元及び3次元の光学的画像認識方法などを主として含む。本発明を実施する過程において、発明者は、従来技術が少なくともスマート端末のハードウェア構成についての高いアルゴリズム複雑度、大きな電力消費、及び特別要求事項という欠点を有することを発見し、したがって、スマート端末は、スマート端末の現存するハードウェア構成に基づいて、ソフトウェアを介して簡単かつ能率的に非接触ジェスチャを使用することによって制御されることができない。
これを考慮した結果、スマート端末の現存するハードウェア構成に基づいて、ソフトウェアを介して簡単かつ能率的に非接触ジェスチャを使用することによってスマート端末を制御するために、本発明の実施例は、非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置を提供する。
第1の態様において、本発明は、非接触ジェスチャを使用することにより端末機器を制御するための方法であって、当該方法が1つ又は複数の光センサを含む端末機器に適用でき、当該方法が、一定期間における光強度変化に従って前記光センサによって出力されるとともに前記光強度変化を反映する複数の光強度信号を受信するステップであって、前記光強度変化が前記非接触ジェスチャによって生成される、ステップと、前記の出力された複数の光強度信号の変化規則が前記非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、前記複数の光強度信号に対応する前記非接触ジェスチャを認識するステップと、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するステップとを含む、方法を提供する。
第1の態様の第1の可能な実装例において、前記1つ又は複数の光センサは第1の光センサを含み、前記非接触ジェスチャはスワイプジェスチャを含むとともに、前記スワイプジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの一方向のスワイプを含み、複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第2の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは右スワイプジェスチャを含むとともに、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの左から右へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第3の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは左スワイプジェスチャを含むとともに、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第2又は第3の可能な実装例を参照すると、第4の可能な実装例において、前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の水平距離が存在し、前記水平距離は最大である。
第1の態様の第5の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは下スワイプジェスチャを含むとともに、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第6の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは上スワイプジェスチャを含むとともに、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第5又は第6の可能な実装例を参照すると、第7の可能な実装例において、前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の垂直距離が存在し、前記垂直距離は最大である。
第1の態様の第1から第7の可能な実装例のいずれか1つを参照すると、第8の可能な実装例において、前記第1の所定期間は、いずれかのセンサに関してユーザが一方向のスワイプをする場合に必要とされる時間の標準値であり、前記一方向のスワイプは、下記の、左から右へのスワイプ、右から左へのスワイプ、上から下へのスワイプ、及び下から上へのスワイプのうちのいずれか1つであり得る。
第1の態様の第2から第7の可能な実装例のいずれか1つを参照すると、第9の可能な実装例において、前記第2の所定期間は、前記第1の光センサによって出力された前記複数の光強度信号に対応する前記第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する前記第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
第1の態様の第1から第9の可能な実装例のいずれか1つを参照すると、第10の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、及び第3の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅いとともに、前記第2の光強度信号によって反映される信号強度が、第1のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記減少変化規則は含み、前記第3の光強度信号によって反映される信号強度が、第2のしきい値より小さくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則は含む。
第1の態様の第11の可能な実装例において、前記第1のしきい値は、前記スワイプジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第2のしきい値は、前記光センサが遮蔽されたあとで前記スワイプジェスチャを生成する前記操作オブジェクトが離れる場合の光強度の標準的な増加量である。
第1の態様の第12の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャはアップリフトジェスチャを含むとともに、前記アップリフトジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に増加変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第13の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャはプレスジェスチャを含むとともに、前記プレスジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に第2の減少変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第14の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャは少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャを含むとともに、前記プレスジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記第1の光センサの前記感知範囲における前記操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次にハイ(high)とロー(low)との間を変動し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第15の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャはアップリフトジェスチャを含むとともに、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサによって出力された光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサによって出力された光強度信号によって反映される光強度が、増加変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第1の態様の第16の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャはプレスジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記N個の光センサの中のA個の光センサによって出力された光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサによって出力された光強度信号によって反映される光強度が、第2の減少変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第1の態様の第17の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャは少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における前記操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサによって出力された光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサによって出力された光強度信号によって反映される光強度が、減少変動規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第1の態様の第12又は第15の可能な実装例を参照すると、第18の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第13又は第16の可能な実装例を参照すると、第19の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第14又は第17の可能な実装例を参照すると、第20の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻は前記第5の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則は含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則は含み、前記複数の光強度信号の中の前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より小さくないこと、又は前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第12から第17の可能な実装例のいずれか1つを参照すると、第21の可能な実装例において、前記第1の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値であり、前記第2の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に前記光センサが遮蔽される持続時間の標準値であり、前記第3の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを認識する検出時刻と前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻との間の時間間隔の標準値である。
第1の態様の第18から第20の可能な実装例のいずれか1つを参照すると、第22の可能な実装例において、前記第3のしきい値は、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第4のしきい値は、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、前記静止している操作オブジェクトによってもたらされる光強度の標準的な減少量又は増加量である。
第1の態様の第15から第17の可能な実装例のいずれか1つを参照すると、第23の可能な実装例において、前記第1のしきい値はN/2より小さくないとともに、前記第2のしきい値はA/2より小さくない。
第1の態様の第1から第23の可能な実装例のいずれか1つを参照すると、第24の可能な実装例において、前記端末機器がモーションセンサ又はオリエンテーションセンサを含み、前記モーションセンサ又は前記オリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にないならば、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップを起動しない。
第1の態様の第1から第24の可能な実装例のいずれか1つを参照すると、第25の可能な実装例において、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップは、前記光センサによって出力された前記光強度信号のうちの1つが受信されるたびに、前記光センサによって出力され、前回受信されたか又は複数回受信された前記光強度信号のうちの1つ又は複数に従って、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定するステップを含む。
第1の態様の第1から第25の可能な実装例のいずれか1つを参照すると、第26の可能な実装例において、前記非接触ジェスチャは、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションは、画像アプリケーション又は電子ブックアプリケーションを含み、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャにそれぞれ対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するステップを含む。
第1の態様の第1から第25の可能な実装例のいずれか1つを参照すると、第27の可能な実装例において、前記非接触ジェスチャが、プレスジェスチャ及び/又はアップリフトジェスチャを含み、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含む場合に、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャ及び/又は前記アップリフトジェスチャに対応するズーム操作を実行するステップを含む。
第1の態様の第12、第15、及び第18の可能な実装例のいずれか1つを参照すると、第28の可能な実装例において、当該方法は、前記アップリフトジェスチャのアップリフト量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記アップリフト量に従ってズーム比が決定されるステップを含む。
第1の態様の第13、第16、及び第19の可能な実装例のいずれか1つを参照すると、第29の可能な実装例において、当該方法は、前記プレスジェスチャのプレス量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記プレス量に従ってズーム比が決定されるステップを含む。
第1の態様の第30の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャはアップリフトジェスチャを含むとともに、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、増加変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第1の態様の第12又は第13の可能な実装例を参照すると、第31の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第32の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャはプレスジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第2の減少変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第1の態様の第13又は第32の可能な実装例を参照すると、第33の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第34の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャは少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャを含むとともに、前記プレスジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記第1の光センサの前記感知範囲における前記操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に減少変動規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第17又は第34の可能な実装例を参照すると、第35の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻は前記第5の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則は含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則は含み、前記複数の光強度信号の中の前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より小さくないこと、又は前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第12、第13、及び第30から第33の可能な実装例のいずれか1つを参照すると、第36の可能な実装例において、前記第1の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値であり、前記第2の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に前記光センサが遮蔽される持続時間の標準値である。
第1の態様の第31、第33、及び第35の可能な実装例のいずれか1つを参照すると、第37の可能な実装例において、前記第3の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを認識する検出時刻と前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻との間の時間間隔の標準値である。
第1の態様の第31、第33、及び第35の可能な実装例のいずれか1つを参照すると、第38の可能な実装例において、前記第3のしきい値は、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第4のしきい値は、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、前記静止している操作オブジェクトによってもたらされる光強度の標準的な減少量又は増加量であることを含む。
第1の態様の第17、第30、及び第32の可能な実装例のいずれか1つを参照すると、第39の可能な実装例において、前記第1のしきい値はN/2より小さくないとともに、前記第2のしきい値はA/2より小さくない。
第1の態様、又は第1の態様の第1から第39の可能な実装例のいずれか1つを参照すると、第40の可能な実装例において、前記端末機器がモーションセンサ又はオリエンテーションセンサを含み、前記モーションセンサ又は前記オリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にあるならば、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップを起動する。
第1の態様、又は第1の態様の第1から第40の可能な実装例のいずれか1つを参照すると、第41の可能な実装例において、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップは、前記光センサによって出力された前記光強度信号のうちの1つが受信されるたびに、前記光センサによって出力され、前回受信されたか又は複数回受信された前記光強度信号のうちの1つ又は複数に従って、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定するステップを含む。
第1の態様、又は第1の態様の第1から第41の可能な実装例のいずれか1つを参照すると、第42の可能な実装例において、前記非接触ジェスチャは、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションは、画像アプリケーション又は電子ブックアプリケーションを含み、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャにそれぞれ対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するステップを含む。
第1の態様、又は第1の態様の第1から第42の可能な実装例のいずれか1つを参照すると、第43の可能な実装例において、前記非接触ジェスチャが、プレスジェスチャ及び/又はアップリフトジェスチャを含み、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含む場合に、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャ及び/又は前記アップリフトジェスチャに対応するズーム操作を実行するステップを含む。
第1の態様の第12、第15、及び第34の可能な実装例のいずれか1つを参照すると、第44の可能な実装例において、当該方法は、前記アップリフトジェスチャのアップリフト量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記アップリフト量に従ってズーム比が決定されるステップを含む。
第1の態様の第13、第17、及び第32の可能な実装例のいずれか1つを参照すると、第45の可能な実装例において、当該方法は、前記プレスジェスチャのプレス量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記プレス量に従ってズーム比が決定されるステップを含む。
第1の態様の第11の可能な実装例を参照すると、第46の可能な実装例において、前記第1のしきい値は、前記スワイプジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第2のしきい値は、前記光センサが遮蔽されたあとで前記スワイプジェスチャを生成する前記操作オブジェクトが離れる場合の光強度の標準的な増加量である。
第1の態様の第47の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャは少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における前記操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、減少変動規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第2の態様において、本発明は、非接触ジェスチャを使用することにより端末機器を制御するための装置であって、当該装置が1つ又は複数の光センサを含む端末機器に適用でき、当該装置が、一定期間における光強度変化に従って前記光センサによって出力されるとともに前記光強度変化を反映する複数の光強度信号を受信するように構成された受信ユニットであって、前記光強度変化が前記非接触ジェスチャによって生成される前記受信ユニットと、前記受信ユニットによって受信された前記複数の光強度信号の変化規則が前記非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、前記複数の光強度信号に対応する前記非接触ジェスチャを認識するように構成されたジェスチャ認識ユニットと、前記ジェスチャ認識ユニットによって認識された前記非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するように構成された実行ユニットとを含む、装置を提供する。
第2の態様の第1の可能な実装例において、前記1つ又は複数の光センサは第1の光センサを含み、前記非接触ジェスチャはスワイプジェスチャを含むとともに、前記スワイプジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの一方向のスワイプを含み、複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第2の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは右スワイプジェスチャを含むとともに、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの左から右へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第3の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは左スワイプジェスチャを含むとともに、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第2及び第3の可能な実装例を参照すると、前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の水平距離が存在し、前記水平距離は最大である。
第2の態様の第4の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは下スワイプジェスチャを含むとともに、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第5の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは上スワイプジェスチャを含むとともに、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第4及び第5の可能な実装例のどちらか1つを参照すると、前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の垂直距離が存在し、前記垂直距離は最大である。
第2の態様の第1から第5の可能な実装例のいずれか1つを参照すると、前記第1の所定期間は、いずれかのセンサに関してユーザがスワイプをする場合に必要とされる時間の標準値である。
第2の態様の第2から第5の可能な実装例のいずれか1つを参照すると、前記第2の所定期間は、前記第1の光センサによって出力された前記複数の光強度信号に対応する前記第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する前記第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
第2の態様の第6の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは上スワイプジェスチャを含むとともに、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第5又は第6の可能な実装例を参照すると、第7の可能な実装例において、前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の垂直距離が存在し、前記垂直距離は最大である。
第2の態様の第1から第7の可能な実装例のいずれか1つを参照すると、第8の可能な実装例において、前記第1の所定期間は、いずれかのセンサに関してユーザが一方向のスワイプをする場合に必要とされる時間の標準値であり、前記一方向のスワイプは、下記の、左から右へのスワイプ、右から左へのスワイプ、上から下へのスワイプ、及び下から上へのスワイプのうちのいずれか1つであり得る。
第2の態様の第2から第7の可能な実装例のいずれか1つを参照すると、第9の可能な実装例において、前記第2の所定期間は、前記第1の光センサによって出力された前記複数の光強度信号に対応する前記第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する前記第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
第2の態様の第1から第9の可能な実装例のいずれか1つを参照すると、第10の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、及び第3の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅いとともに、前記第2の光強度信号によって反映される信号強度が、第1のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記減少変化規則は含み、前記第3の光強度信号によって反映される信号強度が、第2のしきい値より小さくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則は含む。
第2の態様の第1から第10の可能な実装例のいずれか1つを参照すると、第11の可能な実装例において、前記第1のしきい値は、前記スワイプジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第2のしきい値は、前記光センサが遮蔽されたあとで前記スワイプジェスチャを生成する前記操作オブジェクトが離れる場合の光強度の標準的な増加量である。
第2の態様の第12の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャはアップリフトジェスチャを含むとともに、前記アップリフトジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に増加変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第13の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャはアップリフトジェスチャを含むとともに、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、増加変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第2の態様の第12又は第13の可能な実装例を参照すると、第14の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第2の態様の第15の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャはプレスジェスチャを含むとともに、前記プレスジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に第2の減少変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第16の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャはプレスジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第2の減少変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第2の態様の第15又は第16の可能な実装例を参照すると、第17の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第2の態様の第18の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャは少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャを含むとともに、前記プレスジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記第1の光センサの前記感知範囲における前記操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に減少変動規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第19の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャは少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における前記操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、減少変動規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
第2の態様の第18又は第19の可能な実装例を参照すると、第20の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻は前記第5の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則は含み、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第2の態様の第12又は第17の可能な実装例を参照すると、第21の可能な実装例において、前記第1の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値であり、前記第2の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に前記光センサが遮蔽される持続時間の標準値である。
第2の態様の第14、第17、及び第19の可能な実装例のいずれか1つを参照すると、第22の可能な実装例において、前記第3の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを認識する検出時刻と前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻との間の時間間隔の標準値である。
第2の態様の第14、第17、及び第20の可能な実装例のいずれか1つを参照すると、第23の可能な実装例において、前記第3のしきい値は、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第4のしきい値は、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、前記静止している操作オブジェクトによってもたらされる光強度の標準的な減少量又は増加量である。
第2の態様の第13、第16、及び第19の可能な実装例のいずれか1つを参照すると、第24の可能な実装例において、前記第1のしきい値はN/2より小さくないとともに、前記第2のしきい値はA/2より小さくない。
第2の態様、又は第2の態様の第1から第24の可能な実装例のいずれか1つを参照すると、第25の可能な実装例において、前記端末機器がモーションセンサ又はオリエンテーションセンサを更に含み、当該装置は、前記モーションセンサ又は前記オリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にあるならば、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップを起動するように構成された携帯電話状態判定ユニットであって、前記ステップが前記ジェスチャ認識ユニットによって実行される前記携帯電話状態判定ユニットを更に含む。
第2の態様、又は第2の態様の第1から第25の可能な実装例のいずれか1つを参照すると、第26の可能な実装例において、前記ジェスチャ認識ユニットは、前記受信ユニットが前記光センサによって出力された前記光強度信号のうちの1つを受信するたびに、前記光センサによって出力され、前記受信ユニットによって前回受信されたか又は複数回受信された前記光強度信号のうちの1つ又は複数に従って、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定するように構成されたリアルタイムジェスチャ認識サブユニットを含む。
第2の態様、又は第2の態様の第1から第26の可能な実装例のいずれか1つを参照すると、第27の可能な実装例において、前記非接触ジェスチャは、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションは、画像アプリケーション又は電子ブックアプリケーションを含み、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、前記実行ユニットは、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャにそれぞれ対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するように構成されたスワイプジェスチャ実行サブユニットを含む。
第2の態様、又は第2の態様の第1から第26の可能な実装例のいずれか1つを参照すると、第28の可能な実装例において、前記非接触ジェスチャが、プレスジェスチャ及び/又はアップリフトジェスチャを含み、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含む場合に、前記実行ユニットは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャ及び/又は前記アップリフトジェスチャに対応するズーム操作を実行するように構成されたアップリフト又はプレスジェスチャ実行サブユニットを含む。
第2の態様の第12、第15、及び第18の可能な実装例のいずれか1つを参照すると、第29の可能な実装例において、当該装置は、前記アップリフトジェスチャのアップリフト量を取得するように構成されたアップリフト量取得ユニットを更に含み、前記実行ユニットは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するように構成された第1のズーム実行サブユニットであって、前記ズーム操作が実行される場合に前記アップリフト量取得ユニットによって取得された前記アップリフト量に従ってズーム比が決定される前記第1のズーム実行サブユニットを含む。
第2の態様の第13、第16、及び第19の可能な実装例のいずれか1つを参照すると、第30の可能な実装例において、当該装置は、前記プレスジェスチャのプレス量を取得するように構成されたプレス量取得ユニットを更に含み、前記実行ユニットは、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するように構成された第2のズーム実行サブユニットであって、前記ズーム操作が実行される場合に前記プレス量取得ユニットによって取得された前記プレス量に従ってズーム比が決定される前記第2のズーム実行サブユニットを含む。
第2の態様の第31の可能な実装例において、前記複数の光センサはN個の光センサであり、前記非接触ジェスチャは少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャを含むとともに、前記プレスジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における前記操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、減少変動規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含み、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、そしてBはAより大きくないとともに第2のしきい値より小さくない。
一実施例は、図12で示されたように、プロセッサ121、メモリ122、及び光センサ123を含む端末機器120であって、光センサ123が、光強度変化を反映する複数の光強度信号を出力するとともに、1つ又は複数の光センサが含まれ得るように構成され、メモリ122が、上記の実施例における非接触ジェスチャを使用することにより端末機器を制御するための方法で使われるアプリケーションプログラムを格納するように構成され、プロセッサが、メモリ内のプログラムを読み出すとともに、下記の、一定期間における光強度変化に従って前記光センサによって出力されるとともに前記光強度変化を反映する複数の光強度信号を受信するステップであって、前記光強度変化が前記非接触ジェスチャによって生成される、ステップと、前記の出力された複数の光強度信号の変化規則が前記非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、前記複数の光強度信号に対応する前記非接触ジェスチャを認識するステップと、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するステップとを実行するように構成される、端末機器120を開示する。
上記の技術的解決法は、下記の、スマート端末のハードウェア構成についての低いアルゴリズム複雑度、小さな電力消費、特別要求事項なし、及びソフトウェアを介して端末機器上で簡単かつ能率的に非接触ジェスチャを使用することにより端末機器を制御することができること、及びユーザ体験を向上させることという利点を有する。
本発明の実施例における技術的解決法を更に明瞭に例示するために、下記の事項は、実施例又は従来技術を説明するために必要とされる添付図面を簡潔に紹介する。明らかに、添付図面は単に本発明のいくつかの実施例を示すだけであるとともに、当業者は、創造的な努力なしでこれらの添付図面から他の図面を更に導き出すことができる。
本発明の実施例1の概要のフローチャートである。 本発明の実施例2による、スワイプジェスチャの概略図である。 本発明の実施例2による、スワイプジェスチャによって生成された光強度変化規則の概略図である。 本発明の実施例3による、アップリフトジェスチャの概略図である。 本発明の実施例3による、アップリフトジェスチャによって生成された光強度変化規則の概略図である。 本発明の実施例3による、プレスジェスチャの概略図である。 本発明の実施例3による、プレスジェスチャによって生成された光強度変化規則の概略図である。 本発明の実施例3による、連続的なプレスジェスチャ、アップリフトジェスチャ、そして次のプレスジェスチャによって生成された光強度変化規則の概略図である。 本発明の実施例4による、端末機器が2つの光センサを含む場合に最大の垂直投影距離をサポートする推奨される配置位置の概略図である。 本発明の実施例4による、端末機器が2つの光センサを含む場合に最大の水平投影距離をサポートする推奨される配置位置の概略図である。 本発明の実施例4による、端末機器が3つの光センサを含む場合の推奨される配置位置の概略図である。 本発明の実施例5による、異なる端末アプリケーションに関する非接触ジェスチャに対する制御操作のマッピングの概略図である。 本発明の実施例5による、異なる端末アプリケーションに関する非接触ジェスチャに対する制御操作の別のマッピングの概略図である。 本発明の実施例6による、装置の概略図である。 本発明の実施例6による、別の装置の概略図である。 本発明の実施例7による、端末機器の概略図である。
本発明の目的、技術的解決法、及び利点を更に明確にするために、下記の事項は、特定の実施例及び関連のある添付図面を参照して、さらに本発明を詳細に説明する。
本発明の実施例1は、非接触ジェスチャを使用することにより端末機器を制御するための方法であって、1つ又は複数の光センサを含む端末機器に適用できる方法を提供する。この実施例における端末機器は、スマートフォン、タブレットコンピュータ、ノート型コンピュータなどであり得るとともに、この実施例における光センサ(光センサは環境光センサAmbient Light Sensorとも呼ばれる)は、可視の光強度を感知するセンサである。光センサは、スマートフォン又はタブレットコンピュータ上で広く使用されるとともに、現在のところ、大部分のスマート端末は、携帯電話の前面画面の上部、及びタブレットコンピュータの前面画面の上部又は右側に一般に配置され、端末機器が画面輝度を自動的に調整するのに周囲の可視光の強さを感知するために主に使用される光センサを備えている。例えば、戸外のユーザが日中に端末機器を使用する場合に、画面輝度は、強い光に抵抗するために自動的に最大に調整され、暗い環境光を有する建物にユーザが戻る場合に、画面輝度は、自動的に低減される。
図1において示されたように、本発明の実施例は下記のステップを含む。
S11)一定期間における光強度変化に従って光センサによって出力されるとともに光強度変化を反映する複数の光強度信号を受信し、ここで、光強度変化は非接触ジェスチャによって生成される。
この実施例において、一定期間は1つ又は複数の非接触ジェスチャを完了するための持続時間であっても良く、光強度を反映する光強度信号は照度であっても良く、照度の物理的意味は単位面積に照射された光束であるとともに、光束は光に対する人間の目の感度を基準として使用し、照度の単位は、1平方メートル当たりのルーメン(Lm)であり、さらにルクス(Lux)とも呼ばれ、ここで、1ルクス=1ルーメン/1平方メートルである。
S12)出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、複数の光強度信号に対応する非接触ジェスチャを認識する。
この実施例において、複数の光強度信号の変化規則は、下記のとおりであり得る。複数の光強度信号によって反映される光強度(照度によって量子化される)は、一定期間においてハイ(high)からロー(low)に変化するか、又は一定期間においてロー(low)からハイ(high)に変化するか、又は一定期間において不変のままとなるか、又は変化規則がいくつかの変化規則性の組み合わせになり得る。この実施例において、非接触ジェスチャは、スワイプジェスチャ、アップリフトジェスチャ、プレスジェスチャ、又はいくつかのジェスチャの組み合わせであっても良く、ここで、スワイプジェスチャは、上スワイプジェスチャ、下スワイプジェスチャ、左スワイプジェスチャ、又は右スワイプジェスチャを含んでも良い。非接触ジェスチャに対応する事前設定された変化規則は、あらかじめさまざまなジェスチャを練習することによって、同様に取得され得る。例えば、もしスワイプジェスチャが使用されるならば、操作オブジェクト(例えば手など)が光センサをスワイプ(swipe)するとき、光センサによって出力される光強度は変化し(例えば、光強度は、まずハイからローに変化し、次にローからハイに変化し)、この場合、変化規則は記録され得るとともに、非接触ジェスチャに対応する変化規則が取得される。変化規則は、一定ではないとともに、実際の使用においてさらに調整され得るという点、例えば、変化規則に関連している光強度値及び検出時刻のようなパラメータが調整されるという点に注意する必要がある。特定の調整の間、パラメータは、パラメータを直接入力すること(メニューを形成することによって受け取ること)によりユーザによって調整されるか、又は学習することによりユーザによって調整されるか、又は実行プロセスにおける環境光強度に従って調整される、などで調整され得る。
S13)認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する。
この実施例において、端末アプリケーションは、電子ブック、ウェブページをブラウズすること、画像、音楽、及びビデオのようなアプリケーションであり得る。対応する制御操作は、ページフリッピング、上下ドラッギング、画像ズーミング、ボリューム調整、再生又は一時停止などであり得る。特定の操作及び対応するアプリケーションはこれに限定されず、例えば、ページフリッピングは、電子ブック、ウェブページをブラウズすること、及び画像のようなアプリケーションを対象にしても良く、再生又は一時停止は、音楽及びビデオを再生することのようなアプリケーションを対象にしても良い。この実施例において、端末アプリケーションに関する、非接触ジェスチャに対応する制御操作の方法は、あらかじめ設定され得るか、又はユーザによって同様に定義され得る。
さらに、本発明の実施例において、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定することは、具体的には、光強度信号を受信しながら、前回受信されたか又は複数回受信された光強度信号に従って、光強度の変化が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定することである。受信しながら処理する方法は、非接触ジェスチャを判定し得るとともに、できる限り早く対応する操作を実行し得る。任意に、この実施例は、複数の光強度信号を受信してバッファリングしたあとで、光強度の変化が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを同様に判定し得るか、又は信号の一部分をバッファリングしたあとで信号の一部分を判定し、次に受信しながら処理する方法を使用することによって、判定することを必要としている残りの信号を同様に判定し得る。
さらに、ジェスチャ動作を誤って誘発し得る光変化を、端末機器の震動が同様に引き起こすので、端末機器の震動によって引き起こされる誤操作を回避するために、端末機器が現在比較的安定した状態にあるかどうかを最初に判定することが必要であり、それによって非接触ジェスチャの認識を起動するかどうかを判定する。本発明の実施例は、携帯電話が比較的安定した状態にあるかどうかを判定するために、モーションセンサ又はオリエンテーションセンサを使用するとともに、ジェスチャは、端末機器が比較的安定した状態にある時にのみ認識される。もし端末機器が比較的安定した状態にないならば、受信された光強度の変化規則が非接触ジェスチャに対応する変化規則に適合するかどうかを判定することは必要ではない。
具体的には、端末機器の状態は、最も最新の端末の内蔵されたモーションセンサ(Motion Sensor)又はオリエンテーションセンサ(Orientation Sensor)によって判定されることができ、ここで、モーションセンサは、加速度計(Accelerometer)、線形の加速度計(linear Accelerometer)、重力センサ(Gravity Sensor)、ジャイロスコープ(Gyroscope)、及び回転ベクトルセンサ(Rotation Vector Sensor)を含む。
モーションセンサの出力は、端末機器の3つの座標軸に対応するモーション固有値、例えば、直線加速度及び角加速度であり、オリエンテーションセンサは、3つの座標軸に沿った端末機器の回転の角度を出力し、そして端末機器の状態は、時間系列における3次元のベクトル差を使用することによって判定され得る。下記の事項は、一例として加速度計のみを使用することによる判定方法を説明するとともに、他のモーションセンサ又はオリエンテーションセンサを使用する判定方法は類似している。
加速度計を使用する判定方法は、連続した期間内の3軸加速度サンプル値(sample value:標本値)のベクトル差を計算すること、そしてもし期間内の全てのベクトル差がしきい値より小さいならば、又はもしベクトル値の平均値がしきい値より小さいならば、端末機器が比較的安定した状態にあると見なすことを含む。しきい値は、センサの感度及び精度に関連しており、ユーザが僅かに震える場合に、ジェスチャ認識を起動する誤った判定に対応するベクトル差が取得されることができ、そして何度も統計値が集められた後で、平均値がしきい値として使用される。
上記のベクトル差は、下記の式によって表される。
Figure 2015530669
ここで、(x、y、z)は、時刻Tにおいて加速度計によって出力される3軸加速度値であり、(xi−1、yi−1、zi−1)は、時刻Ti−1において加速度計によって出力される3軸加速度値である。
好ましくは、判定の精度を向上させるために、上記の複数のセンサの出力が包括的な判定のために同時に使用され得る。
任意に、ジェスチャ認識スイッチが設定されることができ、もしスイッチがオンにされるならば、非接触ジェスチャの認識は起動され、もしスイッチがオンにされないならば、非接触ジェスチャの認識は起動されない。
この実施例は、光センサによって出力された光強度信号の変化を判定することによって非接触ジェスチャを認識し、複雑な2次元又は3次元の光学部品を導入する必要がなく、簡素性を導入する一方でユーザ体験を向上させる。
この実施例は、実施例1に基づいて、非接触ジェスチャを使用することにより端末機器を制御するための方法であって、具体的には、端末機器を制御するためにスワイプジェスチャを使用する方法を提供する。
この実施例は、1つ又は複数の光センサに基づき得る。具体的には、1つの光センサが存在する場合に、この実施例では、光強度が、第1の所定期間において、減少変化に適合し、次に増加変化に適合することを、非接触ジェスチャに対応する事前設定された変化規則は含む。もし光センサによって出力された、取得された複数の光強度信号が、この変化に適合するならば、スワイプジェスチャが認識される。
第2の光強度信号によって反映される信号強度が、第1のしきい値より小さくない減少量で、複数の光強度信号の中の第1の光強度信号によって反映される信号強度より小さく、ここで、第1の光強度信号及び第2の光強度信号は複数の光強度信号の中の光強度信号であり、第2の光強度信号を受信する時刻は第1の光強度信号を受信する時刻より遅いことを、減少変化は含む。
第3の光強度信号によって反映される信号強度が、第2のしきい値より小さくない増加量で、複数の光強度信号の中の第2の光強度信号によって反映される信号強度より大きく、ここで、第3の光強度信号は複数の光強度信号の中の光強度信号であり、第3の光強度信号を受信する時刻は第2の光強度信号を受信する時刻より遅いことを、増加変化は含む。
第1のしきい値は、スワイプジェスチャを生成する操作オブジェクトによって光センサが遮蔽される場合の光強度の標準的な減少量であり、第2のしきい値は、光センサが遮蔽されたあとでスワイプジェスチャを生成する操作オブジェクトが離れる場合の光強度の標準的な増加量である。特定の値が、あらかじめ実験によって取得され得る。
例えば、3つの光強度信号A、B、及びCが、時刻の昇順において受信され(説明を容易にするために3つの文字が光強度の値を示す)、3つの信号の光強度が下記の条件、第1のしきい値より小さくない減少量でB<A、そして第2のしきい値より大きくない増加量でC>Bを満たすならば、それは、光強度がハイからローに変化し、次にローからハイに変化したことを示すとともに、それは、スワイプジェスチャが発生したと見なされ得る。当然ながら、実際に、判定することは厳格に3つの信号に限定されない。例えば、B信号のあとの短期間のうちにB1信号が存在するならば、ローからハイに変化する過程があるかどうかは、Cが、第2のしきい値より小さくない増加量で、B1より大きいかどうかを判定することによって、同様に判定され得る。この場合、B1が接近してBのあとに続くので、2つの値は非常に近いと考えられ得るとともに、B1はBを置き換えるために使用され得る。この実施例の最終の目的は、最も良いアルゴリズムを使用することによって誤った判定を減少させることである。当業者は、この実施例を参照して、判定するための適切な信号値を選択し得るとともに、詳細はここでは与えられない。
具体的には、図2aにおいて示されるように、スワイプジェスチャは、光センサの感知範囲における操作オブジェクトの一方向のスワイプのことを指し、例えば、端末の前面は光センサ21を含み、操作オブジェクトは、端末画面を横断して一方の側からもう一方の側に移動し、ここで、操作オブジェクトは、ユーザの手又は腕を含み、そして光の変化を引き起こすことができる、例えば本及びペンのような、ユーザの手の中の他のオブジェクトを同様に含む。スワイプジェスチャから画面までの最適距離は、約5センチメートルから30センチメートルである。最適距離範囲情報は、ユーザに指示するために、画面上に表示されることができ、一方、最適距離範囲は、実際の光強度に従って同様に適応的に調整されることができ、例えば、光が弱い場合に、最適距離の上限は適切に減らされることができる。
図2bにおいて示されるように、非接触ジェスチャに対応する事前設定された変化規則は、第1の所定期間において、光強度が、ハイからローに変化し、次にローからハイに変化することを含む。具体的には、時刻Tにおいて受信された光センサの光強度は、時刻Ti−1において受信された光強度より小さく、そして下降量は設定された第1のしきい値Dec_1より小さくなく、この段階は下降段階と呼ばれ、時刻Tk+1において受信された光センサの光強度は、時刻Tにおいて受信された光強度より大きく、そして上昇量は設定された第2のしきい値Inc_1より小さくなく、この段階は上昇段階と呼ばれるとともに、第1のしきい値及び第2のしきい値はエラーを減少させるように設定され、もし判定することがしきい値を設定せずに行われるならば、わずかな光強度変化が同様にハイからロー及びローからハイへの変化として見なされることが可能であり(例えば、端末機器をある角度をなして回転させる)、それにより誤った判定を引き起こす。
もしTi−1からTi+1までの時間の長さが設定された第1のしきい値T_1より大きくないならば、スワイプ動作が発生したと見なされる。
具体的には、下降段階において、下降量Decは、現在の時刻における光強度Lと以前の時刻における光強度Li−1との間の減少量の絶対値として表されることができ、すなわちDec=Li−1−Lである。
下降量Decは、現在の時刻における光強度Lと以前の時刻における光強度Li−1との間の減少量の、以前の時刻における光強度に対する比率として同様に表されることができ、すなわち
Figure 2015530669
である。
同様に、上昇段階において、上昇量Incは、現在の時刻における光強度Lと以前の時刻における光強度Li−1との間の増加量の絶対値として表されることができ、すなわちInc=Lk+1−Lである。
上昇量Incは、現在の時刻における光強度Lと以前の時刻における光強度Li−1との間の増加量の、以前の時刻における光強度に対する比率として同様に表されることができ、すなわち
Figure 2015530669
である。
好ましくは、光ジッタによって引き起こされたスワイプを、複数の連続的スワイプとして誤って判定することを回避するために、もし2つのスワイプジェスチャが第2の所定期間内に認識されるならば、2番目に認識されたスワイプジェスチャに対応する制御操作は起動されず、すなわち、2つのスワイプの間の時間間隔がしきい値より大きくなるように設定されるとともに、当該時間間隔の中の複数のスワイプは1つのスワイプ動作と見なされる。
具体的には、第1のしきい値は、スワイプジェスチャを生成する操作オブジェクトによって光センサが遮蔽される場合の光強度の標準的な減少量であり、第2のしきい値は、光センサが遮蔽されたあとでスワイプジェスチャを生成する操作オブジェクトが離れる場合の光強度の標準的な増加量である。第1の所定期間は、ユーザがスワイプジェスチャを完了する際に消費される時間の標準値である。第2の所定期間は、ユーザによって連続して実行される2つのスワイプジェスチャの間の時間間隔の標準値である。
任意に、操作オブジェクトによって遮蔽されることは、完全に遮蔽されること、部分的に遮蔽されること、又は操作オブジェクトの影によって遮蔽されることを含む。
好ましくは、周囲の環境光状態が異なるジェスチャ動作に対応する光変化特性に対して影響を与えることを考慮して、変化規則の第1のしきい値及び第2のしきい値は、周囲の環境光強度に従って適応的に調整され得る。例えば、周囲の環境光が極めて強い場合に、第1のしきい値及び第2のしきい値は、光ジッタによって引き起こされる誤った判定を減少させるために、適切に増やされ得る。
第1のしきい値、第2のしきい値、第1の所定期間、及び第2の所定期間は、端末機器がユーザの操作の癖に積極的に適応でき得るように、自己学習によってユーザのジェスチャの癖から同様に取得され得る。例えば、ジェスチャ認識機能が使用される前に、ユーザは指定された期間内にいくつかのスワイプジェスチャを完了することを要求される。光センサの出力値は、一連の光強度信号を含む。指定された期間が終わったあとで、全てのスワイプジェスチャに対応する第1のしきい値及び第2のしきい値、スワイプジェスチャの全ての持続時間、及び2つのスワイプの間の時間間隔が、それぞれ平均化される。対応する平均値は、第1のしきい値、第2のしきい値、第1の所定期間、及び第2の所定期間として使用される。
任意に、第1の所定期間及び第2の所定期間は、インタフェース上でユーザによって選択されたジェスチャ操作速度に従って同様に適応し得る。例えば、3つの操作速度“高い、普通、及び低い”が、選択するユーザのためにインタフェース上で提供され、各モードは時間しきい値のセットに対応し、ユーザは、ユーザの操作の癖に従ってモードを選択したあとで、使用される時間しきい値を決定する。一般に、選択されたジェスチャ操作速度がより高いならば、対応する時間しきい値はより小さい。
この実施例は、実施例1に基づいて、非接触ジェスチャを使用することにより端末機器を制御するための方法であって、具体的には、端末機器を制御するためにアップリフトジェスチャ、プレスジェスチャ、又は少なくとも1つのアップリフト若しくはプレスジェスチャを使用する方法を提供する。
図3aにおいて示されるように、アップリフトジェスチャは、光センサの感知範囲における操作オブジェクトの光センサから離れる方向における漸進運動のことを指し、図4aにおいて示されるように、プレスジェスチャは、光センサの感知範囲における操作オブジェクトの光センサに向かう方向における漸進運動のことを指し、ここで、操作オブジェクトは、ユーザの手又は腕を含み、そして光の変化を引き起こすことができる、例えば本及びペンのような、ユーザの手の中の他のオブジェクトを同様に含む。
光センサから離れる方向又は光センサに向かう方向は主に鉛直方向のことを指し、すなわち、光センサが端末画面の前面に位置している場合に、プレス又はアップリフトジェスチャは、端末画面に垂直な方向に沿った下/下運動のことを指す。少なくとも1つのアップリフト又はプレスジェスチャは、連続的なアップリフト及びプレス動作の組み合わせであり得るとともに、プレス及びアップリフトジェスチャは数回繰り返して実行されても良い。
さらに、アップリフトすること(uplifting)のための十分な空間を確保するために、好ましくは、アップリフトジェスチャから画面までの初期の距離は、正又は負の2〜3センチメートルの誤差を許容する、5センチメートルである。距離情報は、ユーザに指示するために、画面上に表示されることができ、一方、最適距離範囲は、実際の光強度に従って同様に適応的に調整されることができ、例えば、光が弱い場合に、最適距離は適切に減らされることができる。プレスすること(pressing)のための十分な空間を確保するために、好ましくは、プレスジェスチャから画面までの初期の距離は、正又は負の5センチメートルの誤差を許容する、15センチメートルである。距離範囲情報は、ユーザに指示するために、画面上に表示されることができ、一方、最適距離は、実際の光強度に従って同様に適応的に調整されることができ、例えば、光が弱い場合に、最適距離は適切に減らされることができる。
この実施例は、1つ又は複数の光センサに基づくことができ、1つの光センサが存在する場合に、アップリフトジェスチャ、プレスジェスチャ、及び少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとの組み合わせに対応する変化規則性は、それぞれ下記のようになる。
図3bにおいて示されるように、アップリフトジェスチャに対応する事前設定された変化規則は、光強度が、第3の所定期間において減少変化に適合し、それから第1の所定期間において不変のままとなり、次に第1のロー−ハイ変化に適合し、それから第2の所定期間において不変のままとなることを含む。
具体的には、図3bにおいて示されるように、Ti−1とTとの間の持続時間は第3の所定期間より長くなく、時刻Tにおいて受信された光センサの光強度は時刻Ti−1における光強度より小さく、そして下降量は設定された第3のしきい値Dec_2より小さくなく、この段階は下降エッジと呼ばれ、TとTとの間で、TはTより遅く、TとTとの間の持続時間は第1の所定期間T_2より長くなく、光強度の上昇又は下降の変動量は、第4のしきい値Dec_Inc_1を超えず、TとTとの間で、光強度はジェスチャのアップリフトによって徐々に増加し、ここで、時刻Tにおける光強度Lは基準光強度であり、任意に、時刻Tにおける光強度Lの基準光強度に対する比率が計算されることができるとともに、アップリフト量Prとして記録されることができ、ここで、T∈(T,T)、
Figure 2015530669
であり、任意に、時刻Tにおける光強度Lと基準光強度との差分が計算されることができるとともに、アップリフト量Prとして記録されることができ、ここで、T∈(T,T)、Pr=L−L>0であり、TとTとの間で、TはTより遅く、TとTとの間の持続時間は第2の所定期間T_3より長くなく、光強度は基本的に変わらないままであるとともに、光強度の上昇又は下降の変動量は、第4のしきい値Dec_Inc_1を超えない。
図4bにおいて示されるように、プレスジェスチャに対応する事前設定された変化規則は、光強度が、第3の所定期間において減少変化に適合し、それから第1の所定期間において不変のままとなり、次に第1の減少変化に適合し、それから第2の所定期間において不変のままとなることを含む。
具体的には、図4bを参照すると、Ti−1とTとの間の持続時間は第3の所定期間より長くなく、時刻Tにおいて受信された光センサの光強度は時刻Ti−1における光強度より小さく、そして下降量は設定された第3のしきい値Dec_2より小さくなく、この段階は下降エッジと呼ばれ、TとTとの間で、TはTより遅く、TとTとの間の持続時間は第1の所定期間T_2より長くなく、光強度の上昇又は下降の変動量は、第4のしきい値Dec_Inc_1を超えず、TとTとの間で、光強度はジェスチャのプレスによって徐々に減少し、ここで、時刻Tにおける光強度Lは基準光強度であり、任意に、時刻Tにおける光強度Lの基準光強度に対する比率が計算されることができるとともに、プレス量Prとして記録されることができ、ここで、T∈(T,T)、
Figure 2015530669
であり、任意に、時刻Tにおける光強度Lと基準光強度との差分が計算されることができるとともに、アップリフト量Prとして記録されることができ、ここで、T∈(T,T)、Pr=L−L<0であり、TとTとの間で、TはTより遅く、TとTとの間の持続時間は第2の所定期間T_3より長くなく、光強度は基本的に変わらないままであるとともに、光強度の上昇又は下降の変動量は、第4のしきい値Dec_Inc_1を超えない。
少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャに対応する事前設定された変化規則は、光強度が、減少変化に適合し、それから第1の所定期間において不変のままとなり、次にハイ(high)とロー(low)との間を変動し、そのあとで第2の所定期間において不変のままとなることを含む。
具体的には、もし減少変動がまず第1のロー−ハイ変化に適合し、そのあとで第1の減少変化に適合するならば、ジェスチャはアップリフト−プレスジェスチャであり、もし減少変動がまず第1の減少変化に適合し、そのあとで第1のロー−ハイ変化に適合するならば、ジェスチャはプレス−アップリフトジェスチャである。
アップリフトジェスチャ及びプレスジェスチャを判定するための方法と同様に、TとTとの間でのみ、光強度は、ジェスチャのプレスによって徐々に減少するか、又はジェスチャのアップリフトによって徐々に増加する。変化は、繰り返して、そして連続的に変動する。任意に、調整量Prが計算されることができるとともに、計算方法は、アップリフト量及びプレス量を計算するための方法と同じである。
図5は、連続動作“プレス−アップリフト−プレス”の組み合わせによって生成された光強度変化を示し、TとTとの間の領域が、連続動作“プレス−アップリフト−プレス”の組み合わせのための有効な領域であり、プレス動作がTとTとの間で発生する場合に、光強度はジェスチャのプレスによって徐々に減少し、アップリフト動作がTとTとの間で発生する場合に、光強度はジェスチャのアップリフトによって徐々に増加し、プレス動作がTとTとの間で再度発生する場合に、光強度はジェスチャのプレスによって再度徐々に減少する。
具体的には、第1の所定期間は、プレスジェスチャ又はアップリフトジェスチャを生成する操作オブジェクトによって光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値である。第2の所定期間は、プレスジェスチャ又はアップリフトジェスチャを生成する操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に光センサが遮蔽される持続時間の標準値である。第3の所定期間は、ジェスチャを認識する検出時刻とプレスジェスチャ又はアップリフトジェスチャを生成する操作オブジェクトによって光センサを遮蔽する時刻との間の時間間隔の標準値である。実施例2におけるスワイプジェスチャの第1の所定期間は、この実施例におけるプレスジェスチャ、アップリフトジェスチャ、又は、少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャの第1の所定期間より短い。第3のしきい値は、光センサが、アップリフトジェスチャ、又はプレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する操作オブジェクトによって、完全に遮蔽されるか、部分的に遮蔽されるか、又は影を投げ掛けられる場合の光強度の標準的な減少量である。第4のしきい値は、アップリフトジェスチャ、又はプレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する操作オブジェクトによって光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、静止しているジェスチャによってもたらされる光強度の標準的な減少量又は増加量である。
任意に、操作オブジェクトによって遮蔽されることは、完全に遮蔽されること、部分的に遮蔽されること、又は操作オブジェクトの影によって遮蔽されることを含む。
好ましくは、周囲の環境光状態が異なるジェスチャ動作に対応する光変化特性に対して影響を与えることを考慮して、変化規則の第3のしきい値及び第4のしきい値は、周囲の環境光強度に従って適応的に調整され得る。例えば、周囲の環境光が極めて強い場合に、第3のしきい値は、光ジッタによって引き起こされる誤った判定を減少させるために、適切に増やされ得る。一方、光が極めて強い場合に、光センサによって出力される光強度値の変動範囲が大きいので、第4のしきい値は、プレスジェスチャ及びアップリフトジェスチャを首尾よく検出する確率を増大させるために増やされ得る。
第3のしきい値、第4のしきい値、第1の所定期間、及び第2の所定期間は、端末機器がユーザの操作の癖に積極的に適応でき得るように、自己学習によってユーザのジェスチャの癖から同様に取得され得る。例えば、ジェスチャ認識機能が使用される前に、ユーザは指定された期間内にいくつかのプレスジェスチャ及びアップリフトジェスチャを完了することを要求される。光センサの出力値は、一連の光強度信号を含む。指定された期間が終わったあとで、全てのプレスジェスチャ及びアップリフトジェスチャに各々対応する第3のしきい値、第4のしきい値、第1の所定期間、及び第2の所定期間が、それぞれ平均化される。対応する平均値は、第3のしきい値、第4のしきい値、第1の所定期間、及び第2の所定期間として使用される。
任意に、第1の所定期間及び第2の所定期間は、インタフェース上でユーザによって選択されたジェスチャ操作速度に従って同様に適応し得る。例えば、3つの操作速度“高い、普通、低い”が、選択するユーザのためにインタフェース上で提供され、各モードは時間しきい値のセットに対応し、ユーザは、ユーザの操作の癖に従ってモードを選択したあとで、使用される時間しきい値を決定する。一般に、選択されたジェスチャ操作速度がより高いならば、対応する時間しきい値はより小さい。
この実施例は、実施例1及び2に基づいて、非接触ジェスチャを使用することにより端末機器を制御するための方法を提供する。さらに、端末が複数の光センサを含む場合に、複数の光センサによって出力される光強度信号の複数のグループに基づいて、スワイプジェスチャの方向が認識され得る。右スワイプジェスチャは、光センサの感知範囲における操作オブジェクトの左から右へのスワイプであり、左スワイプジェスチャは、光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、下スワイプジェスチャは、光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、上スワイプジェスチャは、光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含む。操作オブジェクトは、ユーザの手又は腕を含み、そして光の変化を引き起こすことができる、例えば本及びペンのような、ユーザの手の中の他のオブジェクトを同様に含む。
より良く実施例を説明するために、この実施例における全ての方向は、一般的な使用状態における端末に関係がある。例えば、端末機器が9つの物理的な数字キーを有する普通の携帯電話であると仮定すると、概して、携帯電話の一般的な使用状態は、ユーザが携帯電話を持つときに、表示画面を有する面がユーザの顔に向けられることであり、この場合、携帯電話の表示画面又は受話口(earpiece)は面の“上部”に位置しており、9つの数字キーは、面の“下部”に位置しており、数字キー1は数字キー2の“左”に位置しており、そして数字キー3は数字キー2の“右”に位置している、と考えられ得る。
具体的には、一例として2つの光センサを使用すると、2つの光センサが左スワイプ又は右スワイプジェスチャを認識するために図6において使用される場合に、2つの光センサの好ましい配置位置は、2つの光センサの相対的な配置位置の間の水平距離を最大限にする位置であり、ここで、水平距離は、2つの光センサがx軸に投影されたあとの相対距離のことを指す。具体的な認識方法は、第1の光センサ601及び第2の光センサ602によってスワイプジェスチャを検出する時刻の分配特性に従って、左スワイプ又は右スワイプ方向を判定することである。具体的には、その方法は下記の事項を含む。
もし携帯電話の左側に配置される第1の光センサ601が時刻Aにおいてスワイプジェスチャを検出し、そして携帯電話の右側に配置される第2の光センサ602が時刻Bにおいてスワイプジェスチャを検出するならば、ジェスチャは右スワイプジェスチャであると認識され、ここで、時刻Bは時刻Aより遅く、時刻Aと時刻Bとの間の時間差は第2の所定期間より大きくない。
そうでなければ、もし携帯電話の右側に配置される第2の光センサ602が時刻Aにおいてスワイプジェスチャを検出し、そして携帯電話の左側に配置される第1の光センサ601が時刻Bにおいてスワイプジェスチャを検出するならば、ジェスチャは左スワイプジェスチャであると認識され、ここで、時刻Bは時刻Aより遅く、時刻Aと時刻Bとの間の時間差は第2の所定期間より大きくない。
具体的には、一例として2つの光センサを使用すると、2つの光センサが上スワイプ又は下スワイプジェスチャを認識するために図7において使用される場合に、2つの光センサの好ましい配置位置は、2つの光センサの相対的な配置位置の間の垂直距離を最大限にする位置であり、ここで、垂直距離は、2つの光センサがy軸に投影されたあとの相対距離のことを指す。具体的な認識方法は、第1の光センサ601及び第2の光センサ602によってスワイプジェスチャを検出する時刻の分配特性に従って、上スワイプ又は下スワイプ方向を判定することである。具体的には、その方法は下記の事項を含む。
もし携帯電話の上側に配置される第1の光センサ701が時刻Aにおいてスワイプジェスチャを検出し、そして携帯電話の下側に配置される第2の光センサ702が時刻Bにおいてスワイプジェスチャを検出するならば、ジェスチャは下スワイプジェスチャであると認識され、ここで、時刻Bは時刻Aより遅く、時刻Aと時刻Bとの間の時間差は第2の所定期間より大きくない。
そうでなければ、もし携帯電話の下側に配置される第2の光センサ702が時刻Aにおいてスワイプジェスチャを検出し、そして携帯電話の上側に配置される第1の光センサ701が時刻Bにおいてスワイプジェスチャを検出するならば、ジェスチャは上スワイプジェスチャであると認識され、ここで、時刻Bは時刻Aより遅く、時刻Aと時刻Bとの間の時間差は第2の所定期間より大きくない。
第2の所定期間は、第1の光センサによって出力された複数の光強度信号に対応する第1のスワイプジェスチャを認識する第1の時刻と第2の光センサによって出力された複数の光強度信号に対応する第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
任意に、第2の所定期間は、異なる機器のサイズ、光センサの配置位置、及びユーザの癖に従って調整され得る。例えば、機器のサイズがより大きい場合、又は2つの光センサの間の水平又は垂直距離が配置位置に起因してより大きい場合、第2の所定期間は適切に増やされ得る。一方、ユーザは異なる操作速度を同様に選択することができ、ユーザによって選択された操作速度がより速い場合、第2の所定期間は適切に減らされ得る。
任意に、異なる光センサによって出力された光強度信号によって反映される光強度に従ってスワイプジェスチャがそれぞれ認識される場合に、異なる光センサに対応する第1の所定期間は、同じ値又は異なる値に設定され得る。
さらに、一例として3つの光センサを使用すると、3つの光センサが左スワイプ、又は右スワイプ、又は上スワイプ、又は下スワイプジェスチャを認識するために図8において使用される場合に、3つの光センサの好ましい配置位置は、3つの光センサのうちの2つの隣接する光センサの間の垂直距離及び水平距離を等しくかつ最大限にする位置である。具体的な認識方法は、第1の光センサ801、第2の光センサ802、及び第3の光センサ803によってスワイプジェスチャを検出する時刻の分配特性に従って、左スワイプ、又は右スワイプ、又は上スワイプ、又は下スワイプジェスチャ方向を判定することである。具体的には、その方法は下記の事項を含む。
もし3つの光センサによってスワイプジェスチャを認識する時系列が光センサ801、光センサ802、及び光センサ803であり、光センサ801及び光センサ802によってスワイプジェスチャを検出する時間差と光センサ802及び光センサ803によってスワイプジェスチャを検出する時間差の両方が時間しきい値T_6より小さいならば、スワイプジェスチャは右スワイプジェスチャであると認識される。同様に、もし3つの光センサによってスワイプジェスチャを認識する時系列が光センサ803、光センサ802、及び光センサ801であり、光センサ802及び光センサ803によってスワイプ動作を検出する時間差と光センサ802及び光センサ803によってスワイプジェスチャを検出する時間差の両方がしきい値T_6より小さいならば、スワイプジェスチャは左スワイプジェスチャであると認識される。
もし3つの光センサによってスワイプジェスチャを認識する時系列が光センサ802、光センサ801、及び光センサ803であり、光センサ802及び光センサ801によってスワイプ動作を検出する時間差と光センサ801及び光センサ803によってスワイプ動作を検出する時間差の両方がしきい値T_7より小さいならば、上スワイプジェスチャが発生したと見なされる。同様に、もし3つの光センサによってスワイプジェスチャを認識する時系列が光センサ803、光センサ801、及び光センサ802であり、光センサ802及び光センサ801によってスワイプ動作を検出する時間差と光センサ801及び光センサ803によってスワイプ動作を検出する時間差の両方がしきい値T_7より小さいならば、下スワイプジェスチャが発生したと見なされる。
単一の光センサによって出力された光強度信号を使用することによってスワイプジェスチャを認識する方法は、実施例2における方法と同じである。
任意に、時間しきい値T_6及びT_7は、異なる機器のサイズ、機器タイプ、及びユーザの癖に従って調整され得る。例えば、もし機器のサイズがより大きいならば、T_6及びT_7は適切に増やされ得る。もし端末機器が横の長さより大きい縦の長さを有するスマートフォンであるならば、T_6はT_7より小さくなるように設定され、もし端末機器が横の長さより小さい縦の長さを有するタブレットコンピュータであるならば、T_7はT_6より小さくなるように設定される。一方、ユーザは異なる操作速度を同様に選択することができ、ユーザによって選択された操作速度がより速い場合、T_6及びT_7は適切に減らされ得る。
さらに、この実施例では、複数の光センサは、プレスジェスチャ及びアップリフトジェスチャ動作を認識することの正確度を向上させるように構成され得る。具体的には、プレスジェスチャ、アップリフトジェスチャ、及び少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとの組み合わせは、1つ又は複数の光センサによって出力された光強度信号に従って、包括的に判定される。ジェスチャに関する説明のために、実施例3に対して参照が行われ得る。
A個の光センサによって出力された光強度信号によって反映される光強度が、ハイからローに変化する変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次にB個の光センサによって出力された光強度信号によって反映される光強度が、第1のロー−ハイ変化にそれぞれ適合し、それからB個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなり、ここで、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、A個の光センサはN個の光センサの中のA個の光センサであり、B個の光センサはA個の光センサの中のB個の光センサであり、そしてBは第2のしきい値より小さくないことを、アップリフトジェスチャに対応する事前設定された光変化規則は含む。
A個の光センサによって出力された光強度信号によって反映される光強度が、ハイからローに変化する変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次にB個の光センサによって出力された光強度信号によって反映される光強度が、第1の減少変化にそれぞれ適合し、それからB個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなり、ここで、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、A個の光センサはN個の光センサの中のA個の光センサであり、B個の光センサはA個の光センサの中のB個の光センサであり、そしてBは第2のしきい値より小さくないことを、プレスジェスチャに対応する事前設定された光変化規則は含む。
A個の光センサによって出力された光強度信号によって反映される光強度が、ハイからローに変化する変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次にB個の光センサによって出力された光強度信号によって反映される光強度が、ハイとローとの間をそれぞれ変動し、それからB個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなり、ここで、N、A、及びBは1より大きい整数であり、AはNより大きくないとともに第1のしきい値より小さくなく、A個の光センサはN個の光センサの中のA個の光センサであり、B個の光センサはA個の光センサの中のB個の光センサであり、そしてBは第2のしきい値より小さくないことを、少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャに対応する事前設定された光変化規則は含む。
任意に、第1のしきい値はN/2より小さくないとともに、第2のしきい値はA/2より小さくない。
具体的には、減少変化、第1の所定期間において不変のままとなること、第2の所定期間において不変のままとなること、第1のロー−ハイ変化、第1の減少変化、及びハイとローとの間の変動に関する説明のために、実施例3に対して参照が行われ得る。
さらに、実施例3に基づいて、B個の光センサによって出力された、受信された複数の光強度信号に従って、ジェスチャのアップリフト量又はプレス量がそれぞれ計算されるとともに、包括的なアップリフト量又はプレス量を取得するために、重み和計算(weight sum calculation)が実行される。具体的には、一例としてプレス量Prを使用すると、式は、
Figure 2015530669
となり、ここで、Prはj番目(j≦B)の光センサのプレス量であり、kは対応する重み係数であるとともに、kは各光センサの精度及び感度のようなパラメータに従って選択され得る。
さらに、平均基準光強度LBLを取得するために、B個の光センサの基準光強度に対して加重平均が実行されることができ、それから現在の平均光強度Lavgを取得するために、B個の光センサの現在の光強度に対して加重平均が実行されることができ、以後、プレス量Prは、平均基準光強度と現在の平均光強度との間の比率又は差異に従って取得される。基準光強度及び現在の光強度に関する説明のために、実施例3に対して参照が行われることができ、すなわち
Figure 2015530669
又はPr=Lavg−LBLであり、ここで、
Figure 2015530669
はi番目(i≦B)の光センサの基準光強度であり、Lはi番目(i≦B)の光センサの現在の光強度であり、p及びqは重み係数に対応する。重み係数は、各光センサの精度及び感度のようなパラメータに従って選択され得る。
この実施例は、上記の実施例に基づいて、非接触ジェスチャを使用することにより端末機器を制御するための方法であって、さらに、認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する場合に、認識された非接触ジェスチャに対する特定の制御操作のマッピングを異なる端末アプリケーションに含む、方法を提供する。ジェスチャ動作のマッピングは、異なる端末アプリケーションに従って変更され得る。例えば、図9aは、4つのアプリケーションシナリオ、すなわち電子ブック、画像ブラウジング、音楽再生、及びビデオ再生における、スワイプジェスチャ、プレスジェスチャ、及びアップリフトジェスチャに対する制御操作の好ましいマッピングを列挙する。図9bは、画像ブラウジング、音楽再生、ビデオ再生、及びウェブページブラウジングのアプリケーションシナリオにおける、上−下−左−右スワイプジェスチャ動作の好ましいマッピングを示す。ジェスチャ動作のマッピングは、アプリケーションソフトウェアにおいて事前設定されることができ、そしてさらにユーザによって定義されることができるとともに、ユーザの選択に従って調整されることができる。
さらに、プレスジェスチャに対応するプレス量は、画像ブラウジングの縮小比率をリアルタイムに調整するために、又は音楽再生中のボリューム減少比率を調整するために、使用され得る。例えば、画像ブラウジング処理においてユーザがプレスジェスチャを使用し、プレス量Pr=0.5(比率)である場合に、表示される画像サイズは、オリジナルの画像サイズの0.5倍に縮小される。一般に、プレスジェスチャ処理におけるPrは時間とともにゆっくりと減少する値であり、段階的に縮小することのアニメーション効果は、Prを通して画像表示サイズを制御することによって達成され得る。
同様に、アップリフトジェスチャに対応するアップリフト量は、画像ブラウジングの拡大比率をリアルタイムに調整するために、又は音楽再生中のボリューム増大比率を調整するために、使用され得る。例えば、画像ブラウジング処理においてユーザがアップリフトジェスチャを使用し、アップリフト量Lr=2である場合に、表示される画像サイズは、オリジナルの画像サイズの2倍に拡大される。一般に、アップリフトジェスチャ処理におけるLrは時間とともにゆっくりと増大する値であり、段階的に拡大することのアニメーション効果は、Lrを通して画像表示サイズを制御することによって達成され得る。
プレスジェスチャ及びアップリフトジェスチャの連続動作の組み合わせは、連続的な画像ズーミング又はボリューム調整操作を起動するために使用され得るとともに、ユーザが、反復的微調整によって適切なサイズに画像を調整すること、又は適切な値にボリュームを調整することを支援する。例えば、もしユーザが“プレス−アップリフト−プレス”ジェスチャを完了し、対応する調整量Arが“0.5−0.7−0.6”(比率)であるならば、表示される画像サイズは、最初にオリジナルの画像サイズの0.5倍に縮小され、それから0.7倍に拡大され、さらに0.6倍に縮小され、連続的ズーミングアニメーション効果を形成する。
上記の実施例における複数の非接触ジェスチャは、特定の実施の間に、例えばスワイプばかりでなくアップリフト及びプレスを同時に認識するとともに、上記の機能を同時に実施するための特定の解決法は、当業者によって知られている技術であり、ここではさらに説明されない、ということを当業者は認識し得る、という点に注意する必要がある。
この実施例は、上記の実施例に基づいて、非接触ジェスチャを使用することにより端末機器を制御するための装置であって、1つ又は複数の光センサを含む端末機器に適用できる装置を開示する。図10において示されるように、装置100は、一定期間における光強度変化に従って光センサによって出力されるとともに光強度変化を反映する複数の光強度信号を受信するように構成された受信ユニット101であって、光強度変化が非接触ジェスチャによって生成される受信ユニット101と、受信ユニットによって受信された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、複数の光強度信号に対応する非接触ジェスチャを認識するように構成されたジェスチャ認識ユニット102と、ジェスチャ認識ユニットによって認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するように構成された実行ユニット103とを具体的に含む。
端末機器が1つの光センサを含む場合に、ジェスチャ認識ユニットは、スワイプジェスチャ、アップリフトジェスチャ、プレスジェスチャ、及び少なくとも1つのアップリフトジェスチャと少なくとも1つプレスジェスチャを認識するように構成され得る。
端末機器がN個の光センサを含む場合に、ジェスチャ認識ユニットは、上向きジェスチャ、下向きジェスチャ、左向きジェスチャ、右向きジェスチャ、及び少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャを認識するように構成され得る。
端末機器がモーションセンサ又はオリエンテーションセンサを含む場合に、装置は、モーションセンサ又はオリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にないならば、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定するステップを起動しないように構成された携帯電話状態判定ユニット111であって、該ステップがジェスチャ認識ユニットによって実行される携帯電話状態判定ユニット111を更に含む。
任意に、装置は、アップリフトジェスチャのアップリフト量を取得するように構成されたアップリフト量取得ユニット112と、プレスジェスチャのプレス量を取得するように構成されたプレス量取得ユニット113とを更に含む。
任意に、ジェスチャ認識ユニットは、受信ユニットが光センサによって出力された光強度信号のうちの1つを受信するたびに、光センサによって出力され、受信ユニットによって前回受信されたか又は複数回受信された光強度信号のうちの1つ又は複数に従って、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定するように構成されたリアルタイムジェスチャ認識サブユニット114を含む。
任意に、実行ユニットは、画像又は電子ブックアプリケーションに対して、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャにそれぞれ対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するように構成されたスワイプジェスチャ実行サブユニット115と、画像アプリケーション又は電子ブックアプリケーションに対して、プレスジェスチャ及び/又はアップリフトジェスチャに対応するズーム操作を実行するように構成されたアップリフト又はプレスジェスチャ実行サブユニット116と、アップリフト量取得ユニットによって取得されたアップリフトジェスチャのアップリフト量に従って、画像アプリケーション又は電子ブックアプリケーションに対して、アップリフトジェスチャに対応するズーム操作を実行するように構成された第1のズーム実行サブユニット117であって、ズーム操作が実行される場合にアップリフト量取得ユニットによって取得されたアップリフト量に従ってズーム比が決定される第1のズーム実行サブユニット117と、プレス量取得ユニットによって取得されたプレスジェスチャのプレス量に従って、画像アプリケーション又は電子ブックアプリケーションに対して、プレスジェスチャに対応するズーム操作を実行するように構成された第2のズーム実行サブユニット118であって、ズーム操作が実行される場合にプレス量取得ユニットによって取得されたプレス量に従ってズーム比が決定される第2のズーム実行サブユニット118と含む。
この実施例において、装置におけるユニットの分割は、ユニットの論理的分割であるとともに、実際の製品において、一対一ベースでそれらのユニットに対応する物理的ユニットが存在することを示していない、という点に注意する必要がある。ユニットの具体的な機能の実装に関して、前述の実施例における解決法に対する参照が行われ得るとともに、事前設定された規則性に基づいて特定のジェスチャを検出する方法が、この実施例に対して同様に適用できる。
上記の実施例に基づいて、この実施例は、図12で示されたように、プロセッサ121、メモリ122、及び光センサ123を含む端末機器120であって、光センサ123が、光強度変化を反映する複数の光強度信号を出力するとともに、1つ又は複数の光センサが含まれ得るように構成され、メモリ122が、上記の実施例において非接触ジェスチャを使用することにより端末機器を制御するための方法で使われるアプリケーションプログラムを格納するように構成され、プロセッサが、メモリ内のプログラムを読み出すとともに、下記の、一定期間における光強度変化に従って光センサによって出力されるとともに光強度変化を反映する複数の光強度信号を受信するステップであって、光強度変化が非接触ジェスチャによって生成される、ステップと、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、複数の光強度信号に対応する非接触ジェスチャを認識するステップと、認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するステップとを実行するように構成される、端末機器120を開示する。
さらに、端末機器は、モーションセンサ124又はオリエンテーションセンサ125を含み、CPUは、メモリに格納されたアプリケーションプログラムを実行している間に、下記の、モーションセンサ124又はオリエンテーションセンサ125に従って、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にないならば、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかをジェスチャ認識ユニットによって判定するステップを起動しないか、又はもし安定した状態にあるならば、該ステップを起動するステップを実行する。
この実施例において、メモリに格納されたアプリケーションプログラムがCPUによって実行される場合に、アプリケーションプログラムは、この実施例において説明された処理ステップを実行するだけでなく、前述の実施例における様々な非接触ジェスチャを認識するステップ、及び(プレス量を取得することのような)処理の他の処理ステップを達成し、それらはここでは再度詳細に説明されない。一方、具体的にプログラム実行を実施するために、実施例によって提供される解決法に基づいてどのようにプログラミングを行うかは、当業者によって知られている技術であり、それは同様にここでは再度詳細に説明されない。
前述の実施例の説明を通して、本発明がハードウェア、又はファームウェア、又はそれらの組み合わせによって実施され得るということを、当業者は明らかに理解し得る。本発明がソフトウェアによって実施される場合に、上記の機能は、コンピュータ読み取り可能な媒体に格納され得るか、又は、伝送用のコンピュータ読み取り可能な媒体上の1つ又は複数の命令若しくはコードになる。コンピュータ読み取り可能な媒体は、コンピュータ記憶媒体及び通信媒体を含み、ここで、通信媒体は、1つの場所から別の場所にコンピュータプログラムを都合良く伝送するためのあらゆる媒体を含む。記憶媒体は、コンピュータがアクセスすることができるあらゆる利用可能な媒体であり得る。例えば、コンピュータ読み取り可能な媒体は、RAM、ROM、EEPROM、光ディスク、又は他の光ディスク記憶装置、そして磁気ディスク記憶媒体若しくは他の磁気記憶装置、又は命令若しくはデータ構造形式を有する所望のプログラムコードを伝送又は格納するために使用されることができるあらゆる他のコンピュータアクセス可能媒体を含み得るが、しかしそれに限定されない。さらに、あらゆる接続は、適切に、コンピュータ読み取り可能な媒体になり得る。例えば、同軸ケーブル、光ケーブル、ツイストペアケーブル、若しくはデジタル加入者回線(DSL)、又は、赤外線、無線、及びマイクロ波のような無線技術を使用することにより、ウェブサイト、サーバ、又は他の遠隔ソースからソフトウェアが送信される場合、同軸ケーブル、光ケーブル、ツイストペアケーブル、若しくはDSL、又は、赤外線、無線、及びマイクロ波のような無線技術は、媒体の付属物に含まれる。例えば、本発明において使用されるディスク(Disk)及びディスク(disc)は、光ディスク(CD)、レーザーディスク(登録商標)、光ディスク、デジタル多目的ディスク(DVD)、フロッピー(登録商標)ディスク、及びブルーレイディスクを含み、ここで、ディスク(Disk)は、一般に、データを磁気的に複製するために使用され、一方ディスク(disc)は、データを光学的に複製するためにレーザー光線を使用する。上記の組み合わせは、コンピュータ読み取り可能な媒体の保護範囲内に同様に含まれるべきである。
結論として、上記の説明は、単に本発明の代表的な実施例であるが、しかし本発明の保護範囲を限定することを意図していない。本発明の精神及び原理の中で行われるあらゆる変更、同等の置換、又は改善は、本発明の保護範囲に含まれるべきである。
21 光センサ
100 装置
101 受信ユニット
102 ジェスチャ認識ユニット
103 実行ユニット
111 携帯電話状態判定ユニット
112 アップリフト量取得ユニット
113 プレス量取得ユニット
114 リアルタイムジェスチャ認識サブユニット
115 スワイプジェスチャ実行サブユニット
116 アップリフト又はプレスジェスチャ実行サブユニット
117 第1のズーム実行サブユニット
118 第2のズーム実行サブユニット
120 端末機器
121 プロセッサ
122 メモリ
123 光センサ
124 オリエンテーションセンサ
125 モーションセンサ
現存する非接触ジェスチャ認識技術は、2次元及び3次元の光学的画像認識方法などを主として含む。従来技術は、少なくとも下記の、スマート端末のハードウェア構成についての高いアルゴリズム複雑度、大きな電力消費、及び特別要求事項という欠点を有し、したがって、スマート端末は、スマート端末の現存するハードウェア構成に基づいて、ソフトウェアを介して簡単かつ能率的に非接触ジェスチャを使用することによって制御されることができない。
第1の態様の第2の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは右スワイプジェスチャを含むとともに、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの左から右へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第3の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは左スワイプジェスチャを含むとともに、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第5の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは下スワイプジェスチャを含むとともに、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第6の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは上スワイプジェスチャを含むとともに、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第2から第7の可能な実装例のいずれか1つを参照すると、第9の可能な実装例において、前記第2の所定期間は、前記第1の光センサによって出力された前記複数の光強度信号に対応する第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
第1の態様の第10の可能な実装例を参照すると、第1の態様の第11の可能な実装例において、前記第1のしきい値は、前記スワイプジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第2のしきい値は、前記光センサが遮蔽されたあとで前記スワイプジェスチャを生成する前記操作オブジェクトが離れる場合の光強度の標準的な増加量である。
第1の態様の第14の可能な実装例において、前記光センサは第1の光センサを含み、前記非接触ジェスチャは少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャを含むとともに、前記プレスジェスチャは、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャは、前記第1の光センサの前記感知範囲における前記操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に減少変動規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第1の態様の第14又は第17の可能な実装例を参照すると、第20の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻は前記第5の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則は含み、前記複数の光強度信号の中の前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より小さくないこと、又は前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様の第12から第17の可能な実装例のいずれか1つを参照すると、第21の可能な実装例において、前記第1の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値であり、前記第2の所定期間は、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に前記光センサが遮蔽される持続時間の標準値である
第1の態様の第2から第7の可能な実装例のいずれか1つを参照すると、第26の可能な実装例において、前記非接触ジェスチャは、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションは、画像アプリケーション又は電子ブックアプリケーションを含み、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャに対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するステップを含む。
第1の態様の第12、第15、及び第18の可能な実装例のいずれか1つを参照すると、第28の可能な実装例において、当該方法は、前記アップリフトジェスチャのアップリフト量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、画像アプリケーション又は電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記アップリフト量に従ってズーム比が決定されるステップを含む。
第1の態様の第13、第16、及び第19の可能な実装例のいずれか1つを参照すると、第29の可能な実装例において、当該方法は、前記プレスジェスチャのプレス量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、画像アプリケーション又は電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記プレス量に従ってズーム比が決定されるステップを含む。
第1の態様の第17又は第34の可能な実装例を参照すると、第35の可能な実装例において、前記複数の光強度信号は、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻は前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻は前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻は前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻は前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻は前記第5の光強度信号を受信する時刻より遅いとともに、第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則は含み、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることは含み、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則は含み、前記複数の光強度信号の中の前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より小さくないこと、又は前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることは含む。
第1の態様、又は第1の態様の第1から第41の可能な実装例のいずれか1つを参照すると、第42の可能な実装例において、前記非接触ジェスチャは、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションは、画像アプリケーション又は電子ブックアプリケーションを含み、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャに対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するステップを含む。
第1の態様の第12、第15、及び第34の可能な実装例のいずれか1つを参照すると、第44の可能な実装例において、当該方法は、前記アップリフトジェスチャのアップリフト量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、画像アプリケーション又は電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記アップリフト量に従ってズーム比が決定されるステップを含む。
第1の態様の第13、第17、及び第32の可能な実装例のいずれか1つを参照すると、第45の可能な実装例において、当該方法は、前記プレスジェスチャのプレス量を取得するステップを更に含み、前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップは、画像アプリケーション又は電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記プレス量に従ってズーム比が決定されるステップを含む。
第2の態様において、本発明は、非接触ジェスチャを使用することにより端末機器を制御するための装置であって、当該装置が1つ又は複数の光センサを含む端末機器に適用でき、当該装置が、一定期間における光強度変化に従って前記光センサによって出力されるとともに前記光強度変化を反映する複数の光強度信号を受信するように構成された受信ユニットであって、前記光強度変化が前記非接触ジェスチャによって生成される前記受信ユニットと、前記受信ユニットによって受信された前記の出力された複数の光強度信号の変化規則が前記非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、前記複数の光強度信号に対応する前記非接触ジェスチャを認識するように構成されたジェスチャ認識ユニットと、前記ジェスチャ認識ユニットによって認識された前記非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するように構成された実行ユニットとを含む、装置を提供する。
第2の態様の第2の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは右スワイプジェスチャを含むとともに、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの左から右へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第3の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは左スワイプジェスチャを含むとともに、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第2又は第3の可能な実装例を参照すると、前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の水平距離が存在し、前記水平距離は最大である。
第2の態様の第4の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは下スワイプジェスチャを含むとともに、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第5の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは上スワイプジェスチャを含むとともに、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第2から第5の可能な実装例のいずれか1つを参照すると、前記第2の所定期間は、前記第1の光センサによって出力された前記複数の光強度信号に対応する第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
第2の態様の第6の可能な実装例において、前記複数の光センサは第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャは上スワイプジェスチャを含むとともに、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則は含む。
第2の態様の第2から第7の可能な実装例のいずれか1つを参照すると、第9の可能な実装例において、前記第2の所定期間は、前記第1の光センサによって出力された前記複数の光強度信号に対応する第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である。
第2の態様、又は第2の態様の第1から第24の可能な実装例のいずれか1つを参照すると、第25の可能な実装例において、前記端末機器がモーションセンサ又はオリエンテーションセンサを更に含み、当該装置は、前記モーションセンサ又は前記オリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にあるならば、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定するステップを起動するように構成された携帯電話状態判定ユニットであって、前記ステップが前記ジェスチャ認識ユニットによって実行される前記携帯電話状態判定ユニットを更に含む。
第2の態様の第2から第7の可能な実装例のいずれか1つを参照すると、第27の可能な実装例において、前記非接触ジェスチャは、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションは、画像アプリケーション又は電子ブックアプリケーションを含み、前記上スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャは、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、前記実行ユニットは、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャに対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するように構成されたスワイプジェスチャ実行サブユニットを含む。
第2の態様の第12、第15、及び第18の可能な実装例のいずれか1つを参照すると、第29の可能な実装例において、当該装置は、前記アップリフトジェスチャのアップリフト量を取得するように構成されたアップリフト量取得ユニットを更に含み、前記実行ユニットは、画像アプリケーション又は電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するように構成された第1のズーム実行サブユニットであって、前記ズーム操作が実行される場合に前記アップリフト量取得ユニットによって取得された前記アップリフト量に従ってズーム比が決定される前記第1のズーム実行サブユニットを含む。
第2の態様の第13、第16、及び第19の可能な実装例のいずれか1つを参照すると、第30の可能な実装例において、当該装置は、前記プレスジェスチャのプレス量を取得するように構成されたプレス量取得ユニットを更に含み、前記実行ユニットは、画像アプリケーション又は電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するように構成された第2のズーム実行サブユニットであって、前記ズーム操作が実行される場合に前記プレス量取得ユニットによって取得された前記プレス量に従ってズーム比が決定される前記第2のズーム実行サブユニットを含む。
本発明の実施例における技術的解決法を更に明瞭に例示するために、下記の事項は、実施例を説明するために必要とされる添付図面を簡潔に紹介する。明らかに、添付図面は単に本発明のいくつかの実施例を示すだけであるとともに、当業者は、創造的な努力なしでこれらの添付図面から他の図面を更に導き出すことができる。
本発明の実施例1は、非接触ジェスチャを使用することにより端末機器を制御するための方法であって、1つ又は複数の光センサを含む端末機器に適用できる方法を提供する。この実施例における端末機器は、スマートフォン、タブレットコンピュータ、ノート型コンピュータなどであり得るとともに、この実施例における光センサ(光センサは環境光センサとも呼ばれる)は、可視の光強度を感知するセンサである。光センサは、スマートフォン又はタブレットコンピュータ上で広く使用されるとともに、現在のところ、大部分のスマート端末は、携帯電話の前面画面の上部、及びタブレットコンピュータの前面画面の上部又は右側に一般に配置され、端末機器が画面輝度を自動的に調整するのに周囲の可視光の強さを感知するために主に使用される光センサを備えている。例えば、戸外のユーザが日中に端末機器を使用する場合に、画面輝度は、強い光に抵抗するために自動的に最大に調整され、暗い環境光を有する建物にユーザが戻る場合に、画面輝度は、自動的に低減される。
この実施例において、端末アプリケーションは、電子ブックを読むこと、ウェブページをブラウズすること、画像をブラウズすること、音楽を再生すること、及びビデオを再生することのようなアプリケーションであり得る。対応する制御操作は、ページフリッピング、上下ドラッギング、画像ズーミング、ボリューム調整、再生又は一時停止などであり得る。特定の操作及び対応するアプリケーションはこれに限定されず、例えば、ページフリッピングは、電子ブック、ウェブページをブラウズすること、及び画像のようなアプリケーションを対象にしても良く、再生又は一時停止は、音楽及びビデオを再生することのようなアプリケーションを対象にしても良い。この実施例において、端末アプリケーションに関する、非接触ジェスチャに対応する制御操作の方法は、あらかじめ設定され得るか、又はユーザによって同様に定義され得る。
さらに、ジェスチャ動作を誤って誘発し得る光変化を、端末機器の震動が同様に引き起こすので、端末機器の震動によって引き起こされる誤操作を回避するために、端末機器が現在比較的安定した状態にあるかどうかを最初に判定することが必要であり、それによって非接触ジェスチャの認識を起動するかどうかを判定する。本発明の実施例は、端末機器が比較的安定した状態にあるかどうかを判定するために、モーションセンサ又はオリエンテーションセンサを使用するとともに、ジェスチャは、端末機器が比較的安定した状態にある時にのみ認識される。もし端末機器が比較的安定した状態にないならば、受信された光強度の変化規則が非接触ジェスチャに対応する変化規則に適合するかどうかを判定することは必要ではない。
任意に、第1の所定期間及び第2の所定期間は、インタフェース上でユーザによって選択されたジェスチャ操作速度に従って同様に適応的に調整され得る。例えば、3つの操作モード“高い、普通、及び低い”が、選択するユーザのためにインタフェース上で提供され、各操作モードは時間しきい値のセットに対応し、ユーザは、ユーザの操作の癖に従ってモードを選択したあとで、使用される時間しきい値を決定する。一般に、選択されたジェスチャ操作速度がより高いならば、対応する時間しきい値はより小さい。
光センサから離れる方向又は光センサに向かう方向は主に鉛直方向のことを指し、すなわち、光センサが端末画面の前面に位置している場合に、プレス又はアップリフトジェスチャは、端末画面に垂直な方向に沿った上下運動のことを指す。少なくとも1つのアップリフト又はプレスジェスチャは、連続的なアップリフト及びプレス動作の組み合わせであり得るとともに、プレス及びアップリフトジェスチャは数回繰り返して実行されても良い。
具体的には、第1の所定期間は、プレスジェスチャ又はアップリフトジェスチャを生成する操作オブジェクトによって光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値である。第2の所定期間は、プレスジェスチャ又はアップリフトジェスチャを生成する操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に光センサが遮蔽される持続時間の標準値である。第3の所定期間は、プレスジェスチャ又はアップリフトジェスチャを認識する検出時刻とプレスジェスチャ又はアップリフトジェスチャを生成する操作オブジェクトによって光センサを遮蔽する時刻との間の時間間隔の標準値である。実施例2におけるスワイプジェスチャの第1の所定期間は、この実施例におけるプレスジェスチャ、アップリフトジェスチャ、又は、少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャの第1の所定期間より短い。第3のしきい値は、光センサが、アップリフトジェスチャ、又はプレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する操作オブジェクトによって、完全に遮蔽されるか、部分的に遮蔽されるか、又は影を投げ掛けられる場合の光強度の標準的な減少量である。第4のしきい値は、アップリフトジェスチャ、又はプレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する操作オブジェクトによって光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、静止している操作オブジェクトによってもたらされる光強度の標準的な減少量又は増加量である。
具体的には、一例として2つの光センサを使用すると、2つの光センサが上スワイプ又は下スワイプジェスチャを認識するために図7において使用される場合に、2つの光センサの好ましい配置位置は、2つの光センサの相対的な配置位置の間の垂直距離を最大限にする位置であり、ここで、垂直距離は、2つの光センサがy軸に投影されたあとの相対距離のことを指す。具体的な認識方法は、第1の光センサ701及び第2の光センサ702によってスワイプジェスチャを検出する時刻の分配特性に従って、上スワイプ又は下スワイプ方向を判定することである。具体的には、その方法は下記の事項を含む。
もし3つの光センサによってスワイプジェスチャを認識する時系列が光センサ801、光センサ802、及び光センサ803であり、光センサ801及び光センサ802によってスワイプジェスチャを検出する時間差と光センサ802及び光センサ803によってスワイプジェスチャを検出する時間差の両方が時間しきい値T_6より小さいならば、スワイプジェスチャは右スワイプジェスチャであると認識される。同様に、もし3つの光センサによってスワイプジェスチャを認識する時系列が光センサ803、光センサ802、及び光センサ801であり、光センサ802及び光センサ803によってスワイプジェスチャを検出する時間差と光センサ801及び光センサ802によってスワイプジェスチャを検出する時間差の両方がしきい値T_6より小さいならば、スワイプジェスチャは左スワイプジェスチャであると認識される。
端末機器がN個の光センサを含む場合に、ジェスチャ認識ユニットは、上スワイプジェスチャ、下スワイプジェスチャ、左スワイプジェスチャ、右スワイプジェスチャ、及び少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャを認識するように構成され得る。
さらに、端末機器は、モーションセンサ125又はオリエンテーションセンサ124を含み、CPUは、メモリに格納されたアプリケーションプログラムを実行している間に、下記の、モーションセンサ125又はオリエンテーションセンサ124に従って、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にないならば、出力された複数の光強度信号の変化規則が非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかをジェスチャ認識ユニットによって判定するステップを起動しないか、又はもし安定した状態にあるならば、該ステップを起動するステップを実行する。
この実施例において、メモリに格納されたアプリケーションプログラムがCPUによって実行される場合に、アプリケーションプログラムは、この実施例において説明された処理ステップを実行するだけでなく、前述の実施例における様々な非接触ジェスチャを認識するステップ、及び(プレス量を取得することのような)他の処理ステップを達成し、それらはここでは再度詳細に説明されない。一方、実施例によって提供される解決法に基づいてどのようにプログラミングを行うかは、当業者によって知られている技術であり、それは同様にここでは再度詳細に説明されない。
前述の実施例の説明を通して、本発明がハードウェア、又はファームウェア、又はそれらの組み合わせによって実施され得るということを、当業者は明らかに理解し得る。本発明がソフトウェアによって実施される場合に、上記の機能は、コンピュータ読み取り可能な媒体に格納され得るか、又は、伝送用のコンピュータ読み取り可能な媒体上の1つ又は複数の命令若しくはコードになる。コンピュータ読み取り可能な媒体は、コンピュータ記憶媒体を含む。記憶媒体は、コンピュータがアクセスすることができるあらゆる利用可能な媒体であり得る。例えば、コンピュータ読み取り可能な媒体は、RAM、ROM、EEPROM、光ディスク、又は他の光ディスク記憶装置、そして磁気ディスク記憶媒体若しくは他の磁気記憶装置、又は命令若しくはデータ構造形式を有する所望のプログラムコードを伝送又は格納するために使用されることができるあらゆる他のコンピュータアクセス可能媒体を含み得るが、しかしそれに限定されない。

Claims (62)

  1. 非接触ジェスチャを使用することにより端末機器を制御するための方法であって、当該方法が1つ又は複数の光センサを含む端末機器に適用でき、当該方法が、
    一定期間における光強度変化に従って前記光センサによって出力されるとともに前記光強度変化を反映する複数の光強度信号を受信するステップであって、前記光強度変化が前記非接触ジェスチャによって生成される、ステップと、
    前記複数の光強度信号の変化規則が前記非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、前記複数の光強度信号に対応する前記非接触ジェスチャを認識するステップと、
    前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するステップとを含む、方法。
  2. 前記1つ又は複数の光センサが第1の光センサを含み、前記非接触ジェスチャがスワイプジェスチャを含むとともに、前記スワイプジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの一方向のスワイプを含み、
    複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  3. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが右スワイプジェスチャを含むとともに、前記右スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの左から右へのスワイプを含み、
    第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  4. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが左スワイプジェスチャを含むとともに、前記左スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、
    第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  5. 前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の水平距離が存在し、前記水平距離が最大である、請求項3又は請求項4に記載の方法。
  6. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが下スワイプジェスチャを含むとともに、前記下スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、
    第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  7. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが上スワイプジェスチャを含むとともに、前記上スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、
    第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの上側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  8. 前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の垂直距離が存在し、前記垂直距離が最大である、請求項6又は請求項7に記載の方法。
  9. 前記第1の所定期間が、いずれかのセンサに関してユーザが一方向のスワイプをする場合に必要とされる時間の標準値であり、前記一方向のスワイプが、下記の、左から右へのスワイプ、右から左へのスワイプ、上から下へのスワイプ、及び下から上へのスワイプのうちのいずれか1つであり得る、請求項2から請求項8のいずれか一項に記載の方法。
  10. 前記第2の所定期間が、前記第1の光センサによって出力された前記複数の光強度信号に対応する前記第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する前記第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である、請求項3から請求項8のいずれか一項に記載の方法。
  11. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、及び第3の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅いとともに、
    前記第2の光強度信号によって反映される信号強度が、第1のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記減少変化規則が含み、
    前記第3の光強度信号によって反映される信号強度が、第2のしきい値より小さくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則が含む、請求項2から請求項10のいずれか一項に記載の方法。
  12. 前記第1のしきい値が、前記スワイプジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第2のしきい値が、前記光センサが遮蔽されたあとで前記スワイプジェスチャを生成する前記操作オブジェクトが離れる場合の光強度の標準的な増加量であることを含む、請求項11に記載の方法。
  13. 前記光センサが第1の光センサを含み、前記非接触ジェスチャがアップリフトジェスチャを含むとともに、前記アップリフトジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、
    複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に増加変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  14. 前記複数の光センサがN個の光センサであり、前記非接触ジェスチャがアップリフトジェスチャを含むとともに、前記アップリフトジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、
    前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、増加変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含み、
    N、A、及びBが1より大きい整数であり、AがNより大きくないとともに第1のしきい値より小さくなく、そしてBがAより大きくないとともに第2のしきい値より小さくない、請求項1に記載の方法。
  15. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻が前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻が前記第4の光強度信号を受信する時刻より遅いとともに、
    第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則が含み、
    前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることが含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則が含み、
    前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることが含む、請求項13又は請求項14に記載の方法。
  16. 前記光センサが第1の光センサを含み、前記非接触ジェスチャがプレスジェスチャを含むとともに、前記プレスジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、
    複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に第2の減少変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  17. 前記複数の光センサがN個の光センサであり、前記非接触ジェスチャがプレスジェスチャを含むとともに、前記プレスジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、
    前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第2の減少変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含み、
    N、A、及びBが1より大きい整数であり、AがNより大きくないとともに第1のしきい値より小さくなく、そしてBがAより大きくないとともに第2のしきい値より小さくない、請求項1に記載の方法。
  18. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻が前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻が前記第4の光強度信号を受信する時刻より遅いとともに、
    第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則が含み、
    前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることが含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則が含み、
    前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることが含む、請求項16又は請求項17に記載の方法。
  19. 前記光センサが第1の光センサを含み、前記非接触ジェスチャが少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャを含むとともに、前記プレスジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャが、前記第1の光センサの前記感知範囲における前記操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、
    光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に減少変動規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項1に記載の方法。
  20. 前記複数の光センサがN個の光センサであり、前記非接触ジェスチャが少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャを含むとともに、前記プレスジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における前記操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、
    前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、減少変動規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含み、
    N、A、及びBが1より大きい整数であり、AがNより大きくないとともに第1のしきい値より小さくなく、そしてBがAより大きくないとともに第2のしきい値より小さくない、請求項1に記載の方法。
  21. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻が前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻が前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻が前記第5の光強度信号を受信する時刻より遅いとともに、
    第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則が含み、
    前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることが含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則が含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則が含み、
    前記複数の光強度信号の中の前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より小さくないこと、又は前記第6の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることが含む、請求項19又は請求項20に記載の方法。
  22. 前記第1の所定期間が、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値であり、
    前記第2の所定期間が、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に前記光センサが遮蔽される持続時間の標準値である、請求項13から請求項18のいずれか一項に記載の方法。
  23. 前記第3の所定期間が、前記プレスジェスチャ又は前記アップリフトジェスチャを認識する検出時刻と前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻との間の時間間隔の標準値である、請求項15、請求項18、又は請求項21に記載の方法。
  24. 前記第3のしきい値が、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、
    前記第4のしきい値が、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、前記静止している操作オブジェクトによってもたらされる光強度の標準的な減少量又は増加量であることを含む、請求項15、請求項18、又は請求項21に記載の方法。
  25. 前記第1のしきい値がN/2より小さくないとともに、前記第2のしきい値がA/2より小さくない、請求項14、請求項17、又は請求項20に記載の方法。
  26. 前記端末機器がモーションセンサ又はオリエンテーションセンサを含み、前記モーションセンサ又は前記オリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にあるならば、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップを起動するステップを更に含む、請求項1から請求項25に記載の方法。
  27. 前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップが、
    前記光センサによって出力された前記光強度信号のうちの1つが受信されるたびに、前記光センサによって出力され、前回受信されたか又は複数回受信された前記光強度信号のうちの1つ又は複数に従って、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定するステップを含む、請求項1から請求項26のいずれか一項に記載の方法。
  28. 前記非接触ジェスチャが、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含み、
    前記上スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、
    前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップが、
    前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャにそれぞれ対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するステップを含む、請求項1から請求項27のいずれか一項に記載の方法。
  29. 前記非接触ジェスチャが、プレスジェスチャ及び/又はアップリフトジェスチャを含み、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含む場合に、
    前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップが、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャ及び/又は前記アップリフトジェスチャに対応するズーム操作を実行するステップを含む、請求項1から請求項27のいずれか一項に記載の方法。
  30. 当該方法が、前記アップリフトジェスチャのアップリフト量を取得するステップを更に含み、
    前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップが、
    前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記アップリフト量に従ってズーム比が決定されるステップを含む、請求項13又は請求項16又は請求項19に記載の方法。
  31. 当該方法が、前記プレスジェスチャのプレス量を取得するステップを更に含み、
    前記認識された非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行する前記ステップが、
    前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するステップであって、前記ズーム操作が実行される場合に前記プレス量に従ってズーム比が決定されるステップを含む、請求項14又は請求項17又は請求項20に記載の方法。
  32. 非接触ジェスチャを使用することにより端末機器を制御するための装置であって、当該装置が1つ又は複数の光センサを含む端末機器に適用でき、当該装置が、
    一定期間における光強度変化に従って前記光センサによって出力されるとともに前記光強度変化を反映する複数の光強度信号を受信するように構成された受信ユニットであって、前記光強度変化が前記非接触ジェスチャによって生成される前記受信ユニットと、
    前記受信ユニットによって受信された前記複数の光強度信号の変化規則が前記非接触ジェスチャに対応する事前設定された変化規則に適合するかどうかを判定し、もし適合するならば、前記複数の光強度信号に対応する前記非接触ジェスチャを認識するように構成されたジェスチャ認識ユニットと、
    前記ジェスチャ認識ユニットによって認識された前記非接触ジェスチャに対応する制御操作を端末アプリケーションに対して実行するように構成された実行ユニットとを含む、装置。
  33. 前記1つ又は複数の光センサが第1の光センサを含み、前記非接触ジェスチャがスワイプジェスチャを含むとともに、前記スワイプジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの一方向のスワイプを含み、
    複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  34. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが右スワイプジェスチャを含むとともに、前記右スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの左から右へのスワイプを含み、
    第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  35. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが左スワイプジェスチャを含むとともに、前記左スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの右から左へのスワイプを含み、
    第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサが前記第2の光センサの左側に置かれることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  36. 前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の水平距離が存在し、前記水平距離が最大である、請求項34又は請求項35に記載の装置。
  37. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが下スワイプジェスチャを含むとともに、前記下スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの上から下へのスワイプを含み、
    第2の所定期間内に、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサの配置位置が前記第2の光センサの配置位置の上側にあることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  38. 前記複数の光センサが第1の光センサ及び第2の光センサを含み、前記非接触ジェスチャが上スワイプジェスチャを含むとともに、前記上スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの感知範囲における操作オブジェクトの下から上へのスワイプを含み、
    第2の所定期間内に、前記第2の光センサによって出力された複数の光強度信号によって反映される光強度が、第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合し、そのあとで、前記第1の光センサによって出力された複数の光強度信号によって反映される光強度が、前記第1の所定期間において、減少変化規則に適合し、次に増加変化規則に適合することを認識し、前記第1の光センサの配置位置が前記第2の光センサの配置位置の上側にあることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  39. 前記端末機器が複数の光センサを含む場合に、あらゆる2つの隣接する光センサの配置位置の間に同等の垂直距離が存在し、前記垂直距離が最大である、請求項37又は請求項38に記載の装置。
  40. 前記第1の所定期間が、いずれかのセンサに関してユーザが一方向のスワイプをする場合に必要とされる時間の標準値であり、前記一方向のスワイプが、下記の、左から右へのスワイプ、右から左へのスワイプ、上から下へのスワイプ、及び下から上へのスワイプのうちのいずれか1つであり得る、請求項33から請求項39のいずれか一項に記載の装置。
  41. 前記第2の所定期間が、前記第1の光センサによって出力された前記複数の光強度信号に対応する前記第1のスワイプジェスチャを認識する第1の時刻と前記第2の光センサによって出力された前記複数の光強度信号に対応する前記第2のスワイプジェスチャを認識する第2の時刻との間の時間間隔の標準値である、請求項34から請求項39のいずれか一項に記載の装置。
  42. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、及び第3の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅いとともに、
    前記第2の光強度信号によって反映される信号強度が、第1のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記減少変化規則が含み、
    前記第3の光強度信号によって反映される信号強度が、第2のしきい値より小さくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則が含む、請求項33から請求項41のいずれか一項に記載の装置。
  43. 前記第1のしきい値が、前記スワイプジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、前記第2のしきい値が、前記光センサが遮蔽されたあとで前記スワイプジェスチャを生成する前記操作オブジェクトが離れる場合の光強度の標準的な増加量であることを含む、請求項42に記載の装置。
  44. 前記光センサが第1の光センサを含み、前記非接触ジェスチャがアップリフトジェスチャを含むとともに、前記アップリフトジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、
    複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に増加変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  45. 前記複数の光センサがN個の光センサであり、前記非接触ジェスチャがアップリフトジェスチャを含むとともに、前記アップリフトジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、
    前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、増加変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含み、
    N、A、及びBが1より大きい整数であり、AがNより大きくないとともに第1のしきい値より小さくなく、そしてBがAより大きくないとともに第2のしきい値より小さくない、請求項32に記載の装置。
  46. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻が前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻が前記第4の光強度信号を受信する時刻より遅いとともに、
    第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則が含み、
    前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることが含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きいことを、前記増加変化規則が含み、
    前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることが含む、請求項44又は請求項45に記載の装置。
  47. 前記光センサが第1の光センサを含み、前記非接触ジェスチャがプレスジェスチャを含むとともに、前記プレスジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、
    複数の光強度信号によって反映される光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に第2の減少変化規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  48. 前記複数の光センサがN個の光センサであり、前記非接触ジェスチャがプレスジェスチャを含むとともに、前記プレスジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、
    前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第2の減少変化規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含み、
    N、A、及びBが1より大きい整数であり、AがNより大きくないとともに第1のしきい値より小さくなく、そしてBがAより大きくないとともに第2のしきい値より小さくない、請求項32に記載の装置。
  49. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、及び第5の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻が前記第3の光強度信号を受信する時刻より遅く、そして前記第5の光強度信号を受信する時刻が前記第4の光強度信号を受信する時刻より遅いとともに、
    第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則が含み、
    前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることが含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さいことを、前記第2の減少変化規則が含み、
    前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることが含む、請求項47又は請求項48に記載の装置。
  50. 前記光センサが第1の光センサを含み、前記非接触ジェスチャが少なくとも1つのアップリフトジェスチャ及び少なくとも1つのプレスジェスチャを含むとともに、前記プレスジェスチャが、前記第1の光センサの感知範囲における操作オブジェクトの前記第1の光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャが、前記第1の光センサの前記感知範囲における前記操作オブジェクトの前記第1の光センサから離れる方向における漸進運動を含み、
    光強度が、第1の減少変化規則に適合し、それから第1の所定期間において不変のままとなり、次に減少変動規則に適合し、そのあとで第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含む、請求項32に記載の装置。
  51. 前記複数の光センサがN個の光センサであり、前記非接触ジェスチャが少なくとも1つのプレスジェスチャ及び少なくとも1つのアップリフトジェスチャを含むとともに、前記プレスジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における操作オブジェクトの前記少なくとも2つの光センサに向かう方向における漸進運動を含み、前記アップリフトジェスチャが、前記N個の光センサの中の少なくとも2つの光センサの感知範囲における前記操作オブジェクトの前記少なくとも2つの光センサから離れる方向における漸進運動を含み、
    前記N個の光センサの中のA個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、第1の減少変化規則にそれぞれ適合し、それから第1の所定期間において不変のままとなり、次に前記A個の光センサの中のB個の光センサのそれぞれによって出力された複数の光強度信号によって反映される光強度が、減少変動規則にそれぞれ適合し、それから前記B個の光センサのうちの少なくとも1つによって出力された光強度信号によって反映される光強度が、それぞれ第2の所定期間において不変のままとなることを、前記非接触ジェスチャに対応する前記事前設定された変化規則が含み、
    N、A、及びBが1より大きい整数であり、AがNより大きくないとともに第1のしきい値より小さくなく、そしてBがAより大きくないとともに第2のしきい値より小さくない、請求項32に記載の装置。
  52. 前記複数の光強度信号が、第1の光強度信号、第2の光強度信号、第3の光強度信号、第4の光強度信号、第5の光強度信号、及び第6の光強度信号を含み、前記第2の光強度信号を受信する時刻が前記第1の光強度信号を受信する時刻より遅く、前記第3の光強度信号を受信する時刻が前記第2の光強度信号を受信する時刻より遅く、前記第4の光強度信号を受信する時刻が前記第3の光強度信号を受信する時刻より遅く、前記第5の光強度信号を受信する時刻が前記第4の光強度信号を受信する時刻より遅く、そして前記第6の光強度信号を受信する時刻が前記第5の光強度信号を受信する時刻より遅いとともに、
    第3の所定期間において、前記第2の光強度信号によって反映される信号強度が、第3のしきい値より小さくない減少量で、前記複数の光強度信号の中の前記第1の光強度信号によって反映される信号強度より小さいことを、前記第1の減少変化規則が含み、
    前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より小さくないこと、又は前記第3の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第2の光強度信号によって反映される信号強度より大きくないことを、前記第1の所定期間において不変のままとなることが含み、
    前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より小さく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きいこと、又は前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第3の光強度信号によって反映される信号強度より大きく、さらには前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さいことを、前記減少変動規則が含み、
    前記複数の光強度信号の中の前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない増加量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より小さくないこと、又は前記第5の光強度信号によって反映される信号強度が、第4のしきい値より大きくない減少量で、前記複数の光強度信号の中の前記第4の光強度信号によって反映される信号強度より大きくないことを、前記第2の所定期間において不変のままとなることが含む、請求項50又は請求項51に記載の装置。
  53. 前記第1の所定期間が、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻とプレスすることを開始するか又はアップリフトすることを開始する時刻との間の時間間隔の標準値であり、
    前記第2の所定期間が、前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトがある程度までプレスされたか又はアップリフトされた後で静止している状態を保つ場合に前記光センサが遮蔽される持続時間の標準値である、請求項44から請求項49のいずれか一項に記載の装置。
  54. 前記第3の所定期間が、前記プレスジェスチャ又は前記アップリフトジェスチャを認識する検出時刻と前記プレスジェスチャ又は前記アップリフトジェスチャを生成する前記操作オブジェクトによって前記光センサを遮蔽する時刻との間の時間間隔の標準値である、請求項46、請求項49、又は請求項51に記載の装置。
  55. 前記第3のしきい値が、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽される場合の光強度の標準的な減少量であり、
    前記第4のしきい値が、前記アップリフトジェスチャ、又は前記プレスジェスチャ、又は少なくとも1つのアップリフトジェスチャと少なくとも1つのプレスジェスチャとを含むジェスチャを生成する前記操作オブジェクトによって前記光センサが遮蔽されたあとで、かつアップリフトすること又はプレスすることを開始する前に、前記静止している操作オブジェクトによってもたらされる光強度の標準的な減少量又は増加量であることを含む、請求項46、請求項49、又は請求項52に記載の装置。
  56. 前記第1のしきい値がN/2より小さくないとともに、前記第2のしきい値がA/2より小さくない、請求項45、請求項48、又は請求項51に記載の装置。
  57. 前記端末機器がモーションセンサ又はオリエンテーションセンサを更に含み、当該装置が、
    前記モーションセンサ又は前記オリエンテーションセンサによって出力された信号値を受信し、携帯電話が比較的安定した状態にあるかどうかを判定し、もし安定した状態にあるならば、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定する前記ステップを起動するように構成された携帯電話状態判定ユニットであって、前記ステップが前記ジェスチャ認識ユニットによって実行される前記携帯電話状態判定ユニットを更に含む、請求項32から請求項56に記載の装置。
  58. 前記ジェスチャ認識ユニットが、
    前記受信ユニットが前記光センサによって出力された前記光強度信号のうちの1つを受信するたびに、前記光センサによって出力され、前記受信ユニットによって前回受信されたか又は複数回受信された前記光強度信号のうちの1つ又は複数に従って、前記の出力された複数の光強度信号の前記変化規則が前記非接触ジェスチャに対応する前記事前設定された変化規則に適合するかどうかを判定するように構成されたリアルタイムジェスチャ認識サブユニットを含む、請求項32から請求項57に記載の装置。
  59. 前記非接触ジェスチャが、上スワイプジェスチャ、又は下スワイプジェスチャ、又は左スワイプジェスチャ、又は右スワイプジェスチャを含むとともに、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含み、
    前記上スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの下から上へのスワイプを含み、前記下スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの上から下へのスワイプを含み、前記左スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの右から左へのスワイプを含み、前記右スワイプジェスチャが、前記第1の光センサ及び前記第2の光センサの前記感知範囲における前記操作オブジェクトの左から右へのスワイプを含み、
    前記実行ユニットが、前記画像又は電子ブックアプリケーションに対して、前記上スワイプジェスチャ、又は前記下スワイプジェスチャ、又は前記左スワイプジェスチャ、又は前記右スワイプジェスチャにそれぞれ対応する、上方向ページフリッピング若しくはドラッギング、下方向ページフリッピング若しくはドラッギング、左方向ページフリッピング若しくはドラッギング、又は右方向ページフリッピング若しくはドラッギングの制御操作を実行するように構成されたスワイプジェスチャ実行サブユニットを含む、請求項32から請求項58に記載の装置。
  60. 前記非接触ジェスチャが、プレスジェスチャ及び/又はアップリフトジェスチャを含み、前記端末アプリケーションが、画像アプリケーション又は電子ブックアプリケーションを含む場合に、前記実行ユニットが、
    前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャ及び/又は前記アップリフトジェスチャに対応するズーム操作を実行するように構成されたアップリフト又はプレスジェスチャ実行サブユニットを含む、請求項32から請求項58のいずれか一項に記載の装置。
  61. 前記アップリフトジェスチャのアップリフト量を取得するように構成されたアップリフト量取得ユニットを更に含み、
    前記実行ユニットが、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記アップリフトジェスチャに対応するズーム操作を実行するように構成された第1のズーム実行サブユニットであって、前記ズーム操作が実行される場合に前記アップリフト量取得ユニットによって取得された前記アップリフト量に従ってズーム比が決定される前記第1のズーム実行サブユニットを含む、請求項44、請求項47、又は請求項50に記載の装置。
  62. 前記プレスジェスチャのプレス量を取得するように構成されたプレス量取得ユニットを更に含み、
    前記実行ユニットが、前記画像アプリケーション又は前記電子ブックアプリケーションに対して、前記プレスジェスチャに対応するズーム操作を実行するように構成された第2のズーム実行サブユニットであって、前記ズーム操作が実行される場合に前記プレス量取得ユニットによって取得された前記プレス量に従ってズーム比が決定される前記第2のズーム実行サブユニットを含む、請求項45、請求項48、又は請求項51に記載の装置。
JP2015533421A 2012-09-29 2013-08-13 非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置 Active JP6114827B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
CN201210375886.9 2012-09-29
CN201210375886 2012-09-29
CN201210387215.4A CN103713735B (zh) 2012-09-29 2012-10-12 一种使用非接触式手势控制终端设备的方法和装置
CN201210387215.4 2012-10-12
PCT/CN2013/081387 WO2014048180A1 (zh) 2012-09-29 2013-08-13 一种使用非接触式手势控制终端设备的方法和装置

Publications (2)

Publication Number Publication Date
JP2015530669A true JP2015530669A (ja) 2015-10-15
JP6114827B2 JP6114827B2 (ja) 2017-04-12

Family

ID=50386933

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015533421A Active JP6114827B2 (ja) 2012-09-29 2013-08-13 非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置

Country Status (6)

Country Link
US (1) US20150205521A1 (ja)
EP (1) EP2884383A4 (ja)
JP (1) JP6114827B2 (ja)
KR (1) KR101710972B1 (ja)
CN (1) CN103713735B (ja)
WO (2) WO2014048104A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018506086A (ja) * 2016-01-19 2018-03-01 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co.,Ltd. ジェスチャー識別方法、装置、プログラム及び記録媒体
JP2018506089A (ja) * 2016-01-19 2018-03-01 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co.,Ltd. ジェスチャーの識別方法及び装置

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102169952B1 (ko) * 2013-10-18 2020-10-26 엘지전자 주식회사 웨어러블 디바이스 및 그 제어 방법
CN105204610A (zh) * 2014-06-18 2015-12-30 王昱人 以动作感应来操控功能的装置
US9300937B2 (en) * 2014-06-26 2016-03-29 Pixart Imaging (Penang) Sdn, Bhd. Color image sensor and operating method thereof
CN104067119B (zh) * 2014-06-27 2016-06-15 深圳华盛昌机械实业有限公司 一种空气质量数值切换方法、装置及空气质量检测仪
TWI536033B (zh) * 2014-07-18 2016-06-01 緯創資通股份有限公司 物體偵測方法及裝置
TWI558982B (zh) * 2014-09-24 2016-11-21 原相科技股份有限公司 光學感測器及光學感測系統
CN104715769B (zh) * 2014-12-30 2017-05-03 广东欧珀移动通信有限公司 一种通过光感应控制无线音乐的方法及系统
CN104635924A (zh) * 2014-12-31 2015-05-20 深圳市金立通信设备有限公司 一种终端
CN104598142A (zh) * 2014-12-31 2015-05-06 深圳市金立通信设备有限公司 一种时间提示方法
CN104598144A (zh) * 2015-02-02 2015-05-06 上海翰临电子科技有限公司 基于红外感应的智能穿戴设备界面切换控制方法
CN104684058B (zh) * 2015-03-23 2018-09-11 广东欧珀移动通信有限公司 一种调节接近传感器发射功率的方法和装置
WO2016155577A1 (en) * 2015-03-30 2016-10-06 Huawei Technologies Co., Ltd. Time related interaction with handheld device
TWI610198B (zh) * 2015-04-17 2018-01-01 鈺立微電子股份有限公司 遙控裝置與根據至少一靜態手勢產生控制指令的方法
CN106406505A (zh) * 2015-07-28 2017-02-15 北京金山安全软件有限公司 一种图片滤镜效果的编辑方法及其系统
CN105117005B (zh) * 2015-08-17 2018-09-14 湖南迪文科技有限公司 基于光线感应的手势识别系统和方法
CN106556963A (zh) * 2015-09-24 2017-04-05 北京京东尚科信息技术有限公司 投影装置以及投影方法
CN105223854A (zh) * 2015-10-08 2016-01-06 重庆蓝岸通讯技术有限公司 应用于智能电子设备的音量控制方法及其装置
US9454259B2 (en) * 2016-01-04 2016-09-27 Secugen Corporation Multi-level command sensing apparatus
WO2017147869A1 (zh) * 2016-03-03 2017-09-08 邱琦 光感式手势识别方法
CN106020639B (zh) * 2016-05-11 2020-04-28 北京小焙科技有限公司 一种按键的非接触式控制方法及系统
US20180081433A1 (en) * 2016-09-20 2018-03-22 Wipro Limited System and method for adapting a display on an electronic device
CN106445149A (zh) * 2016-09-29 2017-02-22 努比亚技术有限公司 一种终端应用的控制方法及装置
CN106445150A (zh) * 2016-09-29 2017-02-22 努比亚技术有限公司 一种终端应用的操作方法及装置
CN106527685A (zh) * 2016-09-30 2017-03-22 努比亚技术有限公司 一种终端应用的控制方法及装置
US10120455B2 (en) * 2016-12-28 2018-11-06 Industrial Technology Research Institute Control device and control method
US10477277B2 (en) * 2017-01-06 2019-11-12 Google Llc Electronic programming guide with expanding cells for video preview
WO2018147254A1 (ja) 2017-02-10 2018-08-16 パナソニックIpマネジメント株式会社 車両用入力装置
KR20180098021A (ko) * 2017-02-24 2018-09-03 삼성전자주식회사 전자장치 및 그 제어방법
CN106875922B (zh) * 2017-03-17 2021-03-30 深圳Tcl数字技术有限公司 显示终端显示亮度调整方法和装置
CN107273829A (zh) * 2017-06-02 2017-10-20 云丁网络技术(北京)有限公司 一种智能猫眼手势识别方法和系统
CN108984042B (zh) * 2017-06-05 2023-09-26 青岛胶南海尔洗衣机有限公司 一种非接触式操控装置、信号处理方法及其家用电器
CN107329664A (zh) * 2017-06-27 2017-11-07 广东欧珀移动通信有限公司 阅读处理方法及相关产品
WO2019061222A1 (zh) * 2017-09-29 2019-04-04 深圳传音通讯有限公司 多媒体内容播放控制方法、终端、存储介质及计算机程序
EP3477452B1 (en) * 2017-10-27 2022-07-06 Vestel Elektronik Sanayi ve Ticaret A.S. Electronic device and method of operating an electronic device
CN109140549B (zh) * 2017-12-11 2024-03-26 浙江苏泊尔厨卫电器有限公司 油烟机及其控制方法与系统
KR102495326B1 (ko) * 2018-01-31 2023-02-02 삼성전자주식회사 전자장치 및 그 제어방법
CN108549480B (zh) * 2018-03-28 2021-05-18 北京经纬恒润科技股份有限公司 一种基于多通道数据的触发判断方法及装置
CN108958475B (zh) * 2018-06-06 2023-05-02 创新先进技术有限公司 虚拟对象控制方法、装置及设备
US20200012350A1 (en) * 2018-07-08 2020-01-09 Youspace, Inc. Systems and methods for refined gesture recognition
CN109388240A (zh) * 2018-09-25 2019-02-26 北京金茂绿建科技有限公司 一种非接触式手势控制方法及装置
CN109558035A (zh) * 2018-11-27 2019-04-02 英华达(上海)科技有限公司 基于光线传感器的输入方法、终端设备和存储介质
CN109847335A (zh) * 2019-02-21 2019-06-07 网易(杭州)网络有限公司 游戏中图片处理的方法及装置、电子设备、存储介质
CN109933192A (zh) * 2019-02-25 2019-06-25 努比亚技术有限公司 一种凌空手势的实现方法、终端及计算机可读存储介质
CN109885174A (zh) * 2019-02-28 2019-06-14 努比亚技术有限公司 手势操控方法、装置、移动终端及存储介质
CN110377216B (zh) * 2019-06-24 2023-07-18 云谷(固安)科技有限公司 电子设备及其控制方法
CN112286339B (zh) * 2019-07-23 2022-12-16 哈尔滨拓博科技有限公司 一种多维手势识别装置、方法、电子设备和存储介质
KR102257994B1 (ko) 2019-09-02 2021-05-31 삼성전자주식회사 근접 여부를 판별하는 방법 및 디바이스
CN110941339B (zh) * 2019-11-27 2024-02-23 上海创功通讯技术有限公司 一种手势感应方法及电子设备、存储介质
CN111327767A (zh) * 2020-02-06 2020-06-23 Tcl移动通信科技(宁波)有限公司 照明装置控制方法、系统、存储介质及移动终端
CN111623392A (zh) * 2020-04-13 2020-09-04 华帝股份有限公司 一种带有手势识别组件的烟机及其控制方法
CN111596759A (zh) * 2020-04-29 2020-08-28 维沃移动通信有限公司 操作手势识别方法、装置、设备及介质
US20220179496A1 (en) * 2020-07-15 2022-06-09 Google Llc Detecting Contactless Gestures Using Radio Frequency
CN112019978B (zh) * 2020-08-06 2022-04-26 安徽华米信息科技有限公司 一种真无线立体声tws耳机的场景切换方法、装置及耳机
CN112099862B (zh) * 2020-09-16 2021-11-30 歌尔科技有限公司 可穿戴设备及其屏幕唤醒方法、可读存储介质
CN112216250A (zh) * 2020-11-02 2021-01-12 南京工程学院 显示器页面切换方法、亮度调整方法以及显示器
CN112433611A (zh) * 2020-11-24 2021-03-02 珠海格力电器股份有限公司 一种终端设备的控制方法以及装置
CN114020382A (zh) * 2021-10-29 2022-02-08 杭州逗酷软件科技有限公司 一种执行方法、电子设备及计算机存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10148640A (ja) * 1996-11-18 1998-06-02 Matsushita Electric Ind Co Ltd 手振り検出方法及び装置
JP2005141542A (ja) * 2003-11-07 2005-06-02 Hitachi Ltd 非接触入力インターフェース装置
JP2010113481A (ja) * 2008-11-05 2010-05-20 Sharp Corp 入力装置
JP2010277198A (ja) * 2009-05-26 2010-12-09 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2011107832A (ja) * 2009-11-13 2011-06-02 Sony Corp センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器
JP2013235588A (ja) * 2012-05-04 2013-11-21 Samsung Electronics Co Ltd 空間上の相互作用に基づく端末の制御方法及びその端末

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6933979B2 (en) * 2000-12-13 2005-08-23 International Business Machines Corporation Method and system for range sensing of objects in proximity to a display
US8004493B2 (en) * 2007-06-08 2011-08-23 Apple Inc. Methods and systems for providing sensory information to devices and peripherals
US8344325B2 (en) * 2009-05-22 2013-01-01 Motorola Mobility Llc Electronic device with sensing assembly and method for detecting basic gestures
WO2011069148A1 (en) * 2009-12-04 2011-06-09 Next Holdings Limited Methods and systems for position detection using an interactive volume
US20110310005A1 (en) * 2010-06-17 2011-12-22 Qualcomm Incorporated Methods and apparatus for contactless gesture recognition
CN103052928B (zh) * 2010-08-04 2015-12-16 惠普发展公司,有限责任合伙企业 能使多显示输入实现的系统和方法
CN102055844B (zh) * 2010-11-15 2013-05-15 惠州Tcl移动通信有限公司 一种通过手势识别实现照相机快门功能的方法及手机装置
CN202049454U (zh) * 2011-05-07 2011-11-23 马银龙 空中鼠标键盘
US20120312956A1 (en) * 2011-06-11 2012-12-13 Tom Chang Light sensor system for object detection and gesture recognition, and object detection method
CN102508549A (zh) * 2011-11-08 2012-06-20 北京新岸线网络技术有限公司 一种基于三维动作的非接触式操作方法和系统
US8766162B2 (en) * 2012-01-12 2014-07-01 Maxim Integrated Products, Inc. Ambient light based gesture detection

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10148640A (ja) * 1996-11-18 1998-06-02 Matsushita Electric Ind Co Ltd 手振り検出方法及び装置
JP2005141542A (ja) * 2003-11-07 2005-06-02 Hitachi Ltd 非接触入力インターフェース装置
JP2010113481A (ja) * 2008-11-05 2010-05-20 Sharp Corp 入力装置
JP2010277198A (ja) * 2009-05-26 2010-12-09 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2011107832A (ja) * 2009-11-13 2011-06-02 Sony Corp センサ装置、センサ素子の駆動方法、入力機能付き表示装置および電子機器
JP2013235588A (ja) * 2012-05-04 2013-11-21 Samsung Electronics Co Ltd 空間上の相互作用に基づく端末の制御方法及びその端末

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018506086A (ja) * 2016-01-19 2018-03-01 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co.,Ltd. ジェスチャー識別方法、装置、プログラム及び記録媒体
JP2018506089A (ja) * 2016-01-19 2018-03-01 北京小米移動軟件有限公司Beijing Xiaomi Mobile Software Co.,Ltd. ジェスチャーの識別方法及び装置

Also Published As

Publication number Publication date
CN103713735B (zh) 2018-03-16
KR20150046304A (ko) 2015-04-29
JP6114827B2 (ja) 2017-04-12
WO2014048180A1 (zh) 2014-04-03
KR101710972B1 (ko) 2017-03-13
EP2884383A1 (en) 2015-06-17
EP2884383A4 (en) 2015-09-16
WO2014048104A1 (zh) 2014-04-03
CN103713735A (zh) 2014-04-09
US20150205521A1 (en) 2015-07-23

Similar Documents

Publication Publication Date Title
JP6114827B2 (ja) 非接触ジェスチャを使用することにより端末機器を制御するための方法及び装置
US11599154B2 (en) Adaptive enclosure for a mobile computing device
US11635876B2 (en) Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control
US10401964B2 (en) Mobile terminal and method for controlling haptic feedback
US9965074B2 (en) Device, method, and graphical user interface for transitioning between touch input to display output relationships
US10057934B2 (en) Automatic selection of a wireless connectivity protocol for an input device
US8823749B2 (en) User interface methods providing continuous zoom functionality
US20140157209A1 (en) System and method for detecting gestures
EP2752754A2 (en) Remote mouse function method and terminals
US10474324B2 (en) Uninterruptable overlay on a display
KR20150025635A (ko) 스크린을 제어하는 전자 장치 및 방법
KR20160078160A (ko) 사용자의 움직임을 검출하여 사용자 입력을 수신하는 방법 및 이를 위한 장치
US20160026325A1 (en) Hand-held electronic device, touch-sensing cover and computer-executed method
KR20150101703A (ko) 디스플레이 장치 및 제스처 입력 처리 방법
TW201535241A (zh) 輸入系統及其操作方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150325

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150325

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160301

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20160526

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160728

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160906

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161226

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20170110

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170221

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170317

R150 Certificate of patent or registration of utility model

Ref document number: 6114827

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250