TW202004433A - 一種控制指令輸入方法和輸入裝置 - Google Patents

一種控制指令輸入方法和輸入裝置 Download PDF

Info

Publication number
TW202004433A
TW202004433A TW107132770A TW107132770A TW202004433A TW 202004433 A TW202004433 A TW 202004433A TW 107132770 A TW107132770 A TW 107132770A TW 107132770 A TW107132770 A TW 107132770A TW 202004433 A TW202004433 A TW 202004433A
Authority
TW
Taiwan
Prior art keywords
screen
rotation
interface
movement
motion
Prior art date
Application number
TW107132770A
Other languages
English (en)
Other versions
TWI721317B (zh
Inventor
陳嵐
Original Assignee
大陸商雲穀（固安）科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商雲穀（固安）科技有限公司 filed Critical 大陸商雲穀（固安）科技有限公司
Publication of TW202004433A publication Critical patent/TW202004433A/zh
Application granted granted Critical
Publication of TWI721317B publication Critical patent/TWI721317B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer

Abstract

本發明提供了一種控制指令輸入方法和裝置，用於解決穿戴設備對應單手輸入缺少輸入途徑的技術問題。方法包括根據肢體的運動，形成螢幕的運動狀態的資訊；根據該運動狀態形成該螢幕中UI介面的操作指令。利用對佩戴智慧穿戴設備的肢體穩定姿態的識別，建立肢體穩定姿態與觸控標準指令間的關聯，將指令輸入的觸控手勢演化為肢體運動姿態，避免了雙手的配合操作過程，使得佩戴智慧穿戴設備的應用場景更豐富。同時，利用肢體穩定姿態的相對大尺度運動狀態，將現有觸摸手勢的動作過程放大，形成更精細的指令控制過程。

Description

一種控制指令輸入方法和輸入裝置
本發明屬於人機互動技術領域，具體是關於一種控制指令輸入方法和輸入裝置。
對於智慧佩戴設備，通常具有用於人機交互的螢幕用於顯示UI(user interface)介面，佩戴者通過觸摸手勢進行控制指令的輸入。但是在一些應用場景下，例如騎行中、或單手負重中、或戶外戴有手套時，甚至對於肢體殘障人士而言，觸摸輸入十分不便。需要一種能夠克服單手輸入障礙的新的技術方案。
有鑑於此，本發明的至少一個用於示範的實施例提供一種控制指令輸入方法和輸入裝置，以解決現有技術中智慧穿戴設備對應單手輸入缺少輸入途徑的技術問題。
本發明的至少一個用於示範的實施例的控制指令輸入方法，包括：根據肢體的運動，形成螢幕的運動狀態的資訊； 根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令。
本發明的至少一個用於示範的實施例中，所述根據肢體的運動，形成螢幕的運動狀態的資訊包括：根據感測器信號獲取該螢幕的運動姿態的資訊；通過該螢幕的轉動資料獲取該螢幕處於穩定姿態的時間區間及該穩定姿態下的轉動資料；根據該時間區間和該穩定姿態下的轉動資料確定該螢幕在該穩定姿態時的轉動狀態。
本發明的至少一個用於示範的實施例中，該運動狀態包括：正向平滑轉動、正向加速轉動、反向平滑轉動、反向加速轉動；所述根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令包括：該正向平滑轉動的映射指令為該UI介面向正向方向滾屏，或該UI介面中的焦點內容向正向方向滾屏，或在該UI介面向正向方向移動焦點；該正向加速轉動的映射指令為向前一個該UI介面切換，或正向掃屏；該反向平滑轉動的映射指令為該UI介面向反向方向滾屏，或該UI介面中的焦點內容向反向方向滾屏，或在該UI介面向反向方向移動焦點；該反向加速轉動的映射指令為向後一個該UI介面切換，或反向掃屏。
本發明的至少一個用於示範的實施例中，所述根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令包括：獲取時間區間內的該螢幕的運動狀態的資訊；判斷該運動狀態是轉動運動還是往復運動；根據該轉動運動的運動特徵形成該UI介面的操作指令。
本發明的至少一個用於示範的實施例中，所述根據該轉動運動的運動特徵形成該UI介面的操作指令包括：進一步判斷轉動方向；當該轉動方向為第一時針方向時進一步判斷轉速是否達到第一定值；當該轉速未達到該第一定值時，形成當前所述UI介面中向第一方向的滾動指令；當該轉速達到該第一定值時，形成當前所述UI介面向前一個該UI介面的切換指令；當該轉動方向為第二時針方向時進一步判斷該轉速是否達到第二定值；當該轉速未達到該第二定值時，形成當前所述UI介面中向第二方向的滾動指令；當該轉速達到該第二定值時，形成當前所述UI介面向後一個該UI介面的切換指令。本發明的至少一個用於示範的實施例中，所述根據肢體的運動，形成螢幕的運動狀態的資訊包括：根據感測器信號獲取該螢幕的運動姿態的資訊；通過該螢幕的轉動資料獲取該螢幕處於穩定姿態的時間區間及該時間區間內的即時移動資料；根據該時間區間和該移動資料確定該螢幕在該穩定姿態時的移動狀態。
本發明的至少一個用於示範的實施例中，所述運動狀態包括：快速落差移動-回復和快速重複快速落差移動-回復； 所述根據該運動狀態形成該螢幕中UI介面的操作指令包括：該快速落差移動-回復的映射指令為按一下；該快速重複快速落差移動-回復的映射指令為按兩下或連擊。
本發明的至少一個用於示範的實施例中，所述根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令包括：獲取時間區間內的該螢幕的運動狀態；判斷該運動狀態是轉動運動還是往復運動；當該運動狀態是往復運動時形成當前所述UI介面中的點擊指令。
本發明的至少一個用於示範的實施例中，該肢體的運動以負載該螢幕的肘部或腰部或手部為該運動狀態的參照點。
本發明的至少一個用於示範的實施例的控制指令輸入裝置，包括：記憶體，用於存儲與上述控制指令輸入方法的處理過程對應的程式碼；處理器，用於執行該程式碼。
本發明的至少一個用於示範的實施例的控制指令輸入裝置包括：狀態確認模組，用於根據肢體的運動，形成螢幕的運動狀態的資訊；指令映射模組，用於根據該運動狀態形成該螢幕中UI介面的操作指令。
本發明的至少一個用於示範的實施例的控制指令輸入方法和輸入裝置利用對佩戴智慧穿戴設備的肢體動作的識別，建立肢體動作與 觸控標準指令間的關聯，將指令輸入的觸控手勢演化為肢體運動姿態，避免了雙手的配合操作過程，使得佩戴智慧穿戴設備的應用場景更豐富。同時，利用肢體穩定姿態的相對大尺度運動狀態，將現有觸摸手勢的動作過程放大，形成更精細的指令控制過程。
100、110、120、130、140、150、200、210、220、230、240、250、260、270、280、290、300‧‧‧步驟
1000‧‧‧狀態確認模組
1110‧‧‧螢幕姿態確認單元
1120‧‧‧螢幕水平運動確認單元
1130‧‧‧螢幕豎直運動確認單元
1140‧‧‧螢幕水平運動狀態確認單元
1150‧‧‧螢幕豎直運動狀態確認單元
1210‧‧‧狀態獲取單元
1220‧‧‧運動判斷單元
1230‧‧‧轉動判斷單元
1240‧‧‧第一轉速判斷單元
1250‧‧‧第二轉速判斷單元
1260‧‧‧第二指令映射單元
1270‧‧‧第四指令映射單元
1280‧‧‧第三指令映射單元
1290‧‧‧第五指令映射單元
2000‧‧‧指令映射模組
圖1所示為本發明的至少一個用於示範的實施例的控制指令輸入方法的流程圖；圖2所示為本發明的至少一個用於示範的實施例的控制指令輸入方法中轉動狀態和位移狀態獲取的流程圖；圖3所示為本發明的至少一個用於示範的實施例的控制指令輸入方法中形成操作指令的流程圖；圖4所示為本發明的至少一個用於示範的實施例的控制指令輸入裝置的架構示意圖。
下面將結合本發明實施例中的附圖，對本發明實施例中的技術方案進行清楚、完整地描述，顯然，所描述的實施例僅是本發明一部分實施例，而不是全部的實施例。基於本發明中的實施例，本領域普通技術人員在沒有做出進步性勞動前提下所獲得的所有其他實施例，都屬於本發明保護的範圍。
本領域技術人員可以理解，在智慧穿戴設備中集成有陀螺儀、加速度感測器或重力感測器以及其他磁場感測器，可以通過陀螺儀採集的各自由度量化信號以獲得智慧穿戴設備的基本姿態資料，配合其他感測器提供的量化信號可以進一步準確量化智慧穿戴設備的移動軌跡、加速度、指向方向或重力方向等運動狀態資料。
圖1所示為本發明的至少一個用於示範的實施例的控制指令輸入方法的流程圖。如圖1所示，包括：步驟100：根據肢體的運動，形成螢幕的運動狀態的資訊。
肢體運動由佩戴部位的肢體協調動作形成，肢體運動可以形成螢幕的運動姿態，運動姿態包括一類穩定姿態，維持螢幕處於穩定的姿態。螢幕穩定姿態可以包括：- 使螢幕保持一個有利於佩戴者視線觀察的穩定角度；- 使螢幕保持在有利於佩戴者視線觀察的水平面；- 使螢幕保持在有利於佩戴者視線觀察的視覺落差，該視覺落差是表現螢幕與眼部的高度差異；- 使螢幕沿一個弧線軌跡單向勻速移動或加速移動，例如以肘部為圓心的弧線軌跡；- 使螢幕沿一個合成半徑長度做小角度周向轉動，例如以腰部為圓心以肩部、上臂和下臂間距形成半徑長度的弧線軌跡；- 使螢幕在豎直方向上形成短距離快速落差，該快速落差是表現螢幕一段距離內的運動速度差異；- 使螢幕維持水平的同時在豎直方向上形成短距離快速落差。
上述螢幕穩定姿態可以是獨立的姿態，也可以是複雜運動姿態中的一個局部的主要姿態。上述運動狀態可以包括上述螢幕穩定姿態中的轉動狀態和位移狀態。本領域技術人員可以理解，通過陀螺儀以及其他各感測器採集的螢幕穩定姿態信號可以體現為在空間中相應自由度的轉動狀態資料和位移狀態資料。即每一種螢幕穩定姿態的轉動狀態資料和位移狀態資料能夠反映姿態特徵。
步驟200：根據運動狀態形成螢幕中UI介面的操作指令。
本領域技術人員可以理解，通過對轉動狀態資料和位移狀態資料在時間軸上積分，就可以以數學方式基本還原描述上述螢幕穩定姿態的肢體動作過程。通過將判斷識別的特定螢幕穩定姿態與指定觸控手勢關聯，可以將肢體運動過程中的螢幕穩定姿態作為螢幕中UI介面的操作指令輸入，實現人機交互。
本發明的實施例的控制指令輸入方法利用對佩戴智慧穿戴設備的肢體穩定姿態的識別，建立肢體穩定姿態與觸控標準指令間的關聯，將指令輸入的觸控手勢演化為肢體運動姿態，避免了雙手的配合操作過程，使得佩戴智慧穿戴設備的應用場景更豐富。同時，利用肢體穩定姿態的相對大尺度運動狀態，將現有觸摸手勢的動作過程放大，形成更精細的指令控制過程。
圖2所示為本發明的至少一個用於示範的實施例的控制指令輸入方法中轉動狀態和位移狀態獲取的流程圖。如圖2所示，步驟100中包括：步驟110：根據感測器信號獲取螢幕的運動姿態； 通過對感測器採集的信號簡單分析，可以獲得智慧穿戴設備的運動狀態，包括運動軌跡，以及智慧穿戴設備的本體姿態資料。根據各感測器預設初始值與螢幕的初始關聯結構結合智慧穿戴設備的本體姿態資料可以獲得螢幕的運動姿態。
步驟120：通過螢幕的轉動資料獲取螢幕處於穩定姿態的時間區間及穩定姿態下的即時水平轉動資料；即時轉動資料是在螢幕運動姿態的即時資料中，通過過濾獲得的螢幕姿態處於有利於觀察的資料。利用即時轉動資料獲得螢幕處於有利於視覺關注角度的穩定姿態時長和對應時長下的轉動資料。其中一種視覺關注角度可以是螢幕處於水平面或較小偏離水平面。
步驟140：根據時間區間和轉動資料確定螢幕在穩定姿態時的轉動狀態；將螢幕處於穩定姿態時的資料進行統計，量化為具有各種特徵的水平運動狀態，其中水平轉動狀態可以包括正向平滑轉動、正向加速轉動、反向平滑轉動、反向加速轉動、正向加速轉動連接反向平滑轉動、反向加速轉動連接正向平滑轉動等水平轉動狀態，也可以是形成水平轉動狀態的趨勢量化資料，例如轉動方向、轉速等。本領域技術人員可以理解，平滑轉動是指具有基本相近速率和確定方向的轉動，加速轉動是指具有速率加速趨勢和確定方向的轉動。
步驟130：通過螢幕的轉動資料獲取螢幕處於穩定姿態的時間區間及時間區間內的即時豎直移動資料； 利用即時水平轉動資料獲得螢幕處於有利於視覺關注角度的穩定姿態時長和確定穩定姿態時長內的螢幕落差資料。其中一種視覺關注角度可以是螢幕處於水平面或較小偏離水平面。
步驟150：根據時間區間和豎直移動資料確定螢幕在穩定姿態時的豎直移動狀態；將螢幕處於穩定姿態時的資料統計和量化為具有各種特徵的位移運動狀態，其中豎直移動狀態可以包括，快速落差-回復、快速重複快速落差-回復等豎直移動狀態，也可以是形成豎直移動狀態的趨勢量化資料，例如移動方向、移動速率、往復移動次數等。
本發明的實施例的控制指令輸入方法利用感測器信號確定螢幕狀態，利用螢幕狀態確定螢幕處於穩定姿態的時長和對應時長內的運動資料，並對運動資料定量統計分析形成螢幕的主要運動狀態，形成佩戴者肢體運動的若干標準動作過程，使得佩戴者肢體運動中的穩定姿態可以作為與標準觸摸手勢或標準輸入指令的關聯基礎，將特定肢體動作形成與UI螢幕人機交互的控制輸入。
在本發明的至少一個用於示範的實施例的控制指令輸入方法中，形成操作指令的流程中運動狀態的判斷主要包括：獲取一預設時間區間內的螢幕的運動狀態的資訊；判斷運動狀態是轉動運動還是往復運動；根據轉動運動的運動特徵形成該UI介面的操作指令；根據往復運動的運動特徵形成該UI介面的操作指令； 其中轉動運動和往復運動的運動特徵包括運動方向、運動平均速度、運動即時速度、運動峰值速度等運動特徵。
圖3所示為本發明的至少一個用於示範的實施例的控制指令輸入方法中形成操作指令的流程圖。如圖3所示，步驟200包括：步驟210：獲取一預設時間區間內的螢幕運動狀態；步驟220：判斷運動狀態是轉動運動還是豎直往復運動；步驟300：當運動狀態是豎直運動時形成當前UI介面中的點擊指令(根據往復次數和頻率確定按一下或按兩下)；步驟230：當運動狀態是轉動運動時進一步判斷轉動方向；步驟240：當轉動方向為第一時針方向時進一步判斷轉速是否達到第一定值；步驟260：當轉速未達到第一定值時，形成當前UI介面中向第一方向的滾動指令；步驟280：當轉速達到第一定值時，形成當前UI介面向前一個UI介面的切換指令；步驟250：當轉動方向為第二時針方向時進一步判斷轉速是否達到第二定值；步驟270：當轉速未達到第二定值時，形成當前UI介面中向第二方向的滾動指令；步驟290：當轉速達到第二定值時，形成當前UI介面向後一個UI介面的切換指令。
本發明的實施例的控制指令輸入方法利用趨勢量化資料作為判斷要素，將螢幕的主要運動狀態與標準輸入指令連接，形成了新的控制指令輸入過程。
本發明的實施例中在確定運動參照點的時針方向和滾動方向可以設定為：第一時針方向-逆時針轉動，第一方向-頁面上滾；第二時針方向-順時針轉動，第二方向-頁面下滾。
在本發明的至少一個用於示範的實施例中，還可以直接將螢幕量化的主要運動狀態與標準輸入指令相映射，形成至少包括下表所示對應關係的控制指令輸入過程：運動狀態 觸控標準指令
正向平滑轉動 UI介面或UI介面中焦點內容向正向方向滾屏
正向加速轉動 向前一個UI介面切換或正向掃屏
反向平滑轉動 UI介面或其中焦點內容向反向方向滾屏
反向加速轉動 向後一個UI介面切換或反向掃屏
正向平滑轉動 向正向方向移動焦點
反向平滑轉動 向反向方向移動焦點
快速落差移動-回復 按一下
快速重複快速落差移動-回復 按兩下或連擊
利用本發明的實施例的控制指令輸入方法可以形成與標準輸入指令豐富的映射方案，進而可以實現符合標準輸入指令的快速輸入。
圖4所示為本發明的至少一個用於示範的實施例的控制指令輸入裝置的架構示意圖。如圖4所示包括：狀態確認模組1000，用於根據肢體的運動，形成螢幕的運動狀態的資訊；指令映射模組2000，用於根據運動狀態的資訊，形成螢幕中UI介面的操作指令。
如圖4所示狀態確認模組1000包括：螢幕姿態確認單元1110，用於根據感測器信號獲取螢幕的運動姿態；螢幕水平運動確認單元1120，用於通過螢幕的轉動資料獲取螢幕處於穩定姿態的時間區間及穩定姿態下的即時水平轉動資料；螢幕水平運動狀態確認單元1140，用於根據時間區間和水平轉動資料確定螢幕在穩定姿態時的水平轉動狀態；螢幕豎直運動確認單元1130，用於通過螢幕的轉動資料獲取螢幕處於穩定姿態的時間區間及時間區間內的即時豎直移動資料；螢幕豎直運動狀態確認單元1150，用於根據時間區間和豎直移動資料確定螢幕在穩定姿態時的豎直移動狀態。
如圖4所示指令映射模組2000包括：狀態獲取單元1210，用於獲取時間區間內的螢幕運動狀態；運動判斷單元1220，用於判斷為運動狀態是轉動運動還是往復運動；第一指令映射單元1300，用於當運動狀態是豎直運動時形成當前UI介面中的點擊指令； 轉動判斷單元1230，用於當運動狀態是轉動運動時進一步判斷轉動方向；第一轉速判斷單元1240，用於當轉動方向為第一時針方向時進一步判斷轉速是否達到第一定值；第二指令映射單元1260，用於當轉速未達到第一定值時，形成當前UI介面中向第一方向的滾動指令；第三指令映射單元1280，用於當轉速達到第一定值時，形成當前UI介面向前一個UI介面的切換指令；第二轉速判斷單元1250，用於當轉動方向為第二時針方向時進一步判斷轉速是否達到第二定值；第四指令映射單元1270，用於當轉速未達到第二定值時，形成當前UI介面中向第二方向的滾動指令；第五指令映射單元1290，用於當轉速達到第二定值時，形成當前UI介面向後一個UI介面的切換指令。
本發明的至少一個用於示範的實施例的控制指令輸入裝置包括：記憶體，用於存儲與上述控制指令輸入方法的處理過程對應的程式碼；處理器，用於執行程式碼。
本領域普通技術人員可以意識到，結合本文中所公開的實施例描述的各示例的單元及演算法步驟，能夠以電子硬體、或者電腦軟體和電子硬體的結合來實現。這些功能究竟以硬體還是軟體方式來執行，取決 於技術方案的特定應用和設計約束條件。專業技術人員可以對每個特定的應用來使用不同方法來實現所描述的功能，但是這種實現不應認為超出本發明的範圍。
所屬領域的技術人員可以清楚地瞭解到，為描述的方便和簡潔，上述描述的系統、裝置和單元的具體工作過程，可以參考前述方法實施例中的對應過程，在此不再贅述。
在本發明所提供的幾個實施例中，應該理解到，所揭露的系統、裝置和方法，可以通過其它的方式實現。例如，以上所描述的裝置實施例僅僅是示意性的，例如，該單元的劃分，僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式，例如多個單元或組件可以結合或者可以集成到另一個系統，或一些特徵可以忽略，或不執行。另一點，所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些介面，裝置或單元的間接耦合或通信連接，可以是電性，機械或其它的形式。
該作為分離部件說明的單元可以是或者也可以不是物理上分開的，作為單元顯示的部件可以是或者也可以不是物理單元，即可以位於一個地方，或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例方案的目的。
另外，在本發明各個實施例中的各功能單元可以集成在一個處理單元中，也可以是各個單元單獨物理存在，也可以兩個或兩個以上單元集成在一個單元中。
該功能如果以軟體功能單元的形式實現並作為獨立的產品銷售或使用時，可以存儲在一個電腦可讀取存儲介質中。基於這樣的理解， 本發明的技術方案本質上或者說對現有技術做出貢獻的部分或者該技術方案的部分可以以軟體產品的形式體現出來，該電腦軟體產品存儲在一個存儲介質中，包括若干指令用以使得一台電腦設備(可以是個人電腦，伺服器，或者網路設備等)執行本發明各個實施例所述方法的全部或部分步驟。而前述的存儲介質包括：隨身碟、移動硬碟、唯讀記憶體(ROM，Read-Only Memory)、隨機存取記憶體(RAM，Random Access Memory)、磁碟或者光碟等各種可以存儲程式校驗碼的介質。
以上所述僅為本發明的較佳實施例而已，並不用以限制本發明，凡在本發明的精神和原則之內，所作的任何修改、等同替換等，均應包含在本發明的保護範圍之內。
本發明的控制指令輸入方法利用對佩戴智慧穿戴設備的肢體動作的識別，建立肢體動作與觸控標準指令間的關聯，將指令輸入的觸控手勢演化為肢體運動姿態，避免了雙手的配合操作過程，使得佩戴智慧穿戴設備的應用場景更豐富。同時，利用肢體穩定姿態的相對大尺度運動狀態，將現有觸摸手勢的動作過程放大，形成更精細的指令控制過程。
100-200‧‧‧步驟

Claims (10)

  1. 一種控制指令輸入方法，其特徵在於，包括：根據肢體的運動，形成螢幕的運動狀態的資訊；根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令。
  2. 如請求項1所述的控制指令輸入方法，其中，所述根據肢體的運動，形成螢幕的運動狀態的資訊包括：根據感測器信號獲取該螢幕的運動姿態的即時資料；過濾該運動姿態的即時資料獲取該螢幕的轉動資料，通過該螢幕的轉動資料獲取該螢幕處於穩定姿態的時間區間及該穩定姿態下的轉動資料；根據該時間區間及該穩定姿態下的轉動資料確定該螢幕在該穩定姿態時的轉動狀態。
  3. 如請求項1所述的控制指令輸入方法，其中，該運動狀態包括：正向平滑轉動、正向加速轉動、反向平滑轉動、反向加速轉動中的至少一種；所述根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令包括：該正向平滑轉動的映射指令為該UI介面向正向方向滾屏，或該UI介面中的焦點內容向正向方向滾屏，或在該UI介面向正向方向移動焦點；該正向加速轉動的映射指令為向前一個該UI介面切換，或正向掃屏；該反向平滑轉動的映射指令為該UI介面向反向方向滾屏，或該UI介面中的焦點內容向反向方向滾屏，或在該UI介面向反向方向移動焦點；該反向加速轉動的映射指令為向後一個該UI介面切換，或反向掃屏。
  4. 如請求項1所述的控制指令輸入方法，其中，所述根據該運動狀態的資訊，形成該螢幕中UI介面的操作指令包括：獲取一預設時間區間內的該螢幕的運動狀態的資訊；根據該運動狀態的資訊判斷該螢幕是轉動運動還是往復運動；當該轉動運動的運動特徵是轉動運動時，形成該UI介面的轉動運動的操 作指令。
  5. 如請求項4所述的控制指令輸入方法，其中，所述當該轉動運動的運動特徵是轉動運動時，形成該UI介面的轉動運動的操作指令，包括：進一步判斷轉動方向；當該轉動方向為第一時針方向時進一步判斷轉速是否達到第一定值；當該轉速未達到該第一定值時，形成當前所述UI介面中向第一方向的滾動指令；當該轉速達到該第一定值時，形成當前所述UI介面向前一個該UI介面的切換指令；當該轉動方向為第二時針方向時進一步判斷該轉速是否達到第二定值；當該轉速未達到該第二定值時，形成當前所述UI介面中向第二方向的滾動指令；當該轉速達到該第二定值時，形成當前所述UI介面向後一個該UI介面的切換指令。
  6. 如請求項1所述的控制指令輸入方法，其中，所述根據肢體的運動，形成螢幕的運動狀態的資訊包括：根據感測器信號獲取該螢幕的運動姿態的資訊；通過該螢幕的轉動資料獲取該螢幕處於穩定姿態的時間區間及該時間區間內的即時移動資料；根據該時間區間和該移動資料確定該螢幕在該穩定姿態時的移動狀態。
  7. 如請求項1所述的控制指令輸入方法，其中，該運動狀態包括：快速落差移動-回復和快速重複快速落差移動-回復中的至少一種；所述根據該運動狀態形成該螢幕中UI介面的操作指令包括：該快速落差移動-回復的映射指令為按一下；該快速重複快速落差移動-回復的映射指令為按兩下或連擊。
  8. 如請求項1所述的控制指令輸入方法，其中，所述根據該運動狀態的資 訊，形成該螢幕中UI介面的操作指令包括：獲取時間區間內的該螢幕的運動狀態的資訊；判斷該運動狀態是轉動運動還是往復運動；當該運動狀態是往復運動時形成當前所述UI介面中的點擊指令。
  9. 如請求項1所述的控制指令輸入方法，其中，該肢體的運動以負載該螢幕的肘部或腰部或手部為該運動狀態的參照點。
  10. 一種控制指令輸入裝置，其特徵在於，包括：記憶體，用於存儲與請求項1至8中任一項所述的控制指令輸入方法的處理過程對應的程式碼；處理器，用於執行該程式碼。
TW107132770A 2018-05-28 2018-09-18 一種控制指令輸入方法和輸入裝置 TWI721317B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810523767.0 2018-05-28
CN201810523767.0A CN108920228B (zh) 2018-05-28 2018-05-28 一种控制指令输入方法和输入装置

Publications (2)

Publication Number Publication Date
TW202004433A true TW202004433A (zh) 2020-01-16
TWI721317B TWI721317B (zh) 2021-03-11

Family

ID=64409999

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107132770A TWI721317B (zh) 2018-05-28 2018-09-18 一種控制指令輸入方法和輸入裝置

Country Status (4)

Country Link
US (1) US10983606B2 (zh)
CN (1) CN108920228B (zh)
TW (1) TWI721317B (zh)
WO (1) WO2019227734A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI797494B (zh) * 2020-11-02 2023-04-01 華碩電腦股份有限公司 電子裝置及其控制方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114442830A (zh) * 2020-11-02 2022-05-06 华硕电脑股份有限公司 电子装置及其控制方法
CN113672091A (zh) * 2021-08-26 2021-11-19 歌尔科技有限公司 智能穿戴设备控制方法、装置、智能穿戴设备及介质

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1649698A (zh) * 2002-03-18 2005-08-03 索尼株式会社 机器人设备、腿式移动机器人的运动控制设备和方法、腿式移动机器人的传感器系统和移动单元
US20090265671A1 (en) * 2008-04-21 2009-10-22 Invensense Mobile devices with motion gesture recognition
CN101311882A (zh) * 2007-05-23 2008-11-26 华为技术有限公司 视线跟踪人机交互方法及装置
KR101495786B1 (ko) * 2008-06-25 2015-02-25 주식회사 케이티 터치 인식 방법 및 터치 인식 장치
US8289162B2 (en) * 2008-12-22 2012-10-16 Wimm Labs, Inc. Gesture-based user interface for a wearable portable device
US8502704B2 (en) * 2009-03-31 2013-08-06 Intel Corporation Method, apparatus, and system of stabilizing a mobile gesture user-interface
CN102915184B (zh) * 2012-09-18 2017-04-05 百度在线网络技术（北京）有限公司 用于移动终端的交互控制方法、装置和移动终端
JP5590511B2 (ja) * 2012-09-19 2014-09-17 カシオ計算機株式会社 機能駆動装置、機能駆動方法および機能駆動プログラム
US10185416B2 (en) * 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US9740906B2 (en) * 2013-07-11 2017-08-22 Practech, Inc. Wearable device
CN104714631A (zh) * 2013-12-12 2015-06-17 李庆华 腕上智能设备及其控制方法和系统
US10406059B2 (en) * 2014-04-21 2019-09-10 The Trustees Of Columbia University In The City Of New York Human movement research, therapeutic, and diagnostic devices, methods, and systems
CN104111732A (zh) * 2014-07-15 2014-10-22 天津三星通信技术研究有限公司 基于姿态解算的便携式终端的输入方法
TWI534698B (zh) * 2014-08-12 2016-05-21 拓連科技股份有限公司 以動作為基礎之資料瀏覽方法及系統，及相關電腦程式產品
US10327939B2 (en) * 2014-09-25 2019-06-25 Falconworks Devices, systems, and methods for administering therapy
KR102550595B1 (ko) * 2014-12-08 2023-06-30 로힛 세스 착용가능 무선 hmi 디바이스
CN104699390A (zh) 2015-03-20 2015-06-10 蔡思强 一种适用于智能手表的快捷浏览免触摸操作解决方案
US9804679B2 (en) * 2015-07-03 2017-10-31 Google Inc. Touchless user interface navigation using gestures
US20170038848A1 (en) * 2015-08-07 2017-02-09 Fitbit, Inc. User identification via collected sensor data from a wearable fitness monitor
CN105242780B (zh) * 2015-09-23 2018-05-18 谢小强 一种交互控制方法和装置
CN105487707B (zh) * 2015-11-24 2019-02-15 歌尔股份有限公司 一种智能穿戴设备及其信息输入方法
US9939910B2 (en) * 2015-12-22 2018-04-10 Intel Corporation Dynamic effects processing and communications for wearable devices
CN106125910A (zh) 2016-06-17 2016-11-16 钟林 一种利用方位手势随动操作智能手表的方法及装置
EP3499852B1 (en) * 2016-09-09 2021-03-24 Huawei Technologies Co., Ltd. Method and device for controlling screen of mobile terminal
CN106445299A (zh) * 2016-09-28 2017-02-22 维沃移动通信有限公司 一种控制方法及移动终端
CN106557021A (zh) * 2016-10-14 2017-04-05 杭州联络互动信息科技股份有限公司 一种基于智能手表的屏幕点亮方法和装置、智能手表
CN106775307B (zh) * 2016-11-29 2020-01-03 努比亚技术有限公司 一种终端属性操作装置、终端及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI797494B (zh) * 2020-11-02 2023-04-01 華碩電腦股份有限公司 電子裝置及其控制方法
US11941178B2 (en) 2020-11-02 2024-03-26 Asustek Computer Inc. Electronic device and control method thereof

Also Published As

Publication number Publication date
TWI721317B (zh) 2021-03-11
US20190332193A1 (en) 2019-10-31
US10983606B2 (en) 2021-04-20
CN108920228B (zh) 2021-01-15
CN108920228A (zh) 2018-11-30
WO2019227734A1 (zh) 2019-12-05

Similar Documents

Publication Publication Date Title
CA3033852C (en) Electronic device and method of controlling the same
TWI411935B (zh) 利用影像擷取裝置辨識使用者姿勢以產生控制訊號之系統以及方法
US20130307765A1 (en) Contactless Gesture-Based Control Method and Apparatus
CN105045520B (zh) 一种触摸屏响应方法及装置
CN108616712B (zh) 一种基于摄像头的界面操作方法、装置、设备及存储介质
CN104331154B (zh) 实现非接触式鼠标控制的人机交互方法和系统
WO2015196703A1 (zh) 一种应用程序图标显示方法及装置
JP2016534481A (ja) 状態変化および将来のユーザ入力の予想に関する情報を使用するユーザ入力に対する応答を提供するためのシステムおよび方法
TW202004433A (zh) 一種控制指令輸入方法和輸入裝置
CN109145802B (zh) 基于Kinect的多人手势人机交互方法及装置
Sathiyanarayanan et al. Map navigation using hand gesture recognition: A case study using myo connector on apple maps
KR102297473B1 (ko) 신체를 이용하여 터치 입력을 제공하는 장치 및 방법
CN103336582A (zh) 一种运动信息控制人机交互方法
US20160320846A1 (en) Method for providing user commands to an electronic processor and related processor program and electronic circuit
WO2012163124A1 (zh) 基于空间运动的输入方法及终端
WO2020216106A1 (zh) 一种穿戴式计算设备和一种人机交互方法
Shrivastava et al. Control of A Virtual System with Hand Gestures
JP2023515525A (ja) ウェアラブルシステムのための手のジェスチャ入力
CN106547339B (zh) 计算机设备的控制方法和装置
CN111221405A (zh) 一种手势控制方法及设备
WO2018076609A1 (zh) 一种操作终端的方法和终端
WO2014033722A1 (en) Computer vision stereoscopic tracking of a hand
Patel et al. Human-System Interaction Interface Utilizing 3D Gesture Recognition Techniques based on Wearable Technology
CN101071349B (zh) 一种通过识别动态轨迹控制光标、视窗操作的系统
CN109976518A (zh) 一种基于pvdf传感器阵列的人机交互方法