CN112925419A - 一种基于平板指尖查词的结果筛选方法 - Google Patents
一种基于平板指尖查词的结果筛选方法 Download PDFInfo
- Publication number
- CN112925419A CN112925419A CN202110350076.7A CN202110350076A CN112925419A CN 112925419 A CN112925419 A CN 112925419A CN 202110350076 A CN202110350076 A CN 202110350076A CN 112925419 A CN112925419 A CN 112925419A
- Authority
- CN
- China
- Prior art keywords
- word
- fingertip
- offset
- user
- flat
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 15
- 238000012216 screening Methods 0.000 title claims abstract description 13
- 230000009191 jumping Effects 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本发明公开了一种基于平板指尖查词的结果筛选方法，通过指尖识别得到指尖的初始位置，并识别得到距离指尖位置最近的字词；如果该字词不是用户期望的字词，用户再次轻移指尖，计算此时指尖相对于初始位置的偏移量和偏移方向，再识别出相对于前一次识别得到的字词具有相同偏移量和偏移方向的字词。重复该过程直至识别出用户期望的字词。本发明既能有效避免因误差带来的识别不准确问题，也能避免候选内容过多导致界面不够简洁和灵活的问题，大大提高了学习效率。
Description
技术领域
本发明涉及数据处理领域，具体涉及一种基于平板指尖查词的结果筛选方法。
背景技术
目前指尖查词系统通过指尖定位、OCR技术识别指尖附近词语时，由于指尖定位系统基于机器学习，或多或少存在定位误差，导致会识别到非手指指定的字词。目前的解决方法是OCR识别算法返回多个候选词结果并显示在用户界面上，用户通过在界面上点击想要的词语进行最终筛选，但若候选内容过多将不够简洁和灵活。
发明内容
针对现有技术的不足，本发明旨在提供一种基于平板指尖查词的结果筛选方法。
为了实现上述目的，本发明采用如下技术方案：
一种基于平板指尖查词的结果筛选方法，具体过程如下：
S1、打开平板的摄像头并启动指尖检测，平板的摄像头朝向读物；用户将指尖指向读物上期望的字词，平板对摄像头采集到的图像进行指尖识别，记录指尖在图像中的初始位置FP；
S2、平板识别出读物中的各个字词W1,W2,…,Wn，并记录各个字词在图像中的位置WP1,WP2,…,WPn；
S3、计算距离指尖的初始位置FP最近的位置WPi，将对应的字词Wi显示在用户界面上；
S4、若字词Wi是用户期望的字词，跳转步骤S8，否则用户再次轻移指尖使得指尖更加对应期望的字词，平板对摄像头此时采集到的图像进行指尖识别，记录当前的指尖位置FP’；
S5、计算FP’相对于FP的偏移量Oi和偏移方向Di；
S6、根据偏移量Oi和偏移方向Di，计算相对于字词Wi具有相同偏移量和偏移方向的字词Wj；
S7、将字词Wj替换为字词Wi，FP’替换为FP，跳转至步骤S4；
S8、将字词Wi作为最终筛选结果。
进一步地，步骤S5中，所述偏移量Oi为FP’和FP之间的直线距离。
本发明的有益效果在于：相比于现有技术中直接输出筛选结果或者输出多个候选结果让用户手动选择最终结果，本发明既能有效避免因误差带来的识别不准确问题，也能避免候选内容过多导致界面不够简洁和灵活的问题，大大提高了学习效率。
具体实施方式
以下将对本发明作进一步的描述，需要说明的是，本实施例以本技术方案为前提，给出了详细的实施方式和具体的操作过程，但本发明的保护范围并不限于本实施例。
一种基于平板指尖查词的结果筛选方法，具体过程如下：
S1、打开平板的摄像头并启动指尖检测，平板的摄像头朝向读物；用户将指尖指向读物上期望的字词，平板对摄像头采集到的图像进行指尖识别，记录指尖在图像中的初始位置FP；
S2、平板识别出读物中的各个字词W1,W2,…,Wn，并记录各个字词在图像中的位置WP1,WP2,…,WPn；
S3、计算距离指尖的初始位置FP最近的位置WPi，将对应的字词Wi显示在用户界面上；
S4、若字词Wi是用户期望的字词，跳转步骤S8，否则用户再次轻移指尖使得指尖更加对应期望的字词，平板对摄像头此时采集到的图像进行指尖识别，记录当前的指尖位置FP’；
S5、计算FP’相对于FP的偏移量Oi和偏移方向Di；
S6、根据偏移量Oi和偏移方向Di，计算相对于字词Wi具有相同偏移量和偏移方向的字词Wj；
S7、将字词Wj替换为字词Wi，FP’替换为FP，跳转至步骤S4；
S8、将字词Wi作为最终筛选结果。
对于本领域的技术人员来说，可以根据以上的技术方案和构思，给出各种相应的改变和变形，而所有的这些改变和变形，都应该包括在本发明权利要求的保护范围之内。
Claims (2)
1.一种基于平板指尖查词的结果筛选方法，其特征在于，具体过程如下：
S1、打开平板的摄像头并启动指尖检测，平板的摄像头朝向读物；用户将指尖指向读物上期望的字词，平板对摄像头采集到的图像进行指尖识别，记录指尖在图像中的初始位置FP；
S2、平板识别出读物中的各个字词W1,W2,…,Wn，并记录各个字词在图像中的位置WP1,WP2,…,WPn；
S3、计算距离指尖的初始位置FP最近的位置WPi，将对应的字词Wi显示在用户界面上；
S4、若字词Wi是用户期望的字词，跳转步骤S8，否则用户再次轻移指尖使得指尖更加对应期望的字词，平板对摄像头此时采集到的图像进行指尖识别，记录当前的指尖位置FP’；
S5、计算FP’相对于FP的偏移量Oi和偏移方向Di；
S6、根据偏移量Oi和偏移方向Di，计算相对于字词Wi具有相同偏移量和偏移方向的字词Wj；
S7、将字词Wj替换为字词Wi，FP’替换为FP，跳转至步骤S4；
S8、将字词Wi作为最终筛选结果。
2.根据权利要求1所述的方法，其特征在于，步骤S5中，所述偏移量Oi为FP’和FP之间的直线距离。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110350076.7A CN112925419A (zh) | 2021-03-31 | 2021-03-31 | 一种基于平板指尖查词的结果筛选方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110350076.7A CN112925419A (zh) | 2021-03-31 | 2021-03-31 | 一种基于平板指尖查词的结果筛选方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112925419A true CN112925419A (zh) | 2021-06-08 |
Family
ID=76176814
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110350076.7A Pending CN112925419A (zh) | 2021-03-31 | 2021-03-31 | 一种基于平板指尖查词的结果筛选方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112925419A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110158532A1 (en) * | 2009-12-29 | 2011-06-30 | Samsung Electronics Co., Ltd. | Apparatus for detecting text recognition region and method of recognizing text |
| CN106484297A (zh) * | 2016-10-10 | 2017-03-08 | 努比亚技术有限公司 | 一种文字拾取装置和方法 |
| CN111242109A (zh) * | 2020-04-26 | 2020-06-05 | 北京金山数字娱乐科技有限公司 | 一种手动取词的方法及装置 |
| CN111435442A (zh) * | 2019-01-15 | 2020-07-21 | 北京字节跳动网络技术有限公司 | 文字选取方法、装置、点读设备、电子设备及存储介质 |
| CN111460086A (zh) * | 2019-01-21 | 2020-07-28 | 北京字节跳动网络技术有限公司 | 一种点读标记方法、装置、设备和可读介质 |
-
2021
- 2021-03-31 CN CN202110350076.7A patent/CN112925419A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110158532A1 (en) * | 2009-12-29 | 2011-06-30 | Samsung Electronics Co., Ltd. | Apparatus for detecting text recognition region and method of recognizing text |
| CN106484297A (zh) * | 2016-10-10 | 2017-03-08 | 努比亚技术有限公司 | 一种文字拾取装置和方法 |
| CN111435442A (zh) * | 2019-01-15 | 2020-07-21 | 北京字节跳动网络技术有限公司 | 文字选取方法、装置、点读设备、电子设备及存储介质 |
| CN111460086A (zh) * | 2019-01-21 | 2020-07-28 | 北京字节跳动网络技术有限公司 | 一种点读标记方法、装置、设备和可读介质 |
| CN111242109A (zh) * | 2020-04-26 | 2020-06-05 | 北京金山数字娱乐科技有限公司 | 一种手动取词的方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11393103B2 (en) | Target tracking method, device, system and non-transitory computer readable medium | |
| CN109977262B (zh) | 从视频中获取候选片段的方法、装置及处理设备 | |
| CN109993160B (zh) | 一种图像矫正及文本与位置识别方法及系统 | |
| JP7073522B2 (ja) | 空中手書きを識別するための方法、装置、デバイス及びコンピュータ読み取り可能な記憶媒体 | |
| US20090110292A1 (en) | Hand Sign Recognition Using Label Assignment | |
| CN109947273B (zh) | 一种点读定位方法及装置 | |
| US20210056715A1 (en) | Object tracking method, object tracking device, electronic device and storage medium | |
| CN113688889A (zh) | 异常检测方法、装置、电子设备及计算机可读存储介质 | |
| CN106204633B (zh) | 一种基于计算机视觉的学生跟踪方法和装置 | |
| CN108986137B (zh) | 人体跟踪方法、装置及设备 | |
| Wang et al. | A novel sign language recognition framework using hierarchical grassmann covariance matrix | |
| CN111985469A (zh) | 一种图像中文字的识别方法、装置及电子设备 | |
| CN112861842A (zh) | 基于ocr的案件文本识别方法及电子设备 | |
| CN112621753B (zh) | 机器人定位方法、电子设备及存储介质 | |
| CN112925419A (zh) | 一种基于平板指尖查词的结果筛选方法 | |
| JPWO2011037097A1 (ja) | パターン認識方法及び該方法を用いたパターン認識装置 | |
| CN113687724A (zh) | 候选字显示方法、装置和电子设备 | |
| CN115984968A (zh) | 一种学生时空动作识别方法、装置、终端设备及介质 | |
| You et al. | Detecting figure-panel labels in medical journal articles using MRF | |
| CN115937970A (zh) | 手部关键点识别方法、装置、设备及存储介质 | |
| CN111008210B (zh) | 商品识别方法、装置、编解码器及存储装置 | |
| CN113269038B (zh) | 一种基于多尺度的行人检测方法 | |
| CN115393616A (zh) | 目标跟踪方法、装置、设备以及存储介质 | |
| CN113220125A (zh) | 手指交互方法、装置、电子设备及计算机存储介质 | |
| JP5729260B2 (ja) | 文字認識用コンピュータプログラム、文字認識装置及び文字認識方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210608 |
|
| RJ01 | Rejection of invention patent application after publication |