CN110751862B - 一种手持式读取器及其数据处理方法 - Google Patents
一种手持式读取器及其数据处理方法 Download PDFInfo
- Publication number
- CN110751862B CN110751862B CN201911025715.1A CN201911025715A CN110751862B CN 110751862 B CN110751862 B CN 110751862B CN 201911025715 A CN201911025715 A CN 201911025715A CN 110751862 B CN110751862 B CN 110751862B
- Authority
- CN
- China
- Prior art keywords
- image
- rgb
- reader
- module
- camera module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/062—Combinations of audio and printed presentations, e.g. magnetically striped cards, talking books, magnetic tapes with printed texts thereon
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
- G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
- G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
- G06K7/10881—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices constructional details of hand-held scanners
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K2007/10524—Hand-held scanners
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Toxicology (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Image Input (AREA)
Abstract
本发明公开了一种手持式读取器,其包括壳体、及均设置在壳体中的处理器、摄像头模组、红外光模组和可见光模组,壳体设置有图像采集窗口,红外光模组、可见光模组和摄像头模组的图像传感器均与处理器连接;摄像头模组的图像传感器用于采集由RGB‑IR混合像素阵列构成的图像,摄像头模组的滤光片为双带通滤光片,其允许通过的第一波段对应RGB波段,允许通过的第二频段对应IR波段;红外光模组和所述可见光模组用于向摄像头模组提供补光光源;该处理器被设置为:根据对图像传感器提供的图像进行识别,以确定读取器读取的内容,并针对所述内容执行相匹配的设定操作。
Description
技术领域
本发明涉及数码设备技术领域,具体涉及一种手持式读取器及其数据处理方法。
背景技术
目前,市面上的手持式读取器包括点读笔、扫描笔等。点读笔与有声图书配套使用,有声图书的纸面上印制有碳墨色的隐形码,有声图书的不同位置处印制的隐形码的图像样式不同,每个图像样式都具有唯一的编号。点读笔点读到不同位置时,读取对应位置处的隐形码,并根据读取到的隐形码的图像样式确定该隐形码的编号,以根据编号在点读笔存储的文件库中查找相匹配的声音文件进行播放。扫描笔主要用于读取文本内容,扫描笔在读取印制在纸面上的文本时,可以通过扫描笔的图像传感器采集文本图像,并进一步通过图像拼接处理和算法识别,获取到文本图像中的文字内容。扫描笔根据具体功能又可分为速录笔和翻译笔等,速录笔主要是对读取到的文本内容进行录入和存储;翻译笔会进一步对读取到的文本内容进行处理,例如,进行翻译、发音、显示等操作。
在现有技术中,为了使得点读笔能够准确的读取纸面上的隐形码,点读笔采用RGB图像传感器和红外滤光片,通过红外滤光片将入射光线中的碳黑色以外的杂光滤除,以使得RGB图像传感器采集的图像仅包含页面上的碳黑色的隐形码和黑色的文本内容。这说明,对于现有的点读笔,在期望还能将其扩展为扫描笔使用时,该扫描笔便只能读取黑色的文本内容,而对于彩色文字、有背景色的文字、有纹理的文字等的识别能力则较差,甚至完全无法识别,无法获得相当于单一功能的扫描笔的识别率。而对于现有技术的扫描笔,其采用可见光滤光片进行文本图像的采集,因此,只有可见光能够到达图像传感器进行成像,但由于隐形码图层为红外图层,其无法反射可见光,因此,现有扫描笔根本无法读取隐形码,当然也就无法获得相当于单一功能的点读笔的识别率。
发明内容
本发明实施例的目的是提供一种手持式读取器,该读取器即可以支持点读笔功能,又可以支持扫描笔功能,且可以获得仅支持单一功能的读取器的识别率。
根据本发明的第一方面,提供了一种手持式读取器,其包括壳体、及均设置在所述壳体中的处理器、摄像头模组、红外光模组和可见光模组;
所述壳体设置有图像采集窗口,所述摄像头模组的光线入射面朝向所述图像采集窗口;
所述摄像头模组包括图像传感器和双带通滤光片,所述图像传感器用于采集由RGB-IR混合像素阵列构成的图像,所述图像传感器的图像数据输出端与所述处理器的图像数据输入端连接;所述双带通滤光片允许通过的第一波段对应RGB波段,允许通过的第二频段对应IR波段;
所述红外光模组和所述可见光模组用于向所述摄像头模组提供补光光源,所述红外光模组的开关控制端与所述处理器的第一控制信号输出端连接,所述可见光模组的开关控制端与所述处理器的第二控制信号输出端连接;
所述处理器被设置为:根据对所述图像传感器提供的所述图像进行识别,以确定所述读取器读取的内容,并针对所述内容执行相匹配的设定操作。
可选地,所述内容包括文本和隐形码中的至少一项。
可选地,所述壳体内形成有与所述图像采集窗口连通的光腔,所述摄像头模组、所述红外光模组和所述可见光模组均设置在所述光腔内。
可选地,所述红外光模组的电路板焊盘与所述可见光模组的电路板焊盘位于同一平面上,所述平面穿过所述摄像头模组,且所述摄像头模组的光轴平行于所述平面或者位于所述平面上。
可选地,所述红外光模组与所述可见光模组分设在所述摄像头模组的两侧;或者,所述红外光模组与所述可见光模组设置在所述摄像头模组的同一侧。
可选地,所述红外光模组相对所述摄像头模组邻近所述图像采集窗口设置;和/或,
所述可见光模组相对所述摄像头模组邻近所述图像采集窗口设置。
可选地,所述红外光模组相对所述图像采集窗口的设置距离和设置角度,使得所述图像采集窗口完全位于所述红外光模组的照射范围内;和/或,
所述可见光模组相对所述图像采集窗口的设置距离和设置角度,使得所述图像采集窗口完全位于所述可见光模组的照射范围内。
可选地,所述可见光模组的所述设置角度使得所述可见光模组的光轴倾斜于所述图像采集窗口所在的平面;和/或,
所述红外光模组的所述设置角度使得所述红外光模组的光轴倾斜于所述图像采集窗口所在的平面。
根据本发明的第二方面,还提供了一种用于手持式读取器的数据处理方法,该方法包括:
获取所述读取器的摄像头模组采集的图像,其中,所述图像由RGB-IR混合像素阵列构成;
根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容;
在所述内容为文本的情况下,针对识别到的所述文本执行设定操作;
在所述内容为隐形码的情况下,控制所述读取器的音频输出器件播放与识别到的所述隐形码相匹配的声音文件。
可选地,所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中分别提取出由RGB像素构成的RGB图像和由IR像素构成的IR图像;
检测所述RGB图像是否属于文本图像;
在所述RGB图像属于文本图像的情况下,根据所述RGB图像识别所述读取器读取的文本;
在所述RGB图像不属于文本图像的情况下,再检测所述IR图像是否属于隐形码图像;
在所述IR图像属于隐形码图像的情况下,根据所述IR图像识别所述读取器读取的隐形码。
可选地,所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像;
检测所述RGB图像是否属于文本图像;
在所述RGB图像属于文本图像的情况下,根据所述RGB图像识别所述读取器读取的文本;
在所述RGB图像不属于文本图像的情况下,再从所述RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,并检测所述IR图像是否属于隐形码图像;
在所述IR图像属于隐形码图像的情况下,根据所述IR图像识别所述读取器读取的隐形码。
可选地,所述方法在获取所述摄像头模组采集的图像之前,还包括:
响应于设定的读取事件,先启动所述读取器的红外光模组和可见光模组,为所述摄像头模组采集图像进行补光,再启动所述摄像头模组采集所述图像。
可选地,所述方法在获取所述读取器的摄像头模组采集的图像之前,还包括:
响应于设定的读取事件,获取当前读取模式;
在所述当前读取模式为点读模式的情况下,先启动所述读取器的红外模块,为所述摄像头模组采集图像进行补光,再启动所述摄像头模组采集所述图像;
所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中提取出由IR像素构成的IR图像;
检测所述IR图像是否属于隐形码图像;
在所述IR图像属于隐形码图像的情况下,根据所述IR图像识别所述读取器读取的隐形码;
在所述IR图像不属于隐形码图像的情况下,结束当前读取任务。
可选地,所述从所述RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,包括:
根据设定尺寸选取所述图像的部分区域,作为目标区域;
从对应所述目标区域的RGB-IR混合像素阵列中,提取出由IR像素构成的IR图像。
可选地,所述方法在获取所述读取器的摄像头模组采集的图像之前,还包括:
响应于设定的读取事件,获取当前读取模式;
在所述当前读取模式为扫描模式的情况下,先开启所述读取器的可见光模块,为所述摄像头模组采集图像进行补光,再启动所述摄像头模组采集所述图像;
所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像;
检测所述RGB图像是否属于文本图像;
在所述RGB图像属于文本图像的情况下,根据所述RGB图像识别所述读取器读取的文本;
在所述RGB图像不属于文本图像的情况下,结束当前读取任务。
可选地,所述从所述RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像,包括:
从所述RGB-IR混合像素阵列中提取出RGB像素阵列;
从所述RGB像素阵列中抽取出部分像素,并通过所述部分像素生成所述RGB图像。
根据本发明的第三方面,还提供了一种手持式读取器的数据处理装置,其特征在于,包括:
图像获取模块,用于获取所述读取器的摄像头模组采集的图像,其中,所述图像由RGB-IR混合像素阵列构成;
内容读取模块,用于根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容;
扫描处理模块,用于在所述内容为文本的情况下,针对识别到的所述文本执行设定操作;以及,
点读处理模块,用于在所述内容为隐形码的情况下,控制所述读取器的音频输出器件播放与识别到的所述隐形码相匹配的声音文件。
根据本发明的第四方面,还提供了一种手持式读取器,其包括摄像头模组和根据本发明的第三方面所述的数据处理装置,所述摄像头模组用于采集由RGB-IR混合像素阵列构成的图像;或者,
所述手持式读取器包括摄像头模组、处理器和存储器,所述摄像头模组用于采集由RGB-IR混合像素阵列构成的图像;所述存储器用于存储可执行的指令;所述处理器用于在所述指令的控制下执行根据本发明的第二方面所述的数据处理方法。
本发明的一个有益效果在于,本发明实施例的手持式读取器可以通过摄像头模组的一次采集同时获取到RGB图像和IR图像,其中,IR图像可用于支持点读笔功能的实现,而RGB图像由于包含有纸面上的各种颜色的文本内容,因此可用于更好地支持扫描笔功能的实现,包括扫描纸面上的黑色文本内容、彩色文本内容等,进而使得该读取器在扩展为同时具有扫描笔功能和点读笔功能时,仍可以获得相当于单一功能的扫描笔的识别率及获得相当于单一功能的点读笔的识别率。
通过以下参照附图对本发明的示例性实施例的详细描述,本发明的其它特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本发明的实施例,并且连同其说明一起用于解释本发明的原理。
图1是显示本发明实施例的手持式读取器的内部结构组成的方框原理图;
图2是根据本发明实施例的手持式读取器的局部结构示意图;
图3是根据本发明另一实施例的手持式读取器的局部结构示意图;
图4是根据本发明实施例的信息读取方法的流程示意图;
图5是根据本发明一个例子的信息读取方法的流程示意图;
图6是根据本发明另一个例子的信息读取方法的流程示意图;
图7是根据本发明第三个例子的信息读取方法的流程示意图;
图8是根据本发明实施例的数据处理装置的方框原理图。
附图标记说明:
100-壳体; 110-图像采集窗口;
120-光腔; 200-摄像头模组;
310-红外光模组; 320-可见光模组;
400-按键电路; 500-扬声器;
600-麦克风; 700-显示屏;
800-通信模块; 900-供电电路;
1000-充电电路 1100-耳机接口;
1200-USB接口; 1300-存储器;
1400-存储卡连接器; 210-图像传感器;
8000-数据处理装置; 8100-图像获取模块;
8200-内容读取模块; 8300-扫描处理模块;
8400-点读处理模块。
具体实施方式
现在将参照附图来详细描述本发明的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它例子可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
<组成结构实施例>
本发明实施例提供了一种手持式读取器,该读取器能够同时支持点读笔功能和扫描笔功能,其可以通过读取纸面上印制的隐形码实现点读笔功能,及通过读取纸面上的文本实现扫描笔功能。
如图1至图3所示,本发明一个实施例的手持式读取器包括处理器U1、摄像头模组200、可见光模组320和红外光模组310,其中,摄像头模组200用于进行图像采集;可见光模组320和红外光模组310用于为摄像头模组200采集图像时进行补光;而处理器U1则用于进行读取器各功能组件的控制处理工作,协调各功能组件完成整体功能。
以上处理器U1、摄像头模组200、可见光模组320和红外光模组310均设置在该读取器的如图2和图3所示的壳体100中。
在一个实施例中,该壳体100可以设置为具有细长形态的任何形状,例如具有类似于笔的形状,以便于手持。
如图2和图3所示,壳体100的前端开设有图像采集窗口110,以使得纸面反射的光线能够通过该图像采集窗口100入射至摄像头模组200中,进而实现摄像头模组200对纸面图像的采集。
该图像采集窗口110可以为方形开口,考虑该读取器即可以作为扫描笔使用,又可以作为点读笔使用的需求,该图像采集窗口110的尺寸例如但不局限于是9mmⅹ6mm。需说明的是,该图像采集窗口110的形状及尺寸不做具体限定,实施时可根据欲采集的图像大小综合确定。
以上摄像头模组200包括如图1所示的图像传感器210和双带通滤光片。该图像传感器210采集的图像由RGB-IR混合像素阵列构成,即,该图像传感器210可以通过一次采集获得由RGB-IR混合像素阵列构成的图像,其中,RGB代表红、绿、蓝三个通道的颜色,由RGB像素构成的图像为各种颜色图像,IR(Infrared Radiation)像素为红外像素,由IR像素构成的图像为黑白图像。该双带通滤光片允许通过的第一波段对应RGB波段,允许通过的第二波段对应IR波段,而对于其余波段的光谱通透率则极低,几乎为零。根据摄像头模组200的组装要求,进入摄像头模组200的光线将通过双带通滤光片入射至图像传感器210的感光区域上,这说明,在本实施例中,进入摄像头模组200的光线,将仅有RGB波段(可见光波段)和IR波段(红外光波段)的光线能够通过该双带通滤光片到达图像传感器210的感光区域进行成像。
以上摄像头模组200除图像传感器210和双带通滤光片之外,还包括镜头(由各种透镜组成)等组件,这些组件可以通过用于组装摄像头模组的任何手段进行组装,例如,双带通滤光片设置在图像传感器210与镜头之间,在此不再赘述。
本实施例中,摄像头模组200的光线入射面需要朝向该图像采集窗口110,以使得经由图像采集窗口110进入的由纸面反射的光线能够入射至摄像头模组200中,实现对纸面图像的采集。
在一个实施例中,如图2和图3所示,壳体100的内部形成与所述图像采集窗口110相连通的光腔120,摄像头模组200位于该光腔120内,外部光线是通过图像采集窗口110进入光腔120,并进而进入摄像头模组200实现图像采集。
在一个实施例中,该摄像头模组200的光轴可以垂直于图像采集窗口110所在的表面。
在一个实施例中,该摄像头模组200的光轴可以经过图像采集窗口110的几何中心。
本实施例中,红外光模组310和可见光模组320作为摄像头模组200的补光光源,红外光模组310和可见光模组320发射的光必需能够照射到图像采集窗口110。
在一个实施例中,红外光模组310和可见光模组320可以设置在摄像头模组200所在的光腔120中,以为摄像头模组200提供有效的补光。
在一个实施例中,红外光模组310的电路板焊盘与可见光模组320的电路板焊盘可以位于同一平面上,该平面可以穿过摄像头模组200,且该摄像头模组200的光轴平行于该平面或者位于该平面上。这一方面可以简化电路板的结构设计,并提高读取器内部结构的紧凑性;另一方面还可以使得红外光模组310和可见光模组320能够为摄像头模组200提供亮度足够的图像采集环境。
在此基础上,红外光模组310与可见光模组320可以如图2所示分设在摄像头模组200的两侧。红外光模组310与可见光模组320也可以如图3所示设置在摄像头模组200的中截面的同一侧,在此不做限定。
在一个实施例中,红外光模组310可以相对摄像头模组200邻近图像采集窗口110设置,以使得红外光模组310发出的红外光能够在图像采集窗口110具有较大的光照强度,进而增强进行红外补光的补光效果,提高摄像头模组200所采集图像的图像质量。
在一个实施例中,可见光模组320可以相对摄像头模组200邻近图像采集窗口110设置,以使得可见光模组320发出的可见光能够在图像采集窗口110具有较大的光照强度,进而增强进行可见光补光的补光效果,提高摄像头模组200所采集图像的图像质量。
在一个实施例中,红外光模组310相对图像采集窗口110的设置距离和相对图像采集窗口110的设置角度,可以使得图像采集窗口110完全位于红外光模组310的照射范围内,以提高红外光在图像采集窗口110上照射均匀度。
在此基础上,红外光模组310的该设置角度可以使得红外光模组310的光轴倾斜于该图像采集窗口110所在的平面,即红外光模组310的光轴即不平行于该平面,也不垂直于该平面。该种倾斜设置,容易在图像采集窗口110完全位于红外光模组310的照射范围的情况下,获得更好的照射均匀度。
在一个实施例中,可见光模组320相对图像采集窗口110的设置距离和相对图像采集窗口110的设置角度,可以使得图像采集窗口110完全位于可见光模组320的照射范围内,以提高红外光在图像采集窗口110上照射均匀度。
在此基础上,可见光模组320的设置角度可以使得可见光模组320的光轴倾斜于图像采集窗口110所在的平面,即可见光模组320的光轴即不平行于该平面,也不垂直于该平面。该种倾斜设置,容易在图像采集窗口110完全位于可见光模组320的照射范围的情况下,获得更好的照射均匀度。
以上摄像头模组200的图像传感器210的图像数据输出端与处理器U1的图像数据输入端连接,以使得图像传感器210可以将采集到的由RGB-IR混合像素阵列构成的图像数据传输至处理器U1进行后续处理。
红外光模组310的开关控制端与处理器U1的第一控制信号输出端连接,以使得处理器U1可以通过第一控制信号输出端向红外光模组310的开关控制端输出开关控制信号,进而控制红外光模组310的打开与关闭。
可见光模组320的开关控制端与处理器U1的第二控制信号输出端连接,以使得处理器U1可以通过第二控制信号输出端向可见光模组320的开关控制端输出开关控制信号,进而控制可见光模组320的打开与关闭。
本实施例中,可以将处理器U1、可见光模组320、红外光模组310、及摄像头模组200的图像传感器210焊接在一电路板上或多个电路板上,并通过所述电路板进行所需的电路连接。所述电路板可以固定安装在壳体100中。
该处理器U1可以被设置为:根据对摄像头模组200的图像传感器210提供的由RGB-IR混合像素阵列构成的图像进行识别,以确定该读取器读取的内容,并针对该内容执行相匹配的设定操作。
在一个实施例中,识别到的内容可以包括文本和/或隐形码。
以识别到的内容为文本为例,针对该内容执行相匹配的设定操作可以包括:录入和存储读取到的文本;对读取到的文本进行翻译,例如进行英译中;驱动音频输出器件播放读取到的文本或者翻译后的文本;以及,驱动显示屏显示读取后的文本和/或翻译后的文本中的任意一项或者多项,以实现扫描笔功能。
以识别到的内容为隐形码为例,针对该内容执行相匹配的设定操作可以包括:在读取器存储的文件库中,查找与该隐形码相匹配的声音文件进行播放,即实现点读笔功能。
如图1所示,读取器可以包括扬声器500和/或耳机接口1100等音频输出器件,音频输出器件与处理器U1连接。
如图1所示,读取器可以包括麦克风600等音频输入器件,该音频输入器件与处理器U1连接。
如图1所示,读取器可以包括通信模块800,通信模块800与处理器U1连接,通信模块800可以包括蓝牙模块、WIFI模块、ZIGBEE模块中的至少一项。读取器可以通过通信模块800与外部设备通信连接。
如图1所示,读取器可以包括显示屏700,该显示屏700与处理器U1连接。
如图1所示,读取器可以包括存储器1300,存储器1300可以用于存储指令、识别到的文本、翻译得到的文本、预存的声音文件等等。
如图1所示,读取器可以包括存储卡连接器1400,例如TF卡连接器、SD卡连接器等,以支持存储空间的扩展。
如图1所示,读取器可以包括USB接口1200等通信接口模块,这些通信接口模块与处理器U1连接,以通过通信接口模块连接外部设备,进而与外部设备通信。
如图1所示,读取器可以包括按键电路400,按键电路400的按键信号输出端与处理器U1连接,按键电路400例如包括按键开关和电阻,二者串联连接在读取器的电源端与接地端之间,以在按键开关打开和闭合时分别输出不同的电平信号,进而供处理器U1根据接收到的电平信号识别按键开关的状态。读取器可以根据需要设置开启读取的按键电路、选择模式的按键电路、控制电源通断的按键电路等,在此不做限定。
如图1所示,读取器可以包括供电电路900,供电电路900为读取器的所有用电器件,包括处理器U1,提供工作电源,该供电电路900可以包括电池及电压转换电路等。
如图1所示,读取器可以包括受处理器U1控制的充电电路1000,以通过充电电路1000为电池充电。
本实施例中,读取器可以根据需要包括以上音频输出器件、音频输入器件、通信模块、存储器、通信接口模块、显示屏、按键电路中的至少一项,以支持处理器针对识别到的内容执行相匹配的设定操作。
根据本实施例的读取器的工作原理为:用户在手持该读取器置于纸面上时,处理器U1根据读取指令(例如打开读取开关)启动红外光模组310和/或可见光模组320,为所述摄像头模组采集图像进行补光,并启动摄像头模组200采集纸面图像;摄像头模组200在采集图像后,会将采集到的由RGB-IR混合像素阵列构成的图像数据发送至处理器U1;处理器U1在接收到该图像数据后,去除RGB-IR混合像素阵列的耦合相关性,以从RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像(各种颜色图像)和/或由IR像素构成的IR图像(黑白图像),并根据RGB图像和/或IR图像中,识别读取器读取的内容,其中,处理器U1可以通过RGB图像读取文本内容,及通过IR图像读取隐形码;以及,处理器U1针对识别到的该内容执行相匹配的设定操作。
根据本实施例的手持式读取器,其通过摄像头模组200进行一次图像采集就可以同时获取到RGB图像和IR图像,其中,IR图像可用于支持点读笔功能的实现,而RGB图像由于包含有纸面上的各种颜色的文本内容,因此可用于更好地支持扫描笔功能的实现,包括扫描纸面上的黑色文本内容、彩色文本内容等,进而使得该读取器在扩展为同时支持扫描笔功能和点读笔功能时,仍可以获得相当于单一功能的扫描笔的识别率及获得相当于单一功能的点读笔的识别率。
以上每个实施例重点说明的都是与其他实施例的不同之处,各个实施例可以根据需要单独使用或者相互结合使用,在此不做限定。
<方法实施例>
本发明还提供了一种手持式读取器的数据处理方法,该手持式读取器设置有摄像头模组,该摄像头模组的图像传感器210用于采集由RGB-IR混合像素阵列构成的图像,该手持式读取器可以是以上任意结构实施例中的手持式读取器。
图4是根据本发明一实施例的数据处理方法的流程示意图,该数据处理方法例如由图1所示的处理器U1执行。如图4所示,该数据处理方法可以包括如下步骤S4100~S4320。
步骤S4100,获取摄像头模组采集的图像,其中,该图像由RGB-IR混合像素阵列构成。
该步骤S4100中,处理器U1可以通过与摄像头模组连接的图像数据输入端获取摄像头模组采集到的该图像的数据。
该步骤S4100中获取摄像头模组采集的图像,可以为:响应于设定的读取事件,获取摄像头模组采集的图像。
该设定的读取事件可以包括以下至少一项:接收到开启读取的外部指令,例如通过按键、触摸屏、音频输入器件等触发该外部指令;以及,检测到读取器发生运动变化等。
步骤S4200,根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容。
该步骤S4200中,可以通过RGB-IR混合像素阵列中的RGB像素构成RGB图像,该RGB图像可以用于识别读取器读取的文本内容。另外,可以通过RGB-IR混合像素阵列中的IR像素构成IR图像,该IR图像可以用于识别读取器读取的隐形码。
步骤S4310,在识别到的内容为文本的情况下,针对识别到的该文本执行设定操作。
该步骤S4310中,在识别到的内容为文本的情况下,将自动进入扫描模式,即实现扫描笔功能。在扫描模式下,本领域技术人员可知需要拼接连续采集的图像,以进行文本的识别。以上设定操作请参见结构实施例中的说明,在此不再赘述。
步骤S4320,在识别到的内容为隐形码的情况下,驱动读取器的音频输出器件播放与该隐形码相匹配的声音文件。
该声音文件预先存储在读取器的存储器中,处理器U1可以在识别出隐形码后,确定隐形码的唯一编号,并根据该唯一编号为索引,查找与该隐形码相匹配的声音文件。
根据本实施例的数据处理方法,读取器可以根据摄像头模组200采集到的由RGB-IR混合像素阵列构成的图像,准确地识别出纸面上印制的各种颜色的文本内容及印制的隐形码,其中,IR像素能够用于识别隐形码,进而支持点读笔功能的实现,而RGB像素能够用于识别各种颜色的文本内容,进而更好地支持扫描笔功能的实现,因此,通过该数据处理方法,读取器在扩展为同时具有扫描笔功能和点读笔功能时,仍可以获得相当于单一功能的扫描笔的识别率及获得相当于单一功能的点读笔的识别率。
在一个实施例中,以上步骤S4200中根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容,可以包括如下步骤S4211~S4215。
步骤S4211,从RGB-IR混合像素阵列中分别提取出由RGB像素构成的RGB图像和由IR像素构成的IR图像。
本步骤S4211中,可以从RGB-IR混合像素阵列中提取出所有的RGB像素,并按照这些RGB像素在该阵列中的位置关系,排列这些RGB像素,得到RGB图像。同理,可以从RGB-IR混合像素阵列中提取出所有的IR像素,并按照这些IR像素在该阵列中的位置关系,排列这些IR像素,得到IR图像。以上提取过程即去除了RGB-IR混合像素阵列中不同类型像素间的耦合相关性,进而分别获得RGB图像和IR图像。
步骤S4212,检测RGB图像是否属于文本图像,如是,则执行以下步骤S4213,如否,则执行以下步骤S4214。
本步骤S4212中,可以通过识别RGB图像中是否存在文字,来检测RGB图像是否属于文本图像,例如,只要RGB图像中存在一个文字,即确定该RGB图像为文本图像,以加快检测速度。
步骤S4213,在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本。
由于文字识别技术是非常成熟的技术,本实施例可以通过任意的文字识别技术实施该文本识别,例如但不限于是OCR识别技术,在此不再赘述。
步骤S4214,在RGB图像不属于文本图像的情况下,再检测IR图像是否属于隐形码图像,如是,则执行以下步骤S4215,如否,则结束当前读取任务。
本步骤S4214中,可以通过识别IR图像中是否存在隐形码特征,例如,由点阵构成的特征,来检测IR图像是否属于隐形码图像。
步骤S4215,在IR图像属于隐形码的情况下,根据该IR图像识别该隐形码。
在该步骤S4215中,识别该隐形码指识别该隐形码的图案样式,以确定该隐形码的唯一编码。
根据该实施例,读取器可以自动判断用户当前的操作是期望使用点读模式还是扫描模式,而不需用户选择,简化用户操作。
根据该实施例的数据处理方法,还可以在步骤S4100的获取摄像头模组采集的图像之前,执行以下步骤,即:响应于设定的读取事件,先启动读取器的红外光模组和可见光模组,为所述摄像头模组采集图像进行补光,再启动摄像头模组采集该图像,以供步骤S4200获取该图像。在此,由于读取器在置于纸面上时,图像采集窗口110会被纸面遮挡,因此,摄像头模组所处的环境的光线较暗,因此,在采集图像前开启红外光模组和可见光模组进行拍摄补光,有利于大大改善所采集图像的质量。
在一个实施例中,步骤S4200中根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容,可以包括以下步骤S4221~S4225:
步骤S4221,从RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像。
步骤S4222,检测该RGB图像是否属于文本图像,如是,执行以下步骤S4223,如否,执行以下步骤S4224。
步骤S4223,在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本。
步骤S4224,在RGB图像不属于文本图像的情况下,再从RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,并检测该IR图像是否属于隐形码图像,如是,则执行以下步骤S4225,如否,则结束当前读取任务。
步骤S4225,在该IR图像属于隐形码图像的情况下,根据该IR图像识别读取器读取的隐形码。
根据该实施例,读取器可以自动判断用户当前的操作是期望使用点读模式还是扫描模式,而不需用户选择,简化用户操作,而且还可以在此基础上减少数据处理量。
根据该实施例的数据处理方法,同样可以在步骤S4100的获取摄像头模组采集的图像之前,执行以下步骤,即:响应于设定的读取事件,先启动读取器的红外光模组和可见光模组,为所述摄像头模组采集图像进行补光,再启动摄像头模组采集该图像,以供步骤S4200获取该图像。
在一个实施例中,该数据处理方法可以在以上步骤S4100的获取读取器的摄像头模组采集的图像之前,还包括如下步骤:响应于设定的读取事件,获取当前读取模式;以及,在当前读取模式为点读模式的情况下,先启动读取器的红外光模块,为所述摄像头模组采集图像进行补光,再启动摄像头模组采集图像。
该实施例中需要用户选择所需的读取模式,例如通过按键电路、触摸屏、音频输入器件等选择所需的读取模式,在此不做限定。
在此基础上,以上步骤S4200中根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容,可以包括以下步骤S4231~S4233:
步骤S4231,从RGB-IR混合像素阵列中提取出由IR像素构成的IR图像。
该步骤S4231可以包括:根据设定尺寸选取图像的部分区域,作为目标区域;以及,从对应目标区域的RGB-IR混合像素阵列中,提取出由IR像素构成的IR图像。
该设定尺寸可以小于图像采集窗口的尺寸,例如为3mmⅹ3mm。
由于通过对应该目标区域的IR像素即可识别出隐形码的图案样式,因此,该种方式有利于减少处理器的数据处理量。
步骤S4232,检测该IR图像是否属于隐形码图像,如是,则执行以下步骤S4233,如否,则结束当前读取任务。
步骤S4233,在IR图像属于隐形码图像的情况下,根据IR图像识别读取器读取的隐形码。
该实施例中,支持用于选择所需的读取模式,在选取的当前读取模式为点读模式的情况下,仅需利用IR图像识别隐形码即可,而无需提取RGB像素生成RGB图像,也不需对RGB图像进行任何的识别处理,这有利于减少处理器的数据处理量。
在一个实施例中,该数据处理方法可以在以上步骤S4100的获取读取器的摄像头模组采集的图像之前,还包括如下步骤:响应于设定的读取事件,获取当前读取模式;以及,在当前读取模式为扫描模式的情况下,先启动读取器的可见光模块,为所述摄像头模组采集图像进行补光,再启动摄像头模组采集图像。
在此基础上,以上步骤S4200中根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容,可以包括以下步骤S4241~S4243:
步骤S4241,从RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像。
该步骤S4241可以包括:从RGB-IR混合像素阵列中提取出RGB像素阵列;以及,从RGB像素阵列中抽取部分像素,生成该RGB图像。在此,由于摄像头模组采集的图像的分辨率通常较高,而文字识别在低于该分辨率的情况下即可具有很高的识别率,因此,可以通过抽取部分像素的方式降低RGB图像的分辨率,以减少数据处理量。例如,摄像头模组采集的图像的分辨率为320ⅹ240,而通过抽取部分RGB像素生成的RGB图像的分辨率可以仅为120ⅹ80。
步骤S4242,检测该RGB图像是否属于文本图像,如是,则执行以下步骤S4243,如否,则结束当前读取任务。
步骤S4243,在RGB图像属于文本图像的情况下,根据RGB图像识别所述读取器读取的文本。
该实施例中,支持用于选择所需的读取模式,在选取的当前读取模式为扫描模式的情况下,仅需利用RGB图像识别读取的文本即可,而无需提取IR像素生成IR图像,也不需对IR图像进行任何的识别处理,这有利于减少处理器的数据处理量。
<数据处理方法的具体实施例1>
图5是根据本发明具体实施例1的数据处理方法的流程示意图,该实施例为自动检测用户当前期望使用的读取模式的例子,该数据处理方法可以由图1所示的处理器U1实施。
如图5所示,该实施例的数据处理方法可以包括如下步骤:
步骤S5100,在开机后检测设定的读取事件,并在检测到任意读取事件的情况下,执行以下步骤S5200,及在未检测到任意读取事件的情况下,结束本次读取任务,循环实施步骤S5100。
步骤S5200,启动读取器的红外光模组和可见光模组进行补光,之后执行步骤S5300。
步骤S5300,启动摄像头模组采集由RGB-IR混合像素阵列构成的图像。
步骤S5400,获取摄像头模组在步骤S5300采集的该图像。
步骤S5500,从该图像的RGB-IR混合像素阵列中分别提取出由RGB像素构成的RGB图像和由IR像素构成的IR图像,之后执行步骤S5600。
该步骤S5500中,可以将从该图像的RGB-IR混合像素阵列中提取出的RGB像素存放至RGB缓冲区,并基于提取出的RGB像素生成RGB图像。同理,可以将从该图像的RGB-IR混合像素阵列中提取出的IR像素存放至IR缓冲区,并基于提取出的IR像素生成IR图像。
步骤S5600,检测RGB图像是否属于文本图像,如是,则执行以下步骤S5711,如否,则执行以下步骤S5721。
步骤S5711,在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本,之后,执行步骤S5712。
步骤S5712,针对识别到的该文本执行设定操作,执行完成后结束本次读取任务。
该设定操作例如是文本录入、存储、翻译、显示等等。
步骤S5721,在RGB图像不属于文本图像的情况下,再检测IR图像是否属于隐形码图像,如是,则执行以下步骤S5722,如否,则结束当前读取任务。
步骤S5722,在IR图像属于隐形码的情况下,根据该IR图像识别该隐形码,之后执行步骤S5723。
步骤S5723,驱动读取器的音频输出器件播放与该隐形码相匹配的声音文件,完成后结束当前读取任务。
<数据处理方法的具体实施例2>
图6是根据本发明具体实施例2的数据处理方法的流程示意图,该实施例为自动检测用户当前期望使用的读取模式的又一例子,该数据处理方法可以由图1所示的处理器U1实施。
如图6所示,该实施例的数据处理方法可以包括如下步骤:
步骤S6100,在开机后检测设定的读取事件,并在检测到任意读取事件的情况下,执行以下步骤S6200,及在未检测到任意读取事件的情况下,结束本次读取任务,循环实施步骤S6100。
步骤S6200,启动读取器的红外光模组和可见光模组进行补光,之后执行步骤S6300。
步骤S6300,启动摄像头模组采集由RGB-IR混合像素阵列构成的图像。
步骤S6400,获取摄像头模组在步骤S6300采集的该图像。
步骤S6500,从该图像的RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像,之后执行步骤S6600。
步骤S6600,检测RGB图像是否属于文本图像,如是,则执行以下步骤S6711,如否,则执行以下步骤S6721。
步骤S6711,在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本,之后,执行步骤S6712。
步骤S6712,针对识别到的该文本执行设定操作,执行完成后结束本次读取任务。
步骤S6721,在RGB图像不属于文本图像的情况下,从步骤S6400获取到的图像的RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,之后执行步骤S6722。
步骤S6722,检测该IR图像是否属于隐形码图像,如是,则执行以下步骤S6723,如否,则结束当前读取任务。
步骤S6723,在IR图像属于隐形码的情况下,根据该IR图像识别该隐形码,之后执行步骤S6724。
步骤S6724,驱动读取器的音频输出器件播放与该隐形码相匹配的声音文件,完成后结束当前读取任务。
<数据处理方法的具体实施例3>
图7是根据本发明具体实施例3的数据处理方法的流程示意图,该实施例是支持用户选择当前期望使用的读取模式的例子,该数据处理方法可以由图1所示的处理器U1实施。
如图7所示,该实施例的数据处理方法可以包括如下步骤:
步骤S7100,在开机后检测设定的读取事件,并在检测到任意读取事件的情况下,执行以下步骤S7200,及在未检测到任意读取事件的情况下,结束本次读取任务,循环实施步骤S7100。
步骤S7200,检测当前读取模式是否为点读模式,如是,则执行以下步骤S7311,如否,则当前读取模式为扫描模式,执行以下步骤S7321。
步骤S7311,启动读取器的红外光模组进行补光,之后执行步骤S7312。
步骤S7312,启动摄像头模组采集由RGB-IR混合像素阵列构成的图像。
步骤S7313,获取摄像头模组在步骤S7312采集的该图像,之后执行步骤S7314。
步骤S7314,从该图像的RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,之后执行步骤S7315。
该步骤S7314中,可以根据设定尺寸选取该图像的部分区域,作为目标区域,并从对应该目标区域的RGB-IR混合像素阵列中,提取出由IR像素构成的IR图像,以减少数据处理量。
步骤S7315,检测该IR图像是否属于隐形码图像,如是,则执行以下步骤S7316,如否,则结束当前读取任务。
步骤S7316,在IR图像属于隐形码的情况下,根据该IR图像识别该隐形码,之后执行步骤S7317。
步骤S7317,驱动读取器的音频输出器件播放与该隐形码相匹配的声音文件,完成后结束当前读取任务。
步骤S7321,启动读取器的可见光模组进行补光,之后执行步骤S7322。
步骤S7322,启动摄像头模组采集由RGB-IR混合像素阵列构成的图像。
步骤S7323,获取摄像头模组在步骤S7322采集的该图像,之后执行步骤S7324。
步骤S7324,从该图像的RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像,之后执行步骤S7325。
该步骤S7324中,可以从RGB-IR混合像素阵列中提取出RGB像素阵列,并利用从RGB像素阵列中抽取出的部分像素生成该RGB图像,以在保证识别率的前提下,减少数据处理量。
步骤S7325,检测RGB图像是否属于文本图像,如是,则执行以下步骤S7326,如否,则结束本次读取任务。
步骤S7326,在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本,之后,执行步骤S7327。
步骤S7327,针对识别到的该文本执行设定操作,执行完成后结束本次读取任务。
<装置实施例>
图8是根据本发明实施例的手持式读取器的数据处理装置的方框原理图。
根据图8所示,该数据处理装置8000包括图像获取模块8100、内容读取模块8200、扫描处理模块8300和点读处理模块8400。
该图像获取模块8100可以用于获取读取器的摄像头模组200采集的图像,其中,该图像由RGB-IR混合像素阵列构成。
该内容读取模块8200用于根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容。
该扫描处理模块8300用于在该内容为文本的情况下,针对识别到的该文本执行设定操作。
该点读处理模块8400用于在该内容为隐形码的情况下,控制读取器的音频输出器件播放与识别到的该隐形码相匹配的声音文件。
在自动检测用户当前期望使用的读取模式一个实施例中,以上内容读取模块8200在根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容时,可以用于:从RGB-IR混合像素阵列中分别提取出由RGB像素构成的RGB图像和由IR像素构成的IR图像;检测该RGB图像是否属于文本图像;在RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本;在RGB图像不属于文本图像的情况下,再检测IR图像是否属于隐形码图像;以及,在IR图像属于隐形码图像的情况下,根据该IR图像识别所述读取器读取的隐形码。
在自动检测用户当前期望使用的读取模式的另一个实施例中,以上内容读取模块8200在根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容时,可以用于:从RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像;检测该RGB图像是否属于文本图像;在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本;在该RGB图像不属于文本图像的情况下,再从RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,并检测该IR图像是否属于隐形码图像;以及,在该IR图像属于隐形码图像的情况下,根据该IR图像识别所述读取器读取的隐形码。
在自动检测用户当前期望使用的读取模式的任一实施例中,该数据处理装置8000还可以包括启动处理模块,该启动处理模块可以用于:响应于设定的读取事件,先启动读取器的红外光模组和可见光模组进行拍摄补光,再启动摄像头模组采集图像,以供图像获取模块8100获取摄像头模组采集到的该图像。
在支持用户选择当前期望使用的读取模式的一个实施例中,该数据处理装置8000还可以包括启动处理模块,该启动处理模块可以用于:响应于设定的读取事件,获取当前读取模式;在当前读取模式为点读模式的情况下,先启动读取器的红外模块进行补光,再启动摄像头模组采集图像。在此基础上,以上内容读取模块8200在根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容时,可以用于:从RGB-IR混合像素阵列中提取出由IR像素构成的IR图像;检测该IR图像是否属于隐形码图像;在该IR图像属于隐形码图像的情况下,根据该IR图像识别读取器读取的隐形码;以及,在IR图像不属于隐形码图像的情况下,结束当前读取任务。
在此基础上,以上内容读取模块8200在从RGB-IR混合像素阵列中提取出由IR像素构成的IR图像时,可以用于:从RGB-IR混合像素阵列中提取出由IR像素构成的IR图像根据设定尺寸选取所述图像的部分区域,作为目标区域;从对应所述目标区域的RGB-IR混合像素阵列中,提取出由IR像素构成的IR图像。
在支持用户选择当前期望使用的读取模式的一个实施例中,该数据处理装置8000还可以包括启动处理模块,该启动处理模块可以用于:响应于设定的读取事件,获取当前读取模式;在当前读取模式为扫描模式的情况下,先开启读取器的可见光模块进行补光,再启动摄像头模组采集图像。在此基础上,以上内容读取模块8在根据对RGB-IR混合像素阵列进行识别,以确定该读取器读取的内容时,可以用于:从RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像;检测该RGB图像是否属于文本图像;在该RGB图像属于文本图像的情况下,根据该RGB图像识别读取器读取的文本;以及,在该RGB图像不属于文本图像的情况下,结束当前读取任务。
在此基础上,以上内容读取模块8200在从RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像时,可以用于:从RGB-IR混合像素阵列中提取出RGB像素阵列;以及,从RGB像素阵列中抽取出部分像素,并通过该部分像素生成该RGB图像。
<硬件结构实施例>
在一个实施例中,本发明提供的手持式读取器可以包括如图1所示的摄像头模组200和图8所示的数据处理装置8000,该摄像头模组200用于采集由RGB-IR混合像素阵列构成的图像。
在一个实施例中,本发明提供的手持式读取器可以包括如图1至图3所示的摄像头模组200、处理器U1和存储器1300,摄像头模组200用于采集由RGB-IR混合像素阵列构成的图像;存储器1300用于存储可执行的指令;处理器U1用于在该指令的控制下执行根据本发明任意实施例的数据处理方法。
以上硬件实施例与组成结构实施例侧重描述读取器的不同部分,本领域技术人员能够清楚的是,以上硬件实施例和结构实施例可以单独使用,也可以相互结合使用,在此不做限定。
本发明可以是装置、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本发明的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本发明的各个方面。
这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本发明的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是,通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本发明的范围由所附权利要求来限定。
Claims (18)
1.一种手持式读取器,其特征在于,包括壳体、及设置在所述壳体中的处理器、摄像头模组、红外光模组和可见光模组;
所述壳体设置有图像采集窗口,所述摄像头模组的光线入射面朝向所述图像采集窗口;
所述摄像头模组包括图像传感器和双带通滤光片,所述图像传感器用于采集由RGB-IR混合像素阵列构成的图像,所述图像传感器的图像数据输出端与所述处理器的图像数据输入端连接;所述双带通滤光片允许通过的第一波段对应RGB波段,允许通过的第二波段对应IR波段;所述RGB-IR混合像素阵列中的RGB像素对应所述手持式读取器的扫描模式,所述RGB-IR混合像素阵列中的IR像素对应所述手持式读取器的点读模式;
所述红外光模组和所述可见光模组用于向所述摄像头模组提供补光光源,所述红外光模组的开关控制端与所述处理器的第一控制信号输出端连接,所述可见光模组的开关控制端与所述处理器的第二控制信号输出端连接;
所述处理器被设置为:根据对所述图像传感器提供的所述图像进行识别,以确定所述读取器读取的内容,并针对所述内容执行相匹配的设定操作。
2.根据权利要求1所述的手持式读取器,其特征在于,所述内容包括文本和隐形码中的至少一项。
3.根据权利要求1所述的手持式读取器,其特征在于,所述壳体内形成有与所述图像采集窗口连通的光腔,所述摄像头模组、所述红外光模组和所述可见光模组均设置在所述光腔内。
4.根据权利要求1所述的手持式读取器,其特征在于,所述红外光模组的电路板焊盘与所述可见光模组的电路板焊盘位于同一平面上,所述平面穿过所述摄像头模组,且所述摄像头模组的光轴平行于所述平面或者位于所述平面上。
5.根据权利要求4所述的手持式读取器,其特征在于,所述红外光模组与所述可见光模组分设在所述摄像头模组的两侧;或者,所述红外光模组与所述可见光模组设置在所述摄像头模组的同一侧。
6.根据权利要求1所述的手持式读取器,其特征在于,所述红外光模组相对所述摄像头模组邻近所述图像采集窗口设置;和/或,
所述可见光模组相对所述摄像头模组邻近所述图像采集窗口设置。
7.根据权利要求1至6中任一项所述的手持式读取器,其特征在于,所述红外光模组相对所述图像采集窗口的设置距离和设置角度,使得所述图像采集窗口完全位于所述红外光模组的照射范围内;和/或,
所述可见光模组相对所述图像采集窗口的设置距离和设置角度,使得所述图像采集窗口完全位于所述可见光模组的照射范围内。
8.根据权利要求7所述的手持式读取器,其特征在于,所述可见光模组的所述设置角度使得所述可见光模组的光轴倾斜于所述图像采集窗口所在的平面;和/或,
所述红外光模组的所述设置角度使得所述红外光模组的光轴倾斜于所述图像采集窗口所在的平面。
9.一种手持式读取器的数据处理方法,其特征在于,所述方法包括:
获取所述读取器的摄像头模组采集的图像,其中,所述图像由RGB-IR混合像素阵列构成;
根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容;
在所述内容为文本的情况下,针对识别到的所述文本执行设定操作;
在所述内容为隐形码的情况下,控制所述读取器的音频输出器件播放与识别到的所述隐形码相匹配的声音文件。
10.根据权利要求9所述的方法,其特征在于,所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中分别提取出由RGB像素构成的RGB图像和由IR像素构成的IR图像;
检测所述RGB图像是否属于文本图像;
在所述RGB图像属于文本图像的情况下,根据所述RGB图像识别所述读取器读取的文本;
在所述RGB图像不属于文本图像的情况下,再检测所述IR图像是否属于隐形码图像;
在所述IR图像属于隐形码图像的情况下,根据所述IR图像识别所述读取器读取的隐形码。
11.根据权利要求9所述的方法,其中,所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像;
检测所述RGB图像是否属于文本图像;
在所述RGB图像属于文本图像的情况下,根据所述RGB图像识别所述读取器读取的文本;
在所述RGB图像不属于文本图像的情况下,再从所述RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,并检测所述IR图像是否属于隐形码图像;
在所述IR图像属于隐形码图像的情况下,根据所述IR图像识别所述读取器读取的隐形码。
12.根据权利要求10或11所述的方法,其特征在于,所述方法在获取所述摄像头模组采集的图像之前,还包括:
响应于设定的读取事件,先启动所述读取器的红外光模组和可见光模组,为所述摄像头模组采集图像进行补光,再启动所述摄像头模组采集所述图像。
13.根据权利要求9所述的方法,其中,所述方法在获取所述读取器的摄像头模组采集的图像之前,还包括:
响应于设定的读取事件,获取当前读取模式;
在所述当前读取模式为点读模式的情况下,先启动所述读取器的红外模块,为所述摄像头模组采集图像进行补光,再启动所述摄像头模组采集所述图像;
所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中提取出由IR像素构成的IR图像;
检测所述IR图像是否属于隐形码图像;
在所述IR图像属于隐形码图像的情况下,根据所述IR图像识别所述读取器读取的隐形码;
在所述IR图像不属于隐形码图像的情况下,结束当前读取任务。
14.根据权利要求13所述的方法,其中,所述从所述RGB-IR混合像素阵列中提取出由IR像素构成的IR图像,包括:
根据设定尺寸选取所述图像的部分区域,作为目标区域;
从对应所述目标区域的RGB-IR混合像素阵列中,提取出由IR像素构成的IR图像。
15.根据权利要求9所述的方法,其中,所述方法在获取所述读取器的摄像头模组采集的图像之前,还包括:
响应于设定的读取事件,获取当前读取模式;
在所述当前读取模式为扫描模式的情况下,先开启所述读取器的可见光模块,为所述摄像头模组采集图像进行补光,再启动所述摄像头模组采集所述图像;
所述根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容,包括:
从所述RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像;
检测所述RGB图像是否属于文本图像;
在所述RGB图像属于文本图像的情况下,根据所述RGB图像识别所述读取器读取的文本;
在所述RGB图像不属于文本图像的情况下,结束当前读取任务。
16.根据权利要求15所述的方法,其特征在于,所述从所述RGB-IR混合像素阵列中提取出由RGB像素构成的RGB图像,包括:
从所述RGB-IR混合像素阵列中提取出RGB像素阵列;
从所述RGB像素阵列中抽取出部分像素,并通过所述部分像素生成所述RGB图像。
17.一种手持式读取器的数据处理装置,其特征在于,包括:
图像获取模块,用于获取所述读取器的摄像头模组采集的图像,其中,所述图像由RGB-IR混合像素阵列构成;
内容读取模块,用于根据对所述RGB-IR混合像素阵列进行识别,以确定所述读取器读取的内容;
扫描处理模块,用于在所述内容为文本的情况下,针对识别到的所述文本执行设定操作;以及,
点读处理模块,用于在所述内容为隐形码的情况下,控制所述读取器的音频输出器件播放与识别到的所述隐形码相匹配的声音文件。
18.一种手持式读取器,其特征在于,包括摄像头模组和权利要求17所述的数据处理装置,所述摄像头模组用于采集由RGB-IR混合像素阵列构成的图像;或者,
所述手持式读取器包括摄像头模组、处理器和存储器,所述摄像头模组用于采集由RGB-IR混合像素阵列构成的图像;所述存储器用于存储可执行的指令;所述处理器用于在所述指令的控制下执行根据权利要求9-16中任一项所述的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911025715.1A CN110751862B (zh) | 2019-10-25 | 2019-10-25 | 一种手持式读取器及其数据处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911025715.1A CN110751862B (zh) | 2019-10-25 | 2019-10-25 | 一种手持式读取器及其数据处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110751862A CN110751862A (zh) | 2020-02-04 |
CN110751862B true CN110751862B (zh) | 2020-11-20 |
Family
ID=69280092
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911025715.1A Active CN110751862B (zh) | 2019-10-25 | 2019-10-25 | 一种手持式读取器及其数据处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110751862B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN212809258U (zh) * | 2020-09-29 | 2021-03-26 | 北京搜狗科技发展有限公司 | 扫描笔 |
CN112767782B (zh) * | 2021-01-19 | 2022-08-19 | 武汉理工大学 | 一种用于实时检测教师情绪的智能教鞭系统 |
CN114979589B (zh) * | 2021-02-26 | 2024-02-06 | 深圳怡化电脑股份有限公司 | 图像处理方法、装置、电子设备及介质 |
CN113420758A (zh) * | 2021-07-30 | 2021-09-21 | 深圳市众鑫创展科技有限公司 | 一种集成式oid笔头扫码装置、导光方法及点读笔 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003110823A (ja) * | 2001-09-27 | 2003-04-11 | Fuji Photo Film Co Ltd | 画像読取装置 |
CN200969098Y (zh) * | 2006-06-20 | 2007-10-31 | 北京意锐新创科技有限公司 | 一种手持式二维条码读取器 |
CN101189613A (zh) * | 2005-05-31 | 2008-05-28 | 讯宝科技公司 | 用来鉴定产品的方法和设备 |
CN102033663A (zh) * | 2010-09-30 | 2011-04-27 | 广东威创视讯科技股份有限公司 | 摄像头表面定位系统以及笔色识别方法 |
CN102289957A (zh) * | 2011-09-01 | 2011-12-21 | 中国科学院深圳先进技术研究院 | 点读机及其发声方法 |
CN102999180A (zh) * | 2011-09-15 | 2013-03-27 | 汉王科技股份有限公司 | 一种扫描笔及其扫描方法 |
CN104063675A (zh) * | 2014-04-24 | 2014-09-24 | 嘉善众智软件开发有限公司 | 条码识别装置、纸币塑封包装机和条码识别方法 |
CN205003694U (zh) * | 2015-09-18 | 2016-01-27 | 北京汉王国粹科技有限责任公司 | 一种扫描笔 |
CN207752496U (zh) * | 2018-01-31 | 2018-08-21 | 浙江工业大学 | 一种扫描笔 |
CN108921154A (zh) * | 2018-07-10 | 2018-11-30 | 深圳闳宸科技有限公司 | 点读方法、装置、点读设备及音视频文件关联方法 |
-
2019
- 2019-10-25 CN CN201911025715.1A patent/CN110751862B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003110823A (ja) * | 2001-09-27 | 2003-04-11 | Fuji Photo Film Co Ltd | 画像読取装置 |
CN101189613A (zh) * | 2005-05-31 | 2008-05-28 | 讯宝科技公司 | 用来鉴定产品的方法和设备 |
CN200969098Y (zh) * | 2006-06-20 | 2007-10-31 | 北京意锐新创科技有限公司 | 一种手持式二维条码读取器 |
CN102033663A (zh) * | 2010-09-30 | 2011-04-27 | 广东威创视讯科技股份有限公司 | 摄像头表面定位系统以及笔色识别方法 |
CN102289957A (zh) * | 2011-09-01 | 2011-12-21 | 中国科学院深圳先进技术研究院 | 点读机及其发声方法 |
CN102999180A (zh) * | 2011-09-15 | 2013-03-27 | 汉王科技股份有限公司 | 一种扫描笔及其扫描方法 |
CN104063675A (zh) * | 2014-04-24 | 2014-09-24 | 嘉善众智软件开发有限公司 | 条码识别装置、纸币塑封包装机和条码识别方法 |
CN205003694U (zh) * | 2015-09-18 | 2016-01-27 | 北京汉王国粹科技有限责任公司 | 一种扫描笔 |
CN207752496U (zh) * | 2018-01-31 | 2018-08-21 | 浙江工业大学 | 一种扫描笔 |
CN108921154A (zh) * | 2018-07-10 | 2018-11-30 | 深圳闳宸科技有限公司 | 点读方法、装置、点读设备及音视频文件关联方法 |
Also Published As
Publication number | Publication date |
---|---|
CN110751862A (zh) | 2020-02-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110751862B (zh) | 一种手持式读取器及其数据处理方法 | |
CN110765998B (zh) | 手持式读取器 | |
US11574115B2 (en) | Method of processing analog data and electronic device thereof | |
JP7110412B2 (ja) | 生体検出方法及び装置、電子機器並びに記憶媒体 | |
JP5997808B1 (ja) | 画像処理装置、日付識別装置、画像処理方法、および、プログラム | |
KR102157313B1 (ko) | 촬영된 영상을 이용하여 객체를 인식하는 방법 및 컴퓨터 판독 가능한 기록 매체 | |
KR100664421B1 (ko) | 구비된 카메라를 이용한 명함 인식을 위한 휴대용 단말기및 명함 인식 방법 | |
AU2007202102B2 (en) | Function command system, function command device, function command analysis system, presentation system, and computer readable medium | |
US10419661B2 (en) | Shooting method and shooting device | |
CN107885430B (zh) | 一种音频播放方法、装置、存储介质及电子设备 | |
US20030040346A1 (en) | Portable information terminal device having camera feature | |
TW201214293A (en) | Hybrid system for identifying printed page | |
CN107343185B (zh) | 投影设备的处理方法及装置、投影设备摄像头 | |
EP3362942A1 (en) | Electronic devices with improved iris recognition and methods thereof | |
CN103096094A (zh) | 视觉识别装置和方法 | |
CN102201051A (zh) | 文字摘录装置、方法和系统 | |
JP2006309405A (ja) | メータ認識システム、メータ認識方法、およびメータ認識プログラム | |
CN102117400A (zh) | 捕获和分析目标的图像数据的系统以及方法 | |
US11049303B2 (en) | Imaging apparatus, and operation program and operation method for imaging apparatus | |
CN111950541A (zh) | 手持式读取器 | |
CN110826347B (zh) | 手持式读取器及其读取控制方法和装置 | |
CN110807501A (zh) | 一种便携式二维码投射设备 | |
KR102159712B1 (ko) | Qr 코드가 저장된 단말 | |
CN111144141A (zh) | 基于拍照功能的翻译方法 | |
CN101980526A (zh) | 遥控器及其识读方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |