CN111091499B - 一种移动终端图像修正的方法及装置 - Google Patents
一种移动终端图像修正的方法及装置 Download PDFInfo
- Publication number
- CN111091499B CN111091499B CN201811241534.8A CN201811241534A CN111091499B CN 111091499 B CN111091499 B CN 111091499B CN 201811241534 A CN201811241534 A CN 201811241534A CN 111091499 B CN111091499 B CN 111091499B
- Authority
- CN
- China
- Prior art keywords
- image
- bill
- line segment
- length direction
- width direction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003702 image correction Methods 0.000 title claims abstract description 98
- 238000000034 method Methods 0.000 title claims abstract description 31
- 238000012545 processing Methods 0.000 claims description 26
- 238000012937 correction Methods 0.000 claims description 10
- 238000003860 storage Methods 0.000 claims description 7
- 230000006870 function Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000004075 alteration Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
- G06T3/608—Rotation of whole images or parts thereof by skew deformation, e.g. two-pass or three-pass rotation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种移动终端图像修正的方法及装置,该方法包括:获取采集图像,其中,该采集图像包括票据的票据图像和底板的第一底板图像,票据位于底板上,第一底板图像为未被票据遮挡的底板图像,根据该第一底板图像,确定图像修正的参照线段,根据参照线段对票据图像进行修正。上述技术方案解决了手机、平板电脑的摄像头采集图像时,存在偏斜、比例失调的问题。
Description
技术领域
本发明实施例涉及图像采集技术,尤其涉及一种移动终端图像修正的方法及装置。
背景技术
目前金融机构的金融票据电子化、影像化的需求较为普遍,对于图像成像要求较高的场景,大多采用扫描仪进行图像采集,但采用扫描仪采集图像的成本较高。
现在普通的手机、平板电脑均配有摄像头,可以使用这些设备做图像采集,但由于这些摄像头的采集方式限制,一般采集的图像普遍存在偏斜、比例失调等问题,成像质量较低,影响后续的二次分析利用。
发明内容
本发明实施例提供一种移动终端图像修正的方法及装置,用以解决普通的手机、平板电脑的摄像头采集图像时,存在偏斜、比例失调的问题。
本发明实施例提供的一种移动终端图像修正的方法,包括:
获取采集图像,所述采集图像包括票据的票据图像和底板的第一底板图像;所述票据位于所述底板上,所述第一底板图像为未被所述票据遮挡的底板图像;
根据所述第一底板图像,确定图像修正的参照线段;
根据所述参照线段对所述票据图像进行修正。
可选的,所述底板为带有多个识别点的用于票据修正的参照板,所述多个识别点为M×N个识别点,所述M为每行等距离排列的识别点的个数,所述N为每列等距离排列的识别点的个数,所述M、N为大于等于1的正整数。
上述实施例中,将待采集图像的票据放置于底板上,以采集的底板图像为参照物,对采集到的票据图像进行修正,不仅可以对票据图像的变形或比例失调具有良好的修正,而且容易实现。
可选的,在所述根据所述第一底板图像,确定图像修正的参照线段之前,还包括:
根据所述票据图像的长度方向上的边线和所述第一底板图像在长度方向上的识别点的连线,确定所述票据图像是否存在偏移角度;
若是,则将所述票据图像旋转,以使所述偏移角度为零。
上述实施例中,以采集的底板图像上的识别点在长度方向上的连线为长度方向的参考线,确定票据图像的偏移角度。当存在偏移角度时,对票据图像做旋转,即将票据图像的长度方向上的边线与长度方向的参考线平行。
可选的,所述根据所述第一底板图像,确定图像修正的参照线段,包括:
根据所述第一底板图像确定票据的真实长度、真实宽度;
根据所述票据的真实长度确定所述图像修正的长度方向的参照线段;
根据所述票据的真实宽度确定所述图像修正的宽度方向的参照线段;
所述根据所述参照线段对所述票据图像进行修正,包括:
确定所述票据图像的长度方向上的图像线段和宽度方向上的图像线段;
根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正;
根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正。
上述实施例中,根据第一底板图像的识别点确定票据的真实长度、真实宽度,对票据图像的长度方向上的图像线段和宽度方向上的图像线段做修正,该方法通过识别点的数量对票据的真实长度、真实宽度做了准确的计算,从而对票据图像的纠正提供标准。
可选的,所述确定所述票据图像的长度方向上的图像线段和宽度方向上的图像线段,包括:
对所述票据图像在宽度方向上按照第一设定间隔进行划分,确定所述票据图像的长度方向上的图像线段;
对所述票据图像在长度方向上按照第二设定间隔进行划分,确定所述票据图像的宽度方向上的图像线段。
上述实施例中,对票据图像在宽度方向和长度方向按照各自的设定间隔进行划分,即可以确定多个长度方向上的图像线段和多个宽度方向上的图像线段,该票据图像的图像线段可以根据上述参照线段做修正。
可选的,所述根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正,包括:
若所述票据图像的长度方向上的图像线段小于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段拉伸至与所述图像修正的长度方向的参照线段相等;
若所述票据图像的长度方向上的图像线段大于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段压缩至与所述图像修正的长度方向的参照线段相等。
可选的,所述根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正,包括:
若所述票据图像的宽度方向上的图像线段小于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段拉伸至与所述图像修正的宽度方向的参照线段相等;
若所述票据图像的宽度方向上的图像线段大于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段压缩至与所述图像修正的宽度方向的参照线段相等。
上述实施例中,根据图像修正的长度方向的参照线段修正票据图像的长度方向上的图像线段、图像修正的宽度方向的参照线段修正票据图像的宽度方向上的图像线段,通过该方案,可以快速解决普通的手机、平板电脑的摄像头采集图像的变形问题。
相应的,本发明实施例还提供了一种移动终端图像修正的装置,包括:
获取单元,用于获取采集图像,所述采集图像包括票据的票据图像和底板的第一底板图像;所述票据位于所述底板上,所述第一底板图像为未被所述票据遮挡的底板图像;
处理单元,用于根据所述第一底板图像,确定图像修正的参照线段;以及根据所述参照线段对所述票据图像进行修正。
可选的,所述底板为带有多个识别点的用于票据修正的参照板,所述多个识别点为M×N个识别点,所述M为每行等距离排列的识别点的个数,所述N为每列等距离排列的识别点的个数,所述M、N为大于等于1的正整数。
可选的,所述处理单元还用于:
在所述根据所述第一底板图像,确定图像修正的参照线段之前,根据所述票据图像的长度方向上的边线和所述第一底板图像在长度方向上的识别点的连线,确定所述票据图像是否存在偏移角度;
若是,则将所述票据图像旋转,以使所述偏移角度为零。
可选的,所述处理单元具体用于:
根据所述第一底板图像确定票据的真实长度、真实宽度;
根据所述票据的真实长度确定所述图像修正的长度方向的参照线段;
根据所述票据的真实宽度确定所述图像修正的宽度方向的参照线段;
确定所述票据图像的长度方向上的图像线段和宽度方向上的图像线段;
根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正;
根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正。
可选的,所述处理单元具体用于:
对所述票据图像在宽度方向上按照第一设定间隔进行划分,确定所述票据图像的长度方向上的图像线段;
对所述票据图像在长度方向上按照第二设定间隔进行划分,确定所述票据图像的宽度方向上的图像线段。
可选的,所述处理单元具体用于:
若所述票据图像的长度方向上的图像线段小于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段拉伸至与所述图像修正的长度方向的参照线段相等;
若所述票据图像的长度方向上的图像线段大于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段压缩至与所述图像修正的长度方向的参照线段相等。
可选的,所述处理单元具体用于:
若所述票据图像的宽度方向上的图像线段小于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段拉伸至与所述图像修正的宽度方向的参照线段相等;
若所述票据图像的宽度方向上的图像线段大于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段压缩至与所述图像修正的宽度方向的参照线段相等。
相应的,本发明实施例还提供了一种计算设备,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行上述移动终端图像修正的方法。
相应的,本发明实施例还提供了一种计算机可读非易失性存储介质,包括计算机可读指令,当计算机读取并执行所述计算机可读指令时,使得计算机执行上述移动终端图像修正的方法。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种系统架构的示意图;
图2为本发明实施例提供的一种移动终端图像修正的方法的流程示意图;
图3为本发明实施例提供的一种票据放置于底板上的采集图像;
图4为本发明实施例提供的另一种票据放置于底板上的采集图像;
图5为本发明实施例提供的另一种移动终端图像修正的方法的流程示意图;
图6为本发明实施例提供的一种移动终端图像修正的装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
图1示例性的示出了本发明实施例提供移动终端图像修正的方法所适用的系统架构,该系统架构可以为移动终端100,具体可以包括处理器110、存储器120、输入单元130、显示单元140、电源150、音频电路160以及无线保真(wireless fidelity,WiFi)模块170等部件。
其中,本领域技术人员可以理解,图1中示出的移动终端100结构仅为示例而非限定,移动终端100还可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
其中,处理器110是移动终端100的控制中心,利用各种接口和线路连接整个移动终端100的各个部分,通过运行或执行存储在存储器120内的软件程序和/或模块,以及调用存储在存储器120内的数据,执行各种功能和处理数据,从而对移动终端100进行整体监控。可选的,处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。上述调制解调处理器也可以不集成到处理器110中。
存储器120可用于存储软件程序以及模块,处理器110通过运行存储在存储器120的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(如声音播放功能、图像播放功能等)等;存储数据区可存储根据移动终端100的使用所创建的数据(如音频数据、电话本等)等。此外,存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元130可用于接收输入的数字或字符信息,以及产生与移动终端100的用户设置以及功能控制有关的键信号。具体地,输入单元130可包括触控面板131、摄像设备132以及其他输入设备133。摄像设备132,可以对需要获取的图像进行拍照,从而将图像传送给处理器110进行处理,最后将图形通过显示面板141呈现于用户。触控面板131,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板131上或在触控面板131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板131。除了触控面板131和摄像设备132,输入单元130还可以包括其他输入设备133。具体地,其他输入设备133可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,显示单元140可用于显示由用户输入的信息或提供给用户的信息以及移动终端100的各种菜单。显示单元140可包括显示面板141。进一步的,触控面板131可覆盖显示面板141,当触控面板131检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板141上提供相应的视觉输出。
音频电路160、扬声器161、传声器162可提供用户与移动终端100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,传声器162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器110处理后,经WiFi模块170以发送给比如另一终端设备,或者将音频数据输出至存储器120以便进一步处理。
WiFi属于短距离无线传输技术,移动终端100通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块170,但是可以理解的是,其并不属于移动终端100的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
基于上述描述,图2示例性的示出了本发明实施例提供的一种移动终端图像修正的方法的流程,该流程可以由移动终端图像修正的装置执行,该装置可以位于移动终端中,可以是该移动终端。如图2所示,该流程具体包括:
步骤201,获取采集图像。
将票据放置于底板上,该票据和底板即为图像采集的对象,该底板为带有多个识别点的用于票据修正的参照板,底板上的多个识别点为M×N个识别点(其中,M为每行等距离排列的识别点的个数,N为每列等距离排列的识别点的个数,M、N为大于等于1的正整数),也可以说该底板为M列N行识别点的矩阵。
移动终端获取图像采集对象(票据和底板)的采集图像,该采集图像可以包括票据的票据图像和底板的第一底板图像,该第一底板图像可以为未被票据遮挡的底板图像,如图3示例性的给出了一种票据放置于底板上的包括票据图像301和第一底板图像302的采集图像。
步骤202,根据所述第一底板图像,确定图像修正的参照线段。
为了保障图像修正的效果,在确定图像修正的参照线段之前,可以先确定该票据放置于底板上时,票据的长度方向上的边线与底板上长度方向上是否存在偏移,也可以说先确定票据的长度方向上的边线与底板上长度方向上的识别点的连线之间是否存在偏移角度。可以解释为,为了防止票据放置在底板上时,票据的长度方向上的边线与底板上长度方向上的识别点的连线存在一定的偏移角度,影响移动终端图像修正的效果,在该移动终端获取采集图像后,且在根据第一底板图像确定图像修正的参照线段之前,根据票据图像的长度方向上的边线和第一底板图像在长度方向上的识别点的连线,确定票据图像是否存在偏移角度。其中,票据图像的长度方向上的边线可以理解为票据长边被移动终端采集到的线段图像,第一底板图像在长度方向上的识别点的连线可以理解为将底板上未被票据遮挡的识别点根据票据图像的长度方向连线确定的用于参考方向的线段,二者线段之间的夹角即为需要确定的是否存在的偏移角度。可以如图4所示,角度θ即为票据图像401的长度方向上的边线和第一底板图像402在长度方向上的识别点的连线确定的偏移角度。
若根据上述方式确定的偏移角度大于零,也就是存在偏移角度,则将该票据图像旋转,以使该偏移角度为零,以图4为例,可以将该票据图像401逆时针旋转角度θ,使得该票据图像401的长度方向上的边线和第一底板图像402在长度方向上的识别点的连线确定的偏移角度为零。该偏移角度可以是在将票据人为放置于底板上时存在角度偏移出现的,可以通过将票据图像401旋转实现票据图像401无角度偏移的显示。
上述提供的实施例虽然是根据票据图像的长度方向上的边线和第一底板图像在长度方向上的识别点的连线确定的票据图像的偏移角度,但本发明并不限于长度方向,同时也可以是宽度方向,即根据票据图像的宽度方向上的边线和第一底板图像在宽度方向上的识别点的连线确定的票据图像的偏移角度。此外,根据长度方向确定的偏移角度可以为一个偏移角度,也可以为两个偏移角度,若为两个偏移角度,则这两个偏移角度可以相等或不相等,相应的,根据宽度方向确定的偏移角度也可以为一个或两个偏移角度,若为两个偏移角度,则这两个偏移角度可以相等或不相等。
确定上述偏移角度为零之后,根据第一底板图像确定票据的真实长度、真实宽度,具体为根据第一底板图像(未被票据遮挡的底板图像)上的识别点可以确定被票据遮挡的底板的识别点的个数,从而根据被票据遮挡的底板的长度方向上识别点的个数和宽度方向上识别点的个数确定票据的真实长度和真实宽度。其中,该长度方向和宽度方向可以根据票据的长度方向和宽度方向确定,同样也可以根据绝对的水平方向和竖直方向确定。例如,被票据遮挡的底板的长度方向上识别点的个数为34个,相邻两个识别点长度方向上的距离为1mm,则可以确定票据的真实长度为34mm,被票据遮挡的底板的宽度方向上识别点的个数为21个,相邻两个识别点宽度方向上的距离为0.8mm,则可以确定票据的真实宽度为16.8mm。
根据票据的真实长度确定图像修正的长度方向的参照线段,根据票据的真实宽度确定图像修正的宽度方向的参照线段。也就是说,根据票据的真实长度、真实宽度确定图像修正的参考线段,即根据票据的真实长度确定图像修正的长度方向的参考线段的长度,根据票据的真实宽度确定图像修正的宽度方向的参考线段的长度。该长度方向的参照线段可以为一条也可以为多条,若该长度方向的参照线段为多条,该长度方向的多条参照线段的长度可以相等也可以不相等。同理,该宽度方向的参照线段也可以为一条或多条,多条宽度方向的参照线段可以相等或不相等。
确定票据图像的长度方向上的图像线段和宽度方向上的图像线段,也就是根据票据图像确定票据图像的长度方向上的各个图像线段的长度和票据图像的宽度方向上的各个图像线段的宽度。
具体地,可以通过下述方式确定票据图像在长度方向上的图像线段:
对该票据图像在宽度方向上按照第一设定间隔进行划分,确定所述票据图像的长度方向上的图像线段,可以理解为,采用多条长度方向上的直线对票据图像切割,各个直线相互平行,相邻两条直线之间的距离为第一设定间隔,每条直线被票据图像宽度方向上的两条边线截取为长度方向上的线段,该线段也就是票据图像的长度方向上的图像线段,该多个票据图像的长度方向上的图像线段可以存在相等的线段也可以不存在相等的线段,该票据图像的长度方向上的图像线段受移动终端采集图像时的变形程度影响。
相应地,可以通过下述方式确定票据图像在宽度方向上的图像线段:
对该票据图像在宽度方向上按照第二设定间隔进行划分,确定所述票据图像的宽度方向上的图像线段,可以理解为,采用多条宽度方向上的直线对票据图像切割,各个直线相互平行,相邻两条直线之间的距离为第二设定间隔,每条直线被票据图像长度方向上的两条边线截取为宽度方向上的线段,该线段也就是票据图像的宽度方向上的图像线段,该多个票据图像的宽度方向上的图像线段可以存在相等的线段也可以不存在相等的线段,该票据图像的宽度方向上的图像线段同样受移动终端采集图像时的变形程度影响。
另外,上述多条长度方向上的直线可以理解为与票据图像的长度方向上的线段平行的直线,当票据图像的长度方向与水平线平行时,该直线即为水平线;当票据图像的长度方向与竖直线平行时,该直线即竖直线;而当票据图像的长度方向既不与水平线平行,也不与竖直线平行,则根据票据图像的长度方向确定与之平行的直线。相应的,上述多条宽度方向上的直线可以理解为与票据图像的宽度方向上的线段平行的直线。上述第一设定间隔、第二设定间隔可以根据经验设定,二者可以相等也可以不相等。
步骤203,根据所述参照线段对所述票据图像进行修正。
根据上述图像修正的长度方向的参照线段,对票据图像的长度方向上的图像线段进行修正,根据上述图像修正的宽度方向的参照线段,对票据图像的宽度方向上的图像线段进行修正。
具体的,根据图像修正的长度方向的参照线段,对票据图像的长度方向上的图像线段进行修正,若该票据图像的长度方向上的图像线段小于该图像修正的长度方向的参照线段,则将该票据图像的长度方向上的图像线段拉伸至与该图像修正的长度方向的参照线段相等。若该票据图像的长度方向上的图像线段大于该图像修正的长度方向的参照线段,则将该票据图像的长度方向上的图像线段压缩至与该图像修正的长度方向的参照线段相等。
相应地,根据图像修正的宽度方向的参照线段,对票据图像的宽度方向上的图像线段进行修正,若该票据图像的宽度方向上的图像线段小于该图像修正的宽度方向的参照线段,则将该票据图像的宽度方向上的图像线段拉伸至与该图像修正的宽度方向的参照线段相等。若该票据图像的宽度方向上的图像线段大于该图像修正的宽度方向的参照线段,则将该票据图像的宽度方向上的图像线段压缩至与该图像修正的宽度方向的参照线段相等。
以对票据图像的长度方向的图像线段修正为例,可以先根据每条票据图像的长度方向上的图像线段确定该图像线段对应长度方向上的调整区域,也就是每条长度方向上的图像线段都对应长度方向上的一个调整区域,当该长度方向上的图像线段小于长度方向上的参照线段时,可以在该长度方向上的图像线段的基础上对其对应的调整区域的票据图像在长度方向上均匀拉伸,以使得该票据图像的长度方向上的图像线段与该图像修正的长度方向的参照线段相等。相应的,当该长度方向上的图像线段大于长度方向上的参照线段时,则对该长度方向上的图像线段对应的调整区域的票据图像在长度方向上均匀压缩,以使得该票据图像的长度方向上的图像线段与该图像修正的长度方向的参照线段相等。
对票据图像的宽度方向的图像线段修正也可根据上述方式实现,将票据图像的长度方向和宽度方向上的图像线段修正后,即可实现对移动终端采集图像的修正。
需要说明的是,为了保证该上述移动终端图像修正的准确性,可以在根据第一底板图像确定该票据的真实长度和真实宽度后,计算该票据的真实长宽比,用于在图像修正时作为参考。
为了更好的解释本发明实施例,下面将在具体的实施场景下描述该移动终端图像修正的流程,如图5所示,具体如下:
步骤501,准备一张带有识别点的底板。
步骤502,将金融票据放置于底板上。
步骤503,使用移动设备采集图像。
步骤504,根据票据的成像与底板上识别点的成像,计算出票据的偏移度,并对票据图像进行纠偏。
步骤505,根据识别点数量计算票据真实的长和宽,得出长宽比。
步骤506,根据票据真实长度确定一条长边的标准线段,对长于长边的标准线段的长边进行压缩,对短于长边的标准线段的长边进行拉伸,进而完成图像长边的复原;根据票据真实宽度确定一条宽边的标准线段,对长于宽边的标准线段的宽边进行压缩,对短于宽边的标准线段的宽边进行拉伸,进而完成图像宽边的复原。
步骤507,从整个图像中裁剪出金融票据对应的图像。
由于本实施例的具体实现方式已在其他实施例中描述,在此不作赘述。
基于同一发明构思,图6示例性的示出了本发明实施例提供的一种移动终端图像修正的装置的结构,该装置可以执行移动终端图像修正的方法的流程。
获取单元601,用于获取采集图像,所述采集图像包括票据的票据图像和底板的第一底板图像;所述票据位于所述底板上,所述第一底板图像为未被所述票据遮挡的底板图像;
处理单元602,用于根据所述第一底板图像,确定图像修正的参照线段;以及根据所述参照线段对所述票据图像进行修正。
可选的,所述底板为带有多个识别点的用于票据修正的参照板,所述多个识别点为M×N个识别点,所述M为每行等距离排列的识别点的个数,所述N为每列等距离排列的识别点的个数,所述M、N为大于等于1的正整数。
可选的,所述处理单元602还用于:
在所述根据所述第一底板图像,确定图像修正的参照线段之前,根据所述票据图像的长度方向上的边线和所述第一底板图像在长度方向上的识别点的连线,确定所述票据图像是否存在偏移角度;
若是,则将所述票据图像旋转,以使所述偏移角度为零。
可选的,所述处理单元602具体用于:
根据所述第一底板图像确定票据的真实长度、真实宽度;
根据所述票据的真实长度确定所述图像修正的长度方向的参照线段;
根据所述票据的真实宽度确定所述图像修正的宽度方向的参照线段;
确定票据图像的长度方向上的图像线段和宽度方向上的图像线段;
根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正;
根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正。
可选的,所述处理单元602具体用于:
对所述票据图像在宽度方向上按照第一设定间隔进行划分,确定所述票据图像的长度方向上的图像线段;
对所述票据图像在长度方向上按照第二设定间隔进行划分,确定所述票据图像的宽度方向上的图像线段。
可选的,所述处理单元602具体用于:
若所述票据图像的长度方向上的图像线段小于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段拉伸至与所述图像修正的长度方向的参照线段相等;
若所述票据图像的长度方向上的图像线段大于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段压缩至与所述图像修正的长度方向的参照线段相等。
可选的,所述处理单元602具体用于:
若所述票据图像的宽度方向上的图像线段小于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段拉伸至与所述图像修正的宽度方向的参照线段相等;
若所述票据图像的宽度方向上的图像线段大于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段压缩至与所述图像修正的宽度方向的参照线段相等。
基于同一发明构思,本发明实施例还提供了一种计算设备,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行上述移动终端图像修正的方法。
基于同一发明构思,本发明实施例还提供了一种计算机可读非易失性存储介质,包括计算机可读指令,当计算机读取并执行所述计算机可读指令时,使得计算机执行上述移动终端图像修正的方法。
本发明实施例提供的一种移动终端图像修正的方法及装置,通过将待采集图像的票据放置于底板上,以采集的底板图像为参照物,对采集到的票据图像进行修正,不仅可以对票据图像的变形或比例失调具有良好的修正,而且容易实现,解决了手机、平板电脑的摄像头采集图像时,存在偏斜、比例失调的问题。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (14)
1.一种移动终端图像修正的方法,其特征在于,包括:
获取采集图像,所述采集图像包括票据的票据图像和底板的第一底板图像;所述票据位于所述底板上,所述第一底板图像为未被所述票据遮挡的底板图像;其中,所述底板为带有多个识别点的用于票据修正的参照板;
根据所述票据图像的长度方向上的边线和所述第一底板图像在长度方向上的识别点的连线,确定所述票据图像是否存在偏移角度;若是,则将所述票据图像旋转,以使所述偏移角度为零;
根据所述第一底板图像,确定图像修正的参照线段;其中,所述根据所述第一底板图像,确定图像修正的参照线段,包括:根据所述第一底板图像确定票据的真实长度、真实宽度;根据所述票据的真实长度确定所述图像修正的长度方向的参照线段;根据所述票据的真实宽度确定所述图像修正的宽度方向的参照线段;
根据所述参照线段对所述票据图像进行修正。
2.如权利要求1所述的方法,其特征在于,所述多个识别点为M×N个识别点,所述M为每行等距离排列的识别点的个数,所述N为每列等距离排列的识别点的个数,所述M、N为大于等于1的正整数。
3.如权利要求1所述的方法,其特征在于,所述根据所述参照线段对所述票据图像进行修正,包括:
确定所述票据图像的长度方向上的图像线段和宽度方向上的图像线段;
根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正;
根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正。
4.如权利要求3所述的方法,其特征在于,所述确定所述票据图像的长度方向上的图像线段和宽度方向上的图像线段,包括:
对所述票据图像在宽度方向上按照第一设定间隔进行划分,确定所述票据图像的长度方向上的图像线段;
对所述票据图像在长度方向上按照第二设定间隔进行划分,确定所述票据图像的宽度方向上的图像线段。
5.如权利要求4所述的方法,其特征在于,所述根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正,包括:
若所述票据图像的长度方向上的图像线段小于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段拉伸至与所述图像修正的长度方向的参照线段相等;
若所述票据图像的长度方向上的图像线段大于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段压缩至与所述图像修正的长度方向的参照线段相等。
6.如权利要求4所述的方法,其特征在于,所述根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正,包括:
若所述票据图像的宽度方向上的图像线段小于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段拉伸至与所述图像修正的宽度方向的参照线段相等;
若所述票据图像的宽度方向上的图像线段大于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段压缩至与所述图像修正的宽度方向的参照线段相等。
7.一种移动终端图像修正的装置,其特征在于,包括:
获取单元,用于获取采集图像,所述采集图像包括票据的票据图像和底板的第一底板图像;所述票据位于所述底板上,所述第一底板图像为未被所述票据遮挡的底板图像;其中,所述底板为带有多个识别点的用于票据修正的参照板;
处理单元,用于根据所述票据图像的长度方向上的边线和所述第一底板图像在长度方向上的识别点的连线,确定所述票据图像是否存在偏移角度;若是,则将所述票据图像旋转,以使所述偏移角度为零;根据所述第一底板图像确定票据的真实长度、真实宽度;根据所述第一底板图像,确定图像修正的参照线段;其中,所述根据所述第一底板图像,确定图像修正的参照线段,包括:根据所述第一底板图像确定票据的真实长度、真实宽度;根据所述票据的真实长度确定所述图像修正的长度方向的参照线段;根据所述票据的真实宽度确定所述图像修正的宽度方向的参照线段;以及根据所述参照线段对所述票据图像进行修正。
8.如权利要求7所述的装置,其特征在于,所述多个识别点为M×N个识别点,所述M为每行等距离排列的识别点的个数,所述N为每列等距离排列的识别点的个数,所述M、N为大于等于1的正整数。
9.如权利要求7所述的装置,其特征在于,所述处理单元具体用于:
确定所述票据图像的长度方向上的图像线段和宽度方向上的图像线段;
根据所述图像修正的长度方向的参照线段,对所述票据图像的长度方向上的图像线段进行修正;
根据所述图像修正的宽度方向的参照线段,对所述票据图像的宽度方向上的图像线段进行修正。
10.如权利要求9所述的装置,其特征在于,所述处理单元具体用于:
对所述票据图像在宽度方向上按照第一设定间隔进行划分,确定所述票据图像的长度方向上的图像线段;
对所述票据图像在长度方向上按照第二设定间隔进行划分,确定所述票据图像的宽度方向上的图像线段。
11.如权利要求10所述的装置,其特征在于,所述处理单元具体用于:
若所述票据图像的长度方向上的图像线段小于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段拉伸至与所述图像修正的长度方向的参照线段相等;
若所述票据图像的长度方向上的图像线段大于所述图像修正的长度方向的参照线段,则将所述票据图像的长度方向上的图像线段压缩至与所述图像修正的长度方向的参照线段相等。
12.如权利要求10所述的装置,其特征在于,所述处理单元具体用于:
若所述票据图像的宽度方向上的图像线段小于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段拉伸至与所述图像修正的宽度方向的参照线段相等;
若所述票据图像的宽度方向上的图像线段大于所述图像修正的宽度方向的参照线段,则将所述票据图像的宽度方向上的图像线段压缩至与所述图像修正的宽度方向的参照线段相等。
13.一种计算设备,其特征在于,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行权利要求1至6任一项所述的方法。
14.一种计算机可读非易失性存储介质,其特征在于,包括计算机可读指令,当计算机读取并执行所述计算机可读指令时,使得计算机执行如权利要求1至6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811241534.8A CN111091499B (zh) | 2018-10-24 | 2018-10-24 | 一种移动终端图像修正的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811241534.8A CN111091499B (zh) | 2018-10-24 | 2018-10-24 | 一种移动终端图像修正的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111091499A CN111091499A (zh) | 2020-05-01 |
CN111091499B true CN111091499B (zh) | 2023-05-23 |
Family
ID=70392306
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811241534.8A Active CN111091499B (zh) | 2018-10-24 | 2018-10-24 | 一种移动终端图像修正的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111091499B (zh) |
Citations (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002015317A (ja) * | 2000-06-29 | 2002-01-18 | Toyo Commun Equip Co Ltd | 紙片の画像データ変換方法 |
CN1482572A (zh) * | 2003-06-27 | 2004-03-17 | 杭州信雅达系统工程股份有限公司 | 票据图象处理装置 |
JP2005157871A (ja) * | 2003-11-27 | 2005-06-16 | Sanyo Electric Co Ltd | 画像補正方法、ならびにその方法を利用可能な画像補正装置および電子透かし抽出装置 |
CN1845127A (zh) * | 1995-07-31 | 2006-10-11 | 富士通株式会社 | 数据媒体处理装置及数据媒体处理方法 |
JP2009053827A (ja) * | 2007-08-24 | 2009-03-12 | Fuji Xerox Co Ltd | 帳票画像処理装置及び帳票画像処理プログラム |
CN101464951A (zh) * | 2007-12-21 | 2009-06-24 | 北大方正集团有限公司 | 图像识别方法及系统 |
JP2010141428A (ja) * | 2008-12-09 | 2010-06-24 | Seiko Epson Corp | 画像読取システム及び画像読取方法 |
CN102422328A (zh) * | 2009-04-28 | 2012-04-18 | 班基特公司 | 用于钞票检测器装置的方法和钞票检测器装置 |
CN102542660A (zh) * | 2011-12-05 | 2012-07-04 | 中钞实业有限公司 | 基于票据水印分布特征的票据防伪鉴别方法 |
JP2013005258A (ja) * | 2011-06-17 | 2013-01-07 | Panasonic Corp | ブレ補正装置、ブレ補正方法及び帳票 |
CN103034848A (zh) * | 2012-12-19 | 2013-04-10 | 方正国际软件有限公司 | 一种表单类型的识别方法 |
US8437532B1 (en) * | 2009-04-15 | 2013-05-07 | Cummins-Allison Corp. | Apparatus and system for imaging currency bills and financial documents and method for using the same |
CN103813150A (zh) * | 2012-11-02 | 2014-05-21 | 索尼公司 | 图像处理设备和方法、图像处理系统和程序 |
CN103856772A (zh) * | 2012-12-03 | 2014-06-11 | 北京大学 | 一种遮挡参数标定的方法 |
CN104112128A (zh) * | 2014-06-19 | 2014-10-22 | 中国工商银行股份有限公司 | 应用于票据影像字符识别的数字图像处理系统及方法 |
CN105718928A (zh) * | 2016-01-20 | 2016-06-29 | 淄博职业学院 | 一种会计票据处理方法 |
JP2016208529A (ja) * | 2016-07-11 | 2016-12-08 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラム、記録媒体 |
CN107194391A (zh) * | 2017-04-21 | 2017-09-22 | 广东清华文通科技有限公司 | 一种可对抗图像拉伸偏移的智能分析定位电子选票的方法 |
CN107346580A (zh) * | 2016-05-05 | 2017-11-14 | 腾讯科技(深圳)有限公司 | 票据信息识别方法及装置 |
CN107516369A (zh) * | 2016-06-17 | 2017-12-26 | 山东新北洋信息技术股份有限公司 | 票据图像获取方法及票据图像获取装置、系统 |
CN107545592A (zh) * | 2016-06-28 | 2018-01-05 | 达索系统公司 | 动态摄像机校准 |
JP2018042113A (ja) * | 2016-09-07 | 2018-03-15 | キヤノン株式会社 | 画像処理装置、その制御方法、及びプログラム |
CN108446621A (zh) * | 2018-03-14 | 2018-08-24 | 平安科技(深圳)有限公司 | 票据识别方法、服务器及计算机可读存储介质 |
CN108537237A (zh) * | 2018-04-04 | 2018-09-14 | 深圳怡化电脑股份有限公司 | 票据的特征区域提取方法、装置、设备和存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9747509B2 (en) * | 2015-02-27 | 2017-08-29 | Lexmark International, Inc. | Automatically capturing and cropping image of check from video sequence for banking or other computing application |
-
2018
- 2018-10-24 CN CN201811241534.8A patent/CN111091499B/zh active Active
Patent Citations (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1845127A (zh) * | 1995-07-31 | 2006-10-11 | 富士通株式会社 | 数据媒体处理装置及数据媒体处理方法 |
JP2002015317A (ja) * | 2000-06-29 | 2002-01-18 | Toyo Commun Equip Co Ltd | 紙片の画像データ変換方法 |
CN1482572A (zh) * | 2003-06-27 | 2004-03-17 | 杭州信雅达系统工程股份有限公司 | 票据图象处理装置 |
JP2005157871A (ja) * | 2003-11-27 | 2005-06-16 | Sanyo Electric Co Ltd | 画像補正方法、ならびにその方法を利用可能な画像補正装置および電子透かし抽出装置 |
JP2009053827A (ja) * | 2007-08-24 | 2009-03-12 | Fuji Xerox Co Ltd | 帳票画像処理装置及び帳票画像処理プログラム |
CN101464951A (zh) * | 2007-12-21 | 2009-06-24 | 北大方正集团有限公司 | 图像识别方法及系统 |
JP2010141428A (ja) * | 2008-12-09 | 2010-06-24 | Seiko Epson Corp | 画像読取システム及び画像読取方法 |
US8437532B1 (en) * | 2009-04-15 | 2013-05-07 | Cummins-Allison Corp. | Apparatus and system for imaging currency bills and financial documents and method for using the same |
CN102422328A (zh) * | 2009-04-28 | 2012-04-18 | 班基特公司 | 用于钞票检测器装置的方法和钞票检测器装置 |
JP2013005258A (ja) * | 2011-06-17 | 2013-01-07 | Panasonic Corp | ブレ補正装置、ブレ補正方法及び帳票 |
CN102542660A (zh) * | 2011-12-05 | 2012-07-04 | 中钞实业有限公司 | 基于票据水印分布特征的票据防伪鉴别方法 |
CN103813150A (zh) * | 2012-11-02 | 2014-05-21 | 索尼公司 | 图像处理设备和方法、图像处理系统和程序 |
CN103856772A (zh) * | 2012-12-03 | 2014-06-11 | 北京大学 | 一种遮挡参数标定的方法 |
CN103034848A (zh) * | 2012-12-19 | 2013-04-10 | 方正国际软件有限公司 | 一种表单类型的识别方法 |
CN104112128A (zh) * | 2014-06-19 | 2014-10-22 | 中国工商银行股份有限公司 | 应用于票据影像字符识别的数字图像处理系统及方法 |
CN105718928A (zh) * | 2016-01-20 | 2016-06-29 | 淄博职业学院 | 一种会计票据处理方法 |
CN107346580A (zh) * | 2016-05-05 | 2017-11-14 | 腾讯科技(深圳)有限公司 | 票据信息识别方法及装置 |
CN107516369A (zh) * | 2016-06-17 | 2017-12-26 | 山东新北洋信息技术股份有限公司 | 票据图像获取方法及票据图像获取装置、系统 |
CN107545592A (zh) * | 2016-06-28 | 2018-01-05 | 达索系统公司 | 动态摄像机校准 |
JP2016208529A (ja) * | 2016-07-11 | 2016-12-08 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラム、記録媒体 |
JP2018042113A (ja) * | 2016-09-07 | 2018-03-15 | キヤノン株式会社 | 画像処理装置、その制御方法、及びプログラム |
CN107194391A (zh) * | 2017-04-21 | 2017-09-22 | 广东清华文通科技有限公司 | 一种可对抗图像拉伸偏移的智能分析定位电子选票的方法 |
CN108446621A (zh) * | 2018-03-14 | 2018-08-24 | 平安科技(深圳)有限公司 | 票据识别方法、服务器及计算机可读存储介质 |
CN108537237A (zh) * | 2018-04-04 | 2018-09-14 | 深圳怡化电脑股份有限公司 | 票据的特征区域提取方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111091499A (zh) | 2020-05-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108513070B (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN109151442B (zh) | 一种图像拍摄方法及终端 | |
CN110557575B (zh) | 消除炫光的方法和电子设备 | |
CN107613202B (zh) | 一种拍摄方法及移动终端 | |
CN108271012A (zh) | 一种深度信息的获取方法、装置以及移动终端 | |
CN107566749B (zh) | 拍摄方法及移动终端 | |
CN107749046B (zh) | 一种图像处理方法及移动终端 | |
CN110188679B (zh) | 校准方法及相关设备 | |
CN107592458B (zh) | 一种拍摄方法及移动终端 | |
CN109407929B (zh) | 一种桌面图标的整理方法及终端 | |
JP7467667B2 (ja) | 検出結果出力方法、電子機器及び媒体 | |
CN110245607B (zh) | 眼球追踪方法及相关产品 | |
CN108073380B (zh) | 电子装置、显示控制方法及相关产品 | |
US20180220066A1 (en) | Electronic apparatus, operating method of electronic apparatus, and non-transitory computer-readable recording medium | |
CN112488914A (zh) | 图像拼接方法、装置、终端及计算机可读存储介质 | |
CN110191303A (zh) | 基于屏幕发声的视频通话方法及相关产品 | |
CN111080571A (zh) | 摄像头遮挡状态检测方法、装置、终端和存储介质 | |
US20140354831A1 (en) | Perspective correction using a reflection | |
CN110050254B (zh) | 用于柔性显示设备的控件显示方法及装置 | |
CN110929540A (zh) | 扫描码识别方法及装置 | |
CN112637587B (zh) | 坏点检测方法及装置 | |
CN114299056A (zh) | 图像的瑕疵点的识别方法、瑕疵图像识别模型训练方法 | |
CN108234978B (zh) | 一种图像处理方法及移动终端 | |
CN111091499B (zh) | 一种移动终端图像修正的方法及装置 | |
CN109327605B (zh) | 一种显示控制方法、装置和移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |