CN110097063A - 电子设备的数据处理方法、介质、装置和计算设备 - Google Patents

电子设备的数据处理方法、介质、装置和计算设备 Download PDF

Info

Publication number
CN110097063A
CN110097063A CN201910365811.4A CN201910365811A CN110097063A CN 110097063 A CN110097063 A CN 110097063A CN 201910365811 A CN201910365811 A CN 201910365811A CN 110097063 A CN110097063 A CN 110097063A
Authority
CN
China
Prior art keywords
frame
image
frame image
prior
presumptive area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910365811.4A
Other languages
English (en)
Inventor
肖雅娟
张琛雨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netease Youdao Hangzhou Intelligent Technology Co ltd
Original Assignee
NET EASE YOUDAO INFORMATION TECHNOLOGY (BEIJING) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NET EASE YOUDAO INFORMATION TECHNOLOGY (BEIJING) Co Ltd filed Critical NET EASE YOUDAO INFORMATION TECHNOLOGY (BEIJING) Co Ltd
Priority to CN201910365811.4A priority Critical patent/CN110097063A/zh
Publication of CN110097063A publication Critical patent/CN110097063A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/757—Matching configurations of points or features

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明的实施方式提供了一种电子设备的数据处理方法，包括：在电子设备的扫描窗口移动期间，获取与扫描窗口对应的帧图像序列；将任一帧图像与该任一帧图像的在前帧图像进行拼接，直至得到最终扫描结果；识别最终扫描结果中包含的文字，并输出相应的查询结果。其中，上述拼接过程包括：将在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据跟踪目标在任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定任一帧图像相对于所述在前帧图像的拼接位置；基于该拼接位置将所述任一帧图像与所述在前帧图像进行拼接，得到任一帧图像的后一帧图像的在前帧图像。本发明的实施方式还提供了一种电子设备的数据处理装置、介质和计算设备。

Description

电子设备的数据处理方法、介质、装置和计算设备
技术领域
本发明的实施方式涉及计算机技术领域，更具体地，本发明的实施方式涉及电子设备的数据处理方法、介质、装置和计算设备。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
当目标信息通过多帧图像表达时，为获取完整的目标信息，需要获取多帧图像进行拼接，并基于拼接结果进行处理分析以得到上述目标信息。在此过程中，图像拼接的质量和效率会对信息获取过程产生重要影响。
发明内容
为此，非常需要一种改进的电子设备的数据处理方法，以提高电子设备的图像拼接质量和速度。
在本上下文中，本发明的实施方式期望提供一种电子设备的数据处理方法和装置。
在本发明实施方式的第一方面中，提供了一种电子设备的数据处理方法，所述电子设备具有扫描窗口，所述方法包括：在所述电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列；在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果；以及，识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果。其中，所述将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接包括：将所述在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置；以及基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
在本发明的一个实施例中，上述确定所述任一帧图像相对于所述在前帧图像的拼接位置包括：分别获取所述在前帧图像中的最后一帧图像的预定区域内的第一特征点集合和所述任一帧图像的预定区域内的第二特征点集合；对所述第一特征点集合与第二特征点集合进行匹配，得到匹配成功的特征点；分别获取所述匹配成功的特征点在所述在前帧图像的最后一帧图像的预定区域内的第一位置坐标和在所述任一帧图像的预定区域内的第二位置坐标；根据所述第一位置坐标和所述第二位置坐标的横坐标之差，确定所述任一帧图像相对于所述在前帧图像的水平拼接位置；以及，根据所述第一位置坐标和所述第二位置坐标的纵坐标之差，确定所述任一帧图像相对于所述在前帧图像的竖直拼接位置。
在本发明的另一实施例中，上述将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接包括：根据所述任一帧图像相对于所述在前帧图像的水平拼接位置和竖直拼接位置，将所述任一帧图像的预定区域与所述在前帧图像中的最后一帧图像的预定区域相拼接，重叠的部分保留所述任一帧图像的内容。
在本发明的又一实施例中，任一帧图像的预定区域位于所述图像的中部。当所述扫描窗口横向移动扫描时，所述预定区域被设置为在竖直方向的大小适配于被扫描的文字的高度。以及，当所述扫描窗口纵向移动扫描时，所述预定区域被设置为在水平方向的大小适配于被扫描的文字的宽度。
在本发明实施方式的第二方面中，提供了一种电子设备的数据处理装置，所述电子设备具有扫描窗口，上述装置包括：扫描模块、拼接模块、以及查询模块。扫描模块用于在所述电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列。拼接模块用于在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果。以及，查询模块用于识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果。其中，拼接模块包括：跟踪子模块和拼接子模块。跟踪子模块用于将所述在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置。以及，拼接子模块用于基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
在本发明的一个实施例中，跟踪子模块包括：第一获取单元、匹配单元、第二获取单元、第一确定单元、以及第二确定单元。第一获取单元用于分别获取所述在前帧图像中的最后一帧图像的预定区域内的第一特征点集合和所述任一帧图像的预定区域内的第二特征点集合。匹配单元用于对所述第一特征点集合与第二特征点集合进行匹配，得到匹配成功的特征点。第二获取单元用于分别获取所述匹配成功的特征点在所述在前帧图像的最后一帧图像的预定区域内的第一位置坐标和在所述任一帧图像的预定区域内的第二位置坐标。第一确定单元用于根据所述第一位置坐标和所述第二位置坐标的横坐标之差，确定所述任一帧图像相对于所述在前帧图像的水平拼接位置。以及第二确定单元用于根据所述第一位置坐标和所述第二位置坐标的纵坐标之差，确定所述任一帧图像相对于所述在前帧图像的竖直拼接位置。
在本发明的另一实施例中，拼接子模块具体用于根据所述任一帧图像相对于所述在前帧图像的水平拼接位置和竖直拼接位置，将所述任一帧图像的预定区域与所述在前帧图像中的最后一帧图像的预定区域相拼接，重叠的部分保留所述任一帧图像的内容。
在本发明的又一实施例中，任一帧图像的预定区域位于所述图像的中部。当所述扫描窗口横向移动扫描时，所述预定区域被设置为在竖直方向的大小适配于被扫描的文字的高度。以及，当所述扫描窗口纵向移动扫描时，所述预定区域被设置为在水平方向的大小适配于被扫描的文字的宽度。
在本发明实施方式的第三方面中，提供了一种介质，存储有计算机可执行指令，指令在被处理器执行时用于实现：上述实施例中任一项所述的电子设备的数据处理方法。
在本发明实施方式的第四方面中，提供了一种计算设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的可执行指令，处理器执行指令时实现：上述实施例中任一项所述的电子设备的数据处理方法。
根据本发明实施方式的电子设备的数据处理方法和装置，在获取到每一帧图像后将该帧图像与相应的在前帧图像进行拼接，直至将最后一帧图像与该最后一帧图像的在前帧图像进行拼接，能够快速得到最终扫描结果，进而快速对最终扫描结果中的文字进行识别和查询，得到查询结果。并且，在对每一帧图像进行拼接时，均以该帧图像的在前帧图像中的最后一帧图像的预定内容作为跟踪目标进行拼接，跟踪目标每次更新，能够尽量减少累计误差，提高图像拼接质量，进而提高识别、查询的质量，得到较为准确的查询结果。根据本公开实施例的电子设备的数据处理方法能够满足实时扫描查询的需求。
附图说明
通过参考附图阅读下文的详细描述，本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中，以示例性而非限制性的方式示出了本发明的若干实施方式，其中：
图1示意性地示出了根据本发明实施方式的电子设备的数据处理方法及其装置的应用场景；
图2A示意性地示出了根据本发明一个实施例的电子设备的数据处理方法的流程图；
图2B示意性地示出了根据本发明另一个实施例的电子设备的数据处理方法的流程图；
图3A示意性地示出了根据本发明一个实施例的帧图像序列的示意图；
图3B示意性地示出了根据本发明一个实施例的跟踪目标的示意图；
图3C示意性地示出了根据本发明另一个实施例的帧图像序列的示意图；
图3D示意性地示出了根据本发明一个实施例的拼接结果的示意图；
图4示意性地示出了根据本发明一个实施例的电子设备的数据处理装置的框图；
图5示意性地示出了根据本发明另一个实施例的电子设备的数据处理装置的框图；
图6示意性地示出了根据本发明实施方式的计算机可读存储介质产品的示意图；以及
图7示意性地示出了根据本发明实施方式的计算设备的框图。
在附图中，相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解，给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明，而并非以任何方式限制本发明的范围。相反，提供这些实施方式是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。
本领域技术人员知道，本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此，本公开可以具体实现为以下形式，即：完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。
根据本发明的实施方式，提出了一种电子设备的数据处理方法、介质、装置和计算设备。
在本文中，需要理解的是，所涉及的术语包括：拼接和特征点等。其中，拼接是指图像拼接，是将数张有重叠部分的图片(可能是不同时间、不同视角或不同传感器获得的)拼接成大型的无缝图片的技术。图像拼接在实际的应用场景很广，比如无人机航拍，遥感图像等等，图像拼接是进一步做图像理解基础步骤，拼接效果的好坏直接影响接下来的工作，所以一个好的图像拼接算法非常重要。特征点是指图像中具有代表性的点，通常是角点，边缘上的点等，不同算法有不同的提取规则。一个图像的特征点由两部分构成：关键点和描述子。关键点指的是该特征点在图像中的位置，有些还具有方向、尺度信息；描述子通常是一个向量，按照人为的设计的方式，描述关键点周围像素的信息。通常描述子是按照外观相似的特征应该有相似的描述子设计的。因此，在匹配的时候，只要两个特征点的描述子在向量空间的距离相近，就可以认为它们是同一个特征点。此外，附图中的任何元素数量均用于示例而非限制，以及任何命名都仅用于区分，而不具有任何限制含义。
下面参考本发明的若干代表性实施方式，详细阐释本发明的原理和精神。
发明概述
在实现本公开构思的过程中，发明人发现，在通过图像拼接获取目标信息的情景下，图像拼接的质量和效率会对信息获取过程产生重要影响。
为此，本发明实施例提供了一种电子设备的数据处理方法和装置，该方法包括：在电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列；在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果；以及，识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果。其中，所述将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接包括：将所述在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置；以及基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
在介绍了本发明的基本原理之后，下面具体介绍本发明的各种非限制性实施方式。
应用场景总览
首先参考图1详细阐述本发明实施例的电子设备的数据处理方法及其装置的应用场景。
图1示意性地示出了根据本发明实施方式的电子设备的数据处理方法及其装置的应用场景，在图1所示的应用场景中，可以包括终端设备101、102、103，网络104和服务器105。
网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种客户端应用，例如翻译类应用、社交类应用、购物类应用、网页浏览器应用、搜索类应用等(仅为示例)。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于词典笔、智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器，例如对用户利用终端设备101、102、103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理，并将处理结果(例如根据用户请求获取或生成的网页、信息、或数据等)反馈给终端设备。
需要说明的是，本公开实施例所提供的电子设备的数据处理方法一般可以由终端设备101、102、103执行。相应地，本公开实施例所提供的电子设备的数据处理装置一般可以设置于终端设备101、102、103中。本发明实施例所提供的数据处理方法也可以由服务器105执行。相应地，本发明实施例所提供的数据处理装置可以设置于服务器105中。本发明实施例所提供的数据处理方法也可以由不同于服务器105且能够与终端设备和/或服务器105通信的其他服务器或服务器集群执行。相应地，本发明实施例所提供的数据处理装置也可以设置于不同于服务器105且能够与终端设备和/或服务器105通信的其他服务器或服务器集群中。本发明实施例所提供的数据处理方法也可以部分由终端设备执行，部分由服务器105执行。相应地，本发明实施例所提供的数据处理装置也可以部分设置于终端设备中，部分设置于服务器105中。
应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实际需要，可以具有任意数目的终端设备、网络和服务器。
示例性方法
下面结合图1的应用场景，参考图2A～图3D来描述根据本发明示例性实施方式的电子设备的数据处理方法。需要注意的是，上述应用场景仅是为了便于理解本发明的精神和原理而示出，本发明的实施方式在此方面不受任何限制。相反，本发明的实施方式可以应用于适用的任何场景。
图2A示意性地示出了根据本发明一个实施例的电子设备的数据处理方法的流程图，其中，电子设备具有扫描窗口，电子设备进行扫描时，能够获取与扫描窗口对应的内容。
如图2A所示，该方法包括如下操作S210～S230：
操作S210，在电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列。
其中，电子设备的扫描窗口可以是任意具有图像采集功能的部件。针对待处理对象，电子设备通过扫描窗口的移动对该待处理对象进行扫描，获得与扫描窗口对应的一帧或多帧图像，该一帧或多帧图像组成帧图像序列。
操作S220，在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果。
本操作在每次获得一帧图像时，将该帧图像与该帧图像的在前帧图像进行拼接，作为该帧图像的后一帧图像的在前帧图像，随着扫描的进行，获取到的帧图像也在不断与在前帧图像拼接，直至扫描停止。其中，由于帧图像序列中的第一帧图像没有在前帧图像，第一帧图像无需进行拼接。第一帧图像直接作为帧图像序列中的第二帧图像的在前帧图像。将第二帧图像与第一帧图像进行拼接，得到第三帧图像的在前帧图像。将第三帧图像与该第三帧图像的在前帧图像进行拼接，得到第四帧图像的在前帧图像。以此类推，直至将最后一帧图像与该最后一帧图像的在前帧图像进行拼接后得到最终扫描结果。
操作S230，识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果。
本操作在识别最终扫描结果中包含的文字后，可以在本地针对该文字进行查询，得到与该文字对应的查询结果并输出，也可以将该文字发送至服务器，由服务器针对该文字进行查询，从服务器获取相应的查询结果并输出。
图2B示意性地示出了根据本发明另一个实施例的电子设备的数据处理方法的流程图，用于展示图2A中的操作S220的具体过程。
如图2B所示，操作S210和操作S230在上文中已详细说明，在此不再赘述。操作S220可以包括操作S221～S222：
操作S221，将任一帧图像的在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置。
操作S222，基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
举例对图2A～图2B所示的过程进行说明，通过电子设备的扫描窗口获取到的帧图像序列如图3A所示。
图3A示意性地示出了根据本发明一个实施例的帧图像序列的示意图。
如图3A所示，在已获取到3帧图像的基础上，当前获取到第4帧图像，将第4帧图像与该第4帧图像的在前帧图像进行拼接，得到一个拼接结果。如果该第4帧图像为最后一帧图像，则该拼接结果为最终扫描结果。如果该第4帧图像不是最后一帧图像，则将该拼接结果作为后续获取的第5帧图像的在前帧图像。具体地，在将第4帧图像与该第4帧图像的在前帧图像进行拼接时，由于该第4帧图像的在前帧图像中的最后一帧图像是第3帧图像，则以该第3帧图像的预定区域内的一个或多个特征点作为当前的跟踪目标，请参考图3B。
图3B示意性地示出了根据本发明一个实施例的跟踪目标的示意图。
如图3B所示，将第3帧图像的预定区域内的9个特征点作为跟踪目标，左边展示了该跟踪目标在第3帧图像中的位置，右边展示了该跟踪目标在第4帧图像中的位置。根据该跟踪目标在第3帧图像和第4帧图像中的位置变化，确定第4帧图像相对于在前帧图像的拼接位置。基于该拼接位置将第4帧图像与在前帧图像进行拼接，得到上述拼接结果。
可见，图2A～图2B所示的方法在获取到每一帧图像后将该帧图像与相应的在前帧图像进行拼接，直至将最后一帧图像与该最后一帧图像的在前帧图像进行拼接，能够快速得到最终扫描结果，进而快速对最终扫描结果中的文字进行识别和查询，得到查询结果。并且，在对每一帧图像进行拼接时，均以该帧图像的在前帧图像中的最后一帧图像的预定内容作为跟踪目标进行拼接，跟踪目标每次更新，能够尽量减少累计误差，提高图像拼接质量，进而提高识别、查询的质量，得到较为准确的查询结果。根据本公开实施例的电子设备的数据处理方法能够满足实时扫描查询的需求。
在本发明的一个实施例中，上述确定任一帧图像相对于该任一帧图像的在前帧图像的拼接位置可以包括：分别获取该任一帧图像的在前帧图像中的最后一帧图像的预定区域内的第一特征点集合和该任一帧图像的预定区域内的第二特征点集合。对所述第一特征点集合与第二特征点集合进行匹配，得到匹配成功的特征点。分别获取所述匹配成功的特征点在该任一帧图像的在前帧图像的最后一帧图像的预定区域内的第一位置坐标和在该任一帧图像的预定区域内的第二位置坐标。根据所述第一位置坐标和所述第二位置坐标的横坐标之差，确定该任一帧图像相对于该任一帧图像的在前帧图像的水平拼接位置。以及，根据所述第一位置坐标和所述第二位置坐标的纵坐标之差，确定该任一帧图像相对于该任一帧图像的在前帧图像的竖直拼接位置。
在此基础上，上述将任一帧图像与该任一帧图像的在前帧图像进行拼接可以包括：根据任一帧图像相对于该任一帧图像的在前帧图像的水平拼接位置和竖直拼接位置，将该任一帧图像的预定区域与该任一帧图像的在前帧图像中的最后一帧图像的预定区域相拼接，重叠的部分保留所述任一帧图像的内容。可见，每拼接一次，就用新一帧图像的预定区域更新一次跟踪目标，能够避免因为连续跟踪累计误差，以及当跟踪目标移出新一帧图像外而导致拼接过程对于跟踪目标的跟踪中断。
其中，作为一个可选的实施例，为了尽量避免拼接过程中跟踪目标的跟踪中断，任一帧图像的预定区域可被设置为位于该帧图像的中部，以使跟踪目标能够部分或全部保留在后一帧图像中。此外，为了提高图像拼接效率，快速得到最终扫描结果，可以将预定区域设置为尽量小的有效区域。例如，当电子设备的扫描窗口横向移动扫描时，预定区域被设置为在竖直方向的大小适配于被扫描的文字的高度；以及，当电子设备的扫描窗口纵向移动扫描时，预定区域被设置为在水平方向的大小适配于被扫描的文字的宽度。
下面参考图3C～图3D，结合具体实施例对根据本公开实施例的电子设备的数据处理方法进行展开说明。本例中，电子设备为词典笔，扫描窗口位于词典笔的笔头位置，用户可以通过移动词典笔的笔头对想要查询的内容进行扫描，词典笔采集帧图像序列并拼接，获得最终采集结果，在对最终采集结果中的文字进行识别和查询，输出展示相应的查询结果。其中，扫描窗口可以在开始移动时开始周期性地采集图像，然后在停止移动时停止采集图像，以获得随时间变化的帧图像序列，避免多次重复采集同一帧图像。在其他例子中，电子设备可以为如智能手机、智能穿戴设备等其他设备，扫描窗口可以为智能手机、智能穿戴设备等设备上的摄像装置，电子设备的扫描窗口的图像采集频率、图像采集时长等均可根据实际需要进行设置。
图3C示意性地示出了根据本发明另一个实施例的帧图像序列的示意图。
如图3C所示，用户利用词典笔在书本上从左向右划取想要查询的内容，词典笔周期性地拍摄与扫描窗口对应的图像，获得包括多帧图像的帧图像序列。每一帧图像中的方框标示预定区域，该预定区域为中间区域。利用跟踪算法完成帧图像序列中每一帧图像的图像拼接。跟踪算法的跟踪目标始终是当前待拼接的帧图像的在前帧图像的最后一帧图像的中间区域，每跟踪一次，得到的跟踪结果结合当前帧图像的特征信息，计算出拼接图像要用到的参数，完成一次拼接，作为新一帧图像的在前帧图像。再以新一帧图像的在前帧图像的最后一帧图像的中间区域为跟踪目标进行初始化，再继续跟踪，重复上述过程，实现了图像的高质量的快速拼接。每拼接一次，就用新一帧图像的中间部分更新一次跟踪目标，能够避免因为连续跟踪积累了误差，以及当跟踪目标移动出图像外导致跟踪中断。
具体地，对于上述帧图像序列中的第i(i为大于1的正整数)帧图像，取该第i帧图像的前一帧图像(第i-1帧图像)的中间区域，在该中间区域内均匀取一些像素点作为跟踪目标，基于该跟踪目标初始化跟踪器(Tracker)，使得跟踪器基于跟踪算法对该跟踪目标进行跟踪，得到这些像素点在第i帧图像中的位置。根据跟踪目标在第i-1帧图像中的位置的横坐标x1和跟踪得到的该跟踪目标在第i帧图像中的位置的横坐标x2，计算得到词典笔在拍摄第i帧图像时的位置与在拍摄第i-1帧图像时的位置相比向右移动了x1-x2，即确定第i帧图像相对于第i-1帧图像的水平拼接位置为x1-x2，说明对于第i-1帧图像来说，从第i-1帧图像的左边缘开始对应于x1-x2的水平范围的部分为与第i帧图像非共有的部分，除此之外的其他部分为与第i帧共有的部分。则基于该拼接位置x1-x2，将第i帧图像覆盖到第i-1帧图像上，使得第i帧图像的左边缘距第i-1帧图像的左边缘的水平距离为x1-x2，二者重叠的部分(即二者共有的部分)保留第i帧图像的内容，以此类推，直至完成最后一帧图像的拼接，拼接结果请参考图3D。
图3D示意性地示出了根据本发明一个实施例的拼接结果的示意图。
如图3D所示，左上方展示了图3C中前2帧图像的拼接结果，右上方的展示了图3C中前4帧图像的拼接结果，下方展示了图3C中帧图像序列的最终扫描结果。利用上述方法可以实现采样帧率为每秒50至120帧图像、每一帧图像为50*50至500*500像素大小的快速拼接，进而实现对最终扫描结果中的文字的快速查询并输出查询结果，符合用户需求。
示例性装置
在介绍了本发明示例性实施方式的方法之后，接下来，参考图4～图5对本发明示例性实施方式的电子设备的数据处理装置进行详细阐述。
图4示意性地示出了根据本发明一个实施例的电子设备的数据处理装置的框图，其中，电子设备具有扫描窗口，电子设备进行扫描时，能够获取与扫描窗口对应的内容。
如图4所示，该电子设备的数据处理装置400包括：扫描模块410、拼接模块420、以及查询模块430。
扫描模块410用于在所述电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列。
拼接模块420用于在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果。
查询模块430用于识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果；
其中，拼接模块420可以包括：跟踪子模块421和拼接子模块422。
跟踪子模块421用于将所述在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置。以及，拼接子模块422用于基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
图5示意性地示出了根据本发明另一个实施例的电子设备的数据处理装置的框图。
如图5所示，该电子设备的数据处理装置500包括扫描模块510、拼接模块520、以及查询模块530，拼接模块520包括跟踪子模块521和拼接子模块522。其中，扫描模块510、拼接模块520、以及查询模块530分别具有与扫描模块410、拼接模块420、以及查询模块430对应相同的功能，跟踪子模块521和拼接子模块522分别具有与跟踪子模块421和拼接子模块422对应相同的功能，重复的部分不再赘述。
在本发明的一个实施例中，跟踪子模块521包括：第一获取单元5211、匹配单元5212、第二获取单元5213、第一确定单元5214、以及第二确定单元5215。
第一获取单元5211用于分别获取所述在前帧图像中的最后一帧图像的预定区域内的第一特征点集合和所述任一帧图像的预定区域内的第二特征点集合。匹配单元5212用于对所述第一特征点集合与第二特征点集合进行匹配，得到匹配成功的特征点。第二获取单元5213用于分别获取所述匹配成功的特征点在所述在前帧图像的最后一帧图像的预定区域内的第一位置坐标和在所述任一帧图像的预定区域内的第二位置坐标。第一确定单元5214用于根据所述第一位置坐标和所述第二位置坐标的横坐标之差，确定所述任一帧图像相对于所述在前帧图像的水平拼接位置。以及第二确定单元5215用于根据所述第一位置坐标和所述第二位置坐标的纵坐标之差，确定所述任一帧图像相对于所述在前帧图像的竖直拼接位置。
在本发明的另一实施例中，拼接子模块522具体用于根据所述任一帧图像相对于所述在前帧图像的水平拼接位置和竖直拼接位置，将所述任一帧图像的预定区域与所述在前帧图像中的最后一帧图像的预定区域相拼接，重叠的部分保留所述任一帧图像的内容。
在本发明的又一实施例中，任一帧图像的预定区域位于所述图像的中部。当所述扫描窗口横向移动扫描时，所述预定区域被设置为在竖直方向的大小适配于被扫描的文字的高度。以及，当所述扫描窗口纵向移动扫描时，所述预定区域被设置为在水平方向的大小适配于被扫描的文字的宽度。
需要说明的是，装置部分实施例中各模块/单元/子单元等的实施方式、解决的技术问题、实现的功能、以及达到的技术效果分别与方法部分实施例中各对应的步骤的实施方式、解决的技术问题、实现的功能、以及达到的技术效果相同或类似，在此不再赘述。
示例性介质
在介绍了本发明示例性实施方式的方法和装置之后，接下来，对本发明示例性实施方式的、用于实现电子设备的数据处理方法的介质进行介绍。
本发明实施例提供了一种介质，存储有计算机可执行指令，上述指令在被处理器执行时用于实现上述方法实施例中任一项所述的电子设备的数据处理方法。
在一些可能的实施方式中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在计算设备上运行时，所述程序代码用于使所述计算设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的电子设备的数据处理方法中的操作步骤。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
图6示意性地示出了根据本发明实施方式的计算机可读存储介质产品的示意图，如图6所示，描述了根据本发明的实施方式的用于实现电子设备的数据处理方法的程序产品60，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在计算设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括——但不限于——电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于——无线、有线、光缆，RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言——诸如Java，C++等，还包括常规的过程式程序设计语言——诸如“C”，语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)一连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
示例性计算设备
在介绍了本发明示例性实施方式的方法、介质和装置之后，接下来，介绍根据本发明的另一示例性实施方式的、用于实现电子设备的数据处理方法的计算设备。
本发明实施例还提供了一种计算设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的可执行指令，所述处理器执行所述指令时实现上述方法实施例中任一项所述的电子设备的数据处理方法。
所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。
在一些可能的实施方式中，根据本发明的用于实现电子设备的数据处理方法的计算设备可以至少包括至少一个处理单元、以及至少一个存储单元。其中，所述存储单元存储有程序代码，当所述程序代码被所述处理单元执行时，使得所述处理单元执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的电子设备的数据处理方法中的操作步骤。
下面参照图7来描述根据本发明的这种实施方式的用于实现电子设备的数据处理方法的计算设备70。如图7所示的计算设备70仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示，计算设备70以通用计算设备的形式表现。计算设备70的组件可以包括但不限于：上述至少一个处理单元701、上述至少一个存储单元702、连接不同系统组件(包括存储单元702和处理单元701)的总线703。
总线703包括数据总线、地址总线和控制总线。
存储单元702可以包括易失性存储器，例如随机存取存储器(RAM)7021和/或高速缓存存储器7022，还可以进一步包括只读存储器(ROM)7023。
存储单元702还可以包括具有一组(至少一个)程序模块7024的程序/实用工具7025，这样的程序模块7024包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
计算设备70也可以与一个或多个外部设备704(例如键盘、指向设备、蓝牙设备等)通信，这种通信可以通过输入/输出(I/0)接口705进行。并且，计算设备70还可以通过网络适配器706与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器706通过总线703与计算设备70的其它模块通信。应当明白，尽管图中未示出，可以结合计算设备70使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
应当注意，尽管在上文详细描述中提及了数据处理装置的若干单元/模块或子单元/模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之，上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
此外，尽管在附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。
虽然已经参考若干具体实施方式描述了本发明的精神和原理，但是应该理解，本发明并不限于所公开的具体实施方式，对各方面的划分也不意味着这些方面中的特征不能组合以进行受益，这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (10)

1.一种电子设备的数据处理方法，所述电子设备具有扫描窗口，所述方法包括：
在所述电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列；
在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果；以及
识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果；
其中，所述将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接包括：
将所述在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置；以及
基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
2.根据权利要求1所述的方法，其中，所述确定所述任一帧图像相对于所述在前帧图像的拼接位置包括：
分别获取所述在前帧图像中的最后一帧图像的预定区域内的第一特征点集合和所述任一帧图像的预定区域内的第二特征点集合；
对所述第一特征点集合与第二特征点集合进行匹配，得到匹配成功的特征点；
分别获取所述匹配成功的特征点在所述在前帧图像的最后一帧图像的预定区域内的第一位置坐标和在所述任一帧图像的预定区域内的第二位置坐标；
根据所述第一位置坐标和所述第二位置坐标的横坐标之差，确定所述任一帧图像相对于所述在前帧图像的水平拼接位置；以及
根据所述第一位置坐标和所述第二位置坐标的纵坐标之差，确定所述任一帧图像相对于所述在前帧图像的竖直拼接位置。
3.根据权利要求2所述的方法，其中，所述将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接包括：
根据所述任一帧图像相对于所述在前帧图像的水平拼接位置和竖直拼接位置，将所述任一帧图像的预定区域与所述在前帧图像中的最后一帧图像的预定区域相拼接，重叠的部分保留所述任一帧图像的内容。
4.根据权利要求1所述的方法，其中：
任一帧图像的预定区域位于所述图像的中部；
当所述扫描窗口横向移动扫描时，所述预定区域被设置为在竖直方向的大小适配于被扫描的文字的高度；以及
当所述扫描窗口纵向移动扫描时，所述预定区域被设置为在水平方向的大小适配于被扫描的文字的宽度。
5.一种电子设备的数据处理装置，所述电子设备具有扫描窗口，所述装置包括：
扫描模块，用于在所述电子设备的扫描窗口移动期间，获取与所述扫描窗口对应的帧图像序列；
拼接模块，用于在获取到所述帧图像序列中的任一帧图像时，将所述任一帧图像与所述任一帧图像的在前帧图像进行拼接，直至将最后一帧图像与所述最后一帧图像的在前帧图像进行拼接后得到最终扫描结果；以及
查询模块，用于识别所述最终扫描结果中包含的文字，并输出与所述文字对应的查询结果；
其中，所述拼接模块包括：
跟踪子模块，用于将所述在前帧图像中的最后一帧图像的预定区域内的特征点作为跟踪目标，根据所述跟踪目标在所述任一帧图像和所述在前帧图像的最后一帧图像中的位置变化，确定所述任一帧图像相对于所述在前帧图像的拼接位置；以及
拼接子模块，用于基于所述拼接位置，将所述任一帧图像与所述在前帧图像进行拼接，得到所述任一帧图像的后一帧图像的在前帧图像。
6.根据权利要求5所述的装置，其中，所述跟踪子模块包括：
第一获取单元，用于分别获取所述在前帧图像中的最后一帧图像的预定区域内的第一特征点集合和所述任一帧图像的预定区域内的第二特征点集合；
匹配单元，用于对所述第一特征点集合与第二特征点集合进行匹配，得到匹配成功的特征点；
第二获取单元，用于分别获取所述匹配成功的特征点在所述在前帧图像的最后一帧图像的预定区域内的第一位置坐标和在所述任一帧图像的预定区域内的第二位置坐标；
第一确定单元，用于根据所述第一位置坐标和所述第二位置坐标的横坐标之差，确定所述任一帧图像相对于所述在前帧图像的水平拼接位置；以及
第二确定单元，用于根据所述第一位置坐标和所述第二位置坐标的纵坐标之差，确定所述任一帧图像相对于所述在前帧图像的竖直拼接位置。
7.根据权利要求6所述的装置，其中，所述拼接子模块，用于根据所述任一帧图像相对于所述在前帧图像的水平拼接位置和竖直拼接位置，将所述任一帧图像的预定区域与所述在前帧图像中的最后一帧图像的预定区域相拼接，重叠的部分保留所述任一帧图像的内容。
8.根据权利要求5所述的装置，其中：
任一帧图像的预定区域位于所述图像的中部；
当所述扫描窗口横向移动扫描时，所述预定区域被设置为在竖直方向的大小适配于被扫描的文字的高度；以及
当所述扫描窗口纵向移动扫描时，所述预定区域被设置为在水平方向的大小适配于被扫描的文字的宽度。
9.一种介质，存储有计算机可执行指令，所述指令在被处理器执行时用于实现：
如权利要求1至4中任一项所述的电子设备的数据处理方法。
10.一种计算设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的可执行指令，所述处理器执行所述指令时实现：
如权利要求1至4中任一项所述的电子设备的数据处理方法。
CN201910365811.4A 2019-04-30 2019-04-30 电子设备的数据处理方法、介质、装置和计算设备 Pending CN110097063A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910365811.4A CN110097063A (zh) 2019-04-30 2019-04-30 电子设备的数据处理方法、介质、装置和计算设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910365811.4A CN110097063A (zh) 2019-04-30 2019-04-30 电子设备的数据处理方法、介质、装置和计算设备

Publications (1)

Publication Number Publication Date
CN110097063A true CN110097063A (zh) 2019-08-06

Family

ID=67446740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910365811.4A Pending CN110097063A (zh) 2019-04-30 2019-04-30 电子设备的数据处理方法、介质、装置和计算设备

Country Status (1)

Country Link
CN (1) CN110097063A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111612696A (zh) * 2020-05-21 2020-09-01 网易有道信息技术（北京）有限公司 图像拼接方法、装置、介质及电子设备
CN112347227A (zh) * 2020-11-10 2021-02-09 网易有道信息技术（北京）有限公司 用于文本查询的方法和便携式电子设备
CN112991180A (zh) * 2021-03-25 2021-06-18 北京百度网讯科技有限公司 图像拼接方法、装置、设备以及存储介质
CN113096012A (zh) * 2021-03-30 2021-07-09 上海西井信息科技有限公司 单目多帧视频图像拼接系统、方法、设备及存储介质
EP3998576A3 (en) * 2021-03-24 2022-06-29 Beijing Baidu Netcom Science Technology Co., Ltd. Image stitching method and apparatus, device, and medium
CN115115593A (zh) * 2022-06-28 2022-09-27 先临三维科技股份有限公司 一种扫描处理方法、装置、电子设备及存储介质
CN115797164A (zh) * 2021-09-09 2023-03-14 同方威视技术股份有限公司 固定视场中的图像拼接方法、装置、系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102034231A (zh) * 2009-09-25 2011-04-27 汉王科技股份有限公司 图像序列配准方法
CN102156867A (zh) * 2010-12-27 2011-08-17 汉王科技股份有限公司 图像序列拼接方法和装置
CN102324027A (zh) * 2011-05-27 2012-01-18 汉王科技股份有限公司 扫描识别装置和方法
CN102393953A (zh) * 2011-07-15 2012-03-28 汉王科技股份有限公司 图像帧拼接方法和装置
CN103258321A (zh) * 2013-05-14 2013-08-21 杭州海康希牧智能科技有限公司 一种图像拼接方法
CN104268846A (zh) * 2014-09-22 2015-01-07 上海联影医疗科技有限公司 图像拼接方法及装置
CN105574815A (zh) * 2015-12-21 2016-05-11 湖南优象科技有限公司 用于扫描鼠标器的图像拼接方法及装置
CN105718930A (zh) * 2016-01-26 2016-06-29 北京纽思曼教育科技有限公司 一种多功能翻译笔及其翻译方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102034231A (zh) * 2009-09-25 2011-04-27 汉王科技股份有限公司 图像序列配准方法
CN102156867A (zh) * 2010-12-27 2011-08-17 汉王科技股份有限公司 图像序列拼接方法和装置
CN102324027A (zh) * 2011-05-27 2012-01-18 汉王科技股份有限公司 扫描识别装置和方法
CN102393953A (zh) * 2011-07-15 2012-03-28 汉王科技股份有限公司 图像帧拼接方法和装置
CN103258321A (zh) * 2013-05-14 2013-08-21 杭州海康希牧智能科技有限公司 一种图像拼接方法
CN104268846A (zh) * 2014-09-22 2015-01-07 上海联影医疗科技有限公司 图像拼接方法及装置
CN105574815A (zh) * 2015-12-21 2016-05-11 湖南优象科技有限公司 用于扫描鼠标器的图像拼接方法及装置
CN105718930A (zh) * 2016-01-26 2016-06-29 北京纽思曼教育科技有限公司 一种多功能翻译笔及其翻译方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
刘伟: "《电子阅读笔中图像预处理及帧间配准的研究与实现》", 《中国优秀硕士学位论文全文数据库信息科技辑》 *
陈棣湘 等；: "《数码扫描笔中图像处理技术的研究》", 《仪器仪表学报》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111612696A (zh) * 2020-05-21 2020-09-01 网易有道信息技术（北京）有限公司 图像拼接方法、装置、介质及电子设备
CN111612696B (zh) * 2020-05-21 2024-04-02 网易有道信息技术（北京）有限公司 图像拼接方法、装置、介质及电子设备
CN112347227A (zh) * 2020-11-10 2021-02-09 网易有道信息技术（北京）有限公司 用于文本查询的方法和便携式电子设备
EP3998576A3 (en) * 2021-03-24 2022-06-29 Beijing Baidu Netcom Science Technology Co., Ltd. Image stitching method and apparatus, device, and medium
CN112991180A (zh) * 2021-03-25 2021-06-18 北京百度网讯科技有限公司 图像拼接方法、装置、设备以及存储介质
CN112991180B (zh) * 2021-03-25 2023-10-31 北京百度网讯科技有限公司 图像拼接方法、装置、设备以及存储介质
CN113096012A (zh) * 2021-03-30 2021-07-09 上海西井信息科技有限公司 单目多帧视频图像拼接系统、方法、设备及存储介质
CN115797164A (zh) * 2021-09-09 2023-03-14 同方威视技术股份有限公司 固定视场中的图像拼接方法、装置、系统
CN115797164B (zh) * 2021-09-09 2023-12-12 同方威视技术股份有限公司 固定视场中的图像拼接方法、装置、系统
CN115115593A (zh) * 2022-06-28 2022-09-27 先临三维科技股份有限公司 一种扫描处理方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN110097063A (zh) 电子设备的数据处理方法、介质、装置和计算设备
US11417014B2 (en) Method and apparatus for constructing map
US8644551B2 (en) Systems and methods for tracking natural planar shapes for augmented reality applications
CN109508681A (zh) 生成人体关键点检测模型的方法和装置
CN107491547A (zh) 基于人工智能的搜索方法和装置
CN109871800B (zh) 一种人体姿态估计方法、装置和存储介质
CN110986969B (zh) 地图融合方法及装置、设备、存储介质
CN111815754A (zh) 一种三维信息确定方法、三维信息确定装置及终端设备
CN111210485B (zh) 图像的处理方法、装置、可读介质和电子设备
CN108984399A (zh) 检测界面差异的方法、电子设备和计算机可读介质
WO2020211573A1 (zh) 用于处理图像的方法和装置
CN109754464B (zh) 用于生成信息的方法和装置
CN108304067A (zh) 用于展示信息的系统、方法和装置
CN110263209A (zh) 用于生成信息的方法和装置
CN111246196B (zh) 视频处理方法、装置、电子设备及计算机可读存储介质
CN109389660A (zh) 图像生成方法和装置
CN109829431B (zh) 用于生成信息的方法和装置
CN112270242B (zh) 轨迹的显示方法、装置、可读介质和电子设备
CN113610034B (zh) 识别视频中人物实体的方法、装置、存储介质及电子设备
CN108170751A (zh) 用于处理图像的方法和装置
CN108052290A (zh) 用于存储数据的方法和装置
CN108563982B (zh) 用于检测图像的方法和装置
CN111368860A (zh) 重定位方法及终端设备
CN111368668B (zh) 三维手部识别方法、装置、电子设备及存储介质
CN113111684B (zh) 神经网络模型的训练方法、装置和图像处理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220602

Address after: 310052 room 509, building 3, No. 399, Wangshang Road, Changhe street, Binjiang District, Hangzhou City, Zhejiang Province

Applicant after: Netease Youdao (Hangzhou) Intelligent Technology Co.,Ltd.

Address before: 100084 1st floor, block a, building 7, West Zhongguancun Software Park, No.10 yard, northwest Wangdong Road, Haidian District, Beijing

Applicant before: NETEASE YOUDAO INFORMATION TECHNOLOGY (BEIJING) Co.,Ltd.