CN110245362B - 一种翻译装置及翻译系统 - Google Patents

一种翻译装置及翻译系统 Download PDF

Info

Publication number
CN110245362B
CN110245362B CN201910531402.7A CN201910531402A CN110245362B CN 110245362 B CN110245362 B CN 110245362B CN 201910531402 A CN201910531402 A CN 201910531402A CN 110245362 B CN110245362 B CN 110245362B
Authority
CN
China
Prior art keywords
translation
image
preprocessor
target
target translation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910531402.7A
Other languages
English (en)
Other versions
CN110245362A (zh
Inventor
曹世杰
姜幸群
牟鑫鑫
王红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201910531402.7A priority Critical patent/CN110245362B/zh
Publication of CN110245362A publication Critical patent/CN110245362A/zh
Priority to US17/273,806 priority patent/US11853711B2/en
Priority to PCT/CN2020/096734 priority patent/WO2020253761A1/zh
Application granted granted Critical
Publication of CN110245362B publication Critical patent/CN110245362B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Character Input (AREA)
  • Image Processing (AREA)
  • Machine Translation (AREA)

Abstract

本发明公开了一种翻译装置及翻译系统，涉及翻译装置技术领域，为解决相关技术中的翻译装置在翻译待翻译的词句时需要等较长的时间才能够反馈的问题而发明。该翻译装置，包括拍摄器件、预处理器、主处理器以及通信模块，拍摄器件用于拍摄目标翻译对象的图像，并将所拍摄的目标翻译对象的图像传输至预处理器，预处理器用于对目标翻译对象的图像进行图像预处理，并将处理图像传输至主处理器，主处理器用于控制通信模块传输处理图像；其中，处理图像为经过图像预处理后的目标翻译对象的图像。本发明可用于文字的翻译。

Description

一种翻译装置及翻译系统
技术领域
本发明涉及翻译装置技术领域，尤其涉及一种翻译装置及翻译系统。
背景技术
随着人们日常生活中阅读英语等外文的频率逐渐增加，对于翻译的需求愈加强烈，单纯依靠查阅纸质字典已经不能满足人们对于效率、便捷性、科技感的追求，因此，诸如翻译笔之类的翻译装置应运而生。翻译装置能够获取纸质资料上的词句并翻译成预设语言，已经成为学生等人群学习外语的得力的工具。
相关技术中的一种翻译装置(例如翻译笔)，如图1所示，主要由扫描输入模块01、主处理器02以及通信模块03构成。然而，现有的这种翻译装置在实际使用的过程中，对待翻译的词句的处理速度较慢，需要等较长的时间才能够反馈，这样大大降低了使用者的体验。
发明内容
本发明实施例提供一种翻译装置及翻译系统，用于解决相关技术中的翻译装置在翻译待翻译的词句时需要等较长的时间才能够反馈的问题。
为达到上述目的，第一方面，本发明实施例提供了一种翻译装置，包括拍摄器件、预处理器、主处理器以及通信模块，所述拍摄器件用于拍摄目标翻译对象的图像，并将所拍摄的所述目标翻译对象的图像传输至所述预处理器，所述预处理器用于对所述目标翻译对象的图像进行图像预处理，并将处理图像传输至所述主处理器，所述主处理器用于控制所述通信模块传输所述处理图像；其中，所述处理图像为经过图像预处理后的所述目标翻译对象的图像。
进一步地，所述处理图像包括第一处理图像；所述目标翻译对象的图像包括目标翻译对象区以及位于所述目标翻译对象区周围的空白区；所述预处理器用于执行以下图像预处理：将所述目标翻译对象的图像中的所述空白区去除，以形成所述第一处理图像。
更进一步地，所述预处理器具体用于执行以下图像预处理：将所述目标翻译对象的图像进行二值化处理，并根据所述目标翻译对象的图像中各个区域的灰度值确定所述目标翻译对象区以及所述空白区，然后将所述空白区去除，以形成所述第一处理图像。
更进一步地，所述处理图像包括第二处理图像；所述预处理器还用于执行以下图像预处理：将所述第一处理图像中位于所述目标翻译对象周围的冗余对象去除，以形成所述第二处理图像。
进一步地，所述预处理器用于执行以下图像预处理：对所述目标翻译对象的图像进行图像畸变校正。
进一步地，所述预处理器用于执行以下图像预处理：确定所述目标翻译对象的图像的清晰度的第一表征值的大小，当所述第一表征值小于第一预设值时，发出重新拍摄所述目标翻译对象的图像的电信号。
进一步地，所述处理图像包括第三处理图像；在所述目标翻译对象包括按一定顺序排列的多个子翻译对象情况下，所述拍摄器件用于拍摄多个所述子翻译对象的图像，然后将多个所述子翻译对象的图像传输至所述预处理器，所述预处理器用于对所述多个所述子翻译对象的图像进行图像预处理和拼接处理，以形成所述第三处理图像，并将所述第三处理图像传输至所述主处理器。
更进一步地，所述预处理器用于：在对所述多个所述子翻译对象的图像进行拼接处理后，执行以下图像预处理：确定多个所述子翻译对象的图像在拼接后的清晰度的第二表征值的大小，当所述第二表征值小于第二预设值时，发出重新拍摄多个所述子翻译对象的图像的电信号。
进一步地，所述预处理器为现场可编程门阵列模块、数字信号处理模块、专用集成电路模块中的一个。
第二方面，本发明实施例提供了一种翻译系统，包括终端设备和第一方面中所述的翻译装置，所述翻译装置的通信模块用于将所述处理图像传输至所述终端设备，所述终端设备用于识别所接收的所述处理图像中的目标翻译对象，并将识别之后将所述目标翻译对象翻译成预设语言文字。
本发明实施例提供的翻译装置，通过设置预处理器，当拍摄器件所拍摄完目标翻译对象的图像后，那么预处理器就能够及时对目标翻译对象的图像进行预处理，这样主处理器只需要接收预处理器处理后的处理图像并通过通信模块传输即可，无需对图像进行预处理，预处理器大大分担了主处理器的处理压力，从而还可以提高了主处理器的处理速度，那么在翻译时，主处理器就能够及时接收以及通过通信模块传输目标翻译对象的图像，通过主处理器与预处理器相配合，从而可以大大缩短翻译装置反馈所需的时间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为相关技术中的一种翻译装置(翻译笔)的器件布局图；
图2为本发明实施例中的翻译装置(翻译笔)的结构示意图；
图3为本发明实施例中翻译装置(翻译笔)的器件布局图；
图4为本发明实施例中的翻译系统的示意图(终端设备为计算机)；
图5为本发明实施例中的翻译系统的示意图(终端设备为手机)；
图6为本发明实施例中的翻译系统的工作原理图；
图7为本发明实施例中预处理器对目标翻译对象的图像预处理的示意图；
图8为本发明实施例中的翻译装置工作时与纸面的位置示意图；
图9为图8的侧视图；
图10为本发明实施例中预处理器对目标翻译对象的图像的进行畸变校正处理的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要理解的是，术语“中心”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。
在发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
相关技术中的翻译装置，如图1所示，主处理器02不但要对扫描输入模块01所拍摄的目标翻译对象的图像进行图像预处理，还要对其它模块(比如电源模块04、通信模块03、触控显示模块05等)的输入信息进行处理，由于对其它模块的输入信息进行处理需要占用一定的时间，这样，主处理器02不能够及时地对所拍摄的图像进行处理，从而导致在翻译时，该翻译装置需要较长时间才能够反馈结果。
第一方面，本发明实施例提供了一种翻译装置，如图2和图3所示，包括拍摄器件1、预处理器2、主处理器3以及通信模块4，拍摄器件1用于拍摄目标翻译对象的图像，并将所拍摄的目标翻译对象的图像传输至预处理器2，预处理器2用于对目标翻译对象的图像进行图像预处理，并将处理图像传输至主处理器3，主处理器3用于控制通信模块4传输处理图像；其中，处理图像为经过图像预处理后的目标翻译对象的图像。
该翻译装置在工作时，如图4和图5所示，将翻译装置的拍摄器件1移动至目标翻译对象的上方，然后拍摄器件1拍摄目标翻译对象的图像，并将所拍摄的目标翻译对象的图像传输至预处理器2，预处理器2用于对目标翻译对象的图像进行图像预处理，并将处理图像传输至主处理器3，主处理器3控制通信模块4将处理图像传输至终端设备，终端设备识别所接收的处理图像中的目标翻译对象，并将识别之后将目标翻译对象翻译成预设语言文字。
其中，该翻译装置可以是诸如翻译笔之类的便携式翻译装置(如图2所示)，也可以是固定式翻译装置，在此不做具体限定；拍摄器件1可以是摄像头；主处理器3可以为ARM(Advanced RISC Machine)芯片，还可以是其它处理器，在此也不做具体限定；通信模块4除了可以将处理图像传输至诸如手机、笔记本电脑等终端设备上进行识别和翻译之外，还可以将处理图像传输至翻译装置的自带的翻译识别系统上进行识别和翻译；如图3所示，通信模块4可以是蓝牙模块，也可以是WIFI(Wireless-Fidelity；无线网)模块，还可以是通信线的接口，例如USB接口，具体可根据实际情况而定；目标翻译对象就是拍摄器件1的镜头的光轴相对的对象，例如，如图7所示，如果想要对“we are family”这句中的单词“family”进行翻译，需要将拍摄器件1的镜头的光轴与“family”相对，那么“family”就成了目标翻译对象。
本发明实施例提供的翻译装置，通过设置预处理器2，当拍摄器件1所拍摄完目标翻译对象的图像后，那么预处理器2就能够及时对目标翻译对象的图像进行预处理，这样主处理器3只需要接收预处理器2处理后的处理图像并通过通信模块4传输即可，无需对图像进行预处理，预处理器2大大分担了主处理器3的处理压力，从而还可以提高了主处理器3的处理速度，那么在翻译时，主处理器3就能够及时接收以及通过通信模块4传输目标翻译对象的图像，通过主处理器3与预处理器2相配合，从而可以大大缩短翻译装置反馈所需的时间。
如图7的(b)所示，目标翻译对象的图像包括目标翻译对象区310以及位于目标翻译对象区310周围的空白区320。为了提高翻译的速度和准确性，预处理器2可以用于执行以下图像预处理：将目标翻译对象的图像中的空白区320去除，以形成第一处理图像(如图7的(c)所示)；其中，处理图像包括第一处理图像。预处理器2通过目标翻译对象的图像中的空白区320去除，以将目标翻译对象区310提取出来，在后续的识别和翻译中，就可以避免空白区320对识别和翻译造成的干扰，可以提高翻译的速度和准确性。
预处理器2可以采用以下方法来将空白区320去除：预处理器2具体用于执行以下图像预处理：如图7的(b)所示，将目标翻译对象的图像进行二值化处理，并根据目标翻译对象的图像中各个区域的灰度值确定目标翻译对象区310以及空白区320，然后将空白区320去除，以形成第一处理图像(如图7的(c)所示)。预处理器2通过目标翻译对象区310、空白区320灰度值的差异来将二者区分开来，通过灰度值的方法来去除空白区320，算法简单，有利于预处理器2准确地将空白区320去除。
其中，确定目标翻译对象区310以及空白区320可以采用以下方式：将目标翻译对象的图像中灰度值大于第一阈值的区域确定为目标翻译对象区310，将目标翻译对象的图像中灰度值小于第一阈值的区域确定为空白区320；上述第一阈值为目标翻译对象的图像中灰度值最大值与最小值之和的一半。
为了进一步提高翻译的速度和准确性，预处理器2还用于执行以下图像预处理：将第一处理图像中位于目标翻译对象周围的冗余对象去除，以形成第二处理图像；其中，处理图像包括第二处理图像。例如，如图7所示，当该翻译装置将“we are family”中的“family”翻译成中文时，如果第一处理图像中包括其它单词的字母，比如“e family”(如图7的(c)所示)，预处理器2就可以将“family”周围的冗余对象“e”去除，从而只保留目标翻译对象“family”(如图7的(d)所示)。这样，在后续的识别和翻译中，就可以避免冗余对象对识别和翻译造成的干扰，从而可以进一步提高翻译的速度和准确性。
其中，如图7的(b)所示，预处理器可以通过以下方法确定冗余对象：沿行的方向，将离原点的距离大于第二阈值的对象确定为冗余对象；沿列的方向，将离原点的距离大于第三阈值的对象确定为冗余对象；其中，原点为拍摄器件的镜头的光轴与纸面的交点，第二阈值为原点到单词(字)间隔区域的距离，第三阈值为原点到行间隔区域距离。
当翻译装置的拍摄器件1对目标翻译对象进行拍照时，如果拍摄器件1产生了倾斜，例如当该翻译装置为便携式翻译装置(比如翻译笔)时操作者将便携式翻译装置倾斜放置，那么翻译装置的拍摄器件1所获取图像中目标翻译对象会产生一定的变形，在会对后续的识别速度以及准确性造成一定的影响，为了消除这一影响，预处理器2用于执行以下图像预处理：对目标翻译对象的图像进行图像畸变校正。预处理器2通过对目标翻译对象的图像进行图像畸变校正，可以消除因翻译装置放置不当所导致的图像中目标翻译对象变形的问题，从而避免影响后续的识别速度以及准确性，使该翻译装置保持较高的识别速度以及准确性，进而提高翻译速度以及准确性。
下面说明一下预处理器2对目标翻译对象的图像进行畸变校正的原理：如图9所示，设翻译装置中拍摄器件1的镜头的光轴与纸面的倾斜角度为α，如图8所示，拍摄器件1的镜头的光轴在纸面上的投影与第一平面m的夹角为β，第一平面m为垂直于纸面，且平行于纸面中行的方向的平面；如图10所示，拍摄完成的图像中目标翻译对象的各个像素坐标矩阵为[X，Y]，其中一点的坐标为(xi,yj)(i＝1～n，j＝1～n；n≥1)。预处理器2对每个坐标进行倾斜处理，处理过程为：当0°<α<90°，0°<β<90°时，x’i＝xi/cosαcosβ；y’j＝yj/cosαsinβ；当0°<α<90°，β＝0°时，x’i＝xi/cosα；y’j＝yj；当0°<α<90°，β＝90°时，x’i＝xi；y’j＝yj/cosα。
当翻译装置的拍摄器件1对目标翻译对象进行拍照时，如果拍摄器件1由于各种因素(例如光线偏暗，或者当该翻译装置为便携式翻译装置时操作者在操作时手抖动)导致所拍摄的目标翻译对象的图像比较模糊，这样会影响后续的识别的速度以及准确性，为了消除这一影响，预处理器2还用于执行以下图像预处理：确定目标翻译对象的图像的清晰度的第一表征值的大小，当第一表征值小于第一预设值时，发出重新拍摄目标翻译对象的图像的电信号。这样通过预处理器2的预判断，可以将清晰度符合要求的图像传给主处理器3等后续处理器件，就避免产生因图像不清晰所导致的识别速度慢、识别准确性低的问题，从而使该翻译装置保持较高的识别速度以及准确性，进而提高翻译速度以及准确性。
其中，目标翻译对象的图像的清晰度可以采用以下函数之一的函数值(也就是第一表征值)来表征：Brenner梯度函数、Tenengrad梯度函数、Laplacian梯度函数、SMD(灰度方差)函数、SMD2(灰度方差乘积)函数等。
本发明实施例提供的翻译装置中，目标翻译对象可以是单词或者单字，另外，目标翻译对象还可以是句子。如图8所示，当目标翻译对象是句子时，也就是在目标翻译对象包括按一定顺序排列的多个子翻译对象情况下，在翻译装置中，拍摄器件1用于拍摄多个子翻译对象的图像，然后将多个子翻译对象的图像传输至预处理器2，预处理器2用于对多个子翻译对象的图像进行图像预处理和拼接处理，以形成第三处理图像，并将第三处理图像传输至主处理器3；其中，处理图像包括第三处理图像。
在目标翻译对象包括多个子翻译对象情况下，拍摄器件1可以通过以下方式来实现拍摄多个子翻译对象的图像：比如该翻译装置可以包括驱动装置，驱动装置能够驱动拍摄器件1沿预定路线移动，以拍摄多个子翻译对象的图像，该翻译装置可以是固定式翻译装置；另外，拍摄器件1还可以通过以下方式来实现拍摄多个子翻译对象的图像：操作者手持该翻译装置，然后带动该翻译装置移动，以使拍摄器件1能够拍摄多个子翻译对象的图像，该翻译装置可以是便携式翻译装置，比如翻译笔。
在目标翻译对象包括多个子翻译对象情况下，预处理器2对多个子翻译对象的图像的处理方式也不唯一，比如预处理器2可以先对多个子翻译对象的图像进行拼接，然后将进行清晰度的图像预处理，具体如下：预处理器2用于在对多个子翻译对象的图像进行拼接处理后，执行以下图像预处理：确定多个子翻译对象的图像在拼接后的清晰度的第二表征值的大小，当第二表征值小于第二预设值时，发出重新拍摄多个子翻译对象的图像的电信号。其中，第二表征值为用于表征目标翻译对象的图像的清晰度的函数(例如Brenner梯度函数、Tenengrad梯度函数等)的函数值。
另外，预处理器2还可以先对多个子翻译对象的图像进行清晰度的图像预处理，然后再将清晰度符合要求的多个子翻译对象的图像做拼接处理，具体如下：预处理器2用于：在获取多个子翻译对象的图像后，确定每个子翻译对象的图像的清晰度的第一表征值，当n小于第三预设值时，拍摄器件1发出重新拍摄的电信号；n为第一表征值小于第四预设值的子翻译对象的图像的个数。
本发明实施例提供的翻译装置中，预处理器2的类型也不唯一，比如预处理器2可以为FPGA(Field-Programmable Gate Array；现场可编程门阵列)模块；FPGA模块可进行高帧率处理(每秒处理60帧)，在于翻译装置在翻译的过程中可实现快速扫过而不丢失图片，从而保证翻译快速而准确；此外，FPGA模块，由于其并行处理的特点，可以在60毫秒内完成处理反馈，大大提高了对目标翻译对象的图像的处理的效率，进而保证翻译的速度(现有的翻译笔采用的主处理器都是运用CPU进行顺序执行，速度慢)；另外，FPGA模块具有体积小、重量轻的优势，有利于减小该翻译装置的体积。
预处理器2也可以为DSP(Digital Signal Processing；数字信号处理)模块；DSP模块具有可靠性高、通用性好、可更换性好、成本低以及灵活性高等优势，从而有利于提高翻译装置的工作可靠性以及降低翻译装置的成本。
此外，预处理器2还可以为ASIC(Application Specific Integrated Circuit；专用集成电路)模块。ASIC模块同样具有体积小、重量轻的优势，有利于减小该翻译装置的体积；此外，ASIC模块进行系统集成后，外部连线减少，可靠性明显提高，进而可以提高该翻译装置的工作可靠性。
如图3所示，本发明实施例提供的翻译装置还包括开关指示灯5，开关指示灯5与主处理器3相连接，开关指示灯5在该翻译装置处于工作状态是打开，以指示翻译装置的工作状态；其中，开关指示灯5可以为常用的LED(Light-Emitting Diode；发光二极管)指示灯。
如图3所示，本发明实施例提供的翻译装置还包括翻译识别指示灯6，翻译识别指示灯6与主处理器3相连接，翻译识别指示灯6用于指示翻译识别的状态，当翻译成功时，翻译识别指示灯6显示第一颜色，例如绿色；当翻译失败时，翻译识别指示灯6显示第二颜色，例如红色。其中，翻译识别指示灯6可以为常用的LED指示灯。
如图3所示，本发明实施例提供的翻译装置还包括均与主处理器3相连接的供电模块7、存储器8，其中，供电模块7可以是电池，也可以是USB充电接口，还可以是电池和USB充电接口的结合，在此不做具体限定；存储器8包括双倍速率同步动态随机存储器8(DDRSDRAM)和闪存器(FLASH)。
如图3所示，预处理器2上设有MIPI(Mobile Industry Processor Interface)接口以及LVDS接口(又称RS-644总线接口)，拍摄器件1通过MIPI接口与预处理器2相连接，预处理器2通过LVDS接口与主处理器3相连接。
当该翻译装置为便携式翻译装置时，如图2所示，本发明实施例提供的翻译装置还包括壳体9，拍摄器件1、主处理器3以及预处理器2均设置在壳体9上，并且拍摄器件1设置在壳体9的一端。
第二方面，本发明实施例提供了一种翻译系统，如图4和图5所示，包括终端设备200和第一方面中的翻译装置100，翻译装置100的通信模块4用于将处理图像传输至终端设备200，终端设备200用于识别所接收的处理图像中的目标翻译对象，并将识别之后将目标翻译对象翻译成预设语言文字。
其中，终端设备200可以是手机、平板电脑、计算机等；终端设备200可以通过识别软件对识别所接收的处理图像中的目标翻译对象，然后再通过翻译软件(比如有道词典)将目标翻译对象翻译成预设语言文字。终端设备200在译成预设语言文字之后，还可以对翻译成的预设语言文字进行发音。
本发明实施例提供的翻译系统所解决的技术问题以及产生的技术效果，与第一方面中的翻译装置100所解决的技术问题以及产生的技术效果相同，在此不再赘述。
在本说明书的描述中，具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (9)

1.一种翻译装置，其特征在于，包括拍摄器件、预处理器、主处理器以及通信模块，所述拍摄器件用于拍摄目标翻译对象的图像，并将所拍摄的所述目标翻译对象的图像传输至所述预处理器，所述预处理器用于对所述目标翻译对象的图像进行图像预处理，并将处理图像传输至所述主处理器，所述主处理器用于控制所述通信模块传输所述处理图像；其中，所述处理图像为经过图像预处理后的所述目标翻译对象的图像；
所述处理图像包括第一处理图像；所述目标翻译对象的图像包括目标翻译对象区以及位于所述目标翻译对象区周围的空白区；
所述预处理器用于执行以下图像预处理：将所述目标翻译对象的图像中的所述空白区去除，以形成所述第一处理图像；
所述预处理器还用于将所述目标翻译对象的图像中灰度值大于第一阈值的区域确定为所述目标翻译对象区，将所述目标翻译对象的图像中灰度值小于第一阈值的区域确定为所述空白区；所述第一阈值为所述目标翻译对象的图像中灰度值最大值与最小值之和的一半。
2.根据权利要求1所述的翻译装置，其特征在于，所述预处理器具体用于执行以下图像预处理：将所述目标翻译对象的图像进行二值化处理，并根据所述目标翻译对象的图像中各个区域的灰度值确定所述目标翻译对象区以及所述空白区，然后将所述空白区去除，以形成所述第一处理图像。
3.根据权利要求1所述的翻译装置，其特征在于，所述处理图像包括第二处理图像；
所述预处理器还用于执行以下图像预处理：将所述第一处理图像中位于所述目标翻译对象周围的冗余对象去除，以形成所述第二处理图像。
4.根据权利要求1所述的翻译装置，其特征在于，所述预处理器用于执行以下图像预处理：对所述目标翻译对象的图像进行图像畸变校正。
5.根据权利要求1所述的翻译装置，其特征在于，所述预处理器用于执行以下图像预处理：确定所述目标翻译对象的图像的清晰度的第一表征值的大小，当所述第一表征值小于第一预设值时，发出重新拍摄所述目标翻译对象的图像的电信号。
6.根据权利要求1～5中任一项所述的翻译装置，其特征在于，所述处理图像包括第三处理图像；在所述目标翻译对象包括按一定顺序排列的多个子翻译对象情况下，
所述拍摄器件用于拍摄多个所述子翻译对象的图像，然后将多个所述子翻译对象的图像传输至所述预处理器，所述预处理器用于对所述多个所述子翻译对象的图像进行图像预处理和拼接处理，以形成所述第三处理图像，并将所述第三处理图像传输至所述主处理器。
7.根据权利要求6所述的翻译装置，其特征在于，所述预处理器用于：在对所述多个所述子翻译对象的图像进行拼接处理后，执行以下图像预处理：确定多个所述子翻译对象的图像在拼接后的清晰度的第二表征值的大小，当所述第二表征值小于第二预设值时，发出重新拍摄多个所述子翻译对象的图像的电信号。
8.根据权利要求1～5中任一项所述的翻译装置，其特征在于，所述预处理器为现场可编程门阵列模块、数字信号处理模块、专用集成电路模块中的一个。
9.一种翻译系统，其特征在于，包括终端设备和权利要求1～8中任一项所述的翻译装置，所述翻译装置的通信模块用于将所述处理图像传输至所述终端设备，所述终端设备用于识别所接收的所述处理图像中的目标翻译对象，并将识别之后将所述目标翻译对象翻译成预设语言文字。
CN201910531402.7A 2019-06-19 2019-06-19 一种翻译装置及翻译系统 Active CN110245362B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910531402.7A CN110245362B (zh) 2019-06-19 2019-06-19 一种翻译装置及翻译系统
US17/273,806 US11853711B2 (en) 2019-06-19 2020-06-18 Translation pen and translation system
PCT/CN2020/096734 WO2020253761A1 (zh) 2019-06-19 2020-06-18 翻译笔及翻译系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910531402.7A CN110245362B (zh) 2019-06-19 2019-06-19 一种翻译装置及翻译系统

Publications (2)

Publication Number Publication Date
CN110245362A CN110245362A (zh) 2019-09-17
CN110245362B true CN110245362B (zh) 2023-10-13

Family

ID=67888110

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910531402.7A Active CN110245362B (zh) 2019-06-19 2019-06-19 一种翻译装置及翻译系统

Country Status (3)

Country Link
US (1) US11853711B2 (zh)
CN (1) CN110245362B (zh)
WO (1) WO2020253761A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110245362B (zh) 2019-06-19 2023-10-13 京东方科技集团股份有限公司 一种翻译装置及翻译系统
CN212484405U (zh) * 2020-05-27 2021-02-05 京东方科技集团股份有限公司 一种翻译器、用于翻译器的支撑装置及翻译器套件
CN113627417B (zh) * 2021-08-16 2023-11-24 广州番禺职业技术学院 外语翻译用文本检阅装置及其实施方法
CN117474021B (zh) * 2023-12-27 2024-03-29 深圳大学 一种投影翻译方法及投影笔

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101339617A (zh) * 2007-07-06 2009-01-07 上海思必得通讯技术有限公司 手机拍照翻译装置
CN202771514U (zh) * 2012-07-27 2013-03-06 中国人民解放军理工大学气象学院 一种人脸识别门禁考勤系统
CN104881405A (zh) * 2015-05-22 2015-09-02 东莞中山大学研究院 一种基于智能手机实现拍照翻译的方法及智能手机

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997015896A1 (en) * 1995-10-27 1997-05-01 Valtion Teknillinen Tutkimuskeskus Scanning and interpretation device and method for reading and interpreting signs and characters
TWI269995B (en) * 2005-01-10 2007-01-01 Aiptek Int Inc An optical pen having a light path coaxial with its pen tip
TW200910875A (en) * 2007-08-29 2009-03-01 Inventec Appliances Corp Method and system for instantly translating text within an image
US8446298B2 (en) * 2008-04-03 2013-05-21 Livescribe, Inc. Quick record function in a smart pen computing system
CN203070566U (zh) * 2012-12-05 2013-07-17 广州好学宝软件科技有限公司 多语言翻译笔
US10509489B2 (en) * 2017-09-26 2019-12-17 Yong Bum Kim Systems and related methods for facilitating pen input in a virtual reality environment
US11084318B2 (en) * 2018-02-15 2021-08-10 Hetal B. Kurani Multifunctional writing device for automatic exam proctoring and grading
WO2020080878A1 (ko) * 2018-10-19 2020-04-23 주식회사 네오랩컨버전스 전자펜, 전자기기 및 그 제어 방법
CN110245362B (zh) * 2019-06-19 2023-10-13 京东方科技集团股份有限公司 一种翻译装置及翻译系统
US20210312824A1 (en) * 2020-04-01 2021-10-07 Magicom Inc. Smart pen apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101339617A (zh) * 2007-07-06 2009-01-07 上海思必得通讯技术有限公司 手机拍照翻译装置
CN202771514U (zh) * 2012-07-27 2013-03-06 中国人民解放军理工大学气象学院 一种人脸识别门禁考勤系统
CN104881405A (zh) * 2015-05-22 2015-09-02 东莞中山大学研究院 一种基于智能手机实现拍照翻译的方法及智能手机

Also Published As

Publication number Publication date
US20210286957A1 (en) 2021-09-16
US11853711B2 (en) 2023-12-26
CN110245362A (zh) 2019-09-17
WO2020253761A1 (zh) 2020-12-24

Similar Documents

Publication Publication Date Title
CN110245362B (zh) 一种翻译装置及翻译系统
US9135504B2 (en) Method and system using two parallel optical character recognition processes
EP3457680A1 (en) Electronic device for correcting image and method for operating the same
US9355314B2 (en) Head-mounted display apparatus and login method thereof
JP5538160B2 (ja) 瞳孔検出装置及び瞳孔検出方法
US20140347397A1 (en) Method and system for adjusting screen orientation of a mobile device
CN107111863B (zh) 角膜成像的设备和方法
US20140055342A1 (en) Gaze detection apparatus and gaze detection method
US11107254B2 (en) Calligraphy-painting device, calligraphy-painting apparatus, and auxiliary method for calligraphy painting
KR20190063277A (ko) 이미지에서 텍스트를 인식할 수 있는 전자 장치
CN111163261A (zh) 目标检测方法、电路、视障辅助设备、电子设备和介质
US20120127325A1 (en) Web Camera Device and Operating Method thereof
US10936855B2 (en) Display device for displaying in one screen a figure of a user seen from multiple different directions, and display method and recording medium for the same
US20170371123A1 (en) Method and system for multi-lens module alignment
CN107872659B (zh) 投影装置以及投影方法
US20120236134A1 (en) Handheld braille converting device, braille converting method, braille converting program, and storage medium
JP2016103137A (ja) ユーザインタフェース装置、画像処理装置及び制御用プログラム
JP2022021537A (ja) 生体認証装置および生体認証方法
CN108133469A (zh) 基于epi的光场拼接装置及方法
US9741171B2 (en) Image processing device and image processing method
US10116809B2 (en) Image processing apparatus, control method, and computer-readable storage medium, which obtains calibration image information with which to correct image data
CN110969161B (zh) 图像处理方法、电路、视障辅助设备、电子设备和介质
CN113645894A (zh) 用于自动瞳孔检测的方法和系统
Caya et al. Development of a wearable device for tracking eye movement using pupil lumination comparison algorithm
JP6624861B2 (ja) 画像処理装置、制御方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant