CN208156559U - 用笔辅助语音听写的电子设备 - Google Patents

Abstract

本实用新型公开了一种用笔辅助语音听写的电子设备，所述电子设备包括壳体、显示组件及设于壳体内的处理器、麦克风组件及通信模块。麦克风组件用于接收用户语音。处理器与麦克风组件及通信模块通讯连接，处理器用于将麦克风组件接收的语音信息通过通信模块传送至云端，并通过通信模块接收云端将对应语音信息转写的文本信息。显示组件与处理器通讯连接用于显示文本信息，显示组件包括显示屏和触控面板，显示屏与触控面板层叠排布，触控面板用于接收触屏操作产生触屏操作信息用于修改文本信息。根据本实用新型的用笔辅助语音听写的电子设备，触控面板可以接收触屏操作产生触屏操作信息以对文本信息进行修改与补充，从而可以提高用户的使用体验性。

Description

用笔辅助语音听写的电子设备

技术领域

本实用新型涉及通讯技术领域，具体而言，尤其涉及一种用笔辅助语音听写的电子设备。

背景技术

随着智能语音、人工智能技术的发展。语音听写设备，能够将语音实时转写为文字，可应用于各领域的记录或文字内容产出场景，如演讲授课、采编访谈、持写文章、会议记录、笔记整理、备忘提醒、日常记事等。特别是面向记者、编辑、作家、速记员等文字工作者，高效、智能、精准的语音听写设备可大幅提高其工作效率。

相关技术中，语音听写产品已实现了基于语音输入的快速记录，但存在识别准确率受限、交互流程复杂、应用场景不专注等问题。

实用新型内容

本实用新型旨在至少解决现有技术中存在的技术问题之一。为此，本实用新型提出一种电子设备，所述电子设备具有方便使用、性能好的优点。

根据本实用新型实施例的用笔辅助语音听写的电子设备，包括：壳体，显示组件，及设于壳体内的处理器、麦克风组件及通信模块；所述麦克风组件，用于接收用户语音；所述处理器，与所述麦克风组件及所述通信模块通讯连接，所述处理器用于将所述麦克风组件接收的语音信息通过所述通信模块传送至云端，并通过所述通信模块接收云端对所述语音信息转写的文本信息；所述显示组件，与所述处理器通讯连接用于显示所述文本信息，所述显示组件包括显示屏和触控面板，所述显示屏与所述触控面板层叠排布，所述触控面板用于接收触屏操作产生触屏操作信息以修改所述文本信息。

根据本实用新型实施例的用笔辅助语音听写的电子设备，通过设置显示组件，通信模块接收到的文本信息可以在显示组件上显示，从而可以用于各领域的记录或文字内容输出的场景，以便于用户阅读。且显示组件包括触控面板，触控面板可以接收触屏操作产生触屏操作信息以对文本信息进行修改与补充，从而可以弥补云端将语音信息转写为文本信息出错的情况，进而可以提高电子设备的识别精确度，还可以提高用户的使用体验性。另外，利用云端实现语音信息到文本信息的转写，可以减小电子设备的数据处理负担，从而可以提高处理器的运算效率，进而可以提高电子设备的识别准确度及工作效率。

根据本实用新型的一些实施例，所述触控面板接收的触屏操作信息由触控笔触发。

根据本实用新型的一些实施例，还包括：触控笔，所述触控笔与所述触控面板交互，所述触控笔用于在所述触控面板上书写以触发触屏操作信息。

在本实用新型的一些实施例中，所述触控面板为电磁触控板，所述触控笔为电磁笔；或者所述触控面板为电容触控板，所述触控笔为电容笔。

根据本实用新型的一些实施例，所述显示屏为液晶显示屏、有机发光二极管显示屏、电子墨水显示屏、电磁触控板或电容触控板。

根据本实用新型的一些实施例，所述麦克风组件能够定向接收用户语音。

在本实用新型的一些实施例中，所述麦克风组件为多麦克风阵列。

进一步地，所述麦克风组件为双麦克风阵列。

根据本实用新型的一些实施例，所述通信模块为有线通信模块或无线通信模块。

根据本实用新型的一些实施例，还包括：音频输出设备，所述音频输出设备为扬声器和/或耳机插孔。

本实用新型的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本实用新型的实践了解到。

附图说明

本实用新型的上述和附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：

图1是根据本实用新型实施例的用笔辅助语音听写的电子设备的结构示意图；

图2是根据本实用新型实施例的用笔辅助语音听写的电子设备的结构示意图。

附图标记：

用笔辅助语音听写的电子设备1，

壳体10，处理器20，存储器30，电源40，显示组件50，触控笔60，

麦克风组件70，云端80，音频输出设备90，通信模块100，按键110。

具体实施方式

下面详细描述本实用新型的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本实用新型，而不能理解为对本实用新型的限制。

在本实用新型的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本实用新型和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本实用新型的限制。此外，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实用新型的描述中，除非另有说明，“多个”的含义是两个或两个以上。

在本实用新型的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本实用新型中的具体含义。

如图1-图2所示，根据本实用新型实施例的用笔辅助语音听写的电子设备1，包括壳体10、显示组件50、及设于壳体10内的处理器20、麦克风组件70及通信模块100。换言之，处理器20、麦克风组件70及通信模块100均位于壳体10内。对于显示组件50的设置不作限定，例如，显示组件50可以独立于壳体10。显示组件50也可以与壳体10连接。例如，显示组件50可以嵌设在壳体10上。

麦克风组件70用于接收用户语音，可以设置一个也可以设置多个。处理器20与麦克风组件70通讯连接，处理器20也与通信模块100通讯连接。处理器20可以将麦克风组件70接收的语音信息通过通信模块100传送至云端80。处理器20也可以通过通信模块100接收云端80将对应语音信息转写的文本信息。例如，麦克风组件70可以将接收的语音信号传递给处理器20，处理器20将接收到的语音信号再传送给通信模块100，通信模块100将接收到的语音信号传送到云端80，云端80可以将接收到的语音信息转写为文本信息，云端80将文本信息传送给通信模块100，通信模块100将文本信息传递给处理器20。处理器20可以为CPU(中央处理器，全称：Central Processing Unit/Processor)。云端80具有语音识别、语音转写等功能，可基于语音信息进行文本转写。

显示组件50也与处理器20通讯连接。显示组件50可以显示文本信息。例如，处理器20可以将接收到的文本信息传递给显示组件50，显示组件50可以将文本信息显示出来并供用户操作修改。显示组件50包括显示屏和触控面板，显示屏与触控面板层叠排布，触控面板用于接收触屏操作产生触屏操作信息用于修改文本信息。用户可以在触控面板上进行触控操作，触控面板可以接收到触控操作后并对应产出触控操作信息，操作信息可以在显示屏上显示出来，以完成对显示屏上文本信息的修改。

根据本实用新型实施例的用笔辅助语音听写的电子设备1，通过设置显示组件50，通信模块100接收到的文本信息可以在显示组件50上显示，从而可以用于各领域的语音记录或文字内容输出的场景，以便于用户重听或阅读。且显示组件50包括触控面板，触控面板可以接收触屏操作产生触屏操作信息以对文本信息进行修改与补充，从而可以弥补云端80将语音信息转写为文本信息出错的情况，进而可以提高电子设备的显示精确度，还可以提高用户的使用体验性。另外，利用云端80实现语音信息到文本信息的转写，可以减小电子设备1的数据处理负担，从而可以提高处理器20的运算效率，进而可以提高电子设备1的识别准确度及工作效率。

如图1所示，根据本实用新型的一些实施例，触控面板接收的触屏操作信息可以由触控笔60触发。可以理解的是，触控面板可以感应到触控笔60的触控操作并对应生产相应的触控信息。例如，触控面板可以接收并识别触控笔60的任意触控操作及触控笔60在显示组件50上的相对位置信息。由此，利用触控笔60与触控面板的配合使用，用户可以直接在触控面板上进行书写、绘图、批注等操作。当然，在其他的实施方式中，触控操作也可以由用户手指实现。

如图1所示，根据本实用新型的一些实施例，用笔辅助语音听写的电子设备1还包括触控笔60，触控笔60与触控面板交互，触控笔60用于在触控面板上书写或标记操作以触发触屏操作信息。可以理解的是，触控笔60可以与触控面板搭配使用。触控笔60可以在触控面板上书写或标记操作，触控面板可以感应到触控笔60的书写操作并对应生产相应的触控信息。由此，用户可以利用触控笔60在触控面板上书写或是显示组件50上的文本信息进行修改。

在本实用新型的一些实施例中，触控面板为电磁触控板，触控笔60为电磁笔；或者触控面板为电容触控板，触控笔60为电容笔。可以理解的是，触控面板与触控笔60之间的通讯方式可以是电磁感应式通讯方式或电容感应式交互方式。

电磁感应式交互方式是靠电磁笔操作过程中和电磁触控板上的磁场变化来判别。电磁触控板的透光率、高解析度高，反应灵敏，且拥有Z轴感应能力，适合用来绘图，手写辨识等等，且无需直接触碰屏幕，即可触控的优点。电磁感应笔的精度，手写识别等非常适合在文字缝隙里划线、批注、记事。

电容感应式交互方式是利用电容笔与电容触控板之间的电流感应实现通讯的。电容触控板是在玻璃表面贴上一层透明的特殊金属导电物质。当电容笔在金属层上操作时，触点的电容就会发生变化，使得与之相连的振荡器频率发生变化，通过测量频率变化可以确定触摸位置获得信息。电容触控板还可以用手指直接操作，利用人体与电容触控板接触时产生的电流进行定位。当然，触控面板还可以是电阻触控板，红外触控板或表面声波触控板。

根据本实用新型的一些实施例，显示屏也可以为液晶显示屏、有机发光二极管显示屏、电子墨水显示屏、电磁触控板或电容触控板。液晶显示屏，英文简称为LCD，全称是Liquid Crystal Display，是属于平面显示器的一种。液晶显示屏利用两片极化材料中的液体水晶溶液，使电流通过该液体时会使水晶重新排列达到成像的目的。液晶显示屏具有耗电量低、体积小、辐射低的优点。

有机发光二极管显示屏，英文简称为OLED，全称是Organic ElectroluminesenceDi splay,OELD)。因为具备轻薄、省电等特性。有机发光二极管显示屏是指有机半导体材料和发光材料在电场驱动下，通过载流子注入和复合导致发光的现象。有机发光二极管显示屏具有厚度小、质量轻且显示画面效果好的优点。

电子墨水显示屏表面附着很多体积很小的"微胶囊"，封装了带有负电的黑色颗粒和带有正电的白色颗粒，通过改变电荷使不同颜色的颗粒有序排列，从而呈现出黑白分明的可视化效果。电子墨水显示屏看起来更像印刷文字，可以使眼睛更加轻松。

根据本实用新型的一些实施例，麦克风组件70能够定向接收用户语音。由此，可以提高麦克风组件70的收音效果，避免环境杂音对用户语音的干扰，进而可以提高电子设备的录音准确性。

如图1所示，在本实用新型的一些实施例中，麦克风组件70可以为多麦克风阵列。换言之，麦克风组件70由多个麦克风阵列排布。由此，可以利用多个麦克风进行收音，还可以利用麦克风组件70接收不同方位的声音信号，且定向录音的质量均较好，从而可以提高电子设备1的录音效果。

进一步地，如图1所示，麦克风组件70可以为双麦克风阵列。可以理解的是，麦克风组件70为两个麦克风阵列排布。由此，两个麦克风可以配合作用，可以定向接收来自音源方位的语音信号，从而可以提高电子设备1的收音效果。

根据本实用新型的一些实施例，通信模块100为有线通信模块100或无线通信模块100。例如，有线通信模块100可以为USB type-C接口，有线通信模块100可以作为与外部数据传输的有线通信接口和充电接口。无线通信模块100包括WIFI和/或蓝牙，可接收和发送电子设备1需无线传输的各类数据。

如图1-图2所示，根据本实用新型的一些实施例，用笔辅助语音听写的还可以包括音频输出设备90，音频输出设备90可以为扬声器和/或耳机插孔。由此，声音信号可以通过音频输出设备90播放出来。

下面参考图1-图2详细描述根据本实用新型实施例的用笔辅助语音听写的电子设备1。值得理解的是，下述描述仅是示例性说明，而不是对本实用新型的具体限制。

如图1-图2所示，根据本实用新型实施例的电子设备1，包括壳体10、处理器20、存储器30、电源40、显示组件50、触控笔60、麦克风组件70、音频输出设备90、通信模块100、按键110等。按键110与处理器20连接。音频输出设备90、通信模块100、麦克风组件70、处理器20、存储器30、电源40均位于壳体10内，显示组件50、按键110均设在壳体10上。触控笔60与壳体10彼此独立。存储器30、显示组件50、麦克风组件70、音频输出设备90、按键110均可以与处理器20通讯连接。触控笔60、通信模块100与处理器20也可以通讯连接。

处理器20是电子设备1的控制中心，处理器20可以利用各种接口和线路连接所有组件，通过执行存储在存储器30中的程序、调用存储在存储器30中的数据执行电子设备1的各种功能并完成数据处理、控制各硬件组件。处理器20可以为一个，处理器20也可以为多个，从而可以增加电子设备1的处理速度。

存储器30包括程序存储区和数据存储区，程序存储区中存储语音听写、书写等功能所需的程序。数据存储区中存储使用电子设备1时所创建的数据(比如音频数据、转写文本、书写数据等)。存储器30可以被计算机读取数据。存储器30可以为一个，存储器30也可以为多个，从而可以增加电子设备1的增加处理速度与数据读取。

电源40可以采用锂电池，电源40可以给各个部件供电。处理器20具有电源40管理芯片，电源40可以通过电源40管理芯片与处理器20相连，从而实现对电池充放电、电源40功耗的管理。

显示组件50包括显示屏和触控面板。显示屏集成了触控面板。

显示屏可以呈现文本、字符、图形和其任意组合等各类数据的图形用户界面。显示屏可以是液晶显示屏，也可以是有机放光二极管显示屏或者电子墨水显示屏。触控面板支持触控笔60在触控面板上进行的任何输入操作。触控面板能够接收并识别触控笔60的任意触控操作及在显示屏上的位置等信息，处理器20能够解释该触控操作(例如笔势识别、手写识别等)，并执行该触控操作的对应指令。触控笔60是电子设备1的输入设备，触控笔60与触控面板搭配使用。利用触控笔60可以在触控面板上进行任意书写、绘图、批注、对显示屏上显示的字体修改或删除等操作。触控面板可以为电磁触控板，触控笔60可以为电磁笔，电磁笔与电磁触控板利用电磁感应触控技术实现交互，具有高精度、低延时、防误触控的优点。当然，也可以采用多点电容触控板及与其对应的触控笔60。

麦克风组件70可以记录用户的语音命令并输出给处理器20进行处理或输出至存储器30以便进一步调用。音频输出设备90可以为扬声器或耳机插孔。麦克风组件70为两个，两个麦克风组件70采用阵列排布方式。两个麦克风组件70定向接收来自音源方位的语音信号后，利用处理器20中的语音信号处理组件可以对语音信号进行处理，并将处理后的语音信号发送至远程服务器。远程服务器云端中运行的语音转写引擎对语音信号进行识别、转写与分析，将识别转写文本发送到本电子设备并执行相应操作。远程服务器中的语音转写引擎与双麦克风组件70阵列具有很好的适配效果。

通信模块100包括有线通信模块和无线通信模块。有线通信模块可以为USB type-C接口，USB type-C接口可以作为与外部数据传输的有线通信接口和充电接口。无线通信模块包括WIFI和/或蓝牙，其接收和发送电子设备1需无线传输的各类数据，在存储器30中存储以便后续调用及处理。

在实际使用过程中，首先，用户语音输入口述内容，麦克风组件70获取用户语音数据，并经过处理器20通过通信模块100发送至云端80。云端80通过调用远程服务器上的识别引擎完成语音识别与转写处理后，将输出的语音转写文本发送至电子设备1在显示屏上显示。在此过程中，用户可借助触控笔60在触控面板上进行笔触操作，例如笔势(如特定的修改符号对应的笔势，包括删除、修改、插入、替换、换行、手写文字等)可以被电子设备1识别并触发、执行转写文本的相应修改操作(例如删除错误的识别内容，手写新增新思想和识别遗漏的内容，替换错误的内容等)。处理器20可以识别该笔势操作(例如笔势识别、手写识别等)，当完成笔改操作后，可重新回到口述文本显示状态，修改的同时进行语音转写显示。电子设备1可高效记录用户的语音输入，并输出精准的转写文本存储在存储器30，以便后续通过通信模块100进行传输与使用。

例如，在显示文本上的某个或多个字体上画“＝”，表示删除该字体；在两字体之间插入光标后，在显示屏上书写文字，该书写文字插入光标处；双击文本字体，该字体后的文本将换行；直接书写文字，该文字作为批注内容或新增内容等等。

相关技术中，基于便携式计算设备，如智能手机、平板手机、平板电脑、个人数字助理(PDA)等的语音听写工具已广泛用于商业与教育各类文字记录与产出场景。此类便携式计算设备通常包括通信总线、处理器、存储器、输入输出设备、通信模块、电源等组件。其中，通信总线用于实现各组件之间的连接通信；处理器(例如CPU)，用于执行存储器中存储的计算机指令和实施各类与设备相关联的功能操作。对于以上提到的便携式计算设备，处理器与操作系统(例如Android,Linux,iOS,Windows)一起执行计算机代码以及产生和使用数据；存储器提供存储程序和存储数据的空间。存储器可包括只读存储器(ROM)、随机存储器(RAM)、闪存、硬盘驱动等；输入设备用于从外界向设备传输数据。具体而言，便携计算设备的输入设备可包括触摸设备(例如触摸屏、触摸板)、机械致动器(例如按钮、开关)、运动传感器(例如加速度传感器)、压力传感器(例如力敏屏幕)、图像传感器(例如CCD照相机)、麦克风等；输出设备可将数据从设备传输到外界。输出设备可包括显示屏(例如LCD)、扬声器或耳机插孔、指示器(例如LED)等；通信模块，可以是有线(例如USB端口)或无线通信(例如WIFI、蓝牙、GPS等)模块，其实现处理器与其他设备的通信连接；电源包括电池及充电模块(例如锂电池等)。

基于以上提到的便携计算设备的语音听写应用通过用户在设备上启动语音听写应用程序并执行相应命令来完成相应功能。具体地，用户语音输入，麦克风采集语音输入命令，处理器运行存储在存储区中的语音听写程序和模块后识别该语音命令并生成相关的控制信号并在输出接口中输出，如在显示屏上显示已转写的文本、通过扬声器或耳机插孔播放已录入的语音等。

以上方案虽然实现了语音听写的基本功能，但存在一些缺点：

1、该方案在语音处理方面使用纯算法实现，给处理器增加高负荷压力，且识别准确度不够。识别准确率仍然达不到直接成文要求。如经常出现错字、错误标点现象，这对于专业的文字工作者来说，是不可容忍的，均需要人工二次校验与修改。同时，同音词、生僻词、专有名词以及多语言混合、嘈杂环境等场景，识别率也会大幅度降低。

2、在该方案中，当用户需要修改转写文本或新增内容时候，需要用户在语音和软键盘等输入设备之间来回多次切换操作，交互繁琐、步骤多，用户体验不佳；

3、在该方案中，手机、平板设备中的其他干扰内容会分散用户的注意力，不适合文字工作者以及工作、商务场景。

对比以上技术方案，本实用新型实施例的电子设备1通过采用双麦克风阵列的方式进行定向收音，且麦克风组件70具有降噪模块，降噪模块可以对收集到的语音信号进行降噪、优化处理，并借助远程服务器强大的运算能力，利用识别引擎对优化后的语音信号进行识别与转写处理，保证了语音识别的准确性，既降低了对处理器20的负荷压力，也降低了电子设备1的制造成本。另外，针对识别精度场景受限的问题，利用触控笔60在触控面板上的笔触操作，实现对错误的识别转写文本的删除、修改、增添等修改错误，且电子设备1能够识别触控笔60的特定笔势以及书写等操作，实现精准记录，在保证高效的前提下，确保了输入的准确性；解决了相应的技术问题：当用户需要修改转写文本或新增内容时候，需要用户在语音和软键盘等输入设备之间来回多次切换操作，交互繁琐、步骤多，用户体验不佳。该电子设备1交互体验流畅，操作简单，上手即用。不仅如此，其是专注的文字生产力工具，避免了手机、平板等载体应用场景不专注导致的过多干扰内容分散注意力的问题。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示意性实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本实用新型的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本实用新型的实施例，本领域的普通技术人员可以理解：在不脱离本实用新型的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本实用新型的范围由权利要求及其等同物限定。

Claims (10)

1.一种用笔辅助语音听写的电子设备，其特征在于，包括：

壳体，显示组件，及设于所述壳体内的处理器、麦克风组件及通信模块；

所述麦克风组件，用于接收用户语音；

所述处理器，与所述麦克风组件及所述通信模块通讯连接，所述处理器用于将所述麦克风组件接收的语音信息通过所述通信模块传送至云端，并通过所述通信模块接收云端对所述语音信息转写的文本信息；

所述显示组件，与所述处理器通讯连接用于显示所述文本信息，所述显示组件包括显示屏和触控面板，所述显示屏与所述触控面板层叠排布，所述触控面板用于接收触屏操作产生触屏操作信息以修改所述文本信息。

2.根据权利要求1所述的用笔辅助语音听写的电子设备，其特征在于，所述触控面板接收的触屏操作信息由触控笔触发。

3.根据权利要求1或2所述的用笔辅助语音听写的电子设备，其特征在于，还包括：

触控笔，所述触控笔与所述触控面板交互，所述触控笔用于在所述触控面板上书写以触发触屏操作信息。

4.根据权利要求3所述的用笔辅助语音听写的电子设备，其特征在于，所述触控面板为电磁触控板，所述触控笔为电磁笔；

或者所述触控面板为电容触控板，所述触控笔为电容笔。

5.根据权利要求1所述的用笔辅助语音听写的电子设备，其特征在于，所述显示屏为液晶显示屏、有机发光二极管显示屏、电子墨水显示屏、电磁触控板或电容触控板。

6.根据权利要求1所述的用笔辅助语音听写的电子设备，其特征在于，所述麦克风组件能够定向接收用户语音。

7.根据权利要求1或6所述的用笔辅助语音听写的电子设备，其特征在于，所述麦克风组件为多麦克风阵列。

8.根据权利要求7所述的用笔辅助语音听写的电子设备，其特征在于，所述麦克风组件为双麦克风阵列。

9.根据权利要求1所述的用笔辅助语音听写的电子设备，其特征在于，所述通信模块为有线通信模块或无线通信模块。

10.根据权利要求1所述的用笔辅助语音听写的电子设备，其特征在于，还包括：

音频输出设备，所述音频输出设备为扬声器和/或耳机插孔。