CN114897744B - 一种图文的修正方法及装置 - Google Patents

Abstract

本申请实施例公开了一种图文的修正方法及装置，其中方法包括：获取云空间中的原始图文内容，所述原始图文内容包括云会议过程中第一参会人员板书的共享信息，所述共享信息用于供参与所述云会议的其他参会人员观看，所述原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项；基于所述原始图文内容确定修正后的图文内容；向所述其他参会人员输出所述修正后的图文内容。本申请实施例能够有效提高图文内容的易读性。

Description

一种图文的修正方法及装置

技术领域

本申请涉及通信技术，应用于互联网、大数据等领域，尤其涉及一种图文的修正方法及装置。

背景技术

现有技术中对于大屏显示投屏画面且支持触控交互操作的应用场景，主要是涉及对触控书写的真实性进行改进，不会出现内轮廓点与外轮廓点交叉的情况，同时避免了内轮廓点相互交叉或外轮廓点相互交叉的情况，从而避免了在拐点处形成与实际触控轨迹不符的小角现象，使得触控书写更加真实。

而目前对于主讲人通过画笔在电子白板上绘制需要讲解的图文内容时，若主讲人由于撰写习惯、落笔位置和身高等差异导致白板上呈现的内容个人化风格很强，则容易出现绘制的图文内容不规范，导致其他人看不懂等实际问题。

发明内容

本申请实施例提供了一种图文的修正方法及装置，能够在主讲人员于云桌面上的白板进行书写时，基于云空间对主讲人员绘制的图形或者文字进行修正，从而有效提高图文内容的易读性。

第一方面，本申请实施例提供了一种图文的修正方法，包括：

获取云空间中的原始图文内容，所述原始图文内容包括云会议过程中第一参会人员板书的共享信息，所述共享信息用于供参与所述云会议的其他参会人员观看，所述原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项；

基于所述原始图文内容确定修正后的图文内容；

向所述其他参会人员输出所述修正后的图文内容。

现有技术中，基于云讨论组的会议场景，对于大屏显示投屏画面且支持触控交互操作来说，主要是对触控书写的真实性进行改进，而未涉及到主讲人绘制的图文内容不规范，导致其他人看不懂等实际问题的解决方案。而对于本申请而言，为解决上述问题，可以先获取云空间中的原始图文内容（即云会议开启过程中至少一个主讲人员针对至少一个共享内容的讲解信息，原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项），再基于原始图文内容确定修正后的图文内容并向参会人员输出。本申请能够在主讲人员于云桌面上的白板进行书写时，基于云空间对主讲人员绘制的图形或者文字进行修正（如将原始图文自动修正为规则图形或楷体文本），从而有效提高图文内容的易读性。

在一种可能的实施方式中，所述原始流程图内容包括多个原始图形的形状和所述多个原始图形内的文本内容；所述基于所述原始图文内容确定修正后的图文内容，包括：

从流程图数据库中查找与第一原始图形的形状的相似度高于预设阈值的目标图形，所述第一原始图形为所述多个原始图形中的任意一个；

将所述目标图形的形状确定为所述第一原始图形的修正后的形状；

在所述第一原始图形的修正后的形状中显示所述第一原始图形中的文本内容。

在上述方法中，针对流程图类型的内容确定修正后的内容的具体实现方式可以是：从流程图数据库中查找与原始图形的相似度高于预设阈值的第一图形（比如主讲人员在电子白板上绘制的流程图中的原始图形1与流程图图库中的菱形的相似度为90％、原始图形2与流程图图库中的矩形的相似度为67％、与流程图图库中的平行四边形的相似度为95％，而预设阈值为80％，则服务器确定原始图形1为菱形，原始图形2为平行四边形），再基于已根据流程图图库确定的标准图形（如菱形和平行四边形）确定与原始图形内的文本内容相适配的修正后的流程图内容（比如可以在用标准图形对原始图形进行替换后，将原始图形中的文字放入替换后的标准图形中进行自动适配，得到最佳的文本位置）。本方案能够有效地修正流程图类型的原始文本内容，提高图文内容的易读性。

在另一种可能的实施方式中，所述基于所述原始图文内容确定修正后的图文内容，包括：

基于所述第一参会人员的声音数据信息分析第一文本内容；

将文字影像信息和所述第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度；

将所述原始文本内容的中心位置与预设区域的中心位置进行比较，确定所述原始文本内容的第二偏离度；

根据所述第一偏离度和所述第二偏离度对所述原始文本内容进行修正，得到所述修正后的文本内容。

在上述方法中，针对纯文本类型、公式类型或者是二者组合类型的内容确定修正后的内容的具体实现方式可以是：先通过主讲人员输出的语音生成第一文本内容，再将已经主讲人员绘制于电子白板上的文字影像信息和第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度（如主讲人员通过声音数据信息体现出来正在讲述的内容（即第一文本内容）是“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（-x）=f（x）]，则称f（x）是D（f）上的奇函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于y轴”），而文字影像信息体现出来的内容为“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（x）=f（x）]，则称f（x）是D（f）上的偶函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于x轴”，此时服务器可以通过文字影像信息与声音数据信息中内容的差异确定文字影像信息中缺失的内容（即确定第一偏离度），再确定原始文本内容的中心位置与预设区域的中心位置的具体偏差（即确定第二偏差度），综合第一偏离度与第二偏离度得到修正后的文本内容，本申请能够有效地修正纯文本类型、公式类型或者是二者组合类型的原始文本内容，提高文本内容的易读性。

在又一种可能的实施方式中，所述基于所述原始图文内容确定修正后的图文内容之后，还包括：

获取所述其他参会人员的行为信息，其中，所述行为信息包括语言信息、动作姿态信息和面部表情中的至少一项或多项；

根据所述行为信息判断所述第一参会人员讲述的所述原始图文内容是否不清楚和/或不规范；

若所述第一参会人员讲述的所述原始图文内容不清楚和/或不规范，则向所述第一参会人员输出提醒消息，其中，所述提醒消息用于提示所述第一参会人员针对所述不清楚和/或不规范的所述原始图文内容重新解释。

在上述方法中，在得到修正后的图文内容之后，服务器还可以采集参与人的语言信息和/或动作信息，如服务器可以通过参会人员在讨论区发送的针对主讲人讲述的某一段内容表示有疑问或者没看懂或者没看清的文字反馈、或者是参会人员的面部表情以及动作姿态，来确定原始图文内容不清楚、不规范的问题是否影响了参会人员对该部分内容的理解，从而使得服务器确定是否需要弹框提醒主讲人针对某一段内容重新进行解释。通过本方案能够提高参会人员的会议体验感，提高参会人员对会议内容理解的准确度。

在又一种可能的实施方式中，所述根据所述行为信息判断所述第一参会人员讲述的所述原始图文内容是否不清楚和/或不规范，包括：

根据所述行为信息对所述其他参会人员的体验程度进行评分；

若所述其他参会人员的体验程度的基础分数小于预设阈值，则执行上述向所述第一参会人员输出提醒消息的步骤。

在上述方法中，针对主讲人员讲述的原始图文内容是否不清楚和/或不规范的问题，服务器可以通过获取参会人员的语言信息和/或动作信息对参会人员的体验感进行打分，具体可以通过基础分数来体现，该基础分数用于表征主讲人员讲述的图文内容是否清楚（或规范）对参会人员的影响程度，比如，若服务器综合参会人员的语言信息和/或动作信息后，确定出参会人员的体验感的基础分数小于预设阈值（如服务器获取到共有5人参与此次云会议，其中，参会人员1与参会人员2对于主讲人讲述的图文内容的反馈为面部表情痛苦、眉头紧锁，且在评论区针对主讲人员讲述的图文内容提出疑问，通过上述参会人员的行为信息确定出参会人员的体验感的基础分数为3分，而预设阈值为6分，由于针对主讲人员讲述的内容有异议的人数虽不多但参与会议的人员的整体基数较小，则此时服务器可以弹框提示主讲人员针对有疑问的参会人员的需求重新讲述某段内容。通过本方案中服务器基于参会人员体验感的基础分数来确定是否需要重新为参会人员讲述某段图文内容，能够提高参会人员的体验感，使得该操作更加准确。

第二方面，本申请实施例提供一种图文的修正装置，该修正装置包括获取单元、确定单元和输出单元，该修正装置用于实现第一方面或第一方面任一种可能的实施方式所描述的方法。

需要说明的是，上述第二方面所描述的修正装置所包含的处理器，可以是专门用于执行这些方法的处理器（便于区别称为专用处理器），也可以是通过调用计算机程序来执行这些方法的处理器，例如通用处理器。可选的，至少一个处理器还可以既包括专用处理器也包括通用处理器。

可选的，上述计算机程序可以存在存储器中。示例性的，存储器可以为非瞬时性（non-transitory）存储器，例如只读存储器（Read Only Memory，ROM），其可以与处理器集成在同一块器件上，也可以分别设置在不同的器件上，本申请实施例对存储器的类型以及存储器与处理器的设置方式不做限定。

在一种可能的实施方式中，上述至少一个存储器位于上述修正装置之外。

在又一种可能的实施方式中，上述至少一个存储器位于上述修正装置之内。

在又一种可能的实施方式之中，上述至少一个存储器的部分存储器位于上述修正装置之内，另一部分存储器位于上述修正装置之外。

本申请中，处理器和存储器还可能集成于一个器件中，即处理器和存储器还可以被集成在一起。

第三方面，本申请实施例提供一种图文的修正设备，该修正设备包括处理器和存储器；所述存储器中存储有计算机程序；处理器执行计算机程序时，计算设备执行前述第一或者第一方面任一项所描述的方法。

第四方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在至少一个处理器上运行时，实现前述第一至第四方面任一项所描述的方法。

第五方面，本申请提供了一种计算机程序产品，计算机程序产品包括计算机指令，当所述指令在至少一个处理器上运行时，实现前述第一至第四方面任一项所描述的方法。该计算机程序产品可以为一个软件安装包，在需要使用前述方法的情况下，可以下载该计算机程序产品并在计算设备上执行该计算机程序产品。

本申请第二至第五方面所提供的技术方法，其有益效果可以参考第一方面的技术方案的有益效果，此处不再赘述。

附图说明

下面将对实施例描述中所需要使用的附图作简单的介绍。

图1是本申请实施例提供的一种云会议过程中基于电子白板批注的应用场景；

图2是本申请实施例提供的一种云会议系统的架构示意图；

图3是本申请实施例提供的一种图文的修正方法的流程示意图；

图4是本申请实施例提供的一种服务器针对流程图类型的内容确定修正后的内容的示意图；

图5是本申请实施例提供的一种服务器针对纯文本类型和公式类型的组合内容确定修正后的内容的示意图；

图6是本申请实施例提供的一种图文的修正装置60的结构示意图；

图7是本申请实施例提供的一种图文的修正设备70的结构示意图。

具体实施方式

下面结合本申请实施例中的附图对本申请实施例进行描述。

图1示意的是一种云会议过程中基于电子白板批注的应用场景，在图1中，本申请的应用场景主要为云会议过程中，若参与会议的主讲人员基于电子白板对内容进行批注，服务器可以实时检测图文的内容是否需要调整，即将新科技转化为云端信息智能修正模型，建立针对图文的智能修正平台。具体的，举例来说，参会人员在进入云会议讨论组后，主讲人员小乐可以点击图1中的中间部分界面的“操作”键来控制云会议界面进行汇报展示，此时视频界面显示“小乐正在控制”。主讲人员可以将需要讲述的内容进行投屏，若需要用到电子白板，则可以点击“批注/白板”键，即可进行绘制页面。在云会议过程后，若主讲人员向左或者向右滑动视频界面，则视频界面显示图1中右半部分，在图1中的右半部分中主要显示的是：主讲人员在控制视频界面进行投屏共享时显示的相关汇报内容。本申请实施例后续将重点围绕对云会议中的原始图文内容的修正进行说明。

请参见图2，图2是本申请实施例提供的一种云会议系统的架构示意图，该系统包括服务器201与用户设备202。

服务器201可以为一个服务器或者多个服务器组成的服务器集群，具体可以是电脑、上位机。具体的，本申请可以基于服务器201在云端编辑、生成会议的图文内容，而无需在本地安装复杂的软件进行编辑，这样可以使得工作量轻量化，用户仅需要通过网页等载体登陆到云端界面，即可接收到服务器输出的修正后的图文内容。在本申请实施例中服务器201获取云空间中的原始图文内容，并基于原始图文内容确定修正后的图文内容，最终向参会人员输出修正后的图文内容。

用户设备202是具有处理能力和数据收发能力的装置。用户设备202可以是计算机、笔记本电脑、平板电脑、掌上电脑、台式机、诊断仪、手机、超级移动个人计算机（Ultra-mobile Personal Computer，UMPC）、上网本、个人数字助理（Personal DigitalAssistant，PDA）等。在本申请实施例中，用户设备202为应用程序（Application，APP）。

用户设备202的用户所对应的用户分组可以是普通用户、系统管理人员以及研发人员，上述人群可以在应用程序上发起云会议、参与云会议、管理云会议秩序或者是对应用程序进行开发改进。用户设备202用于接收服务器201发送的修正后的图文内容。

可选的，用户设备202也可以基于云会议过程中，通过获取参会人员中的主讲人员在电子白板上绘制时的行为信息以及原始图文内容信息，实现对原始图文内容进行修正的操作，并向与其他参会人员绑定的用户设备202输出该修正的图文内容，提高图文内容的易读性，提高参会人员的云会议体验感。

下面对本申请实施例的方法进行详细介绍。

请参见图3，图3是本申请实施例提供的一种图文的修正方法的流程示意图。可选的，该方法可以应用图2所述系统。

如图3所述的图文的修正方法至少包括步骤S301至步骤S303。

步骤S301：服务器获取云空间中的原始图文内容。

应说明的是，原始图文内容包括云会议开启过程中至少一个主讲人员针对至少一个共享内容的讲解信息，云会议是指会议创建人通过第一本地设备在云端创建的会议群组，主讲人员为通过第二本地设备取得云会议控制桌面的控制权限的参会人员，共享内容是指由云会议的参会人员通过第三本地设备向云会议的云空间上传的内容信息，原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项，原始图文内容所直接关联的对象包括共享内容本身或者共享内容讲解过程中所创建的电子白板，云会议控制桌面至少显示有云会议的至少一个共享内容，其中，第一本地设备、第二本地设备包括用户的终端设备或者大屏设备，第三本地设备包括用户的终端设备。

具体的，服务器获取该原始图文内容的来源有很多种，比如，主讲人员可以通过视频平台将在大屏投屏显示且支持触控交互操作的电子白板上绘制的内容上传到云空间中，视频平台可以是APP、云端平台或者网页等，从而使得服务器获取到该原始图文内容。再如，服务器在经过主讲人员授权后，自动获取主讲人员在云会议过程中讲述的原始图文内容。

步骤S302：服务器基于原始图文内容确定修正后的图文内容。

具体的，由上述可知，原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项，因此服务器可以是基于原始流程图内容确定修正后的流程图内容，或者是基于原始文本内容和原始公式内容确定修正后的内容，但应说明的是，服务器基于原始图文内容确定修正后的图文内容包括但不限于这两种方案，下面针对这两种方案进行详细描述。

方案一，针对流程图类型的内容确定修正后的内容的具体实现方式可以是：服务器可以从流程图数据库中查找与原始图形的相似度高于预设阈值的第一图形（如图4所示，图4是本申请实施例提供的一种服务器针对流程图类型的内容确定修正后的内容的示意图，举例来说，若主讲人员在电子白板大屏整体区域位置上绘制的流程图中的原始图形1、4与流程图图库中的菱形的相似度为90％、原始图形2、5与流程图图库中的矩形的相似度为67％、与流程图图库中的平行四边形的相似度为95％，原始图形3、6与流程图图库中的圆形的相似度为50％、与流程图图库中的椭圆形的相似度为92％，而预设阈值为80％，由上述可知，原始图形1、4与菱形的相似度为90％，大于预设阈值80％，因此服务器确定原始图形1、4为菱形；又如原始图形2、5与矩形的相似度为67％，小于预设阈值80％，原始图形2、5与平行四边形的相似度为95％，大于预设阈值80％，因此原始图形2、5为平行四边形；再如原始图形3、6与圆形的相似度为50％，小于预设阈值80％，原始图形3、6与椭圆形的相似度为92％，大于预设阈值80％，因此原始图形3、6为椭圆形）。再基于已根据流程图图库确定的标准图形（如菱形、平行四边形和椭圆形）确定与原始图形内的文本内容相适配的修正后的流程图内容（比如可以在用流程库中标准的菱形、平行四边形和椭圆形对原始图形进行替换后，将原始图形1中的文字“制定计划”、原始图形2中的文字“完善方案”、原始图形3中的文字“安排人员”、原始图形4中的文字“解决人民温饱问题”、原始图形5中的文字“人民生活达到小康水平”和原始图形6中的文字“基本实现现代化”分别放入替换后的标准图形中进行自动适配，得到最佳的文本位置）。本方案能够有效地修正流程图类型的原始文本内容，提高图文内容的易读性。

方式二，针对纯文本类型、公式类型或者是二者组合类型的内容确定修正后的内容的具体实现方式可以是：服务器先根据主讲人员输出的语音生成第一文本内容，再将已经主讲人员绘制于电子白板上的文字影像信息和第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度，再确定原始文本内容的中心位置与预设区域的中心位置的第二偏差度，最后综合第一偏离度与第二偏离度得到修正后的文本内容。

具体的，举例来说，如图5所示，图5是本申请实施例提供的一种服务器针对纯文本类型和公式类型的组合内容确定修正后的内容的示意图，若服务器检测到主讲人员通过声音数据信息体现出来正在讲述的内容（即第一文本内容）是“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（-x）=f（x）]，则称f（x）是D（f）上的奇函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于y轴”），而主讲人员通过电子白板绘制的文字影像信息体现出来的内容为“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（x）=f（x）]，则称f（x）是D（f）上的偶函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于x轴”），此时服务器可以通过文字影像信息与声音数据信息中内容的差异确定文字影像信息中缺失、需要修改的内容为“[或f（x）=f（x）]中缺少负号”“则称f（x）是D（f）上的偶函数（或偶函数）”中前面的“偶函数”改为“奇函数”（即上述修改为确定第一偏离度），再确定原始文本内容的中心位置与预设区域的中心位置的具体偏差（若原始文本内容的中心位置距离电子白板上方的垂直距离为3cm、距离电子白板下方的垂直距离为10cm、距离电子白板左方的垂直距离为5cm、距离电子白板右方的垂直距离为6cm，而预设区域的中心位置距离电子白板上方、下方、左方、右方的垂直距离均为6cm，则将原始文本内容与电子白板的垂直距离与预设区域与电子白板的垂直距离作差，得到3cm、4cm、1cm和0cm，即确定第二偏差度），最后综合第一偏离度（即根据原始文本中缺失的内容与需要删减的内容对原始文本内容做修正）与第二偏离度（即根据原始文本内容与电子白板的垂直距离与预设区域与电子白板的垂直距离的差值对原始文本内容的中心位置做修正）得到修正后的文本内容，本申请能够有效地修正纯文本类型、公式类型或者是二者组合类型的原始文本内容，提高文本内容的易读性。

步骤S303：服务器向参会人员输出修正后的图文内容。

具体的，服务器在向参会人员输出修正后的图文内容之前，可以向参会人员输出询问消息，参会人员可以基于该询问消息进行操作，比如，确认修正操作、取消修正操作等，其中，如果服务器接收到参会人员输入的确认修正操作，则可以通过与参会人员绑定的用户设备的显示屏向参会人员输出修正后的图文内容，如果服务器接收到参会人员输入的取消修正操作，则不向参会人员输出修正后的图文内容。

可选的，服务器在基于原始图文内容确定修正后的图文内容之后，还可以获取参会人员的行为信息，根据行为信息判断主讲人员讲述的原始图文内容是否不清楚和/或不规范；若主讲人员讲述的原始图文内容不清楚和/或不规范（如根据行为信息对参会人员的体验程度进行评分，若参会人员的体验程度的基础分数小于预设阈值），则向主讲人员输出提醒消息，提醒消息可以用于提示主讲人员针对不清楚和/或不规范的原始图文内容重新解释。

具体的，行为信息包括语言信息、动作姿态信息和面部表情中的至少一项或多项。针对主讲人员讲述的原始图文内容是否不清楚和/或不规范的问题，服务器可以通过获取参会人员的语言信息和/或动作信息对参会人员的体验感进行打分，具体可以通过基础分数来体现，该基础分数用于表征主讲人员讲述的图文内容是否清楚（或规范）对参会人员的影响程度，比如，若服务器综合参会人员的语言信息、动作姿态信息和/或面部表情后，确定出参会人员的体验感的基础分数小于预设阈值，举例来说，具体如表1所示，若服务器获取到共有5人参与此次云会议，其中，参会人员1与参会人员2对于主讲人讲述的图文内容的反馈为面部表情痛苦、眉头紧锁，且在评论区针对主讲人员讲述的图文内容提出疑问，通过上述参会人员的行为信息确定出参会人员的体验感的基础分数为3分，而预设阈值为6分，由于针对主讲人员讲述的内容有异议的人数虽不多但参与会议的人员的整体基数较小，则此时服务器可以弹框提示主讲人员针对有疑问的参会人员的需求重新讲述某段内容。

又如，若服务器获取到共有10人参与此次云会议，且其中有6位参会人员对于主讲人讲述的图文内容的反馈为面部表情皱眉、频频摇头，且在评论区针对主讲人员讲述的图文内容表示不理解，通过上述参会人员的行为信息确定出参会人员的体验感的基础分数为5分，而预设阈值为6分，由于参与会议的人员基数适中，且针对主讲人员讲述的内容有异议的参会人员的人数较多，则表明服务器无需弹框提示主讲人员重新讲述前述文本内容。

再如，若服务器获取到共有20人参与此次云会议，且其中有15位参会人员对于主讲人讲述的图文内容的反馈为面部表情正常、频频点头，且在评论区针对主讲人员讲述的图文内容表示赞同，通过上述参会人员的行为信息确定出参会人员的体验感的基础分数为9分，而预设阈值为6分，由于参与会议的人员基数较大，且针对主讲人员讲述的内容无异议的参会人员的人数较多，则服务器可以不需要弹框提示主讲人员重新讲述前述文本内容，若有参会人员对此次会议讲述的内容有疑问，可以在会议结束后单独对会议内容进行复盘。通过本方案中服务器基于参会人员体验感的基础分数来确定是否需要重新为参会人员讲述某段图文内容，能够提高参会人员的体验感，使得该操作更加准确。

表1

参会人员的行为信息	基础分数
		5人中有2人的面部表情为痛苦、眉头紧锁，且在评论区对内容提出疑问	3
10人中有6人的面部表情为皱眉、频频摇头，且在评论区对内容表示不理解	5
		20人中有15人的面部表情为正常、频频点头，且在评论区对内容表示赞同	9

现有技术中，基于云讨论组的会议场景，对于大屏显示投屏画面且支持触控交互操作来说，主要是对触控书写的真实性进行改进，而未涉及到主讲人绘制的图文内容不规范，导致其他人看不懂等实际问题的解决方案。而对于本申请而言，为解决上述问题，可以先获取云空间中的原始图文内容（即云会议开启过程中至少一个主讲人员针对至少一个共享内容的讲解信息，原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项），再基于原始图文内容确定修正后的图文内容并向参会人员输出。本申请能够在主讲人于云桌面上的白板进行书写时，基于云空间对主讲人绘制的图形或者文字进行修正（如将原始图文自动修正为规则图形或楷体文本），从而有效提高图文内容的易读性。

上述详细阐述了本申请实施例的方法，下面提供本申请实施例的装置。

可以理解的是，本申请实施例提供的多个装置，例如修正装置，为了实现上述方法实施例中的功能，其包含了执行各个功能相应的硬件结构、软件模块、或硬件结构和软件结构的组合等。

本领域技术人员应该很容易意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，本申请实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以在不同的使用场景中，使用不同的装置实现方式来实现前述的方法实施例，对于装置的不同实现方式不应认为超出本申请实施例的范围。

本申请实施例可以对装置进行功能模块的划分。例如，可对应各个功能划分各个功能模块，也可将两个或两个以上的功能集成在一个功能模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。需要说明的是，本申请实施例中对模块的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

例如，以采用集成的方式划分装置各个功能模块的情况下，本申请例举几种可能的处理装置。

请参见图6，图6本申请实施例提供的一种图文的修正装置60的结构示意图，该修正装置60可以为服务器或者为服务器中的一个器件，例如芯片、软件模块、集成电路等。该修正装置60用于实现前述的图文的修正方法，例如图3所述的图文的修正方法。

一种可能的实施方式中，该修正装置60可以包括获取单元601、确定单元602和输出单元603。

所述获取单元601，用于获取云空间中的原始图文内容，所述原始图文内容包括云会议过程中第一参会人员板书的共享信息，所述共享信息用于供参与所述云会议的其他参会人员观看，所述原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项；

所述确定单元602，用于基于所述原始图文内容确定修正后的图文内容；

所述输出单元603，用于向所述其他参会人员输出所述修正后的图文内容。

现有技术中，基于云讨论组的会议场景，对于大屏显示投屏画面且支持触控交互操作来说，主要是对触控书写的真实性进行改进，而未涉及到主讲人绘制的图文内容不规范，导致其他人看不懂等实际问题的解决方案。而对于本申请而言，为解决上述问题，可以先获取云空间中的原始图文内容（即云会议开启过程中至少一个主讲人员针对至少一个共享内容的讲解信息，原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项），再基于原始图文内容确定修正后的图文内容并向参会人员输出。本申请能够在主讲人员于云桌面上的白板进行书写时，基于云空间对主讲人员绘制的图形或者文字进行修正（如将原始图文自动修正为规则图形或楷体文本），从而有效提高图文内容的易读性。

另一种可能的实施方式中，包括：

所述原始流程图内容包括多个原始图形的形状和所述多个原始图形内的文本内容；

查找单元，用于从流程图数据库中查找与第一原始图形的形状的相似度高于预设阈值的目标图形，所述第一原始图形为所述多个原始图形中的任意一个；

所述确定单元602，还用于将所述目标图形的形状确定为所述第一原始图形的修正后的形状；

显示单元，用于在所述第一原始图形的修正后的形状中显示所述第一原始图形中的文本内容。

在本申请实施例中，针对流程图类型的内容确定修正后的内容的具体实现方式可以是：从流程图数据库中查找与原始图形形状的相似度高于预设阈值的第一图形（比如主讲人员在电子白板上绘制的流程图中的原始图形1与流程图图库中的菱形的相似度为90％、原始图形2与流程图图库中的矩形的相似度为67％、与流程图图库中的平行四边形的相似度为95％，而预设阈值为80％，则服务器确定原始图形1为菱形，原始图形2为平行四边形），再基于已根据流程图图库确定的标准图形（如菱形和平行四边形）确定与原始图形内的文本内容相适配的修正后的流程图内容（比如可以在用标准图形对原始图形进行替换后，将原始图形中的文字放入替换后的标准图形中进行自动适配，得到最佳的文本位置）。本方案能够有效地修正流程图类型的原始文本内容，提高图文内容的易读性。

又一种可能的实施方式中，包括：

分析单元，用于基于所述第一参会人员的声音数据信息分析第一文本内容；

输入单元，用于将文字影像信息和所述第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度；

所述确定单元602，还用于将所述原始文本内容的中心位置与预设区域的中心位置进行比较，确定所述原始文本内容的第二偏离度；

修正单元，用于根据所述第一偏离度和所述第二偏离度对所述原始文本内容进行修正，得到所述修正后的文本内容。

在本申请实施例中，针对纯文本类型、公式类型或者是二者组合类型的内容确定修正后的内容的具体实现方式可以是：先通过主讲人员输出的语音生成第一文本内容，再将已经主讲人员绘制于电子白板上的文字影像信息和第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度（如主讲人员通过声音数据信息体现出来正在讲述的内容（即第一文本内容）是“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（-x）=f（x）]，则称f（x）是D（f）上的奇函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于y轴”），而文字影像信息体现出来的内容为“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（x）=f（x）]，则称f（x）是D（f）上的偶函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于x轴”，此时服务器可以通过文字影像信息与声音数据信息中内容的差异确定文字影像信息中缺失的内容（即确定第一偏离度），再确定原始文本内容的中心位置与预设区域的中心位置的具体偏差（即确定第二偏差度），综合第一偏离度与第二偏离度得到修正后的文本内容，本申请能够有效地修正纯文本类型、公式类型或者是二者组合类型的原始文本内容，提高文本内容的易读性。

又一种可能的实施方式中，还包括：

所述获取单元601，还用于获取所述其他参会人员的行为信息，其中，所述行为信息包括语言信息、动作姿态信息和面部表情中的至少一项或多项；

判断单元，用于根据所述行为信息判断所述第一参会人员讲述的所述原始图文内容是否不清楚和/或不规范；

若所述第一参会人员讲述的所述原始图文内容不清楚和/或不规范，则所述输出单元603，还用于向所述第一参会人员输出提醒消息，其中，所述提醒消息用于提示所述第一参会人员针对所述不清楚和/或不规范的所述原始图文内容重新解释。

在本申请实施例中，在得到修正后的图文内容之后，服务器还可以采集参与人的语言信息和/或动作信息，如服务器可以通过参会人员在讨论区发送的针对主讲人讲述的某一段内容表示有疑问或者没看懂或者没看清的文字反馈、或者是参会人员的面部表情以及动作姿态，来确定原始图文内容不清楚、不规范的问题是否影响了参会人员对该部分内容的理解，从而使得服务器确定是否需要弹框提醒主讲人针对某一段内容重新进行解释。通过本方案能够提高参会人员的会议体验感，提高参会人员对会议内容理解的准确度。

又一种可能的实施方式中，还包括：

评分单元，用于根据所述其他行为信息对所述参会人员的体验程度进行评分；

若所述其他参会人员的体验程度的基础分数小于预设阈值，则执行单元，用于执行上述向所述第一参会人员输出提醒消息的步骤。

在本申请实施例中，针对主讲人员讲述的原始图文内容是否不清楚和/或不规范的问题，服务器可以通过获取参会人员的语言信息和/或动作信息对参会人员的体验感进行打分，具体可以通过基础分数来体现，该基础分数用于表征主讲人员讲述的图文内容是否清楚（或规范）对参会人员的影响程度，比如，若服务器综合参会人员的语言信息和/或动作信息后，确定出参会人员的体验感的基础分数小于预设阈值（如服务器获取到共有5人参与此次云会议，其中，参会人员1与参会人员2对于主讲人讲述的图文内容的反馈为面部表情痛苦、眉头紧锁，且在评论区针对主讲人员讲述的图文内容提出疑问，通过上述参会人员的行为信息确定出参会人员的体验感的基础分数为3分，而预设阈值为6分，由于针对主讲人员讲述的内容有异议的人数虽不多但参与会议的人员的整体基数较小），则此时服务器可以弹框提示主讲人员针对有疑问的参会人员的需求重新讲述某段内容。通过本方案中服务器基于参会人员体验感的基础分数来确定是否需要重新为参会人员讲述某段图文内容，能够提高参会人员的体验感，使得该操作更加准确。

请参见图7，图7是本申请实施例提供的一种图文的修正设备70的结构示意图，该修正设备70可以为服务器或者为服务器中的一个器件，例如芯片、软件模块、集成电路等。该修正设备70可以包括至少一个处理器701。可选的还可以包括至少一个存储器703。进一步可选的，该修正设备70还可以包括通信接口702。更进一步可选的，还可以包含总线704，其中，处理器701、通信接口702和存储器703通过总线704相连。

其中，处理器701是进行算术运算和/或逻辑运算的模块，具体可以是中央处理器（Central Processing Unit，CPU）、图片处理器（Graphics Processing Unit，GPU）、微处理器（Microprocessor Unit，MPU）、专用集成电路（Application Specific IntegratedCircuit，ASIC）、现场可编程逻辑门阵列（Field Programmable Gate Array，FPGA）、复杂可编程逻辑器件（Complex Programmable Logic Device，CPLD）、协处理器（协助中央处理器完成相应处理和应用）、微控制单元（Microcontroller Unit，MCU）等处理模块中的一种或者多种的组合。

通信接口702可以用于为所述至少一个处理器提供信息输入或者输出。和/或，所述通信接口702可以用于接收外部发送的数据和/或向外部发送数据，可以为包括诸如以太网电缆等的有线链路接口，也可以是无线链路（Wi-Fi、蓝牙、通用无线传输、车载短距通信技术以及其他短距无线通信技术等）接口。可选的，通信接口702还可以包括与接口耦合的发射器（如射频发射器、天线等），或者接收器等。

存储器703用于提供存储空间，存储空间中可以存储操作系统和计算机程序等数据。存储器703可以是随机存储记忆体（Random Access Memory，RAM）、只读存储器（Read-only Memory，ROM）、可擦除可编程只读存储器（Erasable Programmable Read-onlyMemory，EPROM）、或便携式只读存储器（Compact Disc Read-only Memory，CD-ROM）等等中的一种或者多种的组合。

该修正设备70中的至少一个处理器701用于执行前述的方法，例如图3所述实施例所描述的方法。

可选的，处理器701，可以是专门用于执行这些方法的处理器（便于区别称为专用处理器），也可以是通过调用计算机程序来执行这些方法的处理器，例如通用处理器。可选的，至少一个处理器还可以既包括专用处理器也包括通用处理器。可选的，在计算设备包括至少一个处理器701的情况下，上述计算机程序可以存在存储器703中。

可选的，该修正设备70中的至少一个处理器701用于执行调用计算机指令，以执行以下操作：

获取云空间中的原始图文内容，所述原始图文内容包括云会议过程中第一参会人员板书的共享信息，所述共享信息用于供参与所述云会议的其他参会人员观看，所述原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项；

基于所述原始图文内容确定修正后的图文内容；

向所述其他参会人员输出所述修正后的图文内容。

现有技术中，基于云讨论组的会议场景，对于大屏显示投屏画面且支持触控交互操作来说，主要是对触控书写的真实性进行改进，而未涉及到主讲人绘制的图文内容不规范，导致其他人看不懂等实际问题的解决方案。而对于本申请而言，为解决上述问题，可以先获取云空间中的原始图文内容（即云会议开启过程中至少一个主讲人员针对至少一个共享内容的讲解信息，原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项），再基于原始图文内容确定修正后的图文内容并向参会人员输出。本申请能够在主讲人员于云桌面上的白板进行书写时，基于云空间对主讲人员绘制的图形或者文字进行修正（如将原始图文自动修正为规则图形或楷体文本），从而有效提高图文内容的易读性。

可选的，所述原始流程图内容包括多个原始图形的形状和所述多个原始图形内的文本内容；所述处理器701还用于：

从流程图数据库中查找与第一原始图形的形状的相似度高于预设阈值的目标图形，所述第一原始图形为所述多个原始图形中的任意一个；

将所述目标图形的形状确定为所述第一原始图形的修正后的形状；

在所述第一原始图形的修正后的形状中显示所述第一原始图形中的文本内容。

在本申请实施例中，针对流程图类型的内容确定修正后的内容的具体实现方式可以是：从流程图数据库中查找与原始图形形状的相似度高于预设阈值的第一图形（比如主讲人员在电子白板上绘制的流程图中的原始图形1与流程图图库中的菱形的相似度为90％、原始图形2与流程图图库中的矩形的相似度为67％、与流程图图库中的平行四边形的相似度为95％，而预设阈值为80％，则服务器确定原始图形1为菱形，原始图形2为平行四边形），再基于已根据流程图图库确定的标准图形（如菱形和平行四边形）预测与原始图形内的文本内容相适配的修正后的流程图内容（比如可以在用标准图形对原始图形进行替换后，将原始图形中的文字放入替换后的标准图形中进行自动适配，得到最佳的文本位置）。本方案能够有效地修正流程图类型的原始文本内容，提高图文内容的易读性。

可选的，所述处理器701还用于：

基于所述第一参会人员的声音数据信息分析第一文本内容；

将文字影像信息和所述第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度；

将所述原始文本内容的中心位置与预设区域的中心位置进行比较，确定所述原始文本内容的第二偏离度；

根据所述第一偏离度和所述第二偏离度对所述原始文本内容进行修正，得到所述修正后的文本内容。

在本申请实施例中，针对纯文本类型、公式类型或者是二者组合类型的内容确定修正后的内容的具体实现方式可以是：先通过主讲人员输出的语音生成第一文本内容，再将已经主讲人员绘制于电子白板上的文字影像信息和第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度（如主讲人员通过声音数据信息体现出来正在讲述的内容（即第一文本内容）是“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（-x）=f（x）]，则称f（x）是D（f）上的奇函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于y轴”），而文字影像信息体现出来的内容为“设函数f（x）的定义域D（f）关于原点对称（即若x∈D（f），则必有- x∈D（f）），都有f（-x）=-f（x）[或f（x）=f（x）]，则称f（x）是D（f）上的偶函数（或偶函数）。奇函数的图像对称于坐标原点，偶函数的图像对称于x轴”，此时服务器可以通过文字影像信息与声音数据信息中内容的差异确定文字影像信息中缺失的内容（即确定第一偏离度），再确定原始文本内容的中心位置与预设区域的中心位置的具体偏差（即确定第二偏差度），综合第一偏离度与第二偏离度得到修正后的文本内容，本申请能够有效地修正纯文本类型、公式类型或者是二者组合类型的原始文本内容，提高文本内容的易读性。

可选的，所述处理器701还用于：

获取所述其他参会人员的行为信息，其中，所述行为信息包括语言信息、动作姿态信息和面部表情中的至少一项或多项；

根据所述行为信息判断所述第一参会人员讲述的所述原始图文内容是否不清楚和/或不规范；

若所述第一参会人员讲述的所述原始图文内容不清楚和/或不规范，则向所述第一参会人员输出提醒消息，其中，所述提醒消息用于提示所述第一参会人员针对所述不清楚和/或不规范的所述原始图文内容重新解释。

在本申请实施例中，在得到修正后的图文内容之后，服务器还可以采集参与人的语言信息和/或动作信息，如服务器可以通过参会人员在讨论区发送的针对主讲人讲述的某一段内容表示有疑问或者没看懂或者没看清的文字反馈、或者是参会人员的面部表情以及动作姿态，来确定原始图文内容不清楚、不规范的问题是否影响了参会人员对该部分内容的理解，从而使得服务器确定是否需要弹框提醒主讲人针对某一段内容重新进行解释。通过本方案能够提高参会人员的会议体验感，提高参会人员对会议内容理解的准确度。

可选的，所述处理器701还用于：

根据所述行为信息对所述其他参会人员的体验程度进行评分；

若所述其他参会人员的体验程度的基础分数小于预设阈值，则执行上述向所述第一参会人员输出提醒消息的步骤。

在本申请实施例中，针对主讲人员讲述的原始图文内容是否不清楚和/或不规范的问题，服务器可以通过获取参会人员的语言信息和/或动作信息对参会人员的体验感进行打分，具体可以通过基础分数来体现，该基础分数用于表征主讲人员讲述的图文内容是否清楚（或规范）对参会人员的影响程度，比如，若服务器综合参会人员的语言信息和/或动作信息后，确定出参会人员的体验感的基础分数小于预设阈值（如服务器获取到共有5人参与此次云会议，其中，参会人员1与参会人员2对于主讲人讲述的图文内容的反馈为面部表情痛苦、眉头紧锁，且在评论区针对主讲人员讲述的图文内容提出疑问，通过上述参会人员的行为信息确定出参会人员的体验感的基础分数为3分，而预设阈值为6分，由于针对主讲人员讲述的内容有异议的人数虽不多但参与会议的人员的整体基数较小），则此时服务器可以弹框提示主讲人员针对有疑问的参会人员的需求重新讲述某段内容。通过本方案中服务器基于参会人员体验感的基础分数来确定是否需要重新为参会人员讲述某段图文内容，能够提高参会人员的体验感，使得该操作更加准确。

本申请还提供了一种算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在至少一个处理器上运行时，实现前述的图文的修正方法，例如图3所述的方法。

本申请还提供了一种计算机程序产品，该计算机程序产品包括计算机指令，在被计算设备执行时，实现前述的图文的修正方法，例如图3所述的方法。

本申请实施例中，“举例来说”或者“比如”等词用于表示作例子、例证或说明。本申请中被描述为“举例来说”或者“比如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言，使用“举例来说”或者“比如”等词旨在以具体方式呈现相关概念。

本申请中实施例提到的“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“以下至少一项(个)”或其类似表达，是指的这些项中的任意组合，包括单项（个）或复数项（个）的任意组合。例如，a、b、或c中的至少一项（个），可以表示：a、b、c、（a和b）、（a和c）、（b和c）、或（a和b和c），其中a、b、c可以是单个，也可以是多个。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A、同时存在A和B、单独存在B这三种情况，其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。

以及，除非有相反的说明，本申请实施例使用“第一”、“第二”等序数词是用于对多个对象进行区分，不用于限定多个对象的顺序、时序、优先级或者重要程度。例如，第一设备和第二设备，只是为了便于描述，而并不是表示这第一设备和第二设备的结构、重要程度等的不同，在某些实施例中，第一设备和第二设备还可以是同样的设备。

上述实施例中所用，根据上下文，术语“当……时”可以被解释为意思是“如果……”或“在……后”或“响应于确定……”或“响应于检测到……”。以上所述仅为本申请的可选实施例，并不用以限制本申请，凡在本申请的构思和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (6)

1.一种图文的修正方法，其特征在于，所述方法包括：

获取云空间中的原始图文内容，所述原始图文内容包括云会议过程中第一参会人员板书的共享信息，所述共享信息用于供参与所述云会议的其他参会人员观看，所述原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项；

基于所述原始图文内容确定修正后的图文内容；

向所述其他参会人员输出所述修正后的图文内容；

所述基于所述原始图文内容确定修正后的图文内容，包括：

基于所述第一参会人员的声音数据信息分析第一文本内容；

将文字影像信息和所述第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度；

将所述原始文本内容的中心位置与预设区域的中心位置进行比较，确定所述原始文本内容的第二偏离度；

根据所述第一偏离度和所述第二偏离度对所述原始文本内容进行修正，得到所述修正后的文本内容。

2.根据权利要求1所述的方法，其特征在于，所述基于所述原始图文内容确定修正后的图文内容之后，还包括：

获取所述其他参会人员的行为信息，其中，所述行为信息包括语言信息、动作姿态信息和面部表情中的至少一项或多项；

根据所述行为信息判断所述第一参会人员讲述的所述原始图文内容是否不清楚和/或不规范；

若所述第一参会人员讲述的所述原始图文内容不清楚和/或不规范，则向所述第一参会人员输出提醒消息，其中，所述提醒消息用于提示所述第一参会人员针对所述不清楚和/或不规范的所述原始图文内容重新解释。

3.根据权利要求2所述的方法，其特征在于，所述根据所述行为信息判断所述第一参会人员讲述的所述原始图文内容是否不清楚和/或不规范，包括：

根据所述行为信息对所述其他参会人员的体验程度进行评分；

若所述其他参会人员的体验程度的基础分数小于预设阈值，则执行上述向所述第一参会人员输出提醒消息的步骤。

4.一种图文的修正装置，其特征在于，包括获取单元、确定单元和输出单元，其中：

所述获取单元，用于获取云空间中的原始图文内容，所述原始图文内容包括云会议过程中第一参会人员板书的共享信息，所述共享信息用于供参与所述云会议的其他参会人员观看，所述原始图文内容包括原始流程图内容、原始文本内容和原始公式内容中的一项或多项；

所述确定单元，用于基于所述原始图文内容确定修正后的图文内容；

所述输出单元，用于向所述其他参会人员输出所述修正后的图文内容；

在所述基于所述原始图文内容确定修正后的图文内容方面，所述确定单元具体用于：

基于所述第一参会人员的声音数据信息分析第一文本内容；

将文字影像信息和所述第一文本内容输入到预测模型中，得到原始文本内容的第一偏离度；

将所述原始文本内容的中心位置与预设区域的中心位置进行比较，确定所述原始文本内容的第二偏离度；

根据所述第一偏离度和所述第二偏离度对所述原始文本内容进行修正，得到所述修正后的文本内容。

5.一种图文的修正设备，其特征在于，所述设备包括处理器和存储器，所述存储器用于存储计算机指令，所述处理器用于调用所述计算机指令，以实现权利要求1-3中任一项所述的方法。

6.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述指令在至少一个处理器上运行时，实现如权利要求1-3中任一项所述的方法。

Images