WO2020114114A1

WO2020114114A1 - 多媒体协议的内容确认方法及装置、电子设备

Info

Publication number: WO2020114114A1
Application number: PCT/CN2019/112186
Authority: WO
Inventors: 栗志果
Original assignee: 阿里巴巴集团控股有限公司
Priority date: 2018-12-05
Filing date: 2019-10-21
Publication date: 2020-06-11
Also published as: TWI710988B; TW202022745A; CN110048995A; CN110048995B

Abstract

本说明书一个或多个实施例提供一种多媒体协议的内容确认方法及装置、电子设备，应用于区块链节点，该方法包括：获取协议参与方提供的视频或音频形式的第一多媒体数据，该第一多媒体数据中包含用于表征协议内容的第一信息和用于表征该协议参与方认可该协议内容的第二信息；调用智能合约，该智能合约被用于识别该第一信息表征的协议内容中包含的特征信息，并向该协议参与方输出对该特征信息的额外确认请求；获取该协议参与方针对该额外确认请求返回的视频或音频形式的第二多媒体数据，该第二多媒体数据中包含对该特征信息的额外确认信息；将该第一多媒体数据和该第二多媒体数据发布至区块链，以记录为该协议参与方签订的多媒体协议。

Description

多媒体协议的内容确认方法及装置、电子设备

技术领域

本说明书一个或多个实施例涉及区块链技术领域，尤其涉及一种多媒体协议的内容确认方法及装置、电子设备。

背景技术

在相关技术中，用户有时会通过口头约定形成协议，但由于无法形成可追溯的证据，使得最终是否履约或履约程度如何，往往取决于用户自身的约束。因此，相关技术中可以针对用户希望约定的协议内容用文字形式进行表达，并由用户对文字内容进行签名确认，即可形成可追溯的证据，以约束用户的履约行为。

发明内容

有鉴于此，本说明书一个或多个实施例提供一种多媒体协议的内容确认方法及装置、电子设备。

为实现上述目的，本说明书一个或多个实施例提供技术方案如下：

根据本说明书一个或多个实施例的第一方面，提出了一种多媒体协议的内容确认方法，应用于区块链节点，所述方法包括：

获取协议参与方提供的视频或音频形式的第一多媒体数据，所述第一多媒体数据中包含用于表征协议内容的第一信息和用于表征所述协议参与方认可所述协议内容的第二信息；

调用智能合约，所述智能合约被用于识别所述第一信息表征的协议内容中包含的特征信息，并向所述协议参与方输出对所述特征信息的额外确认请求；

获取所述协议参与方针对所述额外确认请求返回的视频或音频形式的第二多媒体数据，所述第二多媒体数据中包含对所述特征信息的额外确认信息；

将所述第一多媒体数据和所述第二多媒体数据发布至区块链，以记录为所述协议参与方签订的多媒体协议。

根据本说明书一个或多个实施例的第二方面，提出了一种多媒体协议的内容确认装置，应用于区块链节点，所述装置包括：

第一获取单元，获取协议参与方提供的视频或音频形式的第一多媒体数据，所述第一多媒体数据中包含用于表征协议内容的第一信息和用于表征所述协议参与方认可所述协议内容的第二信息；

第一调用单元，调用智能合约，所述智能合约被用于识别所述第一信息表征的协议内容中包含的特征信息，并向所述协议参与方输出对所述特征信息的额外确认请求；

第二获取单元，获取所述协议参与方针对所述额外确认请求返回的视频或音频形式的第二多媒体数据，所述第二多媒体数据中包含对所述特征信息的额外确认信息；

发布单元，将所述第一多媒体数据和所述第二多媒体数据发布至区块链，以记录为所述协议参与方签订的多媒体协议。

根据本说明书一个或多个实施例的第三方面，提出了一种电子设备，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器通过运行所述可执行指令以实现如上述实施例中所述的方法。

附图说明

图1是一示例性实施例提供的一种多媒体协议的内容确认方法的流程图。

图2是一示例性实施例提供的一种实施实人认证的示意图。

图3是一示例性实施例提供的一种签订多媒体协议的示意图。

图4是一示例性实施例提供的另一种签订多媒体协议的示意图。

图5是一示例性实施例提供的一种防口误处理的示意图。

图6是一示例性实施例提供的又一种签订多媒体协议的示意图。

图7是一示例性实施例提供的另一种防口误处理的示意图。

图8是一示例性实施例提供的一种设备的结构示意图。

图9是一示例性实施例提供的一种多媒体协议的内容确认装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书一个或多个实施例相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本说明书一个或多个实施例的一些方面相一致的装置和方法的例子。

需要说明的是：在其他实施例中并不一定按照本说明书示出和描述的顺序来执行相应方法的步骤。在一些其他实施例中，其方法所包括的步骤可以比本说明书所描述的更多或更少。此外，本说明书中所描述的单个步骤，在其他实施例中可能被分解为多个步骤进行描述；而本说明书中所描述的多个步骤，在其他实施例中也可能被合并为单个步骤进行描述。

图1是一示例性实施例提供的一种多媒体协议的内容确认方法的流程图。如图1所示，该方法应用于区块链节点，可以包括以下步骤：

步骤102，获取协议参与方提供的视频或音频形式的第一多媒体数据，所述第一多媒体数据中包含用于表征协议内容的第一信息和用于表征所述协议参与方认可所述协议内容的第二信息。

在一实施例中，通过在电子设备上安装、运行区块链的客户端，可以将该电子设备配置为区块链网络中的区块链节点，比如该电子设备可以包括服务器、PC、平板电脑、手机等各种类型；换言之，区块链节点可以承载于任意形式的电子设备上，本说明书并不对此进行限制。

在一实施例中，第一信息的内容可以为协议参与方读出协议内容的视频片段或音频片段；或者，第一信息的内容可以为协议参与方手持印制有协议内容的文本或展示有协议内容的电子设备的视频片段；或者，第一信息可以通过其他方式表征协议内容，本说明书并不对此进行限制。

在一实施例中，第二信息的内容可以为协议参与方说出类似于“我同意”、“我确认”、“我认可”或类似的语句；或者，第二信息的内容可以为协议参与方做出表征“认可”的动作，比如点头、伸出大拇指、微笑等；或者，第二信息可以通过其他方式表征“认可”的含义，本说明书并不对此进行限制。

在一实施例中，由于第一多媒体数据中通过第一信息表征了协议内容、通过第二信息表征了协议参与方对协议内容的认可态度，使得本说明书中的第一多媒体数据实际上已经实现了相关技术中的文本协议所需实现的功能，且协议参与方在本说明书的技术方案中无需具体形成文本内容，尤其是当涉及到多个协议参与方时，多个协议参与方不必须前往同一地点签订协议，从而在保证协议有效性的同时，极大地简化了协议参与方的操作、提升了协议签订效率。

在一实施例中，如果存在多个协议参与方，可能存在多种情形：例如，多个协议参与方可以分别使用不同的电子设备，每一协议参与方可以分别通过自己使用的电子设备采集并上传第一多媒体数据；再例如，多个协议参与方可以处于同一地点，这些协议参与方可以共用一台电子设备，比如轮流通过该电子设备采集并上传第一多媒体数据，或者由电子设备同时对这些协议参与方进行第一多媒体数据的采集和上传；当然，还可能存在其他情形，本说明书并不对此进行限制。

在一实施例中，区块链节点可以调用智能合约，所述智能合约被用于验证所述第一信息所表征的协议内容是否合法有效。例如，区块链节点可以分析第一信息所表征的协议内容、将该协议内容提取为文本信息，并将该文本信息提供至智能合约，使得智能合约可以对第一信息所表征的协议内容进行分析，比如是否命中敏感词、是否表达了非法语义等，本说明书并不对此进行限制。当协议内容被验证为合法有效时，允许区块链节点实施其他操作；当协议内容被验证为非法或无效时，可以将上述的第一多媒体数据判定为无效协议，还可以对第一多媒体数据添加无效标记或阻止该第一多媒体数据生效。

步骤104，调用智能合约，所述智能合约被用于识别所述第一信息表征的协议内容中包含的特征信息，并向所述协议参与方输出对所述特征信息的额外确认请求。

在一实施例中，所述特征信息可以包括：符合预定义的易口误规则的信息。比如某一词汇存在发音相同或相近但表达的含义不同的情况时，可以判定为符合上述的易口误规则；再比如对于一些关键的人名(如租房协议中的房东、租客)、地点名称(如租房协议中的房间地址)、数字(如租金、日期)等，从而避免由于口音变化、声调高低等方式造成误解。

在一实施例中，可以预先定义符合上述易口误规则的关键词库，并通过对第一信息进行匹配识别，确定第一信息中匹配的关键词，以作为上述的特征信息。

在一实施例中，可以通过对第一信息进行语义识别与分析，以确定出符合上述易口误规则的信息，比如上述的人名、地点名称、数字等，以作为上述的特征信息。

步骤106，获取所述协议参与方针对所述额外确认请求返回的视频或音频形式的第二多媒体数据，所述第二多媒体数据中包含对所述特征信息的额外确认信息。

在一实施例中，当第二多媒体数据包含对特征信息的额外确认信息时，相当于协议参与方对上述第一信息中的特征信息予以再次确认，从而降低协议参与方由于口误、口音、音调变化等原因而造成协议内容不清楚、不明确、存在漏洞等问题，以便于维护协议参与方的利益。

在一实施例中，所述第一多媒体数据与所述第二多媒体数据中可以分别采用不同语言对所述特征信息予以确认。例如，第一多媒体信息中可以采用中文对包含特征信息在内的第一信息进行表达，而第二多媒体数据中可以采用英文对特征信息进行确认。通过采用不同语音对相同的特征信息进行确认，可以降低协议参与方因口误、口音、音调变化等原因而造成协议内容不清楚、不明确、存在漏洞等的概率，有助于维护协议参与方的利益。

在一实施例中，可以调用智能合约，所述智能合约被用于验证所述第二信息所表征的所述协议参与方对所述协议内容的认可情况和/或所述额外确认信息所表征的所述协议参与方对所述特征信息的认可情况是否有效。例如，区块链节点可以分析第二信息和额外确认信息所分别表征的认可情况，并将该认可情况提供至智能合约，使得智能合约可以对第二信息和额外确认所分别表征的认可情况进行分析，比如是否含糊不清或存在歧义、是否存在胁迫状况等，本说明书并不对此进行限制。当认可情况被验证为有效时，允许区块链节点实施其他操作；当认可情况被验证为非法或无效时，可以将上述的第一多媒体数据、第二多媒体数据判定为无效协议，还可以对第一多媒体数据、第二多媒体数据添加无效标记或阻止该视频数据生效。

在一实施例中，当存在多个协议参与方时，多个协议参与方可以对应于同一份第二多媒体数据，该第二多媒体数据包含的额外确认信息用于表征多个协议参与方对所述特征信息的认可情况。在另一实施例中，当存在多个协议参与方时，多个协议参与方分别对应于不同的第二多媒体数据，每一第二多媒体数据包含的额外确认信息用于表征相应的协议参与方对所述特征信息的认可情况。

步骤108，将所述第一多媒体数据和所述第二多媒体数据发布至区块链，以记录为所述协议参与方签订的多媒体协议。

在一实施例中，通过将第一多媒体数据和第二多媒体数据发布至区块链中，可以确保该第一多媒体数据和第二多媒体数据无法被篡改或使得对第一多媒体数据和第二多媒体数据的篡改行为可检验，且可以通过查询区块链账本而对该第一多媒体数据和第二多媒体数据进行追溯，具有极高的可靠性。

在一实施例中，可以分别生成第一多媒体数据和第二多媒体数据的数字摘要信息，比如该数字摘要信息可以为哈希值。通过将第一多媒体数据和第二多媒体数据分别对应的数字摘要信息发布至区块链中，或者进一步生成两者的数字摘要信息对应的数字摘要信息并发布至区块链中，而将第一多媒体数据和第二多媒体数据存储在本地而不上链，那么基于第一多媒体数据、第二多媒体数据与数字摘要信息之间的唯一匹配关系，可以确保第一多媒体数据和第二多媒体数据无法被篡改或使得对第一多媒体数据和第二多媒体数据的篡改行为可检验，同时可以避免对第一多媒体数据和第二多媒体数据的内容造成公开、有助于实现隐私保护。

在一实施例中，区块链节点可以获取第一多媒体数据和第二多媒体数据的签订属性，比如该签订属性可以包括以下至少之一：所述协议参与方的身份信息、所述协议参与方的所处地点、协议签订时刻等，本说明书并不对此进行限制。然后，区块链节点可以在将第一多媒体数据和第二多媒体数据发布至区块链时，还关联发布所述签订属性，使得该第一多媒体数据和第二多媒体数据所表征的协议事件具有更多维度的特征信息，有助于提升第一多媒体数据和第二多媒体数据的可信度。

在一实施例中，区块链节点可以调用智能合约，所述智能合约被用于在多个协议参与方分别对应于不同的第一多媒体数据的情况下，验证各个第一多媒体数据包含的第一信息所表征的协议内容是否一致。比如，区块链节点可以分别提取各个第一多媒体数据中的第一信息所表征的协议内容，并传递至智能合约中，以由智能合约对各个第一多媒体数据分别对应的协议内容进行比较；如果协议内容均一致，允许区块链节点实施其他操作，如果协议内容不完全一致，可以将本次生成的第一多媒体数据判定为无效协议，还可以对第一多媒体数据添加无效标记或阻止这些第一多媒体数据生效(避免基于这些第一多媒体数据形成多媒体协议)。

在一实施例中，区块链节点可以调用智能合约，所述智能合约被用于根据所述视频数据生成文字协议，并通过所述协议参与方的数据身份进行签名；然后，在将所述第一多媒体数据和所述第二多媒体数据发布至区块链时，该区块链节点还关联发布所述文字协议。

在一实施例中，本说明书中的协议可以包括单方协议，比如承诺书、遗嘱、声明等，本说明书并不对此进行限制。在一实施例中，本说明书中的协议可以包括多方协议或称为合同，比如房屋租赁合同、商品买卖合同、劳动合同等，本说明书并不对此进行限制。

为了便于理解，下面以协议签订为例，对本说明书一个或多个实施例的技术方案进行说明。图2是一示例性实施例提供的一种实施实人认证的示意图。如图2所示，假定用户A使用手机21(或其他类型的电子设备，本说明书并不对此进行限制)，该手机21上可以通过运行某一应用X的APP客户端或加载该应用X对应的网站，以向用户A提供视频协议的签订功能。在实施视频协议的签订过程中，应用X可以对用户A进行实人认证，以便于对用户A的个人真实身份进行有效管理，并准确定义相关视频协议的协议参与方(即用户A)。

在一实施例中，手机21可以通过摄像头模组对用户A进行图像采集，使得采集到的图片或视频中包含用户A的人脸图像、用户A手持有效证件(如身份证)的图像、用户A按照指令执行相应动作的图像等，以作为针对用户A的身份数据，并由手机21将身份数据上传至服务器22，使得服务器22可以基于人脸检测、人脸识别、OCR证件识别、活体检测等多种技术手段，对用户A实施实人认证。

在实人认证完成后，用户A可以基于已完成认证的身份信息，签订相应的视频协议。图3是一示例性实施例提供的一种签订多媒体协议的示意图。如图3所示，手机21可以对用户A进行多媒体数据采集，比如可以通过摄像头进行视频采集、通过麦克风进行音频采集或者同时实施音视频采集等，并确保采集得到的多媒体数据能够至少表征两方面的内容：一方面，多媒体数据需要表征所需签订的协议内容，另一方面，多媒体数据需要表征用户A认可该协议内容。

用户A可以通过多种方式形成满足上述要求的多媒体数据。例如，用户A可以在面对手机21的镜头时，说出满足上述要求的语音内容；再例如，用户A可以在面对手机21的镜头时，还将印刷有满足上述要求的内容的文本或显示有满足上述要求的内容的电子设备展示于镜头前；又例如，用户A可以同时采用上述的多种形式。

比如，用户A可以在面对手机21的镜头时，说出诸如“我承诺向XX组织捐赠100万人民币”的语音内容时，表征的协议内容可以为“用户A向XX组织捐赠100万人民币”，而“我承诺……”的句式表达了用户A对上述协议内容的认可态度，因而可以认为满足上述要求。再比如，用户A可以在面对手机21的镜头时，可以将打印有“我承诺向XX组织捐赠100万人民币”的纸张呈现于镜头前，同样满足上述要求。又比如，用户A可以在面对手机21的镜头时，可以将打印有“向XX组织捐赠100万人民币”的纸张呈现于镜头前，并说出诸如“我认可当前拍摄的协议内容”的语音内容，同样满足上述要求。

上述实施例涉及到用户A签订单方的多媒体协议，即该多媒体协议的协议参与方仅包含用户A，但该场景下并不意味着只有用户A能够出现在多媒体数据中。比如图4所示，用户A与用户B均可以出现在手机21采集的多媒体数据中，并且服务器22可以分别针对用户A和用户B进行实人认证；在实人认证通过后，用户B可以协助用户A完成多媒体采集，比如由用户B口述协议内容，并由用户A对用户B口述的协议内容予以确认，譬如用户B的口述内容可以为“由用户A向XX组织捐赠100万人民币”，而用户A可以通过诸如“我同意”等内容予以确认。

在一实施例中，服务器22可以对手机21上传的多媒体数据进行分析，以确定其包含的多媒体内容，比如上述的协议内容、用户A对该协议内容的认可情况等。然后，服务器22可以通过调用智能合约，以基于该智能合约中定义的检验规则对上述的多媒体内容进行检验；其中，检验规则可以包括以下至少之一：协议内容是否包含非法内容(比如可以匹配协议内容是否包含预设的敏感词)、协议内容是否包含无效内容(比如通过语义分析协议内容是否清楚、准确)、协议参与方是否认可协议内容(比如协议参与方是否发出表达“认可”的语音或做出表达“认可”的动作等)、协议参与方表达“认可”的状态是否正常(比如协议参与方的语调或表情是否正常、是否存在受人胁迫的情形等)等，本说明书并不对此进行限制。

图5是一示例性实施例提供的一种防口误处理的示意图。如图5所示，针对用户A签订的单方多媒体协议，服务器22在收到手机21上传的多媒体数据后，可以提取该多媒体数据包含的协议内容；然后，服务器22可以调用智能合约，将提取的协议内容提供至该智能合约，以由该智能合约检验该协议内容中是否包含易口误内容。

在一实施例中，智能合约中预先定义有易口误内容的识别逻辑，比如将协议内容与预定义的易口误关键词进行匹配，再比如将协议内容中识别出的人名、地址信息、数字等特定类型的信息作为易口误内容，又比如将协议内容中由于协议参与方的口音、音调变化等而造成含义不清的内容作为易口误内容等，本说明书并不对此进行限制。

针对识别出的易口误内容，智能合约可以指示服务器22向手机21返回相应的易口误内容确认提示。相应地，手机21可以引导用户对易口误内容进行重复确认，以采集到相应的多媒体确认数据。例如，假定协议内容为“我承诺从用户A处租用XX小区 2号楼302室，租金为每月3000元”、易口误内容为中文表达的“3000元”(比如由口音、音调变化等，可能被误解为“4000元”)，可以引导用户A用诸如英文(或其他语言)表达为“Three thousand yuan”，从而通过两种不同语言对租金数额进行确认，极大地降低了租金数额可能存在的争议。

相应地，手机21可以将采集到的多媒体确认数据上传至服务器22，由服务器22调用智能合约对该多媒体确认数据所包含的数据内容进行检验。例如，智能合约可以对多媒体确认数据包含的数据内容进行合法性检测(比如是否包含敏感词等)；再例如，智能合约可以将多媒体确认数据包含的数据内容与上述多媒体数据包含的协议内容进行比较，以确定两者是否一致。

在确认无误后，服务器22可以向区块链中发布相应的多媒体协议。例如，服务器22可以向区块链中发布一笔交易，该交易中包含图3-4中由手机21上传的多媒体数据、图6中由手机21上传的多媒体确认数据，该多媒体数据和多媒体确认数据经由用于表征用户A的数字身份的密钥进行签名，以表明该多媒体数据和多媒体确认数据为用户A参与的多媒体协议，而该交易的内容可以被记录至区块链账本中，从而实现了对该多媒体协议的存证。当然，服务器22可以仅在本地存储上述的多媒体数据和多媒体确认数据，而向区块链中发布的交易中仅包含该多媒体数据和多媒体确认数据的哈希值，一方面可以避免多媒体协议的内容被公开、有助于提升数据私密性，另一方面可以根据区块链账本中记录的哈希值对服务器22在本地存储的多媒体数据和多媒体确认数据进行验证，以避免该多媒体数据和多媒体确认数据被篡改。

上述实施例中，多媒体协议仅存在单个协议参与方，即该多媒体协议为单方多媒体协议；而在其他实施例中，多媒体协议还可以为多方多媒体协议，即存在多个协议参与方，下面针对多方多媒体协议的场景进行描述。

假定用户A与用户B均为协议参与方，即由用户A与用户B共同参与签订一项多媒体协议。如图4所示，用户A与用户B可以位于同一处，并共同使用手机21完成实人认证、多媒体数据的采集等操作。在实人认证过程中，手机21可以通过摄像头模组同时采集到包含用户A和用户B的图像，并据此针对用户A和用户B实施实人认证，其过程与图2所示的实施例类似，此处不再赘述。或者，用户A和用户B可以对手机21进行分时复用，比如首先由用户A使用手机21完成实人认证，然后换由用户B使用手机21完成实人认证，对于每个用户的实人认证过程分别与图2所示的实施例类似，此处不再赘述。

然后，可以通过手机21对用户A、用户B进行多媒体采集，以获得相应的多媒体数据。在一实施例中，手机21可以生成一份多媒体数据，该多媒体数据中包含：表征所需签订的协议内容的多媒体内容、表征用户A和用户B认可该协议内容的多媒体内容；比如，用户A可以(面对手机21的镜头)说出“我承诺将XX小区2号楼302室出租给用户B，租金为每月3000元”，而用户B可以(面对手机21的镜头)说出“我承诺从用户A处租用XX小区2号楼302室，租金为每月3000元”，那么协议内容为“用户A向用户B出租XX小区2号楼302室，租金为每月3000元”，且用户A、用户B关于“我承诺……”的句式表达了对上述协议内容的认可态度；再比如，用户A或用户B可以将打印有“用户A向用户B出租XX小区2号楼302室，租金为每月3000元”的纸张呈现于镜头前，而用户A、用户B可以分别说出诸如“我认可当前拍摄的协议内容”的语音内容。当然，多媒体内容的表达形式并不受限，只要能够表征上述两方面的含义即可。

需要指出的是：当手机21仅生成一份多媒体数据时，用户A与用户B可以同时完成多媒体数据的采集，也可以分别、依次完成采集，本说明书并不对此进行限制。

在另一实施例中，手机21可以针对用户A和用户B分别生成一份多媒体数据，对应于用户A的多媒体数据中包含：表征所需签订的协议内容的多媒体内容、表征用户A认可该协议内容的多媒体内容，对应于用户B的多媒体数据中包含：表征所需签订的协议内容的多媒体内容、表征用户B认可该协议内容的多媒体内容。对于每份多媒体数据，生成方式与图3或图4所示的实施例相类似，此处不再赘述。

当用户A与用户B参与的多方多媒体协议仅生成一份多媒体数据时，服务器22可以通过类似于图5所示的实施例，向手机21返回易口误内容确认提示，使得手机21引导用户A和用户B对协议内容中的易口误内容进行重复确认。然后，由服务器22获得手机21上传的多媒体确认数据，并调用智能合约对该多媒体确认数据中包含的数据内容进行检验，以及将手机21分别上传的多媒体数据和多媒体确认数据发布至区块链、记录为相应的多媒体协议。此处可以参考图5所示的实施例，只是对易口误内容的确认操作需要由用户A和用户B完成，此处不再赘述。

除了共用手机21之外，用户A与用户B还可以分别使用不同的电子设备，比如图6所示，用户A可以使用手机21、用户B可以使用手机23，尤其是当用户A与用户B分别处于不同地理位置时，仍然可以远程签订多媒体协议，而无需前往同一地点进行协议签订。

在一实施例中，可由任一协议参与方通过手机21向服务器22请求多媒体协议的签订功能，比如该任一协议参与方为用户A时，该用户A可以指定用户B为相关联的协议参与方，使得用户A使用的手机21(登录有用户A的账号)与用户B使用的手机23(登录有用户B的账号)之间可以实现协同，从而共同参与到同一多媒体协议的签订过程中。

手机21可以针对用户A实施实人认证，并采集用户A相关的多媒体数据，这与图3-4所示实施例的情况类似，此处不再赘述；手机23可以针对用户B实施实人认证，并采集用户B相关的多媒体数据，这与手机21的实施过程类似，此处不再赘述。

当手机21或手机23将多媒体数据上传至服务器22后，与图3所示实施例相类似的，可由服务器22对多媒体数据进行分析，然后通过调用智能合约对分析结果进行检验，比如可以针对下述方面中至少之一进行检验：协议内容是否包含非法内容、协议内容是否包含无效内容、协议参与方是否认可协议内容、协议参与方表达“认可”的状态是否正常等，此处不再赘述。

图7是一示例性实施例提供的另一种防口误处理的示意图。如图7所示，服务器22可以通过调用智能合约，以分别针对手机21上传的多媒体数据1包含的协议内容、手机23上传的多媒体数据2包含的协议内容进行检测，确定协议内容中包含的易口误内容，并分别向手机21、手机23发送易口误内容确认提示1、易口误内容确认提示2，使得手机21、手机23分别引导用户A、用户B对协议内容中的易口误内容进行重复确认。然后，由服务器22分别获得手机21、手机23上传的多媒体确认数据1、多媒体确认数据2，并调用智能合约分别对该多媒体确认数据1、多媒体确认数据2中包含的数据内容进行检验。针对用户A、用户B实施的防口误处理，均可以参考图5所示的实施例，此处不再赘述。

在一实施例中，由于用户A与用户B有可能处于不同的地理位置处，使得两者可能并不能够直接获知对方的多媒体采集情况，因而服务器22在获得一方的多媒体数据或多媒体确认数据后，可以将其传递至另一方进行查看。例如，每一协议参与方使用的电子设备上，可以展示出分别对应于各个协议参与方的视频窗口，以分别用于展示各个协议参与方使用的电子设备拍摄的视频画面；譬如，手机21、手机23上可以分别展示出两个视频窗口，以分别展示手机21和手机23拍摄的视频画面，使得用户A、用户B既可以查看到自身的视频拍摄情况，也可以查看到对方的视频拍摄情况。尤其是，通过对多媒体数据和多媒体确认数据的相互传递，使得每一协议参与方可以获知各个协议参与方的多媒体数据和多媒体确认数据，从而对多媒体数据所含的协议内容、多媒体确认数据所含的数据内容进行查看，便于发现服务器22可能不易察觉的文字陷阱、歧义、口误等情形；并且，每一协议参与方均可以具备终止签订的权限，使得任一协议参与方对其他协议参与方的多媒体数据或多媒体确认数据存在异议、且其他协议参与方拒绝修改时，均可以终止协议签订，以保障协议参与方的权益。

然后，服务器22可以将手机21分别上传的多媒体数据1和多媒体确认数据1、手机23分别上传的多媒体数据2和多媒体确认数据2发布至区块链，从而记录为用户A与用户B之间签订的多媒体协议。或者，可以将多媒体数据1、多媒体确认数据1、多媒体数据2和多媒体确认数据2分别对应的四个哈希值(或者由四个哈希值再次计算得到的一个哈希值)发布至区块链，而将多媒体数据1、多媒体确认数据1、多媒体数据2和多媒体确认数据2存储于服务器22处并避免上链，有助于实现隐私保护。

需要指出的是：虽然在上述实施例中，涉及到多方协议时以用户A与用户B之间的协议签订场景进行举例，但本说明书的技术方案同样可以应用于更多数量的协议参与方之间，以实现三方或更多方的协议签订，本说明书并不对此进行限制。

图8是一示例性实施例提供的一种设备的示意结构图。请参考图8，在硬件层面，该设备包括处理器802、内部总线804、网络接口806、内存808以及非易失性存储器810，当然还可能包括其他业务所需要的硬件。处理器802从非易失性存储器810中读取对应的计算机程序到内存808中然后运行，在逻辑层面上形成多媒体协议的内容确认装置。当然，除了软件实现方式之外，本说明书一个或多个实施例并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。

请参考图9，在软件实施方式中，该多媒体协议的内容确认装置应用于区块链节点，可以包括：

第一获取单元91，获取协议参与方提供的视频或音频形式的第一多媒体数据，所述第一多媒体数据中包含用于表征协议内容的第一信息和用于表征所述协议参与方认可所述协议内容的第二信息；

第一调用单元92，调用智能合约，所述智能合约被用于识别所述第一信息表征的协议内容中包含的特征信息，并向所述协议参与方输出对所述特征信息的额外确认请求；

第二获取单元93，获取所述协议参与方针对所述额外确认请求返回的视频或音频形式的第二多媒体数据，所述第二多媒体数据中包含对所述特征信息的额外确认信息；

发布单元94，将所述第一多媒体数据和所述第二多媒体数据发布至区块链，以记录为所述协议参与方签订的多媒体协议。

可选的，所述特征信息包括：符合预定义的易口误规则的信息。

可选的，所述第一多媒体数据与所述第二多媒体数据中分别采用不同语言对所述特征信息予以确认。

可选的，还包括：

第二调用单元95，调用智能合约，所述智能合约被用于验证所述第一信息所表征的协议内容是否合法有效。

可选的，还包括：

第三调用单元96，调用智能合约，所述智能合约被用于验证所述第二信息所表征的所述协议参与方对所述协议内容的认可情况和/或所述额外确认信息所表征的所述协议参与方对所述特征信息的认可情况是否有效。

可选的，所述多媒体协议为单方协议，存在一个协议参与方；或者，所述多媒体协议为多方协议，存在多个协议参与方。

可选的，当存在多个协议参与方时，多个协议参与方对应于相同的第一多媒体数据、第二多媒体数据，该第一多媒体数据包含的第二信息用于表征多个协议参与方对所述协议内容的认可情况，所述第二多媒体数据包含的额外确认信息用于表征多个协议参与方对所述特征信息的认可情况；

或者，当存在多个协议参与方时，多个协议参与方分别对应于不同的第一多媒体数据、第二多媒体数据，每个第一多媒体数据包含的第二信息用于表征相应的协议参与方对所述协议内容的认可情况，每个第二多媒体数据包含的额外确认信息用于表征相应的协议参与方对所述特征信息的认可情况。

可选的，还包括：

第四调用单元97，调用智能合约，所述智能合约被用于在多个协议参与方分别对应于不同的第一多媒体数据的情况下，验证各个第一多媒体数据包含的第一信息所表征的协议内容是否一致。

可选的，还包括：

第五调用单元98，调用智能合约，所述智能合约被用于根据所述视频数据生成文字协议，并通过所述协议参与方的数据身份进行签名；

所述发布单元94在将所述第一多媒体数据和所述第二多媒体数据发布至区块链时，还关联发布所述文字协议。

上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机，计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。

本说明书提出了一种计算机可读介质，其上存储有计算机指令，该指令被处理器执行时实现本说明书的技术方案，比如上述任一实施例的多媒体协议的内容确认方法，此处不再一一赘述。

在一个典型的配置中，计算机包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flashRAM)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带、磁盘存储、量子存储器、基于石墨烯的存储介质或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。

在本说明书一个或多个实施例使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。

应当理解，尽管在本说明书一个或多个实施例可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书一个或多个实施例范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。

以上所述仅为本说明书一个或多个实施例的较佳实施例而已，并不用以限制本说明书一个或多个实施例，凡在本说明书一个或多个实施例的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本说明书一个或多个实施例保护的范围之内。

Claims

一种多媒体协议的内容确认方法，应用于区块链节点，所述方法包括：

获取协议参与方提供的视频或音频形式的第一多媒体数据，所述第一多媒体数据中包含用于表征协议内容的第一信息和用于表征所述协议参与方认可所述协议内容的第二信息；

调用智能合约，所述智能合约被用于识别所述第一信息表征的协议内容中包含的特征信息，并向所述协议参与方输出对所述特征信息的额外确认请求；

获取所述协议参与方针对所述额外确认请求返回的视频或音频形式的第二多媒体数据，所述第二多媒体数据中包含对所述特征信息的额外确认信息；

将所述第一多媒体数据和所述第二多媒体数据发布至区块链，以记录为所述协议参与方签订的多媒体协议。
根据权利要求1所述的方法，所述特征信息包括：符合预定义的易口误规则的信息。
根据权利要求1所述的方法，所述第一多媒体数据与所述第二多媒体数据中分别采用不同语言对所述特征信息予以确认。
根据权利要求1所述的方法，还包括：

调用智能合约，所述智能合约被用于验证所述第一信息所表征的协议内容是否合法有效。
根据权利要求1所述的方法，还包括：

调用智能合约，所述智能合约被用于验证所述第二信息所表征的所述协议参与方对所述协议内容的认可情况和/或所述额外确认信息所表征的所述协议参与方对所述特征信息的认可情况是否有效。
根据权利要求1所述的方法，所述多媒体协议为单方协议，存在一个协议参与方；或者，所述多媒体协议为多方协议，存在多个协议参与方。
根据权利要求1所述的方法，

当存在多个协议参与方时，多个协议参与方对应于相同的第一多媒体数据、第二多媒体数据，该第一多媒体数据包含的第二信息用于表征多个协议参与方对所述协议内容的认可情况，所述第二多媒体数据包含的额外确认信息用于表征多个协议参与方对所述特征信息的认可情况；

或者，当存在多个协议参与方时，多个协议参与方分别对应于不同的第一多媒体数据、第二多媒体数据，每个第一多媒体数据包含的第二信息用于表征相应的协议参与方对所述协议内容的认可情况，每个第二多媒体数据包含的额外确认信息用于表征相应的协议参与方对所述特征信息的认可情况。
根据权利要求7所述的方法，还包括：

调用智能合约，所述智能合约被用于在多个协议参与方分别对应于不同的第一多媒体数据的情况下，验证各个第一多媒体数据包含的第一信息所表征的协议内容是否一致。
根据权利要求1所述的方法，还包括：

调用智能合约，所述智能合约被用于根据所述视频数据生成文字协议，并通过所述协议参与方的数据身份进行签名；

在将所述第一多媒体数据和所述第二多媒体数据发布至区块链时，还关联发布所述文字协议。
一种多媒体协议的内容确认装置，应用于区块链节点，所述装置包括：

第一获取单元，获取协议参与方提供的视频或音频形式的第一多媒体数据，所述第一多媒体数据中包含用于表征协议内容的第一信息和用于表征所述协议参与方认可所述协议内容的第二信息；

第一调用单元，调用智能合约，所述智能合约被用于识别所述第一信息表征的协议内容中包含的特征信息，并向所述协议参与方输出对所述特征信息的额外确认请求；

第二获取单元，获取所述协议参与方针对所述额外确认请求返回的视频或音频形式的第二多媒体数据，所述第二多媒体数据中包含对所述特征信息的额外确认信息；

发布单元，将所述第一多媒体数据和所述第二多媒体数据发布至区块链，以记录为所述协议参与方签订的多媒体协议。
根据权利要求10所述的装置，所述特征信息包括：符合预定义的易口误规则的信息。
根据权利要求10所述的装置，所述第一多媒体数据与所述第二多媒体数据中分别采用不同语言对所述特征信息予以确认。
根据权利要求10所述的装置，还包括：

第二调用单元，调用智能合约，所述智能合约被用于验证所述第一信息所表征的协议内容是否合法有效。
根据权利要求10所述的装置，还包括：

第三调用单元，调用智能合约，所述智能合约被用于验证所述第二信息所表征的所述协议参与方对所述协议内容的认可情况和/或所述额外确认信息所表征的所述协议参与方对所述特征信息的认可情况是否有效。
根据权利要求10所述的装置，所述多媒体协议为单方协议，存在一个协议参与方；或者，所述多媒体协议为多方协议，存在多个协议参与方。
根据权利要求10所述的装置，

当存在多个协议参与方时，多个协议参与方对应于相同的第一多媒体数据、第二多媒体数据，该第一多媒体数据包含的第二信息用于表征多个协议参与方对所述协议内容的认可情况，所述第二多媒体数据包含的额外确认信息用于表征多个协议参与方对所述特征信息的认可情况；

或者，当存在多个协议参与方时，多个协议参与方分别对应于不同的第一多媒体数据、第二多媒体数据，每个第一多媒体数据包含的第二信息用于表征相应的协议参与方对所述协议内容的认可情况，每个第二多媒体数据包含的额外确认信息用于表征相应的协议参与方对所述特征信息的认可情况。
根据权利要求16所述的装置，还包括：

第四调用单元，调用智能合约，所述智能合约被用于在多个协议参与方分别对应于不同的第一多媒体数据的情况下，验证各个第一多媒体数据包含的第一信息所表征的协议内容是否一致。
根据权利要求10所述的装置，还包括：

第五调用单元，调用智能合约，所述智能合约被用于根据所述视频数据生成文字协议，并通过所述协议参与方的数据身份进行签名；

所述发布单元在将所述第一多媒体数据和所述第二多媒体数据发布至区块链时，还关联发布所述文字协议。
一种电子设备，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器通过运行所述可执行指令以实现如权利要求1-9中任一项所述的方法。