CN113821685A - 面向物联网设备的数据处理方法、装置及存储介质 - Google Patents

Abstract

本发明提供一种面向物联网设备的数据处理方法、装置及存储介质，其中，面向物联网设备的数据处理方法包括：获取视频片段以及数据信息，其中，所述数据信息通过物联网设备进行采集；确定所述数据信息的第一时间戳，以及确定所述视频片段的第二时间戳；基于所述第一时间戳与所述第二时间戳相关联，根据所述数据信息与所述视频片段得到多模态数据信息。通过本发明提供的面向物联网设备的数据处理方法，可以为用户的多模态信息取用带来便捷。

Description

面向物联网设备的数据处理方法、装置及存储介质

技术领域

本发明涉及数据处理技术领域，尤其涉及一种面向物联网设备的数据处理方法、装置及存储介质。

背景技术

相关技术可知，在工业或生活场景中进行视频数据采集时，周围往往存在场景信息无法直接采集至视频文件中，导致后期的查看及其检索都很不方便，甚至无法进行。这些场景信息可以通过物联网设备进行采集，譬如通过近场通信（Near Field Communication，又称NFC）进行数据识别、全球定位系统（Global Positioning System ，又称GPS）进行定位并记录视频拍摄地的地理位置信息等。

目前，物联网设备采集的场景信息并没有和视频数据进行有效关联，其独立存放在设备本地，往往形成数据孤岛，不便为用户取用。

发明内容

本发明提供一种面向物联网设备的数据处理方法、装置及存储介质，用以解决现有技术中物联网设备采集的信息无法与视频数据关联的缺陷，实现将物联网采集的数据信息与相应的视频数据相结合，以得到多模态数据信息，为用户的多模态信息取用带来便捷。

本发明提供一种面向物联网设备的数据处理方法，其特征在于，所述方法包括：获取视频片段以及数据信息，其中，所述数据信息通过物联网设备进行采集；确定所述数据信息的第一时间戳，以及确定所述视频片段的第二时间戳；基于所述第一时间戳与所述第二时间戳相关联，根据所述数据信息与所述视频片段得到多模态数据信息。

根据本发明提供的一种面向物联网设备的数据处理方法，其特征在于，所述根据所述数据信息与所述视频片段得到多模态数据信息，包括：基于通信传输，将所述数据信息和所述视频片段发送至云端处理系统；接收所述云端处理系统发送的所述多模态数据信息，其中，所述多模态数据信息通过所述云端处理系统对所述数据信息与所述视频片段进行整合而得到。

根据本发明提供的一种面向物联网设备的数据处理方法，其特征在于，所述面向物联网设备的数据处理方法还包括：基于所述第一时间戳，确定所述数据信息在不同时刻的特征标签；基于时间顺序，将所述特征标签添加至所述多模态数据信息。

根据本发明提供的一种面向物联网设备的数据处理方法，其特征在于，所述面向物联网设备的数据处理方法还包括：创建展示列表；将所述特征标签以及与所述特征标签对应的时间信息展示于所述展示列表。

根据本发明提供的一种面向物联网设备的数据处理方法，其特征在于，所述数据信息通过以下方式获取：响应于采集所述视频片段，实时获取所述数据信息，其中，所述数据信息为基于所述物联网设备同步采集的与所述视频片段对应的信息。

本发明还提供一种面向物联网设备的数据处理装置，其特征在于，所述装置包括：获取模块，用于获取视频片段以及数据信息，其中，所述数据信息通过物联网设备进行采集；确定模块，用于确定所述数据信息的第一时间戳，以及确定所述视频片段的第二时间戳；处理模块，用于基于所述第一时间戳与所述第二时间戳相关联，根据所述数据信息与所述视频片段得到多模态数据信息。

本发明还提供一种面向物联网设备的数据处理装置，其特征在于，所述处理模块采用以下方式根据所述数据信息与所述视频片段得到多模态数据信息：

基于通信传输，将所述数据信息和所述视频片段发送至云端处理系统；接收所述云端处理系统发送的所述多模态数据信息，其中，所述多模态数据信息通过所述云端处理系统对所述数据信息与所述视频片段进行整合而得到。

本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述面向物联网设备的数据处理方法的步骤。

本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述面向物联网设备的数据处理方法的步骤。

本发明还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述面向物联网设备的数据处理方法的步骤。

本发明提供的面向物联网设备的数据处理方法、装置、电子设备及存储介质，可以基于时间戳，将物联网设备采集的数据信息与视频片段相关联，并根据数据信息与视频片段得到多模态数据信息，进而为用户的多模态信息取用带来便捷。

附图说明

为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明提供的面向物联网设备的数据处理方法的流程示意图之一；

图2是本发明提供的根据数据信息与视频片段得到多模态数据信息的流程示意图之一；

图3是本发明提供的面向物联网设备的数据处理方法的流程示意图之二；

图4是本发明提供的面向物联网设备的数据处理方法的流程示意图之三；

图5是本发明提供的面向物联网设备的数据处理装置的结构示意图；

图6是本发明提供的电子设备的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

相关技术可知，物联网设备采集场景信息没有与视频数据进行有效关联会产生下述缺点：

（1）、数据信息不方便使用，且无法交叉进行信息搜索，进而无法直接快速查看信息。

（2）、物联网设备采集的信息会产生数据孤岛，并且，在后期将物联网设备采集的信息与相应视频数据进行整合时，往往采用人工方式，其效率低下。进一步的，基于人工方式整合信息时，容易出现错误，且存在信息被篡改的可能。

（3）、物联网设备采集的信息独立使用意义不大，进而导致该部分信息在后期呈闲置状态。

本发明提供的面向物联网设备的数据处理方法可以基于时间戳，将物联网设备采集的数据信息与视频片段相关联，并根据数据信息与视频片段得到多模态数据信息，进而为用户的多模态信息取用带来便捷。

本发明将结合下述实施例对面向物联网设备的数据处理方法的过程进行说明。

图1是本发明提供的面向物联网设备的数据处理方法的流程示意图之一。

在本发明一示例性实施例中，如图1所示，面向物联网设备的数据处理方法可以包括步骤110至步骤130，下面将分别介绍各步骤。

在步骤110中，获取视频片段以及数据信息，其中，数据信息通过物联网设备进行采集。

在一种实施方式中，可以获取视频片段以及数据信息。其中，视频片段可以是预先采集的，数据信息也可以是预先采集的。数据信息可以通过物联网设备进行采集。在一示例中，数据信息可以是全球定位系统采集的关于视频片段的行进轨迹。数据信息可以超声波测厚仪采集的作业数据。数据信息还可以是基于近场通信技术获取的打卡数据信息等。在本实施例中，物联网设备可以实时采集任何需要监控、连接、互动的物体或过程，并且能够采集其声、光、热、电、力学、化学、生物、位置等各种形式的信息。其中，物联网设备可以是传感器、条形码识别装置、蓝牙设备、近场通信装置、全球定位系统或激光扫描器等。在本发明中，可以不对物联网设备作具体限定。数据信息可以是由物联网设备采集的文本信息、语音信息等，可以理解的是，数据信息是与视频片段相关的各种形式的信息，在本实施例中，可以不对数据信息的类型作具体限定。

在本发明一示例性实施例中，还可以通过以下方式获取数据信息：响应于采集视频片段，实时获取数据信息，其中，数据信息为基于物联网设备同步采集的与视频片段对应的信息。在一示例中，在进行视频片段录制的同时，可以利用视频场景周边的物联网设备同步采集与视频片段对应的数据信息。

在步骤120中，确定数据信息的第一时间戳，以及确定视频片段的第二时间戳。

时间戳是字符或编码信息的序列，用于标识何时发生特定事件，通常可以给出日期和时间，有时可以精确到几分之一秒。在一种实施例中，可以基于时间戳，确定数据信息的第一时间戳以及确定视频片段的第二时间戳。可以理解的是，第一时间戳可以表征数据信息的产生时间，第二时间戳可以表征视频片段的拍摄时间。

在步骤130中，基于第一时间戳与第二时间戳相关联，根据数据信息与视频片段得到多模态数据信息。

在一种实施例中，基于第一时间戳和第二时间戳相关联，即两者存在对应关系，可以根据数据信息与视频片段得到多模态数据信息。在一示例中，第一时间戳为2020年10月1日10时28分至2020年10月1日12时28分，第二时间戳为2020年10月1日10时28分至2020年10月1日12时20分，由于第一时间戳和第二时间戳存在时间上的重合，可以理解的是，数据信息与视频片段存在关联关系。因此，可以将数据信息与视频片段进行整合，得到多模态数据信息。在一种实施例中，可以将数据信息发送至终端，通过终端将数据信息与视频片段进行整合，以得到多模态数据信息。

需要说明的是，模态可以是指感官，多模态信息可以指包括不止一种形式感官收集到的信息，例如文本、图片、音频、视频等。多模态数据信息可以为关于某一场景的多种形式的信息集合。

可以理解的是，在本实施例中，利用物联网设备可以获取到维度更多的关于视频片段的场景信息，进而可以将单纯的视频形式的记录与其他维度的过程信息相结合，整合得到信息量更加完整的多模态数据信息。相比于人工将数据信息与视频片段进行关联而言，本发明提供的面向物联网设备的数据处理方法更具有准确性和真实性。将数据信息按时间序列完整存放，消除了数据孤岛带来的数据不可用问题。进一步的，整合后的多模态数据信息，可以便于后期检索，即基于场景中的一些对象、关键过程数据等进行某个记录内的检索或跨记录的检索，以得到关于该记录的所有信息，提高了数据检索的全面性和便捷性，让知识生成具备可行性，进而让过程记录、后期检索、知识提取、优化迭代等步骤形成闭环，从而具备整体上进化的可能。

本发明提供的面向物联网设备的数据处理方法，可以基于时间戳，将物联网设备采集的数据信息与视频片段相关联，并根据数据信息与视频片段得到多模态数据信息，进而为用户的多模态信息取用带来便捷。

下面将结合下述实施例，对根据数据信息与视频片段得到多模态数据信息的过程进行说明。

图2是本发明提供的根据数据信息与视频片段得到多模态数据信息的流程示意图之一。

在本发明一示例性实施例中，如图2所示，根据数据信息与视频片段得到多模态数据信息可以包括步骤210和步骤220，下面将分别介绍各步骤。

在步骤210中，基于通信传输，将数据信息和视频片段发送至云端处理系统。

在步骤220中，接收云端处理系统发送的多模态数据信息，其中，多模态数据信息通过云端处理系统对数据信息与视频片段进行整合而得到。

云端处理系统可以是独立于终端之外且具有数据处理功能的系统。在一种实施例中，可以基于无线传输，例如，可以通过蓝牙传输将数据信息和视频片段发送至云端处理系统，通过云端处理系统对数据信息和视频片段进行整合得到多模态数据信息。在另一种实施例中，还可以基于有线传输，例如，通过USB有线传输将数据信息和视频片段发送至云端处理系统，通过云端处理系统对数据信息和视频片段进行整合得到多模态数据信息。进一步的，可以接收云端处理系统发送的多模态数据信息。在本示例中，通过云端处理系统对数据信息和视频片段进行整合处理，可以减少终端的计算量，降低终端的运算负担，提高终端的运行速率。需要说明的是，通信传输方式可以根据实际情况或根据使用的物联网设备进行确定，在本实施例中不对通信传输方式作具体限定。

可以理解的是，将物联网设备采集的场景信息或关键性过程数据与视频片段的时间戳相关联，并整合后进行存储，可以形成一套多模态的过程记录。在应用过程中，后期可以基于场景中的一些对象、关键过程数据等进行某个记录内的检索或跨记录的多模态检索，以得到关于该记录的所有信息，提高了数据检索的全面性和便捷性。另外，也可以对多模态数据信息进一步加工总结，形成知识性数据，便于用户全面得获取信息。

为了进一步介绍本发明提供的面向物联网设备的数据处理方法，下面将结合下述实施例对面向物联网设备的数据处理方法的过程进行说明。

图3是本发明提供的面向物联网设备的数据处理方法的流程示意图之二。

在本发明一示例性实施例中，如图3所示，面向物联网设备的数据处理方法可以包括步骤310至步骤350，其中，步骤310至步骤330与步骤110至步骤130相同，其具体实施方式与有益效果参照前文，在本实施例中不再赘述，下面将详细介绍步骤340和步骤350。

在步骤340中，基于第一时间戳，确定数据信息在不同时刻的特征标签。

数据信息在不同的时间段可以具有不同的特征。在一示例中，数据信息为全球定位系统采集的关于视频片段的行进轨迹。其中，行进轨迹信息可以是由A路段、B路段和C路段构成。在应用过程中，可以基于第一时间戳，确定数据信息在不同时刻的特征标签，例如，在a时刻的特征标签为A路段，在b时刻的特征标签为B路段，在c时刻的特征标签为C路段。

在步骤350中，基于时间顺序，将特征标签添加至多模态数据信息。

在应用过程中，可以基于时间顺序，将特征标签添加在多模态数据信息中，从而方便用户直接获取多模态数据信息中不同时间段的特征标签。继续以上述实施例为例，可以基于时间顺序，将特征标签A路段、B路段和C路段分别添加至多模态数据信息的相应时刻，以方便用户直观的获取关于该多模态数据信息在不同时间段的特点，提升用户的体验感。

下面将结合图4对本发明的另一种面向物联网设备的数据处理方法的过程进行说明。

图4是本发明提供的面向物联网设备的数据处理方法的流程示意图之三。

在本发明一示例性实施例中，如图4所示，面向物联网设备的数据处理方法可以包括步骤410至步骤470，其中，步骤410至步骤450与步骤310至步骤350相同，其具体实施方式与有益效果参照前文，在本实施例中不再赘述，下面将详细介绍步骤460和步骤470。

在步骤460中，创建展示列表。

在步骤470中，将特征标签以及与特征标签对应的时间信息展示于展示列表。

在一种实施例中，可以创建展示列表，并将特征标签以及与特征标签对应的时间信息展示于展示列表。通过展示列表，可以方便用户直观获取关于该多模态数据信息的所有特征标签。在一示例中，展示列表还能够以隐藏的形式存在。在应用过程中，用户通过选取隐藏格式，可以将展示列表隐藏于显示界面，以避免展示列表的存在影响视频片段在显示界面上的展示效果。

为了进一步介绍本发明提供的面向物联网设备的数据处理方法，下面将结合下述实施例进行说明。

在一种实施方式中，以基于近场通信标签技术采集的打卡信息为例进行说明。在应用过程中，可以获取员工在公司工作的视频片段，并且获取基于近场通信设备采集的员工打卡信息，其中，视频片段可以由终端直接采集得到。可以理解的是，员工工作的视频片段可以有多条，以及员工的打卡信息也可以有多条。为了使记录员工工作的信息更加完善，可以根据时间戳，将基于终端设备采集的视频片段信息和基于近场通信设备采集的员工打卡信息进行整合处理，得到关于该员工工作的多模态数据信息。

进一步的，可以确定关于数据信息的第一时间戳以及关于视频片段的第二时间戳。基于第一时间戳和第二时间戳相关联，可以通过无线传输技术，例如通过蓝牙设备将数据信息发送至终端，并通过终端将数据信息和视频片段进行整合，得到关于该视频片段的多模态数据信息。可以理解的是，传输方式还可以是通过有线传输技术实现，例如，基于USB有线传输实现，在本实施例中不对传输方式作具体限定。在另一种实施例中，还可以通过无线传输技术，将数据信息和视频片段发送至云端处理系统，并由云端处理系统对数据信息和视频片段进行整合，得到关于该视频片段的多模态数据信息。在又一实施例中，若需要对员工工作情况进行检索，还可以输入员工工作情况的关键词，并基于关键词在多个多模态数据信息中进行筛选。通过本实施例，不仅消除了由于数据信息单独存放物联网设备本地而产生的数据孤岛带来的数据不可用问题，并且实现了通过一次检索即可得到关于该员工工作的所有存在形式的工作信息，提升了用户的体验感与满意度。

下面将结合物联网设备为全球定位系统为例进行说明。

在一种实施例中，可以通过终端设备录制用户在公路上行进的视频片段。在录制视频片段的同时，还可以基于全球定位系统采集用户行进轨迹的数据信息。在应用过程中，可以基于数据信息的第一时间戳与基于视频片段的第二时间戳相关联，将视频片段和数据信息进行整合处理，以得到关于用户在公路上行进的所有存在形态的信息。在一示例中，可以将数据信息发送至终端设备，并基于终端设备将数据信息和视频片段进行整合处理，得到多模态数据信息；还可以将数据信息和视频片段发送至云端处理系统，并基于云端处理系统将数据信息和视频片段进行整合处理，得到多模态数据信息。

进一步的，全球定位系统采集数据信息可以是包括用户在A路段、B路段和C路段上行进的信息。在应用过程中，可以基于第一时间戳，确定数据信息在不同时刻的特征标签，例如，在a时刻的特征标签为A路段，在b时刻的特征标签为B路段，在c时刻的特征标签为C路段。进一步的，可以基于时间顺序，将特征标签A路段、B路段和C路段分别添加至多模态数据信息的相应时刻，以方便用户直观得获取关于该多模态数据信息在不同时间段的特点，提升用户的体验感与满意度。

在又一种实施例中，在拍摄视频片段时，可以利用物联网相关技术（例如，近场通信标签技术、蓝牙标签技术或二维码识别技术等）获取相关的场景信息以及关键过程数据，并将获取的相关场景信息以及关键过程数据与原始视频片段通过时间戳（例如，时间点或时间区间）相关联，以形成多模态数据信息。进一步的，可以对前述形成的多模态数据信息进行记录并存储，后期可以用于进行某多模态数据信息内或跨多模态数据信息内的多模态检索。在另一示例中，还可以对形成的多模态数据信息进行加工总结，以形成综合性知识数据，为用户提供全面的知识数据。

根据上述描述可知，本发明提供的面向物联网设备的数据处理方法可以基于时间戳，将物联网设备采集的数据信息与视频片段相关联，并根据数据信息与视频片段得到多模态数据信息，进而为用户的多模态信息取用带来便捷。

基于相同的构思，本发明还提供一种面向物联网设备的数据处理装置。

下面对本发明提供的面向物联网设备的数据处理装置进行描述，下文描述的面向物联网设备的数据处理装置与上文描述的面向物联网设备的数据处理方法可相互对应参照。

图5是本发明提供的面向物联网设备的数据处理装置的结构示意图。

在本发明一示例性实施例中，如图5所示，面向物联网设备的数据处理装置可以包括获取模块510、确定模块520和处理模块530，下面将分别介绍各模块。

获取模块510可以被配置为用于获取视频片段以及数据信息，其中，数据信息通过物联网设备进行采集。

确定模块520可以被配置为用于确定数据信息的第一时间戳，以及确定视频片段的第二时间戳。

处理模块530可以被配置为用于基于第一时间戳与第二时间戳相关联，根据数据信息与视频片段得到多模态数据信息。

在本发明一示例性实施例中，处理模块530可以采用以下方式根据数据信息与视频片段得到多模态数据信息：基于通信传输，将数据信息和视频片段发送至云端处理系统；接收云端处理系统发送的多模态数据信息，其中，多模态数据信息通过云端处理系统对数据信息与视频片段进行整合而得到。

在本发明一示例性实施例中，确定模块520还可以被配置为基于第一时间戳，确定数据信息在不同时刻的特征标签；处理模块530还可以被配置为用于基于时间顺序，将特征标签添加至多模态数据信息。

在本发明一示例性实施例中，数据处理模块还可以包括创建模块和展示模块，其中，创建模块可以被配置为用于：创建展示列表；展示模块可以被配置为用于将特征标签以及与特征标签对应的时间信息展示于展示列表。

在本发明一示例性实施例中，获取模块510可以采用以下方式获取数据信息：响应于采集视频片段，实时获取数据信息，其中，数据信息为基于物联网设备同步采集的与视频片段对应的信息。

图6示例了一种电子设备的实体结构示意图，如图6所示，该电子设备可以包括：处理器(processor)610、通信接口(Communications Interface)620、存储器(memory)630和通信总线640，其中，处理器610，通信接口620，存储器630通过通信总线640完成相互间的通信。处理器610可以调用存储器630中的逻辑指令，以执行面向物联网设备的数据处理方法，该面向物联网设备的数据处理方法可以包括：获取视频片段以及数据信息，其中，数据信息通过物联网设备进行采集；确定数据信息的第一时间戳，以及确定视频片段的第二时间戳；基于第一时间戳与第二时间戳相关联，根据数据信息与视频片段得到多模态数据信息。

此外，上述的存储器630中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、磁碟或者光盘等各种可以存储程序代码的介质。

另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在非暂态计算机可读存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述各方法所提供的面向物联网设备的数据处理方法，该面向物联网设备的数据处理方法可以包括：获取视频片段以及数据信息，其中，数据信息通过物联网设备进行采集；确定数据信息的第一时间戳，以及确定视频片段的第二时间戳；基于第一时间戳与第二时间戳相关联，根据数据信息与视频片段得到多模态数据信息。

又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法提供的面向物联网设备的数据处理方法，该面向物联网设备的数据处理方法可以包括：获取视频片段以及数据信息，其中，数据信息通过物联网设备进行采集；确定数据信息的第一时间戳，以及确定视频片段的第二时间戳；基于第一时间戳与第二时间戳相关联，根据数据信息与视频片段得到多模态数据信息。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种面向物联网设备的数据处理方法，其特征在于，所述方法包括：

获取视频片段以及数据信息，其中，所述数据信息通过物联网设备进行采集；

确定所述数据信息的第一时间戳，以及确定所述视频片段的第二时间戳；

基于所述第一时间戳与所述第二时间戳相关联，根据所述数据信息与所述视频片段得到多模态数据信息。

2.根据权利要求1所述的面向物联网设备的数据处理方法，其特征在于，所述根据所述数据信息与所述视频片段得到多模态数据信息，包括：

基于通信传输，将所述数据信息和所述视频片段发送至云端处理系统；

接收所述云端处理系统发送的所述多模态数据信息，其中，所述多模态数据信息通过所述云端处理系统对所述数据信息与所述视频片段进行整合而得到。

3.根据权利要求1所述的面向物联网设备的数据处理方法，其特征在于，所述面向物联网设备的数据处理方法还包括：

基于所述第一时间戳，确定所述数据信息在不同时刻的特征标签；

基于时间顺序，将所述特征标签添加至所述多模态数据信息。

4.根据权利要求3所述的面向物联网设备的数据处理方法，其特征在于，所述面向物联网设备的数据处理方法还包括：

创建展示列表；

将所述特征标签以及与所述特征标签对应的时间信息展示于所述展示列表。

5.根据权利要求1所述的面向物联网设备的数据处理方法，其特征在于，所述数据信息通过以下方式获取：

响应于采集所述视频片段，实时获取所述数据信息，其中，所述数据信息为基于所述物联网设备同步采集的与所述视频片段对应的信息。

6.一种面向物联网设备的数据处理装置，其特征在于，所述装置包括：

获取模块，用于获取视频片段以及数据信息，其中，所述数据信息通过物联网设备进行采集；

确定模块，用于确定所述数据信息的第一时间戳，以及确定所述视频片段的第二时间戳；

处理模块，用于基于所述第一时间戳与所述第二时间戳相关联，根据所述数据信息与所述视频片段得到多模态数据信息。

7.根据权利要求6所述的面向物联网设备的数据处理装置，其特征在于，所述处理模块采用以下方式根据所述数据信息与所述视频片段得到多模态数据信息：

基于通信传输，将所述数据信息和所述视频片段发送至云端处理系统；

接收所述云端处理系统发送的所述多模态数据信息，其中，所述多模态数据信息通过所述云端处理系统对所述数据信息与所述视频片段进行整合而得到。

8.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至5任一项所述面向物联网设备的数据处理方法的步骤。

9.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述面向物联网设备的数据处理方法的步骤。

10.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述面向物联网设备的数据处理方法的步骤。

Images