CN109302598B - 一种数据处理方法、终端、服务器和计算机存储介质 - Google Patents

一种数据处理方法、终端、服务器和计算机存储介质 Download PDF

Info

Publication number
CN109302598B
CN109302598B CN201811162199.2A CN201811162199A CN109302598B CN 109302598 B CN109302598 B CN 109302598B CN 201811162199 A CN201811162199 A CN 201811162199A CN 109302598 B CN109302598 B CN 109302598B
Authority
CN
China
Prior art keywords
data
terminal
model
indication information
dimensional video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811162199.2A
Other languages
English (en)
Other versions
CN109302598A (zh
Inventor
夏炀
张涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811162199.2A priority Critical patent/CN109302598B/zh
Publication of CN109302598A publication Critical patent/CN109302598A/zh
Application granted granted Critical
Publication of CN109302598B publication Critical patent/CN109302598B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44245Monitoring the upstream path of the transmission network, e.g. its availability, bandwidth
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633Control signals issued by server directed to the network components or client
    • H04N21/6332Control signals issued by server directed to the network components or client directed to client

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明实施例公开了一种数据处理方法、终端、服务器和计算机存储介质。所述方法包括:获得三维视频数据,从所述三维视频数据中提取出对应于关键部位的第一数据;检测到满足预定条件时,存储所述第一数据,以及发送所述第一数据至移动边缘计算(MEC)服务器。

Description

一种数据处理方法、终端、服务器和计算机存储介质
技术领域
本发明涉及数据处理技术,具体涉及一种数据处理方法、终端、服务器和计算机存储介质。
背景技术
随着移动通信网络的不断发展,移动通信网络的传输速率飞速提高,从而给三维视频业务的产生和发展提供了有力的技术支持。三维视频数据包括二维图像数据(例如RGB数据)和深度数据(Depth数据),在三维视频数据的传输过程中是需要分别二维视频数据和深度数据。然而,三维视频数据的数据采集量非常大,因此需要传输的数据量也非常大,数据传输过程中需要较高的技术支持,因此需要移动通信网络具有较快的数据传输速率,以及较稳定的数据传输环境。
发明内容
为解决上述技术问题,本发明实施例提供了一种数据处理方法、终端、服务器和计算机存储介质。
本发明实施例提供了一种数据处理方法,应用于终端;所述方法包括:
获得三维视频数据,从所述三维视频数据中提取出对应于关键部位的第一数据;
检测到满足预定条件时,存储所述第一数据,以及发送所述第一数据至移动边缘计算(MEC,Mobile Edge Computing)服务器。
上述方案中,所述方法还包括:接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于指示所述终端继续传输数据;
基于所述第一指示信息向所述MEC服务器发送其他关键部位的数据。
上述方案中,所述方法还包括:接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;
基于所述第二指示信息重新发送所述第一数据。
上述方案中,所述检测到满足预定条件,包括:
检测与MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件。
上述方案中,所述获得三维视频数据,包括:
所述终端从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
本发明实施例还提供了一种数据处理方法,应用于MEC服务器;所述方法包括:
接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于关键部位的数据;
基于所述第一数据建立针对所述关键部位的第一模型,判断所述第一模型是否建立完成;
基于判断结果向所述终端发送指示信息。
上述方案中,所述基于判断结果向所述终端发送指示信息,包括:
当所述判断结果为所述第一模型建立完成,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输其他关键部位数据。
上述方案中,所述基于判断结果向所述终端发送指示信息,包括:
当所述判断结果为所述第一模型未建立完成,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据。
上述方案中,当所述判断结果为所述第一模型建立完成时,所述方法还包括:基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;
根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
本发明实施例还提供了一种终端,所述终端包括:获取单元、提取单元、存储单元和第一通讯单元;其中,
所述获取单元,用于获得三维视频数据;
所述提取单元,用于从所述获取单元获得的所述三维视频数据中提取出对应于关键部位的第一数据;
所述存储单元,用于检测到满足预定条件时,存储所述第一数据;
所述第一通讯单元,用于发送所述第一数据至MEC服务器。
上述方案中,所述第一通讯单元,用于接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于指示所述终端继续传输数据;还用于基于所述第一指示信息向所述MEC服务器发送对应于其他关键部位的数据。
上述方案中,所述第一通讯单元,用于接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;还用于基于所述第二指示信息重新发送所述第一数据。
上述方案中,所述终端还包括检测单元,用于检测与MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件。
上述方案中,所述获取单元,用于从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
本发明实施例还提供了一种MEC服务器,所述服务器包括:第二通讯单元、建模单元和校验单元;其中,
所述第二通讯单元,用于接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于关键部位的数据;
所述建模单元,用于基于所述第一通讯单元接收的所述第一数据建立针对所述关键部位的第一模型;
所述校验单元,用于判断所述建模单元建立的所述第一模型是否建立完成;
所述第二通讯单元,还用于基于所述校验单元获得的判断结果向所述终端发送指示信息。
上述方案中,所述第二通讯单元,用于当所述建模单元获得的判断结果为所述第一模型建立完成,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输对应于其他关键部位数据。
上述方案中,所述第二通讯单元,用于当所述建模单元获得的判断结果为所述第一模型未建立完成,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据。
上述方案中,所述建模单元,还用于当所述判断结果为所述第一模型建立完成时,基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
本发明实施例还提供了一种计算机存储介质,其上存储有计算机指令,该指令被处理器执行时实现本发明实施例所述数据处理方法的步骤;或者,该指令被处理器执行时实现本发明实施例所述数据处理方法的步骤。
本发明实施例还提供了一种终端,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现本发明实施例所述数据处理方法的步骤。
本发明实施例还提供了一种MEC服务器,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现本发明实施例所述数据处理方法的步骤。
本发明实施例还提供了一种芯片,包括:处理器,用于从存储器中调用并运行计算机程序,使得安装有所述芯片的设备执行本发明实施例所述数据处理方法的步骤;或者,执行本发明实施例所述数据处理方法的步骤。
本发明实施例还提供了一种计算机程序产品,包括计算机程序指令,该计算机程序指令使得计算机执行本发明实施例所述数据处理方法的步骤;或者,该计算机程序指令使得计算机执行本发明实施例所述数据处理方法的步骤。
本发明实施例还提供了一种计算机程序,所述计算机程序使得计算机执行本发明实施例所述数据处理方法的步骤;或者,所述计算机程序使得计算机执行本发明实施例所述数据处理方法的步骤。
本发明实施例提供了的数据处理方法、终端、服务器和计算机存储介质,应用于终端的方法包括:获得三维视频数据,从所述三维视频数据中提取出对应于关键部位的第一数据;检测到满足预定条件时,存储所述第一数据,发送所述第一数据至MEC服务器;应用于服务器的方法包括:接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于关键部位的数据;基于所述第一数据建立针对所述关键部位的第一模型,判断所述第一模型是否建立完成;基于判断结果向所述终端发送指示信息。采用本发明实施例的技术方案,通过终端仅传输关键部位的第一数据,大大减少了三维视频数据在传输过程的数据量,在数据传输过程中无需较高的技术支持,因此适用于各种场景(即包括较快或较慢的数据传输场景);另一方面,对于MEC服务器也仅需建立关键部位的模型,大大缩减了建模时间,在一定程度上通过缩短数据传输时间提升了服务质量,大大提升了用户体验。并且,本实施例通过终端存储发出的第一数据,适用于满足预定条件(例如传输质量不佳)的场景。
附图说明
图1为本发明实施例的数据处理方法应用的系统架构示意图;
图2为本发明实施例的数据处理方法的流程示意图一;
图3为本发明实施例的数据处理方法的流程示意图二;
图4为本发明实施例的数据处理方法的流程示意图三;
图5为本发明实施例的数据处理方法的流程示意图四;
图6为本发明实施例的终端的一种组成结构示意图;
图7为本发明实施例的终端的另一种组成结构示意图;
图8为本发明实施例的服务器的一种组成结构示意图;
图9为本发明实施例的数据处理设备的硬件组成结构示意图。
具体实施方式
在对本发明实施例的技术方案进行详细说明之前,首先对本发明实施例的数据处理方法应用的系统架构进行简单说明。本发明实施例的数据处理方法应用于三维视频数据的相关业务,该业务例如是三维视频数据分享的业务,或者基于三维视频数据的直播业务等等。在这种情况下,由于三维视频数据的数据量较大,分别传输的深度数据和二维视频数据在数据传输过程中需要较高的技术支持,因此需要移动通信网络具有较快的数据传输速率,以及较稳定的数据传输环境。
图1为本发明实施例的数据传输方法应用的系统架构示意图;如图1所示,系统可包括终端、基站、MEC服务器、业务处理服务器、核心网和互联网(Internet)等;MEC服务器与业务处理服务器之间通过核心网建立高速通道以实现数据同步。
以图1所示的两个终端交互的应用场景为例,MEC服务器A为部署于靠近终端A(发送端)的MEC服务器,核心网A为终端A所在区域的核心网;相应的,MEC服务器B为部署于靠近终端B(接收端)的MEC服务器,核心网B为终端B所在区域的核心网;MEC服务器A和MEC服务器B可与业务处理服务器之间分别通过核心网A和核心网B建立高速通道以实现数据同步。
其中,终端A发送的三维视频数据传输到MEC服务器A后,由MEC服务器A通过核心网A将数据同步至业务处理服务器;再由MEC服务器B从业务处理服务器获取终端A发送的三维视频数据,并发送至终端B进行呈现。
这里,如果终端B与终端A通过同一个MEC服务器来实现传输,此时终端B和终端A直接通过一个MEC服务器实现三维视频数据的传输,不需要业务处理服务器的参与,这种方式称为本地回传方式。具体地,假设终端B与终端A通过MEC服务器A实现三维视频数据的传输,终端A发送的三维视频数据传输到MEC服务器A后,由MEC服务器A发送三维视频数据至终端B进行呈现。
这里,终端可基于网络情况、或者终端自身的配置情况、或者自身配置的算法选择接入4G网络的演进型基站(eNB),或者接入5G网络的下一代演进型基站(gNB),从而使得eNB通过长期演进(Long Term Evolution,LTE)接入网与MEC服务器连接,使得gNB通过下一代接入网(NG-RAN)与MEC服务器连接。
这里,MEC服务器部署于靠近终端或数据源头的网络边缘侧,所谓靠近终端或者靠近数据源头,不仅是逻辑位置上,还在地理位置上靠近终端或者靠近数据源头。区别于现有的移动通信网络中主要的业务处理服务器部署于几个大城市中,MEC服务器可在一个城市中部署多个。例如在某写字楼中,用户较多,则可在该写字楼附近部署一个MEC服务器。
其中,MEC服务器作为具有融合网络、计算、存储、应用核心能力的边缘计算网关,为边缘计算提供包括设备域、网络域、数据域和应用域的平台支撑。其联接各类智能设备和传感器,就近提供智能联接和数据处理业务,让不同类型的应用和数据在MEC服务器中进行处理,实现业务实时、业务智能、数据聚合与互操作、安全与隐私保护等关键智能服务,有效提升业务的智能决策效率。
本发明实施例提供了一种数据处理方法,应用于终端中,终端可以是例如手机、平板电脑等移动终端,也可以是电脑等类型的终端。图2为本发明实施例的数据处理方法的流程示意图一;如图2所示,所述方法包括:
步骤101:获得三维视频数据,从所述三维视频数据中提取出对应于关键部位的第一数据。
步骤102:检测到满足预定条件时,存储所述第一数据,以及发送所述第一数据至移动边缘计算MEC服务器。
本实施例中,作为一种实施方式,所述获得三维视频数据,包括:所述终端从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
具体的,本实施方式中,由于能够采集深度数据的采集组件相对比较昂贵,终端并不具备三维视频数据的采集功能,而是通过独立于终端的采集组件采集三维视频数据,再通过采集组件和终端中的通信组件建立通信链路,使得终端获得采集组件采集的三维视频数据。其中,所述采集组件具体可通过以下至少之一实现:深度摄像头、双目摄像头、3D结构光摄像模组、飞行时间(TOF,Time Of Flight)摄像模组。
这里,采集组件能够与至少一个终端建立通信链路以将采集得到的三维视频数据传输至所述至少一个终端,以使对应终端获得三维视频数据,这样能够实现一个采集组件采集的三维视频数据共享给至少一个终端,从而实现采集组件的共享。
作为另一种实施方式,终端自身具备三维视频数据的采集功能,可以理解,终端设置有至少能够采集深度数据的采集组件,例如设置有以下组件至少之一:深度摄像头、双目摄像头、3D结构光摄像模组、TOF摄像模组,以采集三维视频数据。
其中,获得的三维视频数据包括二维视频数据和深度数据;所述二维视频数据用于表征平面图像,例如可以是RGB数据;深度数据表征采集组件所针对的采集对象的表面与采集组件之间的距离。
本实施例中,终端中预先定义关键部位,通过对三维视频数据进行图像识别处理提取出预定义的关键部位的第一数据。
作为一种实施方式,关键部位的第一数据是与传输算法相关联的数据,在采用该传输算法传输数据的过程中,关键部位的第一数据的稳定性通常是未达到预设稳定性需求的。可以理解,关键部位的第一数据在采用该传输算法传输的过程中是容易发生错误的,也即关键部位的第一数据为敏感数据、稳定性不佳的数据。例如,在某编码标准传输数据的过程中,对于三维视频数据中包括的目标对象为人物来说,人物的脸部相对于身体部位的更具有立体性,因此脸部部位数据发生错误的概率较高,或者鼻子部位数据、眼睛部位数据发生错误的概率较高,因此可预先定义脸部部位、或者鼻子部位、眼睛部位、嘴部部位中的至少一种部位作为关键部位。进而通过图像识别处理识别出三维视频数据中的关键部位。
实际应用中,由于三维视频数据中的二维视频数据和深度数据分别获取;可通过图像识别处理识别二维视频数据中的关键部位;进而基于二维视频数据中的关键部位确定处与关键部位相对应的深度数据;作为一种实施方式,可将关键部位对应的深度数据作为第一数据,发送该第一数据;以使MEC服务器基于表征深度数据的第一数据进行建模;作为另一种实施方式,将关键部位对应的二维视频数据和深度数据作为第一数据,发送该第一数据,以使MEC服务器基于深度数据进行关键部位的建模,还可以及二维视频数据进行颜色的填充。
本实施例中,所述检测到满足预定条件,包括:检测与MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件。
这里,所述传输质量信息包括传输速率和/或丢包率;当所述传输速率低于第一预设阈值时,可表明传输质量信息未达到预设传输标准;和/或,当丢包率高于第二预设阈值时,也可以表明传输质量信息未达到预设传输标准。
本实施例适用于终端与MEC服务器之间的通信通道质量不佳的应用场景,即通信通道的传输速率和/或传输稳定性不满足预设条件的场景,例如,通信通道的传输速率低于第一预设阈值,数据传输的丢包率高于第二预设阈值。在这种低速和/或高延迟的场景下,终端一方面传输对应于关键部位的第一数据,另一方面本地存储第一数据,以便于在第一数据传输过程中出现错误,可重新传输存储的第一数据。
在一实施例中,如图3所示,所述方法还包括:
步骤103a:接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于指示所述终端继续传输数据;基于所述第一指示信息向所述MEC服务器发送对应于其他关键部位的数据。
本实施例中,若MEC服务器基于第一数据建模成功,也即成功建立对应于关键部位的模型,则向终端发送第一指示信息,第一指示信息表明在先传输的第一数据能够成功建模,可继续传输下一个关键部位的数据。
实际应用中,若关键部位为人物的脸部部位,且完整的三维视频数据中仅包括一个人物;则接收到第一指示信息后,继续采集对应于完整人物的下一帧三维视频数据,从下一帧三维视频数据中提取出对应于脸部部位的第一数据,继续发送该第一数据。若关键部位为人物的鼻子部位、眼睛部位和嘴部部位;则发送对应于鼻子部位的第一数据后,接收到第一指示信息,继续发送对应于眼睛部位的第一数据,以此类推,直至所有的关键部位的第一数据发送完成并接收到对应的第一指示信息。
在一实施例中,如图3所示,所述方法还包括:
步骤103b:接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;基于所述第二指示信息重新发送所述第一数据。
本实施例中,若MEC服务器基于第一数据建模未成功,也即未成功建立对应于关键部位的模型,则向终端发送第二指示信息,第二指示信息表明在先传输的第一数据不能够成功建模,需要重新传输存储的第一数据。
实际应用中,若关键部位为人物的脸部部位,且完整的三维视频数据中仅包括一个人物;则接收到第二指示信息后,需要重新传输已存储的、对应于脸部部位的第一数据。若关键部位为人物的鼻子部位、眼睛部位和嘴部部位;则分别提取出并存储对应于鼻子部位、眼睛部位和嘴部部位的第一数据、发送对应于鼻子部位的第一数据后,接收到第二指示信息,则重新发送对应于鼻子部位的第一数据。
实际应用中,可基于终端的存储能力决定存储的数据量;可以理解,在接收到MEC服务器的第一指示信息后,可基于终端的存储能力决定是否删除已存储的第一数据。作为一种实施方式,可在接收到第一指示信息后,删除已存储的第一数据。作为另一种实施方式,可检测终端的剩余存储空间;若剩余存储空间小于预设阈值时,可按照第一数据的存储时间的先后顺序删除已存储的第一数据。
采用本发明实施例的技术方案,通过终端仅传输关键部位的第一数据,大大减少了三维视频数据在传输过程的数据量,在数据传输过程中无需较高的技术支持,因此适用于各种场景(即包括较快或较慢的数据传输场景);另一方面,对于MEC服务器也仅需建立关键部位的模型,大大缩减了建模时间,在一定程度上通过缩短数据传输时间提升了服务质量,大大提升了用户体验。并且,本实施例通过终端存储发出的第一数据,适用于满足预定条件(例如传输质量不佳)的场景。
本发明实施例还提供了一种数据处理方法,应用于服务器,该服务器具体为图1中所示的MEC服务器。图4为本发明实施例的数据处理方法的流程示意图三;如图4所示,所述方法包括:
步骤201:接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于关键部位的数据。
步骤202:基于所述第一数据建立针对所述关键部位的第一模型,判断所述第一模型是否建立完成。
步骤203:基于判断结果向所述终端发送指示信息。
本实施例中,MEC服务器基于终端发送的第一数据进行针对关键部位的建模。作为一种实施方式,所述第一数据为对应于关键部位的深度数据,则基于该深度数据进行建模。作为另一种实施方式,所述第一数据为对应于关键部位的深度数据和二维视频数据,则基于深度数据进行建模,再基于二维视频数据进行颜色的填充。
本实施例中,所述判断所述第一模型是否建立完成,包括:基于所述第一模型是否能够识别出关键部位的类型;若能够识别出关键部位的类型,可表明第一模型建立完成;若不能够识别出关键部位的类型,则可表明第一模型未建立完成。
作为一种示例,所述MEC服务器中可预先配置对应于多个关键部位的模型的特征参数;则在判断第一模型是否建立完成时,可分别将预先配置的关键部位的模型的特征参数与所述第一模型是否匹配;若某一预置的模型的特征参数与所述第一模型的匹配率达到预设阈值,则可表明第一模型建立完成;相应的若第一模型与预置的所有模型的特征参数的匹配率未达到所述预设阈值,则可表明第一模型未建立完成。其中,预先配置的关键部位的模型的特征参数具体可以是轮廓特征点和/或骨骼关键点。
在一实施例中,所述基于判断结果向所述终端发送指示信息,包括:
步骤203a:当所述判断结果为所述第一模型建立完成,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输对应于其他关键部位数据。
本实施例中,若MEC服务器基于第一数据建模成功,也即成功建立对应于关键部位的模型,则向终端发送第一指示信息,第一指示信息表明在先传输的第一数据能够成功建模,可继续传输下一个关键部位的数据。
在一实施例中,所述基于判断结果向所述终端发送指示信息,包括:步骤203b:当所述判断结果为所述第一模型未建立完成,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据。
本实施例中,若MEC服务器基于第一数据建模未成功,也即未成功建立对应于关键部位的模型,则向终端发送第二指示信息,第二指示信息表明在先传输的第一数据不能够成功建模,需要重新传输对应于该关键部位的数据。
在一实施例中,如图5所示,当所述判断结果为所述第一模型建立完成时,所述方法还包括:
步骤204:基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;
步骤205:根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
本实施例上述方案中是对关键部位进行了建模,而对于非关键部位,MEC服务器中预置了多个第二模型;其中,非关键部位可以是针对于目标对象中的关键部位以外的其他部位,例如,当关键部位为目标人物的脸部部位时,非关键部位可以是目标人物的身体部位;除了目标人物的身体部位意外,非关键部位也可以包括针对完整的三维视频数据中除目标对象以外的背景区域。
作为一种实施方式,所述基于预设策略选择预置的第二模型,包括从预置的多个第二模型中选择与第一模型匹配的第二模型。作为一种示例,可基于第一模型对应的关键部位的类型和/或尺寸比例从预置的多个第二模型中选择与该类型和/或尺寸比例匹配的第二模型;这里,所选择的第二模型对应的非关键部位的类型与第一模型对应的关键部位的类型是互补的,所选择的第二模型对应的非关键部位与第一模型对应的关键部位的尺寸比例是相适应的。例如第一模型对应的关键部位的类型是脸部;第二模型对应的非关键部位的类型时身体部位;并且第一模型对应的脸部部位与第二模型对应的身体部位的尺寸比例是相适应的。
实际应用中,可预先训练选择模型,即将样本模型对应的关键部位的类型和/或尺寸比例、所对应的非关键部位的模型标准作为标签作为参数输入,采用机器学习算法进行训练,获得选择模型。在获得第一模型对应的关键部位的类型和/或尺寸比例后,基于该类型和/或尺寸比例和所述选择模型确定对应的第二模型。
采用本发明实施例的技术方案,通过终端仅传输关键部位的第一数据,大大减少了三维视频数据在传输过程的数据量,在数据传输过程中无需较高的技术支持,因此适用于各种场景(即包括较快或较慢的数据传输场景);另一方面,对于MEC服务器也仅需建立关键部位的模型,大大缩减了建模时间,在一定程度上通过缩短数据传输时间提升了服务质量,大大提升了用户体验。并且,本实施例通过终端存储发出的第一数据,适用于满足预定条件(例如传输质量不佳)的场景。
为实现本发明实施例终端侧的方法,本发明实施例还提供了一种终端。图6为本发明实施例的终端的一种组成结构示意图;如图6所示,所述终端包括:获取单元31、提取单元32、存储单元33和第一通讯单元34;其中,
所述获取单元31,用于获得三维视频数据;
所述提取单元32,用于从所述获取单元31获得的所述三维视频数据中提取出对应于关键部位的第一数据;
所述存储单元33,用于检测到满足预定条件时,存储所述第一数据;
所述第一通讯单元34,用于发送所述第一数据至MEC服务器。
在一实施例中,所述第一通讯单元34,用于接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于指示所述终端继续传输数据;还用于基于所述第一指示信息向所述MEC服务器发送对应于其他关键部位的数据。
在另一实施例中,所述第一通讯单元34,用于接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;还用于基于所述第二指示信息重新发送所述第一数据。
在一实施例中,如图7所示,所述终端还包括检测单元35,用于检测与MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件。
在本发明的一种实施例中,所述获取单元31,用于从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
本发明实施例中,所述终端中的获取单元31、提取单元32和检测单元35,在实际应用中可由所述终端中的处理器,比如中央处理器(CPU,Central Processing Unit)、数字信号处理器(DSP,Digital Signal Processor)、微控制单元(MCU,Microcontroller Unit)或可编程门阵列(FPGA,Field-Programmable Gate Array)等实现;所述终端中的第一通讯单元34,在实际应用中可通过通信模组(包含:基础通信套件、操作系统、通信模块、标准化接口和协议等)及收发天线实现;所述终端中的存储单元33,在实际应用中可通过存储器实现。
需要说明的是:上述实施例提供的终端在进行数据处理时,仅以上述各程序模块的划分进行举例说明,实际应用中,可以根据需要而将上述处理分配由不同的程序模块完成,即将终端的内部结构划分成不同的程序模块,以完成以上描述的全部或者部分处理。另外,上述实施例提供的终端与数据处理方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
相应地,为实现本发明实施例服务器侧的方法,本发明实施例还提供了一种服务器,具体为MEC服务器。图8为本发明实施例的服务器的一种组成结构示意图;如图8所示,所述服务器包括:第二通讯单元41、建模单元42和校验单元43;其中,
所述第二通讯单元41,用于接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于关键部位的数据;
所述建模单元42,用于基于所述第一通讯单元接收的所述第一数据建立针对所述关键部位的第一模型;
所述校验单元43,用于判断所述建模单元42建立的所述第一模型是否建立完成;
所述第二通讯单元41,还用于基于所述校验单元43获得的判断结果向所述终端发送指示信息。
在一实施例中,所述第二通讯单元41,用于当所述建模单元42获得的判断结果为所述第一模型建立完成,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输对应于其他关键部位数据。
在另一实施例中,所述第二通讯单元41,用于当所述建模单元42获得的判断结果为所述第一模型未建立完成,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据。
在本发明的一种实施例中,所述建模单元42,还用于当所述判断结果为所述第一模型建立完成时,基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
本发明实施例中,所述服务器中的建模单元42和校验单元43,在实际应用中可由所述服务器中的处理器,比如CPU、DSP、MCU或FPGA等实现;所述服务器中的第二通讯单元41,在实际应用中可通过通信模组(包含:基础通信套件、操作系统、通信模块、标准化接口和协议等)及收发天线实现。
需要说明的是:上述实施例提供的服务器在进行数据处理时,仅以上述各程序模块的划分进行举例说明,实际应用中,可以根据需要而将上述处理分配由不同的程序模块完成,即将服务器的内部结构划分成不同的程序模块,以完成以上描述的全部或者部分处理。另外,上述实施例提供的服务器与数据处理方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
基于上述设备的硬件实现,本发明实施例还提供了一种数据处理设备,图9为本发明实施例的数据处理设备的硬件组成结构示意图,如图9所示,数据处理设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序;作为第一种实施方式,数据处理设备为终端时,位于终端的处理器执行所述程序时实现:获得三维视频数据,从所述三维视频数据中提取出对应于关键部位的第一数据;检测到满足预定条件时,存储所述第一数据,以及发送所述第一数据至移动边缘计算MEC服务器。
在一实施例中,位于终端的处理器执行所述程序时实现:接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于指示所述终端继续传输数据;基于所述第一指示信息向所述MEC服务器发送对应于其他关键部位的数据。
在一实施例中,位于终端的处理器执行所述程序时实现:接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;基于所述第二指示信息重新发送所述第一数据。
在一实施例中,位于终端的处理器执行所述程序时实现:检测与MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件。
在一实施例中,位于终端的处理器执行所述程序时实现:从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
作为第二种实施方式,数据处理设备为MEC服务器时,位于服务器的处理器执行所述程序时实现:接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于关键部位的数据;基于所述第一数据建立针对所述关键部位的第一模型,判断所述第一模型是否建立完成;基于判断结果向所述终端发送指示信息。
在一实施例中,位于MEC服务器的处理器执行所述程序时实现:当所述判断结果为所述第一模型建立完成,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输对应于其他关键部位数据。
在一实施例中,位于MEC服务器的处理器执行所述程序时实现:当所述判断结果为所述第一模型未建立完成,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据。
在一实施例中,位于MEC服务器的处理器执行所述程序时实现:基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
可以理解,数据处理设备(终端或服务器)还包括通信接口;数据处理设备(终端或服务器)中的各个组件通过总线系统耦合在一起。可理解,总线系统用于实现这些组件之间的连接通信。总线系统除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。
可以理解,本实施例中的存储器可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,ReadOnly Memory)、可编程只读存储器(PROM,Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM,Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM,Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM,ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM,Compact Disc Read-Only Memory);磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM,RandomAccess Memory),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(SRAM,Static Random Access Memory)、同步静态随机存取存储器(SSRAM,Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM,Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM,SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM,Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM,Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM,SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM,Direct Rambus Random Access Memory)。本发明实施例描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
上述本发明实施例揭示的方法可以应用于处理器中,或者由处理器实现。处理器可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、DSP,或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法的步骤,可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中,该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成前述方法的步骤。
本发明实施例还提供了一种芯片,包括处理器,处理器可以从存储器中调用并运行计算机程序,以实现本申请实施例中的方法。
可选地,芯片还可以包括存储器。其中,处理器可以从存储器中调用并运行计算机程序,以实现本申请实施例中的方法。
其中,存储器可以是独立于处理器的一个单独的器件,也可以集成在处理器中。
可选地,该芯片还可以包括输入接口。其中,处理器可以控制该输入接口与其他设备或芯片进行通信,具体地,可以获取其他设备或芯片发送的信息或数据。
可选地,该芯片还可以包括输出接口。其中,处理器可以控制该输出接口与其他设备或芯片进行通信,具体地,可以向其他设备或芯片输出信息或数据。
可选地,该芯片可应用于本申请实施例中的MEC服务器,并且该芯片可以实现本申请实施例的各个方法中由MEC服务器实现的相应流程,为了简洁,在此不再赘述。
可选地,该芯片可应用于本申请实施例中的终端,并且该芯片可以实现本申请实施例的各个方法中由终端实现的相应流程,为了简洁,在此不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片,系统芯片,芯片系统或片上系统芯片等。
本发明实施例还提供了一种计算机存储介质,具体为计算机可读存储介质。其上存储有计算机指令,该计算机指令被处理器执行时实现本发明实施例应用于终端或MEC服务器的数据处理方法。
本申请实施例还提供了一种计算机程序产品,包括计算机程序指令。
可选的,该计算机程序产品可应用于本申请实施例中的MEC服务器,并且该计算机程序指令使得计算机执行本申请实施例的各个方法中由MEC服务器实现的相应流程,为了简洁,在此不再赘述。
可选地,该计算机程序产品可应用于本申请实施例中的终端,并且该计算机程序指令使得计算机执行本申请实施例的各个方法中由终端实现的相应流程,为了简洁,在此不再赘述。
本申请实施例还提供了一种计算机程序。
可选的,该计算机程序可应用于本申请实施例中的MEC服务器,当该计算机程序在计算机上运行时,使得计算机执行本申请实施例的各个方法中由MEC服务器实现的相应流程,为了简洁,在此不再赘述。
可选地,该计算机程序可应用于本申请实施例中的终端,当该计算机程序在计算机上运行时,使得计算机执行本申请实施例的各个方法中由终端实现的相应流程,为了简洁,在此不再赘述。
本发明实施例还提供了一种数据处理系统,包括MEC服务器和终端;其中,该终端可以用于实现上述方法中由终端实现的相应的功能,以及该MEC服务器可以用于实现上述方法中由MEC服务器实现的相应的功能,为了简洁,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的方法和智能设备,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个第二处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是:本发明实施例所记载的技术方案之间,在不冲突的情况下,可以任意组合。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。

Claims (14)

1.一种数据处理方法,其特征在于,应用于终端;所述方法包括:
获得三维视频数据,从所述三维视频数据中提取出对应于目标对象的关键部位的第一数据;
检测到满足预定条件时,存储所述第一数据,以及发送所述第一数据至移动边缘计算MEC服务器;以供所述MEC服务器利用所述第一数据建立针对所述目标对象的关键部位的第一模型;
其中,所述方法还包括:接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于表明之前传输的所述第一数据建立所述关键部位的第一模型完成,并且指示所述终端继续向所述MEC服务器发送所述目标对象的其他关键部位的数据;依次类推,直至所有关键部位的数据发送完成;
其中,所述检测到满足预定条件,包括:
检测与所述MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件;
其中,所述传输质量信息包括传输速率和/或丢包率;
当所述传输速率低于第一预设阈值时,表明所述传输质量信息未达到所述预设传输标准;
和/或,当所述丢包率高于第二预设阈值时,表明所述传输质量信息未达到所述预设传输标准。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;
基于所述第二指示信息重新发送所述第一数据。
3.根据权利要求1所述的方法,其特征在于,所述获得三维视频数据,包括:
所述终端从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
4.一种数据处理方法,其特征在于,应用于MEC服务器;所述方法包括:
接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于目标对象的关键部位的数据;
基于所述第一数据建立针对所述目标对象的所述关键部位的第一模型,判断所述关键部位的第一模型是否建立完成;
基于判断结果向所述终端发送指示信息;
其中,所述基于判断结果向所述终端发送指示信息,包括:
当所述判断结果为所述关键部位的第一模型建立完成时,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输所述目标对象的其他关键部位数据;依次类推,直至所述目标对象的所有关键部位的数据发送完成;
其中,所述基于判断结果向所述终端发送指示信息,包括:
当所述判断结果为所述关键部位的第一模型未建立完成时,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据;
其中,所述判断所述第一模型是否建立完成,包括:基于所述第一模型是否能够识别出关键部位的类型;若能够识别出关键部位的类型,可表明第一模型建立完成;若不能够识别出关键部位的类型,则可表明第一模型未建立完成。
5.根据权利要求4所述的方法,其特征在于,在针对所述目标对象的所有关键部位的数据建立第一模型、且基于所述所有关键部位的数据建立的第一模型建立完成时,所述方法还包括:基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;
根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
6.一种终端,其特征在于,所述终端包括:获取单元、提取单元、存储单元和第一通讯单元;其中,
所述获取单元,用于获得三维视频数据;
所述提取单元,用于从所述获取单元获得的所述三维视频数据中提取出对应于目标对象的关键部位的第一数据;
所述存储单元,用于检测到满足预定条件时,存储所述第一数据;
所述第一通讯单元,用于发送所述第一数据至MEC服务器;以供所述MEC服务器利用所述第一数据建立针对所述目标对象的关键部位的第一模型;
其中,所述第一通讯单元,用于接收来自所述MEC服务器的第一指示信息;所述第一指示信息用于表明之前传输的所述第一数据建立所述关键部位的第一模型完成,并且指示所述终端继续向所述MEC服务器发送所述目标对象的其他关键部位的数据;依次类推,直至所有关键部位的数据发送完成;
其中,所述终端还包括检测单元,用于检测与所述MEC服务器之间的通信通道的传输质量信息,当所述传输质量信息未达到预设传输标准时,确定检测到满足预定条件;
其中,所述传输质量信息包括传输速率和/或丢包率;
当所述传输速率低于第一预设阈值时,表明所述传输质量信息未达到所述预设传输标准;
和/或,当所述丢包率高于第二预设阈值时,表明所述传输质量信息未达到所述预设传输标准。
7.根据权利要求6所述的终端,其特征在于,所述第一通讯单元,用于接收来自所述MEC服务器的第二指示信息;所述第二指示信息用于指示所述终端重新发送所述第一数据;还用于基于所述第二指示信息重新发送所述第一数据。
8.根据权利要求6所述的终端,其特征在于,所述获取单元,用于从至少能够采集深度数据的采集组件获得三维视频数据;所述采集组件能够与至少一个终端建立通信链路以使对应终端获得所述三维视频数据。
9.一种MEC服务器,其特征在于,所述服务器包括:第二通讯单元、建模单元和校验单元;其中,
所述第二通讯单元,用于接收来自终端的第一数据;所述第一数据为所述终端获得的三维视频数据中对应于目标对象的关键部位的数据;
所述建模单元,用于基于第一通讯单元接收的所述第一数据建立针对所述目标对象的所述关键部位的第一模型;
所述校验单元,用于判断所述建模单元建立的所述关键部位的第一模型是否建立完成;
所述第二通讯单元,还用于基于所述校验单元获得的判断结果向所述终端发送指示信息;
其中,所述第二通讯单元,用于当所述建模单元获得的判断结果为所述关键部位的第一模型建立完成时,向所述终端发送第一指示信息,所述第一指示信息用于指示所述终端继续传输对应于所述目标对象的其他关键部位数据;依次类推,直至所述目标对象的所有关键部位的数据发送完成;
其中,所述第二通讯单元,用于当所述建模单元获得的判断结果为所述关键部位的第一模型未建立完成时,向所述终端发送第二指示信息,所述第二指示信息用于指示所述终端重新采集与所述第一数据对应的三维视频数据;
其中,所述第二通讯单元,用于判断所述第一模型是否建立完成,包括:基于所述第一模型是否能够识别出关键部位的类型;若能够识别出关键部位的类型,可表明第一模型建立完成;若不能够识别出关键部位的类型,则可表明第一模型未建立完成。
10.根据权利要求9所述的服务器,其特征在于,所述建模单元,还用于在针对所述目标对象的所有关键部位的数据建立第一模型、且基于所述所有关键部位的数据建立的第一模型建立完成时,基于预设策略选择预置的第二模型;所述第二模型为预先配置的除所述关键部位以外的其他非关键部位的模型;根据所述第一模型和所述第二模型生成对应于所述三维视频数据的模型。
11.一种计算机存储介质,其上存储有计算机指令,其特征在于,该指令被处理器执行时实现权利要求1至3任一项所述数据处理方法的步骤;或者,该指令被处理器执行时实现权利要求4至5任一项所述数据处理方法的步骤。
12.一种终端,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至3任一项所述数据处理方法的步骤。
13.一种MEC服务器,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求4至5任一项所述数据处理方法的步骤。
14.一种芯片,其特征在于,包括:处理器,用于从存储器中调用并运行计算机程序,使得安装有所述芯片的设备执行如权利要求1至3任一项所述数据处理方法的步骤;或者,执行权利要求4至5任一项所述数据处理方法的步骤。
CN201811162199.2A 2018-09-30 2018-09-30 一种数据处理方法、终端、服务器和计算机存储介质 Active CN109302598B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811162199.2A CN109302598B (zh) 2018-09-30 2018-09-30 一种数据处理方法、终端、服务器和计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811162199.2A CN109302598B (zh) 2018-09-30 2018-09-30 一种数据处理方法、终端、服务器和计算机存储介质

Publications (2)

Publication Number Publication Date
CN109302598A CN109302598A (zh) 2019-02-01
CN109302598B true CN109302598B (zh) 2021-08-31

Family

ID=65161594

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811162199.2A Active CN109302598B (zh) 2018-09-30 2018-09-30 一种数据处理方法、终端、服务器和计算机存储介质

Country Status (1)

Country Link
CN (1) CN109302598B (zh)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102348116A (zh) * 2010-08-03 2012-02-08 株式会社理光 视频处理方法、视频处理装置以及视频处理系统
CN102271241A (zh) * 2011-09-02 2011-12-07 北京邮电大学 一种基于面部表情/动作识别的图像通信方法及系统
CN103369289B (zh) * 2012-03-29 2016-05-04 深圳市腾讯计算机系统有限公司 一种视频模拟形象的通信方法和装置
CN103368929B (zh) * 2012-04-11 2016-03-16 腾讯科技(深圳)有限公司 一种视频聊天方法及系统
CN103415003A (zh) * 2013-08-26 2013-11-27 苏州跨界软件科技有限公司 一种虚拟人物通话系统
US9258525B2 (en) * 2014-02-25 2016-02-09 Alcatel Lucent System and method for reducing latency in video delivery
CN107465885A (zh) * 2016-06-06 2017-12-12 中兴通讯股份有限公司 一种实现视频通讯的方法和装置
WO2018051746A1 (ja) * 2016-09-16 2018-03-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元データ作成方法及び三次元データ作成装置
CN109246409B (zh) * 2018-09-30 2020-08-04 Oppo广东移动通信有限公司 一种数据处理方法、终端、服务器和计算机存储介质

Also Published As

Publication number Publication date
CN109302598A (zh) 2019-02-01

Similar Documents

Publication Publication Date Title
CN108495112B (zh) 数据传输方法及终端、计算机存储介质
US10104700B2 (en) Message processing method, MME selection method, and apparatuses
CN109410319B (zh) 一种数据处理方法、服务器和计算机存储介质
CN109194946B (zh) 数据处理方法及装置、电子设备及存储介质
CN105871666A (zh) ZigBee设备的添加方法及装置
CN109413405B (zh) 一种数据处理方法、终端、服务器和计算机存储介质
CN109272576B (zh) 一种数据处理方法、mec服务器、终端设备及装置
CN109151430B (zh) 一种数据处理方法、终端、服务器和计算机存储介质
CN109246409B (zh) 一种数据处理方法、终端、服务器和计算机存储介质
WO2020063171A1 (zh) 数据传输方法、终端、服务器和存储介质
CN110750206A (zh) 数据处理方法、装置及系统
CN109302598B (zh) 一种数据处理方法、终端、服务器和计算机存储介质
CN113055933A (zh) 小区接入方法、用户设备和基站
CN107819729B (zh) 一种数据请求方法及其系统、接入设备、存储设备和存储介质
CN109299323B (zh) 一种数据处理方法、终端、服务器和计算机存储介质
CN109147043B (zh) 一种数据处理方法、服务器及计算机存储介质
CN109345623B (zh) 模型校验方法及服务器、计算机存储介质
CN108632376A (zh) 一种数据处理方法、终端、服务器和计算机存储介质
CN109151435B (zh) 一种数据处理方法、终端、服务器及计算机存储介质
CN109413409B (zh) 一种数据处理方法、mec服务器、终端设备
JP2015528260A (ja) モバイルデバイス内で複数の候補アプリケーションのための通信接続を提供するための方法及びデバイス
CN108990039B (zh) 数据传输方法及相关装置
CN115514799A (zh) Tcp连接方法、系统、网络设备及存储介质
CN109325997B (zh) 模型校验方法及服务器、计算机存储介质
CN109120912B (zh) 一种数据处理方法、mec服务器、终端设备及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant