CN110807111A - 三维图形的处理方法及装置、存储介质、电子设备 - Google Patents

三维图形的处理方法及装置、存储介质、电子设备 Download PDF

Info

Publication number
CN110807111A
CN110807111A CN201910901567.9A CN201910901567A CN110807111A CN 110807111 A CN110807111 A CN 110807111A CN 201910901567 A CN201910901567 A CN 201910901567A CN 110807111 A CN110807111 A CN 110807111A
Authority
CN
China
Prior art keywords
human
computer interaction
video stream
display terminal
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910901567.9A
Other languages
English (en)
Inventor
刘贵芹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Platinum Stone Interspace Technology Ltd
Original Assignee
Beijing Platinum Stone Interspace Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Platinum Stone Interspace Technology Ltd filed Critical Beijing Platinum Stone Interspace Technology Ltd
Priority to CN201910901567.9A priority Critical patent/CN110807111A/zh
Publication of CN110807111A publication Critical patent/CN110807111A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本公开涉及计算机技术领域,提供了一种三维图形的处理方法、三维图形的处理装置、计算机存储介质、电子设备,其中,三维图形的处理方法应用于对三维图形进行渲染处理后所得图像序列进行显示处理的显示终端,包括:生成适用于本地设备的人机交互界面;获取用户通过人机交互界面输入的人机交互指令;将人机交互指令发送至云端服务器;接收云端服务器发送的传输视频流;对传输视频流进行解码,以将传输视频流转换为图像序列;对图像序列进行播放显示。本公开中的三维图形的处理方法能够解决现有技术中方法对于显示终端的设备配置要求较高的技术问题,使得三维仿真软件能够在更多的低配置设备上运行,扩大了相关大型三维仿真应用软件的适用范围。

Description

三维图形的处理方法及装置、存储介质、电子设备
技术领域
本公开涉及计算机技术领域,特别涉及一种三维图形的处理方法、三维图形的处理装置、计算机存储介质及电子设备。
背景技术
随着互联网及计算机技术的迅速发展,三维仿真应用软件所需要的三维数据规模越来越大,要求的渲染结果越来越真实,计算量也越来越大。随着云计算、无线传输技术的发展,基于云渲染处理的三维仿真技术开始发展起来。
目前,三维图形的渲染、显示一般是统一集中在客户端(显示终端)进行,运行数据量较大,尤其是对于一些专业领域的三维仿真软件,用户一般只能在高配置的PC(PersonalComputer,简称:PC,个人计算机)上操作。可见,现有技术中的方法对于显示终端的设备配置要求较高。
鉴于此,本领域亟需开发一种新的三维图形的处理方法及装置。
需要说明的是,上述背景技术部分公开的信息仅用于加强对本公开的背景的理解。
发明内容
本公开的目的在于提供一种三维图形的处理方法、三维图形的处理装置、计算机存储介质及电子设备,进而至少在一定程度上避免了现有技术中的三维图形的处理方法对于显示终端的设备配置要求较高的技术问题。
本公开的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本公开的实践而习得。
根据本公开的第一方面,提供一种图像的处理方法,应用于对三维图形进行渲染处理后所得图像序列进行显示处理的显示终端,包括:生成适用于本地设备的人机交互界面;获取用户通过所述人机交互界面输入的人机交互指令;将所述人机交互指令发送至云端服务器;接收所述云端服务器发送的传输视频流;对所述传输视频流进行解码,以将所述传输视频流转换为图像序列;对所述图像序列进行播放显示。
在本公开的示例性实施例中,所述方法还包括:显示终端向所述云端服务器发送网络连接请求,所述网络连接请求携带所述显示终端的设备标识号。
根据本公开的第二方面,提供了一种三维图形的处理方法,应用于对三维图形进行渲染处理的云端服务器,包括:接收所述显示终端发送的所述人机交互指令;获取所述人机交互指令对应的目标三维图形;对所述目标三维图形进行渲染处理,以获取渲染图像;将所述渲染图像编码为传输视频流,并将所述传输视频流发送至所述显示终端。
在本公开的示例性实施例中,在接收根据用户需求生成的人机交互指令之前,所述方法还包括:接收所述显示终端发送的网络连接请求;判断所述设备标识号是否为合法的目标标识号;若所述设备标识号为所述目标标识号,则建立与所述显示终端的通讯连接。
在本公开的示例性实施例中,在接收所述人机交互指令之后,所述方法还包括:对所述人机交互指令进行解析处理。
根据本公开的第三方面,提供一种三维图像的处理装置,应用于对三维图形进行渲染处理后所得图像序列进行显示处理的显示终端,包括:界面生成模块,用于生成适用于本地设备的人机交互界面;指令生成模块,用于获取用户通过所述人机交互界面输入的人机交互指令;指令发送模块,用于将所述人机交互指令发送至云端服务器。
在本公开的示例性实施例中,所述装置还包括:数据接收模块,用于接收云端服务器发送的传输视频流;解码处理模块,用于对所述传输视频流进行解码,以将所述传输视频流转换为图像序列;播放显示模块,用于对所述图像序列进行播放显示。
根据本公开的第四方面,提供一种三维图形的处理装置,应用于对三维图形进行渲染处理的云端服务器,包括:指令接收模块,用于接收根据用户需求生成的人机交互指令;渲染模块,用于根据所述人机交互指令,对所述三维图形进行渲染处理,以获取渲染图像;图像编码模块,用于将所述渲染图像编码为传输视频流,并将所述传输视频流发送至显示终端。
根据本公开的第五方面,提供一种计算机存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面所述的三维图形的处理方法。
根据本公开的第六方面,提供一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述第一方面所述的三维图形的处理方法。
由上述技术方案可知,本公开示例性实施例中的三维图形的处理方法、三维图形的处理装置、计算机存储介质及电子设备至少具备以下优点和积极效果:
在本公开的一些实施例所提供的技术方案中,显示终端生成适用于本地设备的人机交互界面,用来接收人机交互指令并传递给云端服务器执行渲染任务,进而,显示终端接收云端服务器发送的传输视频流,对传输视频流进行解码,以将传输视频流转换为图像序列,并对图像序列进行播放显示。一方面,使得大部分的计算程序不再只集中在显示终端,大大简化了显示终端的运算量以及运算要求,使得显示终端在功能上类似于一个播放器。另一方面,能够解决现有技术中的显示终端需要兼容多种硬件设备而导致的对显示终端的设备配置要求较高的技术问题,使得软件能够在更多的低配置设备上运行,扩大了三维仿真应用软件的适用范围,优化了用户体验。
本公开应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出本公开一示例性实施例中显示终端的图像处理流程示意图;
图2示出本公开另一示例性实施例中显示终端与云端服务器建立通讯连接的流程示意图;
图3示出本公开一示例性实施例中显示终端的人机交互界面示意图;
图4示出本公开再一示例性实施例中云端服务器对三维图形进行渲染处理的流程示意图;
图5示出本公开另一示例性实施例中云端服务器对三维图形进行渲染处理的工作界面示意图;
图6示出本公开再一示例性实施例中显示终端处理图像后的显示界面示意图;
图7示出本公开一示例性实施例中显示终端与云端服务器的交互流程示意图;
图8示出本公开一示例性实施例中三维图形的处理装置的结构示意图;
图9示出本公开另一示例性实施例中三维图形的处理装置的结构示意图;
图10示出本公开示例性实施例中计算机存储介质的结构示意图;
图11示出本公开示例性实施例中电子设备的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
本说明书中使用用语“一个”、“一”、“该”和“所述”用以表示存在一个或多个要素/组成部分/等;用语“包括”和“具有”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等;用语“第一”和“第二”等仅作为标记使用,不是对其对象的数量限制。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。
目前,三维图形的渲染、显示一般是统一集中在客户端(显示终端)进行,运行数据量较大,尤其是对于一些专业领域的三维仿真软件,用户一般只能在高配置的PC(PersonalComputer,简称:PC,个人计算机)上操作。可见,现有技术中的方法对于现实终端的设备配置要求较高。但随着移动互联网的发展,用户也希望能够在低配设备上实时的操作这些应用软件,因而,本领域亟需开发一种新的三维图形的处理方法及装置。在本公开的实施例中,首先提供了一种三维图形的处理方法,至少在一定程度上克服现有技术中提供的三维图形的处理方法对于显示终端的设备配置要求较高的缺陷。
图1示出本公开一示例性实施例中三维图形的处理方法的流程示意图,具体示出显示终端的图像处理流程示意图。该三维图形的处理方法的执行主体可以是对三维图形进行处理的服务器。
参考图1,根据本公开的一个实施例的三维图形的处理方法包括以下步骤:
步骤S110,生成适用于本地设备的人机交互界面;
步骤S120,获取用户通过所述人机交互界面输入的人机交互指令;
步骤S130,将所述人机交互指令发送至云端服务器;
步骤S140,接收所述云端服务器发送的传输视频流;
步骤S150,对所述传输视频流进行解码,以将所述传输视频流转换为图像序列;
步骤S160,对所述图像序列进行播放显示。
在图1所示实施例所提供的技术方案中,显示终端生成适用于本地设备的人机交互界面,用来接收人机交互指令并传递给云端服务器执行渲染任务,进而,显示终端接收云端服务器发送的传输视频流,对传输视频流进行解码,以将传输视频流转换为图像序列,并对图像序列进行播放显示。一方面,使得大部分的计算程序不再只集中在显示终端,大大简化了显示终端的运算量以及运算要求,使得显示终端在功能上类似于一个播放器。另一方面,能够解决现有技术中的显示终端需要兼容多种硬件设备而导致的对显示终端的设备配置要求较高的技术问题,使得软件能够在更多的低配置设备上运行,扩大了三维仿真应用软件的适用范围,优化了用户体验。
以下对图1中的各个步骤的具体实现过程进行详细阐述:
在本公开的示例性实施例中,示例性的,可以参考图2,图2示意性示出本公开另一示例性实施例中三维图形的处理方法的流程示意图,具体示出显示终端与云端服务器建立通讯连接的流程示意图,以下结合图2进行解释。
参考图2,在步骤S201中,接收所述显示终端发送的网络连接请求。
在本公开的示例性实施例中,显示终端即可以对图像、视频、文本进行显示处理的设备,示例性的,显示终端可以是一显示服务器或者计算机显示设备。
在本公开的示例性实施例中,显示终端可以向云端服务器发送网络连接请求。网络连接请求即通过网络向云端服务器发送的连接请求,网络连接请求中可以携带上述显示终端对应的设备标识号,设备标识号即该显示终端的唯一标识,类似于人的身份证号码,每个显示终端对应唯一的设备标识号。示例性的,上述显示终端所携带的设备标识号可以是“equipment-1”。
在本公开的示例性实施例中,云端服务器是基于大规模分布式计算系统,通过虚拟化技术整合IT(Information Technology,简称:IT,信息技术)资源,为各行业提供互联网基础设施的服务。上述云端服务器可以通过网络接收上述显示终端发送的网络连接请求。
在步骤S202中,判断所述设备标识号是否为合法的目标标识号。
在本公开的示例性实施例中,当云端服务器接收到携带设备标识号的上述网络连接请求之后,可以判断上述设备标识号是否为合法的目标标识号。示例性的,可以在云端服务器中预先存储合法的目标标识号,即预先设定可以与云端服务器进行连接的目标标识号。进而,云端服务器可以将上述设备标识号与存储的目标标识号进行比对,以确定出上述设备标识号是否为合法的目标标识号。
在本公开的示例性实施例中,参考上述步骤的相关解释,示例性的,当云端服务器中预先存储的合法的目标标识号为“equipment-1、equipment-2以及equipment-3”时,则示例性的,可以判定上述设备标识号为合法的目标标识号。
在步骤S203中,若所述设备标识号为所述目标标识号,则建立与所述显示终端的通讯连接。
在本公开的示例性实施例中,若确定出上述设备标识号为上述目标标识号时,则云端服务器可以建立与上述显示终端的通讯连接。
在本公开的示例性实施例中,在建立云端服务器与显示终端的通讯连接之后,上述显示终端还可以生成适用于本地设备的人机交互界面。
继续参考图1,在步骤S110中,生成适用于本地设备的人机交互界面。
在本公开的示例性实施例中,人机交互界面是指人与计算机系统之间的通信媒体或手段,是人与计算机之间进行各种符号和动作的双向信息交换的平台。示例性的,人机交互界面可以是显示终端的显示屏幕,或者显示屏幕中的某一小部分区域或者某几个小部分区域组合而成。人机交互界面的具体形态可以根据实际情况自行设定,属于本公开的保护范围。通过设置人机交互界面,能够使得机器实时了解到用户的操作想法、操作目的等,实现机器与用户之间更加高效的信息交流。
在本公开的示例性实施例中,显示终端可以根据预设的交互界面程序(用于生成人机交互界面的程序代码)生成各类本地设备对应的人机交互界面。本地设备可以是承载上述显示终端的移动终端(又称移动通信终端,是指可以在移动中使用的计算机设备),例如:手机、笔记本、平板电脑、以及车载电脑等。示例性的,当本地设备为手机时,生成的人机交互界面可以是与手机屏幕尺寸大小相适配的人机交互界面。当本地设备为平板电脑时,还可以生成与平板电脑屏幕大小相适配的人机交互界面。当本地设备为PC时,也可以生成与PC屏幕大小相适配的人机交互界面。从而,能够针对本地设备的不同大小的显示屏幕,生成不同大小的人机交互界面,使得人机交互界面的显示更加贴合用户的实际操作需求,优化用户体验。
在本公开的示例性实施例中,以上述显示终端为手机为例,示例性的,可以参考图3,图3示意性示出本公开一示例性实施例中三维图形的处理方法的显示界面示意图,具体示出在建立与上述云端服务器的通讯连接之前,上述显示终端的人机交互界面示意图。结合图3,301所示为上述显示终端,显示终端屏幕左边的小区域302、303、304与305所示为所述人机交互界面。
在步骤S120中,获取用户通过所述人机交互界面输入的所述人机交互指令。
在本公开的示例性实施例中,在生成上述人机交互界面之后,显示终端可以获取用户通过人机交互界面输入的人机交互指令。
在本公开的示例性实施例中,人机交互指令即用户根据实际需求通过人机交互界面输入的交互命令,示例性的,当用户想要显示一只树时,可以在上述人机交互界面手写输入人机交互指令“please display a tree”。
在本公开的示例性实施例中,示例性的,人机交互指令还可以是用户根据实际需求通过外部输入设备(鼠标或键盘等)所输入的交互命令。示例性的,当用户想要显示一种鲨鱼时,可以通过鼠标在上述人机交互界面上进行“双击动作”。
在本公开的示例性实施例中,示例性的,人机交互指令还可以是用户根据实际需求通过上述人机交互界面以及上述外部输入设备输入的一系列连续指令组成的组合指令,例如:用户通过鼠标点击人机交互界面上的输入位置,进而,通过键盘输入“pleasedisplay a car”,进而,通过鼠标再次点击以确认上述输入内容。
在本公开的示例性实施例中,示例性的,可以预先定义各个人机交互指令对应的目标三维图形,示例性的,可以预先定义人机交互指令“please display a tree”对应的目标三维图形为“树”。还可以预先定义人机交互指令(鼠标在上述人机交互界面上的“双击动作”)对应的目标三维图形为“鲨鱼”。还可以预先定义人机交互指令(用户通过鼠标点击人机交互界面上的输入位置,并通过键盘输入“please display a car”,进而,通过鼠标再次点击以确认上述输入内容)对应的目标三维对象为“汽车”。
在步骤S130中,将所述人机交互指令发送至所述云端服务器。
在本公开的示例性实施例中,在显示终端获取到上述人机交互指令并且建立与上述云端服务器的通讯连接之后,可以将上述人机交互指令发送至上述云端服务器。
在本公开的示例性实施例中,示例性的,可以参考图4,图4示意性示出本公开再一示例性实施例中三维图形的处理方法的流程示意图,具体示出云端服务器接收上述人机交互指令,并对三维图形进行渲染处理的流程示意图,以下结合图4对具体的实施方式进行解释。
参考图4,在步骤S401中,接收所述显示终端发送的人机交互指令。
在本公开的示例性实施例中,云端服务器可以接收上述显示终端发送的人机交互指令。
在步骤S402中,获取所述人机交互指令对应的目标三维图形。
在本公开的示例性实施例中,在接收到上述人机交互指令之后,云端服务器可以对上述人机交互指令进行解析处理,以获取上述人机交互指令对应的目标三维图形。
在本公开的示例性实施例中,参考上述步骤S120的相关解释,当上述人机交互指令为用户通过鼠标点击人机交互界面上的输入位置,并通过键盘输入“please display acar”,进而,通过鼠标再次点击以确认输入内容的一系列组合动作时,云端服务器可以对上述人机交互指令进行解析处理,以将上述人机交互指令分为鼠标输入的指令(两次点击指令)以及键盘输入的指令(“please display a car”),进而,可以识别出上述人机交互指令对应的目标三维图形为一个“汽车”。
在本公开的示例性实施例中,示例性的,可以参考图5,图5示意性示出本公开另一示例性实施例中三维图形的处理方法的显示界面示意图,具体示出在确定出上述目标三维图形之后,上述云端服务器对三维图形进行渲染处理的工作界面示意图。示例性的,参考图5,501所示为上述云端服务器的显示界面,502所示为上述目标三维图形。
在步骤S403中,对所述目标三维图形进行渲染处理,以获取渲染图像。
在本公开的示例性实施例中,当获取到上述目标三维图形之后,云端服务器可以对上述目标三维图形进行渲染处理,以获取到渲染图像。
在本公开的示例性实施例中,渲染图像即对上述目标三维图形进行渲染处理之后得到的图像。
在本公开的示例性实施例中,渲染处理即在目标三维图形的骨架上面添加位图纹理或者程序纹理、照明、凹凸纹理映射以及相对于其他物体的位置等等的一系列处理。通过对目标三维图形进行渲染处理,能够提高三维图形的显示质量以及显示效果,使得目标三维图形更加形象逼真。
在本公开的示例性实施例中,在得到上述渲染图像之后,还可以对上述渲染图像进行拷贝保存,以避免渲染图像发生丢失。
在步骤S404中,将所述渲染图像编码为传输视频流,并将所述传输视频流发送至所述显示终端。
在本公开的示例性实施例中,在获取到上述渲染图像之后,可以将上述渲染图像编码为传输视频流,并将上述传输视频流发送至上述显示终端。
在本公开的示例性实施例中,传输视频流是指图像序列对应的视频数据的传输文件,是一个稳定的,连续的传输文件。
在本公开的示例性实施例中,示例性的,可以基于H264技术(一种高性能的视频编解码技术),将上述渲染图像编码为传输视频流。从而,一方面,能够提高编码效率,节省码率,大大减小渲染图像的数据量,提高后续视频流的传输速度。进一步的,能够在低码率的情况下提供高质量的视频图像。另一方面,还能够降低编码复杂度,提供丰富的错误处理工具,很好的控制或消除丢包和误码,解决网络传输包丢包的问题。
在本公开的示例性实施例中,上述云端服务器可以通过网络将上述编码视频流发送至上述显示终端。
继续参考图1,在步骤S140中,接收云端服务器发送的传输视频流。
在本公开的示例性实施例中,上述显示终端可以接收上述云端服务器发送的传输视频流。
在步骤S150中,对所述传输视频流进行解码,以将所述传输视频流转换为图像序列。
在本公开的示例性实施例中,显示终端在接收到上述传输视频流之后,可以对上述传输视频流进行解码,以将上述传输视频流转换为图像序列。示例性的,参照上述步骤S404的相关解释,可以基于上述H264技术(一种高性能的视频编解码技术),将上述传输视频流转换为图像序列。
在本公开的示例性实施例中,图像序列即上述目标三维图形对应的解码结果,示例性的,以上述目标三维图形“汽车”为例,上述图像序列可以是上述汽车对应的多个角度的拍摄图像。
在步骤S160中,对所述图像序列进行播放显示。
在本公开的示例性实施例中,在将上述传输视频流转换为图像序列之后,显示终端可以对上述图像序列进行播放显示。
在本公开的示例性实施例中,通过将渲染处理等由云端服务器来完成,显示终端仅负责生成人机交互界面以及对图像序列进行播放显示,使得大部分的计算程序不再只集中在显示终端,大大简化了显示终端的运算量以及运算要求,使得显示终端在功能上类似于一个播放器。从而能够解决现有技术中的显示终端需要兼容多种硬件设备而导致的对显示终端的设备配置要求较高的技术问题,使得用户能够在PC、Android(安卓)设备、IOS(苹果)设备等低配移动设备上运行,扩大了三维仿真应用软件的适用范围,优化了用户体验。
在本公开的示例性实施例中,示例性的,可以参考图6,图6示意性示出本公开再一示例性实施例中三维图形的处理方法的界面示意图,具体示出对上述显示终端处理图像后的显示界面示意图,以下结合图6进行解释。结合图6,601所示为上述解码后得到的图像序列的其中一帧显示画面,对应于将上述502所示的目标三维图形进行渲染处理、编码、解码之后得到的某一帧显示图像。
在本公开的示例性实施例中,图7示意性示出本公开一示例性实施例中三维图形的处理方法的交互流程示意图,具体示出上述显示终端与云端服务器的交互流程示意图,以下结合图7对具体的实施方式进行解释。
在步骤S701中,显示终端获取用户通过人机交互界面输入的人机交互指令,并将人机交互指令发送至云端服务器;
在步骤S702中,云端服务器的命令接收模块接收上述人机交互指令,并分发给命令解析模块;
在步骤S703中,云端服务器的命令解析模块解析上述人机交互指令,以获取目标三维图形;
在步骤S704中,云端服务器的渲染模块对上述目标三维图形进行渲染处理,以得到渲染图像,其中,上述渲染模块需要工作在云端服务器中具有高并发性能的独立GPU(Graphic Processing Unit,简称:GPU,是一种专门在个人电脑、工作站、游戏机和一些移动设备上负责图像运算工作的微处理器)上;
在步骤S705中,云端服务器的图像拷贝模块对上述渲染图像进行拷贝,并将渲染图像发送至视频流编码模块;
在步骤S706中,云端服务器的视频流编码模块将上述渲染图像编码为传输视频流;
在步骤S707中,云端服务器通过网络将上述传输视频流发送至显示终端;
在步骤S708中,显示终端的视频流接收模块接收上述传输视频流,并传递给视频解码模块;
在步骤S709中,显示终端的视频解码模块对上述传输视频流进行解码,以得到图像序列,并将图像序列传输至视频播放模块;
在步骤S710中,显示终端的视频播放模块对上述图像序列进行播放显示。
需要说明的是,上述显示终端的所有模块(视频流接收模块、视频解码模块以及视频播放模块)均可以工作在中央处理器CPU(Central Processing Unit,简称:CPU,中央处理器,是一台计算机的运算核心和控制核心)上。上述显示终端的视频解码模块和视频播放模块也可以运行在独立的图形处理器GPU上,均可以根据实际情况自行设定,属于本公开的保护范围。
以下介绍本公开的装置实施例,可以用于执行本公开上述的三维图形的处理方法。
图8示出本公开一示例性实施例中三维图形的处理装置的结构示意图;如图8所示,三维图形的处理装置800可以包括界面生成模块801、指令生成模块802、指令发送模块803、数据接收模块804、解码处理模块805、播放显示模块806。其中:
界面生成模块801,用于生成适用于本地设备的人机交互界面。
在本公开的示例性实施例中,界面生成模块用于生成适用于本地设备的人机交互界面。
指令生成模块802,用于获取用户通过所述人机交互界面输入的人机交互指令。
在本公开的示例性实施例中,指令生成模块用于获取用户通过所述人机交互界面输入的人机交互指令。
指令发送模块803,用于将所述人机交互指令发送至云端服务器。
在本公开的示例性实施例中,指令发送模块用于将人机交互指令发送至云端服务器。
数据接收模块804,用于接收云端服务器发送的传输视频流。
在本公开的示例性实施例中,数据接收模块用于接收云端服务器发送的传输视频流。
在本公开的示例性实施例中,数据接收模块还用于向云端服务器发送网络连接请求,网络连接请求携带显示终端的设备标识号。
解码处理模块805,用于对所述传输视频流进行解码,以将所述传输视频流转换为图像序列。
在本公开的示例性实施例中,解码处理模块用于对传输视频流进行解码,以将传输视频流转换为图像序列。
播放显示模块806,用于对所述图像序列进行播放显示。
在本公开的示例性实施例中,播放显示模块还用于对图像序列进行播放显示。
上述三维图形的处理装置中各模块的具体细节已经在对应的三维图形的处理方法中进行了详细的描述,因此此处不再赘述。
图9示出本公开另一示例性实施例中三维图形的处理装置的结构示意图;如图9所示,三维图形的处理装置900可以包括模块901、模块902和模块903。其中:
指令接收模块901,用于接收根据用户需求生成的人机交互指令。
在本公开的示例性实施例中,指令接收模块用于接收根据用户需求生成的人机交互指令。
在本公开的示例性实施例中,指令接收模块还用于对人机交互指令进行解析处理。
在本公开的示例性实施例中,指令接收模块用于接收显示终端发送的网络连接请求;判断设备标识号是否为合法的目标标识号;若上述设备标识号为合法的目标标识号,则建立与显示终端的通讯连接。
渲染模块902,用于根据所述人机交互指令,对所述三维图形进行渲染,以获取渲染图像。
在本公开的示例性实施例中,渲染模块用于根据人机交互指令,对三维图形进行渲染处理,以获取渲染图像。
图像编码模块903,用于将所述渲染图像编码为传输视频流,并将所述传输视频流发送至显示终端。
在本公开的示例性实施例中,图像编码模块用于将渲染图像编码为传输视频流,并将传输视频流发送至显示终端。
上述三维图形的处理装置中各模块的具体细节已经在对应的三维图形的处理方法中进行了详细的描述,因此此处不再赘述。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
此外,尽管在附图中以特定顺序描述了本公开中方法的各个步骤,但是,这并非要求或者暗示必须按照该特定顺序来执行这些步骤,或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的,可以省略某些步骤,将多个步骤合并为一个步骤执行,以及/或者将一个步骤分解为多个步骤执行等。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、移动终端、或者网络设备等)执行根据本公开实施方式的方法。
在本公开示例性实施方式中,还提供了一种能够实现上述方法的计算机存储介质。其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中,本公开的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。
参考图10所示,描述了根据本公开的实施方式的用于实现上述方法的程序产品1000,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本公开的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
此外,在本公开的示例性实施例中,还提供了一种能够实现上述方法的电子设备。
所属技术领域的技术人员能够理解,本公开的各个方面可以实现为系统、方法或程序产品。因此,本公开的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
下面参照图11来描述根据本公开的这种实施方式的电子设备1100。图11显示的电子设备1100仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图11所示,电子设备1100以通用计算设备的形式表现。电子设备1100的组件可以包括但不限于:上述至少一个处理单元1110、上述至少一个存储单元1120、连接不同系统组件(包括存储单元1120和处理单元1110)的总线1130。
其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元1110执行,使得所述处理单元1110执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。例如,所述处理单元1110可以执行如图1中所示的:步骤S110,生成适用于本地设备的人机交互界面;步骤S120,获取用户通过所述人机交互界面输入的人机交互指令;步骤S130,将所述人机交互指令发送至云端服务器;步骤S140,接收云端服务器发送的传输视频流;步骤S150,对所述传输视频流进行解码,以将所述传输视频流转换为图像序列;步骤S160,对所述图像序列进行播放显示。
存储单元1120可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)11201和/或高速缓存存储单元11202,还可以进一步包括只读存储单元(ROM)11203。
存储单元1120还可以包括具有一组(至少一个)程序模块11205的程序/实用工具11204,这样的程序模块11205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线1130可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备1100也可以与一个或多个外部设备1200(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备1100交互的设备通信,和/或与使得该电子设备1100能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口1150进行。并且,电子设备1100还可以通过网络适配器1160与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器1160通过总线1130与电子设备1100的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备1100使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。
此外,上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。

Claims (10)

1.一种三维图形的处理方法,应用于对三维图形进行渲染处理后所得图像序列进行显示处理的显示终端,其特征在于,包括:
生成适用于本地设备的人机交互界面;
获取用户通过所述人机交互界面输入的人机交互指令;
将所述人机交互指令发送至云端服务器;
接收所述云端服务器发送的传输视频流;
对所述传输视频流进行解码,以将所述传输视频流转换为图像序列;
对所述图像序列进行播放显示。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
向所述云端服务器发送网络连接请求,所述网络连接请求携带所述显示终端的设备标识号。
3.一种三维图形的处理方法,应用于对三维图形进行渲染处理的云端服务器,其特征在于,包括:
接收所述显示终端发送的所述人机交互指令;
获取所述人机交互指令对应的目标三维图形;
对所述目标三维图形进行渲染处理,以获取渲染图像;
将所述渲染图像编码为传输视频流,并将所述传输视频流发送至所述显示终端。
4.根据权利要求3所述的方法,其特征在于,在接收根据用户需求生成的人机交互指令之前,所述方法还包括:
接收所述显示终端发送的网络连接请求;
判断所述设备标识号是否为合法的目标标识号;
若所述设备标识号为所述目标标识号,则建立与所述显示终端的通讯连接。
5.根据权利要求3或4所述的方法,其特征在于,在接收所述人机交互指令之后,所述方法还包括:
对所述人机交互指令进行解析处理。
6.一种三维图形的处理装置,应用于对三维图形进行渲染处理后所得图像序列进行显示处理的显示终端,其特征在于,包括:
界面生成模块,用于生成适用于本地设备的人机交互界面;
指令生成模块,用于获取用户通过所述人机交互界面输入的人机交互指令;
指令发送模块,用于将所述人机交互指令发送至云端服务器。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
数据接收模块,用于接收云端服务器发送的传输视频流;
解码处理模块,用于对所述传输视频流进行解码,以将所述传输视频流转换为图像序列;
播放显示模块,用于对所述图像序列进行播放显示。
8.一种三维图形的处理装置,应用于对三维图形进行渲染处理的云端服务器,其特征在于,包括:
指令接收模块,用于接收根据用户需求生成的人机交互指令;
渲染模块,用于根据所述人机交互指令,对所述三维图形进行渲染处理,以获取渲染图像;
图像编码模块,用于将所述渲染图像编码为传输视频流,并将所述传输视频流发送至显示终端。
9.一种计算机存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1~5中任意一项所述的三维图形的处理方法。
10.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1~5中任意一项所述的三维图形的处理方法。
CN201910901567.9A 2019-09-23 2019-09-23 三维图形的处理方法及装置、存储介质、电子设备 Pending CN110807111A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910901567.9A CN110807111A (zh) 2019-09-23 2019-09-23 三维图形的处理方法及装置、存储介质、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910901567.9A CN110807111A (zh) 2019-09-23 2019-09-23 三维图形的处理方法及装置、存储介质、电子设备

Publications (1)

Publication Number Publication Date
CN110807111A true CN110807111A (zh) 2020-02-18

Family

ID=69487805

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910901567.9A Pending CN110807111A (zh) 2019-09-23 2019-09-23 三维图形的处理方法及装置、存储介质、电子设备

Country Status (1)

Country Link
CN (1) CN110807111A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111770325A (zh) * 2020-06-02 2020-10-13 武汉大势智慧科技有限公司 一种三维gis实时云渲染展示方法、终端、云服务器及存储介质
CN112653787A (zh) * 2020-12-16 2021-04-13 深圳市锐尔觅移动通信有限公司 显示方法、装置、存储介质及电子设备
CN113946402A (zh) * 2021-11-09 2022-01-18 中国电信股份有限公司 基于渲染分离的云手机加速方法、系统、设备及存储介质
CN115802098A (zh) * 2023-02-09 2023-03-14 北京易智时代数字科技有限公司 一种云端应用的数据交互方法、客户端、渲染端及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103281345A (zh) * 2013-02-16 2013-09-04 赞奇科技发展有限公司 基于云计算架构的三维数字模型实时渲染的实现方法及云服务系统
US20140198097A1 (en) * 2013-01-16 2014-07-17 Microsoft Corporation Continuous and dynamic level of detail for efficient point cloud object rendering
WO2017143718A1 (zh) * 2016-02-26 2017-08-31 成都赫尔墨斯科技有限公司 一种云渲染系统、服务器及方法
CN107979763A (zh) * 2016-10-21 2018-05-01 阿里巴巴集团控股有限公司 一种虚拟现实设备生成视频、播放方法、装置及系统
CN109558507A (zh) * 2017-09-26 2019-04-02 中建科技有限公司深圳分公司 三维模型渲染方法及系统
CN109918521A (zh) * 2019-03-05 2019-06-21 深圳市瑞云科技有限公司 一种基于cg渲染的住宅3d效果图分享方法
CN110264550A (zh) * 2019-06-19 2019-09-20 深圳市瑞云科技有限公司 一种基于cg实时渲染的烟花汇演效果模拟展示系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140198097A1 (en) * 2013-01-16 2014-07-17 Microsoft Corporation Continuous and dynamic level of detail for efficient point cloud object rendering
CN103281345A (zh) * 2013-02-16 2013-09-04 赞奇科技发展有限公司 基于云计算架构的三维数字模型实时渲染的实现方法及云服务系统
WO2017143718A1 (zh) * 2016-02-26 2017-08-31 成都赫尔墨斯科技有限公司 一种云渲染系统、服务器及方法
CN107979763A (zh) * 2016-10-21 2018-05-01 阿里巴巴集团控股有限公司 一种虚拟现实设备生成视频、播放方法、装置及系统
CN109558507A (zh) * 2017-09-26 2019-04-02 中建科技有限公司深圳分公司 三维模型渲染方法及系统
CN109918521A (zh) * 2019-03-05 2019-06-21 深圳市瑞云科技有限公司 一种基于cg渲染的住宅3d效果图分享方法
CN110264550A (zh) * 2019-06-19 2019-09-20 深圳市瑞云科技有限公司 一种基于cg实时渲染的烟花汇演效果模拟展示系统及方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111770325A (zh) * 2020-06-02 2020-10-13 武汉大势智慧科技有限公司 一种三维gis实时云渲染展示方法、终端、云服务器及存储介质
CN112653787A (zh) * 2020-12-16 2021-04-13 深圳市锐尔觅移动通信有限公司 显示方法、装置、存储介质及电子设备
CN112653787B (zh) * 2020-12-16 2023-05-12 深圳市锐尔觅移动通信有限公司 显示方法、装置、存储介质及电子设备
CN113946402A (zh) * 2021-11-09 2022-01-18 中国电信股份有限公司 基于渲染分离的云手机加速方法、系统、设备及存储介质
CN115802098A (zh) * 2023-02-09 2023-03-14 北京易智时代数字科技有限公司 一种云端应用的数据交互方法、客户端、渲染端及系统
CN115802098B (zh) * 2023-02-09 2023-04-28 北京易智时代数字科技有限公司 一种云端应用的数据交互方法、客户端、渲染端及系统

Similar Documents

Publication Publication Date Title
CN110807111A (zh) 三维图形的处理方法及装置、存储介质、电子设备
CN102932324B (zh) 支持降低的网络带宽使用的跨帧渐进损坏
US10693816B2 (en) Communication methods and systems, electronic devices, and computer clusters
CN111291882A (zh) 一种模型转换的方法、装置、设备和计算机存储介质
US20140108940A1 (en) Method and system of remote communication over a network
CN106797398B (zh) 用于向客户端提供虚拟桌面服务的方法和系统
CN107943834B (zh) 人机对话的实现方法、装置、设备及存储介质
CN107404418B (zh) 互联网产品测试方法、装置、设备及存储介质
CN110688286B (zh) 应用程序运行信息传送方法及装置、存储介质、电子设备
CN108415939B (zh) 基于人工智能的对话处理方法、装置、设备及计算机可读存储介质
EP4024273A1 (en) Image description generation method, apparatus and system, and medium and electronic device
WO2023066183A1 (zh) 数据处理方法、装置、设备以及存储介质
US20220076476A1 (en) Method for generating user avatar, related apparatus and computer program product
CN108701045B (zh) 计算机设备中客户操作系统屏幕截图方法和装置
CN115981845A (zh) 一种云端多人协同及ar实时协同方法、装置、介质及设备
US9460481B2 (en) Systems and methods for processing desktop graphics for remote display
CN114071190A (zh) 云应用视频流处理方法、相关装置及计算机程序产品
CN112328356B (zh) Android与Windows的互通方法、装置、存储介质及计算机设备
CN110704766A (zh) 基于实时快照的界面渲染优化的方法、装置和电子设备
CN108259958B (zh) 遥控按键响应方法、装置、设备和存储介质
CN110765097A (zh) 数据处理方法及装置、计算机存储介质、电子设备
CN110548285B (zh) 游戏通信控制方法及装置、介质及电子设备
CN114760309A (zh) 基于云端服务的终端的业务交互方法、装置、设备和介质
US11797277B2 (en) Neural network model conversion method server, and storage medium
CN113835816A (zh) 一种虚拟机桌面显示方法、装置、设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200218

RJ01 Rejection of invention patent application after publication