CN109644181A - 一种多媒体信息分享的方法、相关装置及系统 - Google Patents
一种多媒体信息分享的方法、相关装置及系统 Download PDFInfo
- Publication number
- CN109644181A CN109644181A CN201780048513.1A CN201780048513A CN109644181A CN 109644181 A CN109644181 A CN 109644181A CN 201780048513 A CN201780048513 A CN 201780048513A CN 109644181 A CN109644181 A CN 109644181A
- Authority
- CN
- China
- Prior art keywords
- multimedia
- information
- multimedia messages
- destination
- sharing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1101—Session protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/02—Networking aspects
- G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- General Business, Economics & Management (AREA)
- Business, Economics & Management (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种多媒体信息分享的方法,包括:通过VR显示桌面接收多媒体信息分享指令;根据多媒体信息分享指令确定待发送的目标多媒体信息;将目标多媒体信息发送至VR服务器,VR服务器向第二多媒体信息分享装置发送目标多媒体信息,多媒体信息用于第二多媒体信息分享装置生成目标多媒体信息所对应的VR目标多媒体信息,并展示VR目标多媒体信息;根据目标多媒体信息生成VR目标多媒体信息并展示VR目标多媒体信息。本发明还提供第一多媒体信息分享装置、第二多媒体信息分享装置及系统。本发明将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,有利于提升信息分享的交互性。
Description
技术领域
本发明涉及通信领域,尤其涉及一种多媒体信息分享的方法、相关装置及系统。
背景技术
随着计算机技术的快速发展,用户之间进行远程沟通的情况也越来越普遍,为了提升沟通的效率并丰富沟通的多样性,可以在远程沟通中进行多媒体信息的分享,多媒体信息可以包括图片、音频、视频和文件等内容。
目前,用户之间可以采用即时通讯类应用程序收发多媒体信息,比如,用户A通过“微信”向用户B发送图片等,或者用户A通过“微信”向一个群组中的多位用户发送音频等,其他用户即可通过“信息”接收用户A发送的多媒体信息。
然而,对于信息接收方而言,通过即时通讯类应用程序所接收到的多媒体信息较为单一,且无法采用该多媒体信息与信息发送方进行交互,仅仅实现了多媒体信息的浏览功能,这将难以满足信息交互的灵活性和多样性。
发明内容
本发明实施例提供了一种多媒体信息分享的方法、相关装置及系统,将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
本发明实施例的第一方面提供一种多媒体信息分享的方法,所述方法应用于多媒体信息分享系统,所述多媒体信息分享系统包括第一多媒体信息分享装置、虚拟现实VR服务器以及第二多媒体信息分享装置,所述方法包括:
通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
根据所述多媒体信息分享指令确定待发送的目标多媒体信息;
将所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
本发明实施例第二方面提供了一种多媒体信息分享的方法,所述方法应用于多媒体信息分享系统,所述多媒体信息分享系统包括第一多媒体信息分享装置、虚拟现实VR服务器以及第二多媒体信息分享装置,所述方法包括:
接收多媒体信息播放指令;
根据所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息;
展示所述VR目标多媒体信息。
本发明实施例的第三方面提供一种多媒体信息分享装置,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统包括虚拟现实VR服务器以及第二多媒体信息分享装置,所述多媒体信息分享装置包括:
接收模块,用于通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
确定模块,用于根据所述接收模块接收的所述多媒体信息分享指令确定待发送的目标多媒体信息;
发送模块,用于将所述确定模块确定的所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
展示模块,用于根据所述确定模块确定的所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
本发明实施例的第四方面提供一种多媒体信息分享装置,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统包括虚拟现实VR服务器以及第一多媒体信息分享装置,所述多媒体信息分享装置包括:
接收模块,用于接收多媒体信息播放指令;
获取模块,用于根据所述接收模块接收的所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
生成模块,用于根据所述获取模块获取的所述目标多媒体信息生成所述VR目标多媒体信息;
展示模块,用于展示所述生成模块生成的所述VR目标多媒体信息。
本发明实施例的第五方面提供一种多媒体信息分享装置,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统还包括虚拟现实VR服务器以及第二多媒体信息分享装置,所述多媒体信息分享装置包括:存储器、收发器、处理器以及总线系统;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括如下步骤:
通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
根据所述多媒体信息分享指令确定待发送的目标多媒体信息;
将所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息;
所述总线系统用于连接所述存储器以及所述处理器,以使所述存储器以及所述处理器进行通信。
本发明实施例的第六方面提供一种多媒体信息分享装置,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统还包括虚拟现实VR服务器以及第一多媒体信息分享装置,所述多媒体信息分享装置包括:存储器、收发器、处理器以及总线系统;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括如下步骤:
接收多媒体信息播放指令;
根据所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息;
展示所述VR目标多媒体信息;
所述总线系统用于连接所述存储器以及所述处理器,以使所述存储器以及所述处理器进行通信。
本发明的第七方面提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述各方面所述的方法。
本发明实施例提供的技术方案中,提供了一种多媒体信息分享的方法,该方法应用于多媒体信息分享系统,多媒体信息分享系统包括第一多媒体信息分享装置、虚拟现实VR服务器以及第二多媒体信息分享装置,第一多媒体信息分享装置接收多媒体信息分享指令,然后根据多媒体信息分享指令确定待发送的多媒体信息,将多媒体信息发送至VR服务器,以使VR服务器向第二多媒体信息分享装置发送多媒体信息,其中,多媒体信息用于第二多媒体信息分享装置生成VR目标多媒体信息,并且展示VR目标多媒体信息,根据多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息。通过上述方式,将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
附图说明
图1为本发明实施例中多媒体信息分享系统的架构图;
图2为本发明实施例中多媒体信息分享的方法一个交互实施例示意图;
图3为本发明实施例中多媒体信息分享的方法一个实施例示意图;
图4为本发明实施例中映射用户输入的实施例示意图;
图5为本发明实施例中虚拟现实场景中用户拖动并生成文件的示意图;
图6为本发明实施例中生成虚拟现实图片的流程示意图;
图7为本发明实施例中预置矩形网格模型的示意图;
图8为本发明实施例中将第一贴图映射到预置矩形网格模型的示意图;
图9为本发明实施例中生成虚拟三维模型的流程示意图;
图10为本发明实施例中预置三维网格模型的顶点序列示意图;
图11为本发明实施例中3D音频的示意图;
图12为本发明实施例中多媒体信息分享的方法另一个实施例示意图;
图13为本发明应用场景中选择图片文件的示意图;
图14为本发明应用场景中选择三维模型文件的示意图;
图15为本发明应用场景中选择音频文件的示意图;
图16为本发明实施例中多媒体信息分享装置一个实施例示意图;
图17为本发明实施例中多媒体信息分享装置另一个实施例示意图;
图18为本发明实施例中多媒体信息分享装置一个实施例示意图;
图19为本发明实施例中多媒体信息分享装置另一个实施例示意图;
图20为本发明实施例中多媒体信息分享装置一个结构示意图;
图21为本发明实施例中多媒体信息分享装置一个结构示意图;
图22为本发明实施例中多媒体信息分享系统一个实施例示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应理解,本发明应用于多媒体信息分享系统,请参阅图1,图1为本发明实施例中多媒体信息分享系统的架构图,如图1所示,图中包括3个虚拟现实(Virtual Reality,VR)直播屏幕以及4位VR玩家仅为一个示意,在实际应用中,VR玩家的数量和VR显示屏的数量幕可以更多或者更少,故此处不作限定。
请参阅图1,整个VR多媒体文件的生成和分享的过程包括,作为主播的VR玩家首先通过个人电脑(personal computer,PC)上的VR显示桌面展示同步操作画面,其中,对PC而言,在展示VR显示桌面之前还应该外接有VR输出设备,以能够输出VR信号。例如在VR显示桌面上选择一个或者多个多媒体文件,通过PC将这一个或多个多媒体文件上传至服务器,服务器进而将多媒体文件转发至其他PC上。与此同时,在VR显示屏幕1上会采用VR技术展示出主播VR玩家所选择的多媒体文件,也就是以贴图形式渲染桌面至VR显示屏幕上。
其他的VR玩家从服务器实时接收主播PC上的桌面画面,解压还原原始多媒体文件,同样以贴图形式将画面渲染到场景的VR显示屏幕上。比如,观众A可以在本地的PC上请求服务器提供主播PC桌面上的画面,然后服务器能够根据观众A的请求,将主播PC桌面上的画面发送至VR显示屏幕2上,从而使得观众A在VR显示屏幕2上看到VR画面。
可以理解的是,VR显示屏幕可以就是VR显示桌面,也就是通过外接VR输出设备把VR显示桌面映射到VR显示屏幕上,以此成为一体。
VR技术是一种可以创建和体验虚拟世界的计算机仿真系统,它利用计算机生成一种模拟环境,是一种多源信息融合的,交互式的三维动态视景和实体行为的系统,使用户沉浸到该环境中。
为了便于理解,请参阅图2,图2为本发明实施例中多媒体信息分享的方法一个交互实施例示意图,结合图1和图2所示的内容,具体为:
步骤S101中,作为主播的VR玩家通过PC端上的VR显示桌面将多媒体文件拖放至VR显示桌面上的文件传送窗口;
步骤S102中,PC向VR显示屏发送本地分享文件路径,即文件窗口获得被拖放进窗口的多媒体文件的文件路径,再发送给场景中的VR显示屏;
步骤S103中,VR显示屏可以将用户本地多媒体文件以二进制形式读进内存,并分成不同的数据包;
步骤S104中,VR显示屏将发送本地文件的请求发送给服务器,使得服务器进行初始化;
步骤S105中,接收者准备接受多媒体文件,即服务器将分享者发送多媒体文件的消息发送给VR场景中全体其他接收者;
步骤S106中,由服务器确认初始化成功,并反馈至分享者;
步骤S107至步骤S110中,发送固定包字节流,确认发送消息后,分享者本地VR显示屏会起一个发送线程,每帧按服务器和用户端带宽能力发送一个包的文件字节流,服务器确认转发成功后会将消息再反馈给发送者,确认发送成功后,发送者继续发送下一个字节包的数据。整个直至分享文件全部发送完成;
步骤S111中,在VR场景下,分享者的VR显示屏生成多媒体交互文件;
步骤S112中,确认发送成功后,分享者的VR显示屏幕会根据收到的文件类型生成对应的交互文件;
步骤S113中,分享者对多媒体文件进行操作,并将操作的信息上传至服务器中;
步骤S114中,在VR场景下,接收者的VR显示屏生成多媒体交互文件;
步骤S115中,确认发送成功后,接收者的VR显示屏幕都会根据收到的文件类型生成对应的交互文件;
步骤S116中,接收者对多媒体文件进行操作,并将操作的信息上传至服务器中。
下面将从第一多媒体信息分享装置的角度,对本发明中多媒体信息分享的方法进行介绍,请参阅图3,本发明实施例中多媒体信息分享的方法一个实施例包括:
201、通过VR显示桌面接收多媒体信息分享指令,其中,VR显示桌面用于展示多媒体信息图标,多媒体信息分享指令用于选择多媒体信息图标,且多媒体信息图标与多媒体信息具有对应关系,其中,多媒体信息分享系统还包括虚拟现实VR服务器以及第二多媒体信息分享装置;
本实施例中,多媒体信息分享系统包括第一多媒体信息分享装置,至少一个第二多媒体信息分享装置以及VR服务器,其中,第一多媒体信息分享装置还可以包括三个部分,具体为控制器、VR显示屏和终端设备,终端设备可以是PC、笔记本电脑或者平板电脑等,此处不做限定。
首先,第一多媒体信息分享装置接收用户触发的多媒体信息分享指令,多媒体信息分享指令可以是一个点击指令,也可以是一个拖动指令,这里的用户具体是指多媒体信息的分享者或者主播。
在第一多媒体信息分享装置所包括的终端设备上具有VR显示桌面,用户可以通过该VR显示界面对界面上的多媒体信息图标进行操作,每个多媒体信息图标对应一个多媒体信息,比如图标A对应图片A,图标B对应视频B。
202、第一多媒体信息分享装置根据多媒体信息分享指令确定待发送的目标多媒体信息;
本实施例中,第一多媒体信息分享装置根据多媒体信息分享指令,确定对应的待发送的目标多媒体信息。例如,用户点击一个图片,即触发了多媒体信息分享指令,然后确定该图片即为待发送的目标多媒体信息。
203、将目标多媒体信息发送至VR服务器,以使VR服务器向第二多媒体信息分享装置发送目标多媒体信息,其中,多媒体信息用于第二多媒体信息分享装置生成目标多媒体信息所对应的VR目标多媒体信息,并且展示VR目标多媒体信息;
本实施例中,接下来第一多媒体信息分享装置将目标多媒体信息发送到VR服务器,VR服务器收到目标多媒体信息后,可以向第二多媒体信息分享装置发送该目标多媒体信息。第二多媒体信息分享装置可以根据目标多媒体信息生成对应的VR目标多媒体信息,进而展示该VR目标多媒体信息。
204、第一多媒体信息分享装置根据目标多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息。
本实施例中,第一多媒体信息分享装置也会根据多媒体信息生成VR目标多媒体信息,并且展示该VR目标多媒体信息。
本发明实施例提供的技术方案中,提供了一种多媒体信息分享的方法,通过将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
可选地,在上述图3对应的实施例的基础上,本发明实施例提供的多媒体信息分享的方法第一个可选实施例中,通过VR显示桌面接收多媒体信息分享指令,可以包括:
通过VR显示桌面获取屏幕比例值以及实时操作信息,其中,屏幕比例值用于表示空间坐标值与参考坐标值之间的比例,实时操作信息用于表示用户对控制器的操作;
根据屏幕比例值与实时操作信息生成多媒体信息分享指令。
本实施例中,在第一多媒体信息分享装置接收多媒体信息分享指令之后,还可以根据多媒体信息分享指令生成屏幕比例值和和实时操作信息,以结合两者确定待发送的多媒体信息。
请参阅图4,图4为本发明实施例中映射用户输入的实施例示意图,如图所示,用户与VR显示屏的交互是通过用户手部的控制器在VR场景中与VR显示屏矩形投影区域的交点来映射到用户本地终端的鼠标操作,具体步骤如下,首先根据多媒体信息分享指令获取控制器的射线与VR显示屏之间的空间坐标值,其中,控制器与VR显示屏都属于第一多媒体信息分享装置。控制器的射线与VR显示屏之间的空间坐标值为Pw(x,y,z),然后根据空间坐标值与VR显示屏的参考坐标值,确定屏幕比例值。
假设,VR显示屏的参考坐标值可以是屏幕左上角的点,即P0(x0,y0,z0),将坐标点Pw(x,y,z)根据屏幕左上点P0(x0,y0,z0)映射到屏幕的比例确定屏幕比例值,屏幕比例值为Ps(u,v)。
u=(x-x0)/w;
v=(y-y0)/h;
其中,w表示VR显示屏的宽度值,h表示VR显示屏的高度值。
根据计算Ps可以计算出用户实时鼠标位置Pm(um,vm),um=u×终端屏幕宽,vm=v×终端屏幕高。Ps即为屏幕比例值。
第一多媒体信息分享装置可以根据外设手部控制器上的按键映射鼠标的左键和右键,并捕捉映射得到鼠标按键单机,双击以及按下等状态,从而形成实时操作信息,有了鼠标位置和按键方式,即得到了屏幕比例值和实时操作信息,最后通过应用程序编程接口(Application Programming Interface,API)将用户鼠标位置Pm对应的用户点击操作映射为鼠标事件,以此确定鼠标事件对应的待发送的多媒体信息。
其次,本发明实施例中,介绍了如何根据用户触发的多媒体信息分享指令确定待发送的多媒体信息,即第一多媒体信息分享装置根据多媒体信息分享指令获取控制器的射线与VR显示屏之间的空间坐标值,然后根据空间坐标值与VR显示屏的参考坐标值,确定屏幕比例值,最后根据屏幕比例值、VR显示屏的宽度值和VR显示屏的高度值,获取屏幕比例值,此外,还根据多媒体信息分享指令获取实时操作信息,结合屏幕比例值与实时操作信息,确定待发送的多媒体信息。通过上述方式,提升了方案在实际应用中的可行性和可操作性。
可选地,在上述图3对应的实施例的基础上,本发明实施例提供的多媒体信息分享的方法第二个可选实施例中,根据多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息之后,还可以包括:
接收交互操作指令;
根据交互操作指令对VR目标多媒体信息进行操作,以生成交互操作信息,操作包括选中、移动、放大、缩小和播放中的至少一种;
向服务器发送交互操作信息,以使服务器向第二多媒体信息分享装置发送交互操作信息,其中,交互操作信息用于指示第二多媒体信息分享装置对VR目标多媒体信息进行操作。
本实施例中,在第一多媒体信息分享装置根据多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息之后,还可以进一步接收用户(分享者)对其进行的操作,该操作包括选中、移动、放大、缩小和播放中的至少一种。首先接收用户触发的交互操作指令,比如交互操作指令是移动VR图片这一动作,则第一多媒体信息分享装置根据这个动作,在本地的VR显示屏上执行相应的操作,即将VR图片从左移动到右。与此同时,第一多媒体信息分享装置会根据交互操作指令生成一个交互操作信息,交互操作信息中携带了用户操作的内容,例如“将VR图片从左移动到右”。于是,第一多媒体信息分享装置将向服务器发送交互操作信息,以使得服务器向第二多媒体信息分享装置发送该交互操作信息。
第二多媒体信息分享装置可以根据交互操作信息,对VR目标多媒体信息进行操作,也就是在接收者的VR显示屏上,也将该VR图片从左移动到右,从而达到同步展示VR目标多媒体信息的目的。
其次,本发明实施例中,第一多媒体信息分享装置展示VR目标多媒体信息之后,还可以接收交互操作指令,然后根据交互操作指令对VR目标多媒体信息进行操作,以生成交互操作信息,最后向服务器发送交互操作信息,服务器向第二多媒体信息分享装置发送交互操作信息。通过上述方式,分享者可以根据需求对VR目标多媒体信息进行相应的操作,这样的操作会形成交互操作信息,接收者根据交互操作信息对VR目标多媒体信息进行同样的操作,从而提升VR目标多媒体信息展示的灵活性和实用性,加强用户与VR目标多媒体信息之间的交互性。
为了便于理解,下面将说明如何在VR场景中生成VR目标多媒体信息,请参阅图5,图5为本发明实施例中虚拟现实场景中用户拖动并生成文件的示意图,如图所示,在用户通过VR显示屏进行本地操作之后,可以在终端桌面的右下方创造一个弹出式的窗口,该窗口可以接收用户在本地浏览器的文件拖拽操作,并且能够读取被拖放进窗口的文件路径。用户一旦将桌面文件拖放至窗口,就可以识别该桌面文件是否符合预先定义的文件格式(如图片、文本、三维模型和音频文件),并将文件打包发送给VR服务器,VR服务器给将其转发给VR场景中的第二多媒体信息分享装置。
当第二多媒体信息分享装置收到文件之后,会按文件类型生成可操作性物件供用户交互。具体的步骤如下:
通过VR显示屏展示操作桌面之后,用户就可以在VR场景之中打开桌面的资源管理器,就如正常鼠标操作那样拖动或者移动文件。同时会在桌面上生成一个“传送门窗口”,供用户将一些资源管理器内的多媒体文件(如图片、文本、三维模型和音频文件)拖放至该窗口,随后该窗口会进一步将文件在VR场景中生成预览,并形成可交互的物件。
可选地,在上述图3、图3对应的第一或第二个实施例的基础上,本发明实施例提供的多媒体信息分享的方法第三个可选实施例中,多媒体信息为图片文件;
根据目标多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息,可以包括:
根据图片文件创建对应的第一贴图,其中,第一贴图用于绑定图片文件中的图片数据;
将第一贴图映射到预置矩形网格模型,以获取VR图片;
通过VR显示屏展示VR图片。
本实施例中,将介绍在多媒体信息为图片文件的情况下是如何生成对应的VR图片。
具体地,请参阅图6,图6为本发明实施例中生成虚拟现实图片的流程示意图,如图所示,步骤301中,第一多媒体信息分享装置在图形处理器(Graphics Processing Unit,GPU)内根据图片大小格式类型动态地创建对应贴图内存,即创建第一贴图。步骤302中,可以将第一贴图按其格式读取内存,并按对应第一贴图格式将贴图数据绑定到GPU通道中。步骤303中,在VR场景内的特定位置生成一个矩形网格模型,请参阅图7,图7为本发明实施例中预置矩形网格模型的示意图,矩形的顶点UV按照如图7的方式进行排列。在步骤304中,有了如上的贴图之后我们可以将模型顶点按其UV坐标去采样贴图中的像素,并绘制于这一点上,如此以来贴图模型就可以实时映射到场景的矩形网格模型之上,即如图8所示,图8为本发明实施例中将第一贴图映射到预置矩形网格模型的示意图。
再次,本发明实施例中,若多媒体信息为图片文件,则可以根据图片文件创建对应的第一贴图,再将第一贴图映射到预置矩形网格模型,以获取VR图片,最后通过VR显示屏展示VR图片。通过上述方式,可以将普通的图片以VR图片的形式展示给用户观看和操作,以此增加方案的实用性和可行性。在VR场景中具有较强的多感知性、存在感和自主性。
可选地,在上述图3、图3对应的第一或第二个实施例的基础上,本发明实施例提供的多媒体信息分享的方法第四个可选实施例中,多媒体信息为三维模型文件;
根据目标多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息,可以包括:
根据三维模型文件创建对应的第二贴图,其中,第二贴图用于绑定三维模型文件中的三维模型数据;
将第二贴图映射到预置三维网格模型,以获取VR三维模型;
通过VR显示屏展示VR三维模型。
本实施例中,将介绍在多媒体信息为三维模型文件的情况下是如何生成对应的VR目标多媒体信息。三维模型在VR场景中的绘制与传统三维模型在游戏引擎中的绘制相似,区别在于用户分享的三维模型是在运行的过程中由第一多媒体信息分享装置实时的创建的。
具体地,请参阅图9,图9为本发明实施例中生成虚拟三维模型的流程示意图,如图所示,步骤401中,第一多媒体信息分享装置首先动态创建三维模型文件以及对应第二贴图。步骤402中,在渲染管线中,将预置三维网格模型的顶点流数据、面片序列数据以及模型对应的第二贴图读取至内存,并绑定至创建的模型以及贴图显存。请参阅图10,图10为本发明实施例中预置三维网格模型的顶点序列示意图。步骤403中,在特定位置绘制VR三维模型,并根据指定风格在GPU中对VR三维模型进行着色。
再次,本发明实施例中,若多媒体信息为三维模型文件,则第一多媒体信息分享装置可以根据三维模型文件创建对应的第二贴图,再将第二贴图映射到预置三维网格模型,以获取VR三维模型,最后通过VR显示屏展VR三维模型。通过上述方式,可以将普通的三维模型文件以VR三维模型的形式展示给用户观看和操作,以此增加方案的实用性和可行性。在VR场景中具有较强的多感知性、存在感和自主性。
可选地,在上述图3、图3对应的第一或第二个实施例的基础上,本发明实施例提供的多媒体信息分享的方法第五个可选实施例中,多媒体信息为音频文件;
根据目标多媒体信息生成VR目标多媒体信息,并且展示VR目标多媒体信息,可以包括:
将音频文件转换为3D音频文件;
播放3D音频文件。
本实施例中,如果分享者分享音频文件,则首先在本地确定待播放的音频文件,由第一多媒体信息分享装置将音频文件转换为3D音频文件,再通过播放器播放3D音频文件。
具体地,请参阅图11,图11为本发明实施例中3D音频的示意图,区别于图片和三维模型这类可视化物件,音频数据的浏览是靠播放其声音,不过由于是是VR项目,音频的播放也使用3D音频的形式,下面是对3D音频的解释。3D的音频需要实时计算场景中玩家(即分享者和接收者)的位置和场景音源头之间的位置关系,除了按距离衰减外,声音本身按照场景几何关系还有被遮挡,被反弹等等。
3D音频的效果可以用扬声器仿造出似乎存在但是虚构的声音。例如扬声器仿造头顶上有一架飞机从左至右飞过,闭上眼睛听,就会感觉到头顶真的有一架飞机从左至右飞过。这就是3D音频的效果。
再次,本发明实施例中,当发送方选择的是多媒体信息为音频文件时,第一多媒体信息分享装置可以将发送方选择的音频文件先转换成3D音频文件,然后播放该3D音频文件。通过上述方式,可以使得发送方和接收方都能在收听到更具有立体效果的3D音频,从而提升方案的实用性,并加强了用户体验。
上述实施例是从第一多媒体信息分享装置的角度的角度对本发明中多媒体信息分享的方法进行介绍,下面将从第二多媒体信息分享装置的角度,对本发明中多媒体信息分享的方法进行介绍,请参阅图12,本发明实施例中多媒体信息分享的方法一个实施例包括:
501、多媒体信息分享系统中的第二多媒体信息分享装置接收多媒体信息播放指令,其中,多媒体信息分享系统还包括第一多媒体信息分享装置以及虚拟现实VR服务器;
本实施例中,多媒体信息分享系统包括第一多媒体信息分享装置,第二多媒体信息分享装置以及服务器,其中,第二多媒体信息分享装置还可以包括三个部分,具体为控制器、VR显示屏和终端设备,终端设备可以是PC、笔记本电脑或者平板电脑等,此处不做限定。
首先,第二多媒体信息分享装置接收用户触发的多媒体信息播放指令,多媒体信息播放指令可以是一个点击指令,这里的用户具体是指目标多媒体信息的接收者。
502、第二多媒体信息分享装置根据多媒体信息播放指令,从VR服务器中获取目标多媒体信息,其中,目标多媒体信息为第一多媒体信息分享装置向VR服务器发送的,目标多媒体信息用于第一多媒体信息分享装置生成VR目标多媒体信息,并且展示VR目标多媒体信息;
本实施例中,第二多媒体信息分享装置根据多媒体信息播放指令,从VR服务器接收目标多媒体信息,其中,目标多媒体信息是第一多媒体信息分享装置预先向VR服务器发送的。与此同时,在第一多媒体信息分享装置也会根据目标多媒体信息生成对应的VR目标多媒体信息,并展示VR目标多媒体信息。
503、第二多媒体信息分享装置根据目标多媒体信息生成VR目标多媒体信息;
本实施例中,第二多媒体信息分享装置将本地的目标多媒体信息生成VR目标多媒体信息。
504、第二多媒体信息分享装置展示VR目标多媒体信息。
本实施例中,最后第二多媒体信息分享装置将渲染该VR目标多媒体信息并予以展示,从而使得接收者可以通过第二多媒体信息分享装置看到分享者分享的VR目标多媒体信息。
本发明实施例中,提供了一种多媒体信息分享的方法可以将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
可选地,在上述图12对应的实施例的基础上,本发明实施例提供的多媒体信息分享的方法第一个可选实施例中,展示VR目标多媒体信息之后,还可以包括:
接收交互操作指令;
根据交互操作指令对VR目标多媒体信息进行操作,以生成交互操作信息,操作包括选中、移动、放大、缩小和播放中的至少一种;
向服务器发送交互操作信息,以使服务器向第一多媒体信息分享装置发送交互操作信息,其中,交互操作信息用于指示第一多媒体信息分享装置对VR目标多媒体信息进行操作。
本实施例中,在第二多媒体信息分享装置展示VR目标多媒体信息之后,还可以进一步接收用户(接收者)对其进行的操作。首先接收用户触发的交互操作指令,比如交互操作指令是移动VR图片这一动作,则第一多媒体信息分享装置根据这个动作,在本地的VR显示屏上执行相应的操作,即将VR图片从上方移动到下方。与此同时,第二多媒体信息分享装置会根据交互操作指令生成一个交互操作信息,交互操作信息中携带了用户操作的内容,例如“将VR图片从上方移动到下方”。于是,第二多媒体信息分享装置将向服务器发送交互操作信息,以使得服务器向第一多媒体信息分享装置发送该交互操作信息。
第一多媒体信息分享装置可以根据交互操作信息,对VR目标多媒体信息进行操作,也就是在分享者的VR显示屏上,也将该VR图片从上方移动到下方,从而达到同步展示VR目标多媒体信息的目的。
其次,本发明实施例中,接收者可以根据需求对VR目标多媒体信息进行相应的操作,这样的操作会形成交互操作信息,分享者根据交互操作信息对VR目标多媒体信息进行同样的操作,从而提升VR目标多媒体信息展示的灵活性和实用性,加强用户与VR目标多媒体信息之间的交互性。
为便于理解,下面可以以具体应用场景对本发明中在生成VR目标多媒体信息的过程进行描述,例如,用户A想给用户B分享一张图片,于是用户A在PC端的VR显示桌面上选择一个图片文件,请参阅图13,图13为本发明应用场景中选择图片文件的示意图,如图所示,用户A可以在本地选择图片,然后PC会将该图片转换为VR图片,并投影在用户A本地的VR显示屏上,于是,用户A可以通过VR显示屏观看VR图片然后对其进行抓取投掷等交互操作。当然,用户A所选择的图片也会上传至VR服务器,该VR服务器向用户B的PC端发送用户A选择的图片,同样地,用户B本地的VR显示屏上也会显示这张VR图片。如果用户A对该图片进行放大操作,用户B也会在VR显示屏上看到该VR图片被放大了。
例如,用户A想给用户B分享一个三维模型,于是用户A在PC端的VR显示桌面上选择一个三维模型文件,请参阅图14,图14为本发明应用场景中选择三维模型文件的示意图,如图所示,用户A可以在本地选择三维模型文件,然后PC会将该三维模型文件转换为VR三维模型,并投影在用户A本地的VR显示屏上,于是,用户A可以通过VR显示屏观看VR三维模型后对其进行抓取投掷等交互操作。当然,用户A所选择的VR三维模型也会上传至VR服务器,该VR服务器向用户B的PC端发送用户A选择的VR三维模型,同样地,用户B本地的VR显示屏上也会显示这个VR三维模型。如果用户A对该VR三维模型进行投掷操作,用户B也会在VR显示屏上看到该VR三维模型被投掷。
例如,用户A想给用户B分享一段音乐,于是用户A在PC端的VR显示桌面上选择一个音乐文件,请参阅图15,图15为本发明应用场景中选择音频文件的示意图,如图所示,用户A可以在本地选择音频文件,然后PC会将该音频文件转换为3D音频,并通过播放设备进行播放,用户B可以从VR服务器中获取该3D音频,然后在用户B的本地播放设备上播放该3D音频。
下面对本发明中的多媒体信息分享装置进行详细描述,请参阅图16,本发明实施例中的多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统还包括虚拟现实VR服务器以及第二多媒体信息分享装置,所述多媒体信息分享装置60包括:
接收模块601,用于通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
确定模块602,用于根据所述接收模块601接收的所述多媒体信息分享指令确定待发送的目标多媒体信息;
发送模块603,用于将所述确定模块602确定的所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
展示模块604,用于根据所述确定模块603确定的所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
本实施例中,接收模块601通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系,确定模块602根据所述接收模块601接收的所述多媒体信息分享指令确定待发送的目标多媒体信息,发送模块603将所述确定模块602确定的所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息,展示模块604根据所述确定模块603确定的所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
本发明实施例提供的技术方案中,提供了一种多媒体信息分享的方法,通过将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
可选地,在上述图16所对应的实施例的基础上,本发明实施例提供的多媒体信息分享装置60的另一实施例中,多媒体信息分享装置60还包括:
所述接收模块601,具体用于通过所述VR显示桌面获取屏幕比例值以及实时操作信息,其中,所述屏幕比例值用于表示空间坐标值与参考坐标值之间的比例,所述实时操作信息用于表示用户对所述控制器的操作;
根据所述屏幕比例值与所述实时操作信息生成所述多媒体信息分享指令。
其次,本发明实施例中,介绍了如何根据用户触发的多媒体信息分享指令确定待发送的多媒体信息,即第一多媒体信息分享装置根据多媒体信息分享指令获取控制器的射线与VR显示屏之间的空间坐标值,然后根据空间坐标值与VR显示屏的参考坐标值,确定屏幕比例值,最后根据屏幕比例值、VR显示屏的宽度值和VR显示屏的高度值,获取屏幕比例值,此外,还根据多媒体信息分享指令获取实时操作信息,结合屏幕比例值与实时操作信息,确定待发送的多媒体信息。通过上述方式,提升了方案在实际应用中的可行性和可操作性。
可选地,在上述图16所对应的实施例的基础上,请参阅图17,本发明实施例提供的多媒体信息分享装置60的另一实施例中,多媒体信息分享装置60还包括生成模块605;
所述接收模块601,还用于所述展示模块604根据所述多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息之后,接收交互操作指令;
所述生成模块605,用于根据所述接收模块601接收的所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
所述发送模块603,还用于向所述服务器发送所述生成模块605生成的所述交互操作信息,以使所述服务器向所述第二多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第二多媒体信息分享装置对所述VR目标多媒体信息进行所述操作。
其次,本发明实施例中,第一多媒体信息分享装置展示VR目标多媒体信息之后,还可以接收交互操作指令,然后根据交互操作指令对VR目标多媒体信息进行操作,以生成交互操作信息,最后向服务器发送交互操作信息,服务器向第二多媒体信息分享装置发送交互操作信息。通过上述方式,分享者可以根据需求对VR目标多媒体信息进行相应的操作,这样的操作会形成交互操作信息,接收者根据交互操作信息对VR目标多媒体信息进行同样的操作,从而提升VR目标多媒体信息展示的灵活性和实用性,加强用户与VR目标多媒体信息之间的交互性。
可选地,在上述图16所对应的实施例的基础上,本发明实施例提供的多媒体信息分享装置60的另一实施例中,多媒体信息分享装置60还包括:
所述多媒体信息为图片文件;
所述展示模块604,具体用于根据所述图片文件创建对应的第一贴图,其中,所述第一贴图用于绑定所述图片文件中的图片数据;
将所述第一贴图映射到预置矩形网格模型,以获取VR图片;
通过所述VR显示屏展示所述VR图片。
再次,本发明实施例中,若多媒体信息为图片文件,则可以根据图片文件创建对应的第一贴图,再将第一贴图映射到预置矩形网格模型,以获取VR图片,最后通过VR显示屏展示VR图片。通过上述方式,可以将普通的图片以VR图片的形式展示给用户观看和操作,以此增加方案的实用性和可行性。在VR场景中具有较强的多感知性、存在感和自主性。
可选地,在上述图16所对应的实施例的基础上,本发明实施例提供的多媒体信息分享装置60的另一实施例中,多媒体信息分享装置60还包括:
所述多媒体信息为三维模型文件;
所述展示模块,具体用于根据所述三维模型文件创建对应的第二贴图,其中,所述第二贴图用于绑定所述三维模型文件中的三维模型数据;
将所述第二贴图映射到预置三维网格模型,以获取VR三维模型;
通过所述VR显示屏展示所述VR三维模型。
再次,本发明实施例中,若多媒体信息为三维模型文件,则第一多媒体信息分享装置可以根据三维模型文件创建对应的第二贴图,再将第二贴图映射到预置三维网格模型,以获取VR三维模型,最后通过VR显示屏展VR三维模型。通过上述方式,可以将普通的三维模型文件以VR三维模型的形式展示给用户观看和操作,以此增加方案的实用性和可行性。在VR场景中具有较强的多感知性、存在感和自主性。
可选地,在上述图16所对应的实施例的基础上,本发明实施例提供的多媒体信息分享装置60的另一实施例中,多媒体信息分享装置60还包括:
所述多媒体信息为音频文件;
所述展示模块,具体用于将所述音频文件转换为3D音频文件;
播放所述3D音频文件。
再次,本发明实施例中,当发送方选择的是多媒体信息为音频文件时,第一多媒体信息分享装置可以将发送方选择的音频文件先转换成3D音频文件,然后播放该3D音频文件。通过上述方式,可以使得发送方和接收方都能在收听到更具有立体效果的3D音频,从而提升方案的实用性,并加强了用户体验。
上面对本发明中的第一多媒体信息分享装置进行了介绍,下面将对本发明中的第二多媒体信息分享装置进行详细描述,请参阅图18,本发明实施例中的多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统还包括第一多媒体信息分享装置和虚拟现实VR服务器,多媒体信息分享装置70包括:
接收模块701,用于接收多媒体信息播放指令;
获取模块702,用于根据所述接收模块701接收的所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
生成模块703,用于根据所述获取模块702获取的所述目标多媒体信息生成所述VR目标多媒体信息;
展示模块704,用于展示所述生成模块703生成的所述VR目标多媒体信息。
本实施例中,接收模块701接收多媒体信息播放指令,获取模块702根据所述接收模块701接收的所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息,生成模块703根据所述获取模块702获取的所述目标多媒体信息生成所述VR目标多媒体信息,展示模块704展示所述生成模块703生成的所述VR目标多媒体信息。
本发明实施例中,提供了一种多媒体信息分享的方法可以将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
可选地,在上述图18所对应的实施例的基础上,请参阅图19,本发明实施例提供的多媒体信息分享装置70的另一实施例中,所述多媒体信息分享装置70还包括发送模块705;
所述接收模块701,还用于接收交互操作指令;
所述生成模块703,还用于根据所述接收模块701接收的所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
所述发送模块705,用于向所述服务器发送所述生成模块703生成的所述交互操作信息,以使所述服务器向所述第一多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第一多媒体信息分享装置对所述VR目标多媒体信息进行操作。
其次,本发明实施例中,接收者可以根据需求对VR目标多媒体信息进行相应的操作,这样的操作会形成交互操作信息,分享者根据交互操作信息对VR目标多媒体信息进行同样的操作,从而提升VR目标多媒体信息展示的灵活性和实用性,加强用户与VR目标多媒体信息之间的交互性。
图20是本发明实施例多媒体信息分享装置80的结构示意图。多媒体信息分享装置80可包括输入设备810、输出设备820、处理器830和存储器840。本发明实施例中的输出设备可以是显示设备。
存储器840可以包括只读存储器和随机存取存储器,并向处理器830提供指令和数据。存储器840的一部分还可以包括非易失性随机存取存储器(Non-Volatile RandomAccess Memory,NVRAM)。
存储器840存储了如下的元素,可执行模块或者数据结构,或者它们的子集,或者它们的扩展集:
操作指令:包括各种操作指令,用于实现各种操作。
操作系统:包括各种系统程序,用于实现各种基础业务以及处理基于硬件的任务。
本发明实施例中处理器830用于执行如下步骤:
通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
根据所述多媒体信息分享指令确定待发送的目标多媒体信息;
将所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
处理器830具体用于执行如下步骤:
通过所述VR显示桌面获取屏幕比例值以及实时操作信息,其中,所述屏幕比例值用于表示空间坐标值与参考坐标值之间的比例,所述实时操作信息用于表示用户对所述控制器的操作;
根据所述屏幕比例值与所述实时操作信息生成所述多媒体信息分享指令。
处理器830具体还用于执行如下步骤:
接收交互操作指令;
根据所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
向所述服务器发送所述交互操作信息,以使所述服务器向所述第二多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第二多媒体信息分享装置对所述VR目标多媒体信息进行所述操作。
处理器830具体用于执行如下步骤:
根据所述图片文件创建对应的第一贴图,其中,所述第一贴图用于绑定所述图片文件中的图片数据;
将所述第一贴图映射到预置矩形网格模型,以获取VR图片;
通过所述VR显示屏展示所述VR图片。
处理器830具体用于执行如下步骤:
根据所述三维模型文件创建对应的第二贴图,其中,所述第二贴图用于绑定所述三维模型文件中的三维模型数据;
将所述第二贴图映射到预置三维网格模型,以获取VR三维模型;
通过所述VR显示屏展示所述VR三维模型。
处理器830具体用于执行如下步骤:
将所述音频文件转换为3D音频文件;
播放所述3D音频文件。
处理器830控制多媒体信息分享装置80的操作,处理器830还可以称为中央处理单元(Central Processing Unit,CPU)。存储器840可以包括只读存储器和随机存取存储器,并向处理器830提供指令和数据。存储器840的一部分还可以包括NVRAM。具体的应用中,多媒体信息分享装置80的各个组件通过总线系统850耦合在一起,其中总线系统850除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统850。
上述本发明实施例揭示的方法可以应用于处理器830中,或者由处理器830实现。处理器830可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器830中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器830可以是通用处理器、数字信号处理器(Digital Signal Processing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器840,处理器830读取存储器840中的信息,结合其硬件完成上述方法的步骤。
图20的相关描述可以参阅图3方法部分的相关描述和效果进行理解,本处不做过多赘述。
图21是本发明实施例多媒体信息分享装置90的结构示意图。多媒体信息分享装置90可包括输入设备910、输出设备920、处理器930和存储器940。本发明实施例中的输出设备可以是显示设备。
存储器940可以包括只读存储器和随机存取存储器,并向处理器930提供指令和数据。存储器840的一部分还可以包括NVRAM。
存储器940存储了如下的元素,可执行模块或者数据结构,或者它们的子集,或者它们的扩展集:
操作指令:包括各种操作指令,用于实现各种操作。
操作系统:包括各种系统程序,用于实现各种基础业务以及处理基于硬件的任务。
本发明实施例中处理器930用于执行如下步骤:
接收多媒体信息播放指令;
根据所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息;
展示所述VR目标多媒体信息。
所述处理器930还用于执行如下步骤:
接收交互操作指令;
根据所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
向所述服务器发送所述交互操作信息,以使所述服务器向所述第一多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第一多媒体信息分享装置对所述VR目标多媒体信息进行操作。
处理器930控制多媒体信息分享装置80的操作,处理器830还可以称为CPU。存储器940可以包括只读存储器和随机存取存储器,并向处理器930提供指令和数据。存储器940的一部分还可以包括NVRAM。具体的应用中,多媒体信息分享装置90的各个组件通过总线系统950耦合在一起,其中总线系统950除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统950。
上述本发明实施例揭示的方法可以应用于处理器930中,或者由处理器830实现。处理器930可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器930中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器930可以是通用处理器、DSP、ASIC、FPGA或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器940,处理器930读取存储器940中的信息,结合其硬件完成上述方法的步骤。
图21的相关描述可以参阅图12方法部分的相关描述和效果进行理解,本处不做过多赘述。
请参阅图22,图22为本发明实施例中多媒体信息分享系统一个实施例示意图,多媒体信息分享系统包括第一多媒体信息分享装置1003、虚拟现实VR服务器1002以及第二多媒体信息分享装置1001,多媒体信息分享系统包括:
第一多媒体信息分享装置1003通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系,第一多媒体信息分享装置1003根据所述多媒体信息分享指令确定待发送的目标多媒体信息,第一多媒体信息分享装置1003将所述目标多媒体信息发送至所述VR服务器1002,以使所述VR服务器1002向所述第二多媒体信息分享装置1001发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置1001生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息,第一多媒体信息分享装置1003根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
本发明实施例提供的技术方案中,提供了一种多媒体信息分享系统。采用该系统,可以将多媒体信息处理成VR目标多媒体信息,从而使得信息接收方与信息发送方均可以在虚拟现实环境中看到VR目标多媒体信息,VR目标多媒体信息具有较好的灵活性和多样性,有利于提升信息分享的交互性。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(Digital Subscriber Line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (17)
1.一种多媒体信息分享的方法,其特征在于,所述方法应用于多媒体信息分享系统,所述多媒体信息分享系统包括第一多媒体信息分享装置、虚拟现实VR服务器以及第二多媒体信息分享装置,所述方法包括:
通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
根据所述多媒体信息分享指令确定待发送的目标多媒体信息;
将所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
2.根据权利要求1所述的方法,其特征在于,所述通过VR显示桌面接收多媒体信息分享指令,包括:
通过所述VR显示桌面获取屏幕比例值以及实时操作信息,其中,所述屏幕比例值用于表示空间坐标值与参考坐标值之间的比例,所述实时操作信息用于表示用户对所述控制器的操作;
根据所述屏幕比例值与所述实时操作信息生成所述多媒体信息分享指令。
3.根据权利要求1所述的方法,其特征在于,所述根据所述多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息之后,所述方法还包括:
接收交互操作指令;
根据所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
向所述服务器发送所述交互操作信息,以使所述服务器向所述第二多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第二多媒体信息分享装置对所述VR目标多媒体信息进行所述操作。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述多媒体信息为图片文件;
所述根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息,包括:
根据所述图片文件创建对应的第一贴图,其中,所述第一贴图用于绑定所述图片文件中的图片数据;
将所述第一贴图映射到预置矩形网格模型,以获取VR图片;
通过所述VR显示屏展示所述VR图片。
5.根据权利要求1至3中任一项所述的方法,其特征在于,所述多媒体信息为三维模型文件;
所述根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息,包括:
根据所述三维模型文件创建对应的第二贴图,其中,所述第二贴图用于绑定所述三维模型文件中的三维模型数据;
将所述第二贴图映射到预置三维网格模型,以获取VR三维模型;
通过所述VR显示屏展示所述VR三维模型。
6.根据权利要求1至3中任一项所述的方法,其特征在于,所述多媒体信息为音频文件;
所述根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息,包括:
将所述音频文件转换为3D音频文件;
播放所述3D音频文件。
7.一种多媒体信息分享的方法,其特征在于,所述方法应用于多媒体信息分享系统,所述多媒体信息分享系统包括第一多媒体信息分享装置、虚拟现实VR服务器以及第二多媒体信息分享装置,所述方法包括:
接收多媒体信息播放指令;
根据所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息;
展示所述VR目标多媒体信息。
8.根据权利要求7所述的方法,其特征在于,所述展示所述VR目标多媒体信息之后,所述方法还包括:
接收交互操作指令;
根据所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
向所述服务器发送所述交互操作信息,以使所述服务器向所述第一多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第一多媒体信息分享装置对所述VR目标多媒体信息进行操作。
9.一种多媒体信息分享装置,其特征在于,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统包括虚拟现实VR服务器以及第二多媒体信息分享装置,所述多媒体信息分享装置包括:
接收模块,用于通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
确定模块,用于根据所述接收模块接收的所述多媒体信息分享指令确定待发送的目标多媒体信息;
发送模块,用于将所述确定模块确定的所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
展示模块,用于根据所述确定模块确定的所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息。
10.一种多媒体信息分享装置,其特征在于,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统包括虚拟现实VR服务器以及第一多媒体信息分享装置,所述多媒体信息分享装置包括:
接收模块,用于接收多媒体信息播放指令;
获取模块,用于根据所述接收模块接收的所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
生成模块,用于根据所述获取模块获取的所述目标多媒体信息生成所述VR目标多媒体信息;
展示模块,用于展示所述生成模块生成的所述VR目标多媒体信息。
11.一种多媒体信息分享装置,其特征在于,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统还包括虚拟现实VR服务器以及第二多媒体信息分享装置,所述多媒体信息分享装置包括:存储器、收发器、处理器以及总线系统;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括如下步骤:
通过VR显示桌面接收多媒体信息分享指令,其中,所述VR显示桌面用于展示多媒体信息图标,所述多媒体信息分享指令用于选择所述多媒体信息图标,且所述多媒体信息图标与多媒体信息具有对应关系;
根据所述多媒体信息分享指令确定待发送的目标多媒体信息;
将所述目标多媒体信息发送至所述VR服务器,以使所述VR服务器向所述第二多媒体信息分享装置发送所述目标多媒体信息,其中,所述多媒体信息用于所述第二多媒体信息分享装置生成所述目标多媒体信息所对应的VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息,并且展示所述VR目标多媒体信息;
所述总线系统用于连接所述存储器以及所述处理器,以使所述存储器以及所述处理器进行通信。
12.根据权利要求11所述的多媒体信息分享装置,其特征在于,所述处理器还用于执行如下步骤:
通过所述VR显示桌面获取屏幕比例值以及实时操作信息,其中,所述屏幕比例值用于表示空间坐标值与参考坐标值之间的比例,所述实时操作信息用于表示用户对所述控制器的操作;
根据所述屏幕比例值与所述实时操作信息生成所述多媒体信息分享指令。
13.根据权利要求11所述的多媒体信息分享装置,其特征在于,所述处理器还用于执行如下步骤:
接收交互操作指令;
根据所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
向所述服务器发送所述交互操作信息,以使所述服务器向所述第二多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第二多媒体信息分享装置对所述VR目标多媒体信息进行所述操作。
14.一种多媒体信息分享装置,其特征在于,所述多媒体信息分享装置应用于多媒体信息分享系统,所述多媒体信息分享系统还包括虚拟现实VR服务器以及第一多媒体信息分享装置,所述多媒体信息分享装置包括:存储器、收发器、处理器以及总线系统;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括如下步骤:
接收多媒体信息播放指令;
根据所述多媒体信息播放指令,从所述VR服务器中获取目标多媒体信息,其中,所述目标多媒体信息为所述第一多媒体信息分享装置向所述VR服务器发送的,所述目标多媒体信息用于所述第一多媒体信息分享装置生成VR目标多媒体信息,并且展示所述VR目标多媒体信息;
根据所述目标多媒体信息生成所述VR目标多媒体信息;
展示所述VR目标多媒体信息;
所述总线系统用于连接所述存储器以及所述处理器,以使所述存储器以及所述处理器进行通信。
15.根据权利要求14所述的多媒体信息分享装置,其特征在于,所述处理器还用于执行如下步骤:
接收交互操作指令;
根据所述交互操作指令对所述VR目标多媒体信息进行操作,以生成交互操作信息,所述操作包括选中、移动、放大、缩小和播放中的至少一种;
向所述服务器发送所述交互操作信息,以使所述服务器向所述第一多媒体信息分享装置发送所述交互操作信息,其中,所述交互操作信息用于指示所述第一多媒体信息分享装置对所述VR目标多媒体信息进行操作。
16.一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行如权利要求1-6所述的方法。
17.一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行如权利要求7-8所述的方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2017/119786 WO2019127349A1 (zh) | 2017-12-29 | 2017-12-29 | 一种多媒体信息分享的方法、相关装置及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109644181A true CN109644181A (zh) | 2019-04-16 |
CN109644181B CN109644181B (zh) | 2021-02-26 |
Family
ID=66053538
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780048513.1A Active CN109644181B (zh) | 2017-12-29 | 2017-12-29 | 一种多媒体信息分享的方法、相关装置及系统 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10965783B2 (zh) |
CN (1) | CN109644181B (zh) |
WO (1) | WO2019127349A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111782056A (zh) * | 2020-08-18 | 2020-10-16 | Oppo广东移动通信有限公司 | 内容分享方法、装置、设备及存储介质 |
CN114189946A (zh) * | 2020-09-15 | 2022-03-15 | 华为技术有限公司 | 数据分享的方法、电子设备和系统 |
CN116700659A (zh) * | 2022-09-02 | 2023-09-05 | 荣耀终端有限公司 | 一种界面交互方法及电子设备 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112218145A (zh) * | 2020-10-15 | 2021-01-12 | 聚好看科技股份有限公司 | 智能电视、vr显示设备以及相关方法 |
CN112437090B (zh) * | 2020-11-27 | 2022-11-04 | 深圳市商汤科技有限公司 | 资源加载方法及装置、电子设备和存储介质 |
CN113794795B (zh) * | 2021-08-13 | 2023-01-10 | 维沃移动通信有限公司 | 信息共享方法、装置、电子设备及可读存储介质 |
CN114253394B (zh) * | 2021-11-10 | 2024-02-27 | 深圳市华阳国际工程设计股份有限公司 | 一种基于bim平台的vr审图方法及系统 |
CN114942812B (zh) * | 2022-05-31 | 2024-04-30 | 上海嘉车信息科技有限公司 | 多媒体信息共享方法、装置和电子设备 |
WO2024021036A1 (zh) * | 2022-07-29 | 2024-02-01 | 京东方科技集团股份有限公司 | 模型控制方法、装置、设备、系统以及计算机存储介质 |
US12022233B2 (en) * | 2022-08-23 | 2024-06-25 | International Business Machines Corporation | Web conference contact routing |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110216002A1 (en) * | 2010-03-05 | 2011-09-08 | Sony Computer Entertainment America Llc | Calibration of Portable Devices in a Shared Virtual Space |
CN102650906A (zh) * | 2012-04-06 | 2012-08-29 | 深圳创维数字技术股份有限公司 | 一种用户界面的控制方法及装置 |
CN103257813A (zh) * | 2012-02-21 | 2013-08-21 | 海尔集团公司 | 一种共享设备的确定方法和文件传输方法以及系统 |
CN103488356A (zh) * | 2013-10-18 | 2014-01-01 | 武汉拓宝电子系统有限公司 | 一种基于红外摄像头三维成像的触摸识别方法 |
CN105610868A (zh) * | 2016-03-03 | 2016-05-25 | 腾讯科技(深圳)有限公司 | 一种信息交互的方法、设备及系统 |
CN105872723A (zh) * | 2015-12-28 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 基于虚拟现实系统的视频分享方法及装置 |
CN105892686A (zh) * | 2016-05-05 | 2016-08-24 | 刘昊 | 一种3d虚拟现实广播交互方法及系统 |
CN105955461A (zh) * | 2016-04-25 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种交互界面管理方法和系统 |
CN106034114A (zh) * | 2015-03-12 | 2016-10-19 | 腾讯科技(深圳)有限公司 | 多媒体信息分享方法及装置 |
CN106790553A (zh) * | 2016-12-24 | 2017-05-31 | 珠海市魅族科技有限公司 | 虚拟现实设备的界面共享方法和装置 |
CN106973330A (zh) * | 2017-03-20 | 2017-07-21 | 腾讯科技(深圳)有限公司 | 一种屏幕直播方法、装置和系统 |
CN107168530A (zh) * | 2017-04-26 | 2017-09-15 | 腾讯科技(深圳)有限公司 | 虚拟场景中的对象处理方法和装置 |
US20170324841A1 (en) * | 2016-05-05 | 2017-11-09 | Google Inc. | Sharing in an augmented and/or virtual reality environment |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4935345B2 (ja) * | 2006-12-25 | 2012-05-23 | ソニー株式会社 | コンテンツ再生システム、再生装置、再生制御方法及びプログラム |
US8167724B2 (en) * | 2007-12-10 | 2012-05-01 | Gary Stephen Shuster | Guest management in an online multi-player virtual reality game |
KR101195885B1 (ko) * | 2008-03-03 | 2012-10-30 | 삼성전자주식회사 | 무선 오디오 출력장치 및 이를 포함하는 무선 오디오출력시스템과 이의 제어방법 |
KR101306288B1 (ko) * | 2010-09-30 | 2013-09-09 | 주식회사 팬택 | 가상 객체를 이용한 증강 현실 제공 장치 및 방법 |
KR101491045B1 (ko) * | 2013-09-25 | 2015-02-10 | 주식회사 픽스트리 | 컨텐츠 공유 장치 및 방법 |
US10567449B2 (en) * | 2016-02-17 | 2020-02-18 | Meta View, Inc. | Apparatuses, methods and systems for sharing virtual elements |
KR20170097980A (ko) * | 2016-02-19 | 2017-08-29 | 삼성전자주식회사 | 전자 장치의 컨텐트 그룹 공유 방법 및 그 전자 장치 |
CN105898694A (zh) * | 2016-04-06 | 2016-08-24 | 众景视界(北京)科技有限公司 | 用于定位及信息交互的方法、头戴式可视设备及服务器 |
CN106358090B (zh) * | 2016-08-26 | 2019-03-05 | 腾讯科技(深圳)有限公司 | 虚拟现实视频播放方法和装置、视频投射方法和装置 |
CN106385587B (zh) * | 2016-09-14 | 2019-08-02 | 三星电子(中国)研发中心 | 分享虚拟现实视角的方法、装置及系统 |
CN106791699A (zh) * | 2017-01-18 | 2017-05-31 | 北京爱情说科技有限公司 | 一种远程头戴交互式视频共享系统 |
CN107085611A (zh) * | 2017-05-14 | 2017-08-22 | 深圳游视虚拟现实技术有限公司 | 一种虚拟现实游戏视频分享方法 |
CN106941538A (zh) * | 2017-05-15 | 2017-07-11 | 百度在线网络技术(北京)有限公司 | 信息显示系统、方法和装置 |
-
2017
- 2017-12-29 CN CN201780048513.1A patent/CN109644181B/zh active Active
- 2017-12-29 WO PCT/CN2017/119786 patent/WO2019127349A1/zh active Application Filing
-
2020
- 2020-04-28 US US16/860,905 patent/US10965783B2/en active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110216002A1 (en) * | 2010-03-05 | 2011-09-08 | Sony Computer Entertainment America Llc | Calibration of Portable Devices in a Shared Virtual Space |
CN103257813A (zh) * | 2012-02-21 | 2013-08-21 | 海尔集团公司 | 一种共享设备的确定方法和文件传输方法以及系统 |
CN102650906A (zh) * | 2012-04-06 | 2012-08-29 | 深圳创维数字技术股份有限公司 | 一种用户界面的控制方法及装置 |
CN103488356A (zh) * | 2013-10-18 | 2014-01-01 | 武汉拓宝电子系统有限公司 | 一种基于红外摄像头三维成像的触摸识别方法 |
CN106034114A (zh) * | 2015-03-12 | 2016-10-19 | 腾讯科技(深圳)有限公司 | 多媒体信息分享方法及装置 |
CN105872723A (zh) * | 2015-12-28 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 基于虚拟现实系统的视频分享方法及装置 |
CN105610868A (zh) * | 2016-03-03 | 2016-05-25 | 腾讯科技(深圳)有限公司 | 一种信息交互的方法、设备及系统 |
CN105955461A (zh) * | 2016-04-25 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种交互界面管理方法和系统 |
CN105892686A (zh) * | 2016-05-05 | 2016-08-24 | 刘昊 | 一种3d虚拟现实广播交互方法及系统 |
US20170324841A1 (en) * | 2016-05-05 | 2017-11-09 | Google Inc. | Sharing in an augmented and/or virtual reality environment |
CN106790553A (zh) * | 2016-12-24 | 2017-05-31 | 珠海市魅族科技有限公司 | 虚拟现实设备的界面共享方法和装置 |
CN106973330A (zh) * | 2017-03-20 | 2017-07-21 | 腾讯科技(深圳)有限公司 | 一种屏幕直播方法、装置和系统 |
CN107168530A (zh) * | 2017-04-26 | 2017-09-15 | 腾讯科技(深圳)有限公司 | 虚拟场景中的对象处理方法和装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111782056A (zh) * | 2020-08-18 | 2020-10-16 | Oppo广东移动通信有限公司 | 内容分享方法、装置、设备及存储介质 |
CN114189946A (zh) * | 2020-09-15 | 2022-03-15 | 华为技术有限公司 | 数据分享的方法、电子设备和系统 |
CN116700659A (zh) * | 2022-09-02 | 2023-09-05 | 荣耀终端有限公司 | 一种界面交互方法及电子设备 |
CN116700659B (zh) * | 2022-09-02 | 2024-03-08 | 荣耀终端有限公司 | 一种界面交互方法及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2019127349A1 (zh) | 2019-07-04 |
US20200259931A1 (en) | 2020-08-13 |
CN109644181B (zh) | 2021-02-26 |
US10965783B2 (en) | 2021-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109644181A (zh) | 一种多媒体信息分享的方法、相关装置及系统 | |
US10271013B2 (en) | Display control method and apparatus | |
JP4901261B2 (ja) | 高品質なユーザーインターフェイスによる効率的な遠隔表示を行なうシステム | |
US9526994B2 (en) | Deferred teleportation or relocation in virtual worlds | |
US7290216B1 (en) | Method and apparatus for implementing a scene-graph-aware user interface manager | |
CN107852573B (zh) | 混合现实社交交互 | |
US11494993B2 (en) | System and method to integrate content in real time into a dynamic real-time 3-dimensional scene | |
CN1819648B (zh) | 处理视频效果的方法和系统 | |
JP2023502583A (ja) | 仮想アイテムの処理方法及び装置 | |
EP2685715B1 (en) | Method and device for managing video resources in video conference | |
US8363051B2 (en) | Non-real-time enhanced image snapshot in a virtual world system | |
JP2009140492A (ja) | 実世界の物体およびインタラクションを仮想世界内にレンダリングする方法、システムおよびコンピュータ・プログラム | |
KR20110134940A (ko) | 애플리케이션 공유 | |
CN112370780A (zh) | 虚拟控件的显示方法和装置、存储介质及电子设备 | |
JP2021002699A (ja) | 動画配信システム、情報処理方法およびコンピュータプログラム | |
JP6902133B2 (ja) | 動画配信システム、情報処理方法およびコンピュータプログラム | |
JP6975370B1 (ja) | 画像表示方法、プログラム及びデータ生成方法 | |
JP7095162B2 (ja) | 動画配信システム、情報処理方法およびコンピュータプログラム | |
WO2023071630A1 (zh) | 基于增强显示的信息交互方法、装置、设备和介质 | |
JP2023012486A (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
KR20180104915A (ko) | 3차원 가상공간 애니메이션 구현 시스템 | |
JP7029118B2 (ja) | 画像表示方法、画像表示システム、及び画像表示プログラム | |
KR102674102B1 (ko) | 비주얼 네트워크 서비스 처리 방법 및 장치 | |
Steed et al. | Construction of collaborative virtual environments | |
KR20230153469A (ko) | 3d 오브젝트에 관한 유저 입력의 해석 방법, 장치, 및 프로그램 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |