CN106412682A - 增强现实的信息传输方法 - Google Patents
增强现实的信息传输方法 Download PDFInfo
- Publication number
- CN106412682A CN106412682A CN201610125063.9A CN201610125063A CN106412682A CN 106412682 A CN106412682 A CN 106412682A CN 201610125063 A CN201610125063 A CN 201610125063A CN 106412682 A CN106412682 A CN 106412682A
- Authority
- CN
- China
- Prior art keywords
- information
- image
- augmented reality
- reality equipment
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 222
- 238000000034 method Methods 0.000 title claims abstract description 49
- 230000005540 biological transmission Effects 0.000 title abstract description 9
- 210000001525 retina Anatomy 0.000 claims description 32
- 230000033001 locomotion Effects 0.000 claims description 29
- 230000001360 synchronised effect Effects 0.000 claims description 12
- 230000000007 visual effect Effects 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 3
- 230000005611 electricity Effects 0.000 claims description 3
- 230000002708 enhancing effect Effects 0.000 claims 2
- 238000012546 transfer Methods 0.000 description 10
- 230000008439 repair process Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000005484 gravity Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000034994 death Effects 0.000 description 1
- 231100000517 death Toxicity 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W56/00—Synchronisation arrangements
- H04W56/001—Synchronization between nodes
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种增强现实的信息传输方法和装置。其中,该方法包括:第一增强现实设备实时捕捉第一增强现实设备的预定范围内的第一信息,并将所述第一信息同步至第二增强现实设备,其中,所述第一增强现实设备为向第一用户提供增强现实信息的设备;所述第一增强现实设备将第一信息同步至第二增强现实设备,所述第二增强现实设备为向第二用户提供增强现实信息的设备;所述第一增强现实设备接收来自所述第二增强现实设备的第二信息,其中,所述第二信息为所述第二用户基于所述第二增强现实设备对所述第一信息进行操作并实时回传的信息;以及所述第一增强现实设备展示所述第二信息。
Description
技术领域
本发明涉及信息传输领域,具体而言,涉及一种增强现实的信息传输方法和装置。
背景技术
增强现实(Augmented Reality,简称AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
目前,利用AR的技术比较成熟的是Microsoft hololens全息眼镜,使用者可以通过hololens实现观看虚拟对象,该虚拟对象可以是由计算机生成的效果叠加于现实世界之上的。
不过,hololens仅支持将计算机生成的效果叠加于现实世界之上,提供给单端使用者进行观看或与之互动,却不能实现多个使用者之间的相互互动,造成基于增强现实进行信息传输的局限性较大。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种增强现实的信息传输方法,以至少解决现有技术中基于增强现实进行信息传输的局限性较大的技术问题。
根据本发明实施例的一个方面,提供了一种增强现实的信息传输方法。包括:第一增强现实设备实时捕捉第一增强现实设备的预定范围内的第一信息,并将所述第一信息同步至第二增强现实设备,其中,所述第一增强现实设备为向第一用户提供增强现实信息的设备;所述第一增强现实设备将第一信息同步至第二增强现实设备,所述第二增强现实设备为向第二用户提供增强现实信息的设备;所述第一增强现实设备接收来自所述第 二增强现实设备的第二信息,其中,所述第二信息为所述第二用户基于所述第二增强现实设备对所述第一信息进行操作并实时回传的信息;以及所述第一增强现实设备展示所述第二信息,其中所述展示第二信息的手段包括声、光、电、热、机械运动中的任一方式及其任意组合。
根据本发明另一实施例,通过所述第一增强现实设备展示所述第二信息包括:判断所述第二信息与所述第一信息是否一致;在判断出所述第二信息与所述第一信息一致的情况下,利用所述第一增强现实设备展示所述第一信息;以及在判断出所述第二信息与所述第一信息不一致的情况下,利用所述第一增强现实设备叠加所述第二信息至所述第一信息,并展示叠加后的信息。
根据本发明另一实施例,利用所述第一增强现实设备叠加所述第二信息至所述第一信息包括:所述第一信息为第一影像,所述第二信息为第二影像,识别所述第二影像相对所述第一影像的第一差异影像;转换所述第一差异影像为基于所述第一增强现实设备的展示角度的第二差异影像;以及叠加所述第二差异影像至所述第一影像。
根据本发明另一实施例,实时捕捉第一增强现实设备的预定像范围内的第一信息包括:所述第一信息包括第一影像;检测所述第一用户的第一视网膜成像角度;以及按照所述第一视网膜成像角度实时捕捉所述第一影像。
根据本发明另一实施例,,所述第一信息为第一影像,所述第一增强现实设备的预定范围为所述第一用户的视线范围。
根据本发明另一实施例,在将第一增强现实设备将第一信息同步至第二增强现实设备之后,并在第一增强现实设备接收来自所述第二增强现实设备的第二信息之前,所述方法还包括:所述第一信息包括第一影像;记录所述第二用户操作的虚拟影像和对所述虚拟影像的操作动作,其中,所述虚拟影像为所述第二增强现实设备提供给所述第二用户的影像,并且所 述虚拟影像包括所述第一影像;以及叠加表示所述操作动作的影像和所述虚拟影像,得到所述第二影像。
根据本发明另一实施例,记录所述第二用户操作的虚拟影像和对所述虚拟影像的操作动作包括:检测所述第二用户的第二视网膜成像角度;以及按照所述第二视网膜成像角度记录所述虚拟影像和所述操作动作。
根据本发明另一实施例,按照所述第二视网膜成像角度记录所述虚拟影像和所述操作动作包括:按照所述第二视网膜成像角度,在所述第二增强现实设备的影像范围内记录所述虚拟影像和所述操作动作。
根据本发明另一实施例,所述第二增强现实设备的影像范围为所述第二用户的视线范围。
根据本发明另一实施例,第一增强现实设备直接通过网络将第一信息传输给第二增强现实设备,或者将第一信息传输给服务器,经由服务器处理后,再由服务器将第一信息传输给第二增强现实设备。
在本发明实施例中,采用实时捕捉第一增强现实设备的预定范围内的第一信息,第一增强现实设备将第一信息同步至第二增强现实设备,第一增强现实设备接收来自第二增强现实设备的第二影像,以及通过第一增强现实设备展示第二信息,通过将第一用户的第一信息进行实时捕捉并传输至第二用户,第二用户对第一信息进行操作,得到第二信息,将第二信息实时展示给第一用户,达到了实时捕捉影像、并传输影像给对方的目的,同时,通过第一增强现实设备和第二增强现实设备以及服务器对传输的信息进行处理加工,从而实现了使不同用户实时互动的技术效果,进而解决了现有技术中基于增强现实进行信息传输的局限性较大的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发 明的不当限定。在附图中:
图1是根据本发明实施例的增强现实的信息传输方法所应用的硬件环境的示意图;
图2是根据本发明实施例的增强现实的信息传输方法的流程图;
图3是根据本发明实施例的实施增强现实的信息传输方法的移动终端的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种可以通过本发明装置实施例执行的方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的 步骤。
根据本发明实施例,提供了一种增强现实的信息传输方法。
可选地,在本实施例中,上述增强现实的信息传输方法可以应用于如图1所示的第一增强现实设备102、网络104、第二增强现实设备106以及服务器108所构成的硬件环境中。如图1所示,第一增强现实设备102可以通过网络104直接与第二增强现实设备106进行通信连接,上述网络包括但不限于:移动通信网络、广域网、城域网或局域网;第一增强现实设备102和第二增强现实设备106还可以分别同服务器相连接,并通过服务器对第一增强现实设备102或第二增强现实设备106发送的信息进行处理后再传输给第二增强现实设备106或第一增强现实设备102。第一增强现实设备102和第二增强现实设备104均可以是增强现实设备,虚拟现实设备等。在本实施例中,第一增强现实设备102和第二增强现实设备104均以头戴眼镜式增强现实设备为例进行说明。第一增强现实设备102和第二增强现实设备104均具有影响拍摄、播放模块,声音采集和播放模块等。进一步地,第一增强现实设备102和第二增强现实设备104还可以包括温度传感器、湿度传感器、加速度传感器、陀螺仪、重力传感器、风速传感器、地理位置传感器等多种传感器,以获取并传输多种信息,在此不一一例举。
图1中示出的硬件环境系统的主要工作原理是:第一用户想要将自已看到的影像和声音共享给第二用户时,可以利用所佩戴的第一增强现实设备102对视线范围内的影像、声音等信息进行实时捕捉,同时对一定范围的声音进行实时捕捉,并通过网络104将捕捉到的影像、声音等信息实时传输至第二增强现实设备106同样的,第二增强现实设备106可以将第一用户所看到的影像和听到的声音等信息传输并展示给第二用户。进一步地,第二用户可以对第二增强现实设备106展示出的影像等信息进行相关操作,同时,该操作可以通过第二增强现实设备106同步给第一增强现实 设备102,并由第一增强现实设备102展示给第一用户,实现第一用户和第二用户之间的互动。
进一步地,第一增强现实设备102与第二增强现实设备106的采集影像和声音等信息,可以直接通过网络104在二者之间进行传输。第一增强现实设备102也可以先对采集的影像和声音等信息进行处理后,加入附加信息,再通过网络104传输给第二增强现实设备106。
进一步的,第一增强现实设备102和第二增强现实设备106分别通过网络和服务器108相连接,第一增强现实设备102或第二增强现实设备106采集的影像和声音等信息可以先传输给服务器108,经过服务器108处理后再传输给第二增强现实设备106或第一增强现实设备102。服务器108对获取的图像和声音等信息进行处理,可以减少第一增强现实设备102和第二增强现实设备106的资源占用,例如计算处理资源、电力资源、存储资源等,并具有更强大的处理能力和存储能力。服务器108还可以存储获取的图像和声音等信息等信息,方便后续进一步使用。
图2是根据本发明实施例的增强现实的信息传输方法的流程图,以下结合图2对本发明实施例所提供的增强现实的信息传输方法做具体介绍,如图2所示,该增强现实的信息传输方法主要包括如下步骤:
S202,第一增强现实设备实时获取第一增强现实设备的预定范围内的第一信息。其中,第一增强现实设备为向第一用户提供增强现实信息的设备。本实施例所述的第一信息为增强现实信息,增强现实信息可以是图像、声音、温度、适度、地理位置、加速度、重力感应等任何信息。
S204,第一增强现实设备将第一信息同步至第二增强现实设备。其中,,第二增强现实设备为向第二用户提供增强现实信息的设备。
进一步地,第一增强现实设备可以直接通过网络将第一信息传输给第二增强现实设备,也可以现将第一信息传输给服务器,经由服务器处理后, 再由服务器将第一信息传输给第二增强现实设备。服务器对第一信息的处理包括直接加工处理,间接加工处理,还可以进行聚合、抽象、整理、附加其他信息的操作,在此不一一列举。这里的网络可以是互联网广域网、局域网、临时网络、蓝牙网络、WiFi网络、无线通信网络、有线通信网络等任意形态的网络,在此不做限定。
S206,第一增强现实设备接收来自第二增强现实设备的第二信息,其中,第二信息为第二用户基于第二增强现实设备对第一影像进行操作并实时回传的信息。
S208,第一增强现实设备展示第二信息。本实施例所述的展示信息的手段包括声、光、电、热、机械运动等多种展示方式及其任意组合,不做具体限定。
在本发明实施例中,第一用户和第二用户指不同的用户,且这第一用户和第二用户在空间上存在一定的空间差别。第一用户拥有第一增强现实设备,第二用户拥有第二增强现实设备,第一增强现实设备和第二增强现实设备可以为相同的增强现实设备,但不是同一个增强现实设备。第一用户使用第一增强现实设备,捕捉、记录第一影像、声音等信息,并将第一影像、声音等信息同步传输至第二增强现实设备,第二用户基于第二增强现实设备对第一影像、声音等信息进行操作,得到第二影像、声音等信息,并将该第二影像、声音等信息实时回传至第一增强现实设备,第一增强现实设备向第一用户实时展示第二影像、声音等信息。
本发明实施例所提供的增强现实的信息传输方法,通过将第一用户的第一影、声音等信息像进行实时捕捉并传输至第二用户,第二用户对第一影像、声音等信息进行操作,得到第二影像、声音等信息,将第二影像、声音等信息实时展示给第一用户,达到了实时捕捉影像、声音等信息、并传输影像、声音等信息给对方的目的,从而实现了使不同用户实时互动的技术效果,进而解决了现有技术中基于增强现实进行信息传输的局限性较 大的技术问题。
可选地,通过第一增强现实设备展示第二影像信息包括:判断第二影像与第一影像、声音等信息是否一致一致;在判断出第二影像与第一影像一致一致的情况下,利用第一增强现实设备展示第一影像、声音等信息;以及在判断出第二影像与第一影像不一致一致的情况下,利用第一增强现实设备叠加第二影像、声音等信息至第一影像、声音等信息,并展示叠加后的影像、声音等信息。
通过对比第一影像、声音等信息和第二影像、声音等信息是否一致一致,即对比两端的增强现实设备捕获或展示的影像、声音等信息是否一致,在一致的情况下,说明两端的影像、声音等信息相同,则在本地端利用本地端的增强现实设备展示本地的真实影像、声音等信息,假设第一增强现实设备为本地端的设备,第二增强现实设备为对方的设备,即是直接利用第一增强现实设备展示第一影像、声音等信息;在二者不一致的情况下,则在本地端展示本地的真实影像、声音等信息的情况下,还需要将对方的同步过来的影像、声音等信息进行展示,在本发明中,可以将对方同步过来的影像、声音等信息叠加到本地影像、声音等信息上,并对叠加后的影像、声音等信息进行展示,同样以第一增强现实设备为本地端的设备为例,即是利用第一增强现实设备叠加第二影像、声音等信息至第一影像、声音等信息,并展示叠加后的影像、声音等信息。
可选地,利用第一增强现实设备叠加第二影像、声音等信息至第一影像、声音等信息包括:识别第二影像、声音等信息相对第一影像、声音等信息的第一差异影像、声音等信息;转换第一差异影像、声音等信息为基于第一增强现实设备的展示角度的第二差异影像、声音等信息;以及叠加第二差异影像、声音等信息至第一影像、声音等信息。
可以理解,针对影响、声音、温度、适度、地位置等信息的比较可能会有不同的标准,此处不做具体限定。
具体的,当传输信息为影像信息时,在两端的影像不一致的情况下,通过对差异影像进行识别,并转换为基于本地展示角度的影像,叠加的时候将该转换后的差异影像叠加到本地影像上,实现了减少影像叠加量、提高同步效率的效果。
可选地,实时捕捉第一增强现实设备的影像范围内的第一影像包括:检测第一用户的第一视网膜成像角度;以及按照第一视网膜成像角度实时捕捉第一影像。
通过检测第一用户的视网膜成像角度,按照此视网膜成像角度实时捕捉影像,当第二用户接收到此影像后,第二用户看到的影像和第一用户看到的现实完全一致,就像第二用户处在第一用户的位置和角度看到了真实的现实。如果没有检测第一用户的视网膜成像角度,或者没有按照此视网膜成像角度实时捕捉影像,那么当第二用户接收到影像之后,影像在第二用户的视网膜上成的像和现实在第一用户的视网膜上成的像将不一致,会影响第二用户的判断和操作。
可选地,第一增强现实设备的影像范围为第一用户的视线范围。即,第一增强现实设备基于第一用户的视线范围,进行图像采集,得到第一影像。
可选地,在将第一影像同步至第二增强现实设备之后,并在接收来自第二增强现实设备的第二影像之前,本发明实施例所提供的增强现实的信息传输方法还包括:记录第二用户操作的虚拟影像和对虚拟影像的操作动作,其中,虚拟影像为第二增强现实设备提供给第二用户的影像,并且虚拟影像包括第一影像;以及叠加表示操作动作的影像和虚拟影像,得到第二影像。
第一影像同步至第二增强现实设备之后,第二增强现实设备会将该第一影像展示给第二用户,而展示的过程中,还会涉及到第二用户所处环境的影像,因此,所展示的虚拟影像包括第一影像和第二用户所处环境的影 像。第二用户根据这个虚拟影像进行操作,将第二用户的操作动作和这个虚拟影像叠加起来,得到第二影像。
可选地,记录第二用户操作的虚拟影像和对虚拟影像的操作动作包括:检测第二用户的第二视网膜成像角度;以及按照第二视网膜成像角度记录虚拟影像和操作动作。
通过检测第二用户的视网膜成像角度,按照此视网膜成像角度记录虚拟影像和操作动作,当第一用户接收到展示第二用户的操作动作的影像后,第一用户看到的展示第二用户操作动作的影像的角度和第二用户的真实操作角度一致,就像第一用户从第二用户的位置和角度看到第二用户的操作,使第一用户更加精准地根据第二影像进行操作。
可选地,按照第二视网膜成像角度记录虚拟影像和操作动作包括:按照第二视网膜成像角度,在第二增强现实设备的影像范围内记录虚拟影像和操作动作。即,按照第二用户的视网膜成像角度,在第二增强现实设备的影像范围内,记录第二用户对虚拟影像的操作动作。
可选地,第二增强现实设备的影像范围为第二用户的视线范围。第二用户的视线有一个范围,这个范围即为第二增强现实设备的影像范围。第二增强现实设备基于第二用户的视线范围,进行图像采集,得到第二影像。
例如,在家中有人突然发病需要急救时,由于交通堵塞或者其他问题医护人员不能及时赶到现场,而病人的家属不具备足够的急救知识,在这种情况下,很可能会耽误宝贵的治疗时间,造成病人伤亡。使用本发明实施例所提供的增强现实的信息传输方法能够很好地解决这一问题。病人的家属使用设备A实时捕捉病人的影像、声音等信息,设备A即为上述第一增强现实设备,病人的影像、声音等信息即为第一影像、声音等信息,病人的家属即为第一用户,将病人的影像、声音等信息传输至医生使用的设备B,医生即为第二用户,设备B即为上述向第二用户提供增强现实影像、声音等信息的设备。病人的影像、声音等信息即为虚拟病人,医生看 到病人的影像后,对病人的影像进行操作,实施救治,医生对病人的影像进行操作的影像即为第二影像,设备B将医生对虚拟病人进行操作的影像、声音等信息传输至设备A,设备A展示医生对虚拟病人进行操作的影像、声音等信息,病人的家属看到此影像、声音等信息后,根据医生的操作来对病人实施救治。此外,设备A和设备B对影像的捕捉、传输都是实时的,也就是说,当病人的家属根据医生的操作对病人实施救治,设备A会将病人的家属对病人实施救治的影像、声音等信息记录并传输至设备B,设备B展示病人的家属对病人实施救治的影像、声音等信息,医生对虚拟病人进行下一步操作,设备B记录医生对虚拟病人的下一步操作,并将影像、声音等信息传输至设备A。设备A接收后,展示医生对虚拟病人的下一步操作的影像、声音等信息,病人的家属根据医生对虚拟病人的下一步操作,对真实病人进行下一步救治,病人的家属对病人进行下一步救治的影像、声音等信息被设备A记录并传输至设备B,如此往复,直至救治结束。
又例如,E公司的某种机器销售到了多个国家,当设备发生故障时,E公司就会派专业人士飞到当地进行修理,长久下来,给E公司造成一笔很大的开支,使用本发明实施例所提供的增强现实的信息传输方法能够很好地解决这一问题。机器使用方的非专业人士使用设备1,将需要修理的机器的影像、声音等信息进行捕捉和记录,设备1即为第一增强现实设备,机器使用方的非专业人士即为第一用户,需要修理的机器的影像、声音等信息即为第一影像、声音等信息,E公司的专业人士使用设备2接收需要修理的机器的影像、声音等信息,设备2即为第二增强现实设备,E公司的专业人士即为第二用户,可以将需要修理的机器的影像视为虚拟机器。E公司的专业人士对虚拟机器进行操作,设备2将E公司的专业人士对虚拟机器进行操作的影像、声音等信息捕捉、记录,并传输给设备1,E公司的专业人士对虚拟机器进行操作的影像即为第二影像、声音等信息,设备1显示E公司的专业人士对虚拟机器进行操作的影像、声音等信息,机 器使用方的非专业人士根据E公司的专业人士对虚拟机器进行操作的影像对真实机器进行修理,设备1将机器使用方的非专业人士根据E公司的专业人士对虚拟机器进行操作的影像、声音等信息对真实机器进行修理的影像捕捉并记录,传输给设备2。设备2显示机器使用方的非专业人士对真实机器进行修理的影像、声音等信息,E公司的专业人员对虚拟机器做下一步操作,设备2捕捉、记录E公司的专业人员对虚拟机器的下一步操作的影像、声音等信息,并将此影像传输至设备1。设备1接收E公司的专业人员对虚拟机器的下一步操作的影像、声音等信息,并显示此影像、声音等信息。机器使用方的非专业人士根据E公司的专业人员对虚拟机器的下一步操作的影像对真实机器进行下一步修理。如此往复,直至机器使用方的非专业人士将机器修好为止。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
实施例2
根据本发明实施例,还提供了一种用于实施上述的增强现实的信息传输方法的移动终端,该移动终端可以是第一增强现实设备,还可以是第二增强现实设备,如图3所示,该移动终端主要包括处理器401、摄像头402、显示器403、数据接口404、存储器405和网络接口406,该移动终端还可以包括声音传感器、温度传感器、湿度传感器、加速度传感器、陀螺仪、重力传感器、风速传感器、地理位置传感器等其他传感器407,在此不一一列举其中:
摄像头402主要用于实时捕捉第一增强现实设备的影像范围内的第一影像,或用于实时捕捉第二增强现实设备的影像范围内的第二影像。
数据接口404则主要通过数据传输的方式传输第一增强现实设备和第二增强现实设备之间影像数据。
存储器405主要用于存储信息传输的中间文件。
网络接口406主要用于与服务器进行网络通信,为信息传输提供数据支持。
显示器403主要用于实时展示第一增强现实设备或第二增强现实设备需要展示的影像。
声音传感器、温度传感器、湿度传感器、加速度传感器、陀螺仪、重力传感器、风速传感器、地理位置传感器等其他传感器407用于采集或行使与其传功功能相一致的功用,在此不做一一列举。
处理器401主要用于执行如下操作:实时捕捉第一增强现实设备的预定范围内的第一影像、声音等信息,并将第一影像、声音等信息同步至第二增强现实设备,其中,第一增强现实设备为向第一用户提供增强现实影像、声音等信息的设备,第二增强现实设备为向第二用户提供增强现实影像、声音等信息的设备;接收来自第二增强现实设备的第二影像、声音等信息,其中,第二影像、声音等信息为第二用户基于第二增强现实设备对 第一影像、声音等信息进行操作并实时回传的影像、声音等信息;以及通过第一增强现实设备展示第二影像、声音等信息。
处理器401还用于判断第二影像、声音等信息与第一影像、声音等信息是否一致;在判断出第二影像、声音等信息与第一影像、声音等信息一致的情况下,利用第一增强现实设备展示第一影像、声音等信息;以及在判断出第二影像、声音等信息与第一影像、声音等信息不一致的情况下,利用第一增强现实设备叠加第二影像至第一影像、声音等信息,并展示叠加后的影像、声音等信息。
处理器401还用于识别第二影像、声音等信息相对第一影像、声音等信息的第一差异影像、声音等信息;转换第一差异影像为基于第一增强现实设备的展示角度的第二差异影像、声音等信息;以及叠加第二差异影像至第一影像、声音等信息。
处理器401还用于检测第一用户的第一视网膜成像角度;以及按照第一视网膜成像角度实时捕捉第一影像。
处理器401还用于记录第二用户操作的虚拟影像和对虚拟影像的操作动作,其中,虚拟影像为第二增强现实设备提供给第二用户的影像,并且虚拟影像包括第一影像;以及叠加表示操作动作的影像和虚拟影像,得到第二影像。
处理器401还用于检测第二用户的第二视网膜成像角度;以及按照第二视网膜成像角度记录虚拟影像和操作动作。
处理器401还用于按照第二视网膜成像角度,在第二增强现实设备的影像范围内记录虚拟影像和操作动作。
可选地,本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例,本实施例在此不再赘述。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的 普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种增强现实的信息传输方法,其特征在于,包括:
第一增强现实设备实时捕捉第一增强现实设备的预定范围内的第一信息,并将所述第一信息同步至第二增强现实设备,其中,所述第一增强现实设备为向第一用户提供增强现实信息的设备;
所述第一增强现实设备将第一信息同步至第二增强现实设备,所述第二增强现实设备为向第二用户提供增强现实信息的设备;
所述第一增强现实设备接收来自所述第二增强现实设备的第二信息,其中,所述第二信息为所述第二用户基于所述第二增强现实设备对所述第一信息进行操作并实时回传的信息;以及
所述第一增强现实设备展示所述第二信息,其中所述展示第二信息的手段包括声、光、电、热、机械运动中的任一方式及其任意组合。
2.根据权利要求1所述的方法,其特征在于,通过所述第一增强现实设备展示所述第二信息包括:
判断所述第二信息与所述第一信息是否一致;
在判断出所述第二信息与所述第一信息一致的情况下,利用所述第一增强现实设备展示所述第一信息;以及
在判断出所述第二信息与所述第一信息不一致的情况下,利用所述第一增强现实设备叠加所述第二信息至所述第一信息,并展示叠加后的信息。
3.根据权利要求2所述的方法,其特征在于,利用所述第一增强现实设备叠加所述第二信息至所述第一信息包括:
所述第一信息为第一影像,所述第二信息为第二影像,
识别所述第二影像相对所述第一影像的第一差异影像;
转换所述第一差异影像为基于所述第一增强现实设备的展示角度的第二差异影像;以及
叠加所述第二差异影像至所述第一影像。
4.根据权利要求1所述的方法,其特征在于,实时捕捉第一增强现实设备的预定像范围内的第一信息包括:
所述第一信息包括第一影像;
检测所述第一用户的第一视网膜成像角度;以及
按照所述第一视网膜成像角度实时捕捉所述第一影像。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述第一信息为第一影像,所述第一增强现实设备的预定范围为所述第一用户的视线范围。
6.根据权利要求1至4中任一项所述的方法,其特征在于,在将第一增强现实设备将第一信息同步至第二增强现实设备之后,并在第一增强现实设备接收来自所述第二增强现实设备的第二信息之前,所述方法还包括:
所述第一信息包括第一影像;
记录所述第二用户操作的虚拟影像和对所述虚拟影像的操作动作,其中,所述虚拟影像为所述第二增强现实设备提供给所述第二用户的影像,并且所述虚拟影像包括所述第一影像;以及
叠加表示所述操作动作的影像和所述虚拟影像,得到所述第二影像。
7.根据权利要求6所述的方法,其特征在于,记录所述第二用户操作的虚拟影像和对所述虚拟影像的操作动作包括:
检测所述第二用户的第二视网膜成像角度;以及
按照所述第二视网膜成像角度记录所述虚拟影像和所述操作动作。
8.根据权利要求7所述的方法,其特征在于,按照所述第二视网膜成像角度记录所述虚拟影像和所述操作动作包括:
按照所述第二视网膜成像角度,在所述第二增强现实设备的影像范围内记录所述虚拟影像和所述操作动作。
9.根据权利要求8所述的方法,其特征在于,所述第二增强现实设备的影像范围为所述第二用户的视线范围。
10.根据权利要求1所述的方法,其特征在于,第一增强现实设备直接通过网络将第一信息传输给第二增强现实设备,或者将第一信息传输给服务器,经由服务器处理后,再由服务器将第一信息传输给第二增强现实设备。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610125063.9A CN106412682A (zh) | 2016-03-04 | 2016-03-04 | 增强现实的信息传输方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610125063.9A CN106412682A (zh) | 2016-03-04 | 2016-03-04 | 增强现实的信息传输方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106412682A true CN106412682A (zh) | 2017-02-15 |
Family
ID=58007103
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610125063.9A Pending CN106412682A (zh) | 2016-03-04 | 2016-03-04 | 增强现实的信息传输方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106412682A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109669541A (zh) * | 2018-09-04 | 2019-04-23 | 亮风台(上海)信息科技有限公司 | 一种用于配置增强现实内容的方法与设备 |
CN110955329A (zh) * | 2019-11-21 | 2020-04-03 | Oppo广东移动通信有限公司 | 传输方法以及电子设备和计算机存储介质 |
-
2016
- 2016-03-04 CN CN201610125063.9A patent/CN106412682A/zh active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109669541A (zh) * | 2018-09-04 | 2019-04-23 | 亮风台(上海)信息科技有限公司 | 一种用于配置增强现实内容的方法与设备 |
CN109669541B (zh) * | 2018-09-04 | 2022-02-25 | 亮风台(上海)信息科技有限公司 | 一种用于配置增强现实内容的方法与设备 |
CN110955329A (zh) * | 2019-11-21 | 2020-04-03 | Oppo广东移动通信有限公司 | 传输方法以及电子设备和计算机存储介质 |
CN110955329B (zh) * | 2019-11-21 | 2022-08-02 | Oppo广东移动通信有限公司 | 传输方法以及电子设备和计算机存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109313484B (zh) | 虚拟现实交互系统、方法及计算机存储介质 | |
CN105491416B (zh) | 增强现实的信息传输方法和装置 | |
CN106708451B (zh) | 同屏监控智能设备状态的方法、投影设备及用户终端 | |
US20150193970A1 (en) | Video playing method and system based on augmented reality technology and mobile terminal | |
CN107911737A (zh) | 媒体内容的展示方法、装置、计算设备及存储介质 | |
JP6764214B1 (ja) | 混雑情報報知システム | |
WO2015155841A1 (ja) | 情報表示方法および情報表示端末 | |
CN107818595A (zh) | 穿戴式即时互动系统 | |
CN107426508A (zh) | 一种利用ar实现远程安保巡查的方法 | |
US20230206093A1 (en) | Music recommendation method and apparatus | |
CN106060523A (zh) | 全景立体图像采集、显示方法及相应的装置 | |
CN106710490A (zh) | 一种橱窗系统及其实施方法 | |
CN106791580A (zh) | 一种会议处理方法及装置 | |
KR20150044488A (ko) | 비디오 씨쓰루 헤드 마운티드 디스플레이 영상 컨텐츠 운용 방법 및 시스템 | |
CN107145849A (zh) | 一种目标物体状态检测方法、移动终端以及计算机可读存储介质 | |
CN109937393A (zh) | 支持增强现实软件应用 | |
CN106412682A (zh) | 增强现实的信息传输方法 | |
CN109104632A (zh) | 一种电视终端ar场景的实现方法及系统 | |
CN109478343A (zh) | 捕获和渲染涉及虚拟环境的信息 | |
KR20140054650A (ko) | 관심객체의 선택에 의한 영상 탐색장치 및 방법 | |
CN107018360A (zh) | 一种ipc的添加方法、装置及系统 | |
CN106470331B (zh) | 一种监控方法、监控摄像机及监控系统 | |
CN108650217B (zh) | 动作状态的同步方法、装置、存储介质及电子装置 | |
CN106326328A (zh) | 图像发送系统、图像发送装置和图像发送方法 | |
CN206364929U (zh) | 影像服务系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170215 |