CN117915135A - 数据共享处理方法、装置、系统及存储介质 - Google Patents
数据共享处理方法、装置、系统及存储介质 Download PDFInfo
- Publication number
- CN117915135A CN117915135A CN202311707791.7A CN202311707791A CN117915135A CN 117915135 A CN117915135 A CN 117915135A CN 202311707791 A CN202311707791 A CN 202311707791A CN 117915135 A CN117915135 A CN 117915135A
- Authority
- CN
- China
- Prior art keywords
- data
- data sharing
- sharing
- head
- mounted display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 30
- 238000004891 communication Methods 0.000 claims abstract description 81
- 238000012545 processing Methods 0.000 claims abstract description 63
- 230000000007 visual effect Effects 0.000 claims abstract description 61
- 238000000034 method Methods 0.000 claims abstract description 34
- 238000004590 computer program Methods 0.000 claims description 14
- 238000013144 data compression Methods 0.000 claims description 14
- 238000002372 labelling Methods 0.000 claims description 12
- 230000006837 decompression Effects 0.000 claims description 5
- 230000002708 enhancing effect Effects 0.000 abstract description 5
- 239000011521 glass Substances 0.000 description 51
- 230000008569 process Effects 0.000 description 17
- 238000005516 engineering process Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 8
- 230000003993 interaction Effects 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000004424 eye movement Effects 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000036544 posture Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Abstract
本申请涉及通信技术领域,提供一种数据共享处理方法、装置、系统及存储介质,该方法包括:接收头戴显示设备采集的多媒体数据,以及接收数据共享控制指令,其中,所述多媒体数据包括视野数据、语音数据中的至少一种,所述视野数据为通过所述头戴显示设备的摄像头和/或传感器模块采集的数据;根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据;输出所述目标数据。本申请实施例实现了增强数据共享的灵活性。
Description
技术领域
本申请涉及通信技术领域,尤其涉及一种数据共享处理方法、装置、系统及存储介质。
背景技术
AR(Augmented Reality,增强现实)眼镜可以将虚拟图像投射到用户的视野中,实现透视和融合的效果,被应用于导航、游戏、教育、医疗等多种应用场景,并且,通过AR眼镜进行视野共享能够实现多个用户之间的视野同步和交互。目前,视野同步和交互的过程中,图像、视频等视野数据通常是以全屏或半屏的形式覆盖在用户的视野中,用户一般以语音或手势的形式进行交互,数据展示以及交互方式单一。
因此,如何增强数据共享的灵活性成为亟需解决的问题。
发明内容
本申请提供了一种数据共享处理方法、装置、系统及存储介质,旨在实现增强数据共享的灵活性,以提升用户体验。
为实现上述目的,本申请提供一种数据共享处理方法,所述数据共享处理方法包括:
接收头戴显示设备采集的多媒体数据,以及接收数据共享控制指令,其中,所述多媒体数据包括视野数据、语音数据中的至少一种,所述视野数据为通过所述头戴显示设备的摄像头和/或传感器模块采集的数据;
根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据;
输出所述目标数据。
此外,为实现上述目的,本申请还提供一种数据共享处理装置,所述数据共享处理装置包括存储器和处理器;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述计算机程序并在执行所述计算机程序时实现如上述的数据共享处理方法的步骤。
此外,为实现上述目的,本申请还提供一种数据共享系统,所述数据共享系统包括头戴显示设备和通信终端,其中,所述通信终端包括如上述的数据共享处理装置。
此外,为实现上述目的,本申请还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述的数据共享处理方法的步骤。
本申请公开了一种数据共享处理方法、装置、系统及存储介质,用户进行视野共享的过程中,用户可以通过通信终端输入相应的数据共享控制指令,通信终端不仅接收头戴显示设备采集的多媒体数据(视野数据、语音数据中的至少一种),还接收到数据共享控制指令,根据数据共享控制指令,对多媒体数据进行数据处理,获得对应的目标数据,然后输出目标数据,实现了视野共享的实时控制、调节,因此,增强了数据共享的灵活性,从而提升了用户体验。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种数据共享处理方法的步骤示意性流程图;
图2是本申请实施例提供的一种AR眼镜的示意性框图;
图3是本申请实施例提供的一种用户操作界面的示意图;
图4是本申请实施例提供的一种GUI界面的示意图;
图5是本申请实施例提供的一种数据共享处理装置的示意性框图;
图6是本申请实施例提供的一种数据共享系统的示意图;
图7是本申请实施例提供的另一种数据共享系统的示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
附图中所示的流程图仅是示例说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解、组合或部分合并,因此实际执行的顺序有可能根据实际情况改变。
应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
本申请的实施例提供了一种数据共享处理方法、装置、系统及存储介质,用于实现增强数据共享的灵活性,以提升用户体验。
请参阅图1,图1是本申请一实施例提供的数据共享处理方法的流程示意图。该方法可以应用于智能手机、平板电脑、台式电脑、个人数字助理等各种类型的通信终端,也可以应用于头戴显示设备,本申请中对该方法的应用场景不做限定。其中,头戴显示设备包括但不限于AR眼镜、VR(Virtual Reality,虚拟现实)眼镜等设备。
在对数据共享处理方法进行介绍之前,以头戴显示设备是AR眼镜为例,接下来先对AR眼镜进行简单介绍。
AR眼镜是一种常见的AR设备,可以将虚拟图像投射到用户的视野中,实现透视和融合的效果。AR眼镜的显示技术主要有三种,分别是被动式微显示技术、主动式微显示技术和扫描显示技术。其中,被动式微显示技术包括传统的LCD(Liquid Crystal Display,液晶显示屏)以及DLP(Digital Light Processing,数字光学处理技术)和LCOS((LiquidCrystal on Silicon,硅上液晶)等,需要外部光源照明,体积较大,光展量有限;主动式微显示技术包括Micro OLED(Organic Light-Emitting Diode,有机发光二极管)和MicroLED等,自发光,体积较小,亮度较高,但Micro LED的RGB集成难度较大,还未实现量产;扫描显示技术主要是LBS(Laser Beam Scanning,激光束扫描),使用RGB激光器作为光源进行扫描成像,体积最小,效率最高,色域最广,对比度最好,但系统复杂,存在激光干涉效应,影响图像质量。
通过AR眼镜进行视野共享,可以实现多个用户之间的视野同步和交互,适用于会议、考试、旅行等各种场景。视野共享主要包括视野捕捉、视野传输和视野展示三个部分。其中,视野捕捉是指通过AR眼镜的摄像头或传感器获取用户相关的图像、视频、深度、位置、姿态等数据;视野传输是指通过无线网络,将视野捕捉的数据发送到服务器或其他用户的设备上;视野展示是指通过AR眼镜或其他设备,将数据以虚拟图像的形式呈现给用户,实现视野的同步和交互。
如图1所示,该数据共享处理方法具体包括步骤S101至步骤S103。
S101、接收头戴显示设备采集的多媒体数据,以及接收数据共享控制指令,其中,所述多媒体数据包括视野数据、语音数据中的至少一种,所述视野数据为通过所述头戴显示设备的摄像头和/或传感器模块采集的数据。
AR眼镜采集的视野数据包括但不限于图像、视频、图像深度、用户的位置、姿态、眼动数据等。
示例性的,如图2所示,AR眼镜包括摄像头、传感器模块、麦克风、扬声器、显示屏、控制模块等。其中,摄像头包括但不限于单目摄像头或双目摄像头,可以支持高清、广角、深度等功能,通过摄像头可以捕捉用户视野范围内的图像、视频等视野数据。传感器模块包括但不限于加速度计、陀螺仪、磁力计、眼动追踪传感器,可以支持六自由度或九自由度的追踪,通过传感器模块可以捕捉用户的位置、姿态、眼动数据等。麦克风可以采用单麦或多麦阵列,可以支持降噪、回声消除等功能,通过麦克风可以捕捉用户的语音数据。扬声器可以采用骨传导或空气传导的方式,可以支持立体声、环绕声等功能,通过扬声器可以向用户播放语音数据。显示屏包括但不限于微型显示屏,可以采用任意一种AR眼镜的显示技术,如被动式微显示技术、主动式微显示技术或扫描显示技术,通过显示屏可以向用户呈现虚拟图像。控制模块用于控制AR眼镜进行视野共享,比如,将视野数据、语音数据发送至服务器或视野共享请求者的智能手机等通信终端。
在本公开实施例中,数据共享控制指令可以是用户在头戴显示设备中触发的,也可以是其中电子设备发送给头戴式显示设备的,该电子设备可为智能眼镜、手机等。
在一些实施例中,所述接收头戴显示设备采集的多媒体数据,包括:
基于第一通信模块接收所述头戴显示设备发送的所述多媒体数据;或
基于第二通信模块接收服务器发送的所述多媒体数据,其中,所述头戴显示设备将采集的所述多媒体数据发送至所述服务器。
示例性的,AR眼镜与通信终端均包括第一通信模块和/或第二通信模块,其中,第一通信模块包括但不限于蓝牙模块、WiFi模块、近场通信模块、红外线通信模块等,第二通信模块包括但不限于GPRS(general packet radio service,通用分组无线业务)模块、2G/3G/4G/5G模块等。
对于用户之间是近距离的应用场景,比如在同一个室内的情况,可以由各用户的AR眼镜与智能手机、平板电脑等通信终端组成数据共享系统。比如,AR眼镜与通信终端通过蓝牙模块建立蓝牙连接,组成数据共享系统。一方用户的AR眼镜采集到视野数据、语音数据等多媒体数据后,通过蓝牙传输方式将视野数据、语音数据等多媒体数据发送至另一方用户的通信终端。另一方用户的通信终端基于蓝牙模块接收AR眼镜发送的视野数据、语音数据等多媒体数据。在另一实施例中,该通信终端也可为AR眼镜,即该数据共享处理方法可以应用于AR眼镜与AR眼镜之间。
对于用户之间是远距离的应用场景,可以由AR眼镜、服务器与智能手机、平板电脑等通信终端组成数据共享系统。其中,服务器可以采用云计算或边缘计算的方式,可以支持多种网络协议和传输方式,如TCP(Transmission Control Protocol,传输控制协议)/IP(Internet Protocol,网际互连协议)、UDP(User Datagram Protocol,用户数据报协议)、HTTP(Hypertext Transfer Protocol,超文本传输协议)、WebRTC(Web Real-TimeCommunications,网页实时通信)等。例如,AR眼镜、服务器与通信终端建立无线网络连接,组成数据共享系统。一方用户的AR眼镜采集到视野数据、语音数据等多媒体数据后,将视野数据、语音数据等多媒体数据发送至服务器,服务器在获得视野数据、语音数据等多媒体数据之后,将多媒体数据发送至另一方用户的通信终端,另一方用户的通信终端接收服务器发送的视野数据、语音数据等多媒体数据。
在一些实施例中,所述接收头戴显示设备采集的多媒体数据之前,包括:
基于第一通信模块发送多媒体数据共享请求至所述头戴显示设备,以供所述头戴显示设备根据所述数据共享请求反馈所述多媒体数据;或
基于第二通信模块发送多媒体数据共享请求至服务器,以供所述服务器反馈所述多媒体数据,其中,所述服务器根据所述数据共享请求发送邀请信息至所述头戴显示设备,并接收所述头戴显示设备根据所述邀请信息反馈的所述多媒体数据。
为了保证用户进行视野共享的可靠性,需要得到用户的确认,才会执行共享视野数据、语音数据等多媒体数据的操作。具体地,对于用户之间是近距离的应用场景,由AR眼镜与通信终端组成数据共享系统,视野共享请求者可以通过自己的通信终端向视野共享提供者的AR眼镜发送多媒体数据共享请求。其中,多媒体数据共享请求中包括但不限于视野共享的范围、模式等信息,模式包括单向模式、双向模式等。AR眼镜接收到多媒体数据共享请求后,对应的视野共享提供者可以选择接受或拒绝,从而执行相应的接受或拒绝操作。例如,如图3所示,AR眼镜接收到多媒体数据共享请求后,在其显示屏上显示用户操作界面,包括接受控件和拒绝控件,若视野共享提供者拒绝进行视野共享,就可以点击拒绝控件,向视野共享请求者的通信终端发送拒绝消息。反之,若视野共享提供者接受进行视野共享,就可以点击接受控件,向视野共享请求者的通信终端发送确认消息,建立视野共享的连接,开始视野共享的过程。
对于用户之间是远距离的应用场景,由AR眼镜、服务器与通信终端组成数据共享系统,视野共享请求者通过自己的通信终端向服务器发送多媒体数据共享请求。其中,多媒体数据共享请求中包括但不限于视野共享提供者信息、视野共享的范围、模式等信息,视野共享提供者信息包括但不限于账号名称、ID等信息。服务器根据接收到的请求,向视野共享提供者对应的AR眼镜发送视野共享的邀请信息,邀请信息中包括但不限于视野共享请求者信息、目的、场景等信息。视野共享提供者通过AR眼镜接收到邀请信息后,可以选择接受或拒绝,从而执行相应的接受或拒绝操作。若视野共享提供者接受进行视野共享,执行接受操作,通过AR眼镜向服务器发送视野共享的确认消息,确认消息中包括但不限于视野共享的参数、授权等信息。服务器根据接收到的确认消息,建立视野共享的连接,开始视野共享的过程。
举例而言,在会议场景中,没有参会的人员,可以通过自己的通信终端接收参会的汇报人佩戴AR眼镜采集到的多媒体数据,以第一视角进入会议中,实现同步收听和观看。在考试场景中,监考人员可以共享每个考生的第一视角,防止作弊和记录考试相关过程。在旅行场景中,当用户佩戴AR眼镜进行旅游时,视野共享的其他用户可以以第一视角亲临其境,提高真实度。
在进行视野共享的过程中,用户可以实现视野共享的实时控制和调节,从而提高用户的舒适度、安全性等各方面体验。用户可以通过通信终端执行相应的控制操作,从而触发数据共享控制指令。其中,数据共享控制指令包括但不限于视野角度调节指令、视野大小调节指令、画面标注指令、透明度调节指令、亮度调节指令、对比度调节指令、色彩调节指令、滤镜调节指令等。
S102、根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据。
举例而言,根据接收到的视野角度调节指令,对视野数据的视野角度进行调节,目标数据即为调节了视野角度后的视野数据;根据透明度调节指令,对视野数据的透明度参数进行调节,目标数据即为调节了透明度后的视野数据;根据滤镜调节指令,对视野数据的滤镜参数进行调节,目标数据即为调节了滤镜后的视野数据。
在一些实施例中,所述接收数据共享控制指令之前,包括:
显示包含数据共享控制选项的用户界面,其中,所述数据共享控制选项包括视野角度调节选项、视野大小调节选项、显示参数调节选项、画面标注选项中的至少一种,所述显示参数包括透明度、亮度、对比度、色彩、滤镜中的至少一种;
所述接收数据共享控制指令,包括:
接收用户基于所述数据共享控制选项输入的所述数据共享控制指令。
其中,用户界面包括但不限于GUI(Graph User Interface,图形用户界面)、VUI(Voice User Interface,语音用户界面)。例如,如图4所示,在用户的通信终端上显示GUI界面,其中,GUI界面上包含视野角度调节选项、视野大小调节选项、显示参数调节选项、画面标注选项等数据共享控制选项。若用户需要对共享的视野角度进行控制,可以点击视野角度调节选项,通信终端接收到用户基于视野角度调节选项输入的视野角度调节指令,进而根据接收到的视野角度调节指令,对视野数据的视野角度进行调节。
举例而言,在会议场景中,可以根据会议内容,比如对于关键会议内容,没有参会的人员可以基于通信终端进行相关的如点击对比度调节选项的操作,当接收到对比度调节指令时,对关键会议内容对应画面的对比度进行对比度增强调节,从而可以提高画面的清晰度,使得没有参会的人员的专注度更高。
需要说明的是,用户还可以通过触摸、手势、语音等其他方式输入相应的数据共享控制指令,本申请中对获得数据共享控制指令的方式不作具体限制。
示例性的,根据数据共享控制指令来对多媒体数据进行数据处理的操作可以由服务器来执行。当通信终端接收到用户输入的数据共享控制指令后,通信终端将数据共享控制指令发送至服务器。服务器根据数据共享控制指令,对视野数据、语音数据等多媒体数据进行相应的数据处理,具体操作可参考上述实施例中所述,故在此不再赘述。服务器对多媒体数据进行处理获得对应的目标数据之后,服务器将处理得到的目标数据发送至通信终端,通信终端直接是接收获得服务器发送的目标数据。
在一些实施例中,所述接收头戴显示设备采集的多媒体数据,包括:
接收经加密处理的所述多媒体数据;
所述接收头戴显示设备采集的多媒体数据之后,包括:
对加密处理的所述多媒体数据进行解密处理;
所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据,包括:
根据所述数据共享控制指令,对解密后的所述多媒体数据进行数据处理,获得所述目标数据。
为了避免多媒体数据被第三方截取和窃取,给用户带来安全和隐私的风险,AR眼镜采集到视野数据、语音数据等多媒体数据之后,对视野数据、语音数据等多媒体数据进行加密处理。例如,基于用户的眼纹信息,对多媒体数据进行加密处理。然后将加密处理的多媒体数据发送至通信终端或服务器,若发送至服务器,则服务器将加密处理的多媒体数据转发至通信终端。通信终端接收到加密处理的多媒体数据后,对加密处理的多媒体数据进行相应的解密处理,从而获得解密后的视野数据、语音数据等多媒体数据。当接收到数据共享控制指令时,就根据数据共享控制指令,对解密后的多媒体数据进行相应处理,从而获得目标数据,具体过程可参考上述实施例中所述,故在此不再赘述。
在视野数据、语音数据等多媒体数据传输时,由于对视野数据、语音数据等多媒体数据进行了加密,避免了多媒体数据被泄露和滥用,因此,提高了数据共享的安全性。
在一些实施例中,所述接收头戴显示设备采集的多媒体数据,包括:
接收经数据压缩处理的所述多媒体数据;
所述接收头戴显示设备采集的多媒体数据之后,包括:
对数据压缩处理的所述多媒体数据进行数据解压处理;
所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据,包括:
根据所述数据共享控制指令,对解压后的所述多媒体数据进行数据处理,获得所述目标数据。
实际应用当中,视野数据、语音数据等多媒体数据的量级很大,数据传输效率不高,数据传输也需要占用大量的网络带宽和流量,如果网络环境不稳定,会影响视野共享的质量和连续性,很可能会导致视野共享的延迟和卡顿,从而给用户带来不佳体验。为了解决这个问题,AR眼镜采集到视野数据、语音数据等多媒体数据之后,还可以对视野数据、语音数据等多媒体数据进行数据压缩处理。然后将数据压缩处理的多媒体数据发送至通信终端或服务器,若发送至服务器,则服务器将数据压缩处理的多媒体数据转发至通信终端。通信终端接收到数据压缩处理的多媒体数据后,对数据压缩处理的多媒体数据进行相应的数据解压处理,从而获得数据解压后的视野数据、语音数据等多媒体数据。当接收到数据共享控制指令时,就根据数据共享控制指令,对解压后的多媒体数据进行相应处理,从而获得目标数据,具体过程可参考上述实施例中所述,故在此不再赘述。
在视野数据、语音数据等多媒体数据传输时,由于对视野数据、语音数据等多媒体数据进行了数据压缩处理,减小了数据量大小,也即降低了数据传输占用的网络带宽和流量,提高了数据传输效率,因此避免了视野共享的延迟和卡顿问题,从而提升了用户体验。
可以理解的是,当然可以同时对视野数据、语音数据等多媒体数据进行加密和数据压缩处理,从而不仅提高了数据共享的安全性,而且也避免了视野共享的延迟和卡顿问题,提升用户体验。
S103、输出所述目标数据。
若目标数据中包括视野数据,则通信终端显示视野数据;若目标数据中包括语音数据,则通信终端播报语音数据。
在一些实施例中,所述输出所述目标数据,包括:
显示所述目标数据;和/或
将所述目标数据发送至所述头戴显示设备。
在一些场景中,通信终端获得目标数据后,直接显示目标数据。举例而言,在考试场景中,获得的目标数据包括教室内实时的图像,通信终端直接显示图像。
在另一些场景中,通信终端获得目标数据后,还可以将目标数据发送至AR眼镜。举例而言,在旅行场景中,获得的目标数据包括视野角度调节后的图像,通信终端将视野角度调节后的图像发送至AR眼镜,AR眼镜接收到视野角度调节后的图像后,显示该视野角度调节后的图像。
在一些实施例中,所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据,包括:
根据所述画面标注指令,对所述视野数据进行画面标注处理,获得标注视野数据;
所述将所述目标数据发送至所述头戴显示设备,包括:
将所述标注视野数据发送至所述头戴显示设备,以供所述头戴显示设备显示所述标注视野数据。
举例而言,在会议场景中,对于关键会议内容,没有参会的人员想要进行重点强调,可以基于通信终端进行相关的如点击画面标注选项的操作,当接收到画面标注指令时,对关键会议内容对应画面进行画面标注处理,从而获得标注的关键会议内容。然后,通信终端将标注的关键会议内容发送至参会者的AR眼镜,通过AR眼镜显示标注的关键会议内容,从而对关键会议内容起到强调提醒的作用。
此外,在进行视野共享的过程中,还可以实现视野共享的多样化应用,拓展用户的体验和场景。例如,在旅行场景中,可以为视野共享的用户提供导航、翻译、路线推荐、景点推荐等信息,增加趣味性和便利性。在考试场景中,可以为视野共享的用户提供题目、答案、评分等辅助信息,增加公平性和有效性。在会议场景中,可以为视野共享的用户提供文档、图表、视频等辅助信息,增加丰富性和专业性。
用户(视野共享请求者或视野共享提供者)要结束视野共享时,视野共享请求者或视野共享提供者可以基于通信终端或AR眼镜执行视野共享结束操作,发出视野共享结束指令,结束对视野数据、语音数据等多媒体数据的共享。其中,视野共享结束操作包括但不限于用户的触摸、手势、语音等各种类型的操作。示例性的,视野共享结束指令中包括但不限于共享原因(如以第一视角亲临其境)、此次共享评价(如体验差、体验一般、体验好)等信息。
举例而言,视野共享请求者基于通信终端执行视野共享结束操作,比如输出“结束共享”的语音信息,当通信终端检测到视野共享结束操作时,比如接收到“结束共享”的语音信息时,发送视野共享结束指令至服务器。当服务器接收到该视野共享结束指令时,断开与通信终端、AR眼镜之间的视野数据、语音数据等多媒体数据共享的连接,结束视野共享。
示例性的,视野共享的过程中,对视野共享信息进行记录保存,其中,视野共享信息包括但不限于共享的多媒体数据、以及用户之间的交互信息。后续在相似的场景当中,用户可以通过查询保存的视野共享信息,辅助指导自己的操作。例如,在旅行场景中,用户通过查询获得同一景区的视野共享信息,可以辅助指导自己观光行走的路线。
此外,还可以通过获取保存的视野共享信息,对视野共享信息进行分析,优化视野共享服务。例如,根据视野共享信息获悉在视野共享的过程中,用户输入了对比度调节指令,分析出视野数据显示画面清晰度不够,可以将视野数据显示画面对应的默认对比度增加,从而使得视野数据显示画面更加清晰,优化视野共享服务。
上述实施例中,用户进行视野共享的过程中,用户可以通过通信终端输入相应的数据共享控制指令,通信终端不仅接收头戴显示设备采集的多媒体数据(视野数据、语音数据中的至少一种),还接收到数据共享控制指令,根据数据共享控制指令,对多媒体数据进行数据处理,获得对应的目标数据,然后输出目标数据,实现了视野共享的实时控制、调节,因此,增强了数据共享的灵活性,从而提升了用户体验。
请参阅图5,图5是本申请的实施例提供的一种数据共享处理装置的示意性框图,该数据共享处理装置可以配置于头戴显示设备中,用于执行前述的数据共享处理方法。
如图5所示,该数据共享处理装置200可以包括包括处理器210、存储器220,其中,处理器210与存储器220通过总线连接,该总线比如为I2C(Inter-integrated Circuit)总线。
具体地,处理器210可以是微控制单元(Micro-controller Unit,MCU)、中央处理单元(Central Processing Unit,CPU)或数字信号处理器(Digital Signal Processor,DSP)等。
具体地,存储器220可以是Flash芯片、只读存储器(ROM,Read-Only Memory)磁盘、光盘、U盘或移动硬盘等。存储器220中存储有供处理器210执行的各种计算机程序。
其中,所述处理器210用于运行存储在存储器中的计算机程序,并在执行所述计算机程序时实现如下步骤:
接收头戴显示设备采集的多媒体数据,以及接收数据共享控制指令,其中,所述多媒体数据包括视野数据、语音数据中的至少一种,所述视野数据为通过所述头戴显示设备的摄像头和/或传感器模块采集的数据;
根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据;
输出所述目标数据。
在一些实施例中,所述处理器210在实现所述接收数据共享控制指令之前,用于实现:
显示包含数据共享控制选项的用户界面,其中,所述数据共享控制选项包括视野角度调节选项、视野大小调节选项、显示参数调节选项、画面标注选项中的至少一种,所述显示参数包括透明度、亮度、对比度、色彩、滤镜中的至少一种;
所述处理器210在实现所述接收数据共享控制指令时,用于实现:
接收用户基于所述数据共享控制选项输入的所述数据共享控制指令。
在一些实施例中,所述处理器210在实现所述输出所述目标数据时,用于实现:
显示所述目标数据;和/或
将所述目标数据发送至所述头戴显示设备。
在一些实施例中,所述数据共享控制指令包括画面标注指令,所述处理器210在实现所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据时,用于实现:
根据所述画面标注指令,对所述视野数据进行画面标注处理,获得标注视野数据;
所述处理器210在实现所述将所述目标数据发送至所述头戴显示设备时,用于实现:
将所述标注视野数据发送至所述头戴显示设备,以供所述头戴显示设备显示所述标注视野数据。
在一些实施例中,所述处理器210在实现所述接收头戴显示设备采集的多媒体数据时,用于实现:
接收经加密处理的所述多媒体数据;
所述处理器210在实现所述接收头戴显示设备采集的多媒体数据之后,用于实现:
对加密处理的所述多媒体数据进行解密处理;
所述处理器210在实现所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据时,用于实现:
根据所述数据共享控制指令,对解密后的所述多媒体数据进行数据处理,获得所述目标数据。
在一些实施例中,所述处理器210在实现所述接收头戴显示设备采集的多媒体数据时,用于实现:
接收经数据压缩处理的所述多媒体数据;
所述处理器210在实现所述接收头戴显示设备采集的多媒体数据之后,用于实现:
对数据压缩处理的所述多媒体数据进行数据解压处理;
所述处理器210在实现所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据时,用于实现:
根据所述数据共享控制指令,对解压后的所述多媒体数据进行数据处理,获得所述目标数据。
在一些实施例中,所述处理器210在实现所述接收头戴显示设备采集的多媒体数据时,用于实现:
基于第一通信模块接收所述头戴显示设备发送的所述多媒体数据;或
基于第二通信模块接收服务器发送的所述多媒体数据,其中,所述头戴显示设备将采集的所述多媒体数据发送至所述服务器。
在一些实施例中,所述处理器210在实现所述接收头戴显示设备采集的多媒体数据之前,用于实现:
基于第一通信模块发送多媒体数据共享请求至所述头戴显示设备,以供所述头戴显示设备根据所述数据共享请求反馈所述多媒体数据;或
基于第二通信模块发送多媒体数据共享请求至服务器,以供所述服务器反馈所述多媒体数据,其中,所述服务器根据所述数据共享请求发送邀请信息至所述头戴显示设备,并接收所述头戴显示设备根据所述数据共享请求反馈的所述多媒体数据。
数据共享处理装置200可以执行本申请实施例所提供的数据共享处理方法,因此,可以实现本申请实施例所提供的数据共享处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
请参阅图6,图6是本申请的实施例提供的一种数据共享系统的示意图。如图6所示,该数据共享系统可以包括头戴显示设备1000和通信终端2000,头戴显示设备1000和通信终端2000建立无线通信连接,比如头戴显示设备1000和通信终端2000建立蓝牙连接,该数据共享系统可以应用于用户之间是近距离的应用场景。
在一些实施例中,如图7所示,数据共享系统还包括服务器3000,服务器3000分别与通信终端2000和头戴显示设备1000建立无线通信连接,该数据共享系统可以应用于用户之间是远距离的应用场景。
其中,头戴显示设备1000包括但不限于AR眼镜、VR眼镜等设备,通信终端2000包括但不限于智能手机、平板电脑、台式电脑、个人数字助理等设备。其中,通信终端2000包括数据共享处理装置,该数据共享处理装置可以为图5中所示的数据共享处理装置200。因此,数据共享系统可以实现本申请实施例所提供的数据共享处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述的数据共享处理方法的步骤。
其中,所述计算机可读存储介质可以是前述实施例所述的数据共享处理装置或头戴显示设备的内部存储单元,例如所述数据共享处理装置或头戴显示设备的硬盘或内存。所述计算机可读存储介质也可以是所述数据共享处理装置或头戴显示设备的外部存储设备,例如所述数据共享处理装置或头戴显示设备上配备的插接式硬盘,智能存储卡(SmartMedia Card,SMC),安全数字卡(Secure Digital Card,SD Card),闪存卡(Flash Card)等。
由于该存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种数据共享处理方法,因此,可以实现本申请实施例所提供的任一种数据共享处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。
Claims (10)
1.一种数据共享处理方法,其特征在于,所述数据共享处理方法包括:
接收头戴显示设备采集的多媒体数据,以及接收数据共享控制指令,其中,所述多媒体数据包括视野数据、语音数据中的至少一种,所述视野数据为通过所述头戴显示设备的摄像头和/或传感器模块采集的数据;
根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据;
输出所述目标数据。
2.如权利要求1所述的数据共享处理方法,其特征在于,所述接收数据共享控制指令之前,包括:
显示包含数据共享控制选项的用户界面,其中,所述数据共享控制选项包括视野角度调节选项、视野大小调节选项、显示参数调节选项、画面标注选项中的至少一种,所述显示参数包括透明度、亮度、对比度、色彩、滤镜中的至少一种;
所述接收数据共享控制指令,包括:
接收用户基于所述数据共享控制选项输入的所述数据共享控制指令。
3.如权利要求1所述的数据共享处理方法,其特征在于,所述输出所述目标数据,包括:
显示所述目标数据;和/或
将所述目标数据发送至所述头戴显示设备。
4.如权利要求3所述的数据共享处理方法,其特征在于,所述数据共享控制指令包括画面标注指令,所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据,包括:
根据所述画面标注指令,对所述视野数据进行画面标注处理,获得标注视野数据;
所述将所述目标数据发送至所述头戴显示设备,包括:
将所述标注视野数据发送至所述头戴显示设备,以供所述头戴显示设备显示所述标注视野数据。
5.如权利要求1所述的数据共享处理方法,其特征在于,所述接收头戴显示设备采集的多媒体数据,包括:
接收经加密处理的所述多媒体数据;
所述接收头戴显示设备采集的多媒体数据之后,包括:
对加密处理的所述多媒体数据进行解密处理;
所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据,包括:
根据所述数据共享控制指令,对解密后的所述多媒体数据进行数据处理,获得所述目标数据。
6.如权利要求1所述的数据共享处理方法,其特征在于,所述接收头戴显示设备采集的多媒体数据,包括:
接收经数据压缩处理的所述多媒体数据;
所述接收头戴显示设备采集的多媒体数据之后,包括:
对数据压缩处理的所述多媒体数据进行数据解压处理;
所述根据所述数据共享控制指令,对所述多媒体数据进行数据处理,获得对应的目标数据,包括:
根据所述数据共享控制指令,对解压后的所述多媒体数据进行数据处理,获得所述目标数据。
7.如权利要求1至6任一项所述的数据共享处理方法,其特征在于,所述接收头戴显示设备采集的多媒体数据之前,包括:
基于第一通信模块发送多媒体数据共享请求至所述头戴显示设备,以供所述头戴显示设备根据所述数据共享请求反馈所述多媒体数据;或
基于第二通信模块发送多媒体数据共享请求至服务器,以供所述服务器反馈所述多媒体数据,其中,所述服务器根据所述数据共享请求发送邀请信息至所述头戴显示设备,并接收所述头戴显示设备根据所述邀请信息反馈的所述多媒体数据。
8.一种数据共享处理装置,其特征在于,所述数据共享处理装置包括存储器和处理器;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述计算机程序并在执行所述计算机程序时实现如权利要求1至7中任一项所述的数据共享处理方法的步骤。
9.一种数据共享系统,其特征在于,所述数据共享系统包括头戴显示设备和通信终端,其中,所述通信终端包括如权利要求8所述的数据共享处理装置。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的数据共享处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311707791.7A CN117915135A (zh) | 2023-12-12 | 2023-12-12 | 数据共享处理方法、装置、系统及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311707791.7A CN117915135A (zh) | 2023-12-12 | 2023-12-12 | 数据共享处理方法、装置、系统及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117915135A true CN117915135A (zh) | 2024-04-19 |
Family
ID=90690231
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311707791.7A Pending CN117915135A (zh) | 2023-12-12 | 2023-12-12 | 数据共享处理方法、装置、系统及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117915135A (zh) |
-
2023
- 2023-12-12 CN CN202311707791.7A patent/CN117915135A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109952759B (zh) | 用于具有hmd的视频会议的改进的方法和系统 | |
US20210409646A1 (en) | Apparatus for video communication | |
US7227567B1 (en) | Customizable background for video communications | |
EP2882179B1 (en) | Information processing device, information processing method, and program | |
CN105247881B (zh) | 信息处理设备、显示控制方法以及程序 | |
US20120016960A1 (en) | Managing shared content in virtual collaboration systems | |
KR20130039720A (ko) | 시각 장애인들을 지원하는 증강 현실 파노라마 | |
CN112312226B (zh) | 连麦方法、系统、装置、电子设备及存储介质 | |
WO2014012444A1 (zh) | 一种实现增强现实信息共享的方法、装置和系统 | |
KR20120086810A (ko) | 단말기 및 그 단말기에서 이미지 처리 방법 | |
WO2012019517A1 (zh) | 用于视频通信的视频处理方法、装置及系统 | |
CN114610253A (zh) | 一种投屏方法及设备 | |
Domova et al. | Designing a remote video collaboration system for industrial settings | |
JP2009246408A (ja) | 対話装置、画像処理モジュール、画像処理方法およびプログラム | |
JP2013115527A (ja) | テレビ会議システム及びテレビ会議方法 | |
KR101784095B1 (ko) | 복수의 영상 데이터를 이용하는 헤드 마운트 디스플레이 장치 및 복수의 영상 데이터를 송수신하기 위한 시스템 | |
CN111246224A (zh) | 一种视频直播方法及视频直播系统 | |
US9046921B2 (en) | Display apparatus and control method thereof | |
JP2014049797A (ja) | カメラ付き表示装置 | |
CN102202206A (zh) | 通信设备 | |
US10764535B1 (en) | Facial tracking during video calls using remote control input | |
CN117915135A (zh) | 数据共享处理方法、装置、系统及存储介质 | |
US10893139B1 (en) | Processing interaction requests with user specific data on a shared device | |
JP2005340974A (ja) | 画像送信制御プログラム、及び画像表示プログラム | |
JP7279839B1 (ja) | 遠隔映像配信システム、および遠隔映像配信方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination |