CN104866261A - 一种信息处理方法和装置 - Google Patents

一种信息处理方法和装置 Download PDF

Info

Publication number
CN104866261A
CN104866261A CN201410061758.6A CN201410061758A CN104866261A CN 104866261 A CN104866261 A CN 104866261A CN 201410061758 A CN201410061758 A CN 201410061758A CN 104866261 A CN104866261 A CN 104866261A
Authority
CN
China
Prior art keywords
opposite end
electronic equipment
orientation
image
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410061758.6A
Other languages
English (en)
Other versions
CN104866261B (zh
Inventor
张柳新
曹翔
张锦锋
段勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201410061758.6A priority Critical patent/CN104866261B/zh
Priority to US14/493,662 priority patent/US20150244984A1/en
Publication of CN104866261A publication Critical patent/CN104866261A/zh
Application granted granted Critical
Publication of CN104866261B publication Critical patent/CN104866261B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种信息处理方法和装置,该方法应用于第一电子设备,该电子设备具有第一显示单元,包括:建立所述第一电子设备与第二电子设备的视频传输通道;采集第一电子设备指定空间范围内的本地三维图像数据;基于该本地三维图像数据,确定第一电子设备本地的用户当前时刻在该指定空间范围内的第一方位;接收该第二电子设备通过该视频传输通道传输的对端三维图像数据;获取该对端三维图像数据对应的对端三维图像中,符合以该第一方位观看的目标对端图像;在该第一显示单元的显示区域内显示该目标对端图像。该方法可以使用户能够更加全面的观看到其他电子设备发送的视频图像。

Description

一种信息处理方法和装置
技术领域
本发明涉及通信技术领域,更具体的说是涉及一种信息处理方法和装置。
背景技术
目前,利用电子设备进行视频播放已经十分普遍,如利用电子设备进行视频通话,在视频通过的过程中可以展现对方的视频图像;又如,利用电子设备进行游戏时,播放相应的游戏视频等。
然而由于大部分电子设备只能显示出二维图像,这样,即使待播放的视频或图像为三维格式时,在电子设备中也只能展现出二维视频或图像中某一视角的图像,从而使得用户只能单一看到该视角内的图像,使得视频图像显示过程过于单调,不便于用户全方位获取视频图像信息。
发明内容
有鉴于此,本发明提供一种信息处理方法和装置,以使用户能够更加全面的观看到其他电子设备发送的视频图像。
为实现上述目的,本发明提供如下技术方案:一种信息处理方法,应用于第一电子设备,所述电子设备具有第一显示单元,所述方法包括:
建立所述第一电子设备与第二电子设备的视频传输通道;
采集所述第一电子设备指定空间范围内的本地三维图像数据;
基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位;
接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据;
获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像;
在所述第一显示单元的显示区域内显示所述目标对端图像。
优选的,所述获取对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像,包括:
构建与所述对端三维图像数据对应的对端三维场景模型;
确定所述对端三维场景模型中,符合以所述第一方位观看的第一子场景模型区域;
确定所述第一子场景模型区域对应的目标对端图像。
优选的,在所述确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位之后,还包括:
将所述用户当前时刻在所述指定空间范围内的第一方位的信息通过所述视频传输通道传输给所述第二电子设备;
则,所述接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据,包括:
接收所述第二电子设备通过所述视频传输通道传输的,符合以所述第一方位观看的目标对端三维图像数据;
则,所述获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像,包括:
将所述目标对端三维图像数据对应的目标对端三维图像确定为符合以所述第一方位观看的目标对端图像。
优选的,所述基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位,包括:
根据所述本地三维图像数据中包含的用户图像信息,分析所述第一电子设备本地的用户当前时刻在所述指定空间范围内的空间位置,并确定所述空间位置所对应的用户视线延伸方向;
则,所述获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像,包括:
获取所述对端三维图像数据对应的对端三维模型中,与所述用户视线延伸方向相交的子三维模型区域所对应的目标对端图像。
优选的,该方法还包括:
接收所述第二电子设备通过所述视频传输通道传输的第二方位的信息,其中所述第二方位为所述第二电子设备侧的用户在所述第二电子设备侧的空间内的方位信息;
基于所述本地三维图像数据构建本地三维场景模型;
确定所述本地三维场景模型中,符合以所述第二方位观看的第二子场景模型区域;
确定所述第二子场景模型区域对应的目标本地三维图像;
将所述目标本地三维图像发送给所述第二电子设备。
另一方面,本发明还提供了一种信息处理装置,应用于第一电子设备,所述电子设备具有第一显示单元,所述装置包括:
通道建立单元,用于建立所述第一电子设备与第二电子设备的视频传输通道;
图像采集单元,用于采集所述第一电子设备指定空间范围内的本地三维图像数据;
方位确定单元,用于基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位;
数据接收单元,用于接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据;
数据处理单元,用于获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像;
显示单元,用于在所述第一显示单元的显示区域内显示所述目标对端图像。
优选的,所述数据处理单元,包括:
第一模型构建单元,用于构建与所述对端三维图像数据对应的对端三维场景模型;
第一视角确定单元,用于确定所述对端三维场景模型中,符合以所述第一方位观看的第一子场景模型区域;
第一目标确定单元,用于确定所述第一子场景模型区域对应的目标对端图像。
优选的,还包括:
方位发送单元,用于在所述方位确定单元确定出第一方位之后,将所述用户当前时刻在所述指定空间范围内的第一方位的信息通过所述视频传输通道传输给所述第二电子设备;
则所述数据接收单元,包括:
接收子单元,用于接收所述第二电子设备通过所述视频传输通道传输的,符合以所述第一方位观看的目标对端三维图像数据;
则所述数据处理单元,包括:
图像确定单元,用于将所述目标对端三维图像数据对应的目标对端三维图像确定为符合以所述第一方位观看的目标对端图像。
优选的,所述方位确定单元,包括:
朝向确定单元,用于根据所述本地三维图像数据中包含的用户图像信息,分析所述第一电子设备本地的用户当前时刻在所述指定空间范围内的空间位置,并确定所述空间位置所对应的用户视线延伸方向;
则,所述数据处理单元,包括:
数据处理子单元,用于获取所述对端三维图像数据对应的对端三维模型中,与所述用户视线延伸方向相交的子三维模型区域所对应的目标对端图像。
优选的,还包括:
方位接收单元,用于接收所述第二电子设备通过所述视频传输通道传输的第二方位的信息,其中所述第二方位为所述第二电子设备侧的用户在所述第二电子设备侧的空间内的方位信息;
第二模型构建单元,用于基于所述本地三维图像数据构建本地三维场景模型;
第二视觉确定单元,用于确定所述本地三维场景模型中,符合以所述第二方位观看的第二子场景模型区域;
第二目标确定单元,用于确定所述第二子场景模型区域对应的目标本地三维图像;
图像发送单元,用于将所述目标本地三维图像发送给所述第二电子设备。
经由上述的技术方案可知,在建立了第一电子设备与第二电子设备的视频数据传输通道后,会确定用户在该第一电子设备指定空间内的第一方位,进而在接收到对端三维图像数据后,会获取该对端三维图像数据对应的对端三维图像中,符合以该第一方位观看的目标对端图像,并显示,从而可以实时根据用户在第一电子设备侧的方位变化,来确定符合当前用户所在方位观看的对端图像,进而使得用户总能看到符合当前方位所对应的视角的对端图像,使得展现出的图像能够更加全面,提高用户观看视频图像的体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1示出了本发明一种信息处理方法一个实施例的流程示意图;
图2示出了本发明一种信息处理方法另一个实施例的流程示意图;
图3示出了本发明一种信息处理方法另一个实施例的流程示意图;
图4示出了本发明一种信息处理方法另一个实施例的流程示意图;
图5示出了本发明一种信息处理装置一个实施例的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例公开了一种信息处理方法,以提高用户能够更加全面、灵活的观看视频图像,提高用户体验。
参见图1,其示出了本发明一种信息处理方法一个实施例的流程示意图,本实施例的方法应用于第一电子设备,该第一电子设备包括第一显示单元,其中,该第一显示单元仅仅为便于与其他电子设备的显示单元进行区别,而将该第一电子设备的显示单元称为第一显示单元。该第一电子设备可以为手机、笔记本电脑和台式电脑等等,本实施例的方法可以包括:
101,建立该第一电子设备与第二电子设备的视频传输通道。
其中,该第一电子设备与该第二电子设备之间通过该视频传输通道可以传输视频数据。该第二电子设备可以是终端设备,如与该第一电子设备相同类型或不同类型的终端设备,该第二电子设备也可以是存储有视频数据的服务器。
其中,该视频传输通道可以是双向传输的通道,也可以是单向传输的通道。
如,第二电子设备为终端设备时,该第一电子设备可以与该第二电子建立视频通讯,该第二电子设备将该第二电子设备存储或者实时采集到的视频数据发送给该第一电子设备,该第一电子设备也可以将本地的视频数据传输该给第二电子设备。
又如,该第二电子设备也可以服务器,以网络游戏对应的服务器为例,则该第一电子设备可以接收该服务器传输的游戏视频。
102,采集该第一电子设备指定空间范围内的本地三维图像数据。
其中,该第一电子设备可以采集三维图像,如,该第一电子设备上具有三维摄像头,如第一电子设备的第一显示单元上方设置有三维摄像头,也可以是在该第一电子设备的第一显示单元中内嵌有三维摄像头;当然,该第一电子设备上外连有三维摄像头。
可选的,为了能够真实的获取到该第一电子设备指定空间内的三维场景,该第一电子设备侧采集到的本地三维图像数据中可以包含有多幅不同角度下的本地三维图像的数据。
103,基于该本地三维图像数据,确定该第一电子设备本地的用户当前时刻在该指定空间范围内的第一方位。
当用户处于该指定空间内时,该第一电子设备采集到的三维图像中会包含有该用户的图像信息,根据该三维图像数据可以分析出用户在指定空间范围的方位信息。
其中,为了与第二电子设备侧的用户在第二电子设备侧的空间内的方位相区别,将该第一电子设备本地的用户在第一电子设备的指定空间内的方位称为第一方位。
104,接收该第二电子设备通过该视频传输通道传输的对端三维图像数据。
105,获取该对端三维图像数据对应的对端三维图像中,符合以该第一方位观看的目标对端图像。
其中,在本申请实施例中,将第二电子设备传输的三维图像数据称为对端三维图像数据,以与该第一电子设备本地的三维图像数据进行区分。该第二电子设备传输的视频数据同样为三维图像数据。
由于用户在该第一空间范围内的方位不同,该用户相对该第一电子设备的第一显示界面的朝向也就不同,这样,用户通过该第一显示单元观看该第二电子设备传输来的图像时,也会希望能够展现出适合当前所在方位进行观看的对端图像。
因此,为了使得第一电子设备本地的用户在该第一方位能够看到更加清楚完整的图像,该第一电子设备需要获取到符合以该第一方位观看的对端图像,在此将符合第一方位观看的对端图像成为目标对端图像。
106,在该第一显示单元的显示区域内显示该目标对端图像。
在本实施例中,在建立了第一电子设备与第二电子设备的视频数据传输通道后,会确定用户在该第一电子设备指定空间内的第一方位,进而在接收到对端三维图像数据后,会获取该对端三维图像数据对应的对端三维图像中,符合以该第一方位观看的目标对端图像,并显示,从而可以实时根据用户在第一电子设备侧的方位变化,来确定符合当前用户所在方位观看的对端图像,进而使得用户总能看到符合当前方位所对应的视角的对端图像,使得展现出的图像能够更加全面,提高用户观看视频图像的体验。
可以理解的是,在本发明任意一个实施例中,由于第一显示单元所能显示的图像维度不同,该第一电子设备获取到的目标对端图像的维度也会相应不同。当该第一显示单元为能够显示三维图像的显示单元时,该第一电子设备从该对端三维图像数据对应的三维图像中,确定出的目标对端图像也可以目标对端三维图像,并在第一显示单元中显示。当该第一显示单元只能够显示二维图像时,则该第一电子设备可以直接确定出二维的目标对端图像,或者是确定出三维的目标对端图像后,在该第一显示单元中展现出二维的目标对端图像。
可以理解的是,获取符合以该第一方位观看的目标对端图像的方式可以有多种,下面分别就几种不同实现方式进行介绍。
参见图2,示出了本发明一种信息处理方法另一个实施例的流程示意图,本实施例的方法可以应用于第一电子设备,该第一电子设备包括第一显示单元,该第一电子设备可以为手机、笔记本电脑和台式电脑等等,本实施例的方法可以包括:
201,建立该第一电子设备与第二电子设备的视频传输通道。
202,采集该第一电子设备指定空间范围内的本地三维图像数据。
203,基于该本地三维图像数据,确定该第一电子设备本地的用户当前时刻在该指定空间范围内的第一方位。
204,接收该第二电子设备通过该视频传输通道传输的对端三维图像数据。
在本实施例中,该第二电子设备可以将采集到的或者存储的对端三维图像数据直接发送给第一电子设备,而不需要进行特殊处理。
205,构建与该对端三维图像数据对应的对端三维场景模型。
在本实施例中,第二电子设备传输的对端三维图像数据中可以包含不同位置不同角度下的多幅三维图像的数据,根据该对端三维图像数据,该第一电子设备可以构建出三维模型,即得到对端三维场景模型。
可以理解的是,当该第一电子设备与该第二电子设备进行实时视频通讯时,则第二电子设备传输的为该第二电子设备本地的实时三维图像的数据,相应的,构建出的对端三维场景模型也就是该第二电子设备端的场景模型。当该第二电子设备向该第一电子设备传输的是虚拟的三维视频数据时,则该第一电子设备构建的也就是虚拟的三维场景模型,如第二电子设备传输一个三维游戏视频或者是三维动画视频等,则第一电子设备会根据第二电子设备传输的三维图像数据,构建出相应的当前时刻的游戏场景模型或动画模型。
其中,基于三维图像数据构建三维场景模型的方式可以参照现有的任意构建三维模型的实现方式,在此不加以限制。
206,确定该对端三维场景模型中,符合以该第一方位观看的第一子场景模型区域。
在确定出该三维场景模型后,确定以该第一方位位于该三维模型中,可以观看到该三维场景模型的模型区域,进而得到适合以该第一方位观看的第一子场景模型。
其中,该第一子场景模型区域为该对端三维场景模型中的一部分区域。
可以理解的是,由于该第一方位为第一电子设备侧的用户在该第一电子设备侧指定空间的方位,而该对端三维场景模型为另一空间的场景模型,为了合理转换,以确定对端三维场景模型中适合以第一方位观看的模型区域,可以预先或实时规定该第一电子设备侧的空间坐标与该对端三维场景模型中空间坐标的对应关系,进而将该第一方位对应到该对端三维场景模型中的某个方位上。
如,以第一电子设备和第二电子设备的实时视频通讯为例,可以以第一电子设备的屏幕与第二电子设备的屏幕的位置作为基准,认为这两个位置处于相同空间坐标系的相同方位中,则该第一电子设备采集屏幕指定空间范围内的本地三维图像,并分析出用户相对于该第一电子设备的屏幕的第一方位,从而该第一方位也可以直接应用到第二电子设备侧的三维场景模型中,进而根据该第一方位确定出该第一子场景模型区域。
207,确定该第一子场景模型区域对应的目标对端图像。
对该第一子场景模型区域进行平面图像转换,可以得到相应的目标对端图像,该目标对端图像可以反映出该第一子场景模型区域内的图像。
当然,基于该第一子场景模型区域恢复出的目标对端图像可以是一帧三维图像,也可以是一帧二维图像,具体可以根据显示需要进行设定。
208,在该第一显示单元的显示区域内显示该目标对端图像。
在本实施例中,第一电子设备会在接收到第二电子设备传输的对端三维图像数据后,构建该对端三维图像数据对应的对端三维场景模型,并该三维场景模型中,符合本地用户以当前的第一方位观看的第一子场景模型,从而确定出该第一子场景模型对应的目标对端图像,即确定出符合用户以该第一方位观看的目标对端图像并显示,实现了根据用户的方位显示符合用户观看视角的场景图像,从而使得用户通过改变自身的方位,便可以看到不同视角下的对端图像,给用户一种身临其境的感觉,提高了用户的体验性。
另一方面,除了第二电子设备也可以将符合用户观看视角的图像发送给第一电子设备,以便第二电子设备直接显示出符合当前用户观看视角的图像。参见图3,其示出了本发明一种信息处理方法另一个实施例的流程示意图,本实施例的方法可以应用于第一电子设备,该第一电子设备包括第一显示单元,该第一电子设备可以为手机、笔记本电脑和台式电脑等等,本实施例的方法可以包括:
301,建立该第一电子设备与第二电子设备的视频传输通道。
302,采集该第一电子设备指定空间范围内的本地三维图像数据。
303,基于该本地三维图像数据,确定该第一电子设备本地的用户当前时刻在该指定空间范围内的第一方位。
304,将该用户当前时刻在所述指定空间范围内的第一方位的信息通过该视频传输通道传输给第二电子设备。
305,接收该第二电子设备通过视频传输通道传输的,符合以该第一方位观看的目标对端三维图像数据。
在本实施例中,需要将该第一方位的信息发送给第二电子设备,以便该第二电子设备根据该第一电子设备侧的用户的第一方位,确定出该第二电子设备侧的三维图像中,适合该用户以该第一方位的视角进行观看的区域所对应的图像。
其中,该第二电子设备接收到该第一方位后,确定符合以该第一方位观看的目标对端三维图像数据的方式可以与前面实施例中第一电子设备侧确定该目标对端图像的过程相似。如该第二电子设备确定出该第二电子设备侧采集到的或者待传输的对端三维图像数据对应的对端三维场景模型,并确定在该对端三维场景模型中,符合以该第一方位观看的第一子场景模型区域,进而确定出该第一子场景模型区域对应的目标对端三维图像的数据。
可选的,该第二电子设备接收到该第一方位的信息后,也可以根据预先设定的空间方位对应关系,将该第一方位转换为该第二电子设备侧的对应的方位后,再确定该方位适合观看的第一子场景模型区域。
当然,如果默认该第一电子设备确定出的该第一方位同样对应该第二电子设备侧的子场景模型区域时,则无需进行转换。例如,该第一方位是相对该第一电子设备的显示单元的方位信息,该第二电子设备构建的对端三维模型区域也是相对应该第二电子设备的显示单元的模型空间,同时认为该第一电子设备和该第二电子设备的屏幕所在空间方位相同,则无需进行方位转换。
306,将该目标对端三维图像数据对应的目标对端三维图像确定为符合以该第一方位观看的目标对端图像。
在本实施例中,该第二电子设备传输给第一电子设备的三维图像数据,是符合该第一电子设备侧的用户以当前所在的第一方位观看的目标对端三维图像数据,因此,该第一电子设备无需再对该目标对端三维图像数据进行提取处理等。
当然,考虑到该第一显示单元所能显示的维度,在确定出该目标对端三维图像数据对应的目标对端三维图像后,如果需要以二维图像显示到该第一显示界面中,则可以将该目标对端三维图像转换为二维的目标对端图像;如果在该第一显示界面能够展现三维图像,则可以直接将该目标对端三维图像确定为待输出的目标对端图像。
307,在第一显示单元的显示区域中显示该目标对端图像。
在以上任意一个实施例中,确定出的该第一电子设备本地的用户在该指定空间范围内的该第一方位也可以仅仅是该用户的视线方向,如,也可以是通过对本地三维图像进行人脸检测,并确定该图像中人脸中眼球在三维图像中的视线,并基于所述本地三维图像,构建本地三维模型;根据人脸中眼球在所述三维图像中的视线,确定眼球在所述本地三维模型中的第一视线方向。然后,可以基于该第一视线方向,确定对端三维图像数据对应的三维图像中,符合以该第一视线方向观看的目标对端三维图像。
可选的,考虑到用户的身体位置、身体运动、头部运动,脸部朝向等都可以反映出该用户的观看视角,因此采集到第一电子设备的本地三维图像数据后,也可以根据所述本地三维图像数据中包含的用户图像信息,分析该第一电子设备本地的用户当前时刻在该指定空间范围内的空间位置,并确定该空间位置所对应的用户视线延伸方向。相应的,确定符合以第一方位观看的目标对端图像,可以是获取该对端三维图像数据对应的对端三维模型中,与该用户视线延伸方向相交的子三维模型区域所对应的目标对端图像。
当然,还可以综合该第一电子设备侧用户的位置,以及眼球运动来确定用户的视线延伸方向,在此不加限制。
参见图4,示出了本发明一种信息处理方法另一个实施例的流程示意图,本实施例的方法可以应用于第一电子设备,该第一电子设备包括第一显示单元,该第一电子设备可以为手机、笔记本电脑和台式电脑等等,本实施例的方法可以包括:
401,建立该第一电子设备与第二电子设备的视频传输通道。
402,采集该第一电子设备指定空间范围内的本地三维图像数据。
403,基于该本地三维图像数据,确定该第一电子设备本地的用户当前时刻在该指定空间范围内的第一方位。
404,接收该第二电子设备通过该视频传输通道传输的对端三维图像数据。
405,接收第二电子设备通过该视频传输通道传输的第二方位的信息。
其中,该第二方位为第二电子设备侧的用户在该第二电子设备侧的空间范围内的方位。
本实施例适用于第一电子设备与第二电子设备的实时视频通讯。当第二电子设备采集到该第二电子设备侧的三维图像数据后,可以根据第二电子设备侧的三维图像数据,确定出该第二电子设备侧的用户的第二方位,并将该第二方位发送给第一电子设备,以使得该第一电子设备确定出该第一电子设备侧的本地三维图像中适合以该第二方位观看的图像。
406,获取该对端三维图像数据对应的对端三维图像中,符合以该第一方位观看的目标对端图像。
其中,本实施例确定该目标对端图像的方式可以采用任意一个实施例的相关描述,在此不加以限制。
407,基于该本地三维图像数据构建本地三维场景模型。
408,确定该本地三维场景模型中,符合以第二方位观看的第二子场景模型区域。
409,确定与该第二子场景模型区域对应的目标本地三维图像。
第一电子设备根据本地三维图像数据构建本地三维场景模型,然后根据第二电子设备侧的用户的第二方位,确定该本地三维场景模型中适合用户以该第二方位观看的第二子场景模型区域,并确定出该第二子场景模型区域对应的目标本地三维图像,从而使得第二电子设备端的用户可以看到符合当前视角的图像。
410,将该目标本地三维图像发送给该第二电子设备。
411,在第一显示单元的显示区域中显示该目标对端图像。
本实施例适用于第一电子设备和第二电子设备的视频通讯,可以使得两端的用户看到符合当前视角的图像,从而使得两端的用户仿佛通过屏幕将两个空间互联在一起,提高了通讯的真实性。
另一方面,对应本发明的一种信息处理方法,本发明还提供了一种信息处理装置。
参见图5,示出了本发明一种信息处理装置一个实施例的结构示意图,本实施例的装置应用于第一电子设备,该电子设备具有第一显示单元,该装置可以包括:
通道建立单元501,用于建立所述第一电子设备与第二电子设备的视频传输通道;
图像采集单元502,用于采集所述第一电子设备指定空间范围内的本地三维图像数据;
方位确定单元503,用于基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位;
数据接收单元504,用于接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据;
数据处理单元505,用于获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像;
显示单元506,用于在所述第一显示单元的显示区域内显示所述目标对端图像。
可选的,在该装置的一种实现方式中,该数据处理单元,可以包括:
第一模型构建单元,用于构建与所述对端三维图像数据对应的对端三维场景模型;
第一视角确定单元,用于确定所述对端三维场景模型中,符合以所述第一方位观看的第一子场景模型区域;
第一目标确定单元,用于确定所述第一子场景模型区域对应的目标对端图像。
可选的,在该装置的另一种实现方式中,该装置还可以包括:
方位发送单元,用于在所述方位确定单元确定出第一方位之后,将所述用户当前时刻在所述指定空间范围内的第一方位的信息通过所述视频传输通道传输给所述第二电子设备;
则该数据接收单元,可以包括:
接收子单元,用于接收所述第二电子设备通过所述视频传输通道传输的,符合以所述第一方位观看的目标对端三维图像数据;
则所述数据处理单元,可以包括:
图像确定单元,用于将所述目标对端三维图像数据对应的目标对端三维图像确定为符合以所述第一方位观看的目标对端图像。
可选的,在以上任意一个实施例中,所述方位确定单元,可以包括:
朝向确定单元,用于根据所述本地三维图像数据中包含的用户图像信息,分析所述第一电子设备本地的用户当前时刻在所述指定空间内的空间位置,并确定所述空间位置所对应的用户视线延伸方向;
则,所述数据处理单元,包括:
数据处理子单元,用于获取所述对端三维图像数据对应的对端三维模型中,与所述用户视线延伸方向相交的子三维模型区域所对应的目标对端图像。
另一方面,在以上任意一个实施例中,该装置还可以包括:
方位接收单元,用于接收所述第二电子设备通过所述视频传输通道传输的第二方位的信息,其中所述第二方位为所述第二电子设备侧的用户在所述第二电子设备侧的空间内的方位信息;
第二模型构建单元,用于基于所述本地三维图像数据构建本地三维场景模型;
第二视觉确定单元,用于确定所述本地三维场景模型中,符合以所述第二方位观看的第二子场景模型区域;
第二目标确定单元,用于确定所述第二子场景模型区域对应的目标本地三维图像;
图像发送单元,用于将所述目标本地三维图像发送给所述第二电子设备。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种信息处理方法,其特征在于,应用于第一电子设备,所述电子设备具有第一显示单元,所述方法包括:
建立所述第一电子设备与第二电子设备的视频传输通道;
采集所述第一电子设备指定空间范围内的本地三维图像数据;
基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位;
接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据;
获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像;
在所述第一显示单元的显示区域内显示所述目标对端图像。
2.根据权利要求1所述的方法,其特征在于,所述获取对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像,包括:
构建与所述对端三维图像数据对应的对端三维场景模型;
确定所述对端三维场景模型中,符合以所述第一方位观看的第一子场景模型区域;
确定所述第一子场景模型区域对应的目标对端图像。
3.根据权利要求1所述的方法,其特征在于,在所述确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位之后,还包括:
将所述用户当前时刻在所述指定空间范围内的第一方位的信息通过所述视频传输通道传输给所述第二电子设备;
则,所述接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据,包括:
接收所述第二电子设备通过所述视频传输通道传输的,符合以所述第一方位观看的目标对端三维图像数据;
则,所述获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像,包括:
将所述目标对端三维图像数据对应的目标对端三维图像确定为符合以所述第一方位观看的目标对端图像。
4.根据权利要求1所述的方法,其特征在于,所述基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位,包括:
根据所述本地三维图像数据中包含的用户图像信息,分析所述第一电子设备本地的用户当前时刻在所述指定空间范围内的空间位置,并确定所述空间位置所对应的用户视线延伸方向;
则,所述获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像,包括:
获取所述对端三维图像数据对应的对端三维模型中,与所述用户视线延伸方向相交的子三维模型区域所对应的目标对端图像。
5.根据权利要求1所述的方法,其特征在于,还包括:
接收所述第二电子设备通过所述视频传输通道传输的第二方位的信息,其中所述第二方位为所述第二电子设备侧的用户在所述第二电子设备侧的空间内的方位信息;
基于所述本地三维图像数据构建本地三维场景模型;
确定所述本地三维场景模型中,符合以所述第二方位观看的第二子场景模型区域;
确定所述第二子场景模型区域对应的目标本地三维图像;
将所述目标本地三维图像发送给所述第二电子设备。
6.一种信息处理装置,其特征在于,应用于第一电子设备,所述电子设备具有第一显示单元,所述装置包括:
通道建立单元,用于建立所述第一电子设备与第二电子设备的视频传输通道;
图像采集单元,用于采集所述第一电子设备指定空间范围内的本地三维图像数据;
方位确定单元,用于基于所述本地三维图像数据,确定所述第一电子设备本地的用户当前时刻在所述指定空间范围内的第一方位;
数据接收单元,用于接收所述第二电子设备通过所述视频传输通道传输的对端三维图像数据;
数据处理单元,用于获取所述对端三维图像数据对应的对端三维图像中,符合以所述第一方位观看的目标对端图像;
显示单元,用于在所述第一显示单元的显示区域内显示所述目标对端图像。
7.根据权利要求6所述的装置,其特征在于,所述数据处理单元,包括:
第一模型构建单元,用于构建与所述对端三维图像数据对应的对端三维场景模型;
第一视角确定单元,用于确定所述对端三维场景模型中,符合以所述第一方位观看的第一子场景模型区域;
第一目标确定单元,用于确定所述第一子场景模型区域对应的目标对端图像。
8.根据权利要求6所述的装置,其特征在于,还包括:
方位发送单元,用于在所述方位确定单元确定出第一方位之后,将所述用户当前时刻在所述指定空间范围内的第一方位的信息通过所述视频传输通道传输给所述第二电子设备;
则所述数据接收单元,包括:
接收子单元,用于接收所述第二电子设备通过所述视频传输通道传输的,符合以所述第一方位观看的目标对端三维图像数据;
则所述数据处理单元,包括:
图像确定单元,用于将所述目标对端三维图像数据对应的目标对端三维图像确定为符合以所述第一方位观看的目标对端图像。
9.根据权利要求6所述的装置,其特征在于,所述方位确定单元,包括:
朝向确定单元,用于根据所述本地三维图像数据中包含的用户图像信息,分析所述第一电子设备本地的用户当前时刻在所述指定空间范围内的空间位置,并确定所述空间位置所对应的用户视线延伸方向;
则,所述数据处理单元,包括:
数据处理子单元,用于获取所述对端三维图像数据对应的对端三维模型中,与所述用户视线延伸方向相交的子三维模型区域所对应的目标对端图像。
10.根据权利要求6所述的装置,其特征在于,还包括:
方位接收单元,用于接收所述第二电子设备通过所述视频传输通道传输的第二方位的信息,其中所述第二方位为所述第二电子设备侧的用户在所述第二电子设备侧的空间内的方位信息;
第二模型构建单元,用于基于所述本地三维图像数据构建本地三维场景模型;
第二视觉确定单元,用于确定所述本地三维场景模型中,符合以所述第二方位观看的第二子场景模型区域;
第二目标确定单元,用于确定所述第二子场景模型区域对应的目标本地三维图像;
图像发送单元,用于将所述目标本地三维图像发送给所述第二电子设备。
CN201410061758.6A 2014-02-24 2014-02-24 一种信息处理方法和装置 Active CN104866261B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201410061758.6A CN104866261B (zh) 2014-02-24 2014-02-24 一种信息处理方法和装置
US14/493,662 US20150244984A1 (en) 2014-02-24 2014-09-23 Information processing method and device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410061758.6A CN104866261B (zh) 2014-02-24 2014-02-24 一种信息处理方法和装置

Publications (2)

Publication Number Publication Date
CN104866261A true CN104866261A (zh) 2015-08-26
CN104866261B CN104866261B (zh) 2018-08-10

Family

ID=53883500

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410061758.6A Active CN104866261B (zh) 2014-02-24 2014-02-24 一种信息处理方法和装置

Country Status (2)

Country Link
US (1) US20150244984A1 (zh)
CN (1) CN104866261B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106209791A (zh) * 2016-06-28 2016-12-07 联想(北京)有限公司 数据处理方法、装置和电子设备
CN106949887A (zh) * 2017-03-27 2017-07-14 远形时空科技(北京)有限公司 空间位置追踪方法、空间位置追踪装置及导航系统
CN107426522A (zh) * 2017-08-11 2017-12-01 歌尔科技有限公司 基于虚拟现实设备的视频方法和系统
WO2018120657A1 (zh) * 2016-12-27 2018-07-05 华为技术有限公司 一种共享虚拟现实数据的方法和设备
CN116112599A (zh) * 2021-11-10 2023-05-12 Oppo广东移动通信有限公司 设备控制方法、装置以及电子设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180077437A1 (en) * 2016-09-09 2018-03-15 Barrie Hansen Parallel Video Streaming
US11995776B2 (en) * 2021-01-19 2024-05-28 Samsung Electronics Co., Ltd. Extended reality interaction in synchronous virtual spaces using heterogeneous devices
CN113784217A (zh) * 2021-09-13 2021-12-10 天津智融创新科技发展有限公司 视频播放方法、装置、设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5495576A (en) * 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
EP0874303A1 (en) * 1997-04-25 1998-10-28 Texas Instruments France Video display system for displaying a virtual threedimensinal image
CN1732687A (zh) * 2002-12-30 2006-02-08 摩托罗拉公司 用于远程临场通信的方法、系统和装置
CN102314855A (zh) * 2010-07-06 2012-01-11 鸿富锦精密工业(深圳)有限公司 影像处理系统、显示装置及影像显示方法
CN103546733A (zh) * 2012-07-17 2014-01-29 联想(北京)有限公司 一种显示方法及电子设备

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015039239A1 (en) * 2013-09-17 2015-03-26 Société Des Arts Technologiques Method, system and apparatus for capture-based immersive telepresence in virtual environment

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5495576A (en) * 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
EP0874303A1 (en) * 1997-04-25 1998-10-28 Texas Instruments France Video display system for displaying a virtual threedimensinal image
CN1732687A (zh) * 2002-12-30 2006-02-08 摩托罗拉公司 用于远程临场通信的方法、系统和装置
CN102314855A (zh) * 2010-07-06 2012-01-11 鸿富锦精密工业(深圳)有限公司 影像处理系统、显示装置及影像显示方法
CN103546733A (zh) * 2012-07-17 2014-01-29 联想(北京)有限公司 一种显示方法及电子设备

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106209791A (zh) * 2016-06-28 2016-12-07 联想(北京)有限公司 数据处理方法、装置和电子设备
WO2018120657A1 (zh) * 2016-12-27 2018-07-05 华为技术有限公司 一种共享虚拟现实数据的方法和设备
CN108431872A (zh) * 2016-12-27 2018-08-21 华为技术有限公司 一种共享虚拟现实数据的方法和设备
CN106949887A (zh) * 2017-03-27 2017-07-14 远形时空科技(北京)有限公司 空间位置追踪方法、空间位置追踪装置及导航系统
CN106949887B (zh) * 2017-03-27 2021-02-09 远形时空科技(北京)有限公司 空间位置追踪方法、空间位置追踪装置及导航系统
CN107426522A (zh) * 2017-08-11 2017-12-01 歌尔科技有限公司 基于虚拟现实设备的视频方法和系统
CN107426522B (zh) * 2017-08-11 2020-06-09 歌尔科技有限公司 基于虚拟现实设备的视频方法和系统
CN116112599A (zh) * 2021-11-10 2023-05-12 Oppo广东移动通信有限公司 设备控制方法、装置以及电子设备

Also Published As

Publication number Publication date
CN104866261B (zh) 2018-08-10
US20150244984A1 (en) 2015-08-27

Similar Documents

Publication Publication Date Title
US10535181B2 (en) Virtual viewpoint for a participant in an online communication
CN104866261A (zh) 一种信息处理方法和装置
CN107820593B (zh) 一种虚拟现实交互方法、装置及系统
WO2019242262A1 (zh) 基于增强现实的远程指导方法、装置、终端和存储介质
US8976224B2 (en) Controlled three-dimensional communication endpoint
CN106170978B (zh) 深度图生成装置、方法和非短暂性计算机可读介质
JP2016500954A5 (zh)
US20140192164A1 (en) System and method for determining depth information in augmented reality scene
CN105898342A (zh) 一种视频的多点同屏播放方法及系统
WO2018175335A1 (en) Method and system for discovering and positioning content into augmented reality space
CN107911737A (zh) 媒体内容的展示方法、装置、计算设备及存储介质
CN107332977B (zh) 增强现实的方法及增强现实设备
CN112783700A (zh) 用于基于网络的远程辅助系统的计算机可读介质
CN105939497A (zh) 媒体串流系统及媒体串流方法
EP3264380B1 (en) System and method for immersive and collaborative video surveillance
US20210058611A1 (en) Multiviewing virtual reality user interface
KR101770188B1 (ko) 혼합 현실 체험 공간 제공 방법 및 시스템
US20180247457A1 (en) System and method of providing a virtual environment
JP2018033107A (ja) 動画の配信装置及び配信方法
CN112558761A (zh) 一种面向移动端的远程虚拟现实交互系统及交互方法
KR102200115B1 (ko) 다시점 360도 vr 컨텐츠 제공 시스템
US9979930B2 (en) Head-wearable apparatus, 3D video call system and method for implementing 3D video call
US20180101226A1 (en) Information processing apparatus
US11310472B2 (en) Information processing device and image generation method for projecting a subject image onto a virtual screen
CN101751116A (zh) 交互式立体影像显示方法及其相关立体显示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant