CN103634555A - 一种全景视频通信的方法及系统 - Google Patents

一种全景视频通信的方法及系统 Download PDF

Info

Publication number
CN103634555A
CN103634555A CN201210306753.6A CN201210306753A CN103634555A CN 103634555 A CN103634555 A CN 103634555A CN 201210306753 A CN201210306753 A CN 201210306753A CN 103634555 A CN103634555 A CN 103634555A
Authority
CN
China
Prior art keywords
panoramic video
picture frame
digital television
receiving apparatus
communication terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201210306753.6A
Other languages
English (en)
Other versions
CN103634555B (zh
Inventor
肖锐毅
邹灵灵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201210306753.6A priority Critical patent/CN103634555B/zh
Publication of CN103634555A publication Critical patent/CN103634555A/zh
Application granted granted Critical
Publication of CN103634555B publication Critical patent/CN103634555B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明适用于视频通信技术领域,提供了一种全景视频通信的方法及系统,所述方法包括:通过多个摄像头采集图像信息;提取所述图像信息中的同步图像帧;将提取的所述同步图像帧进行拼接,获取全景视频;将所获取的全景视频发送给通信终端。通过本发明,使得通信终端间可以实现全景视频的聊天,有效增强视频聊天的真实感。

Description

一种全景视频通信的方法及系统
技术领域
本发明属于视频通信技术领域,尤其涉及一种全景视频通信的方法及系统。
背景技术
全景(Panorama)技术是把相机环360度拍摄的一组或者多组照片拼接成一个全景图像。全景技术广泛应用于三维电子商务,如在线的房地产楼盘展示、虚拟旅游、虚拟教育等领域的视觉新技术,它给人们带来了全新的真实现场感和交互式的感受。
随着技术的发展,越来越多的人可以享受到视频通信带来的便利和乐趣,例如,现有基于3G的视频电话或者即时通信工具中的视频聊天等。然而,现有的视频通信仅仅是基于二维平面的,缺乏真实的立体感受。因此,将全景技术应用于视频通信中将显得十分重要。
发明内容
本发明实施例的目的在于提供一种全景视频通信的方法,以解决现有视频通信仅仅是基于二维平面的,缺乏真实立体感受的问题。
本发明实施例是这样实现的,一种全景视频通信的方法,所述方法包括:
通过多个摄像头采集图像信息;
提取所述图像信息中的同步图像帧;
将提取的所述同步图像帧进行拼接,获取全景视频;
将所获取的全景视频发送给通信终端。
本发明实施例的另一目的在于提供一种全景视频通信的系统,所述系统包括:
多个摄像头以及数字电视接收装置,所述多个摄像头与所述数字电视接收装置连接;
所述摄像头,用于采集图像信息;
所述数字电视接收装置,用于提取多个摄像头采集的所述图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取全景视频,并将所获取的全景视频发送给通信终端。
本发明实施例的有益效果是:本发明实施例将全景技术应用到视频聊天中,使得通信终端间可以实现全景视频的聊天,有效增强视频聊天的真实感。而且,本发明实施例中不需要借助昂贵、复杂的第三方设备(如鱼眼镜头等),降低了全景技术应用的复杂度和成本,提高了全景视频合成的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的全景视频通信方法的实现流程图;
图2中的2a、2b、2c是本发明第一实施例提供的图像信息处理的示例图;
图3是本发明第二实施例提供的全景视频通信方法的交互流程图;
图4是本发明第三实施例提供的全景视频通信系统的组成结构图;
图5是本发明第三实施例提供的全景视频通信的示意图;
图6是本发明第四实施例提供的全景视频通信系统的应用场景图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一:
图1示出了本发明第一实施例提供的全景视频通信方法的实现流程,其过程详述如下:
在步骤S101中,通过多个摄像头采集图像信息。
在本实施例中,各摄像头分别采集不同区域或者不同范围内的图像信息,,并记录图像信息采集的时间。所述多个摄像头可以实现全方位覆盖的图像信息采集(例如三个摄像头,第一个摄像头采集(00,1200)范围内的图像信息,第二个摄像头采集(1200,2400)范围内的图像信息,第二个摄像头采集(2400,3600)范围内的图像信息)。各摄像头采取串联的方式连接,以保证图像信息采集的同步。
在步骤S102中,提取所述图像信息中的同步图像帧。
在本实施例中,根据图像信息采集的时间,提取所述图像信息中的同步图像帧。其中,所述同步图像帧是指各摄像头在同一时间点采集的不同方向的图像信息,如图2a所示。
在步骤S103中,将提取的所述同步图像帧进行拼接,获取全景视频。
在本实施例中,将某一时间段内同一时间点采集的不同方向的图像信息进行拼接获得全景静态图像,再将所述时间段内所有的全景静态图像组合生成全景视频。
其中,所述将提取的所述同步图像帧进行拼接具体包括:
获取所述同步图像帧中的特征点,例如通过SIFT(Scale Invariant FeatureTransform)算法获取所述同步图像帧中的特征点,所述特征点可以为图像中的房屋、人等影像。
根据所述特征点对所述同步图像帧进行匹配,删除所述同步图像帧中的重叠部分;本实施例还包括根据匹配后的图像的特征点迭代计算出最佳的投影模型,即摄像头拍摄的空间物体在像平面的最佳投影,包括图像的缩放等操作。
根据所述特征点,对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像,如图2b所示。
优选的是,本实施例在所述将提取的所述同步图像帧进行拼接的步骤之后,还包括:
对拼接后的图像进行剪裁。
在本实施例中,由于摄像头采集的图像不能保证是水平平移的,所以拼接后的图像也可能会存在高低偏差(如图2b所示),因此需要对高低有偏差的部分进行裁剪,剪裁后的图像如图2c所示。
在步骤S104中,将所获取的全景视频发送给通信终端。
例如,当本实施例执行主体为第一终端时,则所述第一终端将所获取的全景视频发送给与所述第一终端连接通信的第二终端,所述第二终端接收并显示所述第一终端发送的全景视频。
优选的是,为了实现实时的“面对面”交互体验,本实施例还包括:
接收并显示所述通信终端发送的全景视频。其中,通信终端发送的所述全景视频可以采用本实施例的上述方法获取,在此不再赘述。
优选的是,为了方便对全景视频的显示控制,本实施例还包括:
向所述通信终端发送遥控信息,以使得所述通信终端在接收到所述遥控信息后,根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述通信终端显示器上全景视频的显示。其中,所述遥控信息包括手势信息,以便于用户在触摸屏上通过多点触摸等方式实现对所述全景视频的显示控制。
实施例二:
图3示出了本发明第二实施例提供的全景视频通信方法的交互流程,其过程详述如下:
1、第一终端和第二终端通过多个摄像头采集图像信息。
在本实施例中,第一终端和第二终端通过多个摄像头(例如3个)对不同视角方向进行全方位覆盖的图像信息采集。
2、第一终端提取所采集的图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取对应的第一全景视频;第二终端提取所采集的图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取对应的第二全景视频。
在本实施例中,所述同步图像帧是指所述摄像头在某一时间段的同一时间点采集的不同视角方向的图像信息。将该时间点采集的不同视角方向的图像信息进行拼接后生成一张全景静态图像,将该时间段内的所有全景静态图像组合后生成全景视频。
需要说明的是,现有全景静态图像是通过鱼眼镜头等复杂设备拍摄特定区域内的图片,再将所拍摄的图片经过处理后合成的。现有技术只是基于静态图片的处理,而本实施例是基于实时图片的处理,本实施例通过采集实时图像,提取所述实时图像中的同步图像帧,将提取的所述同步图像帧进行拼接,来获取实时的全景视频,进一步提高用户的体验效果。
3、将所获取的第一全景视频发送给所述第二终端;将所获取的第二全景视频发送给所述第一终端。
4、第二终端接收所述第一终端发送的第一全景视频,并将所述第一全景视频显示在所述第二终端的显示器上;第一终端接收所述第二终端发送的第二全景视频,并将所述第二全景视频显示在所述第一终端的显示器上。
优选的是,为了方便对所述全景视频的显示控制,本实施例还包括:
第一终端向所述第二终端发送遥控信息;
第二终端接收所述第一终端发送的遥控信息,并根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,根据所获取的显示控制指令控制所述第二终端显示器上第一全景视频的显示;以及
第二终端向所述第一终端发送遥控信息;
第一终端接收所述第二终端发送的遥控信息,并根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,根据所获取的显示控制指令控制所述第一终端显示器上第二全景视频的显示。
优选的是,在所述第一终端或第二终端发送遥控信息的装置为触摸屏装置时,所述遥控信息可以为手势信息,即用户可以在触摸屏上通过多点触摸等方式实现对所述全景视频的显示控制(例如环视等)。
本实施例将全景技术应用到视频聊天中,为用户提供实时的“面对面”交互体验,增强真实感,提高用户体验效果。而且,本实施例中只需通过普通的图像采集设备来采集图像,再将采集的图像合成全景视频,而不需要借助昂贵、复杂的第三方设备(如鱼眼镜头等),降低了全景技术应用的复杂度和成本,提高了全景视频合成的效率。
实施例三:
图4示出了本发明实施例四提供的全景视频通信系统的组成结构,为了便于说明,仅示出了与本发明实施例相关的部分。
该全景视频通信系统包括多个摄像头41以及数字电视接收装置42,所述多个摄像头41与所述数字电视接收装置42连接,其中:
所述摄像头41,用于采集图像信息;
所述数字电视接收装置42,用于提取所述多个摄像头采集的图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取全景视频,并将所获取的全景视频发送给通信终端。其中,所述数字电视接收装置42可以为Q+Box。
进一步的,所述全景视频通信系统还包括:
通信终端,用于接收并显示所述数字电视接收装置发送的全景视频。
进一步的,所述全景视频通信系统还包括:
遥控器43,所述遥控器43与所述数字电视接收装置42连接;
其中,所述遥控器43可以为智能手机、平板电脑或者其他具有类似遥控器功能的控制器。
所述遥控器43,用于向所述通信终端发送遥控信息,以使得所述通信终端在接收到所述遥控信息后,根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述通信终端显示器上全景视频的显示。其中,当所述遥控器为具有触摸操作功能的遥控装置时,所述遥控信息包括手势信息,即用户可以在所述遥控器的触摸屏上通过多点触摸等方式实现对所述全景视频的显示控制(例如环视等)。
进一步的,所述数字电视接收装置42,还用于接收所述通信终端发送的全景视频,并将接收到的所述通信终端发送的全景视频发送给所述遥控器43;
所述遥控器43,还用于接收所述数字电视接收装置发送的全景视频,并根据该全景视频向所述通信终端发送遥控信息。
进一步的是,所述全景视频通信系统还包括:
显示器44,所述显示器44与所述数字电视接收装置42连接;
其中,所述显示器可以为电脑、电视机等。
所述数字电视接收装置42,还用于接收所述通信终端发送的全景视频,并将接收到的所述通信终端发送的全景视频发送给所述显示器44;
所述显示器44,用于显示所述数字电视接收装置42发送的全景视频。
所述数字电视接收装置42具体用于,获取所述同步图像帧中的特征点,根据所述特征点对所述同步图像帧进行匹配,删除所述同步图像帧中的重叠部分,根据所述特征点,对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像。
进一步的,所述数字电视接收装置42还用于,对拼接后的图像进行剪裁。
举例说明上述过程,如图5所示:
用户A所在的第一终端与用户B所在的第二终端连接通信,所述第一终端和第二终端分别包括三个摄像头、Q+Box、遥控器以及显示器。
其中,所述三个摄像头与所述Q+Box连接,所述Q+Box分别于所述遥控器以及显示器连接。
在第一终端和第二终端启动视频聊天后,第一终端和第二终端的三个摄像头采集不同视角方向的图像信息,并将采集的所述图像信息发送给对应的Q+Box,Q+Box提取所述图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取全景视频,并将所获取的全景视频发送给对应通信终端的Q+Box(即第一终端的Q+Box将所获取的全景视频发送给第二终端的Q+Box,第二终端的Q+Box将所获取的全景视频发送给第一终端的Q+Box),所述Q+Box在接收到所述全景视频后,将所述全景视频分别发送给所述遥控器和显示器,所述遥控器在接收到所述Q+Box发送的全景视频后,可以根据该全景视频向对应的通信终端发送遥控信息;具体的是,所述遥控器根据该全景视频通过所述Q+Box向所述通信终端发送遥控信息,即所述遥控器将遥控信息发送给所述Q+Box,所述Q+Box通过QTPserver接收所述遥控信息,并将接收的所述遥控信息发送给所述通信终端的Q+Box,所述通信终端的Q+Box发送给所述通信终端的显示器,所述通信终端的显示器根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述显示器上全景视频的显示。所述显示器在接收到所述Q+Box发送的全景视频后,显示所述全景视频,实现实时的“面对面”交互体验。
本实施例提供的终端设备可以使用在前述对应的全景视频通信方法,详情参见上述全景视频通信方法实施例一和二的相关描述,在此不再赘述。
实施例四:
图6示出了本发明第四实施例提供的全景视频通信系统的应用场景,本发明实施例所提供的全景视频通信方法可应用于该全景视频通信系统中,为了便于说明,仅示出了与本实施例相关的部分。
该全景视频通信系统包括第一终端1和第二终端2。所述第一终端1和第二终端2通过网络连接通信。
该第一终端1包括多个第一摄像头11、第一数字电视接收装置12以及第一显示器13,所述多个第一摄像头11与所述第一数字电视接收装置12连接,所述第一数字电视接收装置12与所述第一显示器13连接。其中,所述显示器13可以为电脑、电视机等。
所述第一摄像头11,用于采集图像信息。其中各摄像头分别采集不同区域或者不同范围内的图像信息,所述多个摄像头可以实现全方位覆盖的图像信息采集(例如三个摄像头,第一个摄像头采集(00,1200)范围内的图像信息,第二个摄像头采集(1200,2400)范围内的图像信息,第二个摄像头采集(2400,3600)范围内的图像信息)。各摄像头采取串联的方式连接,以保证图像信息采集的同步。
所述第一数字电视接收装置12,用于提取多个摄像头采集的所述图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取第一全景视频,并将所获取的第一全景视频发送给所述第二终端2。其中,所述第一数字电视接收装置12可以为Q+Box。所述第一数字电视接收装置12具体用于,提取多个摄像头采集的所述图像信息中的同步图像帧,获取所述同步图像帧中的特征点,根据所述特征点对所述同步图像帧进行匹配,删除所述同步图像帧中的重叠部分,根据所述特征点,对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像,通过对所有获得全景静态图像进行组合获得第一全景视频,并将所获取的第一全景视频发送给所述第二终端2。
进一步的,所述数字电视接收装置42还用于,对拼接后的图像进行剪裁。
该第二终端2包括多个第二摄像头21以及第二数字电视接收装置22,所述多个第二摄像头21与所述第二数字电视接收装置22连接,所述第二数字电视接收装置22与所述第二显示器23连接。其中,所述显示器23可以为电脑、电视机等。
所述第二摄像头21,用于采集图像信息。
所述第二数字电视接收装置22,用于提取多个第二摄像头采集的所述图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取第二全景视频,并将所获取的第二全景视频发送给所述第一终端1。其中,所述第二数字电视接收装置22可以为Q+Box。所述第二数字电视接收装置22具体用于,提取多个摄像头采集的所述图像信息中的同步图像帧,获取所述同步图像帧中的特征点,根据所述特征点对所述同步图像帧进行匹配,删除所述同步图像帧中的重叠部分,根据所述特征点,对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像,通过对所有获得全景静态图像进行组合获得第二全景视频,并将所获取的第二全景视频发送给所述第一终端1。
所述第二终端2,用于接收并显示所述第一数字电视接收装置12发送的所述第一全景视频。具体的是,通过所述第二终端2的第二数字电视接收装置22接收所述第一数字电视接收装置12发送的所述第一全景视频,并将接收到的所述第一全景视频显示在所述第二终端2的第二显示器24上。
所述第一终端1,用于接收并显示所述第二数字电视接收装置22发送的所述第二全景视频。具体的是,通过所述第一终端1的第一数字电视接收装置12接收所述第二数字电视接收装置22发送的所述第二全景视频,并将接收到的所述第二全景视频显示在所述第一终端1的第一显示器14上。
本实施例通过多个普通摄像头采集图像信息,并通过数字电视接收装置将采集的图像信息合成全景视频,将合成的全景视频发送给对应的通信终端,从而使得通信终端间可以实现全景视频的聊天,有效增强视频聊天的真实感。
进一步的,所述第一终端1还包括:
第一遥控器14,所述第一遥控器14与所述第一数字电视接收装置12连接;
其中,所述第一遥控器14可以为智能手机、平板电脑或者其他具有类似遥控器功能的控制器。
所述第一遥控器14,用于向所述第二终端2发送遥控信息,以使得所述第二终端2在接收到所述遥控信息后,根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述第二终端2显示器23上第一全景视频的显示。其中,当所述第一遥控器14为具有触摸操作功能的遥控装置时,所述遥控信息包括手势信息,即用户可以在所述遥控器的触摸屏上通过多点触摸等方式实现对所述全景视频的显示控制(例如环视等)。
进一步的,所述第一数字电视接收装置12,还用于将接收的所述第二数字电视接收装置22发送的第二全景视频发送给所述第一遥控器13;
所述第一遥控器14,还用于接收所述第一数字电视接收装置12发送的第一全景视频,并根据该第一全景视频向所述第二终端2发送遥控信息。具体的是,第一遥控器14根据该第一全景视频通过所述第一数字电视接收装置12向所述第二终端2发送遥控信息,即第一遥控器14将遥控信息发送给所述第一数字电视接收装置12,所述第一数字电视接收装置12再将所述遥控信息发送给所述第二数字电视接收装置22,所述第二数字电视接收装置22发送给所述第二显示器23,所述第二显示器23根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述显示器23上第一全景视频的显示。
进一步的,所述第二终端2还包括:
第二遥控器24,所述第二遥控器24与所述第二数字电视接收装置22连接;
其中,所述第二遥控器24可以为智能手机、平板电脑或者其他具有类似遥控器功能的控制器。
所述第二遥控器24,用于向所述第一终端1发送遥控信息,以使得所述第一终端1在接收到所述遥控信息后,根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述第一终端1显示器13上第二全景视频的显示。其中,当所述第二遥控器24为具有触摸操作功能的遥控装置时,所述遥控信息包括手势信息,即用户可以在所述遥控器的触摸屏上通过多点触摸等方式实现对所述全景视频的显示控制(例如环视等)。
进一步的,所述第二数字电视接收装置22,还用于将接收的所述第一数字电视接收装置12发送的第一全景视频发送给所述第二遥控器24;
所述第二遥控器24,还用于接收所述第二数字电视接收装置22发送的第二全景视频,并根据该第二全景视频向所述第一终端1发送遥控信息。具体的是,第二遥控器24根据该第二全景视频通过所述第二数字电视接收装置22向所述第一终端1发送遥控信息,即第二遥控器24将遥控信息发送给所述第二数字电视接收装置22,所述第二数字电视接收装置22再将所述遥控信息发送给所述第一数字电视接收装置12,所述第一数字电视接收装置12发送给所述第一显示器13,所述第一显示器13根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述显示器13上第二全景视频的显示。
在本实施例中,所述同步图像帧是指各摄像头在某一时间段的同一时间点采集的不同图像信息。将该时间点采集的不同图像信息进行拼接后生成一张全景静态图,再将该时间段内的所有全景静态图组合后生成全景视频。
优选的是,所述遥控信息包括手势信息,所述显示控制指令包括对所述全景视频的环视控制指令。
通过本实施例,使得用户可以方便的对全景视频的显示进行控制。
综上所述,本发明实施例将全景技术应用到视频聊天中,为用户提供实时的“面对面”交互体验,增强真实感,提高用户体验效果。而且,本实施例中只需通过普通的图像采集设备来采集图像,再将采集的图像合成全景视频,而不需要借助昂贵、复杂的第三方设备(如鱼眼镜头等),降低了全景技术应用的复杂度和成本,提高了全景视频合成的效率。本发明实施例操作简单,具有较强的易用性和实用性。
本领域普通技术人员还可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以在存储于一计算机可读取存储介质中,所述的存储介质,包括ROM/RAM、磁盘、光盘等。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下做出若干等同替代或明显变型,而且性能或用途相同,都应当视为属于本发明由所提交的权利要求书确定的专利保护范围。

Claims (14)

1.一种全景视频通信的方法,其特征在于,所述方法包括:
通过多个摄像头采集图像信息;
提取所述图像信息中的同步图像帧;
将提取的所述同步图像帧进行拼接,获取全景视频;
将所获取的全景视频发送给通信终端。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
通信终端接收并显示所述全景视频。
3.如权利要求1或2所述的方法,其特征在于,所述方法还包括:
向所述通信终端发送遥控信息,以使得所述通信终端在接收到所述遥控信息后,根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述通信终端全景视频的显示。
4.如权利要求3所述的方法,其特征在于,所述遥控信息包括手势信息。
5.如权利要求1所述的方法,其特征在于,所述将提取的所述同步图像帧进行拼接具体包括:
获取所述同步图像帧中的特征点;
根据所述特征点对所述同步图像帧进行匹配,删除所述同步图像帧中的重叠部分;
根据所述特征点,对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像。
6.如权利要求1所述的方法,其特征在于,在所述将提取的所述同步图像帧进行拼接的步骤之后,还包括:
对拼接后的图像进行剪裁。
7.一种全景视频通信的系统,其特征在于,所述系统包括:
多个摄像头以及数字电视接收装置,所述多个摄像头与所述数字电视接收装置连接;
所述摄像头,用于采集图像信息;
所述数字电视接收装置,用于提取多个摄像头采集的所述图像信息中的同步图像帧,将提取的所述同步图像帧进行拼接,获取全景视频,并将所获取的全景视频发送给通信终端。
8.如权利要求7所述的系统,其特征在于,所述系统还包括:
通信终端,用于接收并显示所述数字电视接收装置发送的全景视频。
9.如权利要求7或8所述的系统,其特征在于,所述系统还包括:
遥控器,所述遥控器与所述数字电视接收装置连接;
所述遥控器,用于向所述通信终端发送遥控信息,以使得所述通信终端在接收到所述遥控信息后,根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令,并根据所获取的显示控制指令控制所述通信终端全景视频的显示。
10.如权利要求9所述的系统,其特征在于,所述遥控信息包括手势信息。
11.如权利要求9所述的终端设备,其特征在于,所述数字电视接收装置,还用于接收所述通信终端发送的全景视频,并将接收到的所述通信终端发送的全景视频发送给所述遥控器;
所述遥控器,还用于接收所述数字电视接收装置发送的全景视频,并根据该全景视频向所述通信终端发送遥控信息。
12.如权利要求7所述的系统,其特征在于,所述系统还包括:
显示器,所述显示器与所述数字电视接收装置连接;
所述数字电视接收装置,还用于接收所述通信终端发送的全景视频,并将接收到的所述通信终端发送的全景视频发送给所述显示器;
所述显示器,用于显示所述数字电视接收装置发送的全景视频。
13.如权利要求7所述的系统,其特征在于,所述数字电视接收装置具体用于,获取所述同步图像帧中的特征点,根据所述特征点对所述同步图像帧进行匹配,删除所述同步图像帧中的重叠部分,根据所述特征点,对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像。
14.如权利要求7所述的系统,其特征在于,所述数字电视接收装置还用于,对拼接后的图像进行剪裁。
CN201210306753.6A 2012-08-27 2012-08-27 一种全景视频通信的方法及系统 Active CN103634555B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210306753.6A CN103634555B (zh) 2012-08-27 2012-08-27 一种全景视频通信的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210306753.6A CN103634555B (zh) 2012-08-27 2012-08-27 一种全景视频通信的方法及系统

Publications (2)

Publication Number Publication Date
CN103634555A true CN103634555A (zh) 2014-03-12
CN103634555B CN103634555B (zh) 2018-12-07

Family

ID=50215139

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210306753.6A Active CN103634555B (zh) 2012-08-27 2012-08-27 一种全景视频通信的方法及系统

Country Status (1)

Country Link
CN (1) CN103634555B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103873775A (zh) * 2014-03-24 2014-06-18 联想(北京)有限公司 电子设备以及信息处理方法
CN104284234A (zh) * 2014-10-17 2015-01-14 惠州Tcl移动通信有限公司 多个终端间共享同步图像的方法及系统
WO2015096303A1 (zh) * 2013-12-24 2015-07-02 中兴通讯股份有限公司 一种控制视频源的方法和视频会议终端
CN105049719A (zh) * 2015-07-03 2015-11-11 广东欧珀移动通信有限公司 一种全景拍摄方法及移动终端
CN105095123A (zh) * 2014-05-19 2015-11-25 联想(北京)有限公司 一种数据处理的方法及电子设备
CN105100688A (zh) * 2014-05-12 2015-11-25 索尼公司 图像处理方法、图像处理装置和监视系统
CN106028132A (zh) * 2016-06-30 2016-10-12 四川长虹电器股份有限公司 通过智能移动终端在电视上观看全景视频的系统及方法
CN106657977A (zh) * 2016-11-29 2017-05-10 广东小天才科技有限公司 具有全景摄像功能的虚拟现实设备和全景视频通话方法
CN106657733A (zh) * 2016-11-25 2017-05-10 深圳市元征科技股份有限公司 一种基于无人机的全景直播方法及终端
WO2017096803A1 (zh) * 2015-12-10 2017-06-15 乐视控股(北京)有限公司 调整智能电视的全景视频播放视角的方法和装置
CN108289197A (zh) * 2017-12-29 2018-07-17 深圳市朗诚科技股份有限公司 浮标4g无线视频监控监测方法及系统
CN109842542A (zh) * 2017-11-27 2019-06-04 腾讯数码(天津)有限公司 即时会话方法及装置、电子设备、存储介质
CN111964650A (zh) * 2020-09-24 2020-11-20 南昌工程学院 一种水下目标跟踪装置
CN113315940A (zh) * 2021-03-23 2021-08-27 海南视联通信技术有限公司 一种视频通话方法、装置及计算机可读存储介质
CN115695698A (zh) * 2022-10-29 2023-02-03 重庆长安汽车股份有限公司 一种行车信息存储的处理方法、系统、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004159014A (ja) * 2002-11-05 2004-06-03 Nec Corp デジタルカメラ付き携帯通信端末
CN101146231A (zh) * 2007-07-03 2008-03-19 浙江大学 根据多视角视频流生成全景视频的方法
US20080095526A1 (en) * 2006-10-18 2008-04-24 Teng-Lung Chang Structure of photographic apparatus
CN101345843A (zh) * 2008-08-28 2009-01-14 中兴通讯股份有限公司 可视移动终端全景视频的实现方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004159014A (ja) * 2002-11-05 2004-06-03 Nec Corp デジタルカメラ付き携帯通信端末
US20080095526A1 (en) * 2006-10-18 2008-04-24 Teng-Lung Chang Structure of photographic apparatus
CN101146231A (zh) * 2007-07-03 2008-03-19 浙江大学 根据多视角视频流生成全景视频的方法
CN101345843A (zh) * 2008-08-28 2009-01-14 中兴通讯股份有限公司 可视移动终端全景视频的实现方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
北京市图形图像学学会: "《图像图形技术研究与应用》", 31 December 2009 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015096303A1 (zh) * 2013-12-24 2015-07-02 中兴通讯股份有限公司 一种控制视频源的方法和视频会议终端
CN103873775A (zh) * 2014-03-24 2014-06-18 联想(北京)有限公司 电子设备以及信息处理方法
CN105100688A (zh) * 2014-05-12 2015-11-25 索尼公司 图像处理方法、图像处理装置和监视系统
CN105100688B (zh) * 2014-05-12 2019-08-20 索尼公司 图像处理方法、图像处理装置和监视系统
CN105095123A (zh) * 2014-05-19 2015-11-25 联想(北京)有限公司 一种数据处理的方法及电子设备
CN104284234A (zh) * 2014-10-17 2015-01-14 惠州Tcl移动通信有限公司 多个终端间共享同步图像的方法及系统
CN105049719A (zh) * 2015-07-03 2015-11-11 广东欧珀移动通信有限公司 一种全景拍摄方法及移动终端
WO2017096803A1 (zh) * 2015-12-10 2017-06-15 乐视控股(北京)有限公司 调整智能电视的全景视频播放视角的方法和装置
CN106028132A (zh) * 2016-06-30 2016-10-12 四川长虹电器股份有限公司 通过智能移动终端在电视上观看全景视频的系统及方法
CN106657733A (zh) * 2016-11-25 2017-05-10 深圳市元征科技股份有限公司 一种基于无人机的全景直播方法及终端
WO2018094866A1 (zh) * 2016-11-25 2018-05-31 深圳市元征科技股份有限公司 一种基于无人机的全景直播方法及终端
CN106657977B (zh) * 2016-11-29 2019-03-26 广东小天才科技有限公司 具有全景摄像功能的虚拟现实设备和全景视频通话方法
CN106657977A (zh) * 2016-11-29 2017-05-10 广东小天才科技有限公司 具有全景摄像功能的虚拟现实设备和全景视频通话方法
CN109842542A (zh) * 2017-11-27 2019-06-04 腾讯数码(天津)有限公司 即时会话方法及装置、电子设备、存储介质
CN108289197A (zh) * 2017-12-29 2018-07-17 深圳市朗诚科技股份有限公司 浮标4g无线视频监控监测方法及系统
CN111964650A (zh) * 2020-09-24 2020-11-20 南昌工程学院 一种水下目标跟踪装置
CN113315940A (zh) * 2021-03-23 2021-08-27 海南视联通信技术有限公司 一种视频通话方法、装置及计算机可读存储介质
CN115695698A (zh) * 2022-10-29 2023-02-03 重庆长安汽车股份有限公司 一种行车信息存储的处理方法、系统、设备及介质

Also Published As

Publication number Publication date
CN103634555B (zh) 2018-12-07

Similar Documents

Publication Publication Date Title
CN103634555A (zh) 一种全景视频通信的方法及系统
CN108737882B (zh) 图像的显示方法、装置、存储介质及电子装置
CN104219584A (zh) 基于增强现实的全景视频交互方法和系统
CN108933920B (zh) 一种视频画面的输出、查看方法及装置
CN112533002A (zh) 一种用于vr全景直播的动态图像融合方法及系统
CN104902263A (zh) 一种图像信息展现系统和方法
CN103488040A (zh) 立体全景影像合成方法及其相关的立体摄影机
US20150244756A1 (en) Method, Apparatus and System for Determining Terminal That is to Share Real-Time Video
CN108616733B (zh) 一种全景视频图像的拼接方法及全景相机
CN105959620A (zh) 一种全景视频的同步显示方法及设备
CN105554430A (zh) 一种视频通话方法、系统及装置
CN106453913A (zh) 预览全景内容的方法及装置
CN112492231B (zh) 远程交互方法、装置、电子设备和计算机可读存储介质
CN108259806A (zh) 一种视频通信方法、设备和终端
CN103248855A (zh) 基于固定机位的课程录制系统、视频处理装置和录课方法
CN110740310A (zh) 一种虚拟场景漫游方法、系统、装置、设备及计算机介质
CN114004927A (zh) 3d视频模型重建方法、装置、电子设备及存储介质
CN111147883A (zh) 直播方法、装置、头戴显示设备和可读存储介质
CN111083368A (zh) 一种基于云端的模拟物理云台全景视频展示系统
CN108898680B (zh) 一种在虚拟三维空间中自动校正截取图片的方法及装置
CN108320331B (zh) 一种生成用户场景的增强现实视频信息的方法与设备
CN116320364B (zh) 一种基于多层显示的虚拟现实拍摄方法及显示方法
CN104869283A (zh) 一种拍摄方法及电子设备
CN105892890A (zh) 一种全景互动移动终端展示系统及方法
CN103294193A (zh) 多终端互动的方法、装置和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant