CN109063123B - 全景视频的标注添加方法及系统 - Google Patents

全景视频的标注添加方法及系统 Download PDF

Info

Publication number
CN109063123B
CN109063123B CN201810866280.2A CN201810866280A CN109063123B CN 109063123 B CN109063123 B CN 109063123B CN 201810866280 A CN201810866280 A CN 201810866280A CN 109063123 B CN109063123 B CN 109063123B
Authority
CN
China
Prior art keywords
target object
panoramic video
coordinate system
map
coordinate information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810866280.2A
Other languages
English (en)
Other versions
CN109063123A (zh
Inventor
修文群
郜志超
梁伟
齐文光
彭信
李程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Technology Institute of Urban Public Safety Co Ltd
Original Assignee
Shenzhen Technology Institute of Urban Public Safety Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Technology Institute of Urban Public Safety Co Ltd filed Critical Shenzhen Technology Institute of Urban Public Safety Co Ltd
Priority to CN201810866280.2A priority Critical patent/CN109063123B/zh
Publication of CN109063123A publication Critical patent/CN109063123A/zh
Application granted granted Critical
Publication of CN109063123B publication Critical patent/CN109063123B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明涉及全景视频处理技术领域,具体涉及一种全景视频的标注添加方法及系统。该全景视频的标注添加方法包括:以相机位置为初始原点建立相机坐标系;以预设线段为参照物建立地图坐标系和相机坐标系的坐标转换模型;获取目标物的地图坐标信息,将标注内容与目标物的地图坐标信息进行关联,并在全景视频中显示。本发明的全景视频的标注添加方法及系统实现了在全景视频中对静态与动态目标物的标注,操作步骤简单,对应存储结构简单,在大数据处理应用中能大幅提升检索速度。

Description

全景视频的标注添加方法及系统
技术领域
本发明涉及全景视频处理技术领域,具体涉及一种全景视频的标注添加方法及系统。
背景技术
全景图像(panorama)也称360°全景环视技术,是对场景的超大视角乃至360度完整场景范围进行展示的照片。我们这里所说的是全景图像,是通过相对相机捕捉整个场景的图像信息用软件进行合成,并用专门的播放器进行播放,把二维的平面模拟成真实的三维空间,以达到模拟和再现场景的真实环境的效果。全景图像是由在某一固定点拍摄的多幅不同方向的实景图像拼接而成的。全景视频是由具有时间关联的全景图像序列组成,从视频中可以获取真实的全景景象,并且可以通过时间来定位视频帧。
随着全景视频在街景中的应用,单纯的街景视频本身已无法满足商家的广告宣传需求和用户的查询需求。因此,需要在全景视频中添加标注,以便商家宣传和用户查询。
鉴于此,克服以上现有技术中的缺陷,提供一种新的全景视频的标注添加方法及系统成为本领域亟待解决的技术问题。
发明内容
本发明的目的在于针对现有技术的上述缺陷,提供一种全景视频的标注添加方法及系统。
本发明提供了一种全景视频的标注添加方法,该方法包括:
在全景视频中,建立以相机位置为初始原点的三维的相机坐标系;
以预设线段为参照物,分别获取所述预设线段在所述相机坐标系中的相机坐标信息、以及在地图坐标系中的地图坐标信息,并根据所述预设线段的相机坐标信息和地图坐标信息建立地图坐标系和相机坐标系的坐标转换模型;
在所述相机坐标系中获取目标物的相机坐标信息,并根据所述坐标转换模型计算出所述目标物在所述地图坐标系中的地图坐标信息;以及
接收对目标物的标注内容,将标注内容与所述目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在所述全景视频的地图中进行显示。
优选地,所述“在全景视频中,建立以相机位置为初始原点的三维的相机坐标系”的步骤包括:
在全景视频中,以相机位置作为初始原点(0,0,0);
以水平面内经过初始原点的任意两个互相垂直的方向的直线为初始X轴和初始Y轴,以经过初始原点的竖直方向的直线为Z轴;
设置第一长度作为坐标刻度,建立三维的相机坐标系。
优选地,所述“以预设线段为参照物,分别获取所述预设线段在所述相机坐标系中的相机坐标信息、以及在地图坐标系中的地图坐标信息,并根据所述预设线段的相机坐标信息和地图坐标信息建立地图坐标系和相机坐标系的坐标转换模型”的步骤包括:
在地图坐标系中,选择一预设线段为参照物,获取所述预设线段的第一端点、第二端点、和实际长度,其中,所述地图坐标系采用WGS84坐标系;
在相机坐标系中,分别获取预设线段的第一端点和第二端点在相机坐标系中的相机坐标信息,并根据所述第一端点和第二端点的相机坐标信息计算所述预设线段在相机坐标系中的视觉长度;
以第一端点的地图坐标信息和相机坐标信息进行对比,计算出原点转换关系;
根据所述实际长度和所述视觉长度的比例,计算坐标系的刻度转换比例;
根据所述原点转换关系和刻度转换比例生成地图坐标系和相机坐标系的坐标转换模型。
优选地,所述“在所述相机坐标系中获取目标物的相机坐标信息,并根据所述坐标转换模型计算出所述目标物在所述地图坐标系中的地图坐标信息”的步骤包括:
接收目标选定指令以确定目标物,所述选定指令包括点击指令或文字指令;
在相机坐标系中,获取所述目标物的相机坐标信息;
根据所述坐标转换模型中的原点转换关系和刻度转换比例,计算出所述目标物在所述地图坐标系中的地图坐标信息。
优选地,所述“接收对目标物的标注内容,将标注内容与所述目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在所述全景视频的地图中进行显示”的步骤包括:
接收对目标物的标注内容,所述标注内容包括文字、图片、矢量图、音频、视频、网址链接中的一种或组合;
对所述目标物和所述标注内容进行关联,并在标注图层中存储所述目标物的地图坐标信息和对应的标注内容;
在播放全景视频中出现所述目标物时,在标注图层中读取并显示所述目标物对应的标注内容。
优选地,所述全景视频的标注添加方法还包括:
当所述目标物移动时,获取所述目标物在全景视频的关键帧中的多个地图坐标信息,并将所述目标物对应的标注内容与所述多个地图坐标信息进行关联。
优选地,所述“当所述目标物移动时,获取所述目标物在全景视频的关键帧中的多个地图坐标信息,并将所述目标物对应的标注内容与所述多个地图坐标信息进行关联”的步骤包括:
接收目标选定指令以确定目标物,并提取所述目标物的特征信息;
根据所述特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧;
在所述多个目标帧中,逐一获取所述目标物的地图坐标信息;
将所述目标物的对应标注内容关联至所述多个目标帧对应的地图坐标信息中,以对所述目标物进行追踪显示。
优选地,所述“根据所述特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧”的步骤之前还包括:
判断所述全景视频是否为实时视频;
若是实时视频,则以当前帧为起点,在所述全景视频中向后获取多个关键帧;
若非实时视频,则以当前帧为起点,在所述全景视频中分别向前和向后获取多个关键帧。
本发明还提供了一种全景视频的标注添加系统,该系统包括:
相机坐标模块,用于在全景视频中,建立以相机位置为初始原点的三维的相机坐标系;
坐标转换模块,用于以预设线段为参照物,分别获取所述预设线段在所述相机坐标系中的相机坐标信息、以及在地图坐标系中的地图坐标信息,并根据所述预设线段的相机坐标信息和地图坐标信息建立地图坐标系和相机坐标系的坐标转换模型;
地图坐标模块,用于在所述相机坐标系中获取目标物的相机坐标信息,并根据所述坐标转换模型计算出所述目标物在所述地图坐标系中的地图坐标信息;以及
标注添加模块,用于接收对目标物的标注内容,将标注内容与所述目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在所述全景视频的地图中进行显示。
优选地,该系统还包括:
目标追踪模块,用于当所述目标物移动时,获取所述目标物在全景视频的关键帧中的多个地图坐标信息,并将所述目标物对应的标注内容与所述多个地图坐标信息进行关联。
本发明的全景视频的标注添加方法及系统,以相机位置为初始原点建立相机坐标系,以预设线段为参照物建立地图坐标系和相机坐标系的坐标转换模型,以获取目标物的地图坐标信息,将标注内容与目标物的地图坐标信息进行关联,并在全景视频中显示,实现了在全景视频中对静态与动态目标物的标注,操作步骤简单,对应存储结构简单,在大数据处理应用中能大幅提升检索速度。
附图说明
图1是本发明第一实施例全景视频的标注添加方法的流程图。
图2是本发明第二实施例全景视频的标注添加方法的流程图。
图3是本发明第一实施例全景视频的标注添加系统的结构框图。
图4是本发明第二实施例全景视频的标注添加系统的结构框图。
图5是本发明第三实施例全景视频的标注添加系统的结构框图。
图6是本发明第四实施例全景视频的标注添加系统的结构框图。
图7是本发明第五实施例全景视频的标注添加系统的结构框图。
图8是本发明第六实施例全景视频的标注添加系统的结构框图。
图9是本发明第七实施例全景视频的标注添加系统的结构框图。
图10是本发明的全景视频的标注添加系统的应用场景示意图。
图11是本发明的全景视频的标注添加系统的应用场景示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,下面结合附图和具体实施例对本发明作进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
为了使本揭示内容的叙述更加详尽与完备,下文针对本发明的实施方式与具体实施例提出了说明性的描述;但这并非实施或运用本发明具体实施例的唯一形式。实施方式中涵盖了多个具体实施例的特征以及用以建构与操作这些具体实施例的方法步骤与其顺序。然而,亦可利用其它具体实施例来达成相同或均等的功能与步骤顺序。
图1展示了本发明的全景视频的标注添加方法的第一个实施例,在本实施例中,该全景视频的标注添加方法包括如下步骤:
S101,在全景视频中,建立以相机位置为初始原点的三维的相机坐标系。
S102,以预设线段为参照物,分别获取该预设线段在该相机坐标系中的相机坐标信息、以及在地图坐标系中的地图坐标信息,并根据该预设线段的相机坐标信息和地图坐标信息建立地图坐标系和相机坐标系的坐标转换模型。
S103,在该相机坐标系中获取目标物的相机坐标信息,并根据该坐标转换模型计算出该目标物在该地图坐标系中的地图坐标信息。
S104,接收对目标物的标注内容,将标注内容与该目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在该全景视频的地图中进行显示。
通过本发明的上述实施例,以相机位置为初始原点建立相机坐标系,以预设线段为参照物建立地图坐标系和相机坐标系的坐标转换模型,以根据目标物的相机坐标信息获取目标物的地图坐标信息,将标注内容与目标物的地图坐标信息进行关联,并在全景视频中显示,实现了在全景视频中对静态目标物的标注,操作步骤简单,对应存储结构简单,在大数据处理应用中能大幅提升检索速度。
在步骤S101中,相机坐标系为三维坐标系,即为XYZ基准空间坐标系,具有XY平面以及与XY平面垂直的Z轴,相机位置为初始原点(0,0,0)。
在本实施例的一个优选实施方式中,步骤S101具体包括如下步骤:
S1011,在全景视频中,以相机位置作为初始原点(0,0,0)。
S1012,以水平面内经过初始原点的任意两个互相垂直的方向的直线为初始X轴和初始Y轴,以经过初始原点的竖直方向的直线为Z轴。
S1013,设置第一长度作为坐标刻度,建立三维的相机坐标系。
在步骤S102中,选择一预设线段作为参照物,预设线段包括第一端点和第二端点,在全景视频的地图坐标系中,预设线段的实际长度为两个端点之间的距离;在相机坐标系中,第一端点的相机坐标和第二端点的相机坐标之间的距离为预设线段在相机坐标系中的视觉长度。在一个优选实施方式中,可以在地图上选择一栋高楼的一侧作为预设线段,以该高楼的楼高为预设线段的实际高度,例如,为150米。可以以预设线段的第一端点作为两个坐标系的点坐标转换参照,根据第一端点的地图坐标信息和第一端点的相机坐标信息计算出原点转换关系;可以一预设线段的实际长度和视觉长度的比例作为两个坐标系的刻度转换比例;最后,根据所得原点转换关系和刻度转换比例建立两个坐标系的坐标转换模型。在一个优选实施方式中,可以以第一端点为地图坐标系的原点,根据第一端点的相机坐标信息计算原点转换关系。
在本实施例的一个优选实施方式中,步骤S102具体包括如下步骤:
S1021,在地图坐标系中,选择一预设线段为参照物,获取该预设线段的第一端点、第二端点、和实际长度,其中,该地图坐标系采用WGS84坐标系。
S1022,在相机坐标系中,分别获取预设线段的第一端点和第二端点在相机坐标系中的相机坐标信息,并根据该第一端点和第二端点的相机坐标信息计算该预设线段在相机坐标系中的视觉长度。
S1023,以第一端点的地图坐标信息和相机坐标信息进行对比,计算出原点转换关系。
S1024,根据该实际长度和该视觉长度的比例,计算坐标系的刻度转换比例。
S1025,根据该原点转换关系和刻度转换比例生成地图坐标系和相机坐标系的坐标转换模型。
在步骤S103中,首先选定目标物,对于待标注的目标物,在相机坐标系中获取其相机坐标信息,再根据步骤S102中建立的坐标转换模型计算目标物的地图坐标信息,具体地,该坐标转换模型包括原点转换关系和刻度转换比例。
在本实施例的一个优选实施方式中,步骤S103具体包括如下步骤:
S1031,接收目标选定指令以确定目标物,该选定指令包括点击指令或文字指令。
S1032,在相机坐标系中,获取该目标物的相机坐标信息。
S1033,根据该坐标转换模型中的原点转换关系和刻度转换比例,计算出该目标物在该地图坐标系中的地图坐标信息。
在步骤S104中,标注内容可以包括文字、图片、矢量图、音频、视频和网址链接中的一种或多种,将标注内容与待标注的目标物的地图坐标信息进行关联,在全景视频中,标注内容就可以显示在目标物的附近。
在本实施例的一个优选实施方式中,步骤S104具体包括如下步骤:
S1041,接收对目标物的标注内容,该标注内容包括文字、图片、矢量图、音频、视频、网址链接中的一种或组合。
S1042,对该目标物和该标注内容进行关联,并在标注图层中存储该目标物的地图坐标信息和对应的标注内容。
S1043,在播放全景视频中出现该目标物时,在标注图层中读取并显示该目标物对应的标注内容。
图2展示了本发明的全景视频的标注添加方法的第二个实施例,在本实施例中,该全景视频的标注添加方法包括如下步骤:
S201,在全景视频中,建立以相机位置为初始原点的三维的相机坐标系。
S202,以预设线段为参照物,分别获取该预设线段在该相机坐标系中的相机坐标信息、以及在地图坐标系中的地图坐标信息,并根据该预设线段的相机坐标信息和地图坐标信息建立地图坐标系和相机坐标系的坐标转换模型。
S203,在该相机坐标系中获取目标物的相机坐标信息,并根据该坐标转换模型计算出该目标物在该地图坐标系中的地图坐标信息。
S204,接收对目标物的标注内容,将标注内容与该目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在该全景视频的地图中进行显示。
S205,当该目标物移动时,获取该目标物在全景视频的关键帧中的多个地图坐标信息,并将该目标物对应的标注内容与该多个地图坐标信息进行关联。
本实施例与第一实施例的区别在于,本实施例的待标注的目标物为移动物体,步骤S201至步骤S204具体参见第一实施例中关于步骤S101至步骤S104的说明,在此不进行一一赘述。在全景视频中,该目标物在不同的视频帧中多次出现,从全景视频的关键帧中识别有目标物出现的多个关键帧,分别获取识别出的有目标物出现的每一个关键帧中目标物的地图坐标信息,得到目标物的多个地图坐标信息,将目标物的标注内容与这多个地图坐标信息分别进行关联,当全景视频播放至有该目标物出现的关键帧时,标注内容出现在该目标物附近。
在本实施例的一个优选实施方式中,步骤S205具体包括如下步骤:
S2051,接收目标选定指令以确定目标物,并提取该目标物的特征信息。
S2052,根据该特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧。
S2053,在该多个目标帧中,逐一获取该目标物的地图坐标信息。
S2054,将该目标物的对应标注内容关联至该多个目标帧对应的地图坐标信息中,以对该目标物进行追踪显示。
其中,目标帧即为有目标物出现的关键帧。
在本实施例的另一个优选实施方式中,步骤S205具体包括如下步骤:
S2051’,接收目标选定指令以确定目标物,并提取该目标物的特征信息。
S2052’,判断该全景视频是否为实时视频。
S2053’,若是实时视频,则以当前帧为起点,在该全景视频中向后获取多个关键帧。
S2054’,若非实时视频,则以当前帧为起点,在该全景视频中分别向前和向后获取多个关键帧。
S2055’,根据该特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧。
S2056’,在该多个目标帧中,逐一获取该目标物的地图坐标信息。
S2057’,将该目标物的对应标注内容关联至该多个目标帧对应的地图坐标信息中,以对该目标物进行追踪显示。
基于同一发明构思,本发明实施例中还提供了一种全景视频的标注添加系统,如下面的实施例。由于全景视频的标注添加系统解决问题的原理与全景视频的标注添加方法相似,因此全景视频的标注添加系统的实施可以参见全景视频的标注添加方法的实施,重复之处不再赘述。以下所使用的,术语“单元”或者“子模块”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的系统较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
本发明实施例提供了一种全景视频的标注添加系统,请参阅图3所示,该系统包括:相机坐标模块10、坐标转换模块20、地图坐标模块30和标注添加模块40,其中,相机坐标模块10,用于在全景视频中,建立以相机位置为初始原点的三维的相机坐标系;坐标转换模块20,用于以预设线段为参照物,分别获取该预设线段在该相机坐标系中的相机坐标信息、以及在地图坐标系中的地图坐标信息,并根据该预设线段的相机坐标信息和地图坐标信息建立地图坐标系和相机坐标系的坐标转换模型;地图坐标模块30,用于在该相机坐标系中获取目标物的相机坐标信息,并根据该坐标转换模型计算出该目标物在该地图坐标系中的地图坐标信息;标注添加模块40,用于接收对目标物的标注内容,将标注内容与该目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在该全景视频的地图中进行显示。
在图3所示实施例的基础上,在一个优选实施方式中,请参阅图4所示,该相机坐标模块10进一步包括:原点子模块101、三维子模块102和刻度子模块103,其中,原点子模块101,用于在全景视频中,以相机位置作为初始原点(0,0,0);三维子模块102,用于以水平面内经过初始原点的任意两个互相垂直的方向的直线为初始X轴和初始Y轴,以经过初始原点的竖直方向的直线为Z轴;刻度子模块103,用于设置第一长度作为坐标刻度,建立三维的相机坐标系。
在图3所示实施例的基础上,在一个优选实施方式中,请参阅图5所示,坐标转换模块20进一步包括:参照子模块201、相机子模块202和转换子模块203,其中,参照子模块201,用于在地图坐标系中,选择一预设线段为参照物,获取该预设线段的第一端点、第二端点、和实际长度,其中,该地图坐标系采用WGS84坐标系;相机子模块202,用于在相机坐标系中,分别获取预设线段的第一端点和第二端点在相机坐标系中的相机坐标信息,并根据该第一端点和第二端点的相机坐标信息计算该预设线段在相机坐标系中的视觉长度;转换子模块203,用于以第一端点的地图坐标信息和相机坐标信息进行对比,计算出原点转换关系,根据该实际长度和该视觉长度的比例,计算坐标系的刻度转换比例,根据该原点转换关系和刻度转换比例生成地图坐标系和相机坐标系的坐标转换模型。
在图3所示实施例的基础上,在一个优选实施方式中,请参阅图6所示,该地图坐标模块30进一步包括:目标子模块301、相机坐标子模块302和地图坐标子模块303,其中,目标子模块301,用于接收目标选定指令以确定目标物,该选定指令包括点击指令或文字指令;相机坐标子模块302,用于在相机坐标系中,获取该目标物的相机坐标信息;地图坐标子模块303,用于根据该坐标转换模型中的原点转换关系和刻度转换比例,计算出该目标物在该地图坐标系中的地图坐标信息。
在图3所示实施例的基础上,在一个优选实施方式中,请参阅图7所示,该标注添加模块40进一步包括:标注子模块401、存储子模块402和显示子模块403,其中,标注子模块401,用于接收对目标物的标注内容,该标注内容包括文字、图片、矢量图、音频、视频、网址链接中的一种或组合;存储子模块402,用于对该目标物和该标注内容进行关联,并在标注图层中存储该目标物的地图坐标信息和对应的标注内容;显示子模块403,用于在播放全景视频中出现该目标物时,在标注图层中读取并显示该目标物对应的标注内容。
在图3所示实施例的基础上,在一个优选实施方式中,请参阅图8所示,该全景视频的标注添加系统还包括目标追踪模块50,用于当该目标物移动时,获取该目标物在全景视频的关键帧中的多个地图坐标信息,并将该目标物对应的标注内容与该多个地图坐标信息进行关联。
在图8所示实施例的基础上,在一个优选实施方式中,请参阅图9所示,该目标追踪模块50进一步包括:特征子模块501、关键帧子模块502和追踪子模块503,其中,特征子模块501,用于接收目标选定指令以确定目标物,并提取该目标物的特征信息;关键帧子模块502,用于根据该特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧;追踪子模块503,用于在该多个目标帧中,逐一获取该目标物的地图坐标信息,并将该目标物的对应标注内容关联至该多个目标帧对应的地图坐标信息中,以对该目标物进行追踪显示。
在一个优选实施方式中,关键帧子模块502还用于判断该全景视频是否为实时视频;若是实时视频,则以当前帧为起点,在该全景视频中向后获取多个关键帧;若非实时视频,则以当前帧为起点,在该全景视频中分别向前和向后获取多个关键帧。
目前,主流的全景图主要包括两种,第一种是柱面全景图,是指将外界场景映射到一个柱面上,观察者立于圆柱的轴心处,可以在周围360度的环境内任意选取自己想观看的景物。第二种是球面全景图,相比柱面全景图的360度水平环绕场景,它还包括顶部和底部的场景,整个场景围成一个球体。请参阅图10和图11所示,为本发明实施例的全景视频的标注添加系统的应用场景示意图。其中,图10为球面全景图,图11为柱面全景图。在图10中,以相机的固定位置为初始原点建立相机坐标系,并以视频地图中的预设线段AB作为参照物,建立相机坐标系与地图坐标系的坐标转换模型,再进一步基于坐标转换模型计算相机坐标系中目标物的对应地图坐标,并在该地图坐标上添加和显示对目标物的标注,其中标注如图示中的矢量图。图11的处理与之类似且相对简单,此处忽略。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种全景视频的标注添加方法,其特征在于,该方法包括:
在全景视频中,建立以相机位置为初始原点的三维的相机坐标系;
在地图坐标系中,选择一预设线段为参照物,获取所述预设线段的第一端点、第二端点、和实际长度;
在所述相机坐标系中,分别获取预设线段的第一端点和第二端点在相机坐标系中的相机坐标信息,并根据所述第一端点和第二端点的相机坐标信息计算所述预设线段在相机坐标系中的视觉长度;
以第一端点的地图坐标信息和相机坐标信息进行对比,计算出原点转换关系;
根据所述实际长度和所述视觉长度的比例,计算坐标系的刻度转换比例;
根据所述原点转换关系和刻度转换比例生成地图坐标系和相机坐标系的坐标转换模型;
在所述相机坐标系中获取目标物的相机坐标信息,并根据所述坐标转换模型计算出所述目标物在所述地图坐标系中的地图坐标信息;以及
接收对目标物的标注内容,将标注内容与所述目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在所述全景视频的地图中进行显示。
2.根据权利要求1所述的全景视频的标注添加方法,其特征在于,所述“在全景视频中,建立以相机位置为初始原点的三维的相机坐标系”的步骤包括:
在全景视频中,以相机位置作为初始原点(0,0,0);
以水平面内经过初始原点的任意两个互相垂直的方向的直线为初始X轴和初始Y轴,以经过初始原点的竖直方向的直线为Z轴;
设置第一长度作为坐标刻度,建立三维的相机坐标系。
3.根据权利要求1所述的全景视频的标注添加方法,其特征在于,所述地图坐标系采用WGS84坐标系。
4.根据权利要求1所述的全景视频的标注添加方法,其特征在于,所述“在所述相机坐标系中获取目标物的相机坐标信息,并根据所述坐标转换模型计算出所述目标物在所述地图坐标系中的地图坐标信息”的步骤包括:
接收目标选定指令以确定目标物,所述选定指令包括点击指令或文字指令;
在相机坐标系中,获取所述目标物的相机坐标信息;
根据所述坐标转换模型中的原点转换关系和刻度转换比例,计算出所述目标物在所述地图坐标系中的地图坐标信息。
5.根据权利要求1所述的全景视频的标注添加方法,其特征在于,所述“接收对目标物的标注内容,将标注内容与所述目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在所述全景视频的地图中进行显示”的步骤包括:
接收对目标物的标注内容,所述标注内容包括文字、图片、矢量图、音频、视频、网址链接中的一种或组合;
对所述目标物和所述标注内容进行关联,并在标注图层中存储所述目标物的地图坐标信息和对应的标注内容;
在播放全景视频中出现所述目标物时,在标注图层中读取并显示所述目标物对应的标注内容。
6.根据权利要求1所述的全景视频的标注添加方法,其特征在于,所述全景视频的标注添加方法还包括:
当所述目标物移动时,获取所述目标物在全景视频的关键帧中的多个地图坐标信息,并将所述目标物对应的标注内容与所述多个地图坐标信息进行关联。
7.根据权利要求6所述的全景视频的标注添加方法,其特征在于,所述“当所述目标物移动时,获取所述目标物在全景视频的关键帧中的多个地图坐标信息,并将所述目标物对应的标注内容与所述多个地图坐标信息进行关联”的步骤包括:
接收目标选定指令以确定目标物,并提取所述目标物的特征信息;
根据所述特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧;
在所述多个目标帧中,逐一获取所述目标物的地图坐标信息;
将所述目标物的对应标注内容关联至所述多个目标帧对应的地图坐标信息中,以对所述目标物进行追踪显示。
8.根据权利要求7所述的全景视频的标注添加方法,其特征在于,所述“根据所述特征信息在全景视频的关键帧中进行目标物识别,以获得多个目标帧”的步骤之前还包括:
判断所述全景视频是否为实时视频;
若是实时视频,则以当前帧为起点,在所述全景视频中向后获取多个关键帧;
若非实时视频,则以当前帧为起点,在所述全景视频中分别向前和向后获取多个关键帧。
9.一种全景视频的标注添加系统,其特征在于,该系统包括:
相机坐标模块,用于在全景视频中,建立以相机位置为初始原点的三维的相机坐标系;
坐标转换模块,用于在地图坐标系中,选择一预设线段为参照物,获取所述预设线段的第一端点、第二端点、和实际长度;在所述相机坐标系中,分别获取预设线段的第一端点和第二端点在相机坐标系中的相机坐标信息,并根据所述第一端点和第二端点的相机坐标信息计算所述预设线段在相机坐标系中的视觉长度;以第一端点的地图坐标信息和相机坐标信息进行对比,计算出原点转换关系;根据所述实际长度和所述视觉长度的比例,计算坐标系的刻度转换比例;根据所述原点转换关系和刻度转换比例生成地图坐标系和相机坐标系的坐标转换模型;
地图坐标模块,用于在所述相机坐标系中获取目标物的相机坐标信息,并根据所述坐标转换模型计算出所述目标物在所述地图坐标系中的地图坐标信息;以及
标注添加模块,用于接收对目标物的标注内容,将标注内容与所述目标物的地图坐标信息进行关联,并将标注内容按照目标物的地图坐标信息在所述全景视频的地图中进行显示。
10.根据权利要求9所述的全景视频的标注添加系统,其特征在于,该系统还包括:
目标追踪模块,用于当所述目标物移动时,获取所述目标物在全景视频的关键帧中的多个地图坐标信息,并将所述目标物对应的标注内容与所述多个地图坐标信息进行关联。
CN201810866280.2A 2018-08-01 2018-08-01 全景视频的标注添加方法及系统 Active CN109063123B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810866280.2A CN109063123B (zh) 2018-08-01 2018-08-01 全景视频的标注添加方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810866280.2A CN109063123B (zh) 2018-08-01 2018-08-01 全景视频的标注添加方法及系统

Publications (2)

Publication Number Publication Date
CN109063123A CN109063123A (zh) 2018-12-21
CN109063123B true CN109063123B (zh) 2021-01-05

Family

ID=64832548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810866280.2A Active CN109063123B (zh) 2018-08-01 2018-08-01 全景视频的标注添加方法及系统

Country Status (1)

Country Link
CN (1) CN109063123B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109982036A (zh) * 2019-02-20 2019-07-05 华为技术有限公司 一种全景视频数据处理的方法、终端以及存储介质
CN111757185B (zh) * 2019-03-29 2022-04-26 理光软件研究所(北京)有限公司 一种视频播放方法和装置
CN110060201B (zh) * 2019-04-15 2023-02-28 深圳市数字城市工程研究中心 一种全景视频的热点交互方法
CN110047035B (zh) * 2019-04-15 2023-04-28 深圳市数字城市工程研究中心 全景视频热点交互系统及交互设备
CN111107419B (zh) * 2019-12-31 2021-03-02 福州大学 一种基于全景视频播放的标注多点即时添加方法
CN111429518B (zh) * 2020-03-24 2023-10-03 浙江大华技术股份有限公司 一种标注方法、装置、计算设备及存储介质
CN111696216B (zh) * 2020-06-16 2023-10-03 浙江大华技术股份有限公司 三维增强现实全景融合方法及系统
CN113012032B (zh) * 2021-03-03 2022-12-09 中国人民解放军战略支援部队信息工程大学 一种自动标注地名的空中全景图像显示方法
CN114299809B (zh) * 2021-12-30 2024-03-22 北京有竹居网络技术有限公司 方向信息显示方法、显示装置、电子设备和可读存储介质
CN115361596A (zh) * 2022-07-04 2022-11-18 浙江大华技术股份有限公司 全景视频数据处理方法、装置、电子装置和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101826275A (zh) * 2010-04-12 2010-09-08 立得空间信息技术有限公司 在连续地理信息三维影像上标注信息的方法
CN103200358A (zh) * 2012-01-06 2013-07-10 杭州普维光电技术有限公司 摄像机与目标场景之间的坐标转换方法及装置
CN104484814A (zh) * 2014-12-18 2015-04-01 深圳先进技术研究院 一种基于视频地图的广告方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9886703B2 (en) * 2012-11-08 2018-02-06 xAd, Inc. System and method for estimating mobile device locations

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101826275A (zh) * 2010-04-12 2010-09-08 立得空间信息技术有限公司 在连续地理信息三维影像上标注信息的方法
CN103200358A (zh) * 2012-01-06 2013-07-10 杭州普维光电技术有限公司 摄像机与目标场景之间的坐标转换方法及装置
CN104484814A (zh) * 2014-12-18 2015-04-01 深圳先进技术研究院 一种基于视频地图的广告方法及系统

Also Published As

Publication number Publication date
CN109063123A (zh) 2018-12-21

Similar Documents

Publication Publication Date Title
CN109063123B (zh) 全景视频的标注添加方法及系统
CN109618222B (zh) 一种拼接视频生成方法、装置、终端设备及存储介质
CN107633241B (zh) 一种全景视频自动标注和追踪物体的方法和装置
US8451266B2 (en) Interactive three-dimensional augmented realities from item markers for on-demand item visualization
Langlotz et al. Next-generation augmented reality browsers: rich, seamless, and adaptive
US9959644B2 (en) Computerized method and device for annotating at least one feature of an image of a view
CN110286773A (zh) 基于增强现实的信息提供方法、装置、设备及存储介质
US20160198097A1 (en) System and method for inserting objects into an image or sequence of images
WO2016028813A1 (en) Dynamically targeted ad augmentation in video
Tompkin et al. Videoscapes: exploring sparse, unstructured video collections
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
CN107798932A (zh) 一种基于ar技术的早教训练系统
KR101545138B1 (ko) 증강 현실을 이용한 광고 제공 방법과 그를 위한 시스템, 장치 및 단말기
US20140016820A1 (en) Distributed object tracking for augmented reality application
CN112954450B (zh) 视频处理方法、装置、电子设备和存储介质
CN108509621B (zh) 景区全景图的景点识别方法、装置、服务器和存储介质
CN108449631B (zh) 用于媒体处理的方法、装置及可读介质
CN112435338B (zh) 电子地图的兴趣点的位置获取方法、装置及电子设备
CN110060201B (zh) 一种全景视频的热点交互方法
CN110781823B (zh) 录屏检测方法、装置、可读介质及电子设备
CN110930220A (zh) 一种显示方法、装置、终端设备及介质
CN111836118B (zh) 视频处理方法、装置、服务器及存储介质
CN114089836B (zh) 标注方法、终端、服务器和存储介质
JP2020101847A (ja) 画像ファイル生成装置及び画像ファイル生成方法、画像生成装置及び画像生成方法、画像生成システム、並びにプログラム
CN111556338B (zh) 视频中区域的检测方法、信息融合方法、装置和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant