CN112333491B - 视频处理方法、显示装置和存储介质 - Google Patents
视频处理方法、显示装置和存储介质 Download PDFInfo
- Publication number
- CN112333491B CN112333491B CN202011011403.8A CN202011011403A CN112333491B CN 112333491 B CN112333491 B CN 112333491B CN 202011011403 A CN202011011403 A CN 202011011403A CN 112333491 B CN112333491 B CN 112333491B
- Authority
- CN
- China
- Prior art keywords
- video
- pose
- displayed
- data
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Security & Cryptography (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
一种视频处理方法、显示装置和非瞬时性计算机可读存储介质。视频处理方法包括:获取待处理视频,并对待处理视频的多个视频帧分别打上多个视频时间戳;获取显示装置的N个位姿数据,并对N个位姿数据分别打上N个位姿时间戳,缓存N个位姿数据和N个位姿时间戳;从多个视频帧中提取待显示的视频帧,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据;基于与待显示的视频帧对应的至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;通过显示装置同时显示待显示的视频帧和待显示的虚拟模型。
Description
技术领域
本公开的实施例涉及一种视频处理方法、显示装置和非瞬时性计算机可读存储介质。
背景技术
短视频具有社交属性强、易创作、时长短的特点,更符合移动互联网时代用户的碎片化内容消费习惯。增强现实(AR,Augmented Reality)技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等领域,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,真实世界的信息和虚拟信息互为补充,从而实现对真实世界的“增强”。AR独特的虚实融合特效,决定了AR独特在短视频领域具有无限的拓展空间。
发明内容
提供该发明内容部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开至少一实施例提供一种视频处理方法,用于显示装置,包括:获取待处理视频,并对所述待处理视频的多个视频帧分别打上多个视频时间戳,其中,所述多个视频帧与所述多个视频时间戳一一对应;获取所述显示装置的N个位姿数据,并对所述N个位姿数据分别打上N个位姿时间戳,缓存所述N个位姿数据和所述N个位姿时间戳,其中,所述N个位姿数据与所述N个位姿时间戳一一对应,N为正整数;从所述多个视频帧中提取待显示的视频帧,根据所述待显示的视频帧对应的视频时间戳,从所述N个位姿数据中确定与所述待显示的视频帧对应的至少一个位姿数据;基于与所述待显示的视频帧对应的所述至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;通过所述显示装置同时显示所述待显示的视频帧和所述待显示的虚拟模型。
本公开至少一实施例提供一种显示装置,包括:存储器,用于非瞬时性地存储计算机可读指令;处理器,用于运行所述计算机可读指令,所述计算机可读指令被所述处理器运行时实现根据本公开任一实施例所述的视频处理方法。
本公开至少一实施例提供一种非瞬时性计算机可读存储介质,其中,所述非瞬时性计算机可读存储介质存储有计算机可读指令,所述计算机可读指令被处理器执行时实现根据本公开任一实施例所述的视频处理方法。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1为本公开至少一实施例提供的一种视频处理方法的示意性流程图;
图2为本公开至少一实施例提供的一种显示装置的示意性框图;
图3为本公开至少一实施例提供的一种非瞬时性计算机可读存储介质的示意图;以及
图4为本公开至少一实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
目前,在触发电子装置(例如,手机等)中的地标AR特效后,AR特效可以跟随电子装置的移动或转动而相应在屏幕中实时(实际上可能有很小的可以忽略的延迟)地移动或转动(AR特效可能移出屏幕外),即AR特效的运动和电子装置的运动是一致的;而屏幕显示的每一视频帧都有延迟,且视频帧的延迟的时间大于AR特效的延迟的时间,也就是说,当前显示的画面是根据处于之前某一时刻的相机位姿的相机拍摄得到的,而当前显示的AR特效是根据处于当前时刻的相机位姿的相机进行位置调整的,从而导致AR特效与屏幕显示的画面无法对齐,影响地标AR特效的效果。
本公开至少一实施例提供一种视频处理方法、显示装置和非瞬时性计算机可读存储介质。视频处理方法用于显示装置,视频处理方法包括:获取待处理视频,并对待处理视频的多个视频帧分别打上多个视频时间戳,其中,多个视频帧与所述多个视频时间戳一一对应;获取显示装置的N个位姿数据,并对N个位姿数据分别打上N个位姿时间戳,缓存N个位姿数据和N个位姿时间戳,其中,N个位姿数据与N个位姿时间戳一一对应,N为正整数;从多个视频帧中提取待显示的视频帧,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据;基于与待显示的视频帧对应的至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;通过显示装置同时显示待显示的视频帧和待显示的虚拟模型。
该视频处理方法用于实现同步视频帧和相机位姿数据,通过对采集的视频帧打上时间戳和对显示装置的位姿数据打上时间戳,并基于时间戳进行匹配,从而可以使AR特效与屏幕显示的图像对齐,在显示装置实现地标AR特效时,AR特效与屏幕显示的图像(例如,地标建筑)更准确地对齐,进而可以向用户提供更好的AR特效的视觉效果。
需要说明的是,本公开实施例提供的视频处理方法可被配置于本公开实施例提供的显示装置上,例如,视频处理方法可以配置于显示装置的应用程序中。该显示装置可以是个人计算机、移动终端等,该移动终端可以是手机、平板电脑等具有各种操作系统的硬件设备。应用程序可以为抖音等。
下面结合附图对本公开的实施例进行详细说明,但是本公开并不限于这些具体的实施例。
图1为本公开至少一实施例提供的一种视频处理方法的示意性流程图。
例如,该视频处理方法可以应用于显示装置,如图1所示,该视频处理方法包括步骤S10至S14。
步骤S10:获取待处理视频,并对待处理视频的多个视频帧分别打上多个视频时间戳;
步骤S11:获取显示装置的N个位姿数据,并对N个位姿数据分别打上N个位姿时间戳,缓存N个位姿数据和N个位姿时间戳;
步骤S12:从多个视频帧中提取待显示的视频帧,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据;
步骤S13:基于与待显示的视频帧对应的至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;
步骤S14:通过显示装置同时显示待显示的视频帧和待显示的虚拟模型。
例如,在步骤S10中,多个视频帧与多个视频时间戳一一对应。
例如,显示装置可以包括视频采集装置,视频采集装置用于拍摄图像和/或视频等。视频采集装置可以包括相机、摄像机等。视频采集装置可以与显示装置一体设置,视频采集装置也可以与显示装置分开设置,而通过无线(例如,蓝牙等)或有线等方式与显示装置通信连接。
例如,在步骤S10中,获取待处理视频包括:利用视频采集装置采集目标物体的视频以得到待处理视频。例如,在一些实施例中,获取待处理视频的速率可以为30帧/秒,即每秒钟获取30个视频帧,本公开不限于此,获取待处理视频的速率可以根据实际情况设置,例如可以为60帧/秒。
需要说明的是,若显示装置具有防抖功能,则当显示装置(例如,手机)的防抖功能被开启时,采集得到的视频的视频帧是经过平滑处理的视频帧;经过平滑处理的视频帧无法与显示装置的传感器或SLAM(Simultaneous localization and mapping,同步定位与建图)系统等获得的视频采集装置(例如,相机)的位姿数据等在时间轴上对齐,由此,当采用视频采集装置采集视频时,则需要关闭该防抖功能,以使得采集得到的视频帧和视频采集装置的位姿数据在时间轴上能够对齐。
例如,待处理视频可以是视频采集装置实时采集的视频,也可以是预先采集并存储在显示装置中的视频。例如,待处理视频可以包括目标物体,目标物体包括地标建筑(例如,岳阳的岳阳楼、南昌的滕王阁、武汉的黄鹤楼、北京三里屯的太古里等)等室外物体,也可以包括桌子和柜子等室内物体,还可以是自然景物,例如,加州红杉树等。
例如,在步骤S10中,将待处理视频的多个视频帧分别打上多个视频时间戳包括:在利用视频采集装置采集待处理视频时,实时获取显示装置的系统时钟,以得到与多个视频帧分别对应的多个视频时间戳。本公开的实施例对于系统时钟的产生方式以及精度不作限定。
例如,在步骤S11中,N个位姿数据与N个位姿时间戳一一对应,N为正整数。在一些实施例中,N个位姿数据的数量为100~200,即N为100~200,例如,N为100、150、180、200等,但是本公开不限于此,N的值可以根据实际情况设置。
例如,在一些实施例中,显示装置还可以包括位姿采集装置,位姿采集装置用于采集显示装置的位姿数据。位姿采集装置可以与显示装置一体设置,位姿采集装置也可以与显示装置分开设置,而通过无线(例如,蓝牙等)或有线等方式与显示装置通信连接。需要说明的是,在本公开的实施例中,“显示装置的位姿数据”可以表示显示装置中的视频采集装置的位姿数据。
例如,在步骤S11中,获取N个位姿数据包括:在利用视频采集装置采集待处理视频时,利用位姿采集装置采集视频采集装置的位姿数据,以得到N个位姿数据。例如,在一些实施例中,获取位姿数据的速率可以为80个/秒,即每秒钟获取80个位姿数据,本公开不限于此,获取位姿数据的速率也可以为90个/秒、100个/秒等,可以根据实际情况设置。
例如,采集位姿数据和采集待处理视频的时间是同时执行的,从而保证在同一时刻采集得到的位姿数据和视频帧是彼此对应的,进而保证基于该位姿数据调整得到的AR特效与屏幕显示的图像彼此对齐。
例如,对N个位姿数据分别打上N个位姿时间戳包括:在利用位姿采集装置采集N个位姿数据时,实时获取显示装置的系统时钟,以得到与N个位姿数据分别对应的N个位姿时间戳。
例如,视频时间戳是显示装置的系统时钟,位姿时间戳也是显示装置的系统时钟,从而使得视频时间戳和位姿时间戳均是基于同样的时钟得到的,以保证视频时间戳和位姿时间戳能够彼此对应。
例如,N个位姿数据中的每个位姿数据包括视频采集装置的位置和角度等信息,位置可以表示该视频采集装置对应的GPS坐标(例如,经度、纬度、海拔高度),角度可以表示视频采集装置与目标物体之间的相对角度关系。
例如,N个位姿数据可以各不相同,也可以至少部分位姿数据相同。
例如,在一些实施例中,在步骤S11中,在采集视频的过程中,位姿采集装置可以不断地获取视频采集装置的位姿数据并获取对应的位姿时间戳,但是,显示装置仅缓存N个位姿数据和N个位姿时间戳,例如,当位姿采集装置采集到前N个位姿数据和前N个位姿时间戳时,显示装置缓存该N个位姿数据和N个位姿时间戳,当位姿采集装置采集到第N+1个位姿数据和第N+1个位姿时间戳时,则显示装置缓存该第N+1个位姿数据和第N+1个位姿时间戳,同时删除第一个位姿数据和第一个位姿时间戳;当位姿采集装置采集到第N+2个位姿数据和第N+2个位姿时间戳时,则显示装置缓存该第N+2个位姿数据和第N+2个位姿时间戳,同时删除第二个位姿数据和第二个位姿时间戳,以此类推,由此,显示装置始终只缓存N个位姿数据和N个位姿时间戳,从而可以节省存储空间。
需要说明的是,在另一些实施例中,在步骤S11中,显示装置也可以缓存位姿采集装置采集的所有位姿数据和位姿时间戳。
例如,在步骤S12中,待显示的视频帧可以为待处理视频中的任一一帧,待显示的视频帧可以为在拍摄待处理视频时,与当前的拍摄时间对应的视频帧。
例如,在一些实施例中,在步骤S12中,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据,包括:根据待显示的视频帧对应的视频时间戳,在由N个位姿时间戳构成的位姿时间轴上查找与待显示的视频帧对应的视频时间戳相对应的参考位姿时间戳;将与参考位姿时间戳对应的位姿数据作为至少一个位姿数据。
例如,在一些实施例中,至少一个位姿数据为一个位姿数据。参考位姿时间戳和视频时间戳之间的时间差的绝对值最小,也就是说,参考位姿时间戳和视频时间戳之间的时间差的绝对值小于视频时间戳与N个位姿时间戳中除了参考位姿时间戳之外的任一一个位姿时间戳之间的时间差的绝对值。例如,在一些实施例中,视频时间戳为1分5秒4,若N个位姿时间戳分别为1分5秒1、1分5秒3、1分5秒7、1分5秒9、1分6秒1等等,此时,1分5秒3的位姿时间戳与视频时间戳之间的时间差的绝对值最小,即1分5秒3为参考位姿时间戳。
例如,在另一些实施例中,在步骤S12中,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据,包括:根据待显示的视频帧对应的视频时间戳,在由N个位姿时间戳构成的位姿时间轴上查找与待显示的视频帧对应的视频时间戳相对应的第一参考位姿时间戳和第二参考位姿时间戳;将与第一参考位姿时间戳对应的位姿数据和第二参考位姿时间戳对应的位姿数据作为至少一个位姿数据。
例如,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值为最小的两个绝对值,也就是说,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值小于视频时间戳与N个位姿时间戳中除了第一参考位姿时间戳和第二参考位姿时间戳之外的任一一个位姿时间戳之间的时间差的绝对值。
例如,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值可以相同。例如,在一些实施例中,视频时间戳为1分5秒4,若N个位姿时间戳分别为1分5秒1、1分5秒3、1分5秒5、1分5秒7、1分5秒8等等,此时,1分5秒3的位姿时间戳与视频时间戳之间的时间差的绝对值和1分5秒5的位姿时间戳与视频时间戳之间的时间差的绝对值是最小的两个绝对值,即1分5秒3和1分5秒5分别为第一参考位姿时间戳和第二参考位姿时间戳,此时,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值相同,均为0.1秒。
例如,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值也可以不相同。例如,在一些实施例中,视频时间戳为1分5秒4,若N个位姿时间戳分别为1分5秒1、1分5秒3、1分5秒6、1分5秒8、1分6秒1等等,此时,1分5秒3的位姿时间戳与视频时间戳之间的时间差的绝对值和1分5秒6的位姿时间戳与视频时间戳之间的时间差的绝对值是最小的两个绝对值,即1分5秒3和1分5秒6分别为第一参考位姿时间戳和第二参考位姿时间戳,此时,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值(0.1秒)和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值(0.2秒)不相同。
例如,在一些实施例中,位姿时间轴的长度可以为1秒,即显示装置缓存的N个位姿数据和N个位姿时间戳对应的时间长度为1秒。例如,该缓存的N个位姿数据和N个位姿时间戳可以为最接近当前时刻的N个位姿数据和N个位姿时间戳。例如,在一些实施例中,当前时刻为10点10分20秒,则该缓存的N个位姿数据和N个位姿时间戳可以为从10点10分19秒到10点10分20秒之间采集得到的位姿数据和位姿时间戳。
例如,在一些实施例中,步骤S13可以包括:响应于与待显示的视频帧对应的至少一个位姿数据的数量为1,将与待显示的视频帧对应的至少一个位姿数据作为目标位姿数据,基于目标位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;或者,响应于与待显示的视频帧对应的至少一个位姿数据的数量为2,对与待显示的视频帧对应的至少一个位姿数据进行插值处理,以得到与待显示的视频帧对应的目标位姿数据,基于目标位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型。
例如,当至少一个位姿数据仅为一个位姿数据时,直接将与待显示的视频帧对应的至少一个位姿数据作为目标位姿数据,然后,基于目标位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型。当至少一个位姿数据包括两个位姿数据时,对两个位姿数据进行插值处理(例如,线性插值),以得到与待显示的视频帧对应的目标位姿数据,然后,基于目标位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型。需要说明的是,对两个位姿数据进行插值处理包括对位姿数据中的位置进行插值处理和对位姿数据中的角度进行插值处理。
例如,在本公开的一些实施例中,基于目标位姿数据,对虚拟模型的姿态进行调整包括:基于目标位姿数据,计算该虚拟模型在显示装置的显示屏上所对应的姿态,然后将该虚拟模型对应的三维重建数据集合中的各种数据按照该目标位姿数据对应的姿态投影到显示屏上,从而得到处于该姿态的虚拟模型。
例如,虚拟模型为增强现实特效模型等。虚拟模型可以包括文字、图像、三维模型、音乐、视频等虚拟特效。虚拟模型可以为预先建模得到的模型。
例如,在一些实施例中,步骤S14包括:显示待显示的视频帧;将待显示的虚拟模型叠加在待显示的视频帧上进行显示。
例如,待显示的视频帧和待显示的虚拟模型同时显示在显示装置上,且待显示的视频帧和待显示的虚拟模型对应的时间是相同的,从而可以使得AR特效与屏幕显示的图像可以对齐,进而可以向用户提供更好的AR特效的视觉效果。
本公开至少一实施例还提供一种显示装置,图2为本公开至少一实施例提供的一种显示装置的示意性框图。
例如,如图2所示,显示装置20包括处理器200和存储器210。应当注意,图2所示的显示装置20的组件只是示例性的,而非限制性的,根据实际应用需要,该显示装置20还可以具有其他组件。
例如,处理器200和存储器210之间可以直接或间接地互相通信。
例如,处理器200和存储器210可以通过网络进行通信。网络可以包括无线网络、有线网络、和/或无线网络和有线网络的任意组合。处理器200和存储器210之间也可以通过系统总线实现相互通信,本公开对此不作限制。
例如,存储器210用于非瞬时性地存储计算机可读指令。处理器200用于运行计算机可读指令时,计算机可读指令被处理器200运行时实现根据上述任一实施例所述的视频处理方法。关于该视频处理方法的各个步骤的具体实现以及相关解释内容可以参见上述视频处理方法的实施例,重复之处在此不作赘述。
例如,处理器200和存储器210可以设置在服务器端(或云端)。
例如,处理器200可以控制显示装置20中的其它组件以执行期望的功能。处理器200可以是中央处理器(CPU)、网络处理器(NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。中央处理元(CPU)可以为X86或ARM架构等。
例如,存储器210可以包括一个或多个计算机程序产品的任意组合,计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。非易失性存储器例如可以包括只读存储器(ROM)、硬盘、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机可读指令,处理器200可以运行所述计算机可读指令,以实现显示装置20的各种功能。在存储介质中还可以存储各种应用程序和各种数据等。
例如,在一些实施例中,显示装置20还包括视频采集装置和位姿采集装置。视频采集装置被配置为采集目标物体的视频以得到待处理视频;位姿采集装置被配置为采集视频采集装置的位姿数据,以得到N个位姿数据。
例如,视频采集装置可以包括相机、摄像机等可以拍摄视频和/或图像的装置。
例如,位姿采集装置包括陀螺仪、加速度传感器或卫星定位装置等。又例如,位姿采集装置也可以通过ARKit软件、ARcore软件等实现采集位姿数据的功能,位姿采集装置还可以通过SLAM技术实现采集位姿数据的功能。
例如,在一些实施例中,显示装置20可以为移动终端,例如,手机、平板电脑等,位姿采集装置和视频采集装置均设置在移动终端上,例如,位姿采集装置可以为移动终端内部设置的陀螺仪,视频采集装置可以为移动装置上的摄像头(例如,可以包括屏下摄像头等)。本公开不限于此,视频采集装置也可以设置在移动终端之外,例如,视频采集装置可以远程采集视频并通过网络传输到移动终端,以供移动终端进行后续处理。需要说明的是,视频采集装置和位姿采集装置需要一体设置,以便于位姿采集装置采集视频采集装置的位姿数据。
例如,显示装置20还可以包括显示面板,显示面板用于显示待显示的视频帧和待显示的虚拟模型。例如,显示面板可以为矩形面板、圆形面板、椭圆形面板或多边形面板等。另外,显示面板不仅可以为平面面板,也可以为曲面面板,甚至球面面板。
例如,显示装置20可以具备触控功能,即显示装置20可以为触控显示装置。
例如,关于显示装置20执行视频处理方法的过程的详细说明可以参考视频处理方法的实施例中的相关描述,重复之处不再赘述。
图3为本公开至少一实施例提供的一种非瞬时性计算机可读存储介质的示意图。例如,如图3所示,存储介质300为非瞬时性计算机可读存储介质,在存储介质300上可以非暂时性地存储一个或多个计算机可读指令310。例如,当计算机可读指令310由处理器执行时可以执行根据上文所述的视频处理方法中的一个或多个步骤。
例如,该存储介质300可以应用于上述显示装置20中。例如,存储介质300可以包括显示装置20中的存储器210。
例如,关于存储介质300的说明可以参考显示装置20的实施例中对于存储器210的描述,重复之处不再赘述。
图4示出了适于用来实现本公开实施例的电子设备(例如电子设备可以包括上述实施例描述的显示装置)600的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图4示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图4所示,电子设备600可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置606加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备600操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置606;以及通信装置609。通信装置609可以允许电子设备600与其他设备进行无线或有线通信以交换数据。虽然图4示出了具有各种装置的电子设备600,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置609从网络上被下载和安装,或者从存储装置606被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,在本公开的上下文中,计算机可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是,但不限于:电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言,诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络(,包括局域网(LAN)或广域网(WAN))连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
根据本公开的一个或多个实施例,一种视频处理方法用于显示装置,该视频处理方法包括:获取待处理视频,并对待处理视频的多个视频帧分别打上多个视频时间戳,其中,多个视频帧与多个视频时间戳一一对应;获取显示装置的N个位姿数据,并对N个位姿数据分别打上N个位姿时间戳,缓存N个位姿数据和N个位姿时间戳,其中,N个位姿数据与N个位姿时间戳一一对应,N为正整数;从多个视频帧中提取待显示的视频帧,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据;基于与待显示的视频帧对应的至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;通过显示装置同时显示待显示的视频帧和待显示的虚拟模型。
根据本公开的一个或多个实施例,待处理视频包括目标物体,目标物体包括地标建筑,显示装置包括视频采集装置,获取待处理视频包括:利用视频采集装置采集目标物体的视频以得到待处理视频;将待处理视频的多个视频帧分别打上多个视频时间戳包括:在利用视频采集装置采集待处理视频时,实时获取显示装置的系统时钟,以得到与多个视频帧分别对应的多个视频时间戳。
根据本公开的一个或多个实施例,显示装置包括位姿采集装置,获取N个位姿数据包括:在利用视频采集装置采集待处理视频时,利用位姿采集装置采集视频采集装置的位姿数据,以得到N个位姿数据;对N个位姿数据分别打上N个位姿时间戳包括:在利用位姿采集装置采集N个位姿数据时,实时获取显示装置的系统时钟,以得到与N个位姿数据分别对应的N个位姿时间戳。
根据本公开的一个或多个实施例,N个位姿数据中的每个位姿数据包括视频采集装置的位置和角度。
根据本公开的一个或多个实施例,N个位姿数据的数量为100~200。
根据本公开的一个或多个实施例,根据待显示的视频帧对应的视频时间戳,从N个位姿数据中确定与待显示的视频帧对应的至少一个位姿数据,包括:根据待显示的视频帧对应的视频时间戳,在由N个位姿时间戳构成的位姿时间轴上查找与待显示的视频帧对应的视频时间戳相对应的参考位姿时间戳,其中,参考位姿时间戳和视频时间戳之间的时间差的绝对值最小;将与参考位姿时间戳对应的位姿数据作为至少一个位姿数据;或者,根据待显示的视频帧对应的视频时间戳,在由N个位姿时间戳构成的位姿时间轴上查找与待显示的视频帧对应的视频时间戳相对应的第一参考位姿时间戳和第二参考位姿时间戳,其中,第一参考位姿时间戳和视频时间戳之间的时间差的绝对值和第二参考位姿时间戳和视频时间戳之间的时间差的绝对值为最小的两个绝对值;将与第一参考位姿时间戳对应的位姿数据和第二参考位姿时间戳对应的位姿数据作为至少一个位姿数据。
根据本公开的一个或多个实施例,基于与待显示的视频帧对应的至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型,包括:响应于与待显示的视频帧对应的至少一个位姿数据的数量为1,将与待显示的视频帧对应的至少一个位姿数据作为目标位姿数据,基于目标位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;或者,响应于与待显示的视频帧对应的至少一个位姿数据的数量为2,对与待显示的视频帧对应的至少一个位姿数据进行插值处理,以得到与待显示的视频帧对应的目标位姿数据,基于目标位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型。
根据本公开的一个或多个实施例,通过显示装置同时显示待显示的视频帧和待显示的虚拟模型包括:显示待显示的视频帧;将待显示的虚拟模型叠加在待显示的视频帧上进行显示。
根据本公开的一个或多个实施例,虚拟模型为增强现实特效模型。
根据本公开的一个或多个实施例,一种显示装置,包括:存储器,用于非瞬时性地存储计算机可读指令;处理器,用于运行计算机可读指令,计算机可读指令被处理器运行时实现根据本公开任一实施例提供的视频处理方法。
根据本公开的一个或多个实施例,显示装置还包括:视频采集装置和位姿采集装置,视频采集装置被配置为采集目标物体的视频以得到待处理视频;位姿采集装置被配置为采集视频采集装置的位姿数据,以得到N个位姿数据。
根据本公开的一个或多个实施例,视频采集装置包括相机,位姿采集装置包括陀螺仪、加速度传感器或卫星定位装置。
根据本公开的一个或多个实施例,显示装置为移动终端,位姿采集装置和视频采集装置均设置在移动终端上。
根据本公开的一个或多个实施例,一种非瞬时性计算机可读存储介质存储有计算机可读指令,计算机可读指令被处理器执行时实现根据本公开任一实施例提供的视频处理方法。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。
对于本公开,还有以下几点需要说明:
(1)本公开实施例附图只涉及到与本公开实施例涉及到的结构,其他结构可参考通常设计。
(2)为了清晰起见,在用于描述本发明的实施例的附图中,层或结构的厚度和尺寸被放大。可以理解,当诸如层、膜、区域或基板之类的元件被称作位于另一元件“上”或“下”时,该元件可以“直接”位于另一元件“上”或“下”,或者可以存在中间元件。
(3)在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合以得到新的实施例。
以上所述仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,本公开的保护范围应以所述权利要求的保护范围为准。
Claims (11)
1.一种视频处理方法,用于显示装置,包括:
获取待处理视频,并对所述待处理视频的多个视频帧分别打上多个视频时间戳,其中,所述多个视频帧与所述多个视频时间戳一一对应;
获取所述显示装置的N个位姿数据,并对所述N个位姿数据分别打上N个位姿时间戳,缓存所述N个位姿数据和所述N个位姿时间戳,其中,所述N个位姿数据与所述N个位姿时间戳一一对应,N为正整数;
从所述多个视频帧中提取待显示的视频帧,根据所述待显示的视频帧对应的视频时间戳,从所述N个位姿数据中确定与所述待显示的视频帧对应的至少一个位姿数据;
基于与所述待显示的视频帧对应的所述至少一个位姿数据,对虚拟模型的姿态进行调整,以得到待显示的虚拟模型;
通过所述显示装置同时显示所述待显示的视频帧和所述待显示的虚拟模型;
其中,根据所述待显示的视频帧对应的视频时间戳,从所述N个位姿数据中确定与所述待显示的视频帧对应的至少一个位姿数据,包括:
根据所述待显示的视频帧对应的视频时间戳,在由所述N个位姿时间戳构成的位姿时间轴上查找与所述待显示的视频帧对应的所述视频时间戳相对应的参考位姿时间戳,其中,所述参考位姿时间戳和所述视频时间戳之间的时间差的绝对值最小;
将与所述参考位姿时间戳对应的位姿数据作为所述至少一个位姿数据;
其中,在由所述N个位姿时间戳构成的位姿时间轴上查找与所述待显示的视频帧对应的所述视频时间戳相对应的参考位姿时间戳,包括:
响应于所述位姿时间轴上不存在与所述视频时间戳相等的位姿时间戳,从所述位姿时间轴上选择和所述视频时间戳之间的时间差的绝对值最小的位姿时间戳作为所述参考位姿时间戳;
所述待处理视频包括目标物体,所述目标物体包括地标建筑,N个位姿数据中的每个位姿数据包括视频采集装置的位置和角度,所述位置包括所述视频采集装置对应的GPS坐标,所述角度包括所述视频采集装置与所述目标物体之间的相对角度关系;
所述显示装置还包括位姿采集装置和视频采集装置,
其中,获取待处理视频包括:利用所述视频采集装置采集所述目标物体的视频以得到所述待处理视频;
将所述待处理视频的多个视频帧分别打上多个视频时间戳包括:在利用所述视频采集装置采集所述待处理视频时,实时获取所述显示装置的系统时钟,以得到与所述多个视频帧分别对应的所述多个视频时间戳;
获取所述N个位姿数据包括:在利用所述视频采集装置采集所述待处理视频时,利用所述位姿采集装置采集所述视频采集装置的位姿数据,以得到所述N个位姿数据;
对所述N个位姿数据分别打上N个位姿时间戳包括:在利用所述位姿采集装置采集所述N个位姿数据时,实时获取所述显示装置的系统时钟,以得到与所述N个位姿数据分别对应的所述N个位姿时间戳;以及
缓存的所述N个位姿数据和所述N个位姿时间戳为最接近当前时刻的N个位姿数据和N个位姿时间戳。
2.根据权利要求1所述视频处理方法,其中,所述N个位姿数据中的每个位姿数据包括所述视频采集装置的位置和角度。
3.根据权利要求1所述视频处理方法,其中,所述N个位姿数据的数量为100~200。
4.根据权利要求1~3任一项所述视频处理方法,其中,基于与所述待显示的视频帧对应的所述至少一个位姿数据,对所述虚拟模型的姿态进行调整,以得到所述待显示的虚拟模型,包括:
响应于与所述待显示的视频帧对应的所述至少一个位姿数据的数量为1,将与所述待显示的视频帧对应的所述至少一个位姿数据作为目标位姿数据,基于所述目标位姿数据,对所述虚拟模型的姿态进行调整,以得到所述待显示的虚拟模型;或者
响应于与所述待显示的视频帧对应的所述至少一个位姿数据的数量为2,对与所述待显示的视频帧对应的所述至少一个位姿数据进行插值处理,以得到与所述待显示的视频帧对应的目标位姿数据,基于所述目标位姿数据,对所述虚拟模型的姿态进行调整,以得到所述待显示的虚拟模型。
5.根据权利要求1~3任一项所述视频处理方法,其中,通过所述显示装置同时显示所述待显示的视频帧和所述待显示的虚拟模型包括:
显示所述待显示的视频帧;
将所述待显示的虚拟模型叠加在所述待显示的视频帧上进行显示。
6.根据权利要求1~3任一项所述视频处理方法,其中,所述虚拟模型为增强现实特效模型。
7.一种显示装置,包括:
存储器,用于非瞬时性地存储计算机可读指令;
处理器,用于运行所述计算机可读指令,所述计算机可读指令被所述处理器运行时实现根据权利要求1~6任一项所述的视频处理方法。
8.根据权利要求7所述的显示装置,
其中,所述视频采集装置被配置为采集所述目标物体的视频以得到所述待处理视频;
所述位姿采集装置被配置为采集所述视频采集装置的位姿数据,以得到所述N个位姿数据。
9.根据权利要求8所述的显示装置,其中,所述视频采集装置包括相机,所述位姿采集装置包括陀螺仪、加速度传感器或卫星定位装置。
10.根据权利要求8或9所述的显示装置,其中,所述显示装置为移动终端,所述位姿采集装置和所述视频采集装置均设置在所述移动终端上。
11.一种非瞬时性计算机可读存储介质,其中,所述非瞬时性计算机可读存储介质存储有计算机可读指令,所述计算机可读指令被处理器执行时实现根据权利要求1~6中任一项所述的视频处理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011011403.8A CN112333491B (zh) | 2020-09-23 | 2020-09-23 | 视频处理方法、显示装置和存储介质 |
PCT/CN2021/109020 WO2022062642A1 (zh) | 2020-09-23 | 2021-07-28 | 视频处理方法、显示装置和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011011403.8A CN112333491B (zh) | 2020-09-23 | 2020-09-23 | 视频处理方法、显示装置和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112333491A CN112333491A (zh) | 2021-02-05 |
CN112333491B true CN112333491B (zh) | 2022-11-01 |
Family
ID=74303548
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011011403.8A Active CN112333491B (zh) | 2020-09-23 | 2020-09-23 | 视频处理方法、显示装置和存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN112333491B (zh) |
WO (1) | WO2022062642A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112333491B (zh) * | 2020-09-23 | 2022-11-01 | 字节跳动有限公司 | 视频处理方法、显示装置和存储介质 |
CN113766119B (zh) * | 2021-05-11 | 2023-12-05 | 腾讯科技(深圳)有限公司 | 虚拟形象显示方法、装置、终端及存储介质 |
CN113850746A (zh) * | 2021-09-29 | 2021-12-28 | 北京字跳网络技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN115089961A (zh) * | 2022-06-24 | 2022-09-23 | 北京字跳网络技术有限公司 | 一种视频处理方法、装置、电子设备及存储介质 |
CN115396644B (zh) * | 2022-07-21 | 2023-09-15 | 贝壳找房(北京)科技有限公司 | 基于多段外参数据的视频融合方法及装置 |
CN115761114B (zh) * | 2022-10-28 | 2024-04-30 | 如你所视(北京)科技有限公司 | 视频生成方法、装置及计算机可读存储介质 |
CN118158383A (zh) * | 2023-11-22 | 2024-06-07 | 湖北星纪魅族集团有限公司 | 数据处理方法、装置、电子设备和计算机可读存储介质 |
CN118089705B (zh) * | 2024-04-26 | 2024-08-16 | 深圳市普渡科技有限公司 | 地图更新方法、装置、计算机设备和存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018113759A1 (zh) * | 2016-12-22 | 2018-06-28 | 大辅科技(北京)有限公司 | 基于定位系统和ar/mr的探测系统及探测方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017117446A1 (en) * | 2015-12-30 | 2017-07-06 | Daqri, Llc | 3d video reconstruction system |
CN110555882B (zh) * | 2018-04-27 | 2022-11-15 | 腾讯科技(深圳)有限公司 | 界面显示方法、装置及存储介质 |
CN110858414A (zh) * | 2018-08-13 | 2020-03-03 | 北京嘀嘀无限科技发展有限公司 | 图像处理方法、装置、可读存储介质与增强现实系统 |
CN109168034B (zh) * | 2018-08-28 | 2020-04-28 | 百度在线网络技术(北京)有限公司 | 商品信息显示方法、装置、电子设备和可读存储介质 |
CN110379017B (zh) * | 2019-07-12 | 2023-04-28 | 北京达佳互联信息技术有限公司 | 一种场景构建方法、装置、电子设备及存储介质 |
CN112333491B (zh) * | 2020-09-23 | 2022-11-01 | 字节跳动有限公司 | 视频处理方法、显示装置和存储介质 |
-
2020
- 2020-09-23 CN CN202011011403.8A patent/CN112333491B/zh active Active
-
2021
- 2021-07-28 WO PCT/CN2021/109020 patent/WO2022062642A1/zh active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018113759A1 (zh) * | 2016-12-22 | 2018-06-28 | 大辅科技(北京)有限公司 | 基于定位系统和ar/mr的探测系统及探测方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2022062642A1 (zh) | 2022-03-31 |
CN112333491A (zh) | 2021-02-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112333491B (zh) | 视频处理方法、显示装置和存储介质 | |
CN112288853B (zh) | 三维重建方法、三维重建装置、存储介质 | |
US11776209B2 (en) | Image processing method and apparatus, electronic device, and storage medium | |
CN112907652B (zh) | 相机姿态获取方法、视频处理方法、显示设备和存储介质 | |
CN112488783B (zh) | 图像采集方法、装置和电子设备 | |
CN111597466A (zh) | 展示方法、装置和电子设备 | |
CN111818265B (zh) | 基于增强现实模型的交互方法、装置、电子设备及介质 | |
CN114049403A (zh) | 一种多角度三维人脸重建方法、装置及存储介质 | |
CN111586295B (zh) | 图像生成方法、装置和电子设备 | |
CN113766293B (zh) | 信息显示方法、装置、终端及存储介质 | |
WO2023151558A1 (zh) | 用于显示图像的方法、装置和电子设备 | |
CN111710046A (zh) | 交互方法、装置和电子设备 | |
CN111833459A (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
CN112132909B (zh) | 参数获取方法及装置、媒体数据处理方法和存储介质 | |
CN112887793B (zh) | 视频处理方法、显示设备和存储介质 | |
CN114332224A (zh) | 3d目标检测样本的生成方法、装置、设备及存储介质 | |
CN112492230B (zh) | 视频处理方法、装置、可读介质及电子设备 | |
CN111597414B (zh) | 显示方法、装置和电子设备 | |
CN113066166A (zh) | 图像处理方法、装置和电子设备 | |
WO2023029892A1 (zh) | 视频处理方法、装置、设备及存储介质 | |
CN114359362A (zh) | 房源信息采集方法、装置和电子设备 | |
CN114332434A (zh) | 显示方法、装置和电子设备 | |
CN115686297A (zh) | 信息显示方法、装置、设备及介质 | |
CN114357348A (zh) | 显示方法、装置和电子设备 | |
CN110634048A (zh) | 一种信息显示方法、装置、终端设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |