CN110070569A - 终端图像的配准方法、装置、移动终端及存储介质 - Google Patents
终端图像的配准方法、装置、移动终端及存储介质 Download PDFInfo
- Publication number
- CN110070569A CN110070569A CN201910359510.0A CN201910359510A CN110070569A CN 110070569 A CN110070569 A CN 110070569A CN 201910359510 A CN201910359510 A CN 201910359510A CN 110070569 A CN110070569 A CN 110070569A
- Authority
- CN
- China
- Prior art keywords
- terminal
- image
- registration
- photograph image
- photograph
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 123
- 238000003860 storage Methods 0.000 title claims abstract description 19
- 230000033001 locomotion Effects 0.000 claims abstract description 99
- 238000012545 processing Methods 0.000 claims description 19
- 239000000284 extract Substances 0.000 claims description 5
- 230000006870 function Effects 0.000 description 16
- 230000006854 communication Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 14
- 238000001514 detection method Methods 0.000 description 8
- 230000004927 fusion Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 241000208340 Araliaceae Species 0.000 description 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 2
- 235000003140 Panax quinquefolius Nutrition 0.000 description 2
- 206010048669 Terminal state Diseases 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 235000008434 ginseng Nutrition 0.000 description 2
- 230000005764 inhibitory process Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000013481 data capture Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
- G06T7/248—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
- G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Telephone Function (AREA)
Abstract
本发明公开了一种终端图像的配准方法,该终端图像的配准方法包括:获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参考图像;获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的运动数据,并根据所述运动数据获取终端的运动状态;基于终端的所述运动状态在所述配准参考图像上确定优先配准位置,以所述优先配准位置为参考,对各所述照片图像进行配准。此外,本发明还提供了一种终端图像的配准装置、移动终端及存储介质,本发明解决了图像配准过程缓慢,耗用时间长,造成用户在拍摄照片的过程中需要等待较长时间的技术问题。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种终端图像的配准方法、装 置、移动终端及存储介质。
背景技术
随着终端拍照技术的迅速发展,并伴随人们越来越多样的运用终端进行 拍摄高质量照片的需求,终端通常是基于连续拍摄多张照片图像之后,将该 多张照片图像进行融合,通过对拍摄的照片图像进行融合处理以对拍摄的照 片进行优化,从而得到满足用户需求的照片图像。在对终端拍摄的多张照片 进行融合处理之前,为了得到良好的融合效果,需要先对摄取到的多张照片 图像进行配准,然而,对图像进行配准的过程十分耗时,从而造成用户的等 待时间过长,严重影响用户的拍照体验。
发明内容
本发明的主要目的在于提供一种终端图像的配准方法、装置、移动终端 及存储介质,旨在解决现有的图像配准过程十分耗时,造成用户在拍摄照片 的过程中需要等待较长时间的技术问题。
获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参考 图像;获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的运动数据, 并根据所述运动数据获取终端的运动状态;基于终端的所述运动状态在所述 配准参考图像上确定优先配准位置,以所述优先配准位置为参考,对各所述 照片图像进行配准。
可选地,所述获取终端连续摄取的各照片图像,并从各所述照片图像中 确定配准参考图像的步骤包括:
获取终端在拍摄过程中所摄取到的各照片图像,其中,获取到的照片图 像数量不少于两张;
检测各照片图像的清晰度,将各照片图像中所述清晰度最高的照片图像 作为配准参考图像。
可选地,所述获取终端在摄取各所述照片图像过程中,终端陀螺仪记录 的运动数据的步骤包括:
检测终端在摄取照片图像的拍摄过程所对应生成的照片图像列表;
从所述照片图像列表中,获取终端陀螺仪记录的终端在拍摄各所述照片 图像时刻,终端的运动数据。
可选地,所述根据所述运动数据获取终端的运动状态的步骤包括:
从所述运动数据中,提取终端在摄取各所述配准参考图像时刻,终端的 第一运动数据,和终端在摄取除所述配准参考图像之外的各所述照片图像时 刻,终端的各第二运动数据;
根据第一运动数据和各所述第二运动数据,计算终端摄取各所述照片图 像过程中的运动状态。
可选地,终端的所述运动状态包括:终端的运动方向和运动距离,
所述基于终端的所述运动状态在所述配准参考图像上确定优先配准位置 的步骤包括:
获取相对于摄取所述配准参考图像时刻,终端在摄取除所述配准参考图 像之外的各所述照片图像时刻,终端的运动方向和运动距离;
基于所述运动方向和所述运动距离,在所述配准参考图像上,确定对终 端摄取的各所述照片图像进行配准处理的优先配准位置。
可选地,所述以所述优先配准位置为参考,对各所述照片图像进行配准 的步骤包括:
根据预设规则,对各所述照片图像进行分块处理;
按照所述配准参考图像上的所述优先配准位置,对分块处理之后的各所 述照片图像进行配准;
若根据所述优先搜索位置无法完成配准,则逐次扩大配准范围,并在所 述配准范围内对各所述照片图像进行配准。
可选地,所述以所述优先配准位置为参考,对各所述照片图像进行配准 的步骤,还包括:
若检测到对所述照片图像进行配准的最终配准位置,不属于所述优先配 准位置的预设范围,则绘制终端在拍摄过程中的运动轨迹;
根据所述运动轨迹预测新的图像配准位置,并按照所述新的图像配准位 置对剩余的所述照片图像进行配准。
此外,为实现上述目的,本发明还提供一种终端图像的配准装置,所述 终端图像的配准装置包括:
第一获取模块,用于获取终端连续摄取的各照片图像,并从各所述照片 图像中确定配准参考图像;
第二获取模块,用于获取终端在摄取各所述照片图像过程中,终端陀螺 仪记录的运动数据,并根据所述运动数据获取终端的运动状态;
配准模块,用于基于终端的所述运动状态在所述配准参考图像上确定优 先配准位置,以所述优先配准位置为参考,对各所述照片图像进行配准。
此外,为实现上述目的,本发明还提供一种移动终端;
所述移动终端包括:存储器、处理器及存储在所述存储器上并可在所述 处理器上运行的计算机程序,其中:
所述计算机程序被所述处理器执行时实现如上所述的终端图像的配准方 法的步骤。
此外,为实现上述目的,本发明还提供存储介质;
所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实 现如上述的终端图像的配准方法的步骤。
本发明实施例提出的一种终端图像的配准方法、装置、移动终端及存储 介质,获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参 考图像;获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的运动数 据,并根据所述运动数据获取终端的运动状态;基于终端的所述运动状态在 所述配准参考图像上确定优先配准位置,以所述优先配准位置为参考,对各 所述照片图像进行配准。
本发明通过获取终端从接收到拍摄指令到当前拍摄指令执行完成,即从 开始拍摄到结束拍摄的整个拍摄过程中,终端所摄取到的数量大于两张的照 片图像,将获取到的多张照片图像中,清晰度最高的照片图像作为对当前多 张照片图像进行配准的配准参考图像,基于终端在摄取包括该配准参考图像 在内的各照片图像时终端陀螺仪所记录的,终端在拍摄每一照片图像时刻, 终端的运动数据中,终端拍摄配准参考图像时刻对应的终端的运动数据,和 终端拍摄其他各照片图像时刻对应的终端的运动数据,计算终端的运动状态, 并根据终端的运动状态,在配准参考图像上,确定优先配准位置,并按照该 确定的优先配准位置对当前获取的多张照片图像进行配准处理。
本发明实现了,将终端摄取的多张照片图像中,清晰度最高的照片图像 作为配准参考图像,并结合终端陀螺仪记录的终端在拍摄照片图像时的运动 数据,计算终端拍摄除配准参考图像之外的各照片图像时刻,终端相对于拍 摄配准参考图像时刻的运动状态,基于计算的运动状态在当前配准参考图像 上,确定优先配准位置,并基于该配准位置对终端在当前拍摄过程中摄取的 多张照片图像进行配准处理,从而对照片图像的配准进行优化,通过基于终 端运动状态计算优先配准位置,避免了在照片图像开始进行配准时,从照片图像的全部范围搜索配准位置,提升了配准的速度,进而减少了照片图像进 行融合处理的整体耗时,令用户再无需等待较长时间即可得到高质量的照片, 提升了用户体验。
附图说明
图1为本发明实施例一个可选的移动终端的硬件结构示意图;
图2为图1中移动终端的无线通信装置示意图;
图3为本发明终端图像的配准方法第一实施例的流程示意图;
图4为本发明终端图像的配准方法一实施例中步骤S30的细化流程示意 图;
图5为本发明终端图像的配准装置一实施例的功能模块示意图;
图6A为本发明终端图像的配准方法一实施例中图像配准场景示意图;
图6B为本发明终端图像的配准方法一实施例的应用场景示意图;
图7为本发明终端图像的配准方法一实施例的终端界面示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步 说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限 定本发明。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单 元”的后缀仅为了有利于本发明的说明,其本身没有特定的意义。因此,“模 块”、“部件”或“单元”可以混合地使用。
终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如 智能手表、智能手环、智能眼镜以及各种柔性屏幕的可穿戴终端设备,甚至 可以是手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant,PDA)、便捷式媒体播放器(Portable Media Player,PMP)、导航 装置、可穿戴设备、智能手环、计步器等移动终端,以及诸如数字TV、台式 计算机等固定终端。
后续描述中将以移动终端为例进行说明,本领域技术人员将理解的是, 除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应 用于固定类型的终端。
请参阅图1,其为实现本发明各个实施例的一种移动终端的硬件结构示意 图,该移动终端100可以包括:RF(Radio Frequency,射频)单元101、WiFi 模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、 显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、 以及电源111等部件。本领域技术人员可以理解,图1中示出的移动终端结 构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图1对移动终端的各个部件进行具体的介绍:
射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体 的,将基站的下行信息接收后,给处理器110处理;另外,将上行的数据发 送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发 信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过 无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协 议,包括但不限于GSM(Global System of Mobile communication,全球移动 通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、 CDMA2000(Code Division Multiple Access 2000,码分多址2000)、WCDMA (Wideband CodeDivision Multiple Access,宽带码分多址)、TD-SCDMA (Time Division-SynchronousCode Division Multiple Access,时分同步码分多 址)、FDD-LTE(Frequency DivisionDuplexing-Long Term Evolution,频分双 工长期演进)和TDD-LTE(Time DivisionDuplexing-Long Term Evolution,分 时双工长期演进)等。
WiFi属于短距离无线传输技术,移动终端通过WiFi模块102可以帮助用 户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带 互联网访问。虽然图1示出了WiFi模块102,但是可以理解的是,其并不属 于移动终端的必须构成,完全可以根据需要在不改变发明的本质的范围内而 省略。
音频输出单元103可以在移动终端100处于呼叫信号接收模式、通话模 式、记录模式、语音识别模式、广播接收模式等等模式下时,将射频单元101 或WiFi模块102接收的或者在存储器109中存储的音频数据转换成音频信号 并且输出为声音。而且,音频输出单元103还可以提供与移动终端100执行 的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。 音频输出单元103可以包括扬声器、蜂鸣器等等。
A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包 括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处 理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头) 获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显 示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或 其它存储介质)中或者经由射频单元101或WiFi模块102进行发送。麦克风 1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦 克风1042接收声音(音频数据),并且能够将这样的声音处理为音频数据。 处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频 单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的 噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的 噪声或者干扰。
移动终端100还包括至少一种传感器105,比如光传感器、运动传感器以 及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中, 环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感 器可在移动终端100移动到耳边时,关闭显示面板1061和/或背光。作为运动 传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大 小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如 横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步 器、敲击)等;至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、 分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感 器,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单 元106可包括显示面板1061,可以采用液晶显示器(Liquid Crystal Display, LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配 置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与移动 终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107 可包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸 屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何 适合的物体或附件在触控面板1071上或在触控面板1071附近的操作),并 根据预先设定的程式驱动相应的连接装置。触控面板1071可包括触摸检测装 置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检 测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测 装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收 处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外 线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输 入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以 包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹 球、鼠标、操作杆等中的一种或多种,具体此处不做限定。
进一步的,触控面板1071可覆盖显示面板1061,当触控面板1071检测 到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型, 随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输 出。虽然在图1中,触控面板1071与显示面板1061是作为两个独立的部件 来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板 1071与显示面板1061集成而实现移动终端的输入和输出功能,具体此处不做 限定。
接口单元108用作至少一个外部装置与移动终端100连接可以通过的接 口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池 充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的 装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口 单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且 将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移 动终端100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据,存储器109可为一种计 算机存储介质,该存储器109存储有本发明终端图像的配准程序。存储器109 可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、 至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等; 存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等) 等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性 存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器 件。
处理器110是移动终端的控制中心,利用各种接口和线路连接整个移动 终端的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块, 以及调用存储在存储器109内的数据,执行移动终端的各种功能和处理数据, 从而对移动终端进行整体监控。如处理器110执行存储器109中的终端图像 的配准程序,以实现本发明终端图像的配准方法各实施例的步骤。
处理器110可包括一个或多个处理单元;可选的,处理器110可集成应 用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界 面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述 调制解调处理器也可以不集成到处理器110中。
移动终端100还可以包括给各个部件供电的电源111(比如电池),可选 的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源 管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图1未示出,移动终端100还可以包括蓝牙模块等,在此不再赘述。
为了便于理解本发明实施例,下面对本发明的移动终端所基于的通信网 络系统进行描述。
请参阅图2,图2为本发明实施例提供的一种通信网络系统架构图,该通 信网络系统为通用移动通信技术的LTE系统,该LTE系统包括依次通讯连接 的UE(User Equipment,用户设备)201,E-UTRAN(Evolved UMTS Terrestrial Radio Access Network,演进式UMTS陆地无线接入网)202,EPC(Evolved Packet Core,演进式分组核心网)203和运营商的IP业务204。
具体地,UE201可以是上述终端100,此处不再赘述。
E-UTRAN202包括eNodeB2021和其它eNodeB2022等。其中,eNodeB2021 可以通过回程(backhaul)(例如X2接口)与其它eNodeB2022连接,eNodeB2021 连接到EPC203,eNodeB2021可以提供UE201到EPC203的接入。
EPC203可以包括MME(Mobility Management Entity,移动性管理实体) 2031,HSS(Home Subscriber Server,归属用户服务器)2032,其它MME2033, SGW(Serving GateWay,服务网关)2034,PGW(PDN Gate Way,分组数 据网络网关)2035和PCRF(Policy andCharging Rules Function,政策和资费 功能实体)2036等。其中,MME2031是处理UE201和EPC203之间信令的 控制节点,提供承载和连接管理。HSS2032用于提供一些寄存器来管理诸如 归属位置寄存器(图中未示)之类的功能,并且保存有一些有关服务特征、 数据速率等用户专用的信息。所有用户数据都可以通过SGW2034进行发送, PGW2035可以提供UE 201的IP地址分配以及其它功能,PCRF2036是业务 数据流和IP承载资源的策略与计费控制策略决策点,它为策略与计费执行功 能单元(图中未示)选择及提供可用的策略和计费控制决策。
IP业务204可以包括因特网、内联网、IMS(IP Multimedia Subsystem, IP多媒体子系统)或其它IP业务等。
虽然上述以LTE系统为例进行了介绍,但本领域技术人员应当知晓,本 发明不仅仅适用于LTE系统,也可以适用于其他无线通信系统,例如GSM、 CDMA2000、WCDMA、TD-SCDMA以及未来新的网络系统等,此处不做限 定。
基于上述移动终端硬件结构以及通信网络系统,提出本发明方法各个实施 例。
本发明提供一种终端图像的配准方法,该终端图像的配准方法包括:
获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参考 图像;检测终端摄取各所述照片图像时,终端陀螺仪记录的运动数据,并根 据所述运动数据获取终端的运动状态;基于终端的所述运动状态确定优先配 准位置,并按照所述优先配准位置对各所述照片图像进行配准。
具体地,请参照图3,图3为本发明终端图像的配准方法第一实施例的流 程示意图,在本发明终端图像的配准方法第一实施例中,该终端图像的配准 方法包括:
步骤S10,获取终端连续摄取的各照片图像,并从各所述照片图像中确定 配准参考图像。
获取终端在当前时刻从开始拍摄照片到拍摄结束的一个连续拍照过程 中,终端所摄取到的多张照片图像,并从获取到的该多张照片中确定用于对 全部照片图像进行配准处理的配准参考图像。
具体地,例如,当检测到终端获取到拍照指令而开始摄取照片图像时, 获取终端从开始摄取图像,到终端将当前拍照指令执行完毕而结束摄取照片 图像的整个连续拍照过程中,终端所摄取到的多张照片图像,并基于相对配 准方式,从获取到该多张照片图像中,确定一张用于终端当前摄取的多张照 片图像进行配准处理的配准参考图像。
进一步地,步骤S10,包括:
步骤S101,获取终端在当前拍摄过程中所摄取到的各照片图像。
需要说明的是,获取到的照片图像数量不少于两张。
检测并获取终端从执行拍照指令开始摄取照片图像,到拍照指令执行完 毕而结束摄取照片图像的整个拍摄过程中,终端所摄取到的全部照片图像。
具体地,例如,检测到终端在检测到基于用户触发或者自主触发的拍照 指令,而开始连续拍摄终端摄像头摄取到的照片图像,直到终端将当前拍照 指令执行完毕,结束继续摄取照片图像的整个拍摄过程中,连续拍摄了5张 照片图像,则获取终端在当前拍摄过程中,连续拍摄的全部5张照片图像。
步骤S102,检测各照片图像的清晰度,将各照片图像中所述清晰度最高 的照片图像作为配准参考图像。
逐一检测获取到的照片图像的清晰度,得出当前全部照片图像中清晰度 最高的照片图像,并将该清晰度最高的照片图像作为用于对全部照片图像进 行配准处理的配准参考图像。
具体地,例如,在获取到终端在一个连续的拍摄过程中,连续拍摄的全 部5张照片图像之后,逐一检测该5张照片图像的清晰度分别为:图像1, 150PPI(Pixels Per Inch--像素密度;密度越高,图像越清晰),图像2:150PPI, 图像3:300PPI,图像4,350PPI,图像5:150PPI,则将当前五张照片图像 中,清晰度最高的第四张照片图像,确定为用于对当前五张照片图像进行融 合处理前,配准处理的配准参考图像。
步骤S20,检测终端摄取各所述照片图像时,终端陀螺仪记录的运动数据, 并根据所述运动数据获取终端的运动状态。
检测终端的陀螺仪装置,在终端执行拍照指令摄取照片图像,到拍照指 令执行完毕而结束摄取照片图像的整个拍摄过程中,记录的终端的运动数据, 并基于终端在摄取每一照片图像时刻对应的终端的运动数据,计算终端的运 动状态。
具体地,例如,在如图6B所示的应用场景中,终端的陀螺仪装置,在终 端检测到基于用户触发或者自主触发的拍照指令,而开始连续拍摄终端摄像 头摄取到的照片图像,直到终端将当前拍照指令执行完毕,结束继续摄取照 片图像的整个拍摄过程中,持续记录终端摄取每一张照片图像时刻,终端在 相对空降坐标系中的运动数据,即基于终端在相对坐标系中,坐标(x、y、z) 数据在左右、前后以及上下各个方向上的变化,计算得出的终端位置的运动 数据。
进一步地,步骤S20中,获取终端在摄取各所述照片图像过程中,终端 陀螺仪记录的运动数据的步骤包括:
步骤S201,检测终端在摄取照片图像的拍摄过程所对应生成的照片图像 列表。
检测记录有终端在从执行拍照指令开始摄取照片图像,到拍照指令执行 完毕而结束摄取照片图像的整个拍摄过程中,终端摄取各照片图像的时间节 点、各时间节点对应终端的运动数据等信息的照片图像列表。
具体地,例如,在终端检测到拍照指令,而开始连续拍摄终端摄像头摄 取到的照片图像,到终端将当前拍照指令执行完毕,结束继续摄取照片图像 之后,即结束当前拍摄过程之后,检测终端在进行当前拍摄过程而对应生成 的如图7终端界面示意图中所展示的照片图像列表,在该照片图像列表中记 录有终端摄取各照片图像的时间节点、各时间节点对应终端的运动数据等信 息。
步骤S202,从所述照片图像列表中,获取终端陀螺仪记录的终端在拍摄 各所述照片图像时刻,终端的运动数据。
在检测到终端进行的当前拍摄过程所对应生成的照片图像列表之后,从 该图像列表中记录的各信息中,提取出终端陀螺仪记录的终端在摄取每一张 照片图像的时间节点,终端的运动数据。
具体地,例如,在检测到终端在进行当前拍摄过程,而对应生成的如图7 终端界面示意图中所展示的照片图像列表之后,从该图像列表中记录的终端 摄取各照片图像的时间节点、各时间节点对应终端的运动数据等信息中,提 取出终端在整个连续的拍摄过程中,分别摄取图像1、图像2、图像3、图像 4和图像5的时间节点,所对应的终端的运动数据,即终端摄取图像1时,右 移1个单位,摄取图像2时,右移1个单位,摄取图像3时,下移2个单位, 摄取图像4时,左移1个单位,摄取图像5时,上移1个单位。
进一步地,步骤S20中,根据所述运动数据获取终端的运动状态的步骤 包括:
步骤S203,从所述运动数据中,提取终端在摄取各所述配准参考图像时 刻,终端的第一运动数据,和终端在摄取除所述配准参考图像之外的各所述 照片图像时刻,终端的各第二运动数据。
获取到终端陀螺仪记录的终端在摄取每一张照片图像的时间节点,终端 的运动数据之后,标记提取出终端摄取确定的配准参考图像时刻,终端的第 一运动数据,和终端摄取除确定的配准参考图像之外的其他各照片图像时, 终端的各第二运动数据。
具体地,例如,在从终端在进行当前拍摄过程,对应生成的照片图像列 表中,获取到终端摄取图像1时右移1个单位、摄取图像2时右移1个单位、 摄取图像3时下移2个单位、摄取图像4时左移1个单位和摄取图像5时上 移1个单位的各运动数据之后,将终端摄取基于清晰度高低确定配准参考图 像时,即摄取图像4时,终端的运动数据:左移1个单位,标记为第一运动 数据,并获取该第一运动数据,将终端摄取其他照片图像时,即摄取图像1、 图像2、图像3和图像5时,终端的运动数据:右移1个单位、右移1个单位、 下移2个单位和上移1个单位,均标记为第二运动数据,并获取各第二运动 数据。
步骤S204,获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的 运动数据。
以获取的第一运动数据和其余各第二运动数据,计算终端在进行整个拍 摄过程中,终端摄取其他包括配准参考图像在内的各照片图像过程中,终端 的运动状态。
具体地,例如,基于终端摄取包括配准参考图像即图像4在内的各照片 图像时,即终端摄取图像1、图像2、图像3、图像4和图像5时,终端的运 动数据,将各运动数据作为变量坐标,即(0、1、0)、(0、2、0)、(0、2、-2)、 (0、1、-2)和(0、1、-1),计算得出终端摄取图像1、图像2、图像3、图 像4和图像5时,终端在相对空间坐标系中的运动状态,即终端在检测到拍照指令,开始连续拍摄终端摄像头摄取到的照片图像,到终端将当前拍照指 令执行完毕,结束继续摄取照片图像的整个拍摄过程中,终端先向右移动2 个单位,随后向下移动2个单位,最后分别向左和向上移动1个单位。
步骤S30,基于终端的所述运动状态在所述配准参考图像上确定优先配准 位置,以所述优先配准位置为参考,对各所述照片图像进行配准。
基于终端陀螺仪记录拍摄过程中的各摄取照片图像时刻,终端的运动状 态,从而在配准参考图像上,确定对各照片图像进行配准的优先配准位置, 并基于确定的优先配准位置进行配准。
具体地,例如,在如图6A所示的图像配准场景中,以基于终端摄取图像 1、图像2、图像3、图像4和图像5过程中,终端先向右移动2个单位,随 后向下移动2个单位,最后分别向左和向上移动1个单位的运动状态,在配 准参考图像—图像4上的确定的优先配准位置—像素点O为配准参考点,逐次 将图像1、图像2、图像3和图像5反向移动,直至与图像4完成配准(图6A 所示为将图像2,以图像4中优先配准位置—像素点O为配准参考点进行移动,以完成最终配准的场景)。
进一步地,步骤S30中,基于终端的所述运动状态在所述配准参考图像 上确定优先配准位置的步骤包括:
步骤S301,获取相对于摄取所述配准参考图像时刻,终端在摄取除所述 配准参考图像之外的各所述照片图像时刻,终端的运动方向和运动距离。
以获取的第一运动数据为基准,其余各第二运动数据为变量,计算终端 在进行整个拍摄过程中,终端摄取其他除配准参考图像之外的各照片图像时, 终端相对于摄取配准参考图像时的运动方向和运动距离。
需要说明的是,终端的运动状态包括,终端位置的运动方向和运动距离。
具体地,例如,终端摄取配准参考图像时,即摄取图像4时,终端的第 一运动数据左移1个单位,作为虚拟空间坐标系的相对基准原点(0、1、-2), 将终端摄取除配准参考图像即图像4之外的各照片图像时,即终端摄取图像1、 图像2、图像3和图像5时,终端的运动数据作为变量坐标(0、1、0)、(0、 2、0)、(0、2、-2)和(0、1、-1),计算得出终端摄取图像1、图像2、图像 3和图像5时,终端相对在摄取图像4时的运动状态,即摄取图像1相对摄取 图像4时上移2个单位,摄取图像2相对摄取图像4时右移1个单位且上移2 个单位,摄取图像3相对摄取图像4时右移1个单位,摄取图像5相对摄取 图像4时上移1个单位。
步骤S302,基于所述运动方向和所述运动距离,在所述配准参考图像上, 确定对终端摄取的各所述照片图像进行配准处理的优先配准位置。
在获取到终端摄取其他除配准参考图像之外的各照片图像时,终端相对 于摄取配准参考图像时的运动方向和运动距离之后,基于该相对摄取配准参 考图像的运动方向和距离,在配准参考图像上确定一像素点作为对终端在整 个拍摄过程中摄取到的全部照片图像进行配准的优先配准位置。
具体地,例如,在计算得出终端摄取图像1、图像2、图像3和图像5时, 终端相对在摄取图像4时的运动状态,即摄取图像1相对摄取图像4时上移2 个单位,摄取图像2相对摄取图像4时右移1个单位且上移2个单位,摄取 图像3相对摄取图像4时右移1个单位,摄取图像5相对摄取图像4时上移1 个单位的各项运动数据之后,在将图像4上确定一特征像素点,将该像素位 置作为对终端在当前拍摄过程中,所摄取到的图像1、图像2、图像3和图像 5进行配准处理的优先配准位置。
进一步地,步骤S30中,以所述优先配准位置为参考,对各所述照片图 像进行配准的步骤包括:
步骤S303,根据预设规则,对各所述照片图像进行分块处理。
按照预设的分块规则,在对终端摄取的各照片图像进行配准处理之前, 对照片图像分块,得到分块之后的照片图像。
具体地,例如,在按照基于在配准参考图像上,即图像4上确定的优先 配准位置,对终端摄取到的除配准参考图像之外的图像1、图像2、图像3和 图像5进行配准处理之前,按照预设的分块规则,如将照片图像分为16块或 者25块等,对图像1、图像2、图像3和图像5进行分块处理,以便后续按 照优先配准位置对各照片图像进行配准。
步骤S304,按照所述配准参考图像上的所述优先配准位置,对分块处理 之后的各所述照片图像进行配准。
基于现有的配准处理方式,按照配准参考图像上的优先配准位置,逐次 将终端在当前拍摄过程中所摄取到的全部照片图像进行配准处理。
具体地,例如,在基于配准参考图像—图像4上面的优先配准位置,对 已经按照预设的分块规则将照片图像分为16块之后的图像2进行配准处理 时,从图像2分块之后的16块子图像中,确定与图像4上优先配准位置相对 应像素点位置所在的目标子图像,仅将该目标子图像以图像4上的优先配准 位置为参考位置进行配准之后,将图像2其余的15块子图像,按照预设分块 规则反向进行组合,从而得到配准后图像2,以此,仅需要针对待配准图像中 的其中部分图像进行配准,即可完成对整个图像的配准处理,进一步节省了 配准的时间。
在本实施例中,获取终端在当前时刻从开始拍摄照片到拍摄结束的一个 连续拍照过程中,终端所摄取到的多张照片图像,并从获取到的该多张照片 中确定用于对全部照片图像进行配准处理的配准参考图像;检测终端的陀螺 仪装置,在终端执行拍照指令摄取照片图像,到拍照指令执行完毕而结束摄 取照片图像的整个拍摄过程中,记录的终端的运动数据,并基于终端在摄取 每一照片图像时刻对应的终端的运动数据,计算终端的运动状态;基于终端 陀螺仪记录拍摄过程中的各摄取照片图像时刻,终端的运动状态,从而在配准参考图像上,确定对各照片图像进行配准的优先配准位置,并基于确定的 优先配准位置进行配准。
实现了,将终端摄取的多张照片图像中,清晰度最高的照片图像作为配 准参考图像,并结合终端陀螺仪记录的终端在拍摄照片图像时的运动数据, 计算终端拍摄除配准参考图像之外的各照片图像时刻,终端相对于拍摄配准 参考图像时刻的运动状态,基于计算的运动状态在当前配准参考图像上,确 定优先配准位置,并基于该配准位置对终端在当前拍摄过程中摄取的多张照 片图像进行配准处理,从而对照片图像的配准进行优化,通过基于终端运动 状态计算优先配准位置,避免了在照片图像开始进行配准时,从照片图像的全部范围搜索配准位置,提升了配准的速度,进而减少了照片图像进行融合 处理的整体耗时,令用户再无需等待较长时间即可得到高质量的照片,提升 了用户体验。
进一步地,在本发明终端图像的配准方法第一实施例的基础上,提出本 发明终端图像的配准方法的第二实施例,在本实施例中,上述步骤S30中, 按照所述优先配准位置对各所述照片图像进行配准的步骤,还包括:
步骤S305,若根据所述优先搜索位置无法完成配准,则逐次扩大配准范 围,并在所述配准范围内对各所述照片图像进行配准。
若基于在配准参考图像上确定的优先配准位置,未完成对终端摄取到的 各照片图像中的某一张或者多张照片图像完成配准处理,则在配准参考图像 上,以确定的优先配准位置为原点,按照预设半径逐次扩大配准范围,在扩 大后的配准范围内对各照片图像中为完成配准处理的照片图像重新进行配准 处理,直到配准完成。
具体地,例如,若在按照基于在配准参考图像上,即图像4上确定的优 先配准位置,对终端摄取到的除配准参考图像之外的图像1、图像2、图像3 和图像5进行配准处理的过程中,检测到图像3未完成配准,则在图像4上, 以优先配准位置为原点,预设5个像素单位为半径扩大配准范围,并在该扩 大后的配准范围内重新对图像3进行配准处理,若仍然未完成配,则在图像4 上进一步以优先配准位置为原点预设5*2=10个像素单位为半径扩大配准范 围,然后对图像3进行配准处理依次类推,直至图像3完成配准。
进一步地,请参照图4,图4为本发明终端图像的配准方法第一实施例中 步骤S30的细化流程示意图,在步骤S30中,按照所述优先配准位置对各所 述照片图像进行配准的步骤,还包括:
步骤S306,若检测到对所述照片图像进行配准的最终配准位置,不属于 所述优先配准位置的预设范围,则绘制终端在拍摄过程中的运动轨迹。
在检测到对照片图像进行配准的最终配准位置,在配准参考图像上,不 属于确定的优先配准位置的预设范围时,确定终端在摄取当前照片图像时, 照片图像中的物体处于移动状态,从而开始基于多张照片图像的最终配准位 置,绘制出照片图像中的物体的运动轨迹。
具体地,例如,当检测到对图像3完成配准时,为在图像4上进一步以 优先配准位置为原点,预设5*3=15个像素单位为半径扩大的配准范围之后才 完成最终配准,即对图像3完成配准的最终配准位置,超过了预设的以图像4 上的优先配准位置为原点,10个像素单位为半径的图像范围,随即判断到终 端在摄取图像3时,图形3中存在处于运动状态的物体,则随即根据对图像1、 图像2以及图像3完成配准时的三个最终配准位置,绘制当前图像3中处于 运动状态的物体的运动轨迹。
步骤S307,根据所述运动轨迹预测新的图像配准位置,并按照所述新的 图像配准位置对剩余的所述照片图像进行配准。
在绘制出照片图像中处于运动状态的物体的运动轨迹之后,根据该绘制 的运动轨迹,结合现有的预测算法,对终端摄取的除配准参考图像之外的各 照片图像中,尚未完成配准的照片图像的配准位置进行预测,以得到新的配 准位置对该未完成配准的照片图像进行配准。
具体地,例如,在根据对图像1、图像2以及图像3完成配准时的三个最 终配准位置,绘制出了当前图像3中处于运动状态的物体的运动轨迹之后, 基于轨迹预测算法,在当前配准参考图像—图像4上预测新的配准位置,并 根据该预测出的新的配准位置,对还未完成配准的图像5进行配准处理。
在另一个实施例中,若基于该预测出的新的配准位置,仍未完成配准, 则在配准参考图像上,以新的配位置为原点,按照预设半径逐次扩大配准范 围,在扩大后的配准范围内对各照片图像中为完成配准处理的照片图像重新 进行配准处理,直到配准完成。
在本实施例中,若基于在配准参考图像上确定的优先配准位置,未完成 对终端摄取到的各照片图像中的某一张或者多张照片图像完成配准处理,则 在配准参考图像上,以确定的优先配准位置或者新的配准位置为原点,按照 预设半径逐次扩大配准范围,在扩大后的配准范围内对各照片图像中为完成 配准处理的照片图像重新进行配准处理,直到配准完成;在检测到对照片图 像进行配准的最终配准位置,在配准参考图像上,不属于确定的优先配准位 置的预设范围时,确定终端在摄取当前照片图像时,照片图像中的物体处于移动状态,从而开始基于多张照片图像的最终配准位置,绘制出照片图像中 的物体的运动轨迹,根据该绘制的运动轨迹,结合现有的预测算法,对终端 摄取的除配准参考图像之外的各照片图像中,尚未完成配准的照片图像的配 准位置进行预测,以得到新的配准位置对该未完成配准的照片图像进行配准。
实现了,在基于配准参考图像上,通过计算得出的优先配准位置,未完 成对终端在当前拍摄过程中摄取到的照片图像进行配准时,按照预设半径对 配准范围进行扩大,并基于扩大的配准范围进行配准,并在检测到图像中存 在运动的物体时,改变配准位置,采用绘制运动路径,以预测出新的配准位 置的方式,确保对图像的配准能够准确完成,从而便于后续图像的融合处理, 在提升了配准的速度的前提下,确保了图像配准的效率,进一步提升了用户 的使用体验。
此外,参照图5,图5为本发明终端图像的配准装置的功能模块示意图, 在本发明实施例中,还提出一种终端图像的配准装置,本发明终端图像的配 准装置包括:
第一获取模块,用于获取终端连续摄取的各照片图像,并从各所述照片 图像中确定配准参考图像;
第二获取模块,用于获取终端在摄取各所述照片图像过程中,终端陀螺 仪记录的运动数据,并根据所述运动数据获取终端的运动状态;
配准模块,用于基于终端的所述运动状态在所述配准参考图像上确定优 先配准位置,以所述优先配准位置为参考,对各所述照片图像进行配准。
可选地,第一获取模块,包括:
图像获取单元,获取终端在当前拍摄过程中所摄取到的各照片图像,其 中,获取到的照片图像数量不少于两张;
确定单元,检测各照片图像的清晰度,将各照片图像中所述清晰度最高 的照片图像作为配准参考图像。
可选地,第二获取模块,包括:
列表检测单元,检测终端在摄取照片图像的拍摄过程所对应生成的照片 图像列表;
数据获取单元,从所述照片图像列表中,获取终端陀螺仪记录的终端在 拍摄各所述照片图像时刻,终端的运动数据。
可选地,第二获取模块,还包括:
提取单元,从所述运动数据中,提取终端在摄取各所述配准参考图像时 刻,终端的第一运动数据,和终端在摄取除所述配准参考图像之外的各所述 照片图像时刻,终端的各第二运动数据;
计算单元,根据第一运动数据和各所述第二运动数据,计算终端摄取各 所述照片图像过程中的运动状态。
可选地,配准模块,包括:
状态获取单元,获取相对于摄取所述配准参考图像时刻,终端在摄取除 所述配准参考图像之外的各所述照片图像时刻,终端的运动方向和运动距离;
位置确定单元,基于所述运动方向和所述运动距离,在所述配准参考图 像上,确定对终端摄取的各所述照片图像进行配准处理的优先配准位置。
可选地,配准模块,还包括:
分块单元,根据预设规则,对各所述照片图像进行分块处理;
第一配准单元,按照所述配准参考图像上的所述优先配准位置,对分块 处理之后的各所述照片图像进行配准;
扩大配准单元,若根据所述优先搜索位置无法完成配准,则逐次扩大配 准范围,并在所述配准范围内对各所述照片图像进行配准。
可选地,配准模块,还包括:
绘制单元,若检测到对所述照片图像进行配准的最终配准位置,不属于 所述优先配准位置的预设范围,则绘制终端在拍摄过程中的运动轨迹;
第二配准单元,根据所述运动轨迹预测新的图像配准位置,并按照所述 新的图像配准位置对剩余的所述照片图像进行配准。
其中,终端图像的配准装置的各个功能模块实现的步骤可参照本发明终 端图像的配准方法的各个实施例,此处不再赘述。
本发明还提供一种移动终端,所述移动终端包括:存储器、处理器、通 信总线以及存储在所述存储器上的终端图像的配准程序:
所述通信总线用于实现处理器和存储器之间的连接通信;
所述处理器用于执行所述终端图像的配准程序,以实现上述终端图像的 配准方法各实施例的步骤。
本发明还提供了一种存储介质,所述存储介质存储有一个或者一个以上 程序,所述一个或者一个以上程序还可被一个或者一个以上的处理器执行以 用于实现上述终端图像的配准方法各实施例的步骤。
本发明计算机可读存储介质具体实施方式与上述终端图像的配准方法各 实施例基本相同,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体 意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或 者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还 包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情 况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、 方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述 实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通 过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的 技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体 现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光 盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器, 空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上 述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的, 本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求 所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。
Claims (10)
1.一种终端图像的配准方法,其特征在于,所述终端图像的配准方法包括:
获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参考图像;
获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的运动数据,并根据所述运动数据获取终端的运动状态;
基于终端的所述运动状态在所述配准参考图像上确定优先配准位置,以所述优先配准位置为参考,对各所述照片图像进行配准。
2.如权利要求1所述的终端图像的配准方法,其特征在于,所述获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参考图像的步骤包括:
获取终端在当前拍摄过程中所摄取到的各照片图像,其中,获取到的照片图像数量不少于两张;
检测各照片图像的清晰度,将各照片图像中所述清晰度最高的照片图像作为配准参考图像。
3.如权利要求2所述的终端图像的配准方法,其特征在于,所述获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的运动数据的步骤包括:
检测终端在摄取照片图像的拍摄过程所对应生成的照片图像列表;
从所述照片图像列表中,获取终端陀螺仪记录的终端在拍摄各所述照片图像时刻,终端的运动数据。
4.如权利要求1至3任一项所述的终端图像的配准方法,其特征在于,所述根据所述运动数据获取终端的运动状态的步骤包括:
从所述运动数据中,提取终端在摄取各所述配准参考图像时刻,终端的第一运动数据,和终端在摄取除所述配准参考图像之外的各所述照片图像时刻,终端的各第二运动数据;
根据第一运动数据和各所述第二运动数据,计算终端摄取各所述照片图像过程中的运动状态。
5.如权利要求1所述的终端图像的配准方法,其特征在于,终端的所述运动状态包括:终端的运动方向和运动距离,
所述基于终端的所述运动状态在所述配准参考图像上确定优先配准位置的步骤包括:
获取相对于摄取所述配准参考图像时刻,终端在摄取除所述配准参考图像之外的各所述照片图像时刻,终端的运动方向和运动距离;
基于所述运动方向和所述运动距离,在所述配准参考图像上,确定对终端摄取的各所述照片图像进行配准处理的优先配准位置。
6.如权利要求1所述的终端图像的配准方法,其特征在于,所述以所述优先配准位置为参考,对各所述照片图像进行配准的步骤包括:
根据预设规则,对各所述照片图像进行分块处理;
按照所述配准参考图像上的所述优先配准位置,对分块处理之后的各所述照片图像进行配准;
若根据所述优先搜索位置无法完成配准,则逐次扩大配准范围,并在所述配准范围内对各所述照片图像进行配准。
7.如权利要求6所述的终端图像的配准方法,其特征在于,所述以所述优先配准位置为参考,对各所述照片图像进行配准的步骤,还包括:
若检测到对所述照片图像进行配准的最终配准位置,不属于所述优先配准位置的预设范围,则绘制终端在拍摄过程中的运动轨迹;
根据所述运动轨迹预测新的图像配准位置,并按照所述新的图像配准位置对剩余的所述照片图像进行配准。
8.一种终端图像的配准装置,其特征在于,所述终端图像的配准装置包括:
第一获取模块,用于获取终端连续摄取的各照片图像,并从各所述照片图像中确定配准参考图像;
第二获取模块,用于获取终端在摄取各所述照片图像过程中,终端陀螺仪记录的运动数据,并根据所述运动数据获取终端的运动状态;
配准模块,用于基于终端的所述运动状态在所述配准参考图像上确定优先配准位置,以所述优先配准位置为参考,对各所述照片图像进行配准。
9.一种移动终端,其特征在于,所述移动终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的终端图像的配准程序,所述终端图像的配准程序被所述处理器执行时实现如权利要求1至7中任一项所述的终端图像的配准方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有终端图像的配准程序,所述终端图像的配准程序被处理器执行时实现如权利要求1至7中任一项所述的终端图像的配准方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910359510.0A CN110070569B (zh) | 2019-04-29 | 2019-04-29 | 终端图像的配准方法、装置、移动终端及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910359510.0A CN110070569B (zh) | 2019-04-29 | 2019-04-29 | 终端图像的配准方法、装置、移动终端及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110070569A true CN110070569A (zh) | 2019-07-30 |
CN110070569B CN110070569B (zh) | 2023-11-10 |
Family
ID=67369678
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910359510.0A Active CN110070569B (zh) | 2019-04-29 | 2019-04-29 | 终端图像的配准方法、装置、移动终端及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110070569B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111507915A (zh) * | 2020-04-13 | 2020-08-07 | 烟台艾睿光电科技有限公司 | 基于模糊配准的实时红外非均匀性校正方法、设备及介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103534726A (zh) * | 2011-05-17 | 2014-01-22 | 苹果公司 | 用于全景摄影的位置传感器辅助的图像配准 |
CN106296570A (zh) * | 2016-07-28 | 2017-01-04 | 北京小米移动软件有限公司 | 图像处理方法及装置 |
WO2017088618A1 (zh) * | 2015-11-26 | 2017-06-01 | 努比亚技术有限公司 | 图片合成方法及装置 |
CN108012080A (zh) * | 2017-12-04 | 2018-05-08 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
US20180225540A1 (en) * | 2017-02-09 | 2018-08-09 | Rosemount Aerospace Inc. | Imu-aided image registration |
CN108682025A (zh) * | 2018-05-23 | 2018-10-19 | 沈阳东软医疗系统有限公司 | 一种图像配准方法及装置 |
CN108694705A (zh) * | 2018-07-05 | 2018-10-23 | 浙江大学 | 一种多帧图像配准与融合去噪的方法 |
CN109285183A (zh) * | 2018-08-25 | 2019-01-29 | 南京理工大学 | 一种基于运动区域图像清晰度的多模视频图像配准方法 |
-
2019
- 2019-04-29 CN CN201910359510.0A patent/CN110070569B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103534726A (zh) * | 2011-05-17 | 2014-01-22 | 苹果公司 | 用于全景摄影的位置传感器辅助的图像配准 |
WO2017088618A1 (zh) * | 2015-11-26 | 2017-06-01 | 努比亚技术有限公司 | 图片合成方法及装置 |
CN106296570A (zh) * | 2016-07-28 | 2017-01-04 | 北京小米移动软件有限公司 | 图像处理方法及装置 |
US20180225540A1 (en) * | 2017-02-09 | 2018-08-09 | Rosemount Aerospace Inc. | Imu-aided image registration |
CN108012080A (zh) * | 2017-12-04 | 2018-05-08 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN108682025A (zh) * | 2018-05-23 | 2018-10-19 | 沈阳东软医疗系统有限公司 | 一种图像配准方法及装置 |
CN108694705A (zh) * | 2018-07-05 | 2018-10-23 | 浙江大学 | 一种多帧图像配准与融合去噪的方法 |
CN109285183A (zh) * | 2018-08-25 | 2019-01-29 | 南京理工大学 | 一种基于运动区域图像清晰度的多模视频图像配准方法 |
Non-Patent Citations (3)
Title |
---|
DARIO DIFFERT: ""Real-time rotational image registration"", 2017 18TH INTERNATIONAL CONFERENCE ON ADVANCED ROBOTICS (ICAR) * |
RADHAKRISHNA DASARI 等: ""A joint visual-inertial image registration for mobile HDR imaging"", 2016 VISUAL COMMUNICATIONS AND IMAGE PROCESSING (VCIP) * |
程政: ""视频拼接中配准方法研究"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111507915A (zh) * | 2020-04-13 | 2020-08-07 | 烟台艾睿光电科技有限公司 | 基于模糊配准的实时红外非均匀性校正方法、设备及介质 |
CN111507915B (zh) * | 2020-04-13 | 2024-03-29 | 烟台艾睿光电科技有限公司 | 基于模糊配准的实时红外非均匀性校正方法、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110070569B (zh) | 2023-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108227897A (zh) | 屏幕显示控制方法、柔性屏终端及计算机可读存储介质 | |
CN110046597A (zh) | 人脸识别方法、移动终端及计算机可读存储介质 | |
CN109711226A (zh) | 二维码识别方法、装置、移动终端及可读存储介质 | |
CN110381201A (zh) | 屏幕管理方法、移动终端及计算机可读存储介质 | |
CN109618316A (zh) | 网络共享方法、移动终端及存储介质 | |
CN108989580A (zh) | 摄像头切换方法、移动终端及可读存储介质 | |
CN110086993A (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
CN108989873A (zh) | 弹幕信息显示方法、移动终端及计算机可读存储介质 | |
CN109151162A (zh) | 一种多面屏交互控制方法、设备及计算机可读存储介质 | |
CN108958936A (zh) | 应用程序切换方法、移动终端及计算机可读存储介质 | |
CN110069167A (zh) | 触摸点清除方法、移动终端及计算机可读存储介质 | |
CN109889695A (zh) | 一种图像区域确定方法、终端及计算机可读存储介质 | |
CN107239567A (zh) | 一种目标景物的识别方法、设备及计算机可读存储介质 | |
CN108965710A (zh) | 照片拍摄方法、装置及计算机可读存储介质 | |
CN110187808A (zh) | 动态壁纸设置方法、装置及计算机可读存储介质 | |
CN109587333A (zh) | 移动终端散热控制方法、移动终端和计算机可读存储介质 | |
CN109618049A (zh) | 终端屏幕切换控制方法、终端以及计算机可读存储介质 | |
CN107203278A (zh) | 单手操作输入方法、移动终端及存储介质 | |
CN110177206A (zh) | 拍摄方法、移动终端及计算机可读存储介质 | |
CN110087267A (zh) | 网络切换方法、装置、电子设备及可读存储介质 | |
CN109639834A (zh) | 一种信息同步处理方法、系统及移动终端 | |
CN109510941A (zh) | 一种拍摄处理方法、设备及计算机可读存储介质 | |
CN109005354A (zh) | 拍摄方法、移动终端及计算机可读存储介质 | |
CN108900765A (zh) | 一种拍摄提醒方法、移动终端及计算机可读存储介质 | |
CN108234979A (zh) | 一种拍摄方法、移动终端及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20231008 Address after: 21032, 9th Floor, Building 2, Micro World, No. 23 Century Avenue, Liuwu New District, Lhasa, Tibet Autonomous Region, 850000 Applicant after: Tibet Zhaoxun Technology Engineering Co.,Ltd. Address before: 518057 Dazu Innovation Building, 9018 Beihuan Avenue, Nanshan District, Shenzhen City, Guangdong Province, 6-8, 10-11, 6 and 6-10 floors in Area A, B and C Applicant before: NUBIA TECHNOLOGY Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |