CN114339020A - 拍照姿态提示方法、装置、设备和计算机可读存储介质 - Google Patents

拍照姿态提示方法、装置、设备和计算机可读存储介质 Download PDF

Info

Publication number
CN114339020A
CN114339020A CN202011060262.9A CN202011060262A CN114339020A CN 114339020 A CN114339020 A CN 114339020A CN 202011060262 A CN202011060262 A CN 202011060262A CN 114339020 A CN114339020 A CN 114339020A
Authority
CN
China
Prior art keywords
photographing
electronic equipment
shooting
scene
posture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011060262.9A
Other languages
English (en)
Inventor
郝冰涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SF Technology Co Ltd
Original Assignee
SF Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SF Technology Co Ltd filed Critical SF Technology Co Ltd
Priority to CN202011060262.9A priority Critical patent/CN114339020A/zh
Publication of CN114339020A publication Critical patent/CN114339020A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供一种拍照姿态提示方法、装置、设备和计算机可读存储介质;该拍照姿态提示方法应用于电子设备,所述电子设备中包括拍摄装置和加速度传感器,该方法包括:在检测到所述拍摄装置启动时,获取拍照场景标识;接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息;若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。本申请实施例中根据预先标定的外参数确定拍照姿态信息,使得拍照姿势提示时的数据处理量小,拍照姿势提示更加高效准确。

Description

拍照姿态提示方法、装置、设备和计算机可读存储介质
技术领域
本申请涉及拍照领域,具体涉及一种拍照姿态提示方法、装置、设备和计算机可读存储介质。
背景技术
商店的商品柜中摆满了在琳琅满目的商品,稽查人员会对商品柜中的商品进行稽查拍照,在稽查人员拍摄商品货架、酒类柜台或冰柜时,很容易因拍出歪斜、不合规的图片,给后期的商品图像检测、识别带来很大的不便。
因此,在稽查拍照(或者其他规定格式拍照)时进行拍照姿态提示很有必要,当前拍照姿态提示主要通过以下方式实现,实现方式一:基于视觉同步定位建图(SimultaneousLocalization And Mapping,SLAM)的平面检测和姿态估计进行拍照姿态提示,这样的拍照姿态提示方式使用场景较少,在拍照姿势提示时需要消耗很大计算量,拍照姿势提示速度较慢;实现方式二:基于深度学习的拍照姿态提示,这样的拍照姿态提示方式需要预先采集和标注大量的图片数据构建图像分析模型,图像分析模型进行拍摄姿态提示的效果主要依赖训练数据量,数据准备工作量大,且拍照姿势提示的准确率得不到保障。
发明内容
本申请提供一种拍照姿态提示方法、装置、设备和计算机可读存储介质,通过预先标定的外参数和三轴加速度数据融合准确地确定拍照姿态信息,使得拍照姿态提示的高效准确,且不需要用户过多操作,对设备的硬件要求较低减少设备成本。
一方面,本申请提供一种拍照姿态提示方法,所述拍照姿态提示方法应用于电子设备,所述电子设备中包括拍摄装置和加速度传感器,所述拍照姿态提示方法包括以下步骤:
在检测到所述拍摄装置启动时,获取拍照场景标识;
接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
在本申请一些实施方案中,所述接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据之后,所述方法还包括:
判断是否存在预先标定的外参数;
若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据;
根据所述标定加速度数据,构建外参旋转矩阵;
将所述外参旋转矩阵作为预先标定的外参数,并执行所述基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息。
在本申请一些实施方案中,所述若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据,包括:
若不存在所述预先标定的外参数,则输出标定提示,以使用户将所述电子设备调整至目标姿态;
在所述电子设备的姿态与所述目标姿态相同时,通过所述加速度传感器采集标定加速度数据。
在本申请一些实施方案中,所述根据所述标定加速度数据,构建外参旋转矩阵,包括:
计算所述标定加速度数据的标准差,根据所述标定加速度数据的标准差,确定所述电子设备是否处于静止状态;
若所述电子设备处于静止状态,则求取所述标定加速度数据的平均值,并将所述平均值进行归一化处理后计算所述目标姿态对应的偏移角;
结合所述目标姿态对应的偏移角,构建外参旋转矩阵。
在本申请一些实施方案中,所述基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,包括:
对所述三轴加速度数据进行求模,获得所述三轴加速度数据对应的模值;
将所述三轴加速度数据对应的模值与预设静态阈值进行比较,以确定所述电子设备是否处于静止状态;
在所述电子设备处于静止状态时,根据所述三轴加速度数据对应的模值构造矩阵,获得三轴加速度矩阵;
将所述三轴加速度矩阵和预先标定的外参数进行乘积运算,获得设备偏差角,将所述设备偏差角作为所述电子设备的拍照姿态信息。
在本申请一些实施方案中,所述若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示之前,所述方法包括:
获取所述拍照场景标识对应的标准姿态信息;
将所述拍照姿态信息中的设备偏差角与将所述标准姿态信息中的标准角度进行比较;
若所述设备偏差角与所述标准角度的差值不超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息匹配;
若所述设备偏差角与所述标准角度的差值超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息不匹配。
在本申请一些实施方案中,所述在检测到所述拍摄装置启动时,获取拍照场景标识,包括:
在检测到所述拍摄装置启动时,判断是否存在拍照任务;
若存在拍照任务,则获取所述拍照任务关联的拍照场景标识;
若不存在拍照任务,则输出拍照场景选择提示;
在用户选择拍摄场景后,获取用户选择的拍照场景标识。
在本申请一些实施方案中,所述若不存在拍照任务,则输出拍照场景选择提示之后,所述方法还包括:
若预设时间间隔没有获取到用户选择的拍照场景标识,则通过所述拍摄装置采集初始场景图像;
将所述初始场景图像与预设图像集合中的预设场景图像进行比对;
获取与所述初始场景图像相似度最高的目标场景图像,将所述目标场景图像对应的场景标识作为拍照场景标识。
在本申请一些实施方案中,所述若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示之后,所述方法还包括:
获取所述拍摄装置拍摄的商品图像;
解析所述商品图像,以获得所述商品图像的商品拍摄信息;
将所述商品拍摄信息与所述拍照场景标识对应的商品标准信息进行比对;
在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息不匹配,则输出二次拍摄提示;
在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息匹配,则将所述商品图像上传至预设稽查平台。
另一方面,本申请提供一种拍照姿态提示装置,所述拍照姿态提示装置设置于电子设备,所述电子设备中包括拍摄装置和加速度传感器,所述拍照姿态提示装置包括:
场景获取模块,用于在检测到所述拍摄装置启动时,获取拍照场景标识;
加速度获取模块,用于接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
姿态确定模块,用于基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
姿态提示模块,用于若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
在本申请一些实施例中,所述拍照姿态提示装置还包括:
外参数判断模块,用于判断是否存在预先标定的外参数;
加速度采集模块,用于若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据;
矩阵构建模块,用于根据所述标定加速度数据,构建外参旋转矩阵;将所述外参旋转矩阵作为预先标定的外参数。
在本申请一些实施例中,所述加速度采集模块具体用于:
若不存在所述预先标定的外参数,则输出标定提示,以使用户将所述电子设备调整至目标姿态;
在所述电子设备的姿态与所述目标姿态相同时,通过所述加速度传感器采集标定加速度数据;
所述矩阵构建模块具体用于:
计算所述标定加速度数据的标准差,根据所述标定加速度数据的标准差,确定所述电子设备是否处于静止状态;
若所述电子设备处于静止状态,则求取所述标定加速度数据的平均值,并将所述平均值进行归一化处理后计算所述目标姿态对应的偏移角;
结合所述目标姿态对应的偏移角,构建外参旋转矩阵。
在本申请一些实施例中,姿态确定模块具体用于:
对所述三轴加速度数据进行求模,获得所述三轴加速度数据对应的模值;
将所述三轴加速度数据对应的模值与预设静态阈值进行比较,以确定所述电子设备是否处于静止状态;
在所述电子设备处于静止状态时,根据所述三轴加速度数据对应的模值构造矩阵,获得三轴加速度矩阵;
将所述三轴加速度矩阵和预先标定的外参数进行乘积运算,获得设备偏差角,将所述设备偏差角作为所述电子设备的拍照姿态信息。
在本申请一些实施例中,所述姿态提示模块具体用于:
获取所述拍照场景标识对应的标准姿态信息;
将所述拍照姿态信息中的设备偏差角与将所述标准姿态信息中的标准角度进行比较;
若所述设备偏差角与所述标准角度的差值不超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息匹配;
若所述设备偏差角与所述标准角度的差值超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息不匹配。
在本申请一些实施例中,所述场景获取模块具体用于:
在检测到所述拍摄装置启动时,判断是否存在拍照任务;
若存在拍照任务,则获取所述拍照任务关联的拍照场景标识;
若不存在拍照任务,则输出拍照场景选择提示;
在用户选择拍摄场景后,获取用户选择的拍照场景标识。
在本申请一些实施例中,所述场景获取模块具体用于:
若预设时间间隔没有获取到用户选择的拍照场景标识,则通过所述拍摄装置采集初始场景图像;
将所述初始场景图像与预设图像集合中的预设场景图像进行比对;
获取与所述初始场景图像相似度最高的目标场景图像,将所述目标场景图像对应的场景标识作为拍照场景标识。
在本申请一些实施例中,所述拍照姿态提示装置还包括:
获取解析模块,用于获取所述拍摄装置拍摄的商品图像;
解析所述商品图像,以获得所述商品图像的商品拍摄信息;
信息比对模块,用于将所述商品拍摄信息与所述拍照场景标识对应的商品标准信息进行比对;
拍摄提示模块,用于在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息不匹配,则输出二次拍摄提示;
图像上传模块,用于在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息匹配,则将所述商品图像上传至预设稽查平台。
另一方面,本申请还提供一种电子设备,所述电子设备包括:
拍摄装置;
加速度传感器;
一个或多个处理器;
存储器;以及
一个或多个应用程序,其中所述一个或多个应用程序被存储于所述存储器中,并配置为由所述处理器执行以实现所述的拍照姿态提示方法。
另一方面,本申请还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器进行加载,以执行所述的拍照姿态提示方法中。
本申请实施例中预先标定电子设备对应的外参数,在照片拍摄时确定拍照场景标识,通过电子设备中的加速度传感器采集三轴加速度数据,并将加速度数据与外参数进行结合,获得拍照姿态信息,最后将拍照姿态信息与拍照场景标识对应的标准姿态信息进行比对,实现拍照姿态提示。本申请实施例中拍照姿态提示时不需要进行大量的数据分析处理,通过预先标定的外参数和三轴加速度数据融合准确地确定拍照姿态信息,使得拍照姿态提示的高效准确,且本申请中可以预先设置多种拍照场景标识对应的标准姿态信息,实现多场景拍照姿势提示,使得拍照姿势提示的适用范围广,此外,本申请实施例中不需要用户过多操作,对设备的硬件要求较低减少设备成本。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的拍照姿态提示的场景示意图;
图2是本申请实施例中提供的拍照姿态提示方法的一个实施例流程示意图;
图3是本申请实施例中提供的拍照姿态提示方法的一个实施例流程示意图;
图4是本申请实施例中提供的拍照姿态提示方法中预先标定外参数一个实施例的具体场景示意图;
图5是本申请实施例中提供的拍照姿态提示装置的一个实施例结构示意图;
图6是本申请实施例中提供的电子设备的一个实施例结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请包含的范围。
在本申请的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本申请和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本申请的限制。此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本申请的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本申请中,“示例性”一词用来表示“用作例子、例证或说明”。本申请中被描述为“示例性”的任何实施例不一定被解释为比其它实施例更优选或更具优势。为了使本领域任何技术人员能够实现和使用本申请,给出了以下描述。在以下描述中,为了解释的目的而列出了细节。应当明白的是,本领域普通技术人员可以认识到,在不使用这些特定细节的情况下也可以实现本申请。在其它实例中,不会对公知的结构和过程进行详细阐述,以避免不必要的细节使本申请的描述变得晦涩。因此,本申请并非旨在限于所示的实施例,而是与符合本申请所公开的原理和特征的最广范围相一致。
本申请实施例提供一种拍照姿态提示方法、装置、设备及计算机可读存储介质,以下分别进行详细说明。
本申请实施例中的拍照姿态提示方法应用于拍照姿态提示装置,拍照姿态提示装置设置于电子设备,电子设备中设置有一个或多个处理器、存储器,以及一个或多个应用程序,其中一个或多个应用程序被存储于存储器中,并配置为由处理器执行以实现拍照姿态提示方法;电子设备可以移动终端,例如,手机、平板电脑或者相机。
如图1所示,图1为本申请实施例拍照姿态提示的场景示意图,本申请实施例中拍照姿态提示场景中包括电子设备100(电子设备100中集成有拍照姿态提示装置),电子设备100中运行拍照姿态提示对应的计算机可读存储介质,以执行拍照姿态提示。
可以理解的是,图1所示拍照姿态提示的场景中的电子设备,或者电子设备中包含的装置并不构成对本申请实施例的限制,即,拍照姿态提示的场景中包含的设备数量、设备种类,或者各个设备中包含的装置数量、装置种类不影响本申请实施例中技术方案整体实现,均可以算作本申请实施例要求保护技术方案的等效替换或衍生。
本申请实施例中电子设备100主要用于在检测到所述拍摄装置启动时,获取拍照场景标识;接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
本申请实施例中该电子设备100可以是独立的电子设备,也可以是多个电子设备组成的电子设备网络或电子设备集群,例如,本申请实施例中所描述的电子设备100,其包括但不限于终端(如手机或平板电脑)、计算机,本申请实施例中的电子设备中包括拍摄装置和加速度传感器,电子设备本身与电子设备中拍摄装置和加速度传感器的位置是相对固定的,这样电子设备本身和电子设备中拍摄装置和加速度传感器的运动状况是相同的,因此,加速度传感器的三轴加速度数据、电子设备本身的三轴加速度数据和电子设备中拍摄装置的三轴加速度数据是相同,可以用加速度传感器的三轴加速度数据表征电子设备和拍摄装置的三轴加速度数据;同样,加速度传感器的姿态信息、电子设备本身的姿态信息和电子设备中的拍摄装置的姿态信息是相同的,可以用加速度传感器的姿态信息表征电子设备,和电子设备中拍摄装置的拍摄姿态信息。
本领域技术人员可以理解,电子设备中包括拍摄装置和加速度传感器,此外,电子设备中还可以包括其他装置或组件,例如,包括存储器、处理器、显示装置和通讯装置等等,本实施例中电子设备的种类、和电子设备中具体的装置和组件不作限定,本实施例中的电子设备可以是手机、平板、电子阅读器等等。
本领域技术人员可以理解,图1中示出的应用环境,仅仅是与本申请方案一种应用场景,并不构成对本申请方案应用场景的限定,其他的应用环境还可以包括比图1中所示更多或更少的电子设备,或者电子设备网络连接关系,例如图1中仅示出1个电子设备,可以理解的,该拍照姿态提示的场景还可以包括一个或多个其他电子设备,具体此处不作限定;该电子设备100中还可以包括存储器,用于存储数据,例如,存储拍摄获得的照片等。
此外,本申请拍照姿态提示的场景中电子设备100可以设置显示装置,电子设备中可以直接设置显示装置,例如电子设备的显示屏,物流场景中的巴枪等。电子设备100可以访问后台数据库200(后台数据库可以是电子设备的本地存储器中,后台数据库还可以设置在云端),后台数据库200中保存有拍照姿态提示相关的信息,例如,后台数据库200中保存有符合拍照姿势信息的照片。
需要说明的是,图1所示的拍照姿态提示的场景示意图仅仅是一个示例,本申请实施例描述的拍照姿态提示的场景是为了更加清楚的说明本申请实施例的技术方案,并不构成对于本申请实施例提供的技术方案的限定。
如图2所示,图2为本申请实施例中拍照姿态提示方法的一个实施例流程示意图,本申请实施例中拍照姿态提示方法应用于电子设备,该拍照姿态提示方法包括如下步骤201~203:
201、在检测到所述拍摄装置启动时,获取拍照场景标识。
电子设备中包括拍摄装置和加速度传感器;此外,电子设备中还可以包括其他装置或组件,例如,包括存储器、处理器、显示装置和通讯装置等等,本实施例中电子设备的种类、和电子设备中具体的装置和组件不作限定,本实施例中的电子设备可以是手机、平板、电子阅读器等等;拍摄装置是指用于拍照的组件,例如,摄像头装置;加速度传感器是一种能够测量物体三轴姿态角及加速度的装置,加速度的传感器通常由质量块、阻尼器、弹性元件、敏感元件和适调电路等部分组成,加速度传感器测量物体三轴姿态角及加速度的原理为:在加速过程中,通过对质量块所受惯性力的测量,利用牛顿第二定律获得加速度值,从而实现加速度数据测量,本申请实施例中的加速度传感器的种类不作具体限定,即,根据传感器敏感元件的不同,常见的加速度传感器包括电容式、电感式、应变式、压阻式、压电式等,本申请实施例中的加速度传感器,可以是惯性测量单元(Inertial measurement unit,IMU)。
本申请实施例中,电子设备可以实时地监测拍摄装置的状态,确定拍摄装置是否启动,本申请实施例中拍摄装置启动的方式不作具体限定,即,用户手动启动拍摄装置,例如,用户点击电子设备显示界面中的相机图标,启动拍摄装置;此外,拍摄装置启动还可以是电子设备自动触发的,例如,电子设备中预先设置在进行物品识别功能时,自动启动拍摄装置进行物品扫描。
电子设备检测到拍摄装置启动时,电子设备获取拍照场景标识,拍照场景标识是指唯一确定拍照场景的标识信息,拍照场景标识的具体内容和格式不作限定,例如,拍照场景编号。
电子设备获取拍照场景标识的实现场景不作限定,例如,在一个具体实现场景中,电子设备在拍摄装置启动,输出拍照场景选择列表,提示用户从拍照场景列表中选择拍照场景标识;又例如,在另一个具体实现场景中,用户在电子设备中输入拍照任务,电子设备根据用户输入的拍照任务选择拍照场景标识。
为了方便理解,本实施例进行举例说明,电子设备在检测到拍摄装置启动时,输出包括拍照场景编号定义表的交互式界面,供用户在交互式界面上进行拍照场景标识选择,如下表1所示为电子设备显示界面中输出的拍照场景编号定义表:
表1拍照场景编号定义表
Figure BDA0002712186480000111
其中,立式场景指需要电子设备(如手机)正拍或横拍的场景,包括了商品货架、立式柜台、立式冰柜和其它立式场景;如1116对应商品货架的某品牌方便面,1213对应立式柜台的某品牌白酒等;卧式场景指需要电子设备(如手机)俯拍的场景,包括了卧式展台、卧式冰柜和其它卧式场景;如2115对应卧式展台的某品牌珠宝;无要求场景指无需拍照姿态约束场景,如3017对应无需拍照姿态约束的某品牌线下推介会稽查等。
本申请实施例中在获取到拍照场景标识之后,电子设备基于拍照场景标识进行拍照姿态提示,具体地:
202、接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据。
具体的,电子设备接收用户的拍照操作指令(拍照操作指令的触发方式不作具体限定),电子设备通过加速度传感器采集的三轴加速度数据,其中,三轴加速度数据是指电子设备在空间直角坐标系中的加速度信息,三轴加速度数据的大小不作限定。
可以理解的是,加速度传感器采集到的三轴加速度数据,实际是加速度传感器的三轴加速度数据,但是电子设备中包括拍摄装置和加速度传感器,电子设备本身和电子设备中拍摄装置和加速度传感器的相对位置是固定的,电子设备本身和电子设备中拍摄装置和加速度传感器的运动状况是相同的,因此,加速度传感器的三轴加速度数据、电子设备本身的三轴加速度数据和电子设备中拍摄装置的三轴加速度数据是相同,可以用加速度传感器的三轴加速度数据表征电子设备和拍摄装置的三轴加速度数据;本申请实施例中电子设备通过加速度传感器采集三轴加速度数据,是为了确定电子设备拍摄时刻的姿态信息,使得拍摄的照片符合要求。
203、基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息。
本申请实施例中电子设备中包含预先标定的外参数,其中,外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数,预先标定的外参数是指为了确定拍照姿态信息预先标定的参数信息,例如电子设备中先确定几个固定的位置,将固定位置对应的拍摄装置和加速度传感器的角度参数进行归一化处理确定的外参数;具体的,即外参数可以是基于预设的多个固定位置对应的拍摄装置和加速度传感器的角度参数得到的。
可以理解的是,通过三轴加速度数据和预先标定的外参数确定的为加速度传感器的姿态信息,但是电子设备中包括拍摄装置和加速度传感器,电子设备本身和电子设备中拍摄装置和加速度传感器的相对位置是固定的,电子设备本身和电子设备中拍摄装置和加速度传感器的姿态信息是相同的,因此,加速度传感器的姿态信息、电子设备本身的姿态信息和电子设备中的拍摄装置的姿态信息是相同的,可以用加速度传感器的姿态信息表征电子设备,和电子设备中拍摄装置的拍摄姿态信息。
本申请实施例中拍照姿态信息确定时,电子设备通过加速度传感器采集的三轴加速度数据,然后,将三轴加速度数据和预先标定的外参数进行处理,就可以确定拍照姿态信息,在一个具体实施例中,外参数可以指从加速度传感器坐标系到拍摄装置坐标系(例如手机相机坐标系)的m*n旋转矩阵,其中,m,n为正整数,例如3*3旋转矩阵。
电子设备根据三轴加速度数据和预先标定的外参数进行乘积运算,获得电子设备的拍照姿态信息,具体地,包括:
(1)、对所述三轴加速度数据进行求模,获得所述三轴加速度数据对应的模值;
(2)、将所述三轴加速度数据对应的模值与预设静态阈值进行比较,以确定所述电子设备是否处于静止状态;
(3)、在所述电子设备处于静止状态时,根据所述三轴加速度数据对应的模值构造矩阵,获得三轴加速度矩阵;
(4)、将所述三轴加速度矩阵和预先标定的外参数进行乘积运算,获得设备偏差角,将所述设备偏差角作为所述电子设备的拍照姿态信息。
具体的,电子设备对三轴加速度数据进行求模(加速度的模是指就是加速度的值,就是加速度的大小)和归一化处理,获得三轴加速度数据对应的模值;然后,电子设备将三轴加速度数据对应的模值与预设静态阈值(预设静态阈值是指电子设备处于类似静止状态时的三轴加速度模值,预设静态阈值可以根据具体要求灵活设置)进行比较,以确定电子设备是否处于静止状态;即,若三轴加速度数据对应的模值小于预设静态阈值,则判定电子设备处于静止状态;若三轴加速度数据对应的模值大于或等于预设静态阈值,则判定电子设备处于非静止状态。
电子设备处于非静止状态时,输出提示信息,以提示用户保持拍照姿态提示保持设备静止,再执行拍照姿态信息确定操作。
在电子设备处于静止状态时,电子设备根据三轴加速度数据对应的模值构造矩阵,获得三轴加速度矩阵;即,电子设备将归一化处理之后的三轴加速度数据对应的模值进行反余弦计算,构建一个三行一列的矩阵,电子设备将三轴加速度矩阵和预先标定的外参数进行乘积运算,获得拍照姿态提示的设备偏差角(设备偏差角包括俯仰偏差和横滚偏差),电子设备通过设备偏差角表征拍照姿态信息。
具体地,本申请实施例中对根据三轴加速度数据和预先标定的外参数,确定电子设备的拍照姿态信息,下面进行举例说明:
首先,电子设备将加速度传感器采集的三轴加速度数据求模,获得三轴加速度数据对应的模值,将三轴加速度数据对应的模值进行归一化,方便后期计算,具体地:
Figure BDA0002712186480000141
Figure BDA0002712186480000142
其中,accnorm为三轴加速度数据的模值,
Figure BDA0002712186480000143
为X轴加速度数据的平方,
Figure BDA0002712186480000144
为Y轴加速度数据的平方,
Figure BDA0002712186480000145
为Z轴加速度数据的平方,accnormj为归一化处理获得的三轴加速度数据的模值;
然后,电子设备将三轴加速度数据对应的模值acc_normj与预设静态阈值Thrnorm进行比较,以确定电子设备是否处于静止状态;当三轴加速度数据对应的模值小于预设静态阈值时,即,bool Flagallow为电子设备状态判定结果,bool Flagallow=accnorm<Thrnorm,Thrnorm为加速度计近似静态判定的预设静态阈值,Flagallow为true时,进行姿态求解;Flagstatic为false时,不进行姿态求解和判定结果更新三轴加速度数据的模值,也就是说,bool Flagallow=accnorm<Thrnorm电子设备近似静止,允许进行姿态求解,获得电子设备的拍照姿态信息;反之,当三轴加速度数据对应的模值大于或等于预设静态阈值时,即,boolFlagallow=accnorm≥Thrnorm设备处于晃动,不进行姿态求解。
最后,电子设备判定设备近似静止时,求解设备偏差角,并用设备偏差角表征电子设备的拍照姿态信息;例如,
Figure BDA0002712186480000146
其中,
Figure BDA0002712186480000147
用于表征电子设备的设备偏差角,三个参数分别代表x轴,y轴,z轴方向的设备偏差角,R为外参数,
Figure BDA0002712186480000151
为三轴加速度数据对应的模值求反三角函数获得的矩阵,即,acos为反三角函数,
Figure BDA0002712186480000152
为X轴加速度数据对应的模值,
Figure BDA0002712186480000153
为Y轴加速度数据对应的模值,
Figure BDA0002712186480000154
为Z轴加速度数据对应的模值。
本申请实施中通过三轴加速度数据和预先标定的外参数,确定电子设备的拍照姿态信息之后,电子设备判断拍照姿态信息是否符合拍照场景标识对应的标准姿态信息,具体包括:
(1)、获取所述拍照场景标识对应的标准姿态信息。
将所述拍照姿态信息中的设备偏差角与将所述标准姿态信息中的标准角度进行比较;
(2)、若所述设备偏差角与所述标准角度的差值不超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息匹配。
(3)、若所述设备偏差角与所述标准角度的差值超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息不匹配。
电子设备获取拍照场景标识对应的标准姿态信息,标准姿态信息是指预先设置的不同拍照场景下拍出符合要求照片对应的姿态信息,例如,拍照场景为卧式柜,标准姿态信息对应的标准拍摄角度信息为(90,0,90);电子设备将拍照姿态信息中的设备偏差角与将标准姿态信息中的标准角度进行比较;若设备偏差角与所述标准角度的差值不超过预设角度偏差阈值(预设角度偏差阈值是指预先设置的拍照姿态信息比对临界值,超过预设角度偏差阈值则拍摄获得的照片不规范,不允许拍照需要进行提示,反之,预设角度偏差阈值可以根据拍照要求灵活设置),电子设备则判定拍照姿态信息与拍照场景标识关联的标准姿态信息匹配;若设备偏差角与标准角度的差值超过预设角度偏差阈值,则判定拍照姿态信息与所述拍照场景标识关联的标准姿态信息不匹配。
结合上一个步骤中的数据进行说明,例如,通过设备编号可知拍摄场景:
当拍摄场景为立式场景时,电子设备判断拍照姿态信息符合拍照场景标识对应的标准姿态信息,确定允许拍摄姿态判断逻辑为:
bool Flag=(fabs(Oriez-90)<Thrang)&&((fabs(Oriex-90)<Thrang)||(fabs(Oriey-90)<Thrang))
当拍摄场景为卧式场景时,电子设备判断拍照姿态信息符合拍照场景标识对应的标准姿态信息,确定允许拍摄姿态判断逻辑为:
bool Flag=(fabs(Oriex-90)<Thrang)&&(fabs(Oriey-90)<Thrang)
其中,bool Flag为拍照姿态信息判定结果,Oriex电子设备X轴的设备偏差角,Oriey电子设备Y轴的设备偏差角,Thrang为预设角度偏差阈值,可以预先根据具体场景设置好,例如15度,Flag为true时,拍照姿态符合要求;Flag为false时,拍照姿态不符合要求。
204、若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
若拍照姿态信息与拍照场景标识关联的标准姿态信息不匹配,电子设备则输出拍照姿态调整提示,其中,拍照姿态调整提示的内容和输出方式不作具体限定,例如,语音提示用户调整拍照姿势。
本申请实施例中预先标定电子设备对应的外参数,在照片拍摄时确定拍照场景标识,然后,通过电子设备中的加速度传感器采集三轴加速度数据,并将加速度数据与外参数进行结合,获得拍照姿态信息,最后将拍照姿态信息与拍照场景标识对应的标准姿态信息进行比对,实现拍照姿态提示;本申请实施例中不需要进行大量的数据分析处理,通过预先标定的外参数和三轴加速度数据融合准确地确定拍照姿态信息,使得拍照姿态提示的高效准确,且本申请中可以设置多种拍照场景标识对应的标准姿态信息,实现多场景拍照姿势提示,使得拍照姿势提示的适用范围广,此外,本申请中简单的数据处理,不需要用户过多操作,对设备的硬件要求较低减少设备成本。
在本申请一些实施例中,为了防止电子设备中没有保存预先标定的外参数,电子设备不可以准确确定拍照姿态信息,如图3所示,图3是本申请实施例中提供的拍照姿态提示方法的一个实施例流程示意图,在本申请实施例中拍照姿态提示方法中步骤202之后,电子设备可以执行以下步骤301~304:
301、判断是否存在预先标定的外参数;
本实施例中电子设备判断是否存在预先标定的外参数,若存在预先标定的外参数,则电子设备执行步骤203,基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,以快速准确地进行拍照姿态提示。
302、若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据。
若不存在所述预先标定的外参数,电子设备则通过加速度传感器采集标定加速度数据,其中,标定加速度数据就是加速度传感器在预先指定状态下采集到的三轴加速度数据,例如,预先指定状态为电子设备显示屏朝上静止状态,此时标定加速度数据,即为加速度传感器在电子设备显示屏朝上静止状态下采集到的三轴加速度数据,具体地,包括:
(1)、若不存在所述预先标定的外参数,则输出标定提示,以使用户将所述电子设备调整至目标姿态;
(2)、在所述电子设备的姿态与所述目标姿态相同时,通过所述加速度传感器采集标定加速度数据。
即,若不存在预先标定的外参数,电子设备则输出标定提示,提示用户按照规定进行标定操作,例如,提示信息中输出将电子设备水平摆放,用户根据提示信息将电子设备调整至目标姿态;电子设备实时地进行姿态检测,姿态检测可以通过加速度传感器进行,在检测到电子设备到达所述目标姿态时,通过加速度传感器采集标定加速度数据。
303、根据所述标定加速度数据,构建外参旋转矩阵。
旋转矩阵(Rotation matrix)是在乘以一个向量的时候有改变向量的方向但不改变大小的效果并保持了手性的矩阵。旋转可分为主动旋转与被动旋转。主动旋转是指将向量逆时针围绕旋转轴所做出的旋转。被动旋转是对坐标轴本身进行的逆时针旋转,它相当于主动旋转的逆操作。
304、将所述外参旋转矩阵作为预先标定的外参数,基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息。
本实施例中电子设备根据标定加速度数据,构建电子设备的外参旋转矩阵,以将外参旋转矩阵作为标定的外参数,进行拍照姿态信息确定,具体地,包括:
(1),计算所述标定加速度数据的标准差,根据所述标定加速度数据的标准差,确定所述电子设备是否处于静止状态;
(2),若所述电子设备处于静止状态,则求取所述标定加速度数据的平均值,并将所述平均值进行归一化处理后计算所述目标姿态对应的偏移角;
(3),结合各所述目标姿态对应的偏移角,构建外参旋转矩阵。
电子设备计算标定加速度数据的标准差,电子设备根据标定加速度数据的标准差,确定电子设备是否处于静止状态;若加速度数据的标准差小于设定阈值(设定阈值根据具体场景设置),电子设备确定处于静止状态,反之,若加速度数据的标准差大于或等于设定阈值,电子设备确定处于非静止状态,电子设备处于非静止状态时不进行标定操作。
若电子设备处于静止状态,则求取标定加速度数据的平均值,电子设备将平均值进行归一化处理后计算目标姿态对应的偏移角;电子设备结合各目标姿态对应的偏移角,构建电子设备的外参旋转矩阵,电子设备将外参旋转矩阵作为预先标定的外参数,以进行拍照姿势确定。
参照图4,图4是本申请实施例中提供的拍照姿态提示方法中预先标定外参数一个实施例的具体场景示意图,本实施例中电子设备进行外参数的标定步骤如下步骤(1)~(4):
(1)、电子设备输出交互界面:是否进行外参数标定,选择“是”(第一次装上需要拍照场景的应用(例如物流应用),使用强制选择“是”,之后每3个月强制选择“是”,平时自动跳到选择“否”界面,并提示“距下次参数标定还有多少天,本次无需标定”);
(2)、电子设备输出设备屏幕朝上平放到水平的平面上(如地板或桌子上),静置10秒;
(3)、电子设备输出设备倾斜(角度不限)放在两个高度不同的尽可能水平的平面上(设备短底面完全接触较低平面),静置10秒;
(4)、电子设备输出设备倾斜(角度不限)放在两个高度不同的尽可能水平的平面上(设备长底面完全接触较低平面),静置10秒,之后完成标定。
标定过程中,设备在步骤(2)、(3)、(4)中需要处于静止状态,如设备处于非静止状态,算法将进行自动检测和报警,重新开始进行标定。设备静态检测算法为三轴加速度的秒标准差都小于阈值,公式为:
Figure BDA0002712186480000181
静态判定逻辑为:
bool Flagstatic=(stdx<Thracc)&&(stdy<Thracc)&&(stdz<Thracc)
其中,acci为三轴加速度数据,j为XYZ,stdx、stdy、stdz为静态下每秒三轴加速度数据的标准差;Thracc为加速度计静态判定阈值,bool Flagstatic为电子设备状态信息判定结果,Flagstatic为true时,设备为静止状态;Flagstatic为false时,设备为非静止状态。
用户按照提示摆放电子设备,电子设备中的加速度传感器采集步骤(2)、(3)、(4)的10秒静态下的三轴加速度数据作为标定加速度数据,电子设备将采集到的标定加速度数据分别取平均,然后归一化,然后分别计算步骤(2)中加速度计相对相机在Z方向的偏移角Angz、步骤(3)中加速度计相对相机在X方向的偏移角Angx和步骤(4)中加速度计相对相机在Y方向的偏移角Angy,具体地:
电子设备将标定加速度数据取平均:
Figure BDA0002712186480000191
其中,meanacc为标定加速度数据的平均值;
电子设备将标定加速度数据归一化:
Figure BDA0002712186480000192
其中,
Figure BDA0002712186480000193
为标定加速度数据归一化值;
电子设备计算步骤(2)中加速度传感器相对于拍摄装置在Z方向的偏移角:
Figure BDA0002712186480000194
Angz为加速度传感器相对于拍摄装置在Z方向的偏移角;
电子设备计算步骤(3)中加速度传感器相对于拍摄装置在X方向的偏移角:
Figure BDA0002712186480000195
Angx为加速度传感器相对于拍摄装置在X方向的偏移角;
电子设备计算步骤(4)中加速度传感器相对于拍摄装置在Y方向的偏移角:
Figure BDA0002712186480000201
Angy为加速度传感器相对于拍摄装置在Y方向的偏移角;
电子设备结合各目标姿态对应的偏移角,构建电子设备的外参旋转矩阵R为:
Figure BDA0002712186480000202
本实施例中给出了电子设备进行标定操作,通过预先标定的外参数可以进行电子设备拍照姿势的快速确定,使得拍照姿态提示更加高效准确。
在本申请一些实施例中,为了方便确定拍照场景标识,本申请实施例对拍照姿态提示方法中步骤201进一步包括:在检测到所述拍摄装置启动时,判断是否存在拍照任务;若存在拍照任务,则获取所述拍照任务关联的拍照场景标识;若不存在拍照任务,则输出拍照场景选择提示;在用户选择拍摄场景后,获取用户选择的拍照场景标识;若预设时间间隔没有获取到用户选择的拍照场景标识,则通过所述拍摄装置采集初始场景图像;将所述初始场景图像与预设图像集合中的预设场景图像进行比对;获取与所述初始场景图像相似度最高的目标场景图像,将所述目标场景图像对应的场景标识作为拍照场景标识。
本申请实施例中电子设备在检测到所述拍摄装置启动时,电子设备判断是否存在拍照任务,拍照任务的内容不作具体限定,拍照任务可以是对xxx门店xxx柜台进行拍照;若存在拍照任务,电子设备则获取拍照任务关联的拍照场景标识并执行步骤202,以最终实现拍照姿势提示。
若不存在拍照任务,电子设备则输出拍照场景选择提示,在用户选择拍摄场景后,获取用户选择的拍照场景标识并执行步骤202以最终实现拍照姿势提示;若预设时间间隔没有获取到用户选择的拍照场景标识,即,用户没有选择拍照场景标识,电子设备则通过拍摄装置采集初始场景图像;电子设备将初始场景图像与预设图像集合(预设图像集合中保持有预先设置的各个场景对应的图像)中的预设场景图像进行比对;电子设备获取与初始场景图像相似度最高的目标场景图像,电子设备将目标场景图像对应的场景标识作为拍照场景标识。
其中,预设时间间隔可以是用户预先设置的时间间隔,或者默认的时间间隔(例如用户未设置时间间隔时),具体此处不作限定。
本实施例中在电子设备可以在用户没有选择拍照场景标识时,进行拍摄初始场景图像,根据初始场景图像自动确定拍照场景标识,使得电子设备可以自动进行场景确定,从而确定标准姿势信息,以进行拍照姿势提示。
在本申请一些实施例中,电子设备对拍摄的商品图像进行识别,在拍摄错误时,可以提示进行二次拍摄,具体地:获取所述拍摄装置拍摄的商品图像,解析所述商品图像,以获得所述商品图像的商品拍摄信息;将所述商品拍摄信息与所述拍照场景标识对应的商品标准信息进行比对;在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息不匹配,则输出二次拍摄提示;在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息匹配,则将所述商品图像上传至预设稽查平台。
其中,预设稽查平台可以是企业对应的稽查管理平台,例如物流企业的稽查管理平台等,具体此处不作限定。
本实施例中电子设备获取拍摄装置拍摄的商品图像,电子设备解析商品图像,获得商品图像的商品拍摄信息;其中,商品图像解析的方式不作具体限定,例如,电子设备中预先设置深度学习获得的图像识别模型,通过图像识别模型进行商品图像识别,电子设备将所述商品拍摄信息与拍照场景标识对应的商品标准信息进行比对;在商品拍摄信息与所述拍照场景标识对应的商品标准信息不匹配,电子设备则输出二次拍摄提示;在商品拍摄信息与所述拍照场景标识对应的商品标准信息匹配,电子设备则将商品图像上传至预设稽查平台。
本实施例中电子设备可以对拍摄获得的商品图像进行识别,商品图像符合要求时进行上传,在商品图像不符合要求时提示重新拍摄,本实施例中的技术方案使的拍照姿态提示更加全面。
为了更好实施本申请实施例中拍照姿态提示方法,在拍照姿态提示方法基础之上,本申请实施例中还提供一种拍照姿态提示装置,如图5所示,图5是拍照姿态提示装置的一个实施例结构示意图;所述拍照姿态提示装置500包括:
场景获取模块501,用于在检测到所述拍摄装置启动时,获取拍照场景标识;
加速度获取模块502,用于接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
姿态确定模块503,用于基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
姿态提示模块504,用于若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
在本申请一些实施例中,所述拍照姿态提示装置还包括:
外参数判断模块,用于判断是否存在预先标定的外参数;
加速度采集模块,用于若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据;
矩阵构建模块,用于根据所述标定加速度数据,构建外参旋转矩阵;
将所述外参旋转矩阵作为预先标定的外参数。
在本申请一些实施例中,所述加速度采集模块具体用于:
若不存在所述预先标定的外参数,则输出标定提示,以使用户将所述电子设备调整至目标姿态;
在所述电子设备的姿态与所述目标姿态相同时,通过所述加速度传感器采集标定加速度数据;
所述矩阵构建模块具体用于:
计算所述标定加速度数据的标准差,根据所述标定加速度数据的标准差,确定所述电子设备是否处于静止状态;
若所述电子设备处于静止状态,则求取所述标定加速度数据的平均值,并将所述平均值进行归一化处理后计算所述目标姿态对应的偏移角;
结合所述目标姿态对应的偏移角,构建外参旋转矩阵。
在本申请一些实施例中,姿态确定模块503具体用于:
对所述三轴加速度数据进行求模,获得所述三轴加速度数据对应的模值;
将所述三轴加速度数据对应的模值与预设静态阈值进行比较,以确定所述电子设备是否处于静止状态;
在所述电子设备处于静止状态时,根据所述三轴加速度数据对应的模值构造矩阵,获得三轴加速度矩阵;
将所述三轴加速度矩阵和预先标定的外参数进行乘积运算,获得设备偏差角,将所述设备偏差角作为所述电子设备的拍照姿态信息。
在本申请一些实施例中,所述姿态提示模块具体用于:
获取所述拍照场景标识对应的标准姿态信息;
将所述拍照姿态信息中的设备偏差角与将所述标准姿态信息中的标准角度进行比较;
若所述设备偏差角与所述标准角度的差值不超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息匹配;
若所述设备偏差角与所述标准角度的差值超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息不匹配。
在本申请一些实施例中,所述场景获取模块具体用于:
在检测到所述拍摄装置启动时,判断是否存在拍照任务;
若存在拍照任务,则获取所述拍照任务关联的拍照场景标识;
若不存在拍照任务,则输出拍照场景选择提示;
在用户选择拍摄场景后,获取用户选择的拍照场景标识。
在本申请一些实施例中,所述场景获取模块具体用于:
若预设时间间隔没有获取到用户选择的拍照场景标识,则通过所述拍摄装置采集初始场景图像;
将所述初始场景图像与预设图像集合中的预设场景图像进行比对;
获取与所述初始场景图像相似度最高的目标场景图像,将所述目标场景图像对应的场景标识作为拍照场景标识。
在本申请一些实施例中,所述拍照姿态提示装置还包括:
获取解析模块,用于获取所述拍摄装置拍摄的商品图像;
解析所述商品图像,以获得所述商品图像的商品拍摄信息;
信息比对模块,用于将所述商品拍摄信息与所述拍照场景标识对应的商品标准信息进行比对;
拍摄提示模块,用于在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息不匹配,则输出二次拍摄提示;
图像上传模块,用于在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息匹配,则将所述商品图像上传至预设稽查平台。
本实施例中拍照姿态提示装置中预先标定电子设备对应的外参数,在照片拍摄时确定拍照场景标识,然后,通过电子设备中的加速度传感器采集三轴加速度数据,并将加速度数据与外参数进行结合,获得拍照姿态信息,最后将拍照姿态信息与拍照场景标识对应的标准姿态信息进行比对,实现拍照姿态提示;本申请实施例中不需要进行大量的数据分析处理,通过预先标定的外参数和三轴加速度数据融合准确地确定拍照姿态信息,使得拍照姿态提示的高效准确,且本申请中可以设置多种拍照场景标识对应的标准姿态信息,实现多场景拍照姿势提示,使得拍照姿势提示的适用范围广,此外,本申请中简单的数据处理,不需要用户过多操作,对设备的硬件要求较低减少设备成本。
本申请实施例还提供一种电子设备,电子设备集成了本申请实施例所提供的任一种拍照姿态提示装置,所述电子设备包括:
拍摄装置;
加速度传感器;
一个或多个处理器;
存储器;以及
一个或多个应用程序,其中所述一个或多个应用程序被存储于所述存储器中,并配置为由所述处理器执行上述拍照姿态提示方法实施例中任一实施例中所述的拍照姿态提示方法中。
如图6所示,其示出了本申请实施例所涉及的电子设备的一个具体实施例的结构示意图。电子设备可以包括一个或者一个以上处理核心的处理器601、一个或一个以上计算机可读存储介质的存储器602、电源603和输入单元604等部件。本领域技术人员可以理解,图6中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器601是该电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器602内的软件程序和/或模块,以及调用存储在存储器602内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。可选的,处理器601可包括一个或多个处理核心;优选的,处理器601可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器601中。
存储器602可用于存储软件程序以及模块,处理器601通过运行存储在存储器602的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器602可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器602可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器602还可以包括存储器控制器,以提供处理器601对存储器602的访问。
电子设备还包括给各个部件供电的电源603,优选的,电源603可以通过电源管理系统与处理器601逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源603还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元604,该输入单元604可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,电子设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,电子设备中的处理器601会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器602中,并由处理器601来运行存储在存储器602中的应用程序,从而实现各种功能,如下:
在检测到所述拍摄装置启动时,获取拍照场景标识;
接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,该计算机可读存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random AccessMemory)、磁盘或光盘等。其上存储有计算机程序,所述计算机程序被处理器进行加载,以执行本申请实施例所提供的任一种拍照姿态提示方法中。例如,所述计算机程序被处理器进行加载可以执行如下步骤:
在检测到所述拍摄装置启动时,获取拍照场景标识;
接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对其他实施例的详细描述,此处不再赘述。
具体实施时,以上各个单元或结构可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个单元或结构的具体实施可参见前面的方法实施例,在此不再赘述。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种拍照姿态提示方法、装置、设备和计算机可读存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种拍照姿态提示方法,其特征在于,应用于电子设备,所述电子设备中包括拍摄装置和加速度传感器,所述拍照姿态提示方法包括:
在检测到所述拍摄装置启动时,获取拍照场景标识;
接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
2.根据权利要求1所述的拍照姿态提示方法,其特征在于,所述接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据之后,所述方法还包括:
判断是否存在预先标定的外参数;
若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据;
根据所述标定加速度数据,构建外参旋转矩阵;
将所述外参旋转矩阵作为所述预先标定的外参数。
3.根据权利要求2所述的拍照姿态提示方法,其特征在于,所述若不存在所述预先标定的外参数,则通过所述加速度传感器采集标定加速度数据,包括:
若不存在所述预先标定的外参数,则输出标定提示,以使用户将所述电子设备调整至目标姿态;
在所述电子设备的姿态与所述目标姿态相同时,通过所述加速度传感器采集标定加速度数据。
4.根据权利要求2所述的拍照姿态提示方法,其特征在于,所述根据所述标定加速度数据,构建外参旋转矩阵,包括:
计算所述标定加速度数据的标准差;
根据所述标定加速度数据的标准差,确定所述电子设备是否处于静止状态;
若所述电子设备处于静止状态,则求取所述标定加速度数据的平均值;
将所述平均值进行归一化处理后计算所述目标姿态对应的偏移角;
结合所述目标姿态对应的偏移角,构建外参旋转矩阵。
5.根据权利要求1所述的拍照姿态提示方法,其特征在于,所述基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,包括:
对所述三轴加速度数据进行求模,获得所述三轴加速度数据对应的模值;
将所述三轴加速度数据对应的模值与预设静态阈值进行比较,以确定所述电子设备是否处于静止状态;
在所述电子设备处于静止状态时,根据所述三轴加速度数据对应的模值构造矩阵,获得三轴加速度矩阵;
将所述三轴加速度矩阵和预先标定的外参数进行乘积运算,获得设备偏差角,将所述设备偏差角作为所述电子设备的拍照姿态信息。
6.根据权利要求1所述的拍照姿态提示方法,其特征在于,所述若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示之前,所述方法还包括:
获取所述拍照场景标识对应的标准姿态信息;
将所述拍照姿态信息中的设备偏差角与将所述标准姿态信息中的标准角度进行比较;
若所述设备偏差角与所述标准角度的差值不超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息匹配;
若所述设备偏差角与所述标准角度的差值超过预设角度偏差阈值,则判定所述拍照姿态信息与所述拍照场景标识关联的标准姿态信息不匹配。
7.根据权利要求1所述的拍照姿态提示方法,其特征在于,所述在检测到所述拍摄装置启动时,获取拍照场景标识,包括:
在检测到所述拍摄装置启动时,判断是否存在拍照任务;
若存在拍照任务,则获取所述拍照任务关联的拍照场景标识;
若不存在拍照任务,则输出拍照场景选择提示;
在用户选择拍摄场景后,获取用户选择的拍照场景标识。
8.根据权利要求7所述的拍照姿态提示方法,其特征在于,所述若不存在拍照任务,则输出拍照场景选择提示之后,所述方法还包括:
若预设时间间隔没有获取到用户选择的拍照场景标识,则通过所述拍摄装置采集初始场景图像;
将所述初始场景图像与预设图像集合中的预设场景图像进行比对;
获取与所述初始场景图像相似度最高的目标场景图像,将所述目标场景图像对应的场景标识作为拍照场景标识。
9.根据权利要求1至8任一项所述的拍照姿态提示方法,其特征在于,所述若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示之后,所述方法包括:
获取所述拍摄装置拍摄的商品图像;
解析所述商品图像,以获得所述商品图像的商品拍摄信息;
将所述商品拍摄信息与所述拍照场景标识对应的商品标准信息进行比对;
在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息不匹配时,则输出二次拍摄提示;
在所述商品拍摄信息与所述拍照场景标识对应的商品标准信息匹配,则将所述商品图像上传至预设稽查平台。
10.一种拍照姿态提示装置,其特征在于,所述拍照姿态提示装置设置于电子设备,所述电子设备中包括拍摄装置和加速度传感器,所述拍照姿态提示装置包括:
场景获取模块,用于在检测到所述拍摄装置启动时,获取拍照场景标识;
加速度获取模块,用于接收用户的拍照操作指令,通过所述加速度传感器采集所述电子设备的三轴加速度数据;
姿态确定模块,用于基于所述三轴加速度数据和预先标定的外参数,确定所述电子设备的拍照姿态信息,所述外参数指电子设备中拍摄装置和加速度传感器在电子设备安装结构上的角度参数;
姿态提示模块,用于若所述拍照姿态信息与所述拍照场景标识预先关联的标准姿态信息不匹配,则输出拍照姿态调整提示。
11.一种电子设备,其特征在于,所述电子设备包括:
拍摄装置;
加速度传感器;
一个或多个处理器;
存储器;以及
一个或多个应用程序,其中所述一个或多个应用程序被存储于所述存储器中,并配置为由所述处理器执行以实现权利要求1至9中任一项所述的拍照姿态提示方法。
12.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序被处理器进行加载,以执行权利要求1至9任一项所述的拍照姿态提示方法中。
CN202011060262.9A 2020-09-30 2020-09-30 拍照姿态提示方法、装置、设备和计算机可读存储介质 Pending CN114339020A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011060262.9A CN114339020A (zh) 2020-09-30 2020-09-30 拍照姿态提示方法、装置、设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011060262.9A CN114339020A (zh) 2020-09-30 2020-09-30 拍照姿态提示方法、装置、设备和计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN114339020A true CN114339020A (zh) 2022-04-12

Family

ID=81011513

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011060262.9A Pending CN114339020A (zh) 2020-09-30 2020-09-30 拍照姿态提示方法、装置、设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN114339020A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115495609A (zh) * 2022-11-21 2022-12-20 安徽淘云科技股份有限公司 一种坐姿数据采集系统、坐姿数据采集方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115495609A (zh) * 2022-11-21 2022-12-20 安徽淘云科技股份有限公司 一种坐姿数据采集系统、坐姿数据采集方法及装置
CN115495609B (zh) * 2022-11-21 2023-03-10 安徽淘云科技股份有限公司 一种坐姿数据采集系统、坐姿数据采集方法及装置

Similar Documents

Publication Publication Date Title
US9805265B2 (en) Surveillance camera control device and video surveillance system
US9501831B2 (en) Identification of relative distance of objects in images
CN110111388B (zh) 三维物体位姿参数估计方法及视觉设备
CN112232279B (zh) 一种人员间距检测方法和装置
JP6609640B2 (ja) 電子デバイス上における環境マッピング用のフィーチャ・データの管理
WO2010101227A1 (ja) 物体位置推定用情報作成装置、物体位置推定用情報作成方法およびプログラム
CN107329671B (zh) 模型显示方法和装置
CN110072078A (zh) 监控摄像机、监控摄像机的控制方法和存储介质
US20130135463A1 (en) Information processing apparatus, information processing method and computer-readable storage medium
CN108827341A (zh) 用于确定图像采集装置的惯性测量单元中的偏差的方法
JP7043601B2 (ja) 環境モデルを生成するための方法および装置ならびに記憶媒体
CN111986250A (zh) 物体体积测量方法、装置、测量设备及存储介质
KR102566300B1 (ko) 실내 측위 방법, 장치, 장비 및 저장 매체
CN113362441A (zh) 三维重建方法、装置、计算机设备和存储介质
CN112037279A (zh) 物品位置识别方法和装置、存储介质、电子设备
CN114339020A (zh) 拍照姿态提示方法、装置、设备和计算机可读存储介质
KR20160096966A (ko) 주변 상황 정보를 통지하기 위한 방법, 전자 장치 및 저장 매체
CN111612398A (zh) 仓库配货方法、装置、计算机设备及存储介质
CN114742866A (zh) 图像配准方法、装置、存储介质及电子设备
CN106461414A (zh) 一种智能设备的姿态关系计算方法和智能设备
Caruso et al. Infrastructureless indoor navigation with an hybrid magneto-inertial and depth sensor system
US20110050928A1 (en) Selection system and method for camera
EP3074844A1 (en) Estimating gaze from un-calibrated eye measurement points
CN116208842A (zh) 视频处理方法、装置、设备和计算机可读存储介质
US9225944B2 (en) Method and system for displaying a coverage area of a camera in a data center

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination