一种鱼眼图像的分析方法、电子设备及存储介质
技术领域
本发明实施例涉及图像处理领域,特别涉及一种鱼眼图像的分析方法、电子设备及存储介质。
背景技术
鱼眼镜头是比标准镜头视角更大、焦距更短的一种特殊镜头。目前,业内对鱼眼镜头的应用,主要将其作为视觉传感器,用在视频监控场景中。由于鱼眼镜头视角大、焦距短的结构特点,导致其采集到的鱼眼图像具有畸变。深度学习目标检测识别算法的原理主要是通过使用整理好的训练数据(图片和对应标注文件)来训练检测识别模型,用训练好的模型,对一张图片中的物体进行检测识别。为保证识别准确率,要求训练数据尽量覆盖一个目标物体的各个特征。由人工直接采集并标注大量的鱼眼图像作为训练数据,产生的人工工作量巨大。因此,业内可以通过对已有的鱼眼图像进行处理,已得到新的训练数据。
然而,发明人发现现有技术中至少存在如下问题:若在采集到的鱼眼图像存在有效区域不全的情况下,直接对采集到的原始鱼眼图像进行处理,得到的鱼眼图像的质量往往不太好。然而,通过人工判断每幅鱼眼图像是否缺失,将造成很大的人力消耗。
发明内容
本发明实施方式的目的在于提供一种鱼眼图像的分析方法、电子设备及存储介质,使得能够自动对鱼眼图像的完整性进行判断,减少了人力消耗。
为解决上述技术问题,本发明的实施方式提供了一种鱼眼图像的分析方法,包括以下步骤:获取鱼眼图像的有效区域的边界信息和鱼眼图像的边界信息;根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域是否缺失。
本发明的实施方式还提供了一种电子设备,包括:至少一个处理器;以及,与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行如上述实施方式提及的鱼眼图像的分析方法。
本发明的实施方式还提供了一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时实现上述实施方式提及的鱼眼图像的分析方法。
本发明实施方式相对于现有技术而言,由于有效区域的某个部分缺失时,有效区域的该部分的边界为鱼眼图像的边界,电子设备可以通过比较有效区域的边界信息和鱼眼图像的边界信息,确定鱼眼图像的有效区域是否缺失,减少了开发人员的工作量。除此之外,电子设备能够自动获知有效区域的缺失情况,使得电子设备可以根据有效区域是否缺失,调整后续对鱼眼图像的操作,保证了电子设备后续对鱼眼图像进行的操作的准确性。
另外,根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域是否缺失,具体包括:根据有效区域的边界信息和鱼眼图像的边界信息,判断有效区域的边界和鱼眼图像的边界是否存在重合部分;若确定是,则确定有效区域缺失;若确定不是,则确定有效区域未缺失。
另外,根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域是否缺失,具体包括:根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域的缺失情况;在根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域的缺失情况之后,鱼眼图像的分析方法还包括:根据预存的缺失情况对应的约束关系,以及有效区域的边界信息,确定有效区域的圆心坐标;其中,约束关系为有效区域的圆心坐标和有效区域的边界信息的约束关系。
另外,在根据缺失情况对应的约束关系,以及有效区域的边界信息,确定有效区域的圆心坐标之后,鱼眼图像的分析方法还包括:根据有效区域的圆心坐标,对鱼眼图像中的图像进行旋转变换,得到旋转后的鱼眼图像。
另外,在根据有效区域的圆心坐标,对鱼眼图像中的图像进行旋转变换,得到旋转后的鱼眼图像,具体包括:对鱼眼图像进行剪切,保留有效区域;根据有效区域的圆心坐标,对有效区域中的图像进行旋转变换,得到旋转后的鱼眼图像。
另外,根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域的缺失情况,具体包括:根据有效区域的边界信息和鱼眼图像的边界信息,判断有效区域的边界和鱼眼图像的边界是否存在重合部分;若确定是,则根据有效区域的边界和鱼眼图像的边界的重合部分,确定有效区域的缺失情况;若确定不是,则确定有效区域的缺失情况为有效区域未缺失。
另外,鱼眼图像的边界信息包括鱼眼图像的纵向宽度和鱼眼图像的横向宽度,有效区域的边界信息包括有效区域的第一边界的纵坐标、有效区域的第二边界的横坐标、有效区域的第三边界的纵坐标和有效区域的第四边界的横坐标;其中,有效区域的第一边界、有效区域的第二边界、有效区域的第三边界和有效区域的第四边界依次相邻;鱼眼图像的直角坐标系的横坐标轴为鱼眼图像的第一边界所在直线,鱼眼图像的直角坐标系的纵坐标轴为鱼眼图像的第二边界所在直线,鱼眼图像的直角坐标系的圆心为鱼眼图像的第一边界所在直线和第二边界所在直线的交点;根据有效区域的边界信息和鱼眼图像的边界信息,判断有效区域的边界和鱼眼图像的边界是否存在重合部分,具体包括:若确定有效区域的第一边界的纵坐标不等于0,且,有效区域的第二边界的横坐标不等于0,且,有效区域的第三边界的纵坐标的绝对值不等于鱼眼图像的纵向宽度信息,且,有效区域的第四边界的横坐标的绝对值不等于鱼眼图像的横向宽度信息,则确定有效区域的边界和鱼眼图像的边界不存在重合部分;若确定有效区域的第一边界的纵坐标等于0,或,有效区域的第二边界的横坐标等于0,或,有效区域的第三边界的坐标的纵坐标的绝对值等于鱼眼图像的纵向宽度信息,或,有效区域的第四边界的横坐标的绝对值等于鱼眼图像的横向宽度信息,确定有效区域的边界和鱼眼图像的边界存在重合部分。
另外,有效区域的边界包括第一边界、第二边界、第三边界和第四边界,第一边界、第二边界、第三边界和第四边界依次连接;鱼眼图像的直角坐标系的横坐标轴与有效区域的第一边界平行,鱼眼图像的直角坐标系的纵坐标轴与鱼眼图像的第二边界平行;当缺失情况为有效区域未缺失时,缺失情况对应的约束关系为:根据有效区域的第一边界的纵坐标和有效区域的第三边界的纵坐标,确定有效区域的圆心坐标中的纵坐标;根据有效区域的第二边界的横坐标和有效区域的第四边界的横坐标,确定有效区域的圆心坐标中的横坐标;当缺失情况为有效区域的第一边界所在的区域缺失,和/或,有效区域的第三边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第二边界的横坐标和有效区域中的第四边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第二边界的纵坐标或有效区域的第四边界的纵坐标,确定有效区域的圆心坐标中的纵坐标;当缺失情况为有效区域的第二边界所在的区域缺失,和/或,有效区域的第四边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第一边界的横坐标或有效区域的第三边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第一边界的纵坐标和有效区域的第三边界的纵坐标,确定有效区域的圆心坐标中的纵坐标;当缺失情况为有效区域的第一边界所在的区域和有效区域的第二边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第三边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第四边界的纵坐标,确定有效区域的圆心坐标中的纵坐标;当缺失情况为有效区域的第一边界所在的区域和有效区域的第四边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第三边界的横坐标,确定有效区域的圆心坐标中的横坐标,根据有效区域的第二边界的纵坐标,确定有效区域的圆心坐标中的纵坐标;当缺失情况为有效区域的第二边界所在的区域和有效区域的第三边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第一边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第四边界的纵坐标,确定有效区域的圆心坐标中的纵坐标;当缺失情况为有效区域的第三边界所在的区域和有效区域的第四边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第一边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第二边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制。
图1是本发明的第一实施方式的鱼眼图像的分析方法的流程图;
图2是本发明的第二实施方式的鱼眼图像的分析方法的流程图;
图3是本发明的第二实施方式的鱼眼图像的示意图;
图4是本发明的第三实施方式的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的各实施方式进行详细的阐述。然而,本领域的普通技术人员可以理解,在本发明各实施方式中,为了使读者更好地理解本申请而提出了许多技术细节。但是,即使没有这些技术细节和基于以下各实施方式的种种变化和修改,也可以实现本申请所要求保护的技术方案。
本发明的第一实施方式涉及一种鱼眼图像的分析方法,应用于电子设备,例如,智能货柜。如图1所示,鱼眼图像的分析方法包括:
步骤101:获取鱼眼图像的有效区域的边界信息和鱼眼图像的边界信息。
具体地说,电子设备确定鱼眼图像的有效区域的边界信息的方法可以是:最小二乘拟合法、面积统计法、区域生长法和逐行逐列扫描线法。最小二乘拟合法与面积统计法通过扫描整幅鱼眼图像的所有像素点进行判断。逐行逐列扫描线法以鱼眼图像边界点从上下边界向内、左右边界向内地逐行、逐列扫描,向鱼眼图像中心逼近,并通过阈值确定有效区域。
步骤102:根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域是否缺失。
具体地说,申请人在研究鱼眼图像的有效区域的缺失问题时,发现:当有效区域的某个部分存在图像缺失时,有效区域的该部分的边界为鱼眼图像的边界。因此,电子设备可以通过比较有效区域的边界信息和鱼眼图像的边界信息,确定有效区域是否缺失。
在一个例子中,电子设备根据有效区域的边界信息和鱼眼图像的边界信息,判断有效区域的边界和鱼眼图像的边界是否存在重合部分;若确定是,则确定有效区域缺失;若确定不是,则确定有效区域未缺失。
以下对电子设备判断有效区域的边界和鱼眼图像的边界是否重合的过程进行举例说明。
假设,鱼眼图像上建立有直角坐标系,该直角坐标系的原点为鱼眼图像的第一边界和鱼眼图像的第二边界的交点,鱼眼图像的直角坐标系的横坐标轴为鱼眼图像的第一边界所在直线,鱼眼图像的直角坐标系的纵坐标轴为鱼眼图像的第二边界所在直线。鱼眼图像的边界信息包括鱼眼图像的纵向宽度和鱼眼图像的横向宽度,有效区域的边界信息包括有效区域的第一边界的纵坐标、有效区域的第二边界的横坐标、有效区域的第三边界的纵坐标和有效区域的第四边界的横坐标,有效区域的第一边界、有效区域的第二边界、有效区域的第三边界和有效区域的第四边界依次相邻。电子设备若确定有效区域的第一边界的纵坐标不等于0,且,有效区域的第二边界的横坐标不等于0,且,有效区域的第三边界的纵坐标的绝对值不等于鱼眼图像的纵向宽度信息,且,有效区域的第四边界的横坐标的绝对值不等于鱼眼图像的横向宽度信息,则确定有效区域的边界和鱼眼图像的边界不存在重合部分。电子设备若确定有效区域的第一边界的纵坐标等于0,或,有效区域的第二边界的横坐标等于0,或,有效区域的第三边界的坐标的纵坐标的绝对值等于鱼眼图像的纵向宽度信息,或,有效区域的第四边界的横坐标的绝对值等于鱼眼图像的横向宽度信息,确定有效区域缺失。
值得一提的是,电子设备可以自动根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域是否缺失,提高了电子设备的智能性,节约了人工资源。
在一个例子中,电子设备在确定有效区域的第一边界的坐标的纵坐标等于0,或,有效区域的第二边界的坐标的横坐标等于0,或,有效区域的第三边界的坐标的纵坐标的绝对值等于鱼眼图像的纵向宽度信息,或,有效区域的第四边界的横坐标的绝对值等于鱼眼图像的横向宽度信息之后,确定有效区域缺失之前,将鱼眼图像反馈给开发人员;根据开发人员输入的指令,判断鱼眼图像的有效区域是否缺失。
值得一提的是,在电子设备确定鱼眼图像的有效区域可能存在缺失时,将鱼眼图像发给开发人员,由开发人员再次确认,提高了电子设备的准确性。
在一个例子中,电子设备可以根据后续操作的需要,在确定鱼眼图像的有效区域缺失后,有选择的执行删除该鱼眼图像的步骤,以避免使用的不完整的鱼眼图像导致后续处理结果有偏差的问题。
需要说明的是,以上仅为举例说明,并不对本发明的技术方案构成限定。
与现有技术相比,本实施方式中提供的鱼眼图像的分析方法,由于有效区域的某个部分缺失时,有效区域的该部分的边界为鱼眼图像的边界,电子设备可以通过比较有效区域的边界信息和鱼眼图像的边界信息,确定鱼眼图像的有效区域是否缺失,减少了开发人员的工作量。除此之外,电子设备能够自动获知有效区域的缺失情况,使得电子设备可以根据有效区域是否缺失,调整后续对鱼眼图像的操作,保证了电子设备后续对鱼眼图像进行的操作的准确性。
本发明的第二实施方式涉及一种鱼眼图像的分析方法。本实施方式在第一实施方式的基础上做了进一步改进,具体改进之处为:在确定鱼眼图像的有效区域是否缺失后,结合鱼眼图像的有效区域的缺失情况,进行有效区域的圆心的标定。
具体的说,如图2所示,在本实施方式中,包含步骤201至步骤204,其中,步骤201与第一实施方式中的步骤101大致相同,此处不再赘述。下面主要介绍不同之处:
步骤201:获取鱼眼图像的有效区域的边界信息和鱼眼图像的边界信息。
步骤202:根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域的缺失情况。
具体地说,电子设备可以根据有效区域的边界信息和鱼眼图像的边界信息,确定有效区域的边界和鱼眼图像的边界的重合部分,以此确定有效区域的缺失情况。
以下对电子设备确定有效区域的缺失情况的方法进行举例说明。
电子设备在鱼眼图像上建立直角坐标系,该直角坐标系的原点为鱼眼图像的上边界和鱼眼图像的左边界的交点,鱼眼图像的坐标系的横坐标轴为鱼眼图像的上边界所在直线,鱼眼图像的坐标系的纵坐标轴为鱼眼图像的左边界所在直线。鱼眼图像的边界信息包括鱼眼图像的纵向宽度和鱼眼图像的横向宽度,有效区域的边界信息包括有效区域的上边界的坐标、有效区域的左边界的坐标、有效区域的下边界的坐标和有效区域的右边界的坐标。电子设备确定缺失情况的方法包括以下子步骤:
步骤301:若确定有效区域的下边界的纵坐标等于鱼眼图像的纵向宽度,将有效区域的下边界的纵坐标标记为0;若确定有效区域的右边界的横坐标等于鱼眼图像的横向宽度,将有效区域的右边界的横坐标标记为0。
步骤302:对有效区域的上边界的纵坐标和有效区域的下边界的纵坐标进行与运算,得到第一参数,对有效区域的左边界的横坐标和有效区域的右边界的横坐标进行与运算,得到第二参数,对有效区域的上边界的纵坐标和有效区域的下边界的纵坐标进行异或运算,得到第三参数,对有效区域的左边界的横坐标和有效区域的右边界的横坐标进行异或运算,得到第四参数。
具体地说,当有效区域的上部分缺失时,有效区域的上边界和鱼眼图像的上边界重合,故有效区域的纵坐标等于0,当有效区域的下部分缺失时,有效区域的下边界和鱼眼图像的下边界重合,故有效区域的下边界的纵坐标等于鱼眼图像的纵向宽度,则在步骤301中被标记为0,当有效区域的左部分缺失时,有效区域的左边界和鱼眼图像的左边界重合,有效区域的左边界的横坐标等于0,当有效区域的右部分缺失时,有效区域的右边界和鱼眼图像的右边界重合,有效区域的右边界的横坐标等于鱼眼图像的横向宽度,则在步骤301中被标记为0。因此,当有效区域的上部分和下部分均未缺失时,第一参数不为0,第三参数为0;当有效区域的上部分或下部分缺失时,第一参数为0,第三参数不为0,当有效区域的上部分和下部分均缺失时,第一参数为0,第三参数为0;当有效区域的左部分和右部分均未缺失时,第二参数不为0,第四参数为0,当有效区域的左部分或右部分缺失时,第二参数为0,第四参数不为0,当有效区域的左部分和右部分均缺失时,第二参数为0,第四参数为0。
步骤303:对第一参数和第二参数进行异或运算,得到第五参数,判断第五参数是否等于0。
具体地说,若确定第五参数等于0,执行步骤304,若确定第五参数不等于0,执行步骤3016。
当第五参数等于0时,说明第一参数和第二参数相同,存在以下两种可能的情况:
第一种可能的情况:有效区域的上部分和/或下部分存在缺失,且,有效区域的左部分和/或右部分存在缺失;
第二种可能的情况:有效区域的上部分和下部分均未缺失,且,有效区域的左部分和右部分均未缺失。
上述两种可能的情况,需要通过执行步骤304及其他相关步骤来区分。
当第五参数不等于0时,说明第一参数和第二参数不同,可能存在以下两种可能的情况:
第一种可能的情况:有效区域的上部分和/或下部分存在缺失,且,有效区域的左部分和右部分均未缺失;
第二种可能的情况:有效区域的上部分和下部分均未缺失,且,有效区域的左部分和/或右部分存在缺失。
上述两种可能的情况,需要通过执行步骤3016及其他相关步骤来区分。
步骤304:对第一参数和第二参数进行与运算,得到第六参数,判断第六参数是否等于0。
具体地说,若确定第六参数不等于0,说明第一参数和第二参数均不为0,即有效区域的上部分、下部分、左部分和右部分均未缺失,执行步骤305,否则,说明第一参数或第二参数为0,通过执行步骤306及后续步骤来确定缺失部分。
步骤305:确定有效区域未缺失。之后结束流程。
步骤306:对第三参数和第四参数进行与运算,得到第七参数,判断第七参数是否等于0。
具体地说,若确定第七参数等于0,执行步骤307,若第七参数不等于0,执行步骤308。
步骤307:确定有效区域缺失三个部分或四个部分。之后结束流程。
具体地说,当第七参数等于0时,说明第三参数和/或第四参数等于0,则说明可能存在以下五种可能的情况:
第一种可能的情况:有效区域的上部分和下部分为0,有效区域的左部分为0;
第二种可能的情况:有效区域的上部分和下部分为0,有效区域的右部分为0;
第三种可能的情况:有效区域的上部分和下部分为0,有效区域的左部分和右部分为0;
第四种可能的情况:有效区域的上部分为0,有效区域的左部分和右部分为0;
第五种可能的情况:有效区域的下部分为0,有效区域的左部分和右部分为0。
在一个例子中,在步骤307之后,可以有选择的将该鱼眼图像反馈给开发人员,由开发人员来确定有效区域的缺失部分。
步骤308:确定有效区域缺失相邻两部分。
步骤309:判断有效区域的上边界的纵坐标是否为0。
若确定是,执行步骤3010,否则,执行步骤3013。
步骤3010:判断有效区域的左边界的横坐标是否为0。
若确定是,执行步骤3011,否则,执行步骤3012。
步骤3011:确定有效区域的上部分和左部分缺失。之后结束流程。
步骤3012:确定有效区域的上部分和右部分缺失。之后结束流程。
步骤3013:判断有效区域的左边界的横坐标是否为0。
若确定是,执行步骤3014,否则,执行步骤3015。
步骤3014:确定有效区域的下部分和左部分缺失。之后结束流程。
步骤3015:确定有效区域的下部分和右部分缺失。之后结束流程。
步骤3016:对第三参数和第四参数进行异或运算,得到第八参数,判断第八参数是否等于0。
具体地说,若确定第八参数等于0,说明有效区域缺失相对的两部分,执行步骤3017,否则,说明有效区域缺失一部分,执行步骤3020。
步骤3017:判断有效区域的上边界的纵坐标是否等于0。
具体地说,若确定有效区域的上边界的纵坐标等于0,执行步骤3018,否则,执行步骤3019。
步骤3018:确定有效区域的上部分和下部分缺失。之后结束流程。
步骤3019:确定有效区域的左部分和右部分缺失。之后结束流程。
步骤3020:判断第三参数是否为0。
具体地说,若确定第三参数为0,执行步骤3021,否则,执行步骤3024。
步骤3021:判断有效区域的左边界的横坐标是否等于0。
具体地说,若确定第三参数的有效区域的左边界的横坐标等于0,执行步骤3022,否则,执行步骤3023。
步骤3022:确定有效区域的左部分缺失。之后结束流程。
步骤3023:确定有效区域的右部分缺失。之后结束流程。
步骤3024:判断有效区域的上边界的纵坐标是否等于0。
具体地说,若确定有效区域的上边界的纵坐标等于0,执行步骤3025,否则,执行步骤3026。
步骤3025:确定有效区域的上部分缺失。之后结束流程。
步骤3026:确定有效区域的下部分缺失。之后结束流程。
通过上述方式,电子设备能够自动确定有效区域的缺失情况,提高了电子设备的智能性。
步骤203:确定有效区域的缺失情况对应的约束关系。
具体地说,约束关系为有效区域的圆心坐标和有效区域的边界信息的约束关系。电子设备中存储有各种缺失情况下的有效区域的圆心坐标和有效区域的边界信息的约束关系。电子设备在确定有效区域的缺失情况后,即可确定该情况下的有效区域的圆心坐标和有效区域的边界信息的约束关系。
步骤204:根据该缺失情况对应的约束关系,以及有效区域的边界信息,确定有效区域的圆心坐标。
具体地说,电子设备在已知有效区域的圆心坐标和有效区域的边界信息的约束关系,以及有效区域的边界信息后,可以基于该约束关系,计算有效区域的圆心。
在一个例子中,有效区域的边界包括第一边界、第二边界、第三边界和第四边界,第一边界、第二边界、第三边界和第四边界依次连接,鱼眼图像的直角坐标系的横坐标轴与有效区域的第一边界平行,鱼眼图像的直角坐标系的纵坐标轴与鱼眼图像的第二边界平行。电子设备中预存的各种缺失情况对应的约束关系如下:
第一种缺失情况:有效区域未缺失。该情况下,缺失情况对应的约束关系为:根据有效区域的第二边界的横坐标和有效区域的第四边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第一边界的纵坐标和有效区域的第三边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=(有效区域的第二边界的横坐标+有效区域的第四边界的横坐标)/2,有效区域的圆心坐标中的纵坐标=(有效区域的第一边界的纵坐标+有效区域的第三边界的纵坐标)/2。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴沿原坐标系中的横坐标轴正方向移动了m,变换后的坐标系的纵坐标轴沿原坐标系中的纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=(有效区域的第二边界的横坐标+有效区域的第四边界的横坐标)-n,有效区域的圆心坐标中的纵坐标=(有效区域的第一边界的纵坐标+有效区域的第三边界的纵坐标)/2-m。
第二种缺失情况:有效区域的第一边界所在的区域缺失,和/或,有效区域的第三边界所在的区域缺失。该情况下,缺失情况对应的约束关系指示:根据有效区域的第二边界的横坐标和有效区域中的第四边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第二边界的纵坐标或有效区域的第四边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=(有效区域的第二边界的横坐标+有效区域的第四边界的横坐标)/2,有效区域的圆心坐标中的纵坐标=有效区域的第二边界的纵坐标,或者,有效区域的圆心坐标中的纵坐标=有效区域的第四边界的纵坐标。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴相对于原坐标系中的横坐标轴沿横坐标轴移动了m,变换后的坐标系的纵坐标轴相对于原坐标系中的纵坐标轴沿纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=(有效区域的第二边界的横坐标+有效区域的第四边界的横坐标)-n,有效区域的圆心坐标中的纵坐标=有效区域的第二边界的纵坐标-m,或者,有效区域的圆心坐标中的纵坐标=有效区域的第四边界的纵坐标-m。
第三种缺失情况:有效区域的第二边界所在的区域缺失,和/或,有效区域的第四边界所在的区域缺失。该情况下,缺失情况对应的约束关系指示:根据有效区域的第一边界的横坐标或有效区域的第三边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第一边界的纵坐标和有效区域的第三边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=有效区域的第一边界的横坐标,或,有效区域的圆心坐标中的横坐标=有效区域的第三边界的横坐标,有效区域的圆心坐标中的纵坐标=(有效区域的第一边界的纵坐标+有效区域的第三边界的纵坐标)/2。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴相对于原坐标系中的横坐标轴沿横坐标轴移动了m,变换后的坐标系的纵坐标轴相对于原坐标系中的纵坐标轴沿纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=有效区域的第一边界的横坐标-n,或,有效区域的圆心坐标中的横坐标=有效区域的第三边界的横坐标-n,有效区域的圆心坐标中的纵坐标=(有效区域的第一边界的纵坐标+有效区域的第三边界的纵坐标)/2-m。
第四种缺失情况:有效区域的第一边界所在的区域和有效区域的第二边界所在的区域缺失时,缺失情况对应的约束关系指示:根据有效区域的第三边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第四边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=有效区域的第三边界的横坐标,有效区域的圆心坐标中的纵坐标=有效区域的第四边界的纵坐标。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴相对于原坐标系中的横坐标轴沿横坐标轴移动了m,变换后的坐标系的纵坐标轴相对于原坐标系中的纵坐标轴沿纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=有效区域的第三边界的横坐标-n,有效区域的圆心坐标中的纵坐标=有效区域的第四边界的纵坐标-m。
第五种缺失情况:有效区域的第一边界所在的区域和有效区域的第四边界所在的区域缺失。该情况下,缺失情况对应的约束关系指示:根据有效区域的第三边界的横坐标,确定有效区域的圆心坐标中的横坐标,根据有效区域的第二边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=有效区域的第三边界的横坐标,有效区域的圆心坐标中的纵坐标=有效区域的第二边界的纵坐标。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴相对于原坐标系中的横坐标轴沿横坐标轴移动了m,变换后的坐标系的纵坐标轴相对于原坐标系中的纵坐标轴沿纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=有效区域的第三边界的横坐标-n,有效区域的圆心坐标中的纵坐标=有效区域的第二边界的纵坐标-m。
第六种缺失情况:有效区域的第二边界所在的区域和有效区域的第三边界所在的区域缺失。该情况下,缺失情况对应的约束关系指示:根据有效区域的第一边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第四边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=有效区域的第一边界的横坐标,有效区域的圆心坐标中的纵坐标=有效区域的第四边界的纵坐标。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴相对于原坐标系中的横坐标轴沿横坐标轴移动了m,变换后的坐标系的纵坐标轴相对于原坐标系中的纵坐标轴沿纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=有效区域的第一边界的横坐标-n,有效区域的圆心坐标中的纵坐标=有效区域的第四边界的纵坐标-m。
第七种缺失情况:有效区域的第三边界所在的区域和有效区域的第四边界所在的区域缺失。该情况下,缺失情况对应的约束关系指示:根据有效区域的第一边界的横坐标,确定有效区域的圆心坐标中的横坐标;根据有效区域的第二边界的纵坐标,确定有效区域的圆心坐标中的纵坐标。
具体地说,当电子设备不变换坐标系时,有效区域的圆心坐标中的横坐标=有效区域的第一边界的横坐标,有效区域的圆心坐标中的纵坐标=有效区域的第二边界的纵坐标。当电子设备在确定圆心坐标的过程中,变换坐标系时,若变换后的坐标系的横坐标轴相对于原坐标系中的横坐标轴沿横坐标轴移动了m,变换后的坐标系的纵坐标轴相对于原坐标系中的纵坐标轴沿纵坐标轴正方向移动了n,则有效区域的圆心坐标中的横坐标=有效区域的第一边界的横坐标-n,有效区域的圆心坐标中的纵坐标=有效区域的第二边界的纵坐标-m。
需要说明的是,本领域技术人员可以理解,当缺失情况为有效区域缺失三个部分或四个部分时,可以将鱼眼图像反馈给开发人员,由开发人员确定有效区域的圆心,也可以删除该鱼眼图像,本实施方式不限制缺失情况为有效区域缺失三个部分或四个部分时,电子设备进行的操作。
需要说明的是,m和n可以是正数,也可以是负数。m为负数时,说明变换后的坐标系的横坐标轴沿原坐标系中的横坐标轴负方向移动了m的绝对值;n为负数时,说明变换后的坐标系的纵坐标轴沿原坐标系中的纵坐标轴负方向移动了n的绝对值。
例如,鱼眼图像2021如图3所示,有效区域2022的第一边界为有效区域2022的上边界,有效区域的第二边界为有效区域2022的左边界,有效区域的第三边界为有效区域2022的下边界,有效区域2022的第四边界为有效区域2022的右边界。以有效区域2022的第一边界所在直线为横坐标轴,以有效区域2022的第二边界所在直线为纵坐标轴,以有效区域2022的第一边界和有效区域2022的第二边界的交点为原点,建立第一直角坐标系。在第一直角坐标系中,有效区域2022的上边界坐标为(topx,topy),有效区域2022的下边界坐标为(bottomx,bottomy),有效区域2022的左边界坐标为(leftx,lefty),有效区域2022的右边界坐标为(rightx,righty)。电子设备对鱼眼图像2021进行有效区域的提取操作,将原坐标系的横坐标轴移动至以有效区域的上边界所在直线,将原坐标系中的纵坐标轴移动至有效区域的左边界,重新建立第二直角坐标系。求解有效区域的圆心在第二坐标系中的坐标的公式如下:
情况A:有效区域完整,则cx=(rightx-leftx)/2,cy=(bottomy-topy)/2。
情况B:有效区域缺少上部分和左部分,则cx=bottomx,cy=righty。
情况C:有效区域缺少上部分和右部分,则cx=bottomx-leftx,cy=lefty。
情况D:有效区域缺少下部分和左部分,则cx=topx,cy=righty-topy。
情况E:有效区域缺少下部分和右部分,则cx=topx-leftx,cy=lefty-topy。
情况F:有效区域缺少上部分和下部分,则cx=(rightx-leftx)/2,cy=lefty。
情况G:有效区域缺少左部分和右部分,则cx=topx,cy=(bottomy-topy)/2。
情况H:有效区域缺少左部分或右部分,则cx=topx,cy=(bottomy-topy)/2。
情况I:有效区域缺少上部分或者下部分,则cx=(rightx-leftx)/2,cy=lefty。
其中,cx表示有效区域的圆心在第二直角坐标系中的横坐标,cy表示有效区域的圆心在第二直角坐标系中的纵坐标,topx表示有效区域的上边界在第一直角坐标系中的横坐标,topy表示有效区域的上边界在第一直角坐标系中的纵坐标,bottomx表示有效区域的下边界在第一直角坐标系中的横坐标,bottomy表示有效区域的下边界在第一直角坐标系中的纵坐标,leftx表示有效区域的左边界在第一直角坐标系中的横坐标,lefty表示有效区域的左边界在第一直角坐标系中的纵坐标,rightx表示有效区域的右边界在第一直角坐标系中的横坐标,righty表示有效区域的右边界在第一直角坐标系中的纵坐标。
在一个例子中,电子设备在确定有效区域的圆心坐标后,根据有效区域的圆心坐标,对鱼眼图像中的图像进行旋转变换,得到旋转后的鱼眼图像。例如,对鱼眼图像进行剪切,保留有效区域;根据有效区域的圆心坐标,对有效区域中的图像进行旋转变换,得到旋转后的鱼眼图像。
在一个例子中,电子设备在旋转鱼眼图像的过程中,对鱼眼图像的标注文件中的标注点的坐标进行旋转变化。
例如,电子设备针对鱼眼图像中的像素点,均绕圆心坐标进行同角度的旋转扩充。假设旋转前的图像中某个像素点的坐标为(x1,y1),圆心坐标为(cx,cy),电子设备将像素点绕圆心旋转d度,得到旋转后的标注点的坐标(x1f,y1f)。其中,x1f可以通过公式a计算得到,y1f可以通过公式b计算得到。
公式a:x1f=(x1-cx)×cos(π/180×d)-(y1-cy)×sin(π/180×d)+cx。
公式b:y1f=(x1-cx)×sin(π/180×d)+(y1-cy)×cos(π/180×d)+cy。
其中,x1表示旋转前的标注点的横坐标,y1表示旋转前的标注点的纵坐标,cx表示圆心的横坐标,cy表示圆心的纵坐标,d表示旋转角度。
值得一提的是,根据缺失情况标定的圆心坐标是有效区域的对称中心的坐标,电子设备基于该圆心坐标对有效区域进行旋转增强,提高了旋转增强后得到的鱼眼图像的质量。
需要说明的是,本领域技术人员可以理解,上述方式仅为举例说明,实际应用中,可以根据实际情况,确定旋转后的标注点的位置信息。
需要说明的是,以上仅为举例说明,并不对本发明的技术方案构成限定。
与现有技术相比,本实施方式中提供的鱼眼图像的分析方法,由于有效区域的某个部分缺失时,有效区域的该部分的边界为鱼眼图像的边界,电子设备可以通过比较有效区域的边界信息和鱼眼图像的边界信息,确定鱼眼图像的有效区域是否缺失。除此之外,电子设备根据有效区域的缺失情况来确定有效区域的圆心坐标,相对于未考虑有效区域的缺失情况,直接进行圆心标定的方法,提高了标定的圆心的准确性。除此之外,在标定圆心之后,基于该标定的圆心进行旋转扩充,使得旋转增强后得到的图像的质量更有保障。
上面各种方法的步骤划分,只是为了描述清楚,实现时可以合并为一个步骤或者对某些步骤进行拆分,分解为多个步骤,只要包括相同的逻辑关系,都在本专利的保护范围内;对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计,但不改变其算法和流程的核心设计都在该专利的保护范围内。
本发明的第三实施方式涉及一种电子设备,如图4所示,包括:至少一个处理器401;以及,与至少一个处理器401通信连接的存储器402;其中,存储器402存储有可被至少一个处理器401执行的指令,指令被至少一个处理器401执行,以使至少一个处理器401能够执行上述实施方式提及的鱼眼图像的分析方法。
该电子设备包括:一个或多个处理器401以及存储器402,图4中以一个处理器401为例。处理器401、存储器402可以通过总线或者其他方式连接,图4中以通过总线连接为例。存储器402作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块。处理器401通过运行存储在存储器402中的非易失性软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述鱼眼图像的分析方法。
存储器402可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储选项列表等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施方式中,存储器402可选包括相对于处理器401远程设置的存储器,这些远程存储器可以通过网络连接至外接设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
一个或者多个模块存储在存储器402中,当被一个或者多个处理器401执行时,执行上述任意方法实施方式中的鱼眼图像的分析方法。
上述产品可执行本申请实施方式所提供的方法,具备执行方法相应的功能模块和有益效果,未在本实施方式中详尽描述的技术细节,可参见本申请实施方式所提供的方法。
本发明的第四实施方式涉及一种计算机可读存储介质,存储有计算机程序。计算机程序被处理器执行时实现上述方法实施例。
即,本领域技术人员可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域的普通技术人员可以理解,上述各实施方式是实现本发明的具体实施例,而在实际应用中,可以在形式上和细节上对其作各种改变,而不偏离本发明的精神和范围。