CN115134514B - 图像采集方法、装置以及存储介质 - Google Patents
图像采集方法、装置以及存储介质 Download PDFInfo
- Publication number
- CN115134514B CN115134514B CN202110335929.XA CN202110335929A CN115134514B CN 115134514 B CN115134514 B CN 115134514B CN 202110335929 A CN202110335929 A CN 202110335929A CN 115134514 B CN115134514 B CN 115134514B
- Authority
- CN
- China
- Prior art keywords
- image
- camera module
- determining
- electronic device
- relative position
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000012545 processing Methods 0.000 claims description 29
- 238000013507 mapping Methods 0.000 claims description 18
- 238000012544 monitoring process Methods 0.000 claims description 12
- 230000000694 effects Effects 0.000 claims description 9
- 230000000875 corresponding effect Effects 0.000 description 64
- 238000004891 communication Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000001133 acceleration Effects 0.000 description 8
- 238000007906 compression Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000007306 turnover Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000000608 photoreceptor cell Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/0206—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
- H04M1/0208—Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts
- H04M1/0214—Foldable telephones, i.e. with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本公开是关于一种图像采集方法、装置及存储介质,图像采集方法包括:在检测到拍摄指令时,检测电子设备的姿态,并基于姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,相机模组和显示屏的相对位置关系为可变的;基于相对位置关系,确定对应的出图方式;其中,出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,不同的相对位置关系对应的出图方式不同;基于出图方式对目标对象进行采集,生成彩色图像。这样,可以基于实际检测的相对位置关系,得到各自对应的出图方式,在操作时更有针对性,可以减少图像的镜像问题出现。
Description
技术领域
本公开涉及相机技术领域,尤其涉及一种图像采集方法、装置以及存储介质。
背景技术
随着手机研发的越来越广泛,出现了各种各样的电子设备,且基于电子设备形态的不同,摄像头的配置也存在区别,可能存在前置摄像头和后置摄像头。前置摄像头和后置摄像头在拍摄时由于朝向的不同,当都在同一屏幕上显示时有的朝向下采集生成的图像就会出现镜像问题。而当出现了镜像问题,都是采取的直接对出现镜像问题的图像进行翻转,这样处理方式会出现很多问题,例如原始图像与显示图像不一致的问题,也不利于对折叠屏设备采集的图像的镜像问题的解决。
发明内容
本公开提供一种图像采集方法、装置以及存储介质。
根据本公开实施例的第一方面,提供一种图像采集方法,应用于电子设备,包括:
在检测到拍摄指令时,检测电子设备的姿态,并基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,所述相机模组和所述显示屏的相对位置关系为可变的;
基于所述相对位置关系,确定对应的出图方式;其中,所述出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,所述出图方式用于指示待生成图像的显示效果,不同的相对位置关系对应的出图方式不同;
基于所述出图方式对目标对象进行采集,生成彩色图像。
可选地,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态包括:折叠状态;
所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,确定出图方式为:按照预设的扫描方向,对所述相机模组中预设组合方式的拜耳阵列进行扫描。
可选地,所述可折叠电子设备的姿态还包括:展开状态;所述预设的扫描方向包括:第一扫描方向和第二扫描方向;
所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,确定出图方式为:按照与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对所述相机模组中所述预设组合方式的拜耳阵列进行扫描。
可选地,所述可折叠电子设备的姿态包括:展开状态;
所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,基于对所述相机模组上预设组合方式的拜耳阵列中元素位置的翻转,确定调整组合方式后的拜耳阵列,确定出图方式为:按照所述预设的扫描方向,对所述调整组合方式后的拜耳阵列进行扫描。
可选地,所述基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系,包括:
基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的数据,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。
可选地,所述方法还包括:
读取相机模组对应的硬件抽象层内预设的配置列表,获取所述相对位置关系与出图方式的映射关系;其中,所述配置列表中包括:至少两种所述映射关系;
所述基于所述相对位置关系,确定对应的出图方式,包括:
基于所述相对位置关系和所述映射关系,确定对应的出图方式。
可选地,所述方法还包括:
确定生成的所述彩色图像的图像格式;
基于所述图像格式,对所述彩色图像进行显示处理。
可选地,所述图像格式包括:第一格式和第二格式;其中,所述第二格式的彩色图像能够被应用层调用;
所述基于所述图像格式,对所述彩色图像进行显示处理,包括:
在所述彩色图像的图像格式为第一格式时,基于框架层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,确定对应的出图方式;
基于所述出图方式,将所述彩色图像由第一格式转换成第二格式;
对所述第二格式的彩色图像进行显示。
根据本公开实施例的第二方面,提供一种图像采集装置,应用电子设备,包括:
第一确定模块,用于在检测到拍摄指令时,检测电子设备的姿态,并基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,所述相机模组和所述显示屏的相对位置关系为可变的;
第二确定模块,用于基于所述相对位置关系,确定对应的出图方式;其中,所述出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,所述出图方式用于指示待生成图像的显示效果,不同的相对位置关系对应的出图方式不同;
图像生成模块,用于基于所述出图方式对目标对象进行采集,生成彩色图像。
可选地,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态包括:展开状态;
所述第二确定模块,还用于:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,确定出图方式为:按照预设的扫描方向,对所述相机模组中预设组合方式的拜耳阵列进行扫描。
可选地,所述可折叠电子设备的姿态还包括:展开状态;所述预设的扫描方向包括:第一扫描方向和第二扫描方向;
所述第二确定模块,还用于:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,确定出图方式为:按照与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对所述相机模组中所述预设组合方式的拜耳阵列进行扫描。
可选地,所述可折叠电子设备的姿态还包括:展开状态;
所述第二确定模块,还用于:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,基于对所述相机模组上预设组合方式的拜耳阵列中元素位置的翻转,确定调整组合方式后的拜耳阵列,确定出图方式为:按照所述预设的扫描方向,对所述调整组合方式后的拜耳阵列进行扫描。
可选地,所述第一确定模块,还用于:
基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的数据,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。
可选地,所述装置包括:
获取模块,用于读取相机模组对应的硬件抽象层内预设的配置列表,获取所述相对位置关系与出图方式的映射关系;其中,所述配置列表中包括:至少两种所述映射关系;
所述第二确定模块,还用于:
基于所述相对位置关系和所述映射关系,确定对应的出图方式。
可选地,所述装置包括:
第三确定模块,用于确定生成的所述彩色图像的图像格式;
显示处理模块,用于基于所述图像格式,对所述彩色图像进行显示处理。
可选地,所述图像格式包括:第一格式和第二格式;其中,所述第二格式的彩色图像能够被应用层调用;
所述显示处理模块,还用于:
在所述彩色图像的图像格式为第一格式时,基于框架层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,确定对应的出图方式;
基于所述出图方式,将所述彩色图像由第一格式转换成第二格式;
对所述第二格式的彩色图像进行显示。
根据本公开实施例的第三方面,提供一种图像采集装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:执行所述存储器中存储的可执行指令时,实现上述第一方面的任一项所述的方法。
根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,所述计算机可读存储介质中存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述第一方面任一项提供的方法中的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:
本公开实施例提供的图像采集方法,在检测到拍摄指令时,根据检测的电子设备的姿态,来确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系,由于不同的相对位置关系下,如果采取相同的出图方式来进行图像生成,有的图像就会出现镜像问题,而本公开基于确定的相对位置关系来确定待使用的出图方式,一方面,就可以基于实际检测的相对位置关系,得到各自对应的出图方式,在操作时更有针对性,可以减少图像的镜像问题出现。另一方面,由于是基于确定的出图方式对目标对象进行采集,生成的彩色图像,而不是都先基于原有的出图方式生成图像,再出现镜像问题后再翻转(这样会出现原始图像与显示图像不一致的问题),那么就可以使得图像一开始生成就是得到正确的图像,不会出现原始图像与显示图像不一致的问题。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种图像采集装置的流程图一。
图2是根据一示例性实施例示出的电子设备的展开和折叠状态下的示意图。
图3是根据一示例性实施例示出的拜耳阵列中元素的组合方式的示意图一。
图4是根据一示例性实施例示出的拜耳阵列中元素的组合方式的示意图二。
图5是根据一示例性实施例示出的拜耳阵列中元素的组合方式的示意图三。
图6是根据一示例性实施例示出的拜耳阵列中元素的组合方式的示意图四。
图7是根据一示例性实施例示出的一种图像采集方法的流程图二。
图8是根据一示例性实施例示出的一种图像采集方法的流程图三。
图9是根据一示例性实施例示出的一种图像采集装置的结构示意图。
图10是根据一示例性实施例示出的一种图像采集装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开实施例提供一种图像采集方法,图1是根据一示例性实施例示出的一种图像采集方法的流程图一,如图1所示,该图像采集方法可以包括以下步骤:
步骤101,在检测到拍摄指令时,检测电子设备的姿态,并基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,所述相机模组和所述显示屏的相对位置关系为可变的;
步骤102,基于所述相对位置关系,确定对应的出图方式;其中,所述出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,所述出图方式用于指示待生成图像的显示效果,不同的相对位置关系对应的出图方式不同;
步骤103,基于所述出图方式对目标对象进行采集,生成彩色图像。
示例性地,该图像采集方法可以应用于任意的电子设备,该电子设备可以是:智能手机、平板电脑或者可穿戴式电子设备等。在一些可能的实施例中,该电子设备可以是可折叠电子设备或者非可折叠电子设备。
示例性地,当电子设备为非可折叠电子设备时,电子设备可以包括:第一表面和第二表面,所述第一表面与第二表面相反,且第一表面上安装有显示屏(第二表面也可安装有显示屏),当电子设备上安装有相机模组时,该相机模组是可活动的,即相机模组的采集面是可翻转的,可以从与所述第一表面同侧,翻转到与第二表面处于同侧,换而言之,所述相机模组和所述显示屏的相对位置关系不是固定不变的,而是处于变化中的。
示例性地,当电子设备为可折叠电子设备时,可折叠电子设备可以包括:第一表面和第二表面,所述第一表面与第二表面在可折叠电子设备展开时呈对称相反分布。所述第一表面和第二表面上均可安装显示屏。当可折叠电子设备是处于折叠状态时,第一表面上的显示屏被折叠闭合,此时可以将第一表面上的显示屏称为内屏,则第二表面上的显示屏称为外屏。位于外屏的相机模组和位于内屏的相机模组的位置不会相对固定,是处于变化中的。例如,如图2所示,图2是根据一示例性实施例示出的电子设备的展开和折叠状态下的示意图,在图2的左图中,当可折叠电子设备是处于折叠状态时,此时外屏上安装有相机模组201,所述相机模组201的采集面朝向第一侧,但随着折叠电子设备的展开,如图2右图所示,该外屏上安装的相机模组201旋转至了采集面朝向第二侧的位置,其中,第二侧与第一侧相反。换而言之,若将可折叠电子设备处于折叠状态时,外屏上安装的相机模组称为前置相机模组,则随着可折叠电子设备的展开,外屏上安装的相机模组的采集面的朝向发生变化,由前置相机模组变为了后置相机模组。
本公开实施例中,电子设备无论是可折叠电子设备或者非可折叠电子设备,对于所述的电子设备来说,相机模组在采集图像后,当需要在与相机模组的采集面同侧的显示屏上进行显示时,就会得到与镜子中自己看到的自己相反的图像,为了解决该视觉上相反的问题,可以自动对生成的图像进行左右翻转,进而将翻转后的图像传送给应用层进行调用,实现在同侧的显示屏上进行显示,如此,可以解决所述在显示上相反的问题,如目前的安卓手机自拍时就会默认得到镜像的图像。
对于相机模组与显示屏不同侧的情况,如果在拍摄后默认自动对生成的图像进行翻转,再传送给应用层进行调用,在相反侧的显示屏上显示时,就会出现眼镜看到的内容与图像的内容相反的情况,这是因为,原始采集的图像本身在显示在显示器上时就是与人眼看到的情况相同,默认设置的翻转相反会导致镜像出现。示例性地,当电子设备为可折叠电子设备时,当相机模组位于外屏侧时,随着显示屏的展开,相机模组的朝向就会变为相反的朝向,此时基于显示展开后的相机模组采集图像,进而在内屏显示所述图像时,就会由于默认设置的镜像反转看到相反视觉效果的图像,这与人眼看的效果会相反,影响使用体验。
而发生这种情况是因为:展开使用时,原来的相机模组的朝向发生了变化,此时前置相机模组变为了后置相机模组,但是上层应用层并不知道所述相机模组的位置变化,依然是按照前置相机模组所默认设置的翻转操作来执行处理:拿到底层传过来的图像后,设置一下镜像翻转,那么这时候,从内屏看到的图就会默认就产生了镜像,出现相反的显示效果,但实际上不应该主动设置镜像翻转操作。
如此,本公开对执行图像采集的相机模组与待执行图像显示的显示屏不在同一侧时,所出现的镜像问题进行处理,以消除出现相反的视觉呈现。
而为了解决这种不在同一侧时的镜像问题,需要确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。在一些可能的实施例中,该相对位置关系包括:位于相反侧或者位于相同侧(同一面)。
若当前执行图像采集的相机模组与执行图像显示的显示屏位于同一侧时,可以认为该相机模组是前置相机模组;若当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,可以认为该相机模组是后置相机模组。
在一些可能的实施例中,可以通过姿态传感器检测电子设备的姿态,来确定电子设备当前执行图像采集的相机模组与待执行图像显示的显示屏的相对位置关系。
所述姿态传感器可以包括:加速度传感器和陀螺仪。
示例性地,对于可折叠电子设备而言,两侧的壳体内均设置有加速度传感器,当显示屏从折叠变为展开时,至少会出现处于折叠轴一侧的某一显示屏会发生移动,则可以基于加速度传感器检测的移动方向,即可确定显示屏时处于折叠状态还是展开状态。
可以理解地,在一些可能的实现方式中,姿态传感器可以包括:距离传感器,例如红外距离传感器,可以通过距离传感器感测可折叠电子设备的折叠或展开状态。
再一示例性地,对于非可折叠电子设备而言,壳体内和相机模组内设置有加速度传感器,当相机模组从朝向电子设备的第一面旋转为朝向第二面时(第一面与第二面相反),在加速度传感器的检测数据上会有体现,可以基于检测的数据确定相机模组是否发生翻转。对应的,显示屏也发生翻转时,在加速度传感器的检测数据上也会有体现,则基于检测的移动方向和角度变化距离,即可确定电子设备的姿态;如此,结合对显示屏是否翻转的检测和对相机模组是否翻转的检测,两者结合即可判断当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。
所述姿态包括:显示屏展开或折叠的姿态,以及显示屏的朝向变化姿态。
在检测到电子设备当前的姿态后,若进一步检测到拍摄指令,则可以基于检测的拍摄指令确定当前执行图像采集的相机模组是哪一个,以及当前执行图像显示的显示屏是哪一个。在确定了具体的相机模组和显示屏后,基于上述检测的电子设备的姿态,就可以确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。进而就可以基于所述相对位置关系,确定对应的出图方式,进而生成彩色图像。
所述拍摄指令中可以包括有:待执行图像显示的显示屏的标识,即在图像采集的同时也指定了图像的显示位置,这样便于灵活控制图像的显示,方便用户观看。
作为一个可能的示例,在可折叠电子设备上,当检测到拍摄指令时,如果确定了当前执行图像采集的相机模组为1号相机模组,执行图像显示的显示屏为1号显示屏,1号相机模组位于1号显示屏相背的显示器上,且检测到可折叠电子设备此时处于展开状态,则1号相机模组与1号显示屏就是位于相反侧。
对于相反侧的位置分布,如果采用与相同侧的位置分布相同的出图方式,就会出现镜像问题,如此,本公开实施例通过控制各个相对位置关系下的出图方式,来实现生成的图像没有镜像问题。在本公开实施例中,为每种相对位置关系设置对应的出图方式,来得到无镜像的图像。
所述出图方式用于指示待生成图像的显示效果;出图方式的不同,会得到布局方向不一样的图像。所述出图方式可以包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少中的至少之一。
所述拜耳阵列也称为:彩色滤光片阵列,是实现电荷耦合器件(CCD)或金属氧化物半导体(CMOS)传感器拍摄彩色图像的技术,用于控制相机模组传感器上各个感光元上的入光颜色。拜耳阵列可以是2*2的4个方块组成,每个方块对应一种颜色,以2*2的最小方块来看,拜耳阵列是一个有规律的排列,如图3所示,拜耳阵列由交替排列的绿红和蓝绿滤光片组成,遵循绿(G)红(R)蓝(B)绿(G)的组合排布。
拜耳阵列中的元素即可以为绿(G)红(R)蓝(B)等元素。
所述拜耳阵列可以包括的绿色传感器是红色或蓝色传感器的两倍,这样设计的一个原因是人眼对绿色更为敏感,所以使用了更多的绿色滤光片采集绿色。另一个原因是与每种颜色均等相比,带有绿色像素的冗余所产生的图像噪声更少,并且具有更好的细节。
示例性地,相机模组采集到的最原始的图像数据信息是RAW格式的,而在显示器上看到的是对RAW格式的图像进行压缩处理后得到的图像(如JPEG格式的图像或TIFF格式的图像)。相机模组使用数百万个微小的感光元来记录图像。当按下相机模组的快门按钮并开始曝光时,每一个感光元都会收集光子并将其存储为电信号。由于这些感光元无法区分每种颜色的数量,因此生成的是灰度图像。为了捕获彩色图像,就可以在每个感光元上放置一个滤镜,该滤镜允许通过特定颜色的光。而所述滤镜就可以是由交替排列的绿红和蓝绿滤光片组成的拜耳阵列。
根据拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向至少中的至少之一出图方式时,基于拜耳阵列中元素的组合方式的不变和可变,可以从不同的处理方向得到出图方式。具体说明如下:
当拜耳阵列中元素的组合方式不变时,可以通过对拜耳阵列的扫描方向的改变,得到不同的出图方式。例如,图3至图6是根据一示例性实施例示出的拜耳阵列的一些元素的组合方式的示意图,其中,如图3所示,当相机模组上的传感器支持的拜耳阵列为第一行为:绿(G)红(R),第二行为:蓝(B)绿(G)时,则按照由上至下的顺序对每一行进行从左到右的扫描方式来进行出图,则得到的出图方式为GRBG。当按照由下至上的顺序对每一行进行从左到右的扫描方式来进行出图,则得到的出图方式为BGGR。
在一些可能的实施例中,对于这种拜耳阵列中元素的组合方式不变,而对拜耳阵列的扫描方向改变时的方案,可以通过软件层面的配置,得到不同的出图方式,即:在拜耳阵列中元素的组合方式固定不变的基础上,通过改变对所述拜耳阵列所进行的扫描方向,来得到不同的出图方式。例如,拜耳阵列中元素的组合方式固定不变可以是:拜耳阵列中的元素的组合方式保持第一行GR,第二行BG不变。
示例性地,若拜耳阵列中的元素的组合方式为第一行GR,第二行BG,则可以基于由上至下的顺序对每一行进行从左到右的扫描方式的扫描,得到的出图方式为GRBG;当需要其他出图方式时,就通过发出控制指令控制扫描方向发生改变,如:由下至上的顺序对每一行进行从左到右的扫描,得到的出图方式为BGGR。
当拜耳阵列中元素的组合方式可变时,可以通过对拜耳阵列的旋转和翻转,得到不同的出图方式。例如,如图3所示,当相机模组上的传感器支持的拜耳阵列为第一行为:绿(G)红(R),第二行为:蓝(B)绿(G)时,此时得到的出图方式为GRBG。当需要改变拜耳阵列中元素的组合方式时,对该组合方式的拜耳阵列中的元素先进行一次顺时针90度的旋转,得到图4所示的排布(第一行可以为:BG,第二行可以为:GR),再将图4所示的排布进行左右翻转(即对左右两列元素进行翻转),得到图5所示的排布(第一行可以为:GB,第二行可以为:RG),再将图5所示的排布进行逆时针90度的旋转,得到图6所示的排布(第一行可以为:BG,第二行可以为:GR),那么对图6得到的拜耳阵列按照由上至下的顺序对每一行进行从左到右的扫描时,得到的出图方式为BGGR。
在这种拜耳阵列中元素的组合方式可变的实施例中,由于拜耳阵列由交替排列的绿红和蓝绿滤光片组成的,那么在一些可能的实施例中,可以通过在相机模组内设置转轴,来带动对应的滤光片的活动,就可以实现对拜耳阵列的旋转和翻转。图3和图6是模拟可折叠电子设备由折叠变为展开时,随着相机模组与执行图像显示的显示屏的相对位置关系从同一侧变相反侧,所对应的拜耳阵列中元素的组合方式的变化。所述图3所示的是可折叠电子设备变为折叠状态时,位于外屏的相机模组上预设的拜耳阵列中元素的组合方式(第一行可以为GR,第二行可以为BG),当可折叠电子设备变为展开时,拜耳阵列中元素的组合方式进行一次翻转,而经过图3至图4的旋转和图5至图6的旋转,最终使得相机模组与执行图像显示的显示屏的相对位置关系从同一侧变为相反侧。
本公开实施例中,当想要得到不同方向的图像时,就可以设置不同的出图方式,从而得到对应效果的图像。
以可折叠电子设备为例,假设所述相机模组的感光元上的拜耳阵列是图3所示的这种排布方式的拜耳阵列,即拜耳阵列的第一行可以为GR,第二行可以为BG时,如果待显示的显示器与该相机模组的朝向相反,则如果还基于GRBG的出图方式来生成图像,就会得到视觉上相反的图像。此时基于与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对所述相机模组中所述预设组合方式的拜耳阵列进行扫描,得到的出图方向就是BGGR,以BGGR的出图方式对目标图像进行采集,可以生成没有镜像的彩色图像。
示例性地,如果待显示的显示器与该相机模组的朝向相同,则在视觉上不会有相反的镜像问题,那么可以直接基于原有的GRBG的出图方式目标图像进行采集,就可以生成没有镜像的彩色图像。
如此,本公开实施例通过当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系的不同,为各个相对位置关系设置对应的出图方式,直接基于该出图方式对目标对象进行采集,就可以生成没有镜像的图像。
示例性地,以电子设备可以为可折叠电子设备为例,对相对位置关系与出图方式的对应关系,进行说明:
在一些可能的实施例中,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态包括:折叠状态;
步骤102中,所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,确定出图方式为:按照预设的扫描方向,对所述相机模组中预设组合方式的拜耳阵列进行扫描。
示例性地,所述预设扫描方向可以为相机模组上默认的扫描方向。
所述预设扫描方向可以包括:第一扫描方向和第二扫描方向。预设的所述第一扫描方向可以包括:从左到右的扫描方向。预设的所述第二扫描方向包括:由上至下的扫描方向。
那么,当电子设备为可折叠电子设备,所述可折叠电子设备的姿态为折叠状态时,就按照由上至下的顺序对每一行进行从左到右的扫描,那么对图3的拜耳阵列按照由上至下的顺序对每一行进行从左到右时,得到的出图方式可以为GRBG,按照GRBG对目标对象进行采集即可生成没有镜像的彩色图像。
在一些可能的实施例中,所述可折叠电子设备的姿态还包括:展开状态;
步骤102中,所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,确定出图方式为:按照与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对所述相机模组中所述预设组合方式的拜耳阵列进行扫描。
示例性地,当预设的所述第二扫描方向为由上至下的扫描方向,与所述第二扫描方向相反的扫描方向就为由下至上的扫描方向。
本公开实施例中,当可折叠电子设备的姿态为展开状态时,就按照与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对图3的拜耳阵列进行扫描,得到的出图方式可以为BGGR,按照BGGR对目标对象进行采集即可生成没有镜像的彩色图像。
在一些可能的实施例中,所述电子设备可以为可折叠电子设备,所述可折叠电子设备的姿态可以包括:展开状态;
所述基于所述相对位置关系,确定对应的出图方式,可以包括:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,确定出图方式为:基于对所述相机模组上预设组合方式的拜耳阵列中元素位置的翻转,确定调整组合方式后的拜耳阵列,按照所述预设的扫描方向,对所述调整组合方式后的拜耳阵列进行扫描。
本公开实施例中,可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,就是可折叠电子设备从折叠状态变可以为展开状态时,位于外屏上的相机模组,和内屏的相对位置关系。此时,若所述相机模组上预设的拜耳阵列中元素的组合方式可以为:第一行为GR,第二行为BG,则可以通过对拜耳阵列中元素的组合方式进行(如图3至图6的)翻转和旋转,得到图6所示的排布(第一行可以为:BG,第二行可以为:GR)。在这一组合方式的拜耳阵列上按照预设的扫描方向进行扫描,得到出图方式为BGGR。
在一些可能的实施例中,所述电子设备可以为可折叠电子设备,所述可折叠电子设备的姿态可以包括:折叠状态;
所述基于所述相对位置关系,确定对应的出图方式,可以包括:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,确定出图方式为:按照预设的扫描方向对所述相机模组上预设组合方式的拜耳阵列进行扫描。
本公开实施例中,可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时。由于基于原有的出图方式在显示上是正常的,不会出现视觉上的相反,那么就可以基于原有的出图方式来采集目标对象。
若所述相机模组上预设的拜耳阵列中元素的组合方式包括:第一行可以为GR,第二行可以为BG,则按照预设扫描方向对所述相机模组上预设的拜耳阵列进行扫描,得到的出图方式就是GRBG。
在一些可能的实施例中,所述确定电子设备上相机模组的朝向,可以包括:
基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测屏幕状态的姿态传感器所采集的数据,确定位于所述屏幕上的所述相机模组的朝向。
所述硬件抽象层(Hardware Abstract Layer,HAL)是位于操作系统内核与硬件电路之间的接口层,用于将硬件抽象化。本公开实施例中,为了调用位于底层的相机模组,则可以在所述硬件抽象层上构建相机模组对应的硬件抽象层(Camera HAL),基于该相机模组对应的硬件抽象层来控制相机模组的运行。
示例性地,该电子设备的通讯架构可以包括:应用层(Applications层)、框架层(Framework层)、系统运行库层(Libraries)、内核层(Linux Kernel层)和基带层(Baseband层)。其中,内核层可以包括:硬件抽象层(Hardware Abstract Layer,HAL)。应用层主要是各个场景的典型应用;比如短信应用、图像应用、通讯录应用等。框架层是该操作系统的架构层,主要获取底层上报的图像采集参数和网络状态等基础消息,实现数据包的传递。硬件抽象层主要负责控制开启相机模组设备,并设置相机模组的各种参数,并将数据包发送给内核层。内核层主要负责设备驱动和Linux TCP/IP协议的处理。
这样,在基于检测的拍摄指令来生成图像时,就将控制指令发生给相机模组对应的硬件抽象层,基于相机模组对应的硬件抽象层来控制相机模组实现图像采集。本公开实施例中,为了使得在各个相机与显示器的相对位置关系下,都可以基于设置好的出图方式,生成正确的没有视觉上镜像的图像,那么在执行采集时,就可以在相机模组对应的硬件抽象层控制相机模组实现图像采集之前,先基于基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,基于该姿态数据,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。
在一些可能的实施例中,图7是根据一示例性实施例示出的一种图像采集方法的流程图三,如图7所示,所述方法还可以包括:
步骤104,读取相机模组对应的硬件抽象层内预设的配置列表,获取所述相对位置关系与出图方式的映射关系;其中,所述配置列表中可以包括:至少两种所述映射关系;
所述基于所述相对位置关系,确定对应的出图方式,可以包括:
基于所述相对位置关系和所述映射关系,确定对应的出图方式。
本公开实施例中,为了在每次拍摄时可以快速地确定出图方式,可以预先在相机模组对应的硬件抽象层内预设的配置列表中,存储相对位置关系与出图方式的映射关系,这样,在基于监听确定出:当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系后,直接通过查表就可以确定对应的出图方式。
示例性地:当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系为位于相反侧时,确定的出图方式可以为:BGGR;当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系可以为位于相同侧时,确定的出图方式为:GRBG。
在其他可能的实施例中,随着当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系的变化,可以确定不同的出图方式。如此,所述配置列表中可以包括:多种映射关系。
这种预先设置所述相对位置关系与出图方式的映射关系的方式,可以加快处理速度,在处理上更为方便。
在一些可能的实施例中,所述方法还可以包括:
确定生成的所述彩色图像的图像格式;
基于所述图像格式,对所述彩色图像进行显示处理。
在一些可能的实施例中,所述图像格式可以包括:RAW格式、JPEG格式或TIFF格式。其中,所述RAW格式是未经处理、也未经压缩的格式,即原始的图像数据;RAW格式的原始图像数据,应用层无法解析。JPEG格式或TIFF格式是经过压缩处理后的图像数据。如此,本公开实施例中,所述图像格式可以包括:无法被应用层调用的第一格式和能够被应用层调用的第二格式;那么,JPEG格式或TIFF格式即为第二格式,RAW格式为第一格式。
由于上述实施例中的步骤101至103执行的是图像的生成,此时生成的可能是原始图像(如RAW格式的图像),也可能是经过处理的图像(如JPEG格式)。
若是RAW格式的原始图像,由于应用层无法解析该数据,使得生成的图像无法被应用层调用,因此,为了减少由于生成的是RAW格式的原始图像所导致的无法解析,在一些可能的实施例中,在将生成的图像送至应用层进行显示之前,可以先确定生成的所述彩色图像的图像格式,进而对不同的图像格式执行对应的显示处理,以此减少由于直接显示所带来的显示错误的问题。
在一些可能的实施例中,所述基于所述图像格式,对所述彩色图像进行显示处理,可以包括:
在所述彩色图像的图像格式为第一格式时,基于框架层,监听所述电子设备上用于检测屏幕状态的姿态传感器所采集的数据,确定对应的出图方式;
基于所述出图方式,将所述彩色图像由第一格式转换成第二格式;
对所述第二格式的彩色图像进行显示。
如上所述,第一格式是无法被应用层调用的格式,那么当彩色图像的图像格式为第一格式时,就需要对所述第一格式的彩色图像进行压缩处理,转化成第二格式的彩色图像。
本公开实施例中,在压缩处理中需要获知图像生成时所需的出图方式,这样才能正确解析第一格式的图像,生成对应的第二格式的图像。
所述压缩处理可以在框架层进行;示例性地,基于框架层的相机服务,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,获取对应的拜耳阵列的所述扫描方向。
在系统启动时,就会启动相机服务(CameraProvider),相机服务将相机模组对应的硬件抽象层从相机服务进程中分离出来,作为一个独立进程,以此来控制相机模组对应的硬件抽象层。而相机服务在压缩处理之前,需要确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系,进而基于该相对位置关系,确定对应的出图方式,进而结合所述出图方式来对所述第一格式的彩色图像执行压缩处理。
所述相机服务包含在框架层内,在操作系统中起到承上启下的作用,向上与相机应用层交互,向下与相机模组对应的硬件抽象层交互。
示例性的,图8是根据一示例性实施例示出的一种图像采集方法中框架层与硬件抽象层的调用示意图,如图8所示,在检测到拍摄指令后,相机应用层将该拍摄指令传输至框架层801内的相机服务,相机服务将通过相机模组对应的硬件抽象层所提供的接口,将所述拍摄指令传输至相机模组对应的硬件抽象层802,相机模组对应的硬件抽象层802基于所述拍摄指令,通过调用底层硬件(如相机模组)生成彩色图像,进而经由相机模组对应的硬件抽象层802一层层向上返回所述彩色图像,实现在显示屏上的显示。
此时生成彩色图像的过程中,需要基于确定的出图方式来控制彩色图像的生成,对应的显示时,如果格式需要处理,则还是需要基于确定的出图方式来控制彩色图像的压缩处理,得到能够被应用层调用的第二格式的彩色图像。在相机模组对应的硬件抽象层802中,所述出图方式可以基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的数据,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。在框架层801中,所述出图方式可以基于框架层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,确定对应的出图方式。
在所述彩色图像的图像格式为第一格式时,基于框架层监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,所确定出的出图方式应该与所述第一图像在采集时的一致,即在一些可能的实施例中,确定的出图方式为:BGGR。
本公开实施例提供的图像采集方法,在检测到拍摄指令时,根据检测的电子设备的姿态,来确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系,由于不同的相对位置关系下,如果采取相同的出图方式来进行图像生成,有的图像就会出现镜像问题,而本公开基于确定的相对位置关系来确定待使用的出图方式,一方面,就可以基于实际检测的相对位置关系,得到各自对应的出图方式,在操作时更有针对性,可以减少图像的镜像问题出现。另一方面,由于是基于确定的出图方式对目标对象进行采集,生成的彩色图像,而不是都先基于原有的出图方式生成图像,再出现镜像问题后再翻转(这样会出现原始图像与显示图像不一致的问题),那么就可以使得图像一开始生成就是得到正确的图像,不会出现原始图像与显示图像不一致的问题。
本公开还提供一种图像采集装置,图9是根据一示例性实施例示出的一种图像采集装置的结构示意图,如图9所示,所述图像采集装置900,可以包括:
第一确定模块901,用于在检测到拍摄指令时,检测电子设备的姿态,并基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,所述相机模组和所述显示屏的相对位置关系为可变的;
第二确定模块902,用于基于所述相对位置关系,确定对应的出图方式;其中,所述出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,所述出图方式用于指示待生成图像的显示效果,不同的相对位置关系对应的出图方式不同;
图像生成模块903,用于基于所述出图方式对目标对象进行采集,生成彩色图像。
在一些可能的实施例中,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态可以包括:展开状态;
所述第二确定模块,还可以用于:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,确定出图方式为:按照预设的扫描方向,对所述相机模组中预设组合方式的拜耳阵列进行扫描。
在一些可能的实施例中,所述可折叠电子设备的姿态还包括:展开状态;所述预设的扫描方向包括:第一扫描方向和第二扫描方向;
所述第二确定模块,还用于:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,确定出图方式为:按照与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对所述相机模组中所述预设组合方式的拜耳阵列进行扫描。
在一些可能的实施例中,所述可折叠电子设备的姿态还包括:展开状态;
所述第二确定模块,还用于:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,基于对所述相机模组上预设组合方式的拜耳阵列中元素位置的翻转,确定调整组合方式后的拜耳阵列,确定出图方式为:按照所述预设的扫描方向,对所述调整组合方式后的拜耳阵列进行扫描。
在一些可能的实施例中,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态可以包括:折叠状态;
所述第二确定模块,还可以用于:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,按照预设扫描方向对所述相机模组上所述预设的拜耳阵列进行扫描,确定出图方式。
在一些可能的实施例中,所述第一确定模块,还可以用于:
基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的数据,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。
在一些可能的实施例中,所述装置可以包括:
获取模块,用于读取相机模组对应的硬件抽象层内预设的配置列表,获取所述相对位置关系与出图方式的映射关系;其中,所述配置列表中包括:至少两种所述映射关系;
所述第二确定模块,还可以用于:
基于所述相对位置关系和所述映射关系,确定对应的出图方式。
在一些可能的实施例中,所述装置可以包括:
第三确定模块,用于确定生成的所述彩色图像的图像格式;
显示处理模块,用于基于所述图像格式,对所述彩色图像进行显示处理。
在一些可能的实施例中,所述图像格式可以包括:第一格式和第二格式;其中,所述第二格式的彩色图像能够被应用层调用;
所述显示处理模块,还可以用于:
在所述彩色图像的图像格式为第一格式时,基于框架层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,确定对应的出图方式;
基于所述出图方式,将所述彩色图像由第一格式转换成第二格式;
对所述第二格式的彩色图像进行显示。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图10是根据一示例性实施例示出的一种图像采集装置1800的框图。例如,装置1800可以是移动电话、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。
参照图10,装置1800可以包括以下一个或多个组件:处理组件1802,存储器1804,电力组件1806,多媒体组件1808,音频组件1810,输入/输出(I/O)接口1812,传感器组件1814,以及通信组件1816。
处理组件1802通常控制装置1800的整体操作,诸如与显示、电话呼叫、数据通信、相机操作和记录操作相关联的操作。处理组件1802可以包括一个或多个处理器1820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件1802还可以包括一个或多个模块,便于处理组件1802和其他组件之间的交互。例如,处理组件1802可以包括多媒体模块,以方便多媒体组件1808和处理组件1802之间的交互。
存储器1804被配置为存储各种类型的数据以支持在装置1800的操作。这些数据的示例包括用于在装置1800上操作的任何应用程序或方法的指令、联系人数据、电话簿数据、消息、图像、视频等。存储器1804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、快闪存储器、磁盘或光盘。
电力组件1806为装置1800各种组件提供电力。电力组件1806可以包括:电源管理系统,一个或多个电源,及其他与为装置1800生成、管理和分配电力相关联的组件。
多媒体组件1808包括在所述装置1800和用户之间提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件1808包括一个前置摄像头和/或后置摄像头。当装置1800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和/或后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1810被配置为输出和/或输入音频信号。例如,音频组件1810包括一个麦克风(MIC),当装置1800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1804或经由通信组件1816发送。在一些实施例中,音频组件1810还包括一个扬声器,用于输出音频信号。
I/O接口1812为处理组件1802和外围接口模块之间提供接口,上述外围接口模块可以是键盘、点击轮、按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1814包括一个或多个传感器,用于为装置1800提供各个方面的状态评估。例如,传感器组件1814可以检测到装置1800的打开/关闭状态、组件的相对定位,例如所述组件为装置1800的显示器和小键盘,传感器组件1814还可以检测装置1800或装置1800一个组件的位置改变,用户与装置1800接触的存在或不存在,装置1800方位或加速/减速和装置1800的温度变化。传感器组件1814可以包括接近传感器,被配置为在没有任何的物理接触时检测附近物体的存在。传感器组件1814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件1814还可以包括加速度传感器、陀螺仪传感器、磁传感器、压力传感器或温度传感器。
通信组件1816被配置为便于装置1800和其他设备之间有线或无线方式的通信。装置1800可以接入基于通信标准的无线网络,如WiFi、2G或3G,或它们的组合。在一个示例性实施例中,通信组件1816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术、超宽带(UWB)技术、蓝牙(BT)技术或其他技术来实现。
在示例性实施例中,装置1800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器1804,上述指令可由装置1800的处理器1820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由处理器执行时,使得能够执行上述方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由所附的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (10)
1.一种图像采集方法,其特征在于,应用于电子设备,包括:
在检测到拍摄指令时,检测电子设备的姿态,并基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,所述相机模组和所述显示屏的相对位置关系为可变的;
基于所述相对位置关系,确定对应的出图方式;其中,所述出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,所述出图方式用于指示待生成图像的显示效果,不同的相对位置关系对应的出图方式不同;
基于所述出图方式对目标对象进行采集,生成彩色图像。
2.根据权利要求1所述的方法,其特征在于,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态包括:折叠状态;
所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于折叠状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相同侧时,确定出图方式为:按照预设的扫描方向,对所述相机模组中预设组合方式的拜耳阵列进行扫描。
3.根据权利要求1所述的方法,其特征在于,所述电子设备为可折叠电子设备,所述可折叠电子设备的姿态还包括:展开状态;预设的扫描方向包括:第一扫描方向和第二扫描方向;
所述基于所述相对位置关系,确定对应的出图方式,包括:
在所述可折叠电子设备处于展开状态,且当前执行图像采集的相机模组与执行图像显示的显示屏位于相反侧时,确定出图方式为:按照与所述第二扫描方向相反的扫描方向,以及与所述第一扫描方向相同的扫描方向,对所述相机模组中预设组合方式的拜耳阵列进行扫描。
4.根据权利要求1所述的方法,其特征在于,所述基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系,包括:
基于相机模组对应的硬件抽象层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的数据,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系。
5.根据权利要求1或4所述的方法,其特征在于,所述方法还包括:
读取相机模组对应的硬件抽象层内预设的配置列表,获取所述相对位置关系与出图方式的映射关系;其中,所述配置列表中包括:至少两种所述映射关系;
所述基于所述相对位置关系,确定对应的出图方式,包括:
基于所述相对位置关系和所述映射关系,确定对应的出图方式。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定生成的所述彩色图像的图像格式;
基于所述图像格式,对所述彩色图像进行显示处理。
7.根据权利要求6所述的方法,其特征在于,所述图像格式包括:第一格式和第二格式;其中,所述第二格式的彩色图像能够被应用层调用;
所述基于所述图像格式,对所述彩色图像进行显示处理,包括:
在所述彩色图像的图像格式为第一格式时,基于框架层,监听所述电子设备上用于检测电子设备的姿态的姿态传感器所采集的姿态数据,确定对应的出图方式;
基于所述出图方式,将所述彩色图像由第一格式转换成第二格式;
对所述第二格式的彩色图像进行显示。
8.一种图像采集装置,其特征在于,应用于电子设备,包括:
第一确定模块,用于在检测到拍摄指令时,检测电子设备的姿态,并基于所述姿态,确定当前执行图像采集的相机模组与执行图像显示的显示屏的相对位置关系;其中,所述相机模组和所述显示屏的相对位置关系为可变的;
第二确定模块,用于基于所述相对位置关系,确定对应的出图方式;其中,所述出图方式包括:拜耳阵列中元素的组合方式和对拜耳阵列所执行的扫描方向中的至少之一,所述出图方式用于指示待生成图像的显示效果,不同的相对位置关系对应的出图方式不同;
图像生成模块,用于基于所述出图方式对目标对象进行采集,生成彩色图像。
9.一种图像采集装置,其特征在于,包括:
处理器和用于存储能够在所述处理器上运行的可执行指令的存储器,其中:
处理器用于运行所述可执行指令时,所述可执行指令执行上述权利要求1至7任一项提供的方法中的步骤。
10.一种非临时性计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述权利要求1至7任一项提供的方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110335929.XA CN115134514B (zh) | 2021-03-29 | 2021-03-29 | 图像采集方法、装置以及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110335929.XA CN115134514B (zh) | 2021-03-29 | 2021-03-29 | 图像采集方法、装置以及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115134514A CN115134514A (zh) | 2022-09-30 |
CN115134514B true CN115134514B (zh) | 2024-05-14 |
Family
ID=83375156
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110335929.XA Active CN115134514B (zh) | 2021-03-29 | 2021-03-29 | 图像采集方法、装置以及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115134514B (zh) |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017126980A (ja) * | 2016-01-08 | 2017-07-20 | オリンパス株式会社 | 情報処理装置、撮像装置、表示装置、情報処理方法、撮像装置の制御方法、表示装置の制御方法、情報処理プログラム、撮像装置の制御プログラム、および表示装置の制御プログラム |
CN107682635A (zh) * | 2017-10-19 | 2018-02-09 | 广东欧珀移动通信有限公司 | 图像拍摄方法、装置、终端及存储介质 |
CN107770513A (zh) * | 2017-11-07 | 2018-03-06 | 广东欧珀移动通信有限公司 | 图像采集方法及装置、终端 |
CN108605096A (zh) * | 2016-11-29 | 2018-09-28 | 华为技术有限公司 | 一种电子设备拍摄方法和装置 |
CN108668062A (zh) * | 2018-05-23 | 2018-10-16 | Oppo广东移动通信有限公司 | 图像数据生成方法、装置及电子装置 |
CN108780504A (zh) * | 2015-12-22 | 2018-11-09 | 艾奎菲股份有限公司 | 深度感知三目相机系统 |
CN109635578A (zh) * | 2018-12-07 | 2019-04-16 | 上海交通大学 | 一种基于非线性空间频率特性的安全二维码通信方法 |
JP2019513310A (ja) * | 2016-02-23 | 2019-05-23 | ジェラルド ディルク スミッツ | ホログラフィックビデオキャプチャー及びテレプレゼンスシステム |
CN110891098A (zh) * | 2018-09-07 | 2020-03-17 | Oppo广东移动通信有限公司 | 移动终端的控制方法和装置、移动终端、可读存储介质 |
CN111479074A (zh) * | 2020-03-12 | 2020-07-31 | 北京爱芯科技有限公司 | 图像采集方法、装置、计算机设备和存储介质 |
CN111756985A (zh) * | 2019-03-26 | 2020-10-09 | 北京小米移动软件有限公司 | 图像拍摄方法、装置和存储介质 |
CN112087611A (zh) * | 2020-09-07 | 2020-12-15 | Oppo广东移动通信有限公司 | 电子设备及其显示屏调节方法 |
CN112216806A (zh) * | 2019-07-12 | 2021-01-12 | 佳能株式会社 | 发光装置、曝光系统、摄像显示装置、摄像装置、电子装置、照明装置和移动物体 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100201808A1 (en) * | 2009-02-09 | 2010-08-12 | Microsoft Corporation | Camera based motion sensing system |
US8482636B2 (en) * | 2010-05-05 | 2013-07-09 | DigitalOptics Corporation Europe Limited | Digital zoom on bayer |
KR20140125984A (ko) * | 2013-04-19 | 2014-10-30 | 삼성전자주식회사 | 영상 처리 방법 및 이를 지원하는 전자 장치와 시스템 |
JP2019080223A (ja) * | 2017-10-26 | 2019-05-23 | 株式会社ソニー・インタラクティブエンタテインメント | カメラシステム |
-
2021
- 2021-03-29 CN CN202110335929.XA patent/CN115134514B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108780504A (zh) * | 2015-12-22 | 2018-11-09 | 艾奎菲股份有限公司 | 深度感知三目相机系统 |
JP2017126980A (ja) * | 2016-01-08 | 2017-07-20 | オリンパス株式会社 | 情報処理装置、撮像装置、表示装置、情報処理方法、撮像装置の制御方法、表示装置の制御方法、情報処理プログラム、撮像装置の制御プログラム、および表示装置の制御プログラム |
JP2019513310A (ja) * | 2016-02-23 | 2019-05-23 | ジェラルド ディルク スミッツ | ホログラフィックビデオキャプチャー及びテレプレゼンスシステム |
CN108605096A (zh) * | 2016-11-29 | 2018-09-28 | 华为技术有限公司 | 一种电子设备拍摄方法和装置 |
CN107682635A (zh) * | 2017-10-19 | 2018-02-09 | 广东欧珀移动通信有限公司 | 图像拍摄方法、装置、终端及存储介质 |
CN107770513A (zh) * | 2017-11-07 | 2018-03-06 | 广东欧珀移动通信有限公司 | 图像采集方法及装置、终端 |
CN108668062A (zh) * | 2018-05-23 | 2018-10-16 | Oppo广东移动通信有限公司 | 图像数据生成方法、装置及电子装置 |
CN110891098A (zh) * | 2018-09-07 | 2020-03-17 | Oppo广东移动通信有限公司 | 移动终端的控制方法和装置、移动终端、可读存储介质 |
CN109635578A (zh) * | 2018-12-07 | 2019-04-16 | 上海交通大学 | 一种基于非线性空间频率特性的安全二维码通信方法 |
CN111756985A (zh) * | 2019-03-26 | 2020-10-09 | 北京小米移动软件有限公司 | 图像拍摄方法、装置和存储介质 |
CN112216806A (zh) * | 2019-07-12 | 2021-01-12 | 佳能株式会社 | 发光装置、曝光系统、摄像显示装置、摄像装置、电子装置、照明装置和移动物体 |
CN111479074A (zh) * | 2020-03-12 | 2020-07-31 | 北京爱芯科技有限公司 | 图像采集方法、装置、计算机设备和存储介质 |
CN112087611A (zh) * | 2020-09-07 | 2020-12-15 | Oppo广东移动通信有限公司 | 电子设备及其显示屏调节方法 |
Non-Patent Citations (4)
Title |
---|
Bayer图像色彩还原线性插值方法;孙辉;柏旭光;孙丽娜;李志强;;液晶与显示(第03期);全文 * |
Crosstalk correction technique for single sensor camera provided with Bayer color filter array;Stefano Andriani;《2013 IEEE International Conference on Image Processing》;20140213;全文 * |
基于FPGA的Sobel算子实时图像边缘检测系统的设计;李涛;《中国优秀硕士论文电子期刊网》;20131215;全文 * |
相对位姿测量解算的DSP实现;冯禹;王向军;陈文亮;;传感技术学报(第01期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN115134514A (zh) | 2022-09-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9389758B2 (en) | Portable electronic device and display control method | |
US10298828B2 (en) | Multi-imaging apparatus including internal imaging device and external imaging device, multi-imaging method, program, and recording medium | |
US20170070678A1 (en) | Image capturing device having continuous image capture | |
US9473725B2 (en) | Image-processing and encoded aperture pattern setting device and method, and image pickup device comprising same | |
WO2017059634A1 (zh) | 调节显示图像方法及装置 | |
US10021287B2 (en) | Imaging control device, imaging device, imaging control method, and program for transmitting an imaging preparation command, receiving a preparation completion command, and transmitting a captured image acquisition command | |
CN105791701B (zh) | 图像拍摄装置及方法 | |
JPWO2015046045A1 (ja) | 撮像装置及び撮像方法 | |
CN107948505B (zh) | 一种全景拍摄方法及移动终端 | |
CN109417599B (zh) | 便携终端 | |
US8345145B2 (en) | Mobile communication terminal and focusing method using the same | |
CN107071277B (zh) | 一种光绘拍摄装置、方法和移动终端 | |
CN105763810A (zh) | 基于人眼的拍照装置及方法 | |
JP5768193B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム | |
KR20050109190A (ko) | 듀얼 카메라를 이용한 와이드 이미지 생성 장치 및 방법 | |
CN115134505B (zh) | 预览画面生成方法及装置、电子设备、存储介质 | |
CN110876014A (zh) | 图像处理方法及装置、电子设备及存储介质 | |
CN112799522A (zh) | 移动终端控制方法及装置、移动终端及存储介质 | |
CN112243117B (zh) | 图像处理装置、方法及摄像机 | |
CN115134514B (zh) | 图像采集方法、装置以及存储介质 | |
JP7358633B2 (ja) | 撮像装置のプロセッサ、撮像装置、撮像装置の制御方法、及び撮像装置の制御プログラム | |
WO2021194161A1 (ko) | 고배율에서 흔들림을 보정하는 방법 및 그 전자 장치 | |
CN110874829B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
EP3340602B1 (en) | Electronic device and method of controlling same for capturing digital images | |
JP2011151515A (ja) | 撮像機能付き電子機器、カメラ機能付き携帯電話機、画像データの表示方法、及び画像データの表示プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |