CN108965742B - 异形屏显示方法、装置、电子设备及计算机可读存储介质 - Google Patents
异形屏显示方法、装置、电子设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN108965742B CN108965742B CN201810924381.0A CN201810924381A CN108965742B CN 108965742 B CN108965742 B CN 108965742B CN 201810924381 A CN201810924381 A CN 201810924381A CN 108965742 B CN108965742 B CN 108965742B
- Authority
- CN
- China
- Prior art keywords
- image
- displayed
- width
- screen
- height
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000012545 processing Methods 0.000 claims abstract description 49
- 238000012937 correction Methods 0.000 claims description 35
- 238000004422 calculation algorithm Methods 0.000 claims description 14
- 238000004891 communication Methods 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 4
- 238000001514 detection method Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 10
- 230000001788 irregular Effects 0.000 description 9
- 238000012216 screening Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 235000019800 disodium phosphate Nutrition 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007499 fusion processing Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 206010066054 Dysmorphism Diseases 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请实施例提供了一种异形屏显示方法、装置、电子设备及计算机可读存储介质,涉及图像处理技术领域。该方法包括:获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像。本申请实施例实现了在异形屏上显示图像,并提高通过异形屏显示采集设备采集到的图像的合理性,提升用户体验。
Description
技术领域
本申请涉及图像处理技术领域,具体而言,本申请涉及一种异形屏显示方法、装置、电子设备及计算机可读存储介质。
背景技术
随着信息技术的发展,电子设备也随之发展,当前大部分的电子设备为尺寸长宽比为4:3或者16:9的常规屏。然而,随着电子设备的进一步发展,异形屏设备随之出现,例如智能后视镜,异形屏设备的屏幕多采用各种不规则的长条屏,如图1所示,其长宽比大多数为4:1,但是由于大部分的采集设备包括智能后视镜摄像头,仅支持长宽比为4:3或者16:9的预览画面,因此如何通过异形屏显示采集设备采集的图像成为一个关键问题。
现有技术中,通过异形屏显示采集设备采集到的图像的方法为:将采集设备采集到的图像直接输出到异形屏上显示,或者将采集设备采集到的图像进行拉伸后输出至异形屏上进行全屏显示。
然而,当将采集设备采集到的图像直接输出到异形屏上显示时,图像可能仅在异形屏中间聚集显示,屏幕两边存在较大的黑色区域未显示图像的现象,如图2所示,导致显示的画面过小,不容易观察;或者当将采集设备采集到的图像进行拉伸后输出至异形屏上进行全屏显示时,可能导致通过异形屏显示的图像变形,不清晰的情况出现,如图3所示,从而导致通过异形屏无法合理的显示采集设备采集到的图像,进而导致用户的体验度较低。
发明内容
本申请提供了一种异形屏显示方法、装置、电子设备及计算机可读存储介质,可以解决通过异形屏无法合理的显示采集设备采集到的图像以及用户体验度较低的问题。所述技术方案如下:
第一方面,提供了一种异形屏显示方法,该方法包括:
获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备;
将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理;
输出拼接处理后的图像,以在异形屏上显示图像。
第二方面,提供了一种异形屏显示装置,该装置包括:
获取模块,用于获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备;
边缘裁剪模块,用于将获取模块获取到的第一采集设备采集到的图像按照预设规则进行边缘裁剪;
拼接处理模块,用于将边缘裁剪模块边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理;
输出模块,用于输出拼接处理模块拼接处理后的图像,以在异形屏上显示图像。
第三方面,提供了一种电子设备,包括:处理器、存储器、通信接口和通信总线,处理器、存储器和通信接口通过通信总线完成相互间的通信;
存储器用于存放至少一可执行指令,可执行指令使处理器执行如第一方面所示的异形屏显示方法对应的操作。
第四方面,提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现第一方面所示的异形屏显示方法。
本申请实施例提供了一种异形屏显示方法、装置、电子设备以及计算机可读存储介质,与现有技术相比,本申请实施例获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像,即本申请实施例是将广角采集设备采集到的图像进行边缘裁剪后,并将裁剪掉的图像拼接在非广角采集设备采集到的图像上,然后由异形屏显示拼接后的图像,由于拼接后的图像的宽高比增大,因此通过异形屏显示拼接后的图像不会出现仅在中间聚集显示、不易观察的情况,再者由于输出的图像并不需要过度拉伸后进行显示,因此通过异形屏显示的图像不会出现严重的变形,从而可以提高通过异形屏显示采集设备采集到的图像的合理性,进而可以提升用户体验度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的各种异形屏尺寸的示意图;
图2为现有技术中一种通过异形屏进行显示的示意图;
图3为现有技术中另一种通过异形屏进行显示的示意图;
图4a为现有的各种屏幕尺寸的示意图;
图4b为现有技术中截取部分预览画面在异形屏上放大全屏显示的示意图;
图4c为现有技术中截取部分预览画面在异形屏上放大全屏显示的效果示意图;
图4d为本申请实施例异形屏显示的硬件设计示意图;
图5为本申请实施例提供的一种异形屏显示方法的流程示意图;
图6a为本申请实施例中非广角采集设备采集到的图像宽高比示意图;
图6b为本申请实施例中广角采集设备采集到的图像宽高比示意图;
图7为本申请实施例中图像拼接处理后显示效果示意图;
图8为本申请实施例提供的一种异形屏显示装置的结构示意图;
图9为本申请实施例提供的另一种异形屏显示装置的结构示意图;
图10为本申请实施例提供的一种异形屏显示的电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本申请,而不能解释为对本发明的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
目前,大部分的Android电子设备(例如手机以及平板电脑)均支持常规屏,其中常规屏的屏幕分辨率为1920*1080、1280*800、1280*768、800*480以及640*480,支持的屏幕尺寸长宽比多数为16:9或4:3,对于目前市面上的常规摄像头预览、拍照和录像等也均支持屏幕尺寸长宽比为16:9或4:3的常规屏,从图4a中可以看出现有系统所支持的常规屏尺寸大部分为16:9或者4:3,其中,图4a中矩形的大小表征屏幕的尺寸,颜色的深浅表征不同尺寸的屏幕所占的百分比。
随之异形屏产品的出现,例如各种车载后视镜,由于现有的常规图像采集设备(例如,摄像头)大部分支持通过常规屏进行显示,那如何利用异形屏显示现有的常规图像采集设备采集到的图像为一个关键问题。
现有技术中除了背景技术中提到两种通过异形屏显示图像采集设备采集到的图像之外,还可以包括:将图像采集设备采集到的图像按照异形屏屏幕的长宽比截取部分图像,并将截取的图像放大后通过异形屏全屏显示,如图4b所示。例如,将智能后视镜摄像头采集到的图像,按照智能后视镜屏幕的长宽比截取部分图像,并将截取的部分图像放大后通过智能后视镜进行全屏显示,按照此种方式通过后视镜显示图像的效果示意图如图4c所示,但是由于将图像采集设备采集到的图像进行截取后显示,当前屏幕仅显示图像的部分画面,若需要显示全部的画面,则需要上下滑动分屏滚动显示,从而导致用户无法一次获取图像的全部画面,需要进行滑动查看图像采集设备采集到的全部画面,因此通过异形屏显示图像采集设备采集的图像的合理性较低,用户体验较差。
针对现有技术中通过异形屏显示现有图像采集设备采集到图像的过程中存在的问题,本申请实施例提供了一种新的异形屏显示方案,该方案的硬件上主要通过一个普通摄像头以及一个广角摄像头叠加融合的方式,软件上主要通过异形屏宽高比与摄像头分辨率进行自适应后,再利用现有的图像处理算法进行校正拼接融合,从而使得采集设备(摄像头)采集到的图像画面在异形屏上显示范围更广,又可以解决异形屏全屏显示的问题。
本申请实施例中涉及两个摄像头,分别为第一摄像头以及第二摄像头,其中第一摄像头为广角摄像头、第二摄像头为非广角摄像头;并且通过第一摄像头以及第二摄像头分别采集图像,例如本申请可以应用于车载系统中,即如图4d所示,第一摄像头(广角摄像头)以及第二摄像头(非广角摄像头)可以安装在车辆的后视镜位置处,并且第一摄像头以及第二摄像头位于同一条竖直线上,第二摄像头位于第一摄像头的上方。由于非广角摄像头的视角较窄,拍摄到的实际路况图像,如图4d中的区域2,因此根据此视角的摄像头仅可以获取目标2的图像,并无法获取目标1以及目标3对应的图像;广角摄像头视角较宽,能够用于拍摄更广的图像画面,即该广角摄像头可以拍摄到区域1、区域2以及区域3,因此通过广角摄像头不但可以采集到包含目标2的图像,还可以采集到包含目标1以及目标3的图像。
然而由于非广角摄像头与广角摄像头采集到的画面更加真实、不失真并且清晰度高,因此中间区域可以利用非广角摄像头拍摄的图像画面;再者广角摄像头采集到的宽视角图像画面可以补偿非广角摄像头采集不到的两侧图像画面;因此可以将广角摄像头拍摄的图像画面进行特定处理后,并将处理后的图像与非广角摄像头采集到的图像进行图像融合处理后,并通过异形屏显示图像融合处理后的图像。
进一步地,非广角摄像头图像的中间区域更加清晰,且不变形,但是非广角摄像头拍摄视角较窄,无法采集到更大范围的边缘区域图像;广角摄像头的拍摄视角宽大,能够采集到更大范围的边缘区域图像,但是广角摄像头采集到的图像画面存在一定程度的失真变形,因此本申请中将两种摄像头采集到的图像进行图像拼接融合算法,达到最优的异形屏图像显示效果。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
实施例一
本申请实施例提供了一种异形屏显示方法,如图5所示,该方法包括:
步骤S501、获取第一采集设备以及第二采集设备分别采集到的图像。
其中,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备。
对于本申请实施例,获取广角采集设备以及非广角采集设备同时采集到的图像。在本申请实施例中,非广角采集设备采集到的图像不失真变形,但是采集视角较窄,只能采集到宽高比16:9或者4:3的图像,并不能采集到更广的两端区域图像,如图6a所示;广角采集设备采集的图像视角较广,因此采集到的图像画面较宽,如图6b所示。
步骤S502、将第一采集设备采集到的图像按照预设规则进行边缘裁剪。
对于本申请实施例,由于广角采集设备采集到的图像画面较广,非广角采集设备采集到的图像画面较窄,无采集到两端的图像画面,因此将广角采集设备采集到的图像进行边缘裁剪后,并获取两端的图像。
步骤S503、将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理。
对于本申请实施例,将边缘裁剪后获取到的两端图像分别拼接于第二采集设备采集到的图像两侧,得到拼接处理后的图像。
步骤S504、输出拼接处理后的图像,以在异形屏上显示图像。
对于本申请实施例,将拼接处理后的图像在异形屏上显示。例如异形屏可以为智能后视镜,即在智能后视镜上显示拼接处理后的图像。
本申请实施例提供了一种异形屏显示方法,与现有技术相比,本申请实施例获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像,即本申请实施例是将广角采集设备采集到的图像进行边缘裁剪后,并将裁剪掉的图像拼接在非广角采集设备采集到的图像上,然后由异形屏显示拼接后的图像,由于拼接后的图像的宽高比增大,因此通过异形屏显示拼接后的图像不会出现仅在中间聚集显示、不易观察的情况,再者由于输出的图像并不需要过度拉伸后进行显示,因此通过异形屏显示的图像不会出现严重的变形,从而可以提高通过异形屏显示采集设备采集到的图像的合理性,进而可以提升用户体验度。
实施例二
本申请实施例提供了另一种可能的实现方式,在实施例一的基础上,还包括实施例二所示的方法,其中,
步骤S501之前还包括步骤SA(图中未标注),其中,
步骤SA、当待显示图像屏幕的宽高比值大于预设值时,同时启动第一采集设备以及第二采集设备。
对于本申请实施例,预设值为常规采集设备或者现有的采集设备所支持的图像宽高比值。例如预设值可以为16:9或者4:3。
对于本申请实施例,当待显示图像的屏幕宽高比大于16:9或者4:3时,即表征待显示图像的屏幕为异形屏,则用户同时触发第一采集设备以及第二采集设备的开启指令,同时启动第一采集设备以及第二采集设备;当待显示图像的屏幕宽高比不大于16:9或者4:3,则用户仅触发第二采集设备的开启指令,启动第二采集设备即可。
对于本申请实施例,当待显示图像屏幕的宽高比大于预设值时,同时开启第一采集设备以及第二采集设备,待显示图像屏幕的宽高比不大于预设值时,仅需要开启第二采集设备,不需要开启第一采集设备,由于待显示图像屏幕的宽高比大于预设值时,即表征待显示图像屏幕为异形屏,同时开启第一采集设备以及第二采集设备,可以提高通过异形屏显示图像的合理性,当待显示图像屏幕的宽高比不大于预设值时,即表征待显示图像屏幕为常规屏,则仅需要开启第二采集设备,即可以合理显示图像,并且可以节省采集设备的电量。
在本申请实施例中,需要保证同时开启第一采集设备以及第二采集设备,还需要保证同时对第一采集设备以及第二采集设备进行初始化,进一步地还需要保证第一采集设备采集图像每秒帧率与第二采集设备采集图像每秒帧率一致。进一步地,若由于第一采集设备以及第二采集设备两者的分辨率不相同,则需要对第一采集设备采集到的图像以及第二采集设备采集到的图像进行处理,以保证第一采集设备采集到的图像与第二采集设备采集到的图像的分辨率一致。
实施例三
本申请实施例的另一种可能的实现方式,在实施例一或实施例二的基础上还包括实施例三所示的操作,其中,
步骤S502之前还包括步骤SB(图中未标注),其中,
步骤SB、对第一采集设备采集到的图像进行畸变校正。
其中,畸变校正后的图像与第二采集设备采集到的图像高度或者宽度相同。
对于本申请实施例,第一采集设备为广角采集设备,由于广角采集设备(例如广角摄像头)采集到的图像容易失真变形,因此需要对广角采集设备进行畸变校正。在本申请实施例中,利用图像畸变校正算法,对广角采集设备采集到的图像进行畸变校正。
具体地,利用图像畸变校正算法,对广角采集设备采集到的图像进行畸变校正包括以下步骤:
步骤一、建立畸变图像与世界坐标系之间对应的位置关系:
首先设世界坐标系任一点O=[X,Y,Z,1]T,对应校正图像的摄像机坐标为P=[Xc,Yc,Zc]T,畸变图像坐标为Q=(u,v),校正图像坐标为Q'=(u',v'),投影成像模型由以下公式描述:
P=MO-------------------------------------------------------------(1)
其中,公式(1)中,M为投影矩阵,M∈R3×4,M=[R|T],R3×3为旋转矩阵,T∈R3×1为平移向量;然后建立畸变图像与校正图像的关系模型如下:
其中,式中,k1,k2,k3,k4,k5,k6为径向畸变参数,ρ1,ρ2为切向畸变参数,fx,fy,μ0,v0为摄像头内部参数,r为摄像机坐标系下投影点到摄像机坐标系原点的距离,xc=Xc/Zc,yc=Yc/Zc;
步骤二、利用布设有黑白相间的长方形或正方形棋盘格的平面标定板拍摄多张图片,作为标定图像,检测该标定板上每四个棋盘格相交的点即角点的图像坐标,根据步骤1的投影成像模型建立标定板和标定图像的对应关系,计算图像坐标反投影误差:||d-d'||,式中||·||表示12范数,d为标定板角点的图像坐标,d’为标定板角点的世界坐标系坐标,通过步骤一的投影成像模型在图像坐标系下的投影,建立目标函数:ε为反投影误差平方,m为角点总数,j为角点的索引号,判断目标函数是否满足预设的精度要求,若不满足精度要求,则利用下降迭代算法进行非线性优化求精,得到优化后的镜头内部参数和畸变参数;
步骤三,根据步骤二获得的镜头内部参数和畸变参数,代入公式(2)和公式(3)计算,得到校正后图像的空间数据,其中,校正图像坐标u’、v’和之间的关系为u'=xc·fx+u0,v'=yc·fy+v0;
步骤4、利用最近邻插值公式对校正图像赋值完成校正,最近邻插值公式:g(u',v')=g(u'int,v'int),g(u′,v′)为图像在(u′,v′)的像素值,u′int,v′int为u′,v′的整数部分。
对于本申请实施例,通过对广角采集设备采集到的图像进行畸变校正,能够使得畸变校正后的图像可以与实际画面更加接近,从而使得通过异形屏显示出的图像真实性,进而可以进一步地提升通过异形屏显示图像的合理性,提升用户体验。
步骤S502包括步骤S5021(图中未标注),其中,
步骤S5021、将畸变校正后的图像按照预设规则进行边缘裁剪。
具体地,步骤S5021包括步骤S5021a(图中未标注)以及步骤S5021b(图中未标注),其中,
步骤S5021a、基于第二采集设备支持的分辨率以及待显示图像屏幕的高度或者宽度,确定第二采集设备待显示图像的宽度或者高度。
对于本申请实施例,基于第二采集设备支持的分辨率R以及待显示图像屏幕的高度DH,确定第二采集设备待显示图像的宽度SW,即SW=R*DH,其中第二采集设备待显示图像的宽度SW如图6a所示;或者基于第二采集设备支持的分辨率R以及待显示图像屏幕的宽度DW,确定第二采集设备待显示图像的高度SH,即SH=R*DW。
步骤S5021b、按照第二采集设备待显示图像的宽度或者高度,对畸变校正后的图像进行边缘裁剪。
对于本申请实施例,基于确定出的第二采集设备待显示图像的宽度SW或者高度SH,从畸变校正后的图像中确定出待进行边缘裁剪的边缘线S1以及S2,如图6b所示,并基于确定出的待进行边缘裁剪的边缘线S1以及S2,对畸变校正后的图像进行边缘裁剪。
对于本申请实施例,边缘线S1、S2之间的宽度即为PW,在进行边缘裁剪时保证PW-SW>a,其中a为预先设定的最小值。
实施例四
本申请实施例的另一种可能的实现方式,在实施例一的基础上还包括实施例四所示的操作,其中,
步骤S503包括步骤S5031,其中,
步骤S5031、将第一图像、第二图像以及第二采集设备采集到的图像,按照特征点拼接算法进行拼接处理。
其中,第一图像以及第二图像均为对第一采集设备采集到的图像进行边缘裁剪后,且位于两侧的图像。
对于本申请实施例,对畸变校正后的广角采集设备采集到的图像进行边缘裁剪后,得到第一图像、第二图像以及第三图像,其中第一图像为裁剪后位于两侧的图像,第三图像为裁剪后位于中间的图像,如图6b所示。
对于本申请实施例,由于第三图像的图像内容与第二采集设备采集得到的图像相同,并且第二采集设备采集到的图像的清晰度高于第三图像的清晰度,因此将第一图像以及第二图像分别拼接于第一采集设备采集到的图像的两侧,得到拼接处理后的图像,如图7所示。
对于本申请实施例,通过特征点拼接算法,将第一图像、第二图像以及第二采集设备采集到的图像进行拼接处理,具体包括以下步骤:
S1:对待拼接的两幅图像(例如第一图像与第二采集设备采集到的图像)分别进行特征点提取;
S2:对两幅待拼接图像的特征点进行匹配,得到特征点匹配对集φ;
S3:基于平面相似度对特征点匹配对进行筛选,具体步骤包括:
S3.1:初始化选择匹配对集S为空集;
S3.2:从匹配对集φ中随机选取K个最小采样集{C1,C2,...,CK},其中每个最小采样集包括4个特征点匹配对;计算每个最小采样集对应的单应矩阵,得到K个单应矩阵集{T1,T2,…,TK},其中Tk表示第k个最小采样集对应的单应矩阵,k=1,2,…,K;
S3.3:计算匹配对集φ中每个匹配对Xi与单应矩阵集{T1,T2,…,TK}中每个单应矩阵的残差,每个匹配对Xi对应的K个残差组成一个残差向量di=[di1di2...diK],其中dik表示匹配对Xi与单应矩阵Tk的残差;
S3.4:对于匹配对集φ中所有匹配对,两两计算平面相似度,任意两个匹配对Xi和Xj的平面相似度f(Xi,Xj)的计算公式为:其中,的定义为:dik表示匹配对Xi与单应矩阵Tk的残差,djk为匹配对Xj与单应矩阵Tk的残差,ε为预设的残差阈值;
S3.5:计算匹配对集φ中的每个匹配对Xi与其他所有匹配对的平面相似度f(Xi,Xj)之和F(Xi),选择F(Xi)最大的匹配对Xi′作为本次筛选的关键匹配对,计算匹配对Xi′与其他匹配对平面相似度f(Xi′,Xj)的平均值favg,筛选f(Xi′,Xj)>favg的匹配对,与关键匹配对Xi′一起构成匹配对集S′,将匹配对集S′加入选择匹配对集S中,并从匹配对集φ中删除这些匹配对;
S3.6:如果|S′|<τ|||φ||<τ,其中|S′|表示本次筛选匹配对集S′中匹配对数量,|φ|表示匹配对集φ中匹配对数量,τ表示预设数量阈值,结束筛选,否则返回步骤S3.2;
S4:根据步骤S3筛选得到的选择匹配对集S中的匹配对来计算两幅待拼接图像的变换矩阵H,利用变换矩阵H将两幅待拼接图像变换至同一坐标系;
S5:在变换到同一坐标系下的两幅待拼接图像的图像重合区域寻找最优缝合线L;
S6:根据步骤S5得到的最优缝合线L对变换到同一坐标系下的两幅待拼接图像进行融合,得到图像拼接结果。
对于本申请实施例,通过将第一图像、第二图像分别拼接于第二采集设备采集到的图像两侧,以通过异形屏显示拼接处理后的图像,即第二采集设备采集到的图像的清晰度高于第三图像的清晰度,并且第二采集设备采集到的图像内容与第三图像的图像内容一致,因此拼接后的图像的清晰度高于对第一采集设备采集的图像进行畸变校正后的图像,从而可以提高异形屏显示的图像的清晰度,提升用户体验。
实施例五
本申请实施例的另一种可能的实现方式,在实施例一的基础上还包括实施例五所示的操作,其中,
步骤S503之后还包括步骤SC(图中未标注)、步骤SD(图中未标注)以及步骤SE(图中未标注),其中,
步骤SC、检测拼接处理后的图像宽度或者高度是否大于待显示图像屏幕的宽度或者高度。
对于本申请实施例,若基于图像的高度进行拼接处理,即图像的高度不变,宽度为拼接处理后的图像的宽度,则检测拼接处理后的图像的宽度是否大于待显示图像屏幕的宽度;若基于图像的宽度进行拼接处理,即图像的宽度不变,高度为拼接处理后图像的高度,则检测拼接处理后的图像的高度是否大于待显示图像屏幕的高度。
对于本申请实施例,若拼接处理后的图像宽度或者高度等于待显示图像屏幕的宽度或者高度,则直接输出拼接处理后的图像。
步骤SD、若大于待显示图像屏幕的宽度或者高度,则对拼接处理后的图像进行边缘裁剪,以使得裁剪后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同。
其中,尺寸信息包括:宽度以及高度。
例如,若尺寸信息为宽度,则拼接处理后的图像的宽度为W1,待显示图像屏幕的宽度为DW,若W1>DW,将拼接处理后的图像进行边缘裁剪,以使得边缘裁剪后的图像宽度W2=DW。
具体地,步骤S504包括步骤S5041(图中未标注),其中,
步骤S5041、输出拼接处理后的且与待显示图像屏幕尺寸信息相同的图像。
对于本申请实施例,将步骤SD中进行边缘裁剪后与DW宽度一致的图像输出,并通过异形屏进行全屏显示。
步骤SE、若小于待显示图像屏幕的宽度或者高度,则对拼接处理后的图像进行拉伸处理,以使得拉伸处理后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同。
例如,拼接处理后的图像的宽度为W3,待显示图像屏幕的宽度为DW,若W3<DW,将拼接处理后的图像进行DW进行标准宽放大,以使得边缘裁剪后的图像宽度W4=DW。
具体地,步骤S504包括步骤S5041(图中未标注),其中,
步骤S5041、输出拼接处理后的且与待显示图像屏幕尺寸信息相同的图像。
对于本申请实施例,将步骤SE中进行拉伸处理后与DW宽度一致的图像输出,并通过异形屏进行全屏显示。
对于本申请实施例,尺寸信息为高度时,对拼接处理后的图像进行处理的方式与输出图像的方式与尺寸信息为宽度时,对拼接处理后的图像进行处理的方式相似,在此不再赘述。
对于本申请实施例,当拼接处理后的图像的宽度大于待显示图像屏幕的宽度或者高度时,对拼接处理后的图像进行边缘裁剪,以使得裁剪后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同;当小于待显示图像屏幕的宽度或者高度时,对拼接处理后的图像进行拉伸处理,以使得拉伸处理后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同,并输出与待显示图像屏幕的尺寸信息相同的图像,从而可以进一步提升通过异形屏显示图像的合理性,提升用户体验。
对于本申请实施例,异形屏显示的方法适用于显示支持Android系统采集设备采集的图像,也适用于支持其它操作系统例如,Linux系统的采集设备采集的图像。在此不做限定。
在本申请实施例中涉及到的的图像具体处理流程可以放在系统应用层实现,应用层获取到图像后,调用各种图像处理算法库,算法最终返回图像数据,向应用层直接输出屏幕显示,该方式可移植性强,不依赖于系统本身;同时在本申请实施例中涉及到的的图像具体处理流程也可以系统驱动层实现,两种采集设备硬件驱动层直接获取每帧图像,传递给图像算法处理单元,算法处理单元处理后的将结果返回给驱动层,驱动层扩展一个异性屏尺寸的接口通路后,可直接将异形画面通过扩展的驱动接口直接返回给上层软件,直接显示最终结果,该方案需要修改系统层代码,但是效率高稳定强好。
实施例六
本申请实施例提供了一种异形屏显示装置,如图8所示,该异形屏显示装置800可以包括:获取模块801、边缘裁剪模块802、拼接处理模块803以及输出模块804,其中,
获取模块801,用于获取第一采集设备以及第二采集设备分别采集到的图像。
其中,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备。
边缘裁剪模块802,用于将获取模块801获取到的第一采集设备采集到的图像按照预设规则进行边缘裁剪。
拼接处理模块803,用于将边缘裁剪模块802边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理。
输出模块804,用于输出拼接处理模块803拼接处理后的图像,以在异形屏上显示图像。
本申请实施例提供了一种异形屏显示装置,与现有技术相比,本申请实施例获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像,即本申请实施例是将广角采集设备采集到的图像进行边缘裁剪后,并将裁剪掉的图像拼接在非广角采集设备采集到的图像上,然后由异形屏显示拼接后的图像,由于拼接后的图像的宽高比增大,因此通过异形屏显示拼接后的图像不会出现仅在中间聚集显示、不易观察的情况,再者由于输出的图像并不需要过度拉伸后进行显示,因此通过异形屏显示的图像不会出现严重的变形,从而可以提高通过异形屏显示采集设备采集到的图像的合理性,进而可以提升用户体验度。
本申请实施例的异形屏显示装置可执行本申请实施例一提供的一种异形屏显示方法,其实现原理相类似,此处不再赘述。
实施例七
本申请实施例提供的另一种异形屏显示装置的结构示意图,如图9所示,该异形屏显示装置900可以包括:获取模块901、边缘裁剪模块902、拼接处理模块903以及输出模块904,其中,
获取模块901,用于获取第一采集设备以及第二采集设备分别采集到的图像。
其中,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备。
其中,图9中的获取模块901与图8中的获取模块801的功能相同或者相似。
边缘裁剪模块902,用于将获取模块901获取到的第一采集设备采集到的图像按照预设规则进行边缘裁剪。
其中,图9中的边缘裁剪模块902与图8中的边缘裁剪模块802的功能相同或者相似。
拼接处理模块903,用于将边缘裁剪模块902边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理。
其中,图9中的拼接处理模块903与图8中的拼接处理模块803的功能相同或者相似。
输出模块904,用于输出拼接处理模块903拼接处理后的图像,以在异形屏上显示图像。
其中,图9中的输出模块904与图8中的输出模块804的功能相同或者相似。
进一步地,如图9所示,该异形屏显示装置900还包括:启动模块905,其中,
启动模块905,用于当待显示图像屏幕的宽高比值大于预设值时,同时启动第一采集设备以及第二采集设备。
对于本申请实施例,当待显示图像屏幕的宽高比大于预设值时,同时开启第一采集设备以及第二采集设备,待显示图像屏幕的宽高比不大于预设值时,仅需要开启第二采集设备,不需要开启第一采集设备,由于待显示图像屏幕的宽高比大于预设值时,即表征待显示图像屏幕为异形屏,同时开启第一采集设备以及第二采集设备,可以提高通过异形屏显示图像的合理性,当待显示图像屏幕的宽高比不大于预设值时,即表征待显示图像屏幕为常规屏,则仅需要开启第二采集设备,即可以合理显示图像,并且可以节省采集设备的电量。
进一步地,如图9所示,该异形屏显示装置900还包括:畸变校正模块906,其中,
畸变校正模块906,用于对第一采集设备采集到的图像进行畸变校正。
其中,畸变校正后的图像与第二采集设备采集到的图像高度或者宽度相同。
对于本申请实施例,通过对广角采集设备采集到的图像进行畸变校正,能够使得畸变校正后的图像可以与实际画面更加接近,从而使得通过异形屏显示出的图像真实性,进而可以进一步地提升通过异形屏显示图像的合理性,提升用户体验。
边缘裁剪模块902,具体用于将畸变校正模块906畸变校正后的图像按照预设规则进行边缘裁剪。
进一步地,如图9所示,边缘裁剪模块902包括:确定单元9021、边缘裁剪单元9022,其中,
确定单元9021,用于基于第二采集设备支持的分辨率以及待显示图像屏幕的高度或者宽度,确定第二采集设备待显示图像的宽度或者高度。
边缘裁剪单元9022,用于按照确定单元9021确定出的第二采集设备待显示图像的宽度或者高度,对畸变校正后的图像进行边缘裁剪。
拼接处理模块902,用于将第一图像、第二图像以及第二采集设备采集到的图像,按照特征点拼接算法进行拼接处理。
其中,第一图像以及第二图像均为对第一采集设备采集到的图像进行边缘裁剪后,且位于两侧的图像。
对于本申请实施例,通过将第一图像、第二图像分别拼接于第二采集设备采集到的图像两侧,以通过异形屏显示拼接处理后的图像,即第二采集设备采集到的图像的清晰度高于第三图像的清晰度,并且第二采集设备采集到的图像内容与第三图像的图像内容一致,因此拼接后的图像的清晰度高于对第一采集设备采集的图像进行畸变校正后的图像,从而可以提高异形屏显示的图像的清晰度,提升用户体验。
进一步地,如图9所示,异形屏显示装置900还包括:检测模块907、拉伸处理模块908,其中,
检测模块907,用于检测拼接处理后的图像宽度或者高度是否大于待显示图像屏幕的宽度或者高度。
边缘裁剪模块902,还用于当拼接处理后的图像宽度或者高度大于待显示图像屏幕的宽度或者高度时,对拼接处理后的图像进行边缘裁剪,以使得裁剪后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同。
其中,尺寸信息包括:宽度以及高度。
拉伸处理模块908,还用于当拼接处理后的图像宽度或者高度小于待显示图像屏幕的宽度或者高度时,对拼接处理后的图像进行拉伸处理,以使得拉伸处理后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同。
输出模块904,具体用于输出拼接处理后的且与待显示图像屏幕尺寸信息相同的图像。
对于本申请实施例,当拼接处理后的图像的宽度大于待显示图像屏幕的宽度或者高度时,对拼接处理后的图像进行边缘裁剪,以使得裁剪后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同;当小于待显示图像屏幕的宽度或者高度时,对拼接处理后的图像进行拉伸处理,以使得拉伸处理后的图像的尺寸信息与待显示图像屏幕的尺寸信息相同,并输出与待显示图像屏幕的尺寸信息相同的图像,从而可以进一步提升通过异形屏显示图像的合理性,提升用户体验。
本申请实施例提供了一种异形屏显示装置,与现有技术相比,本申请实施例获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像,即本申请实施例是将广角采集设备采集到的图像进行边缘裁剪后,并将裁剪掉的图像拼接在非广角采集设备采集到的图像上,然后由异形屏显示拼接后的图像,由于拼接后的图像的宽高比增大,因此通过异形屏显示拼接后的图像不会出现仅在中间聚集显示、不易观察的情况,再者由于输出的图像并不需要过度拉伸后进行显示,因此通过异形屏显示的图像不会出现严重的变形,从而可以提高通过异形屏显示采集设备采集到的图像的合理性,进而可以提升用户体验度。
本申请实施例的异形屏显示装置可执行本申请实施例一至实施例五任一实施例提供的一种异形屏显示方法,其实现原理相类似,此处不再赘述。
实施例八
本申请实施例提供了一种电子设备,如图10所示,图10所示的电子设备1000包括:处理器1001和存储器1003。其中,处理器1001和存储器1003相连,如通过总线1002相连。可选地,电子设备1000还可以包括收发器1004。需要说明的是,实际应用中收发器1004不限于一个,该电子设备1000的结构并不构成对本申请实施例的限定。
其中,处理器1001应用于本申请实施例中,用于实现图8或图9所示的获取模块、边缘裁剪模块、拼接处理模块、输出模块的功能,或者图9所示的启动模块、畸形校正模块、检测模块、拉伸处理模块的功能。收发器1004包括接收机和发射机。
处理器1001可以是CPU,通用处理器,DSP,ASIC,FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器1001也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等。
总线1002可包括一通路,在上述组件之间传送信息。总线1002可以是PCI总线或EISA总线等。总线1002可以分为地址总线、数据总线、控制总线等。为便于表示,图10中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
存储器1003可以是ROM或可存储静态信息和指令的其他类型的静态存储设备,RAM或者可存储信息和指令的其他类型的动态存储设备,也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。
存储器1003用于存储执行本申请方案的应用程序代码,并由处理器1001来控制执行。处理器1001用于执行存储器1003中存储的应用程序代码,以实现图8或图9所示实施例提供的异形屏显示装置的动作。
本申请实施例提供了一种电子设备,与现有技术相比,本申请实施例获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像,即本申请实施例是将广角采集设备采集到的图像进行边缘裁剪后,并将裁剪掉的图像拼接在非广角采集设备采集到的图像上,然后由异形屏显示拼接后的图像,由于拼接后的图像的宽高比增大,因此通过异形屏显示拼接后的图像不会出现仅在中间聚集显示、不易观察的情况,再者由于输出的图像并不需要过度拉伸后进行显示,因此通过异形屏显示的图像不会出现严重的变形,从而可以提高通过异形屏显示采集设备采集到的图像的合理性,进而可以提升用户体验度。
本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现实施例一至实施例七任一实施例所示的方法。
本申请实施例提供了一种计算机可读存储介质适用于上述方法任一实施例。在此不再赘述。
本申请实施例提供了一种可读存储介质,与现有技术相比,本申请实施例获取第一采集设备以及第二采集设备分别采集到的图像,第一采集设备与第二采集设备位于同一条竖直线上,第一采集设备为广角采集设备,第二采集设备为非广角采集设备,然后将第一采集设备采集到的图像按照预设规则进行边缘裁剪,并将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,然后输出拼接处理后的图像,以在异形屏上显示图像,即本申请实施例是将广角采集设备采集到的图像进行边缘裁剪后,并将裁剪掉的图像拼接在非广角采集设备采集到的图像上,然后由异形屏显示拼接后的图像,由于拼接后的图像的宽高比增大,因此通过异形屏显示拼接后的图像不会出现仅在中间聚集显示、不易观察的情况,再者由于输出的图像并不需要过度拉伸后进行显示,因此通过异形屏显示的图像不会出现严重的变形,从而可以提高通过异形屏显示采集设备采集到的图像的合理性,进而可以提升用户体验度。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种异形屏显示方法,其特征在于,包括:
获取第一采集设备以及第二采集设备分别采集到的图像,所述第一采集设备与所述第二采集设备位于同一条竖直线上,所述第一采集设备为广角采集设备,所述第二采集设备为非广角采集设备;
对所述第一采集设备采集到的图像进行畸变校正,畸变校正后的图像与第二采集设备采集到的图像高度或者宽度相同;将畸变校正后的图像按照预设规则进行边缘裁剪,包括:基于所述第二采集设备支持的分辨率以及待显示图像屏幕的高度或者宽度,确定所述第二采集设备待显示图像的宽度或者高度;按照所述第二采集设备待显示图像的宽度或者高度,对所述畸变校正后的图像进行边缘裁剪;
将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,包括:将第一图像、第二图像以及所述第二采集设备采集到的图像,按照特征点拼接算法进行拼接处理,所述第一图像以及所述第二图像均为对所述第一采集设备采集到的图像进行边缘裁剪后,且位于两侧的图像;
输出拼接处理后的图像,以在异形屏上显示图像。
2.根据权利要求1所述的方法,其特征在于,获取第一采集设备以及第二采集设备分别采集到的图像,之前还包括:
当待显示图像屏幕的宽高比值大于预设值时,同时启动所述第一采集设备以及所述第二采集设备。
3.根据权利要求1所述的方法,其特征在于,将边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,之后还包括:
检测拼接处理后的图像宽度或者高度是否大于待显示图像屏幕的宽度或者高度;
若大于待显示图像屏幕的宽度或者高度,则对所述拼接处理后的图像进行边缘裁剪,以使得裁剪后的图像的尺寸信息与所述待显示图像屏幕的尺寸信息相同,所述尺寸信息包括:宽度以及高度;
若小于待显示图像屏幕的宽度或者高度,则对所述拼接处理后的图像进行拉伸处理,
以使得拉伸处理后的图像的尺寸信息与所述待显示图像屏幕的尺寸信息相同。
4.根据权利要求3所述的方法,其特征在于,输出拼接处理后的图像,包括:
输出拼接处理后的且与所述待显示图像屏幕尺寸信息相同的图像。
5.一种异形屏显示装置,其特征在于,包括:
获取模块,用于获取第一采集设备以及第二采集设备分别采集到的图像,所述第一采集设备与所述第二采集设备位于同一条竖直线上,所述第一采集设备为广角采集设备,所述第二采集设备为非广角采集设备;
畸变校正模块,用于对所述第一采集设备采集到的图像进行畸变校正,畸变校正后的图像与第二采集设备采集到的图像高度或者宽度相同;
边缘裁剪模块,用于将所述畸变校正后的图像按照预设规则进行边缘裁剪,包括确定单元、边缘裁剪单元,所述确定单元用于基于所述第二采集设备支持的分辨率以及待显示图像屏幕的高度或者宽度,确定所述第二采集设备待显示图像的宽度或者高度;所述边缘剪裁单元用于按照所述第二采集设备待显示图像的宽度或者高度,对所述畸变校正后的图像进行边缘裁剪;
拼接处理模块,用于将所述边缘裁剪模块边缘裁剪后的图像与第二采集设备采集到的图像进行拼接处理,包括:将第一图像、第二图像以及所述第二采集设备采集到的图像,按照特征点拼接算法进行拼接处理,所述第一图像以及所述第二图像均为对所述第一采集设备采集到的图像进行边缘裁剪后,且位于两侧的图像;
输出模块,用于输出所述拼接处理模块拼接处理后的图像,以在异形屏上显示图像。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:启动模块;
所述启动模块,用于当待显示图像屏幕的宽高比值大于预设值时,同时启动所述第一采集设备以及所述第二采集设备。
7.根据权利要求5所述的装置,其特征在于,所述装置还包括:检测模块、拉伸处理模块;
所述检测模块,用于检测拼接处理后的图像宽度或者高度是否大于待显示图像屏幕的宽度或者高度;
所述边缘裁剪模块,还用于当拼接处理后的图像宽度或者高度大于待显示图像屏幕的宽度或者高度时,对所述拼接处理后的图像进行边缘裁剪,以使得裁剪后的图像的尺寸信息与所述待显示图像屏幕的尺寸信息相同,所述尺寸信息包括:宽度以及高度;
所述拉伸处理模块,还用于当拼接处理后的图像宽度或者高度小于待显示图像屏幕的宽度或者高度时,对所述拼接处理后的图像进行拉伸处理,以使得拉伸处理后的图像的尺寸信息与所述待显示图像屏幕的尺寸信息相同。
8.根据权利要求7所述的装置,其特征在于,
所述输出模块,具体用于输出拼接处理后的且与所述待显示图像屏幕尺寸信息相同的图像。
9.一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如权利要求1-4中任一项所述的异形屏显示方法对应的操作。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现权利要求1-4任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810924381.0A CN108965742B (zh) | 2018-08-14 | 2018-08-14 | 异形屏显示方法、装置、电子设备及计算机可读存储介质 |
US16/394,282 US10909703B2 (en) | 2018-08-14 | 2019-04-25 | Image processing method, electronic device and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810924381.0A CN108965742B (zh) | 2018-08-14 | 2018-08-14 | 异形屏显示方法、装置、电子设备及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108965742A CN108965742A (zh) | 2018-12-07 |
CN108965742B true CN108965742B (zh) | 2021-01-22 |
Family
ID=64469182
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810924381.0A Active CN108965742B (zh) | 2018-08-14 | 2018-08-14 | 异形屏显示方法、装置、电子设备及计算机可读存储介质 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10909703B2 (zh) |
CN (1) | CN108965742B (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113498527A (zh) * | 2019-02-19 | 2021-10-12 | 奥拉科产品有限责任公司 | 具有动态拼接的镜更换系统 |
CN111147911A (zh) * | 2019-12-27 | 2020-05-12 | 北京达佳互联信息技术有限公司 | 视频裁剪方法、装置、电子设备和存储介质 |
CN111915485B (zh) * | 2020-07-10 | 2023-04-07 | 浙江理工大学 | 一种特征点稀疏工件图像的快速拼接方法及系统 |
CN112529778B (zh) * | 2020-11-24 | 2023-05-30 | 展讯通信(上海)有限公司 | 多摄像头设备的图像拼接方法及装置、存储介质、终端 |
CN113077375A (zh) * | 2021-04-07 | 2021-07-06 | 有方(合肥)医疗科技有限公司 | 图像获取方法、图像获取装置、电子设备及存储介质 |
CN113192145B (zh) * | 2021-05-08 | 2023-02-28 | 深圳市商汤科技有限公司 | 设备标定方法及装置、电子设备和存储介质 |
CN113364976B (zh) * | 2021-05-10 | 2022-07-15 | 荣耀终端有限公司 | 一种图像的显示方法及电子设备 |
CN113989450B (zh) * | 2021-10-27 | 2023-09-26 | 北京百度网讯科技有限公司 | 图像处理方法、装置、电子设备和介质 |
CN115131444B (zh) * | 2022-08-30 | 2022-11-15 | 常州铭赛机器人科技股份有限公司 | 一种基于单目视觉点胶平台的标定方法 |
CN117372252B (zh) * | 2023-12-06 | 2024-02-23 | 国仪量子技术(合肥)股份有限公司 | 图像拼接方法、装置及存储介质、电子设备 |
CN117541517B (zh) * | 2024-01-05 | 2024-03-08 | 深圳市欧冶半导体有限公司 | Cms的双曲率成像方法、装置、计算机设备和存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108243299A (zh) * | 2016-12-23 | 2018-07-03 | 联发科技股份有限公司 | 一种双摄像头设备 |
CN108353118A (zh) * | 2015-12-29 | 2018-07-31 | 核心光电有限公司 | 具有自动可调节长焦视场的双孔径变焦数字摄影机 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030043210A1 (en) * | 2001-09-04 | 2003-03-06 | Hanks Darwin Mitchel | System and method for generating high-resolution images via resolution-limited devices |
US6839067B2 (en) * | 2002-07-26 | 2005-01-04 | Fuji Xerox Co., Ltd. | Capturing and producing shared multi-resolution video |
US7990422B2 (en) * | 2004-07-19 | 2011-08-02 | Grandeye, Ltd. | Automatically expanding the zoom capability of a wide-angle video camera |
US7528846B2 (en) * | 2005-02-23 | 2009-05-05 | Microsoft Corporation | Systems and methods to adjust a source image aspect ratio to match a different target display aspect ratio |
TWI303782B (en) * | 2006-03-10 | 2008-12-01 | Sony Taiwan Ltd | An optimized video stitching mehtod for asic implementation |
TW200740212A (en) * | 2006-04-10 | 2007-10-16 | Sony Taiwan Ltd | A stitching accuracy improvement method with lens distortion correction |
US20080030592A1 (en) * | 2006-08-01 | 2008-02-07 | Eastman Kodak Company | Producing digital image with different resolution portions |
US7719568B2 (en) * | 2006-12-16 | 2010-05-18 | National Chiao Tung University | Image processing system for integrating multi-resolution images |
US8145004B2 (en) * | 2008-05-27 | 2012-03-27 | Sony Ericsson Mobile Communications Ab | System and method for generating a photograph |
CN101673535A (zh) * | 2008-09-11 | 2010-03-17 | 鸿富锦精密工业(深圳)有限公司 | 具有图片调整功能的电子装置及图片调整方法 |
JP2011135490A (ja) * | 2009-12-25 | 2011-07-07 | Seiko Epson Corp | デジタルカメラおよびその製造方法 |
JP5371845B2 (ja) * | 2010-03-18 | 2013-12-18 | 富士フイルム株式会社 | 撮影装置及びその表示制御方法並びに3次元情報取得装置 |
EP2590396B1 (en) * | 2010-07-02 | 2018-08-08 | Sony Interactive Entertainment Inc. | Information processing system and information processing method |
JP2012049651A (ja) * | 2010-08-24 | 2012-03-08 | Ricoh Co Ltd | 撮像装置及び撮像方法 |
US20120075489A1 (en) * | 2010-09-24 | 2012-03-29 | Nishihara H Keith | Zoom camera image blending technique |
US8896703B2 (en) * | 2011-03-31 | 2014-11-25 | Fotonation Limited | Superresolution enhancment of peripheral regions in nonlinear lens geometries |
JP5966584B2 (ja) * | 2012-05-11 | 2016-08-10 | ソニー株式会社 | 表示制御装置、表示制御方法およびプログラム |
CN103366339B (zh) * | 2013-06-25 | 2017-11-28 | 厦门龙谛信息系统有限公司 | 车载多广角摄像头图像合成处理装置及方法 |
CN106274684A (zh) * | 2015-06-24 | 2017-01-04 | 张烂熳 | 一种小角度摄像头实现的汽车全景环视系统 |
CN105096329B (zh) | 2015-08-20 | 2020-05-12 | 厦门雅迅网络股份有限公司 | 一种精确校正超广角摄像头图像畸变的方法 |
US10194089B2 (en) * | 2016-02-08 | 2019-01-29 | Qualcomm Incorporated | Systems and methods for implementing seamless zoom function using multiple cameras |
CN105957007B (zh) | 2016-05-05 | 2018-12-18 | 电子科技大学 | 基于特征点平面相似度的图像拼接方法 |
US10972672B2 (en) * | 2017-06-05 | 2021-04-06 | Samsung Electronics Co., Ltd. | Device having cameras with different focal lengths and a method of implementing cameras with different focal lengths |
TWI650018B (zh) * | 2017-07-18 | 2019-02-01 | 晶睿通訊股份有限公司 | 提供使用者介面以進行場景之監控畫面縫合之方法及其電子裝置 |
CN107948505B (zh) * | 2017-11-14 | 2020-06-23 | 维沃移动通信有限公司 | 一种全景拍摄方法及移动终端 |
JP2019102889A (ja) * | 2017-11-29 | 2019-06-24 | 株式会社デンソー | カメラシステム |
-
2018
- 2018-08-14 CN CN201810924381.0A patent/CN108965742B/zh active Active
-
2019
- 2019-04-25 US US16/394,282 patent/US10909703B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108353118A (zh) * | 2015-12-29 | 2018-07-31 | 核心光电有限公司 | 具有自动可调节长焦视场的双孔径变焦数字摄影机 |
CN108243299A (zh) * | 2016-12-23 | 2018-07-03 | 联发科技股份有限公司 | 一种双摄像头设备 |
Also Published As
Publication number | Publication date |
---|---|
US10909703B2 (en) | 2021-02-02 |
CN108965742A (zh) | 2018-12-07 |
US20200058130A1 (en) | 2020-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108965742B (zh) | 异形屏显示方法、装置、电子设备及计算机可读存储介质 | |
US9325899B1 (en) | Image capturing device and digital zooming method thereof | |
JP4341629B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
KR101343220B1 (ko) | 파노라마 이미지에 대한 실시간 미리 보기 | |
JP4556813B2 (ja) | 画像処理装置、及びプログラム | |
US8619098B2 (en) | Methods and apparatuses for generating co-salient thumbnails for digital images | |
US20030113035A1 (en) | Method and system for compositing images to produce a cropped image | |
EP3017599A1 (en) | System and method for imaging device modelling and calibration | |
JP4010754B2 (ja) | 画像処理装置と画像処理方法及びコンピュータ読み取り可能な記録媒体 | |
CN112367459B (zh) | 图像处理方法、电子装置及非易失性计算机可读存储介质 | |
CN101673395A (zh) | 图像拼接方法及装置 | |
JPH1093808A (ja) | 画像合成装置および方法 | |
WO2018076460A1 (zh) | 一种终端的拍照方法和终端 | |
WO2021184302A1 (zh) | 图像处理方法、装置、成像设备、可移动载体及存储介质 | |
JP2007074578A (ja) | 画像処理装置、撮影装置、及びプログラム | |
US11393076B2 (en) | Blurring panoramic image blurring method, terminal and computer readable storage medium | |
US20090059018A1 (en) | Navigation assisted mosaic photography | |
CN108810326B (zh) | 一种拍照方法、装置及移动终端 | |
US9392146B2 (en) | Apparatus and method for extracting object | |
CN114485953A (zh) | 温度测量方法、装置及系统 | |
CN111797715A (zh) | 车位检测方法、装置、电子设备及存储介质 | |
KR101132976B1 (ko) | 복수 개의 카메라를 구비한 모바일 기기, 이를 이용한 디스플레이 표시방법 | |
KR101011704B1 (ko) | 광각의 이미지를 생성하는 영상 처리 장치 및 방법 | |
Dellaert et al. | Mosaicing a large number of widely dispersed, noisy, and distorted images: A bayesian approach | |
CN113645443B (zh) | 基于fpga的环绕视频拼接显示方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |