CN113709372B - 图像生成方法和电子设备 - Google Patents
图像生成方法和电子设备 Download PDFInfo
- Publication number
- CN113709372B CN113709372B CN202110997609.0A CN202110997609A CN113709372B CN 113709372 B CN113709372 B CN 113709372B CN 202110997609 A CN202110997609 A CN 202110997609A CN 113709372 B CN113709372 B CN 113709372B
- Authority
- CN
- China
- Prior art keywords
- image
- pixel
- pixel distance
- moving
- image sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 238000004364 calculation method Methods 0.000 claims abstract description 89
- 238000004042 decolorization Methods 0.000 claims abstract description 39
- 238000013519 translation Methods 0.000 claims description 9
- 238000003384 imaging method Methods 0.000 abstract description 38
- 238000010586 diagram Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 239000003086 colorant Substances 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像生成方法和电子设备，属于成像技术领域。所述方法包括：获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取所述图像传感器移动的像素距离和移动方向；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
Description
技术领域
本申请属于成像技术领域，具体涉及一种图像生成方法和电子设备。
背景技术
随着移动终端技术的快速发展，用户对移动终端的成像质量要求越来越高。用户在拍摄过程时，容易发生抖动，从而导致拍摄的照片或视频存在模糊、成像质量较差的问题。
目前，可以通过多种防抖技术来减弱抖动对成像质量的影响。例如，通过额外配置手机云台或通过三脚架实现静态拍摄，或者，利用具有光学防抖、电子防抖等功能的移动终端来进行拍摄，存在硬件成本较高、成像质量不稳定的缺陷。
发明内容
本申请实施例的目的是提供一种图像生成方法和电子设备，能够解决相关技术硬件成本较高、成像质量不稳定的问题。
第一方面，本申请实施例提供了一种图像生成方法，该方法包括：
获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
获取所述图像传感器移动的像素距离和移动方向；
根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
第二方面，本申请实施例提供了一种图像生成装置，该装置包括：
抖动控制单元，用于获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
第一获取单元，用于获取所述图像传感器移动的像素距离和移动方向；
计算单元，用于根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的图像生成方法的步骤。
第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的图像生成方法的步骤。
第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的图像生成方法。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和/或还原色彩的能力，可有效提升成像质量。
附图说明
图1为本申请实施例提供的图像生成方法的流程示意图；
图2为本申请实施例提供的超分辨率计算的示意图；
图3为本申请实施例提供的去尾色计算的示意图；
图4为本申请实施例提供的图像生成装置的结构示意图；
图5为本申请实施例提供的电子设备的结构示意图；
图6为本申请实施例提供的电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像生成方法和电子设备进行详细地说明。
图1为本申请实施例提供的图像生成方法的流程示意图，如图1所示，该方法包括以下步骤：
步骤100、获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
可选地，电子设备的处理单元获取用户拍摄过程中的陀螺仪数据，其中，陀螺仪数据是指陀螺仪采集的角度、加速度等数据。
进一步地，电子设备的处理单元根据陀螺仪数据确定用户拍摄过程中产生的抖动量，并根据所述抖动量生成用于使能马达的驱动信号，马达接收到驱动信号后，控制图像传感器移动相应的补偿量，以实现对抖动量的补偿。
例如，马达接收到驱动信号后，控制图像传感器向抖动量的反方向移动，从而实现对抖动量的补偿。
本申请实施例根据陀螺仪数据驱动马达控制图像传感器移动，可有效降低抖动对成像质量的影响。
步骤101、获取所述图像传感器移动的像素距离和移动方向；
图像传感器移动的像素距离和移动方向与抖动量有关，电子设备的处理单元可以获取图像传感器移动的像素距离和移动方向。
可选地，电子设备的处理单元根据处理单元的计算效率选择图像传感器移动的像素距离的具体数值。
步骤102、根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
其中，超分辨率计算是一种提高图像分辨率的计算方法；去尾色计算是克服现有的成像像素计算中通过利用像素周围的像素进行插值计算来还原彩色会出现类似拖影的成像情况。
可选地，电子设备的处理单元通过利用图像传感器移动的像素距离和移动方向，对经过去抖动后图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，通过算法上的改进，实现了在现有硬件成像基础上，提高成像质量。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离和移动方向；根据所述移动的像素距离和移动方向对图像传感器输出的第一图像进行超分辨率计算或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和/或还原色彩的能力，可有效提升成像质量。
可选地，所述根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，得到目标图像，包括：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像；
其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数。
即，电子设备的处理单元根据所述1/n个像素距离和移动方向，对图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像。
图2为本申请实施例提供的超分辨率计算的示意图。图2中左侧为图像传感器原始颜色输出效果图，左侧图中每个格子表示一个像素，如R1,1表示坐标为(1，1)的像素的红色通道数值，G2,1表示坐标为(2,1)处的像素的绿色通道数值，B2,2表示坐标为(2,2)处的像素的蓝色通道数值；右侧为假设图像传感器向上和向左各平移半个像素距离得到的效果图，为了便于理解，右侧只显示蓝色B2,2区域。这样就将左侧的1个像素值变成了空间的4个像素值。同理可得，平移1/n个像素距离，就能得到n的平方个像素值。
本申请实施例通过算法上的改进，实现了在现有硬件成像基础上，进行超分辨率计算，可以提高图像的分辨率，进而提高成像质量。
可选地，所述根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行去尾色计算，得到目标图像，包括：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像进行空间平移，以使所述第一图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
图3为本申请实施例提供的去尾色计算的示意图。图3左侧为硬件成像出来的原始数据，R2,1为只能感受到红色(RED)波段转成相应的数值，G2,2为只能感受到绿色(GREEN)波段转成相应的数值，B3,2为只能感受到蓝色(BLUE)波段转成相应的数值。图3右侧为计算得到的彩色图，空间维度为3维(红绿蓝)，在现有技术中，计算出Y2,3的红色通道数值则可以直接提取R2,3。计算出Y2,3的绿色通道数值则可以直接提取四周的绿色在求均值如(G1,3+G2,2+G2,4+G3,3)/4。计算出Y2,3的蓝色通道数值则可以直接提取四周的蓝色在求均值如(B1,2+B1,4+B3,2+B3,4)/4。这样的计算会带来的后果是在细节方面不够清晰，因为该像素的其他两个通道的数值是通过周围的颜色计算出来的，不够真实还原该空间的色彩信息。
因此，本申请实施例通过利用图像传感器移动的像素距离和移动方向，对图像传感器输出的第一图像进行空间平移，以使所述第一图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像，例如，将图2左侧图像整体向下移动一个像素距离，在G1,3会平移到R2,3，从而可以帮助Y2,3提取绿色数值，这样Y2,3对应的红色通道数值和绿色通道数值均为实际的通道数值。再例如，整体向下和向右平移，B1,2会移动到R2,3，从而可以帮助Y2,3提取蓝色数值,这样Y2,3对应的红色通道数值和蓝色通道数值均为实际的通道数值。因此实现了去尾色功能，还原出来的像素更为逼真。
本申请实施例通过算法上的改进，实现了在现有硬件成像基础上，进行去尾色计算，可以提高色彩还原度，进而提高成像质量。
可选地，所述根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算和去尾色计算，得到目标图像，包括：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到第二图像，其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数；
根据所述像素距离，对所述第二图像进行空间平移，以使所述第二图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
需要指出的是，根据所述像素距离对图像传感器输出的第一图像依次进行超分辨率计算和去尾色计算，具体的计算过程可以参考上述进行超分辨率计算和去尾色计算的描述，在此不再进行赘述。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离和移动方向；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算得到第二图像，对第二图像进行去尾色计算，最终得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和还原色彩的能力，可有效提升成像质量。
需要说明的是，本申请实施例提供的图像生成方法，执行主体可以为图像生成装置，或者该图像生成装置中的用于执行图像生成方法的控制模块。本申请实施例中以图像生成装置执行图像生成方法为例，说明本申请实施例提供的图像生成装置。
图4为本申请实施例提供的图像生成装置的结构示意图。如图4所示，该图像生成装置400包括：抖动控制单元410、第一获取单元420和计算单元430，其中，
抖动控制单元410，用于获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
第一获取单元420，用于获取所述图像传感器移动的像素距离和移动方向；
计算单元430，用于根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和/或还原色彩的能力，可有效提升成像质量。
可选地，所述计算单元，具体用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像；
其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数。
本申请实施例通过算法上的改进，实现了在现有硬件成像基础上，进行超分辨率计算，可以提高图像的分辨率，进而提高成像质量。
可选地，所述计算单元，具体用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像；
其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数。
本申请实施例通过算法上的改进，实现了在现有硬件成像基础上，进行去尾色计算，可以提高色彩还原度，进而提高成像质量。
可选地，所述计算单元，具体用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到第二图像，其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数；
根据所述像素距离，对所述第二图像进行空间平移，以使所述第二图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离和移动方向；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算得到第二图像，对第二图像进行去尾色计算，最终得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和还原色彩的能力，可有效提升成像质量。
本申请实施例中的图像生成装置可以是装置，也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personaldigital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。
本申请实施例中的图像生成装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。
本申请实施例提供的图像生成装置能够实现图1至图3的方法实施例实现的各个过程，为避免重复，这里不再赘述。
可选地，如图5所示，本申请实施例还提供一种电子设备500，包括处理器501，存储器502，存储在存储器502上并可在所述处理器501上运行的程序或指令，该程序或指令被处理器501执行时实现上述图像生成方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图6为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于：射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、以及处理器610等部件。
本领域技术人员可以理解，电子设备600还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器610逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。
其中，处理器610用于：
获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
获取所述图像传感器移动的像素距离和移动方向；
根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和/或还原色彩的能力，可有效提升成像质量。
可选地，处理器610还用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像；
其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数。
本申请实施例通过算法上的改进，实现了在现有硬件成像基础上，进行超分辨率计算，可以提高图像的分辨率，进而提高成像质量。
可选地，处理器610还用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像进行空间平移，以使所述第一图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
本申请实施例通过算法上的改进，实现了在现有硬件成像基础上，进行去尾色计算，可以提高色彩还原度，进而提高成像质量。
可选地，处理器610还用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到第二图像，其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数；
根据所述像素距离，对所述第二图像进行空间平移，以使所述第二图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
在本申请实施例中，通过获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；获取图像传感器移动的像素距离和移动方向；根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算得到第二图像，对第二图像进行去尾色计算，最终得到目标图像，在进行防抖的同时，克服了硬件成像的限制，提高了图像的分辨率和还原色彩的能力，可有效提升成像质量。
应理解的是，本申请实施例中，输入单元604可以包括图形处理器(GraphicsProcessing Unit，GPU)6041和麦克风6042，图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元606可包括显示面板6061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板6061。用户输入单元607包括触控面板6071以及其他输入设备6072。触控面板6071，也称为触摸屏。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器609可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器610可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器610中。
本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像生成方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述图像生成方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。
Claims (10)
1.一种图像生成方法，其特征在于，包括：
获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
获取所述图像传感器移动的像素距离和移动方向；
根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
2.根据权利要求1所述的图像生成方法，其特征在于，所述根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，得到目标图像，包括：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像；
其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数。
3.根据权利要求1所述的图像生成方法，其特征在于，所述根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行去尾色计算，得到目标图像，包括：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像进行空间平移，以使所述第一图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
4.根据权利要求1所述的图像生成方法，其特征在于，所述根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算和去尾色计算，得到目标图像，包括：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到第二图像，其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数；
根据所述像素距离，对所述第二图像进行空间平移，以使所述第二图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
5.一种图像生成装置，其特征在于，包括：
抖动控制单元，用于获取用户拍摄过程中的陀螺仪数据，根据所述陀螺仪数据确定抖动量并生成驱动信号发送至马达，以使所述马达根据所述驱动信号控制图像传感器移动；
第一获取单元，用于获取所述图像传感器移动的像素距离和移动方向；
计算单元，用于根据所述移动的像素距离和移动方向对所述图像传感器输出的第一图像进行超分辨率计算，或者进行去尾色计算，或者进行超分辨率计算和去尾色计算，得到目标图像。
6.根据权利要求5所述的图像生成装置，其特征在于，所述计算单元，具体用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到目标图像；
其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数。
7.根据权利要求5所述的图像生成装置，其特征在于，所述计算单元，具体用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像进行空间平移，以使所述第一图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
8.根据权利要求5所述的图像生成装置，其特征在于，所述计算单元，具体用于：
根据所述移动的像素距离和移动方向，对所述图像传感器输出的第一图像中的每个像素值进行空间扩充，以使所述每个像素值扩充为n的平方个像素值，得到第二图像，其中，所述移动的像素距离为1/n个像素距离，n为大于1的自然数；
根据所述像素距离，对所述第二图像进行空间平移，以使所述第二图像中的每个像素对应的至少两个通道数值为实际的通道数值，得到目标图像。
9.一种电子设备，其特征在于，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-4任一项所述的图像生成方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-4任一项所述的图像生成方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110997609.0A CN113709372B (zh) | 2021-08-27 | 2021-08-27 | 图像生成方法和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110997609.0A CN113709372B (zh) | 2021-08-27 | 2021-08-27 | 图像生成方法和电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113709372A CN113709372A (zh) | 2021-11-26 |
| CN113709372B true CN113709372B (zh) | 2024-01-23 |
Family
ID=78656196
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110997609.0A Active CN113709372B (zh) | 2021-08-27 | 2021-08-27 | 图像生成方法和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113709372B (zh) |
Citations (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1625268A (zh) * | 2003-12-05 | 2005-06-08 | 三洋电机株式会社 | 固体摄像元件和图像信号处理装置 |
| TW200629889A (en) * | 2004-10-29 | 2006-08-16 | Sony Corp | Solid-state imaging device, method for driving solid-state imaging device, and imaging apparatus |
| CN101472043A (zh) * | 2007-12-28 | 2009-07-01 | 佳能株式会社 | 图像处理设备和图像处理方法 |
| CN101616254A (zh) * | 2008-06-26 | 2009-12-30 | 佳能株式会社 | 摄像设备和图像处理方法 |
| CN101646032A (zh) * | 2008-08-04 | 2010-02-10 | 株式会社东芝 | 图像处理设备及图像处理方法 |
| CN101656819A (zh) * | 2008-08-19 | 2010-02-24 | 卡西欧计算机株式会社 | 图像拍摄装置及减少拖尾的方法 |
| CN101969533A (zh) * | 2010-09-08 | 2011-02-09 | 中兴通讯股份有限公司 | 一种移动终端摄像头的防抖方法及装置 |
| CN101980291A (zh) * | 2010-11-03 | 2011-02-23 | 天津大学 | 基于随机微位移的超分辨率图像重建方法 |
| CN102629969A (zh) * | 2012-03-30 | 2012-08-08 | 邓晓波 | 一种在拍摄平面物体时消除拖影的方法 |
| CN104159119A (zh) * | 2014-07-07 | 2014-11-19 | 大连民族学院 | 一种视频图像实时共享播放的超分辨率重构方法和系统 |
| CN104519282A (zh) * | 2014-12-09 | 2015-04-15 | 小米科技有限责任公司 | 图像拍摄方法及装置 |
| CN104769934A (zh) * | 2012-11-08 | 2015-07-08 | 苹果公司 | 基于光学图像稳定的超分辨率 |
| CN106254771A (zh) * | 2016-07-29 | 2016-12-21 | 广东欧珀移动通信有限公司 | 拍摄防抖方法、装置和移动终端 |
| CN106780354A (zh) * | 2016-11-14 | 2017-05-31 | 刘兰平 | 多帧图像清晰化处理方法和装置 |
| CN108234873A (zh) * | 2018-01-10 | 2018-06-29 | 北京小米移动软件有限公司 | 一种获取图像的方法和装置 |
| CN108769528A (zh) * | 2018-06-15 | 2018-11-06 | Oppo广东移动通信有限公司 | 图像补偿方法和装置、计算机可读存储介质和电子设备 |
| CN109951640A (zh) * | 2019-03-26 | 2019-06-28 | Oppo广东移动通信有限公司 | 摄像头防抖方法和系统、电子设备、计算机可读存储介质 |
| CN112261311A (zh) * | 2020-10-27 | 2021-01-22 | 维沃移动通信有限公司 | 图像采集方法、装置及移动终端、存储介质 |
| CN112822399A (zh) * | 2021-01-06 | 2021-05-18 | 维沃移动通信有限公司 | 光学防抖方法、电子设备和可读存储介质 |
-
2021
- 2021-08-27 CN CN202110997609.0A patent/CN113709372B/zh active Active
Patent Citations (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1625268A (zh) * | 2003-12-05 | 2005-06-08 | 三洋电机株式会社 | 固体摄像元件和图像信号处理装置 |
| TW200629889A (en) * | 2004-10-29 | 2006-08-16 | Sony Corp | Solid-state imaging device, method for driving solid-state imaging device, and imaging apparatus |
| CN101472043A (zh) * | 2007-12-28 | 2009-07-01 | 佳能株式会社 | 图像处理设备和图像处理方法 |
| CN101616254A (zh) * | 2008-06-26 | 2009-12-30 | 佳能株式会社 | 摄像设备和图像处理方法 |
| CN101646032A (zh) * | 2008-08-04 | 2010-02-10 | 株式会社东芝 | 图像处理设备及图像处理方法 |
| CN101656819A (zh) * | 2008-08-19 | 2010-02-24 | 卡西欧计算机株式会社 | 图像拍摄装置及减少拖尾的方法 |
| CN101969533A (zh) * | 2010-09-08 | 2011-02-09 | 中兴通讯股份有限公司 | 一种移动终端摄像头的防抖方法及装置 |
| CN101980291A (zh) * | 2010-11-03 | 2011-02-23 | 天津大学 | 基于随机微位移的超分辨率图像重建方法 |
| CN102629969A (zh) * | 2012-03-30 | 2012-08-08 | 邓晓波 | 一种在拍摄平面物体时消除拖影的方法 |
| CN104769934A (zh) * | 2012-11-08 | 2015-07-08 | 苹果公司 | 基于光学图像稳定的超分辨率 |
| CN104159119A (zh) * | 2014-07-07 | 2014-11-19 | 大连民族学院 | 一种视频图像实时共享播放的超分辨率重构方法和系统 |
| CN104519282A (zh) * | 2014-12-09 | 2015-04-15 | 小米科技有限责任公司 | 图像拍摄方法及装置 |
| CN106254771A (zh) * | 2016-07-29 | 2016-12-21 | 广东欧珀移动通信有限公司 | 拍摄防抖方法、装置和移动终端 |
| CN106780354A (zh) * | 2016-11-14 | 2017-05-31 | 刘兰平 | 多帧图像清晰化处理方法和装置 |
| CN108234873A (zh) * | 2018-01-10 | 2018-06-29 | 北京小米移动软件有限公司 | 一种获取图像的方法和装置 |
| CN108769528A (zh) * | 2018-06-15 | 2018-11-06 | Oppo广东移动通信有限公司 | 图像补偿方法和装置、计算机可读存储介质和电子设备 |
| CN109951640A (zh) * | 2019-03-26 | 2019-06-28 | Oppo广东移动通信有限公司 | 摄像头防抖方法和系统、电子设备、计算机可读存储介质 |
| CN112261311A (zh) * | 2020-10-27 | 2021-01-22 | 维沃移动通信有限公司 | 图像采集方法、装置及移动终端、存储介质 |
| CN112822399A (zh) * | 2021-01-06 | 2021-05-18 | 维沃移动通信有限公司 | 光学防抖方法、电子设备和可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113709372A (zh) | 2021-11-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20220261960A1 (en) | Super-resolution reconstruction method and related apparatus | |
| KR20190127838A (ko) | 카메라 자세 정보를 결정하기 위한 방법, 장치 및 디바이스, 그리고 저장 매체 | |
| CN113596294A (zh) | 拍摄方法、装置和电子设备 | |
| CN113126862B (zh) | 截屏方法、装置、电子设备以及可读存储介质 | |
| CN112037160B (zh) | 图像处理方法、装置及设备 | |
| CN114339072A (zh) | 图像处理电路、方法和电子设备 | |
| CN112367486B (zh) | 视频处理方法及装置 | |
| CN113721876A (zh) | 投屏处理方法及相关设备 | |
| CN112565603B (zh) | 图像处理方法、装置及电子设备 | |
| CN113709372B (zh) | 图像生成方法和电子设备 | |
| CN112738398B (zh) | 一种图像防抖方法、装置和电子设备 | |
| CN114143455B (zh) | 拍摄方法、装置及电子设备 | |
| CN113315906B (zh) | 图像处理方法、装置及电子设备 | |
| CN113393391B (zh) | 图像增强方法、图像增强装置、电子设备和存储介质 | |
| CN112351205B (zh) | 拍摄控制方法及装置 | |
| CN112367467B (zh) | 显示控制方法、装置、电子设备和介质 | |
| CN114339051A (zh) | 拍摄方法、装置、电子设备和可读存储介质 | |
| CN113888435A (zh) | 图像处理方法、装置、电子设备和可读存储介质 | |
| CN112333388B (zh) | 图像显示方法、装置和电子设备 | |
| CN114125296B (zh) | 图像处理方法、装置、电子设备和可读存储介质 | |
| CN112367470B (zh) | 图像处理方法、装置及电子设备 | |
| CN108810322B (zh) | 图像处理方法以及相关装置 | |
| CN114119399A (zh) | 图像处理方法和装置 | |
| CN117271090A (zh) | 图像处理方法、装置、电子设备及介质 | |
| CN113850739A (zh) | 图像处理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |