CN109949381A - 图像处理方法、装置、图像处理芯片、摄像组件及飞行器 - Google Patents
图像处理方法、装置、图像处理芯片、摄像组件及飞行器 Download PDFInfo
- Publication number
- CN109949381A CN109949381A CN201910196165.3A CN201910196165A CN109949381A CN 109949381 A CN109949381 A CN 109949381A CN 201910196165 A CN201910196165 A CN 201910196165A CN 109949381 A CN109949381 A CN 109949381A
- Authority
- CN
- China
- Prior art keywords
- target
- target area
- original image
- image
- code rate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
Abstract
本发明实施例涉及图像处理技术领域，公开了一种图像处理方法、装置、图像处理芯片、摄像组件、飞行器及飞行器系统。其中，该方法包括：确定原始图像中的目标；根据所述目标确定所述原始图像中的目标区域，其中，所述目标位于所述目标区域内；对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，其中，所述第一码率高于所述第二码率。通过该方法可以在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
Description
技术领域
本发明实施例涉及图像处理技术领域，尤其涉及一种图像处理方法、装置、图像处理芯片、具有该图像处理芯片的摄像组件、具有该摄像组件的飞行器，以及包含该飞行器的飞行器系统。
背景技术
随着飞行技术的发展，飞行器被广泛应用于各个领域。例如，以无人机为例，其使用范围已经扩宽到军事、科研、民用三大领域，具体在电力通信、气象、农业、海洋、勘探、摄影、搜救、防灾减灾、农作物估产、缉毒缉私、边境巡逻、治安反恐等领域应用甚广。
无人机作为一种处在迅速发展中的新概念装备，由于其具有体积小、重量轻、机动灵活、反应快速、无人驾驶、操作要求低等优点，通过云台搭载多类拍摄设备，可以实现影像实时传输、高危地区探测功能，是卫星遥感与传统航空遥感的有力补充。其中，航拍是无人机实现高危地区探测等所必备的一个功能。在航拍中，通过无人机的拍摄设备采集图像，并将所采集的图像传输给地面端，以便用户可以实时了解无人机的拍摄情况。并且，随着科技的发展，无人机可满足的用户需求越来越多，例如，满足更好了解目标区域内图像情况的需求。其中，为了使得用户可更好的看清楚目标区域内的图像，可以提高目标区域内的图像的清晰度。而若要提高目标区域内的图像的清晰度，则需要增加传输的码率。但是在图像传输中，由于网络宽带是有限的，传输的码率不能过高。而码率低，会使得得到的整个图像并不是很清晰，从而也无法很好的保证目标区域内的图像的清晰度。
因此，如何在不提升整个码率的情况下，提高目标区域内的图像的清晰度成为亟需解决的问题。
发明内容
本发明实施例提供一种图像处理方法、装置、图像处理芯片、摄像组件、飞行器及飞行器系统，可以在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
本发明实施例公开了如下技术方案：
第一方面，本发明实施例提供了一种图像处理方法，所述方法包括：
确定原始图像中的目标；
根据所述目标确定所述原始图像中的目标区域，其中，所述目标位于所述目标区域内；
对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，其中，所述第一码率高于所述第二码率。
在一些实施例中，所述根据所述目标确定原始图像中的目标区域，包括：
根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，其中，所述目标位于所述最小区域和所述最大区域的中心位置；
将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像；
根据所述结果图像确定所述目标区域的边线；
根据所述目标区域的边线，确定所述目标区域。
在一些实施例中，所述根据所述目标区域的边线，确定所述目标区域，包括：
检测在所述最大区域的边线至所述最小区域的边线的区域内的结果图像中是否存在灰度值大于预设灰度阈值的像素点；
若不存在大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域；
若存在大于预设灰度阈值的像素点，则根据检测到的存在大于预设灰度阈值的像素点确定所述目标区域。
在一些实施例中，所述最小区域和最大区域为四边形；则，
所述根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，包括：
根据第一预设宽度、第一预设高度及所述目标的坐标，确定所述最小区域；
根据第二预设宽度、第二预设高度及所述目标的坐标，确定所述最大区域。
在一些实施例中，所述最小区域内的原始图像包含4个像素点，所述最大区域的尺寸为所述原始图像的尺寸的二分之一。
在一些实施例中，所述根据所述目标确定所述原始图像中的目标区域，包括：
获取用户输入的区域边框参数，所述区域边框参数用于设置目标区域的宽度和目标区域的高度；
根据所述区域边框参数及所述目标的坐标，确定所述目标区域。
在一些实施例中，所述对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，包括：
采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码；或者，
对整个原始图像进行编码产生第一路码流，并再对所述目标区域内的原始图像进行编码产生第二路码流。
在一些实施例中，所述确定原始图像中的目标，包括：
接收终端发送的用户的指点操作，其中，所述指点操作包括触控所述终端的屏幕；
根据所述用户的指点操作，确定所述原始图像中的所述目标。
在一些实施例中，所述方法还包括：
获取用户输入的码率调整参数，所述码率调整参数用于调整所述目标区域内及所述目标区域外的图像的码率；
根据所述码率调整参数，调整所述目标区域内及所述目标区域外的图像的码率。
第二方面，本发明实施例提供了一种图像处理装置，所述装置包括：
目标确定模块，用于确定原始图像中的目标；
目标区域确定模块，用于根据所述目标确定所述原始图像中的目标区域，其中，所述目标位于所述目标区域内；
编码模块，用于对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，其中，所述第一码率高于所述第二码率。
在一些实施例中，所述目标区域确定模块包括：
第一区域确定单元，用于根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，其中，所述目标位于所述最小区域和所述最大区域的中心位置；
计算单元，用于将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像；
边线确定单元，用于根据所述结果图像确定所述目标区域的边线；
第二区域确定单元，用于根据所述目标区域的边线，确定所述目标区域。
在一些实施例中，所述第二区域确定单元具体用于：
检测在所述最大区域的边线至所述最小区域的边线的区域内的结果图像中是否存在灰度值大于预设灰度阈值的像素点；
若不存在大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域；
若存在大于预设灰度阈值的像素点，则根据检测到的存在大于预设灰度阈值的像素点确定所述目标区域。
在一些实施例中，所述最小区域和最大区域为四边形；则，
所述第一区域确定单元具体用于：
根据第一预设宽度、第一预设高度及所述目标的坐标，确定所述最小区域；
根据第二预设宽度、第二预设高度及所述目标的坐标，确定所述最大区域。
在一些实施例中，所述最小区域内的原始图像包含4个像素点，所述最大区域的尺寸为所述原始图像的尺寸的二分之一。
在一些实施例中，所述目标区域确定模块包括：
区域边框参数获取单元，用于获取用户输入的区域边框参数，所述区域边框参数用于设置目标区域的宽度和目标区域的高度；
第三区域确定单元，用于根据所述区域边框参数及所述目标的坐标，确定所述目标区域。
在一些实施例中，所述编码模块具体用于：
采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码；或者，
对整个原始图像进行编码产生第一路码流，并再对所述目标区域内的原始图像进行编码产生第二路码流。
在一些实施例中，所述目标确定模块具体用于：
接收终端发送的用户的指点操作，其中，所述指点操作包括触控所述终端的屏幕；
根据所述用户的指点操作，确定所述原始图像中的所述目标。
在一些实施例中，所述装置还包括：
码率调整参数获取模块，用于获取用户输入的码率调整参数，所述码率调整参数用于调整所述目标区域内及所述目标区域外的图像的码率；
调整模块，用于根据所述码率调整参数，调整所述目标区域内及所述目标区域外的图像的码率。
第三方面，本发明实施例提供了一种图像处理芯片，包括：
至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上所述的图像处理方法。
第四方面，本发明实施例提供了一种摄像组件，包括：图像采集装置及图像处理芯片，所述图像处理芯片与所述图像采集装置连接；所述图像采集装置用于采集原始图像，所述图像处理芯片用于对所述原始图像进行处理；其中，所述图像处理芯片为如上所述的图像处理芯片。
第五方面，本发明实施例提供了一种飞行器，包括机身、与所述机身相连的机臂和设于所述机臂的动力装置、云台和摄像组件，所述摄像组件搭载于所述云台，所述云台安装于所述机身，所述摄像组件为如上所述的摄像组件。
第六方面，本发明实施例提供了一种飞行器系统，包括：飞行器和终端，所述飞行器与所述终端通信连接，所述飞行器为上述的飞行器，所述飞行器的摄像组件将处理后的图像发送给终端，所述终端对处理后的图像进行解码并显示
第七方面，本发明实施例提供了一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行如上所述的图像处理方法。
第八方面，本发明实施例提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行如上所述的图像处理方法。
在本发明实施例中，对目标区域内的原始图像采用第一码率进行编码，对目标区域外的原始图像采用第二码率进行编码，其中，第一码率高于第二码率，从而实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。
图1是本发明实施例提供的一种图像处理方法的应用环境的示意图；
图2是本发明实施例提供的一种无人机的示意图；
图3是本发明实施例提供的另一种无人机的示意图；
图4是本发明实施例提供的一种图像处理方法的流程示意图；
图5是本发明实施例提供的确定最大区域和最小区域的示意图；
图6是本发明实施例提供的将最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算所得到结果图像的示意图；
图7是本发明实施例提供的另一种图像处理方法的流程示意图；
图8是本发明实施例提供的提供清晰度比值a作为码率调整参数供用户配置的示意图；
图9是本发明实施例提供的一种图像处理装置的示意图；
图10a是图9中目标区域确定模块的一种示意图；
图10b是图9中目标区域确定模块的另一种示意图；
图11是本发明实施例提供的一种图像处理芯片的硬件结构示意图；
图12是本发明实施例提供的一种摄像组件的示意图；
图13是本发明实施例提供的一种飞行器的示意图；
图14是本发明实施例提供的一种系统的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
图1为本发明实施例提供的图像处理方法的其中一种应用环境的示意图。其中，该应用环境中包括：飞行器100和终端200。该飞行器100与终端200连接。其连接可以为通信连接，如飞行器100与终端200通过Wifi模块或蓝牙模块等无线通信模块建立通信连接。
通过该通信连接以实现飞行器100与终端200之间的数据或信息等的交互。例如，飞行器100将飞行器100的飞行信息发送给终端200，如将飞行器100的飞行速度、姿态信息等发送给终端200以便持有该终端200的用户可以了解飞行器100的飞行状态，或飞行器100将所拍摄的图像发送给终端200，以便在终端200上进行显示；或者，终端200将用于控制飞行器100的飞行的指令发送给飞行器100，以控制飞行器100等。
在飞行器100进行航拍时，通常为了使得用户可更好的看清楚飞行器100所拍摄目标区域的图像，可以提高指定目标内的图像的清晰度。其中，目标区域可以为用户感兴趣的区域，例如用户感兴趣的目标所在的区域等。而若要提高目标区域内的图像的清晰度，则需要增加传输的码率。但是在图像传输中，由于网络宽带是有限的，传输的码率不能过高。而码率低，会使得得到的整个图像并不是很清晰，从而也无法很好的保证目标区域内的图像的清晰度。
例如，在码率低的情况下，即使进行指定测光或自动聚焦(AF聚焦)等处理，由于整个图像清晰度不够，经处理后的目标区域内的图像也不会很清晰。其中，指定测光是指选点一个目标点，以该目标点为中心进行曝光处理，提升该目标点周边区域内的图像的清晰度。AF聚焦是指选点一个目标点，以该目标点所对应的物体进行聚焦，提升该目标点区域内图像的清晰度。
基于此，在本发明实施例中，首先，飞行器100获取目标；然后，基于该目标确定目标区域；最后，对目标区域内的原始图像采用第一码率进行编码，对目标区域外的原始图像采用第二码率进行编码，其中，第一码率高于第二码率，从而实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
此外，飞行器100还可以将经过上述编码处理后的图像发送终端200。终端200接收到该图像后，对该图像进行解码并进行显示，以便用户可以了解飞行器100的拍摄情况。
其中，上述飞行器100可以为任何类型的飞行设备。例如，无人机(UnmannedAerial Vehicle，UAV)、无人船或其它可移动装置等等。以下对本发明的描述使用无人机作为飞行器的示例。对于本领域技术人员将会显而易见的是，可以不受限制地使用其他类型的飞行器。
其中，无人机是由遥控设备或自备程序控制装置操纵，带任务载荷的不载人航空器。该无人机可以为各种类型的无人机，例如，无人机可以是小型的无人机。
在某些实施例中，无人机可以是旋翼飞行器(rotorcraft)，例如，由多个推动装置通过空气推动的多旋翼飞行器，本发明的实施例并不限于此，无人机也可以是其它类型的无人机或可移动装置，如固定翼无人机、无人飞艇、伞翼无人机、扑翼无人机等等。
下面以无人机为例对飞行器进行具体描述。
请参阅图2，为本发明实施例提供的无人机的示意图。其中，该无人机100′包括：机身11、设置于该机身11的图像采集设备12以及设置于机身11内的图像处理芯片(图未示)。其中，该图像处理芯片为执行该图像处理方法的执行主体。
其中，机身11可以包括中心架以及与中心架连接的一个或多个机臂，一个或多个机臂呈辐射状从中心架延伸出。该机臂的数量可以为2个、4个、6个等等。也即，机臂的数量在此不受限制。在一些其他实施例中，机臂也可以独立于机身11，也即，无人机100′包括：机身11及机臂，机身11与机臂连接，如机身11包括中心架，该中心架与机臂连接。
其中，图像采集设备12与图像处理芯片连接，该连接可以为通信连接，以实现图像采集设备12与图像处理芯片之间的数据交互。
例如，图像采集设备12用于采集图像数据，并通过该通信连接，将所采集的图像数据发送给图像处理芯片，以便图像处理芯片对接收到的图像进行处理。
需要说明的是，上述图像采集设备12可以为任何合适的感光元件或图像传感器，例如，CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)、CCD(Charge-coupled Device，电荷耦合元件)等。
并且，图像采集设备12可以为若干个，如1个、2个、3个4个等。若干个图像采集设备12可以为相同的图像采集设备，也可以为不相同的图像采集设备，以便满足不同的需求。例如，以无人机100′的全面避障为例，无人机100′的前向运动和向下着陆距离的判断通常最为重要，因此，前视镜头及下视镜头采用分辨率较高的镜头，如720P的镜头，后视镜头、上视镜头、左视镜头、右视镜头采用分辨率相对较低的镜头，如VGA镜头。
上述图像处理芯片可以为任何合适的能实现上述图像处理方法的芯片，如微处理器、微控制单元、单片机、控制器等。
无人机100′作为一种飞行载具，主要用于通过飞行完成指定任务，如飞往指定地点的飞行任务，或者在飞行过程中进行拍摄的拍摄任务等。因此，用于实现无人机100′的飞行的系统是人机100′必备的系统。例如，如图3所示，该人机100′还包括：动力系统13以及飞行控制系统14。
其中，飞行控制系统14及动力系统13均设置于机身11。飞行控制系统14与动力系统13连接。该连接可以为通信连接。其中，通过该连接以便飞行控制系统14对动力系统13进行控制。
此外，飞行控制系统14还与终端200通信连接，以便实现与终端200的数据或信息的交互。
其中，动力系统13安装于机身11的机臂上，例如，动力系统13安装于一个或多个机臂。该动力系统13可以包括电子调速器(简称为电调)、一个或多个螺旋桨以及与一个或多个螺旋桨相对应的一个或多个第一电机。
其中，第一电机连接在电子调速器与螺旋桨之间，第一电机和螺旋桨设置在对应的机臂上。第一电机用于驱动螺旋桨旋转，从而为无人机100'的飞行提供动力，该动力使得无人机100'能够实现一个或多个自由度的运动，如前后运动、上下运动等等。
在一些实施例中，无人机100'可以围绕一个或多个旋转轴旋转。例如，上述旋转轴可以包括横滚轴、平移轴和俯仰轴。
可以理解的是，第一电机可以是直流电机，也可以交流电机。另外，第一电机可以是无刷电机，也可以有刷电机。
电子调速器用于接收飞行控制系统14产生的驱动信号，并根据驱动信号提供驱动电流给第一电机，以控制第一电机的转速，从而控制无人机100'的飞行。
其中，飞行控制系统14为无人机100'的飞行的主控系统，其具备对无人机100'的飞行任务进行监控和操纵的能力，包含对无人机100'的发射和回收控制的一组设备。飞行控制系统14用于实现对无人机100'的飞行的控制。
在一些实现方式中，飞行控制系统14可以包括飞行控制器和传感系统。其中，飞行控制器和传感系统通信连接，以便进行数据或信息的传输。
传感系统用于测量无人机100'及无人机100'的各个部件的位置和状态信息等等，如三维位置、三维角度、三维速度、三维加速度和三维角速度、飞行高度等等。例如，在无人机100'飞行时，可以通过传感系统实时获取无人机当前的飞行信息，以便实时确定无人机所处的飞行状态。
传感系统例如可以包括红外传感器、声波传感器、陀螺仪、电子罗盘、惯性测量单元(Inertial Measurement Unit，IMU)、视觉传感器、全球导航卫星系统和气压计等传感器中的至少一种。例如，全球导航卫星系统可以是全球定位系统(Global PositioningSystem，GPS)。通过IMU可以测量无人机100'的飞行过程中的姿态参数，通过红外传感器或声波传感器可以测量无人机100'的飞行高度等等。
飞行控制器用于控制无人机100'，如控制无人机100'的飞行或拍摄。可以理解的是，飞行控制器可以按照预先编好的程序指令对无人机100'进行控制，也可以通过响应来自其它设备的一个或多个控制指令对无人机100'进行控制。
例如，终端200与飞行控制器连接，终端200将控制指令发送给飞行控制器，从而使得飞行控制器通过该控制指令控制无人机100'。例如，以控制无人机100'的飞行为例，飞行控制器将该控制指令发送给电子调速器以产生驱动信号，并根据驱动信号提供驱动电流给第一电机，以控制第一电机的转速，从而控制无人机100'的飞行。
在一些实施例中，为了更方便的控制图像采集装置采集图像，上述无人机100'还可以包括：云台15。该云台15安装于机身11，用于搭载图像采集装置。
其中，云台15可以包括云台电调和第二电机。飞行控制器可以通过云台电调控制第二电机以控制云台15的运动。可选地，在一些其它实施例中，云台15还可以包括控制器，用于通过控制云台电调和第二电机来控制云台15的运动。
可以理解的是，云台15可以独立于无人机100'，也可以为无人机100'的一部分。可以理解的是，第二电机可以是直流电机，也可以交流电机。
另外，第二电机可以是无刷电机，也可以有刷电机。还可以理解的是，云台15可以位于机身11的顶部，也可以位于机身11的底部。
可以理解的是，上述对于无人机100'的各组成部分的命名仅是出于标识的目的，并不应理解为对本发明的实施例的限制。
上述终端200与无人机100'的飞行控制器连接，以控制无人机100'。终端200为受地(舰)面或空中平台上的遥控单元，通过发送控制指令给飞行控制器以控制无人机100'的飞行。
并且，终端200还可以与图像处理芯片通信连接，以便接收图像处理芯片处理后的图像，对该图像进行解码并进行显示，以便用户可以了解无人机100'的拍摄情况。
需要说明的是该终端200可以是任何合适的设备。例如，该终端200可以为智能手机、平板、个人计算机(Personal Computer，PC)、可穿戴设备、遥控器等等。
在一些实现方式中，该终端200包括：输入装置及输出装置。
该输入装置用于接收用户操作。例如，输入装置接收用户输入的指点操作，以便基于该指点操作得到目标点，以便后续终端200将该目标点发送给图像处理芯片。
其中，该输入装置可以为任何合适的输入设备，如键盘、鼠标、扫描仪、光笔、触摸屏、按键等。
输出装置用于显示图像，以便用户直观的了解无人机100'的拍摄情况。该输出装置是一种人机接口设备，其可以为任何合适的输出设备，如显示屏、显示面板等。
需要说明的是，本发明实施例提供的图像处理方法还可以进一步的拓展到其他合适的应用环境中，而不限于图1中所示的应用环境。例如，在实际应用的过程中，终端200的数量可以更多或更少，例如，3个、4个等等，也即，终端200的数量在此不予限定。
此外，在一些其他应用环境中，该图像处理方法还可应用于其他涉及图像处理的设备，如小区监控设备、车辆监控设备、机器人等，而不限于本发明实施例描述的飞行器中。
实施例1：
图4为本发明实施例提供的一种图像处理方法的流程示意图。所述图像处理方法用于对由图像采集设备所采集的图像数据进行处理。该图像处理方法可应用于各种涉及图像处理的设备中，如飞行器、小区监控设备、车辆监控设备、机器人等。该图像处理方法可由任何合适类型的芯片执行，如由上述图2的无人机100′的图像处理芯片执行。
请参照图4，所述图像处理方法包括：
401：确定原始图像中的目标。
其中，原始图像可以为直接由图像采集装置采集得到的未经处理的初始图像。该目标可以是用户自行选择也可以是自动生成。
例如，在一些实现方式中，所述确定原始图像中的目标，包括：接收终端发送的用户的指点操作，其中，所述指点操作包括触控所述终端的屏幕；根据所述用户的指点操作，确定所述原始图像中的所述目标。具体的，终端接收用户的输入操作，如用户的指点操作，该指点操作用于确定用户所选择的目标。并且，终端将该目标发送给图像处理芯片，以便图像处理芯片确定原始图像中的目标。
其中，上述触控所述终端的屏幕可以为：点击屏幕、触摸屏幕、按压屏幕或其他触控屏幕的操作。
在一些其他实施例中，所述指点操作还可以包括在终端的输入装置如屏幕上输入目标的坐标，以确定该目标。
此外，在一些其他实施例中，所述确定原始图像中的目标，还可以为：接收终端自动识别的目标。例如，可以根据历史记录数据自动识别目标。该历史记录数据可以为统计一段时间内用户所选取目标所组成的数据。例如，在预设一段时间内，统计用户每次所选取的目标，将该段时间内，所选取的目标中被选择频率最高的目标作为所确定的目标。
402：根据所述目标确定所述原始图像中的目标区域。
其中，所述目标位于所述目标区域内。例如，该目标可以位于目标区域的中心位置。
其中，可以通过以下两种方式确定目标区域：1)基于目标自动识别目标区域；2)基于用户设置确定目标区域。
对于上述第一种方式，上述根据所述目标确定原始图像中的目标区域，具体可以包括：根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，其中，所述目标位于所述最小区域和所述最大区域的中心位置；将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像；根据所述结果图像确定所述目标区域的边线；根据所述目标区域的边线，确定所述目标区域。
在一些实现方式中，所述目标区域的边线，确定所述目标区域，包括：检测在所述最大区域的边线至所述最小区域的边线的区域内的结果图像中是否存在灰度值大于预设灰度阈值的像素点；若不存在大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域；若存在大于预设灰度阈值的像素点，则根据检测到的存在大于预设灰度阈值的像素点确定所述目标区域。
其中，预设灰度阈值为用于界定目标区域的边缘的临界值。像素点灰度值越大，说明所对应的点变化越大，超过预设灰度阈值时，则表明时目标区域的边缘了。该预设灰度阈值可以根据需要进行设置，例如，该预设灰度阈值可以为100。
其中，所述最小区域和最大区域为四边形。例如，最小区域和最大区域均为长方形。
基于此，则该目标区域的最小区域和最大区域可以基于目标、预设的长宽所确定。也即，所述根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，，包括：根据第一预设宽度、第一预设高度及所述目标的坐标，确定所述最小区域；根据第二预设宽度、第二预设高度及所述目标的坐标，确定所述最大区域。
在一些实现方式中，所述最小区域内的原始图像包含4个像素点，所述最大区域的尺寸为所述原始图像的尺寸的二分之一。
需要说明的是，在一些其他实施例中，该最小区域和最大区域还可以为任何合适的形状。例如，圆形、六边形等。
下面结合图5和图6，对上述第一种确定目标区域的方式进行具体描述。
如图5所示，假设基于用户指点操作所确定的目标为原始图像中某一位置，其坐标为(X0,Y0)。并且，上述最小区域和最大区域为长方形，最小区域的第一预设宽度为Ws，第一预设高度为Hs，最大区域的第二预设宽度为Wm，第二预设高度为Hm。
如图6所示，将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像。其中，该预设矩阵可以为
然后，从最大区域的四条边开始，往内四个方向检测是否存在灰度值大于预设灰度阈值的像素点，例如，该预设灰度阈值可以为100。
若左边线L一侧检测到的大于预设灰度阈值的像素点的坐标为(X1,Y1)，下边线D一侧检测到的大于预设灰度阈值的像素点的坐标为(X2,Y2)，右边线R一侧检测到的大于预设灰度阈值的像素点的坐标为(X3,Y3)，上边线U一侧检测到的大于预设灰度阈值的像素点的坐标为(X4,Y4)。则根据检测到的存在大于预设灰度阈值的像素点所确定的目标区域，其左上角的点坐标为(X1,Y4)，左下角的点的坐标为(X1,Y2)，右上角的点的坐标为(X3,Y4)，右下角的点的坐标(X3,Y2)。
若从最大区域的四条边开始，往内四个方向检测一直到最小区域边线都没有检测到大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域。
通过上述方式，便可实现确定目标区域的自动化检测，以便于方便的确定该目标区域。
对于上述第二种方式，上述根据所述目标确定所述原始图像中的目标区域，具体可以包括：获取用户输入的区域边框参数，所述区域边框参数用于设置目标区域的宽度和目标区域的高度；根据所述区域边框参数及所述目标的坐标，确定所述目标区域。
例如，在确定目标后，在终端中预存有默认大小的区域框，用户可以通过终端输入的区域边框参数以调整目标区域的宽度和目标区域的高度，从而确定目标区域。
通过上述确定目标区域的方式，可以便于用户根据需要设置目标区域，具有很高的灵活性；此外，还可以精确设置目标区域，防止自动识别目标区域的误判断情况。
403：对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码。
其中，所述第一码率高于所述第二码率。码率是指视频文件如图像在单位时间内使用的数据流量，也叫码流率，通俗一点的理解就是取样率,是视频、图像编码中画面质量控制中最重要的部分，通常单位为kb/s或者Mb/s。
在同样分辨率下，图像的码流越大，压缩比就越小，画面质量就越高。码率越大，说明单位时间内取样率越大，数据流，精度就越高，处理出来的图像就越接近原始文件，图像质量越好，画质越清晰。因此，在所述第一码率高于所述第二码率的情况下，目标区域内的原始图像的清晰度高于目标区域外的原始图像。通过该方式，从而实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
在一些实现方式中，所述对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，包括：采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码；或者，对整个原始图像进行编码产生第一路码流，并再对所述目标区域内的原始图像进行编码产生第二路码流。
其中，量化参数(Quantizer Parameter，QP)反映了空间细节压缩情况。QP值越小，量化越精细，图像质量越高，产生的码流也越长。如QP小，大部分的细节都会被保留；QP增大，一些细节丢失，码率降低，但图像质量下降。
对于上述的第一种编码方式，可以基于H264/H265协议扩展部分来实现，对目标区域内的编码宏块QP值进行提升，降低目标区域外的宏块QP值，也即采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码，从而实现整体码率不变的情况下提升目标区域内的图像的清晰度。
对于上述的第二种编码方式，可以在实时码流基础上增加一路码流，即针对整个原始图像进行编码产生一路实时码流即第一路码流之后，再对目标区域内的原始图像进行编码产生另外一路小码流及第二路码流。并且，在对整个原始图像进行编码时，降低目标区域外的原始图像的码流。此外，第一路码流和第二码流传输给终端分别进行解码，在终端的输出装置上叠加显示。
需要说明的是，在本发明实施例中所示步骤401-403中未详尽描述的技术细节，可参考上述图像处理方法的应用场景中的具体描述。
在一些实施例中，为了满足用户的需求，如背景虚化或者指定区域虚化的需求，可以进行码率调整。
例如，如图7所示，上述图像处理方法还包括：
404：获取用户输入的码率调整参数，所述码率调整参数用于调整所述目标区域内及所述目标区域外的图像的码率。
405：根据所述码率调整参数，调整所述目标区域内及所述目标区域外的图像的码率。
例如，在终端的屏幕上，提供输入的码率调整参数的入口。如提供清晰度比值a(如取0-1)作为码率调整参数供用户配置，如图8所示。当时，目标区域内和目标区域外的图像的清晰度是一样的。在整体码率保持不变的情况下，a越高，目标区域内所采用的码率越高，目标区域内的图像越清晰，目标区域外的所采用码率越低，目标区域外的图像越模糊；a越低，目标区域内所采用的码率越低，目标区域内的图像越模糊，目标区域外的所采用码率越高，目标区域外的图像越清晰。
通过调节清晰度比值a，从而满足背景虚化或者指定区域虚化的特定需求。
在本发明各个实施例中，对目标区域内的原始图像采用第一码率进行编码，对目标区域外的原始图像采用第二码率进行编码，其中，第一码率高于第二码率，从而实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
实施例2：
图9为本发明实施例提供的一种图像处理装置示意图。该图像处理装置90用于对由图像采集设备所采集的图像数据进行处理。该图像处理装置90可配置于各种涉及图像处理的设备的芯片中，该涉及图像处理的设备可以为飞行器、小区监控设备、车辆监控设备、机器人等。该芯片可以为图像处理芯片，如配置于上述图2的无人机100′的图像处理芯片中。
参照图9，所述图像处理装置90包括：目标确定模块901、目标区域确定模块902、编码模块903、码率调整参数获取模块904以及调整模块905。
其中，目标确定模块901用于确定原始图像中的目标。
在一些实现方式中，所述目标确定模块901具体用于：接收终端发送的用户的指点操作，其中，所述指点操作包括触控所述终端的屏幕；根据所述用户的指点操作，确定所述原始图像中的所述目标。
具体的，终端接收用户的输入操作，如用户的指点操作，该指点操作用于确定用户所选择的目标。并且，终端将该目标发送给目标确定模块901，以便确定原始图像中的目标。
其中，上述触控所述终端的屏幕可以为：点击屏幕、触摸屏幕、按压屏幕或其他触控屏幕的操作。
在一些其他实施例中，所述指点操作还可以包括在终端的输入装置如屏幕上输入目标的坐标，以确定该目标。
此外，在一些其他实施例中，所述目标确定模块901具体用于：接收终端自动识别的目标。例如，可以根据历史记录数据自动识别目标。该历史记录数据可以为统计一段时间内用户所选取目标点所组成的数据。例如，在预设一段时间内，统计用户每次所选取的目标，将该段时间内，所选取的目标中被选择频率最高的目标作为所确定的目标。
其中，目标区域确定模块902用于根据所述目标确定所述原始图像中的目标区域。
其中，目标区域确定模块902可以通过以下两种方式确定目标区域：1)基于目标自动识别目标区域；2)基于用户设置确定目标区域。
对于上述第一种方式，如图10a所示，所述目标区域确定模块902包括：第一区域确定单元9021，根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，其中，所述目标位于所述最小区域和所述最大区域的中心位置；计算单元9022，用于将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像；边线确定单元9023，用于根据所述结果图像确定所述目标区域的边线；第二区域确定单元9024，用于根据所述目标区域的边线，确定所述目标区域。
在一些实现方式中，所述第二区域确定单元9024具体用于：检测在所述最大区域的边线至所述最小区域的边线的区域内的结果图像中是否存在灰度值大于预设灰度阈值的像素点；若不存在大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域；若存在大于预设灰度阈值的像素点，则根据检测到的存在大于预设灰度阈值的像素点确定所述目标区域。
其中，预设灰度阈值为用于界定目标区域的边缘的临界值。像素点灰度值越大，说明所对应的点变化越大，超过预设灰度阈值时，则表明时目标区域的边缘了。该预设灰度阈值可以根据需要进行设置，例如，该预设灰度阈值可以为100。
其中，所述最小区域和最大区域为四边形。例如，最小区域和最大区域均为长方形。
基于此，则该目标区域的最小区域和最大区域可以基于目标、预设的长宽所确定。也即，所述第一区域确定单元9021具体用于：根据第一预设宽度、第一预设高度及所述目标的坐标，确定所述最小区域；根据第二预设宽度、第二预设高度及所述目标的坐标，确定所述最大区域。
在一些实现方式中，所述最小区域内的原始图像包含4个像素点，所述最大区域的尺寸为所述原始图像的尺寸的二分之一。
需要说明的是，在一些其他实施例中，该最小区域和最大区域还可以为任何合适的形状。例如，圆形、六边形等。
目标区域确定模块902通过上述确定目标区域的方式，便可实现确定目标区域的自动化检测，以便于方便的确定该目标区域。
对于上述第二种方式，如图10b所示，所述目标区域确定模块902包括：区域边框参数获取单元9025，用于获取用户输入的区域边框参数，所述区域边框参数用于设置目标区域的宽度和目标区域的高度；第三区域确定单元9026，用于根据所述区域边框参数及所述目标的坐标，确定所述目标区域。
例如，在确定目标后，在终端中预存有默认大小的区域框，用户可以通过终端输入的区域边框参数以调整目标区域的宽度和目标区域的高度，从而使得目标区域确定模块902确定目标区域。
目标区域确定模块902通过上述确定目标区域的方式，可以便于用户根据需要设置目标区域，具有很高的灵活性；此外，还可以精确设置目标区域，防止自动识别目标区域的误判断情况。
其中，编码模块903用于对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码。
在一些实现方式中，所述编码模块903具体用于：采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码；或者，对整个原始图像进行编码产生第一路码流，并再对所述目标区域内的原始图像进行编码产生第二路码流。
其中，码率调整参数获取模块904用于获取用户输入的码率调整参数，所述码率调整参数用于调整所述目标区域内及所述目标区域外的图像的码率。
其中调整模块905用于根据所述码率调整参数，调整所述目标区域内及所述目标区域外的图像的码率。
例如，在终端的屏幕上，提供输入的码率调整参数的入口。如提供清晰度比值a(如取0-1)作为码率调整参数供用户配置。当 时，目标区域内和目标区域外的图像的清晰度是一样的。在整体码率保持不变的情况下，a越高，目标区域内所采用的码率越高，目标区域内的图像越清晰，目标区域外的所采用码率越低，目标区域外的图像越模糊；a越低，目标区域内所采用的码率越低，目标区域内的图像越模糊，目标区域外的所采用码率越高，目标区域外的图像越清晰。
通过调节清晰度比值a，从而满足背景虚化或者指定区域虚化的特定需求。
需要说明的是，在一些其它实施例中，码率调整参数获取模块904以及调整模块905并非图像处理装置90的必要模块，也即在一些其它实施例中，码率调整参数获取模块904以及调整模块905可以省略。
还需要说明的是，在本发明实施例中，所述图像处理装置90可执行任意方法实施例所提供的图像处理方法，具备执行方法相应的功能模块和有益效果。未在图像处理装置90的实施例中详尽描述的技术细节，可参见方法实施例所提供的图像处理方法。
实施例3：
图11是本发明实施例提供的图像处理芯片的硬件结构示意图，其中，所述图像处理芯片可为各种类型的芯片，如微处理器、微控制单元、单片机、控制器等等。如图11所示，所述图像处理芯片110包括：
一个或多个处理器1101以及存储器1102，图11中以一个处理器1101为例。
处理器1101和存储器1102可以通过总线或者其他方式连接，图11中以通过总线连接为例。
存储器1102作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本发明实施例中的图像处理方法对应的程序指令/模块(例如，附图9所示的目标确定模块901、目标区域确定模块902、编码模块903、码率调整参数获取模块904以及调整模块905)。处理器1101通过运行存储在存储器1102中的非易失性软件程序、指令以及模块，从而执行图像处理芯片110的各种功能应用以及数据处理，即实现所述方法实施例的图像处理方法。
存储器1102可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据图像处理芯片110使用所创建的数据等。此外，存储器1102可以包括高速随机存取存储器，还可以包括非易失性存储器，例如，至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。
在一些实施例中，存储器1102可选包括相对于处理器1101远程设置的存储器，这些远程存储器可以通过网络连接至处理器1101。所述网络的实施例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器1102中，当被所述一个或者多个处理器1101执行时，执行所述任意方法实施例中的图像处理方法，例如，执行以上描述的图4中的方法步骤401至步骤403，实现图9中的模块901-905的功能。
所述图像处理芯片110可执行方法实施例所提供的图像处理方法，具备执行方法相应的功能模块和有益效果。未在图像处理芯片实施例中详尽描述的技术细节，可参见方法发明实施例所提供的图像处理方法。
本发明实施例提供了一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行如上所述的图像处理方法。例如，执行以上描述的图4中的方法步骤401至步骤403，实现图9中的模块901-905的功能。
本发明实施例提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行如上所述的图像处理方法。例如，执行以上描述的图4中的方法步骤401至步骤403，实现图9中的模块901-905的功能。
实施例5：
图12是本发明实施例提供的摄像组件示意图，所述摄像组件120包括：图像采集装置1201及图像处理芯片1202。其中，所述图像处理芯片1202与所述图像采集装置1201连接。
所述图像采集装置1201用于采集原始图像，并将该原始图像发送给图像处理芯片1202。该图像采集装置1201可以为图2中的图像采集设备12。
所述图像处理芯片1202用于对所述原始图像进行处理。其中，所述图像处理芯片1202为图11中图像处理芯片110。通过图像处理芯片1202可以对目标区域内的原始图像采用第一码率进行编码，对目标区域外的原始图像采用第二码率进行编码，其中，第一码率高于第二码率，从而实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
实施例5：
图13是本发明实施例提供的飞行器示意图，所述飞行器130包括：机身(图未示)、与所述机身相连的机臂(图未示)和设于所述机臂的动力装置(图未示)，云台1301和摄像组件1302。其中，所述摄像组件1302搭载于所述云台1301，所述云台1301安装于所述机身。
其中，飞行器130可以为任何类型的飞行设备。例如，无人机、无人船或其它可移动装置等等。需要说明的是，飞行器130的结构与图1中的飞行器100类似，在本发明实施例中飞行器130未详尽描述的技术细节，可参考上述飞行器100的具体描述，因此，在此处不再赘述。另外，动力装置可以为图3中的动力系统13。
其中，摄像组件1302可以为图12中的摄像组件120，通过摄像组件1302可以对目标区域内的原始图像采用第一码率进行编码，对目标区域外的原始图像采用第二码率进行编码，其中，第一码率高于第二码率，从而实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度。
实施例6：
图14是本发明实施例提供的飞行器系统示意图，所述飞行器系统140包括：飞行器1401和终端1402。其中，所述飞行器1401与所述终端1402通信连接，所述飞行器1401可以为图13中的飞行器130，所述飞行器1401的摄像组件将处理后的图像发送给终端1402，所述终端1402对处理后的图像进行解码并显示，以便用户实时了解飞行器1401的拍摄情况，并且，通过飞行器1401实现了在不提升整个码率的情况下，提高目标区域内的图像的清晰度，从而使得用户可以更好的看清目标区域内的图像。
需要说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
通过以上的实施例的描述，本领域普通技术人员可以清楚地了解到各实施例可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件。本领域普通技术人员可以理解实现所述实施例方法中的全部或部分流程是可以通过计算机程序指令相关的硬件来完成，所述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如所述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)或随机存储记忆体(RandomAccessMemory,RAM)等。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；在本发明的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本发明的不同方面的许多其它变化，为了简明，它们没有在细节中提供；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (22)
1.一种图像处理方法，其特征在于，所述方法包括：
确定原始图像中的目标；
根据所述目标确定所述原始图像中的目标区域，其中，所述目标位于所述目标区域内；
对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，其中，所述第一码率高于所述第二码率。
2.根据权利要求1所述的方法，其特征在于，所述根据所述目标确定原始图像中的目标区域，包括：
根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，其中，所述目标位于所述最小区域和所述最大区域的中心位置；
将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像；
根据所述结果图像确定所述目标区域的边线；
根据所述目标区域的边线，确定所述目标区域。
3.根据权利要求2所述的方法，其特征在于，所述根据所述目标区域的边线，确定所述目标区域，包括：
检测在所述最大区域的边线至所述最小区域的边线的区域内的结果图像中是否存在灰度值大于预设灰度阈值的像素点；
若不存在大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域；
若存在大于预设灰度阈值的像素点，则根据检测到的存在大于预设灰度阈值的像素点确定所述目标区域。
4.根据权利要求2或3所述的方法，其特征在于，所述最小区域和最大区域为四边形；则，
所述根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，包括：
根据第一预设宽度、第一预设高度及所述目标的坐标，确定所述最小区域；
根据第二预设宽度、第二预设高度及所述目标的坐标，确定所述最大区域。
5.根据权利要求4所述的方法，其特征在于，所述最小区域内的原始图像包含4个像素点，所述最大区域的尺寸为所述原始图像的尺寸的二分之一。
6.根据权利要求1所述的方法，其特征在于，所述根据所述目标确定所述原始图像中的目标区域，包括：
获取用户输入的区域边框参数，所述区域边框参数用于设置目标区域的宽度和目标区域的高度；
根据所述区域边框参数及所述目标的坐标，确定所述目标区域。
7.根据权利要求1-6任一项中所述的方法，其特征在于，所述对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，包括：
采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码；或者，
对整个原始图像进行编码产生第一路码流，并再对所述目标区域内的原始图像进行编码产生第二路码流。
8.根据权利要求1-7中任一项所述的方法，其特征在于，所述确定原始图像中的目标，包括：
接收终端发送的用户的指点操作，其中，所述指点操作包括触控所述终端的屏幕；
根据所述用户的指点操作，确定所述原始图像中的所述目标。
9.根据权利要求1-8任一项中所述的方法，其特征在于，所述方法还包括：
获取用户输入的码率调整参数，所述码率调整参数用于调整所述目标区域内及所述目标区域外的图像的码率；
根据所述码率调整参数，调整所述目标区域内及所述目标区域外的图像的码率。
10.一种图像处理装置，其特征在于，所述装置包括：
目标确定模块，用于确定原始图像中的目标；
目标区域确定模块，用于根据所述目标确定所述原始图像中的目标区域，其中，所述目标位于所述目标区域内；
编码模块，用于对所述目标区域内的原始图像采用第一码率进行编码，对所述目标区域外的原始图像采用第二码率进行编码，其中，所述第一码率高于所述第二码率。
11.根据权利要求10所述的装置，其特征在于，所述目标区域确定模块包括：
第一区域确定单元，用于根据所述目标，确定所述原始图像中包含所述目标的最小区域和最大区域，其中，所述目标位于所述最小区域和所述最大区域的中心位置；
计算单元，用于将所述最大区域内的原始图像的每个像素点的灰度值与预设矩阵进行计算，得到结果图像；
边线确定单元，用于根据所述结果图像确定所述目标区域的边线；
第二区域确定单元，用于根据所述目标区域的边线，确定所述目标区域。
12.根据权利要求11所述的装置，其特征在于，所述第二区域确定单元具体用于：
检测在所述最大区域的边线至所述最小区域的边线的区域内的结果图像中是否存在灰度值大于预设灰度阈值的像素点；
若不存在大于预设灰度阈值的像素点，则确定所述最小区域为所述目标区域；
若存在大于预设灰度阈值的像素点，则根据检测到的存在大于预设灰度阈值的像素点确定所述目标区域。
13.根据权利要求11或12所述的装置，其特征在于，所述最小区域和最大区域为四边形；则，
所述第一区域确定单元具体用于：
根据第一预设宽度、第一预设高度及所述目标的坐标，确定所述最小区域；
根据第二预设宽度、第二预设高度及所述目标的坐标，确定所述最大区域。
14.根据权利要求13所述的装置，其特征在于，所述最小区域内的原始图像包含4个像素点，所述最大区域的尺寸为所述原始图像的尺寸的二分之一。
15.根据权利要求10所述的装置，其特征在于，所述目标区域确定模块包括：
区域边框参数获取单元，用于获取用户输入的区域边框参数，所述区域边框参数用于设置目标区域的宽度和目标区域的高度；
第三区域确定单元，用于根据所述区域边框参数及所述目标的坐标，确定所述目标区域。
16.根据权利要求10-15任一项中所述的装置，其特征在于，所述编码模块具体用于：
采用第一量化参数对所述目标区域内的原始图像的宏块进行编码，采用第二量化参数对所述目标区域外的原始图像的宏块进行编码；或者，
对整个原始图像进行编码产生第一路码流，并再对所述目标区域内的原始图像进行编码产生第二路码流。
17.根据权利要求10-16任一项中所述的装置，其特征在于，所述目标确定模块具体用于：
接收终端发送的用户的指点操作，其中，所述指点操作包括触控所述终端的屏幕；
根据所述用户的指点操作，确定所述原始图像中的所述目标。
18.根据权利要求10-17任一项中所述的装置，其特征在于，所述装置还包括：
码率调整参数获取模块，用于获取用户输入的码率调整参数，所述码率调整参数用于调整所述目标区域内及所述目标区域外的图像的码率；
调整模块，用于根据所述码率调整参数，调整所述目标区域内及所述目标区域外的图像的码率。
19.一种图像处理芯片，其特征在于，包括：
至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-9的任一项所述的方法。
20.一种摄像组件，其特征在于，包括：图像采集装置及图像处理芯片，所述图像处理芯片与所述图像采集装置连接；
所述图像采集装置用于采集原始图像，所述图像处理芯片用于对所述原始图像进行处理；其中，所述图像处理芯片为权利要求19所述的图像处理芯片。
21.一种飞行器，包括机身，与所述机身相连的机臂和设于所述机臂的动力装置，其特征在于，还包括：云台和摄像组件，所述摄像组件搭载于所述云台，所述云台安装于所述机身，所述摄像组件为权利要求20所述的摄像组件。
22.一种飞行器系统，其特征在于，包括：飞行器和终端，所述飞行器与所述终端通信连接，所述飞行器为权利要求21所述的飞行器，所述飞行器的摄像组件将处理后的图像发送给终端，所述终端对所述处理后的图像进行解码并显示。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910196165.3A CN109949381B (zh) | 2019-03-15 | 2019-03-15 | 图像处理方法、装置、图像处理芯片、摄像组件及飞行器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910196165.3A CN109949381B (zh) | 2019-03-15 | 2019-03-15 | 图像处理方法、装置、图像处理芯片、摄像组件及飞行器 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109949381A true CN109949381A (zh) | 2019-06-28 |
| CN109949381B CN109949381B (zh) | 2023-10-24 |
Family
ID=67008928
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910196165.3A Active CN109949381B (zh) | 2019-03-15 | 2019-03-15 | 图像处理方法、装置、图像处理芯片、摄像组件及飞行器 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109949381B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110620924A (zh) * | 2019-09-23 | 2019-12-27 | 广州虎牙科技有限公司 | 编码数据的处理方法、装置、计算机设备及存储介质 |
| CN112106362A (zh) * | 2019-09-30 | 2020-12-18 | 深圳市大疆创新科技有限公司 | 可移动平台的图像处理方法、装置、可移动平台及介质 |
| CN114143472A (zh) * | 2019-09-02 | 2022-03-04 | 深圳市道通智能航空技术股份有限公司 | 图像曝光方法、装置、拍摄设备及无人机 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100067810A1 (en) * | 2008-09-17 | 2010-03-18 | Canon Kabushiki Kaisha | Image encoding apparatus, image decoding apparatus, and methods of controlling the same |
| CN102984495A (zh) * | 2012-12-06 | 2013-03-20 | 北京小米科技有限责任公司 | 一种视频图像的处理方法及装置 |
| CN104427337A (zh) * | 2013-08-21 | 2015-03-18 | 杭州海康威视数字技术股份有限公司 | 基于目标检测的感兴趣区域视频编码方法及其装置 |
| WO2019033747A1 (zh) * | 2017-08-18 | 2019-02-21 | 深圳市道通智能航空技术有限公司 | 无人机智能跟随目标确定方法、无人机和遥控器 |
-
2019
- 2019-03-15 CN CN201910196165.3A patent/CN109949381B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100067810A1 (en) * | 2008-09-17 | 2010-03-18 | Canon Kabushiki Kaisha | Image encoding apparatus, image decoding apparatus, and methods of controlling the same |
| CN102984495A (zh) * | 2012-12-06 | 2013-03-20 | 北京小米科技有限责任公司 | 一种视频图像的处理方法及装置 |
| CN104427337A (zh) * | 2013-08-21 | 2015-03-18 | 杭州海康威视数字技术股份有限公司 | 基于目标检测的感兴趣区域视频编码方法及其装置 |
| WO2019033747A1 (zh) * | 2017-08-18 | 2019-02-21 | 深圳市道通智能航空技术有限公司 | 无人机智能跟随目标确定方法、无人机和遥控器 |
Non-Patent Citations (1)
| Title |
|---|
| 刘晓明等: "基于目标区域清晰显示的H.264编码策略", 《计算机技术与发展》 * |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114143472A (zh) * | 2019-09-02 | 2022-03-04 | 深圳市道通智能航空技术股份有限公司 | 图像曝光方法、装置、拍摄设备及无人机 |
| CN110620924A (zh) * | 2019-09-23 | 2019-12-27 | 广州虎牙科技有限公司 | 编码数据的处理方法、装置、计算机设备及存储介质 |
| CN110620924B (zh) * | 2019-09-23 | 2022-05-20 | 广州虎牙科技有限公司 | 编码数据的处理方法、装置、计算机设备及存储介质 |
| CN112106362A (zh) * | 2019-09-30 | 2020-12-18 | 深圳市大疆创新科技有限公司 | 可移动平台的图像处理方法、装置、可移动平台及介质 |
| WO2021062624A1 (zh) * | 2019-09-30 | 2021-04-08 | 深圳市大疆创新科技有限公司 | 可移动平台的图像处理方法、装置、可移动平台及介质 |
| US11997282B2 (en) | 2019-09-30 | 2024-05-28 | SZ DJI Technology Co., Ltd. | Image processing method and apparatus for mobile platform, mobile platform, and medium |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109949381B (zh) | 2023-10-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11649052B2 (en) | System and method for providing autonomous photography and videography | |
| CN110692027B (zh) | 用于提供无人机应用的易用的释放和自动定位的系统和方法 | |
| US11423792B2 (en) | System and method for obstacle avoidance in aerial systems | |
| US11288824B2 (en) | Processing images to obtain environmental information | |
| CN205263655U (zh) | 一种用于自动生成全景照片的系统、无人飞行器及地面站 | |
| JP2017509981A (ja) | センサデータの選択的処理 | |
| JP6496323B2 (ja) | 可動物体を検出し、追跡するシステム及び方法 | |
| CN108351574B (zh) | 用于设置相机参数的系统、方法和装置 | |
| US20200346753A1 (en) | Uav control method, device and uav | |
| CN107168352B (zh) | 目标追踪系统及方法 | |
| CN105045279A (zh) | 一种利用无人飞行器航拍自动生成全景照片的系统及方法 | |
| CN105242685B (zh) | 一种伴飞无人机航拍系统及方法 | |
| WO2019155335A1 (en) | Unmanned aerial vehicle including an omnidirectional depth sensing and obstacle avoidance aerial system and method of operating same | |
| CN109949381A (zh) | 图像处理方法、装置、图像处理芯片、摄像组件及飞行器 | |
| CN108163203B (zh) | 一种拍摄控制方法、装置及飞行器 | |
| WO2020233682A1 (zh) | 一种自主环绕拍摄方法、装置以及无人机 | |
| Valenti et al. | An autonomous flyer photographer | |
| CN111194433A (zh) | 用于构图和捕捉图像的方法和系统 | |
| WO2021014752A1 (ja) | 情報処理装置、情報処理方法、情報処理プログラム | |
| CN116149371A (zh) | 一种基于视觉传感器网络的多运动体三维跟踪与控制平台 | |
| JP2021064951A (ja) | システム、方法、装置、および非一時的コンピュータ読取可能媒体 | |
| Kun | Navigation and Autonomous Control of MAVs in GPS-denied Environments | |
| Fadhil et al. | Formation Flight Control For MAV By Using Fully Embedded Vision Tracking | |
| Rodriguez Perez | Real-time wind estimation and video compression onboard miniature aerial vehicles |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: 518055 Guangdong city of Shenzhen province Nanshan District Xili Street Xueyuan Road No. 1001 Chi Yuen Building 9 layer B1 Applicant after: Shenzhen daotong intelligent Aviation Technology Co.,Ltd. Address before: 518055 Guangdong city of Shenzhen province Nanshan District Xili Street Xueyuan Road No. 1001 Chi Yuen Building 9 layer B1 Applicant before: AUTEL ROBOTICS Co.,Ltd. |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |