CN114009004A - 图像信号处理方法、云台、图像传输装置、云台系统及存储介质 - Google Patents

图像信号处理方法、云台、图像传输装置、云台系统及存储介质 Download PDF

Info

Publication number
CN114009004A
CN114009004A CN202080040188.6A CN202080040188A CN114009004A CN 114009004 A CN114009004 A CN 114009004A CN 202080040188 A CN202080040188 A CN 202080040188A CN 114009004 A CN114009004 A CN 114009004A
Authority
CN
China
Prior art keywords
image signal
image
signal
transmission device
image transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080040188.6A
Other languages
English (en)
Inventor
王振动
杨天豪
刘敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of CN114009004A publication Critical patent/CN114009004A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16MFRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00Stands or trestles as supports for apparatus or articles placed thereon Stands for scientific apparatus such as gravitational force meters
    • F16M11/02Heads
    • F16M11/04Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16MFRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M13/00Other supports for positioning apparatus or articles; Means for steadying hand-held apparatus or articles
    • F16M13/04Other supports for positioning apparatus or articles; Means for steadying hand-held apparatus or articles for supporting on, or holding steady relative to, a person, e.g. by chains, e.g. rifle butt or pistol grip supports, supports attached to the chest or head
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects

Abstract

一种图像信号处理方法、云台、传输装置、云台系统及存储介质,所述云台系统包括图像传输装置和云台,通过所述图像传输装置实现将第一图像信号转换为第二图像信号以及通过所述图像传输装置实现对拍摄设备输出的第一图像信号进行目标对象识别处理,所述图像传输装置将所述第二图像信号和所述目标对象识别处理的结果传输给所述云台,以使所述云台可以根据所述第二图像信号进行显示以及根据所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数。本实施例实现在云台上显示实时图像以及将云台所进行的图像处理功能转移到图像传输装置上,从而提高图像处理的准确性。

Description

图像信号处理方法、云台、图像传输装置、云台系统及存储 介质
技术领域
本申请涉及图像信号处理领域,具体而言,涉及一种图像信号处理方法、云台、传输装置、云台系统及存储介质。
背景技术
随着用户对拍摄需求的逐步提高,相关技术中提供用于支撑拍摄设备的云台,为拍摄设备的稳定拍摄提供了可靠的保证。
随着云台技术的发展,通过对云台的控制还可以进行多种不同的拍照方式或者录像方式,满足用户的个性化需求。在拍照或者录像过程中,用户往往希望能够看到实时图像,进一步,可以根据实时图像来控制云台或者拍摄设备。因此,需要提供一种方便用户观看实时图像并进一步基于实时图像进行有效控制的系统。
发明内容
有鉴于此,本申请的目的之一是提供一种图像信号处理方法、云台、传输装置、云台系统及存储介质。
第一方面,本申请实施例提供了一种云台系统,所述云台系统包括云台和图像传输装置,所述云台用于搭载拍摄设备,所述云台的手持部设置有控制模块和显示模块;
所述图像传输装置用于接收所述拍摄设备输出的第一图像信号,将所述第一图像信号转换为第二图像信号,并通过所述云台内部的走线将所述第二图像信号输出至所述控制模块;以及,对所述第一图像信号进行目标对象识别处理,并将所述目标对象识别处理的结果输出至所述控制模块;
所述控制模块用于基于所述第二图像信号控制所述显示模块进行显示;以及基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
第二方面,本申请实施例提供了一种云台,所述云台的手持部设置有控制模块和显示模块,所述云台用于搭载拍摄设备以及图像传输装置,所述拍摄设备输出的第一图像信号通过所述图像传输装置转换为第二图像信号后,通过所述云台内部的走线输出给所述控制模块;以及,所述图像传输装置还用于对所述第一图像信号进行目标对象识别处理并将所述目标对象识别处理的结果输出给所述控制模块;
所述控制模块用于基于所述第二图像信号控制所述显示模块进行显示;以及基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
第三方面,本申请实施例提供了一种图像传输装置,所述图像传输装置搭载于云台,所述云台还用于搭载拍摄设备,所述云台的手持部设置有控制模块和显示模块,所述图像传输装置包括:第一接口、处理器和第二接口;
所述第一接口用于接收所述拍摄设备输出的第一图像信号;
所述处理器用于将所述第一图像信号转换为第二图像信号;以及,对所述第一图像信号进行目标对象识别处理;
所述第二接口用于将所述第二图像信号通过所述云台内部的走线输出至所述控制模块,以使所述控制模块基于所述第二图像信号控制所述显示模块进行显示;以及,将所述目标对象识别处理的结果输出至所述控制模块以使所述控制模块基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
第四方面,本申请实施例提供了一种图像信号处理方法,应用于云台,所述云台用于搭载拍摄设备以及图像传输装置,所述拍摄设备输出的第一图像信号通过图像传输装置转换为第二图像信号后,通过所述云台内部的走线输出给所述云台;以及,所述图像传输装置还用于对所述第一图像信号进行目标对象识别处理并将所述目标对象识别处理的结果输出给所述云台;
所述方法包括:
基于所述第二图像信号进行显示;以及,
基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
第五方面,本申请实施例提供了一种图像信号处理方法,应用于图传传输装置,所述图像传输装置搭载于云台,所述云台还用于搭载拍摄设备;所述图像传输模块装置包括第一接口和第二接口;所述方法包括:
通过所述第一接口接收拍摄设备输出的第一图像信号;
将所述第一图像信号转换为第二图像信号;以及,对所述第一图像信号进行目标对象识别处理;其中,所述第一图像信号的信号质量比所述第二图像信号的质量高;
通过所述第二接口将所述第二图像信号经过云台内部的走线输出至所述云台,以使所述云台基于所述第二图像信号进行显示;以及将所述目标对象识别处理的结果输出至所述云台以使所述云台基于所述目标对象识别处理的结果控制自身转动和/或调整所述拍摄装置的拍摄参数;其中,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
第六方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机指令,该指令被处理器执行时实现第四方面或者第五方面中任一项所述的方法。
本申请实施例所提供的一种图像信号处理方法、云台、传输装置、云台系统及存储介质,所述云台系统包括图像传输装置和云台,图像传输装置将拍摄设备输出的第一图像信号转换为第二图像信号,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件,使得在通过云台内部的走线传输所述第二图像信号时,可以避免云台转动对所述第二图像信号的干扰,保证云台手持部位的显示模块可以实时显示稳定的图像信号,也避免了第二图像信号的传输对于云台内部的电机控制的影响,保证云台内各个部件的协调运行。进一步地,由于所述第一图像信号是由拍摄设备输出的未受损的信号,所述第一图像信号具有更完整的图像信息,则所述第一图像信号的信号质量比所述第二图像信号的信号质量高,本实施例实现将云台的图像处理功能转移到图像传输装置上,所述图像传输装置对所述第一图像信号进行目标对象识别处理,可以获得更为准确的目标对象识别处理的结果,使得所述云台的控制模块可以基于目标对象识别处理的结果进行更为精准的控制,同时也避免了云台由于图像处理的运算量过大产生的机身发热的问题。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1、图2、图4、图5、图6以及图8是本申请实施例提供的云台系统的不同示意图;
图3以及图9是本申请实施例提供的云台的不同结构示意图;
图7是本申请实施例提供的一种叠加后的信号的显示示例图;
图10是本申请实施例提供的一种图像传输装置的结构示意图;
图11以及图12是本申请实施例提供的图像信号处理方法的不同流程示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
随着云台技术的发展,通过对云台的控制还可以进行多种不同的拍照方式或者录像方式,满足用户的个性化需求。在拍照或者录像过程中,用户往往希望能够看到实时图像,进一步,可以根据实时图像来控制云台或者拍摄设备。
相关技术中,用户通常可以通过以下两种方式来观看实时图像:第一种,通过拍摄设备上安装的显示屏来观看实时图像,但是在一些特定的机位(例如低机位录像)上,此时显示屏位置使得用户不易观察实时图像;第二种,将拍摄设备拍摄的实时图像传输给外部的终端设备如手机,在外部的终端设备的显示屏上显示实时图像,但这样用户需要兼顾多个设备,操作繁琐,用户使用体验不佳。
进一步地,在根据实时图像来控制云台或者拍摄设备时,相关技术通常是将由云台或者外部的终端设备对实时图像进行处理,然后根据处理的结果来控制云台或者拍摄设备。但是,考虑到拍摄设备输出的图像信号数据量过大的问题,通过会对拍摄设备输出的图像信号进行压缩转换后传输给云台或者外部终端,拍摄设备输出的图像信号在经过压缩转换后可能会丢失部分图像信息,使得云台或者外部终端基于压缩后的图像信号进行处理的结果不够准确。另外,由于图像处理的运算量通常较大,而云台机身通常较小使得散热效果不佳,过大的运算量会使云台的机身发热,损耗云台的使用寿命,不利于用户的使用体验。
基于此,本申请实施例实现在云台上显示实时图像以便用户可以方便观看到实时图像以及实现将云台所进行的图像处理功能转移到其他装置上。考虑到拍摄设备输出的图像信号一般为HDMI格式,而传输HDMI格式的图像信号所需的线缆的信号线数较大,其线缆较粗。对于云台来说,将信号线数较大且线缆较粗的HDMI数据线缆穿设在云台的各驱动电机的转轴内部,会使得云台的转轴在转动时的转动摩擦大大增加,容易影响到云台的控制性能,而且也会对图像信号的传输产生较大的干扰。因此,本申请实施例为了实现在云台上显示实时图像,提供了图像传输装置,通过所述图像传输装置实现图像信号的信号格式的转换,以减少用于传输图像信号的数据线路的数量和/或线路尺寸,在不影响云台的控制性能的同时也提高图像信号的抗干扰能力。进一步地,本申请实施例实现了将云台所进行的图像处理功能转移到图像传输装置上,利用图像传输装置对拍摄设备输出的图像信号进行处理,以根据处理的结果控制云台或者拍摄设备,由于拍摄设备输出的图像信号未经过其他处理,其保留的图像信息是最完整的,从而有利于提高处理的结果的准确性,也避免云台由于图像运算量过大产生的机身发热的问题。
请参阅图1,本申请实施例提供了一种云台系统10,所述云台系统10包括有云台100和图像传输装置200;所述云台系统10可以作为摄影、照相、监测的辅助装置,所述云台系统10可以搭载有拍摄设备300,可运用于载人飞行器、运载体、汽车、轮船、机器人、电影拍摄、手持设备等领域。在一个例子中,比如在手持设备领域,请参阅图2,用户可以手持搭载有图像传输装置200和拍摄设备300的云台100进行多种方式的拍照或者录像,比如智能跟随拍摄方式,实现通过图像识别方式来控制云台100跟踪拍摄对象。
在一实施例中,所述云台100用于搭载拍摄设备300,所述拍摄设备300可以与所述云台100固定连接,或者可拆卸连接,本实施例对此不作任何限制。在一个例子中,所述拍摄设备300可以是第三方拍摄设备300,该拍摄设备300可以与所述云台100可拆卸连接;可以理解的是,本实施例对于第三方拍摄设备300的类型不作任何限制。
所述拍摄设备300可以是物理成像装置。所述拍摄设备300可以被配置成用于检测电磁辐射(例如,可见光、红外光和/或紫外光)并基于检测到的电磁辐射生成图像数据。所述拍摄设备300可以包括响应于光的波长生成电信号的电荷耦合装置(CCD)传感器或互补型金属氧化物半导体(CMOS)传感器。所生成的电信号可以被处理以产生图像数据。由所述拍摄设备300生成的图像数据可以包括一张或多张图像,该一张或多张图像可以是静态图像(例如,照片)、动态图像(例如,视频)或其合适的组合。图像数据可以是多色的(例如,RGB、CMYK、HSV)或单色的(例如,灰度、黑白、棕褐)。所述拍摄设备300可以包括被配置成将光引导到图像传感器上的镜头。
在一实施方式中,所述拍摄设备300可以是相机。相机可以是捕捉动态图像数据(例如视频)的电影摄影机或视频相机。相机可以是捕捉静态图像(例如照片)的照相机。相机也可以捕捉动态图像数据和静态图像。相机可以在捕捉动态图像数据和静态图像之间切换。相机可以被用来生成3D场景(例如环境、一个或多个物体等等)的2D图像。由相机生成的图像可以表示3D场景到2D图像平面上的投影。因此,2D图像中的每个点对应于场景中的3D空间坐标。该相机可以包括光学元件(例如镜头、反射镜、滤波器等)。相机可以捕捉彩色图像、灰度图像、红外图像等等。
所述拍摄设备300可以按指定图像分辨率拍摄图像或图像序列。在一些实施方式中,图像分辨率可以由图像中的像素数目所定义。在一些实施方式中,图像分辨率可以大于或等于约352x420像素、480x320像素、720x480像素、1280x720像素、1440x1080像素、1920x1080像素、2048x1080像素、3840x2160像素、4096x2160像素、7680x4320像素或15360x8640像素。在一些实施方式中,该相机可以是4K相机或者具有更高分辨率的相机。
所述拍摄设备300可以以指定帧率捕捉图像序列。在一些实施方式中,可以以如约24p、25p、30p、48p、50p、60p、72p、90p、100p、120p、300p、50i或60i的标准帧率拍摄图像序列。在一些实施方式中,可以以小于或等于约每0.0001秒、0.0002秒、0.0005秒、0.001秒、0.002秒、0.005秒、0.01秒、0.02秒、0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒或10秒一张图像的帧率拍摄图像序列。
所述拍摄设备300可以具有可调的拍摄参数。在不同拍摄参数下,尽管经受完全相同的外部条件(例如,位置、光照),所述拍摄设备300可以拍摄不同的图像。拍摄参数可以包括曝光(例如,曝光时间、快门速度、孔径、胶片速度)、增益、伽玛、兴趣区、像素合并(binning)/子采样、像素时钟、偏移、触发、ISO等。与曝光相关的参数可以控制到达所述拍摄设备300中的图像传感器的光量。例如,快门速度可以控制光到达图像传感器的时间量而孔径可以控制在给定时间内到达图像传感器的光量。与增益相关的参数可以控制对来自光学传感器的信号的放大。ISO可以控制相机对可用光的灵敏度水平。
在一实施例中,所述图像传输装置200可以与所述云台100可拆卸连接,在使用云台100的过程,用户可以根据实际需要选择是否在云台100上搭载所述图像传输装置200,从而有利于满足用户的个性化需求。所述图像传输装置200具备图像传输功能,用于将所述拍摄设备300输出的图像信号传输给所述云台100或者通过无线通信方式传输给外部的终端设备。
在一种实现方式中,请参阅图3,所述云台100包括有拍摄设备安装架102,所述拍摄设备安装架102用于安装所述拍摄设备300,所述图像传输装置200用于与所述拍摄设备安装架102可拆卸连接;当所述图像传输装置200被连接于所述拍摄设备安装架102时,所述拍摄设备300和所述图像传输装置200连接,比如通过HDMI接口连接,则所述拍摄设备300输出的第一图像信号通过HDMI接口传输给所述图像传输装置200。
在一实施例中,请参阅图3,所述云台100包括用于安装拍摄装置的拍摄设备安装架102、驱动所述拍摄设备安装架102的第一驱动电机103、安装第一驱动电机103的第一轴臂104、驱动所述第一轴臂104的第二驱动电机105、安装所述第二驱动电机105的第二轴臂106、驱动所述第二轴臂106的第三驱动电机107和安装所述第三驱动电机107的手持部108。
其中,上述的第一驱动电机103可为安装在第一轴臂104上的云台100的俯仰电机,该第一驱动电机103可用于控制云台100的拍摄设备300安装架102在俯仰方向上进行旋转/停止,其具体可由云台100的P轴电调板以及电机主体结构构成。
上述的第二驱动电机105可为安装在第二轴臂106上的云台100的横滚电机,该所述第二驱动电机105可用于驱动第一轴臂104在横滚方向上进行旋转/停止,其具体可由云台100的R轴电调板以及电机主体结构构成。
上述的第三驱动电机107可为安装在手持部108上的云台100的偏航电机,该第三驱动电机107可用于驱动第二轴臂106在偏航方向上进行旋转/停止,其具体可由云台100的Y轴电调板以及电机主体结构构成。
在一实施例中,请参阅图4,所述云台100的手持部设置有控制模块110和显示模块120。所述图像传输装置200用于接收所述拍摄设备300输出的第一图像信号,将所述第一图像信号转换为第二图像信号,并通过所述云台100内部的走线(比如如图3所示的第一驱动电机103、第一轴臂104、第二驱动电机105、第二轴臂106和第三驱动电机107)将所述第二图像信号输出至所述控制模块110;以及,对所述第一图像信号进行目标对象识别处理,并将所述目标对象识别处理的结果输出至所述控制模块110。
所述控制模块110用于基于所述第二图像信号控制所述显示模块120进行显示;以及基于所述目标对象识别处理的结果控制所述云台100转动或者调整所述拍摄装置的拍摄参数;其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
本实施例中,所述图像传输装置200将所述拍摄设备300输出的第一图像信号转换为第二图像信号,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件,使得在通过所述云台100内部的走线传输所述第二图像信号时,可以避免云台100的转动对所述第二图像信号的干扰,保证云台手持部位的显示模块可以实时显示稳定的图像信号,也避免了第二图像信号的传输对于云台100内部的电机控制的影响,保证云台100内各个部件的协调运行。进一步地,由于所述第一图像信号是由拍摄设备300输出的未受损的信号,所述第一图像信号具有更完整的图像信息,则所述第一图像信号的信号质量比所述第二图像信号的信号质量高,本实施例实现将云台100的图像处理功能转移到图像传输装置200上,所述图像传输装置200对所述第一图像信号进行目标对象识别处理,可以获得更为准确的目标对象识别处理的结果,使得所述云台100的控制模块110可以基于目标对象识别处理的结果进行更为精准的控制,同时也避免了云台100由于图像处理的运算量过大产生的机身发热的问题。
其中,传输所述第二图像信号所需的线路数量和/或线路尺寸所满足预设条件可根据实际应用场景进行具体设置。在一个例子中,所述云台100的轴臂和电机内形成有走线空间,所述传输所述第二图像信号所需的线路数量和/或线路尺寸可以根据所述走线空间的大小所确定。在一个例子中,传输所述第二图像信号所需的线路数量和/或线路尺寸小于传输所述第一图像信号所需的线路数量和/或线路尺寸,从而有利于降低云台100内部走线对于图像信号的影响比如电磁干扰问题,即是说,减小线路数量和/或线路尺寸也有利于提高图像信号的抗干扰能力。
在一实施例中,请参阅图2,所述图像传输装置200包括第一接口201和第二接口202,所述云台100包括第三接口101,所述云台100的轴臂和电机内形成有走线空间。所述图像传输装置200用于通过所述第一接口201接收所述第一图像信号,并通过所述第二接口202将所述第二图像信号输出至所述第三接口101,所述第三接口101与所述控制模块110通过所述走线空间内的线路电连接。本实施例实现将所述图像传输装置200转换后的第二图像信号传输给所述控制模块110,在所述走线空间中传输所述第二图像信号所需的线路数量和/或线路尺寸更小,则相应地,所述第二图像信号越不受云台100内部走线影响,抗干扰能力更强。需要说明的是,图2中图像传输装置的放置位置仅作为一种示例,图像传输装置还可以以其他形式搭载于云台。
在一种实现方式中,所述云台100包括用于传输所述第二图像信号的线缆,所述线缆穿过所述走线空间,用于连接所述第三接口101以及所述控制模块110,例如所述线缆依次穿设于图3所示的第一驱动电机103、第一轴臂104、第二驱动电机105、第二轴臂106和第三驱动电机107以将所述第二图像信号传输至位于手持部108的控制模块110。
在一种实现方式中,所述第一图像信号为数字信号,所述第二图像信号为模拟信号,比如所述第一图像信号为HDMI(High Definition Multimedia Interface)数字信号,所述第二图像信号为CVBS(Composite Video Broadcast Signal)模拟信号或者VGA(VideoGraphics Array)模拟信号;在另一种实现方式中,所述第一图像信号和所述第二图像信号为不同类型的数字信号,比如所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI(Serial Digital Interface)数字信号或者DVI(Digital Visual Interface)数字信号。本实施例实现将所述第一图像信号转换成第二图像信号,以便可以用更少的线路数量和/或线路直径来传输图像信号,避免云台100内部走线影响,提高抗干扰能力。
在一实施例中,在所述控制模块110能够处理所述第二图像信号,以及所述显示模块120能够显示所述第二图像信号的情况下,所述控制模块110可以基于所述第二图像信号控制所述显示模块120进行显示,从而实现用户可以在云台100上看到实时图像,方便用户观看,提高用户的使用体验。
在一实施例中,在所述控制模块110不支持处理所述第二图像信号的情况下,请参阅图5,所述控制模块110包括有转换器1101,所述转换器1101用于接收所述第二图像信号,并将所述第二图像信号转换为第三图像信号,所述第三图像信号的信号格式为所述控制模块110能够处理的信号格式。在一种实现方式中,如果所述第三图像信号为所述显示模块120能够显示的信号格式,所述控制模块110还用于基于所述第三图像信号控制所述显示模块120进行显示,从而实现用户可以在云台100上看到实时图像,方便用户观看,提高用户的使用体验。在另一种实现方式中,如果所述第三图像信号为所述显示模块120不支持的信号格式,请参阅图6,所述控制模块110还包括有控制器1102,所述控制器1102用于对所述第三图像信号进行处理得到第四图像信号,并将所述第四图像信号传输至所述显示模块120进行显示,所述第四信号的信号格式为所述显示模块120能够显示的信号格式,从而实现用户可以在云台100上看到实时图像,方便用户观看,提高用户的使用体验。
在一个例子中,通常为了方便传输,所述第三图像信号可以为YUV格式的信号,而为了符合显示器的显示格式,所述第四图像信号可以为RGB格式的信号。
在一种实现方式中,所述第一图像信号和所述第三图像信号可以为不同类型的数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号、第二图像信号和所述第三图像信号为不同类型的数字信号。本实施例实现将所述第一图像信号转换成第二图像信号,以便可以用更少的线路数量和/或线路直径来传输图像信号,避免云台100内部走线影响,提高抗干扰能力。在一种实现方式中,为了避免云台100走线的影响,可以将所述信号转换器1101和所述控制器1102设置得尽可能近,比如所述信号转换器1101和所述控制器1102被设置于同一电路板上,避免在图像信号传输过程中受到云台100内部走线的电磁干扰。
在一实施例中,在所述控制模块110能够处理所述第二图像信号,但所述显示模块120不支持所述第二图像信号的信号格式的情况下,所述控制模块110还用于将所述第二图像信号转换为第四图像信号,所述第四信号的信号格式为所述显示模块120能够显示的信号格式,从而实现用户可以在云台100上看到实时图像,方便用户观看,提高用户的使用体验。
在一个例子中,为了方便传输,所述第二图像信号可以为YUV格式的信号,为了符合显示器的显示格式,所述第四图像信号可以为RGB格式的信号。
在一实施例中,除了进行图像信号的转换之外,所述图像传输装置200还可以对所述第一图像信号进行目标对象识别处理,所述目标对象包括但不限于人体或者物体,可依据实际应用场景进行具体设置。在一种实现方式中,所述显示模块120具备触摸交互功能,所述控制模块110可以根据用户在所述显示模块120上输入的交互数据生成识别指令,比如所述交互数据可以是用户对在显示模块120上显示的图像中的目标对象进行框选操作,则所述控制模块110可以根据所述框选操作生成针对于所述目标对象的识别指令,并将所述识别指令传输给所述图像传输装置200,从而所述图像传输装置200可以根据所述识别指令对所述第一图像信号进行目标对象识别处理。本实施例实现将云台100的图像处理功能转移到图像传输装置200上,所述图像传输装置200对未受损的所述第一图像信号进行目标对象识别处理,可以获得更为准确的目标对象识别处理的结果,使得所述云台100的控制模块110可以基于目标对象识别处理的结果进行更为精准的控制,同时也避免了云台100由于图像处理的运算量过大产生的机身发热的问题。
其中,在进行目标对象识别处理时,所述图像传输装置200具体用于基于预设的计算模型对所述第一图像信号进行目标对象识别处理,获得所述目标对象识别处理的结果并传输给所述云台100的控制模块110,从而所述控制模块110可以基于所述目标对象识别处理的结果控制所述云台100转动和/或调整所述拍摄装置的拍摄参数。在一个例子中,所述控制模块110可以基于所述目标对象识别处理的结果控制所述云台100在环境内关于三个旋转自由度自由转动,以实现对目标对象的跟踪拍摄,和/或(和/或表示两者或者两者之一),所述控制模块110可以基于所述目标对象识别处理的结果调整所述拍摄参数的拍摄参数,比如曝光参数、变焦参数以及对焦参数等。
可以理解的是,本申请实施例对于所述计算模型不做任何限制限制,可依据实际应用场景进行具体设置。在一个例子中,所述计算模型可以是预先训练的神经网络模型,所述神经网络模型可以基于机器学习算法或者深度学习算法训练得到,在进行训练时,可以获取若干个训练图像,所述训练图像携带有目标对象标签,将所述若干个训练图像输入预设神经网络模型进行训练,获取目标对象预测结果,然后根据所述目标对象预测结果以及所述目标对象标签之间的差异,调整所述预设神经网络模型的参数,得到训练好的神经网络模型。
可以理解的是,本申请对于所述目标对象不做任何限制。在一个例子中,在使用所述云台系统10进行智能跟随拍摄场景下,可以是对指定人物进行跟踪拍摄,所述图像传输装置200基于预设的计算模型对所述第一图像信号进行目标对象识别处理,识别出所述指定人物,然后所述云台100的控制模块110根据识别的所述指定人物的信息控制所述云台100转动和/或调整所述拍摄装置的拍摄参数,以使得所述指定人物始终保持在所述拍摄设备300的拍摄视场内。
在一实施例中,所述显示模块120具备触摸交互功能,用户可以通过与所述显示模块120的交互对所述云台100或者所述图像传输装置200进行控制。其中,所述显示模块120上还可以显示所述云台100的参数和/或所述图像传输装置200的参数,以便用户可以实时了解所述云台100和/或所述图像传输装置200的运行状态,以及可以通过与所述显示模块120的交互来调整所述云台100的参数和/或所述图像传输装置200的参数,以实现个性化的拍摄需求。
在一种实现方式中,所述云台100可以接收用户通过所述显示模块120输入的交互数据并反馈给所述图像传输模块,所述图像传输装置200具体用于接收用户通过所述显示模块120输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。在一个例子中,可以基于所述交互数据生成识别指令,所述识别指令用于指定本次待识别的目标对象,比如所述交互数据可以是用户对在显示模块120上显示的图像中的目标对象进行的框选操作,则所述控制模块110可以根据所述框选操作生成针对于所述目标对象的识别指令。
在一种实现方式中,所述云台100可以接收用户通过所述显示模块120输入的交互数据并反馈给所述控制模块110,所述控制模块110还可以根据用户通过所述显示模块120输入的交互数据控制所述云台100转动和/或调整所述拍摄装置的拍摄参数。比如控制所述云台100在环境中关于三个旋转自由度自由转动,实现云台100回中功能(用于将拍摄设备300调整至中心位置)、前后翻转功能(用于改变拍摄设备300的拍摄方位)等等。比如调整所述拍摄装置的拍摄帧率、曝光参数等等。
在另一实施例中,所述云台100还包括有交互组件,比如按钮等,用户可以操作所述交互组件实现对所述云台100、所述拍摄设备300或者所述图像传输装置200进行控制。在一种实现方式,所述图像传输装置200接收用户通过所述交互组件输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。在另一种实现方式,所述控制模块110接收用户通过所述交互组件输入的交互数据,并基于所述交互数据控制所述云台100转动和/或调整所述拍摄装置的拍摄参数。
在一实施例中,所述控制模块110除了基于所述目标对象识别处理的结果控制所述云台100转动和/或调整所述拍摄装置的拍摄参数,还可以基于所述目标对象识别处理的结果控制所述显示模块120进行显示。在一个例子中,如图6所示的实施例中,所述控制模块110可以将所述目标对象识别处理的结果与所述第四图像信号进行叠加,并根据叠加后的信号控制所述显示模块120进行显示,比如如图7所示,在所述第四图像信号指示的图像中,可以根据所述目标对象识别的结果在图像中目标对象所在的区域显示一个矩形框。
在一实施例中,请参阅图8,所述图像传输装置200还用于与终端设备400无线连接,并将所述第一图像信号传输给所述终端设备400。在一种实现方式中,由于所述拍摄设备300输出的第一图像信号的数据量较大,不利于无线传输,因此可以将所述第一图像信号进行压缩处理,并将压缩处理后的图像信号传输给所述终端设备400。其中,所述终端设备400包括但不限于电脑、手机、遥控器、平板等具有显示功能的设备。
为了方便所述图像传输设备与所述终端设备400的连接,在所述图像传输装置200接入所述云台系统10时,所述图像传输装置200可以将无线连接信息传输给所述云台100的控制模块110,从而使得所述控制模块110可以控制所述显示模块120显示所述图像传输装置200的无线连接信息,以使所述终端设备400基于所述无线连接信息与所述图像传输装置200无线连接。本实施例在所述显示模块120显示所述无线连接信息,从而方便所述图像传输设备与所述终端设备400的连接,有利于提高连接效率。其中,所述无线连接信息包括但不限于图形码或者ID标识,可依据实际应用场景进行具体设置。
在一种实现方式中,当所述图像传输装置200与所述控制模块110电连接时,确定所述图像传输装置200接入所述云台系统10。进一步地,为了让用户知道所述图像传输装置200已接入所述云台系统10,所述控制模块110可以控制所述显示模块120输出视觉提示信息,以提示用户,有利于提高用户的使用体验。
在另一种实现方式中,当所述图像传输装置200与所述控制模块110和所述拍摄设备300均电连接时,确定所述图像传输装置200接入所述云台系统10。进一步地,为了让用户知道所述图像传输装置200已接入所述云台系统10,所述控制模块110可以控制所述显示模块120输出视觉提示信息以及所述拍摄装置也可以输出视觉提示信息(比如指示灯闪烁),以提示用户。
相应的,本申请实施例还提供了一种云台100,请参阅图9,所述云台100的手持部设置有控制模块110和显示模块120,所述云台100用于搭载拍摄设备以及图像传输装置,所述拍摄设备输出的第一图像信号通过所述图像传输装置转换为第二图像信号后,通过所述云台100内部的走线输出给所述控制模块110;以及,所述图像传输装置还用于对所述第一图像信号进行目标对象识别处理并将所述目标对象识别处理的结果输出给所述控制模块110。
所述控制模块110用于基于所述第二图像信号控制所述显示模块120进行显示;以及基于所述目标对象识别处理的结果控制所述云台100转动和/或调整所述拍摄装置的拍摄参数;其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
所述云台100用于与所述图像传输装置可拆卸连接。
在一实施例中,所述云台100包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
在一实施例中,所述云台100包括第三接口,所述云台100的轴臂和电机内形成有走线空间;所述云台100用于通过所述第三接口接收所述图像传输装置输出的所述第二图像信号,所述第三接口与所述控制模块110通过所述走线空间内的线路电连接。
在一实施例中,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
在一实施例中,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
在一实施例中,所述控制模块110包括信号转换器和控制器。
所述信号转换器用于接收所述第二图像信号,并将所述第二图像信号转换为第三图像信号输出至所述控制器。
所述控制器用于对所述第三图像信号进行处理得到所述第四图像信号,并将所述第四图像信号传输至所述显示模块120进行显示;其中,所述第三图像信号的信号格式为所述控制器能够处理的信号格式,所述第四信号的信号格式为所述显示模块120能够显示的信号格式。
在一实施例中,所述第三图像信号为YUV格式的信号,所述第四图像信号为RGB格式的信号。
在一实施例中,所述信号转换器和所述控制器被设置于同一电路板上。
在一实施例中,所述第一图像信号和所述第三图像信号为不同类型的数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号、第二图像信号和所述第三图像信号为不同类型的数字信号。
在一实施例中,所述控制模块110还用于接收用户通过所述显示模块120输入的交互数据并输出至所述图像传输装置,以使所述图像传输装置基于所述交互数据和预设的计算模型对所述第一图像信号进行目标对象识别处理。
在一实施例中,所述控制模块110还用于基于所述目标对象识别处理的结果控制所述显示模块120进行显示。
在一实施例中,所述显示模块120还用于在所述图像传输装置接入云台100系统时,显示所述图像传输装置的无线连接信息,以使所述终端设备基于所述无线连接信息与所述图像传输装置无线连接。
在一实施例中,所述无线连接信息包括以下至少一项:图形码或者ID标识。
在一实施例中,所述显示模块120具体用于在所述图像传输装置与所述控制模块110电连接、或者所述图像传输装置与所述控制模块110和所述拍摄设备均电连接时,显示所述图像传输装置的无线连接信息。
相应的,请参阅图10,本申请实施例还提供了一种图像传输装置200,所述图像传输装置200搭载于云台,所述云台还用于搭载拍摄设备,所述云台的手持部设置有控制模块和显示模块,所述图像传输装置200包括:第一接口201、处理器203和第二接口202;
所述第一接口201用于接收所述拍摄设备输出的第一图像信号。
所述处理器203用于将所述第一图像信号转换为第二图像信号;以及,对所述第一图像信号进行目标对象识别处理。
所述第二接口202具体用于将所述第二图像信号通过所述云台内部的走线输出至所述控制模块,以使所述控制模块基于所述第二图像信号控制所述显示模块进行显示;以及,将所述目标对象识别处理的结果输出至所述控制模块以使所述控制模块基于所述目标对象识别处理的结果控制所述云台转动或者调整所述拍摄装置的拍摄参数。
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
在一实施例中,所述图像传输装置200用于与所述云台可拆卸连接。
在一实施例中,所述云台包括拍摄设备安装架,所述图像传输装置200用于与所述拍摄设备安装架可拆卸连接。
在一实施例中,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
在一实施例中,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
在一实施例中,所述处理器203还用于基于预设的计算模型对所述第一图像信号进行目标对象识别处理。
在一实施例中,所述处理器203具体用于接收用户通过所述显示模块输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。
在一实施例中,所述图像传输装置200还包括无线信号发射器,所述无线信号发射器用于将所述第一图像信号传输给终端设备。
在一实施例中,所述图像传输装置200还用于在所述图像传输装置200接入云台系统时将所述图像传输装置200的无线连接信息传输给所述云台的显示模块,以使所述云台的显示模块显示所述无线连接信息,所述终端设备能够基于所述无线连接信息与所述图像传输装置200无线连接。
在一实施例中,所述无线连接信息包括以下至少一项:图形码或者ID标识。
在一实施例中,所述图像传输装置200具体用于在所述图像传输装置200与所述控制模块电连接、或者所述图像传输装置200与所述控制模块和所述拍摄设备均电连接时,将所述图像传输装置200的无线连接信息传输给所述云台的显示模块。
相应的,请参阅图11,本申请实施例还提供了一种图像信号处理方法,应用于云台,所述云台用于搭载拍摄设备以及图像传输装置,所述拍摄设备输出的第一图像信号通过图像传输装置转换为第二图像信号后,通过所述云台内部的走线输出给所述云台;以及,所述图像传输装置还用于对所述第一图像信号进行目标对象识别处理并将所述目标对象识别处理的结果输出给所述云台。所述方法包括:
在步骤S101中,基于所述第二图像信号进行显示。
在步骤S102中,基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;其中,所述第一图像信号的信号质量比所述第二图像信号的质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
在一实施例中,所述云台用于与所述图像传输装置可拆卸连接。
在一实施例中,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
在一实施例中,所述云台包括第三接口,所述云台的轴臂和电机形成有走线空间。
所述方法还包括:通过所述第三接口接收所述图像传输装置输出的所述第二图像信号,并在所述走线空间中传输所述第二图像信号。
在一实施例中,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
在一实施例中,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
在一实施例中,所述基于所述第二图像信号进行显示包括:接收所述第二图像信号,并将所述第二图像信号转换为第三图像信号;对所述第三图像信号进行处理得到所述第四图像信号;其中,所述第三图像信号的信号格式为所述控制器能够处理的信号格式,所述第四信号的信号格式为所述显示模块能够显示的信号格式。
在一实施例中,所述第三图像信号为YUV格式的信号,所述第四图像信号为RGB格式的信号。
在一实施例中,所述第一图像信号和所述第三图像信号为不同类型的数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号、第二图像信号和所述第三图像信号为不同类型的数字信号。
在一实施例中,还包括:接收用户输入的交互数据,并输出至所述图像传输装置;所述交互数据用于使所述图像传输装置基于所述交互数据和预设的计算模型对所述第一图像信号进行目标对象识别处理。
在一实施例中,所述方法还包括:基于所述目标对象识别处理的结果进行显示。
在一实施例中,还包括:在所述图像传输装置接入云台系统时,显示所述图像传输装置的无线连接信息,以使所述终端设备基于所述无线连接信息与所述图像传输装置无线连接。
在一实施例中,所述显示所述图像传输装置的无线连接信息包括:在所述图像传输装置与所述云台电连接、或者所述图像传输装置与所述云台和所述拍摄设备均电连接时,显示所述图像传输装置的无线连接信息。
在一实施例中,所述无线连接信息包括以下至少一项:图形码或者ID标识。
相应的,请参阅图12,本申请实施例还提供了一种图像信号处理方法,应用于图传传输装置,所述图像传输装置搭载于云台,所述云台还用于搭载拍摄设备;所述图像传输模块装置包括第一接口和第二接口;所述方法包括:
在步骤S201中,通过所述第一接口接收拍摄设备输出的第一图像信号。
在步骤S202中,将所述第一图像信号转换为第二图像信号;以及,对所述第一图像信号进行目标对象识别处理;其中,所述第一图像信号的信号质量比所述第二图像信号的质量高。
在步骤S203中,通过所述第二接口将所述第二图像信号经过云台内部的走线输出至所述云台,以使所述云台基于所述第二图像信号进行显示;以及将所述目标对象识别处理的结果输出至所述云台以使所述云台基于所述目标对象识别处理的结果控制自身转动和/或调整所述拍摄装置的拍摄参数;其中,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
在一实施例中,所述图像传输装置用于与所述云台可拆卸连接。
在一实施例中,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
在一实施例中,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
在一实施例中,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
在一实施例中,还包括:基于预设的计算模型对所述第一图像信号进行目标对象识别处理。
在一实施例中,所述基于预设的计算模型对所述第一图像信号进行目标对象识别处理,包括:接收用户通过所述云台输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。
在一实施例中,还包括:将所述第一图像信号传输给所述终端设备。
在一实施例中,还包括:在所述图像传输装置接入云台系统时将所述图像传输装置的无线连接信息传输给所述云台,以使所述云台显示所述无线连接信息;其中,所述终端设备能够基于所述无线连接信息与所述图像传输装置无线连接。
在一实施例中,所述在所述图像传输装置接入云台系统时将所述图像传输装置的无线连接信息传输给所述云台,包括:在所述图像传输装置与所述云台电连接、或者所述图像传输装置与所述控制模块和所述拍摄设备均电连接时,将所述图像传输装置的无线连接信息传输给所述云台。
在一实施例中,所述无线连接信息包括以下至少一项:图形码或者ID标识。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器,上述指令可由装置的处理器执行以完成上述方法。例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当存储介质中的指令由终端的处理器执行时,使得终端能够执行上述方法。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本申请实施例所提供的方法和装置进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (69)

1.一种云台系统,其特征在于,所述云台系统包括云台和图像传输装置,所述云台用于搭载拍摄设备,所述云台的手持部设置有控制模块和显示模块;
所述图像传输装置用于接收所述拍摄设备输出的第一图像信号,将所述第一图像信号转换为第二图像信号,并通过所述云台内部的走线将所述第二图像信号输出至所述控制模块;以及,对所述第一图像信号进行目标对象识别处理,并将所述目标对象识别处理的结果输出至所述控制模块;
所述控制模块用于基于所述第二图像信号控制所述显示模块进行显示;以及基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
2.根据权利要求1所述的系统,其特征在于,所述图像传输装置用于与所述云台可拆卸连接。
3.根据权利要求2所述的系统,其特征在于,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
4.根据权利要求1所述的系统,其特征在于,所述图像传输装置包括第一接口和第二接口,所述云台包括第三接口,所述云台的轴臂和电机内形成有走线空间;
所述图像传输装置用于通过所述第一接口接收所述第一图像信号,并通过所述第二接口将所述第二图像信号输出至所述第三接口,所述第三接口与所述控制模块通过所述走线空间内的线路电连接。
5.根据权利要求1所述的系统,其特征在于,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
6.根据权利要求5所述的系统,其特征在于,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,
所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
7.根据权利要求1所述的系统,其特征在于,所述控制模块包括信号转换器和控制器;
所述信号转换器用于接收所述第二图像信号,并将所述第二图像信号转换为第三图像信号输出至所述控制器;
所述控制器用于对所述第三图像信号进行处理得到第四图像信号,并将所述第四图像信号传输至所述显示模块进行显示;
其中,所述第三图像信号的信号格式为所述控制器能够处理的信号格式,所述第四信号的信号格式为所述显示模块能够显示的信号格式。
8.根据权利要求7所述的系统,其特征在于,所述第三图像信号为YUV格式的信号,所述第四图像信号为RGB格式的信号。
9.根据权利要求7所述的系统,其特征在于,所述信号转换器和所述控制器被设置于同一电路板上。
10.根据权利要求7所述的系统,其特征在于,所述第一图像信号和所述第三图像信号为不同类型的数字信号,所述第二图像信号为模拟信号;
或者,所述第一图像信号、第二图像信号和所述第三图像信号为不同类型的数字信号。
11.根据权利要求1所述的系统,其特征在于,所述图像传输装置具体用于基于预设的计算模型对所述第一图像信号进行目标对象识别处理。
12.根据权利要求11所述的系统,其特征在于,所述图像传输装置具体用于接收用户通过所述显示模块输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。
13.根据权利要求1所述的系统,其特征在于,
所述控制模块还用于基于所述目标对象识别处理的结果控制所述显示模块进行显示。
14.根据权利要求1所述的系统,其特征在于,所述图像传输装置还用于与终端设备无线连接,并将所述第一图像信号传输给所述终端设备。
15.根据权利要求14所述的系统,其特征在于,所述显示模块还用于在所述图像传输装置接入所述云台系统时,显示所述图像传输装置的无线连接信息,以使所述终端设备基于所述无线连接信息与所述图像传输装置无线连接。
16.根据权利要求15所述的系统,其特征在于,所述无线连接信息包括以下至少一项:图形码或者ID标识。
17.根据权利要求15所述的系统,其特征在于,当所述图像传输装置与所述控制模块电连接时,确定所述图像传输装置接入所述云台系统;或者
当所述图像传输装置与所述控制模块和所述拍摄设备均电连接时,确定所述图像传输装置接入所述云台系统。
18.一种云台,其特征在于,所述云台的手持部设置有控制模块和显示模块,所述云台用于搭载拍摄设备以及图像传输装置,所述拍摄设备输出的第一图像信号通过所述图像传输装置转换为第二图像信号后,通过所述云台内部的走线输出给所述控制模块;以及,所述图像传输装置还用于对所述第一图像信号进行目标对象识别处理并将所述目标对象识别处理的结果输出给所述控制模块;
所述控制模块用于基于所述第二图像信号控制所述显示模块进行显示;以及基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
19.根据权利要求18所述的云台,其特征在于,所述云台用于与所述图像传输装置可拆卸连接。
20.根据权利要求19所述的云台,其特征在于,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
21.根据权利要求18所述的云台,其特征在于,所述云台包括第三接口,所述云台的轴臂和电机内形成有走线空间;
所述云台用于通过所述第三接口接收所述图像传输装置输出的所述第二图像信号,所述第三接口与所述控制模块通过所述走线空间内的线路电连接。
22.根据权利要求18所述的云台,其特征在于,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
23.根据权利要求22所述的云台,其特征在于,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,
所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
24.根据权利要求18所述的云台,其特征在于,所述控制模块包括信号转换器和控制器;
所述信号转换器用于接收所述第二图像信号,并将所述第二图像信号转换为第三图像信号输出至所述控制器;
所述控制器用于对所述第三图像信号进行处理得到第四图像信号,并将所述第四图像信号传输至所述显示模块进行显示;
其中,所述第三图像信号的信号格式为所述控制器能够处理的信号格式,所述第四信号的信号格式为所述显示模块能够显示的信号格式。
25.根据权利要求24所述的云台,其特征在于,所述第三图像信号为YUV格式的信号,所述第四图像信号为RGB格式的信号。
26.根据权利要求24所述的云台,其特征在于,所述信号转换器和所述控制器被设置于同一电路板上。
27.根据权利要求24所述的云台,其特征在于,所述第一图像信号和所述第三图像信号为不同类型的数字信号,所述第二图像信号为模拟信号;
或者,所述第一图像信号、第二图像信号和所述第三图像信号为不同类型的数字信号。
28.根据权利要求18所述的云台,其特征在于,所述控制模块还用于接收用户通过所述显示模块输入的交互数据并输出至所述图像传输装置,以使所述图像传输装置基于所述交互数据和预设的计算模型对所述第一图像信号进行目标对象识别处理。
29.根据权利要求18所述的云台,其特征在于,所述控制模块还用于基于所述目标对象识别处理的结果控制所述显示模块进行显示。
30.根据权利要求29所述的云台,其特征在于,所述显示模块还用于在所述图像传输装置接入云台系统时,显示所述图像传输装置的无线连接信息,以使终端设备基于所述无线连接信息与所述图像传输装置无线连接。
31.根据权利要求30所述的云台,其特征在于,所述无线连接信息包括以下至少一项:图形码或者ID标识。
32.根据权利要求30所述的云台,其特征在于,所述显示模块具体用于在所述图像传输装置与所述控制模块电连接、或者所述图像传输装置与所述控制模块和所述拍摄设备均电连接时,显示所述图像传输装置的无线连接信息。
33.一种图像传输装置,其特征在于,所述图像传输装置搭载于云台,所述云台还用于搭载拍摄设备,所述云台的手持部设置有控制模块和显示模块,所述图像传输装置包括:第一接口、处理器和第二接口;
所述第一接口用于接收所述拍摄设备输出的第一图像信号;
所述处理器用于将所述第一图像信号转换为第二图像信号;以及,对所述第一图像信号进行目标对象识别处理;
所述第二接口用于将所述第二图像信号通过所述云台内部的走线输出至所述控制模块,以使所述控制模块基于所述第二图像信号控制所述显示模块进行显示;以及,将所述目标对象识别处理的结果输出至所述控制模块以使所述控制模块基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的信号质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
34.根据权利要求33所述的装置,其特征在于,所述图像传输装置用于与所述云台可拆卸连接。
35.根据权利要求34所述的装置,其特征在于,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
36.根据权利要求33所述的装置,其特征在于,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
37.根据权利要求36所述的装置,其特征在于,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,
所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
38.根据权利要求33所述的装置,其特征在于,所述处理器还用于基于预设的计算模型对所述第一图像信号进行目标对象识别处理。
39.根据权利要求38所述的装置,其特征在于,所述处理器具体用于接收用户通过所述显示模块输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。
40.根据权利要求33所述的装置,其特征在于,所述图像传输装置还包括无线信号发射器,所述无线信号发射器用于将所述第一图像信号传输给终端设备。
41.根据权利要求40所述的装置,其特征在于,所述图像传输装置还用于在所述图像传输装置接入云台系统时将所述图像传输装置的无线连接信息传输给所述云台的显示模块,以使所述云台的显示模块显示所述无线连接信息,所述终端设备能够基于所述无线连接信息与所述图像传输装置无线连接。
42.根据权利要求41所述的装置,其特征在于,所述无线连接信息包括以下至少一项:图形码或者ID标识。
43.根据权利要求41所述的装置,其特征在于,所述图像传输装置具体用于在所述图像传输装置与所述控制模块电连接、或者所述图像传输装置与所述控制模块和所述拍摄设备均电连接时,将所述图像传输装置的无线连接信息传输给所述云台的显示模块。
44.一种图像信号处理方法,其特征在于,应用于云台,所述云台用于搭载拍摄设备以及图像传输装置,所述拍摄设备输出的第一图像信号通过图像传输装置转换为第二图像信号后,通过所述云台内部的走线输出给所述云台;以及,所述图像传输装置还用于对所述第一图像信号进行目标对象识别处理并将所述目标对象识别处理的结果输出给所述云台;
所述方法包括:
基于所述第二图像信号进行显示;以及,
基于所述目标对象识别处理的结果控制所述云台转动和/或调整所述拍摄装置的拍摄参数;
其中,所述第一图像信号的信号质量比所述第二图像信号的质量高,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
45.根据权利要求44所述的方法,其特征在于,所述云台用于与所述图像传输装置可拆卸连接。
46.根据权利要求45所述的方法,其特征在于,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
47.根据权利要求44所述的方法,其特征在于,所述云台包括第三接口,所述云台的轴臂和电机形成有走线空间;
所述方法还包括:
通过所述第三接口接收所述图像传输装置输出的所述第二图像信号,并在所述走线空间中传输所述第二图像信号。
48.根据权利要求44所述的方法,其特征在于,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
49.根据权利要求48所述的方法,其特征在于,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,
所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
50.根据权利要求44所述的方法,其特征在于,所述基于所述第二图像信号进行显示包括:
接收所述第二图像信号,并将所述第二图像信号转换为第三图像信号;
对所述第三图像信号进行处理得到第四图像信号;其中,所述第三图像信号的信号格式为所述控制器能够处理的信号格式,所述第四信号的信号格式为所述显示模块能够显示的信号格式。
51.根据权利要求50所述的方法,其特征在于,所述第三图像信号为YUV格式的信号,所述第四图像信号为RGB格式的信号。
52.根据权利要求50所述的方法,其特征在于,所述第一图像信号和所述第三图像信号为不同类型的数字信号,所述第二图像信号为模拟信号;
或者,所述第一图像信号、第二图像信号和所述第三图像信号为不同类型的数字信号。
53.根据权利要求44所述的方法,其特征在于,还包括:
接收用户输入的交互数据,并输出至所述图像传输装置;所述交互数据用于使所述图像传输装置基于所述交互数据和预设的计算模型对所述第一图像信号进行目标对象识别处理。
54.根据权利要求44所述的方法,其特征在于,所述方法还包括:基于所述目标对象识别处理的结果进行显示。
55.根据权利要求44所述的方法,其特征在于,还包括:
在所述图像传输装置接入云台系统时,显示所述图像传输装置的无线连接信息,以使终端设备基于所述无线连接信息与所述图像传输装置无线连接。
56.根据权利要求55所述的方法,其特征在于,所述显示所述图像传输装置的无线连接信息包括:
在所述图像传输装置与所述云台电连接、或者所述图像传输装置与所述云台和所述拍摄设备均电连接时,显示所述图像传输装置的无线连接信息。
57.根据权利要求55所述的方法,其特征在于,所述无线连接信息包括以下至少一项:图形码或者ID标识。
58.一种图像信号处理方法,其特征在于,应用于图传传输装置,所述图像传输装置搭载于云台,所述云台还用于搭载拍摄设备;所述图像传输装置包括第一接口和第二接口;所述方法包括:
通过所述第一接口接收拍摄设备输出的第一图像信号;
将所述第一图像信号转换为第二图像信号;以及,对所述第一图像信号进行目标对象识别处理;其中,所述第一图像信号的信号质量比所述第二图像信号的质量高;
通过所述第二接口将所述第二图像信号经过云台内部的走线输出至所述云台,以使所述云台基于所述第二图像信号进行显示;以及将所述目标对象识别处理的结果输出至所述云台以使所述云台基于所述目标对象识别处理的结果控制自身转动和/或调整所述拍摄装置的拍摄参数;其中,传输所述第二图像信号所需的线路数量和/或线路尺寸满足预设条件。
59.根据权利要求58所述的方法,其特征在于,所述图像传输装置用于与所述云台可拆卸连接。
60.根据权利要求59所述的方法,其特征在于,所述云台包括拍摄设备安装架,所述图像传输装置用于与所述拍摄设备安装架可拆卸连接。
61.根据权利要求58所述的方法,其特征在于,所述第一图像信号为数字信号,所述第二图像信号为模拟信号;或者,所述第一图像信号和所述第二图像信号为不同类型的数字信号。
62.根据权利要求61所述的方法,其特征在于,所述第一图像信号为HDMI数字信号,所述第二图像信号为CVBS模拟信号;或者,
所述第一图像信号为HDMI数字信号,所述第二图像信号为SDI数字信号。
63.根据权利要求58所述的方法,其特征在于,还包括:基于预设的计算模型对所述第一图像信号进行目标对象识别处理。
64.根据权利要求63所述的方法,其特征在于,所述基于预设的计算模型对所述第一图像信号进行目标对象识别处理,包括:
接收用户通过所述云台输入的交互数据,并基于所述交互数据和所述预设的计算模型对所述第一图像信号进行目标对象识别处理。
65.根据权利要求58所述的方法,其特征在于,还包括:将所述第一图像信号传输给终端设备。
66.根据权利要求65所述的方法,其特征在于,还包括:在所述图像传输装置接入云台系统时将所述图像传输装置的无线连接信息传输给所述云台,以使所述云台显示所述无线连接信息;其中,所述终端设备能够基于所述无线连接信息与所述图像传输装置无线连接。
67.根据权利要求66所述的方法,其特征在于,所述在所述图像传输装置接入云台系统时将所述图像传输装置的无线连接信息传输给所述云台,包括:
在所述图像传输装置与所述云台电连接、或者所述图像传输装置与所述控制模块和所述拍摄设备均电连接时,将所述图像传输装置的无线连接信息传输给所述云台。
68.根据权利要求66所述的方法,其特征在于,所述无线连接信息包括以下至少一项:图形码或者ID标识。
69.一种计算机可读存储介质,其特征在于,其上存储有计算机指令,该指令被处理器执行时实现权利要求44~57或者权利要求58~68中任一项所述的方法。
CN202080040188.6A 2020-09-22 2020-09-22 图像信号处理方法、云台、图像传输装置、云台系统及存储介质 Pending CN114009004A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2020/116760 WO2022061497A1 (zh) 2020-09-22 2020-09-22 图像信号处理方法、云台、图像传输装置、云台系统及存储介质

Publications (1)

Publication Number Publication Date
CN114009004A true CN114009004A (zh) 2022-02-01

Family

ID=79920179

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080040188.6A Pending CN114009004A (zh) 2020-09-22 2020-09-22 图像信号处理方法、云台、图像传输装置、云台系统及存储介质

Country Status (2)

Country Link
CN (1) CN114009004A (zh)
WO (1) WO2022061497A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105937697A (zh) * 2016-06-16 2016-09-14 中山市思锐摄影器材工业有限公司 一种手持稳定器
CN106375720A (zh) * 2016-09-12 2017-02-01 中国科学院自动化研究所 智能视觉云台系统及其实现方法
CN107005673A (zh) * 2016-10-26 2017-08-01 深圳市大疆灵眸科技有限公司 云台
CN110730287A (zh) * 2019-10-24 2020-01-24 深圳市道通智能航空技术有限公司 一种可拆换的云台相机、飞行器、系统及其云台拆换方法
CN111008994A (zh) * 2019-11-14 2020-04-14 山东万腾电子科技有限公司 基于MPSoC的运动目标实时检测跟踪系统及方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN207634925U (zh) * 2017-06-20 2018-07-20 深圳市道通智能航空技术有限公司 一种云台及具有此云台的摄像组件
EP3835913A1 (en) * 2018-09-13 2021-06-16 SZ DJI Technology Co., Ltd. Control method of handheld gimbal, handheld gimbal, and handheld device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105937697A (zh) * 2016-06-16 2016-09-14 中山市思锐摄影器材工业有限公司 一种手持稳定器
CN106375720A (zh) * 2016-09-12 2017-02-01 中国科学院自动化研究所 智能视觉云台系统及其实现方法
CN107005673A (zh) * 2016-10-26 2017-08-01 深圳市大疆灵眸科技有限公司 云台
CN110730287A (zh) * 2019-10-24 2020-01-24 深圳市道通智能航空技术有限公司 一种可拆换的云台相机、飞行器、系统及其云台拆换方法
CN111008994A (zh) * 2019-11-14 2020-04-14 山东万腾电子科技有限公司 基于MPSoC的运动目标实时检测跟踪系统及方法

Also Published As

Publication number Publication date
WO2022061497A1 (zh) 2022-03-31

Similar Documents

Publication Publication Date Title
US20200236280A1 (en) Image Quality Assessment
US11457157B2 (en) High dynamic range processing based on angular rate measurements
US9426379B2 (en) Photographing unit, cooperative photographing method, and recording medium having recorded program
US8605158B2 (en) Image pickup control apparatus, image pickup control method and computer readable medium for changing an image pickup mode
US20220247898A1 (en) Replaceable gimbal camera, aircraft, aircraft system, and gimbal replacement method for aircraft
US8514285B2 (en) Image processing apparatus, image processing method and program
JP7135299B2 (ja) 画像処理装置、表示装置、画像処理方法、プログラム
US20090040293A1 (en) Camera Array Apparatus and Method for Capturing Wide-Angle Network Video
CN110177200B (zh) 摄像头模组、电子设备以及影像拍摄方法
US11843852B2 (en) Imaging apparatus for generating image from first image corresponding to first field of view and second image corresponding to second field of view
CN110933297B (zh) 智能摄影系统的摄影控制方法、装置、存储介质及系统
CN105744132B (zh) 全景图像拍摄的光学镜头配件
CN114009004A (zh) 图像信号处理方法、云台、图像传输装置、云台系统及存储介质
WO2018028585A1 (zh) 具有不同大小光圈的多摄像头模组及其应用
CN220570624U (zh) 图像捕获系统和图像捕获装置
EP4274248A1 (en) Photographing method and electronic device
WO2023185096A1 (zh) 图像模糊度的确定方法及其相关设备
CN107454294B (zh) 全景美颜拍照手机及其实现方法
JP2004201101A (ja) デジタルカメラ
JP2005064681A (ja) 撮像・表示装置、撮像・表示システム、映像生成方法、この方法のプログラム、およびこのプログラムを記録した記録媒体
CN115499581A (zh) 一种拍摄方法、装置、终端设备及存储介质
CN116719202A (zh) 目标追踪电子设备、终端设备及目标追踪系统
JP2020016883A (ja) 撮像装置
JPH09289613A (ja) 画像変換方法、ならびに装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination