CN115065868A - 图像处理方法、装置、设备、系统及介质 - Google Patents

图像处理方法、装置、设备、系统及介质 Download PDF

Info

Publication number
CN115065868A
CN115065868A CN202210381860.9A CN202210381860A CN115065868A CN 115065868 A CN115065868 A CN 115065868A CN 202210381860 A CN202210381860 A CN 202210381860A CN 115065868 A CN115065868 A CN 115065868A
Authority
CN
China
Prior art keywords
video stream
processor
specified
compression
image acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210381860.9A
Other languages
English (en)
Inventor
陶成功
陈春生
崔建勇
王鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202210381860.9A priority Critical patent/CN115065868A/zh
Publication of CN115065868A publication Critical patent/CN115065868A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开实施例涉及一种图像处理方法、装置、设备及介质,该方法包括:将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;所述指定压缩格式的压缩率高于预设阈值;将所述压缩视频流通过通用串行总线传输给所述终端设备中的处理器,以通过所述处理器基于所述压缩视频流执行指定的处理操作。上述方式可以有效提升视频流传输效果,并有助于保障基于视频流进行图像处理的效果。

Description

图像处理方法、装置、设备、系统及介质
技术领域
本公开涉及图像处理技术领域,尤其涉及一种图像处理方法、装置、设备、系统及介质。
背景技术
在部分场景中,一些具有图像处理功能的终端设备需要通过USB(UniversalSerial Bus,通用串行总线)接收摄像头采集的预览视频流,并基于视频流进行图像处理。然而,现有的摄像头默认直接以YUV格式传输预览视频流,需要占用较多带宽,而USB总线带宽通常较低,不仅传输速率慢,而且分辨率和帧率都受限制,视频流传输效果不佳,也使得后续图像处理效果较差。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种图像处理方法、装置、设备、系统及介质。
本公开实施例提供了一种图像处理方法,其特征在于,应用于终端设备,所述终端设备包括图像采集装置,所述方法包括:将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;所述指定压缩格式的压缩率高于预设阈值;将所述压缩视频流通过通用串行总线传输给所述终端设备中的处理器,以通过所述处理器基于所述压缩视频流执行指定的处理操作。
可选的,所述图像采集装置侧设置有压缩单元;将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理的步骤,包括:将所述图像采集装置采集到的预览视频流输入至所述压缩单元,并通过所述压缩单元对所述预览视频流按照指定压缩格式进行压缩处理。
可选的,所述压缩单元包括硬件编码模组。
可选的,所述终端设备中的处理器侧设置有解码单元;通过所述处理器基于所述压缩视频流执行指定的处理操作的步骤,包括:通过所述处理器设置的解码单元对所述压缩视频流进行解码,以还原所述预览视频流;通过所述处理器对解码所得的所述预览视频流执行指定的处理操作。
可选的,所述解码单元包括硬件解码模组。
可选的,所述指定压缩格式包括H264格式或H265格式。
可选的,所述终端设备配置有Android操作系统;所述图像采集装置的数量为一个或多个。
可选的,所述指定的处理操作包括图像识别处理。
本公开实施例提供了一种图像处理装置,应用于终端设备,所述终端设备包括图像采集装置,所述图像处理装置包括:压缩模块,用于将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;所述指定压缩格式的压缩率高于预设阈值;传输模块,用于将所述压缩视频流通过通用串行总线传输给所述终端设备中的处理器,以通过所述处理器基于所述压缩视频流执行指定的处理操作。
本公开实施例提供了一种终端设备,所述终端设备包括图像采集装置,且所述终端设备还包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述任一所述的图像处理方法。
本公开实施例提供了一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述任一所述的图像处理方法。
本公开实施例提供的上述技术方案,终端设备包括图像采集装置,终端设备可以将图像采集装置采集到的预览视频流按照指定压缩格式(压缩率高于预设阈值)进行压缩处理,得到压缩视频流;然后将压缩视频流通过通用串行总线传输给终端设备中的处理器,以通过处理器基于压缩视频流执行指定的处理操作。在终端设备需要借助通用串行总线传输预览视频流的场景中,能够首先对图像采集装置采集的预览视频流以较高压缩率进行压缩,然后由终端设备的处理器对压缩视频流进行解压后再处理,这种方式可以有效降低传输视频流所需占用的带宽,提升视频流传输速率,且可有效保障传输过程中视频流的图像分辨率和帧率,即便分辨率高的视频流也可得以较好传输,综合提升了视频流传输效果;同时也能够使处理器及时接收视频流,并针对分辨率和帧率均得以保障的视频流进行有效处理,进而保障图像处理效果。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种图像处理方法的流程示意图;
图2为本公开实施例提供的一种图像处理交互示意图;
图3为本公开实施例提供的一种图像处理示意图;
图4为本公开实施例提供的一种图像处理装置的结构示意图;
图5为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
一些具有图像处理功能的终端设备需要通过USB数据线与摄像头相连,该摄像头可以是终端设备自身的摄像头,也可以是外部配置的独立摄像头。示例性地,在基于USB的安卓设备及相机的分体场景中,具有图像处理功能的安卓设备需要通过USB数据线与同样配置有USB接口的相机(简称USB相机)相连,USB相机在采集预览视频流后,可将视频流通过USB数据线传输给安卓设备。现有的摄像头都默认直接以YUV格式传输原始视频流,需要占用较多带宽,不仅传输速率慢,分辨率和帧率都受限制,分辨率高的视频流也难以得以有效传输,也使得具有图像处理功能的终端设备难以及时有效地对摄像头采集到的预览视频流进行处理。为改善以上问题至少之一,本公开实施例提供了一种图像处理方法、装置、设备、系统及介质,以下进行详细说明:
首先,本公开实施例提供了一种图像处理方法,应用于终端设备,终端设备包括图像采集装置,图像采集装置诸如可以为摄像头、相机等。在实际应用中,图像采集装置可以直接设置在终端设备上,也可以与终端设备分体设置,在此不进行限定。参见图1所示的一种图像处理方法的流程示意图,该方法主要包括如下步骤S102~步骤S104:
步骤S102,将图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;指定压缩格式的压缩率高于预设阈值。
通过对原始的预览视频流按照指定压缩格式进行压缩处理,可以有效降低传输预览视频流时所需占用的带宽,避免直接采用YUV格式传输预览视频流时因占用带宽太高而难以有效传输的问题,也避免了一些分辨率较高的视频流传输用时较长且容易出现失真等问题。
为了保障压缩效果,上述指定压缩格式的压缩率高于预设阈值;本公开实施例对预设阈值不进行限制,可以根据实际需求进行设置。在一些具体的实施示例中,可以设置压缩率为20,通过采用压缩率大于20的指定压缩格式对预览视频流进行压缩,从而保障预览视频流传输速率较高、所占带宽较低,有助于实现高分辨率、高帧率的传输效果。
步骤S104,将压缩视频流通过通用串行总线传输给终端设备中的处理器,以通过处理器基于压缩视频流执行指定的处理操作。
上述终端设备中的处理器诸如可以为图像处理器,具有图像处理能力的处理器均可,本公开实施例对处理器不进行限定。处理器在接收到压缩视频流后,可首先对压缩视频流进行解压,得到原始的预览视频流,再针对原始的预览视频流执行指定的处理操作。本公开实施例对指定的处理操作不进行限制,诸如可基于预览视频流进行屏幕展示处理、图像识别处理等。示例性地,处理器可以将解压后的预览视频流传递给目标APP,然后目标APP基于预览视频流执行实时操作,诸如,实时针对预览视频流进行文本图像识别。
综上,在终端设备需要借助通用串行总线传输预览视频流的场景中,能够首先对图像采集装置采集的预览视频流以较高压缩率进行压缩,然后由终端设备的处理器对压缩视频流进行解压后再处理,这种方式可以有效降低传输视频流所需占用的带宽,提升视频流传输速率,且可有效保障传输过程中视频流的图像分辨率和帧率,即便分辨率高的视频流也可得以较好传输,综合提升了视频流传输效果;同时也能够使处理器及时接收视频流,并针对分辨率和帧率均得以保障的视频流进行有效处理,进而有助于保障图像处理效果。
在一些实施示例中,处理器基于视频流执行的指定的处理操作包括图像识别处理,该图像识别处理诸如可以为检测并识别指定对象、识别文本等,这类图像识别处理通常对及时性要求较高,尤其需要针对视频流进行诸如实时文本图像识别等处理操作而言,上述方式极大提升了视频流传输速率,有效保障了视频流的接收及处理的及时性,且通过压缩的方式进行传输,视频流的分辨率和帧率也可不受限制,对于分辨率较高的视频流而言,也可以通过通用串行总线进行传输,有助于进一步保障基于视频流进行后续图像处理的效果。综上,本公开实施例提供的上述图像处理方法可以较好应用于需要基于USB传输视频流并进行图像识别的场景中,有效保障图像识别的及时性和识别效果。
在一些实施方式中,指定压缩格式包括H264格式或H265格式。其中,H264也可表述为H.264;H265也可表述为H.265。H264格式和H265格式又可称为编码格式,可用于对视频进行编码,诸如,将预览图像流(视频流)以H264流或H265流形式进行传输。H264格式或H265格式都具有大于20的压缩率,可以有效实现高分辨率(1080P/2K/4K)、高帧率(30fps)的传输效果。传统仅是直接采用H264或H265进行视频压缩,但目前尚未有技术将H264/H265引入至基于USB进行视频流传输的场景中,通过上述方式,可以有效提升现有的基于USB传输视频流的传输效果,进一步提升后续针对视频流进行诸如文字识别、查词等操作的图像处理效果。
在一些实施方式中,图像采集装置侧可以设置有压缩单元(也可称为图像压缩模组),在此基础上,将图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理的步骤,包括:将图像采集装置采集到的预览视频流输入至压缩单元,并通过压缩单元对预览视频流按照指定压缩格式进行压缩处理。该压缩单元可通过软硬件实现基于指定压缩格式对预览视频流进行压缩的能力。在一些实施示例中,压缩单元具有H264或H265编码能力。
压缩单元可以直接将当前捕获的预览视频流自动转换为H264流或者H265流,通过H264流或H265流进行传输,从而提升传输速率,降低占用带宽。另外,通过直接为图像采集装置配置压缩单元,也进一步便于用户操作,无需用户在通过图像采集装置获取预览视频流后为了提升传输效果而还需自己额外通过其它软件/设备进行压缩处理。
进一步,上述压缩单元包括硬件编码模组,可通过硬件编码模组对视频流执行诸如H264/H265等压缩编码操作,通过硬件编码的方式可以有效降低CPU占用率。相比于相关技术中采用的MJPEG压缩方式,H264/H265压缩方式更优,MJPEG的压缩率通常小于20,而H264的压缩率可达到50甚至100以上,H265的压缩率还会进一步高于H264的压缩率。诸如,对于H264而言,预估可用4s传递21.9MB的文件,需43Mbps,压缩率可达56,对于H265而言,预估可用4s传递10.2MB的文件,需21Mbps,压缩率可达120。同时由于高压缩率,经H264或H265压缩得到的图像数据量也远远小于MJPEG,更利于实时传输、占用带宽也更少。因此,诸如需要USB相机与图像处理设备(诸如具有USB接口的安卓设备)配合使用且对实时性要求较高的场景中,使用H264/H265则具有极高的适用性。
在一些实施方式中,终端设备中的处理器侧设置有解码单元;在此基础上,通过处理器基于压缩视频流执行指定的处理操作的步骤,包括:首先通过处理器设置的解码单元对压缩视频流进行解码,以还原预览视频流;然后通过处理器对解码所得的预览视频流执行指定的处理操作。该解码单元可通过软硬件实现对压缩视频流进行解码的能力。在一些实施示例中,解码单元具有针对H264或H265压缩后的视频流进行解码的能力。
解码单元可以直接将接收到经H264或者H265压缩后的视频流进行解码,还原为原有的视频流,进一步,该解码单元包括硬件解码模组,示例性地,上述硬件解码模组可以包括GPU,且H264格式或H265格式均支持硬解码。通过使用硬解码方式,不会像软解码造成较高的CPU占用率。硬解码可以有效降低CPU的工作负荷,降低功耗,而且通过硬解码方式得到的视频流播放更为流畅。再次以相关技术中所采用的MJPEG压缩格式为例,MJPEG格式压缩率不仅不高,而且MJPEG图像在上屏前还需要软件解码,同样需要占用较大带宽和较高的CPU占用。
进一步,终端设备配置有Android操作系统,该终端设备也可称为Android设备(安卓设备),由于Android操作系统的兼容性和灵活性,可更好地为上述基于USB进行图像传输进行技术支持,并对接收到的视频流进行更为灵活地处理。并且,终端设备所包含的图像采集装置的数量可以为一个或多个,对于多个图像采集装置而言,可以均与终端设备分离设置,也可以部分图像采集装置直接设置在终端设备上,部分图像采集装置与终端设备分离设置,本公开实施例对图像采集装置的位置不进行限定,终端设备中的至少一个图像采集装置需要通过USB数据线将预览视频流发送给终端设备的处理器,通过本公开实施例提供的上述图像处理方法,能够在USB数据线传输的两端分别进行编解码,从而能够使传输的视频流满足分辨率和帧率要求,而且采用在USB传输的两端进行硬件编解码的方式,能够有效降低CPU工作负荷,降低功耗,而且通过硬件编解码的方式得到的视频流播放更为流畅。
在一些实施方式中,上述图像采集装置可以为USB工业相机,从而有效应用于诸如机器视觉系统中,并通过执行上述图像处理方法,可以有效保障图像传输效果,诸如,保障图像传输的实时性、带宽的低占用率、高分辨率和高帧率等。
本公开实施例给出了一种图像采集装置与终端设备分离设置的情况,在此情况中,为便于理解,将终端设备划分为相机设备(包含图像采集装置)和图像处理设备(包含终端设备的处理器),相机设备与图像处理设备通过通用串行总线(USB)连接,其中,相机设备配置有第一通用串行总线接口,图像处理设备配置有第二通用串行总线接口,第一通用串行总线接口和第二通用串行总线接口通过通用串行总线相连,相机设备与图像处理设备之间可以进行信息交互。在实际应用中,相机设备又可称为USB相机。在前述基础上,本公开实施例给出了上述图像处理方法应用在基于USB的安卓设备及相机的分体场景的具体示例,图2为本公开实施例提供的一种图像处理交互示意图,主要示意出安卓设备与USB相机之间的交互步骤,该方法主要包括如下步骤S204~步骤S208:
步骤S202,USB相机将预览视频流从YUV格式转换为H264/H265格式,得到压缩视频流。
步骤S204,USB相机将压缩视频流通过USB数据线传递给安卓设备。
步骤S206,安卓设备将压缩视频流通过硬解码方式进行解压,得到YUV格式的预览视频流。
步骤S208,将YUV格式的预览视频流传输至指定APP进行处理。该指定APP诸如可以为查词APP、直播APP等,在此不进行限制,任何需要基于视频流进行处理的APP均可。
通过USB相机自身首先对预览视频流进行H264/H265压缩,然后再由图像处理设备对压缩视频流进行解压再处理的方式,可以有效提升压缩视频流传输速率,保障压缩视频流传输效果。
图3为本公开实施例提供的一种图像处理示意图,示意出了USB相机与安卓设备之间的交互。
USB相机通过SoC(System on Chip,芯片级系统)中的ISP(Image SignalProcessing,图像信号处理)可直接进行拍摄或者预览,ISP可通过硬编码H264/H265的方式,将YUV预览流转为H264/H265预览流(视频压缩流),安卓设备中的ExternalCameralHAL(ExternalCameral Hardware Abstraction Layer,外接相机硬件抽象层)可以通过硬解码方式将H265/H265预览流转为YUV预览流,然后将YUV预览流发送给Camera Framework(相机架构层)中进行处理,诸如,将YUV预览流发送给目标APP进行处理。目标APP在此不进行限制,诸如可以为需要利用图像/视频的应用,示例性地,该APP可以为视频通话APP、查词APP、线上教育APP、直播APP、监控APP等。目标APP可以向Camera Framework发送控制指令,示例性地,可通过CameraAPI(Application Programming Interface,应用程序接口)发送控制指令,Camera Framework会进一步向ExternalCameralHAL发送控制指令,该控制指令诸如可以为打开相机、开始预览图像、设置图像拍摄参数等。ExternalCameralHAL会进一步向ISP发送控制指令,具体实现时,可基于V4L2/UVC实现控制。其中,UVC(USB Video Class,USB视频类)是一种为USB视频捕获设备定义的协议标准,V4L2(Video for linux2)为linux下的视频设备程序提供了一套接口规范,只需调用相应的接口和函数,即可实现视频的获取和处理。在实际应用中,在诸如安卓设备等图像处理设备端,可以使ExternalCameralHAL支持标准CameraAPI,并将诸如H264/H265解码合并至camera hal pipeline的原有标准中;以及在USB相机端,实现UVC/V4L2控制指令与USB相机的适配,诸如使USB相机可识别并响应UVC/V4L2控制指令。基于本公开实施例提供的图像处理方法,可对图像处理设备以及USB相机分别进行软/硬件调整,在此不再赘述。
本公开实施例提供的上述图像处理方法,可以较好应用于基于USB的相机/设备分体场景中,而且由于采用高于预设阈值的指定压缩格式,因此在传输过程中所需占用带宽很小,可以达到诸如30帧/秒的帧率标准及以上,端到端延时也不高。
本公开实施例可适用于USB2.0标准或者USB3.0标准等USB标准中,在此不进行限制。对于USB2.0标准下的视频流传输方案中,采用本公开实施例提供的上述图像处理方法受益更大。
对应于前述图像处理方法,本公开实施例提供了一种图像处理装置,应用于终端设备,终端设备包括图像采集装置,参见图4所示的一种图像处理装置的结构示意图,该图像处理装置包括:
压缩模块402,用于将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;所述指定压缩格式的压缩率高于预设阈值。
传输模块404,用于将所述压缩视频流通过通用串行总线传输给所述终端设备中的处理器,以通过所述处理器基于所述压缩视频流执行指定的处理操作。
上述装置可以有效降低传输视频流所需占用的带宽,提升视频流传输速率,且可有效保障传输过程中视频流的图像分辨率和帧率,即便分辨率高的视频流也可得以较好传输,综合提升了视频流传输效果;同时也能够使处理器及时接收视频流,并针对分辨率和帧率均得以保障的视频流进行有效处理,进而保障图像处理效果。
在一些实施方式中,所述图像采集装置侧设置有压缩单元;压缩模块402具体用于:将所述图像采集装置采集到的预览视频流输入至所述压缩单元,并通过所述压缩单元对所述预览视频流按照指定压缩格式进行压缩处理。
在一些实施方式中,所述压缩单元包括硬件编码模组。
在一些实施方式中,所述终端设备中的处理器侧设置有解码单元;传输模块404具体用于:通过所述处理器设置的解码单元对所述压缩视频流进行解码,以还原所述预览视频流;通过所述处理器对解码所得的所述预览视频流执行指定的处理操作。
在一些实施方式中,所述解码单元包括硬件解码模组。
在一些实施方式中,所述指定压缩格式包括H264格式或H265格式。
在一些实施方式中,所述终端设备配置有Android操作系统;所述图像采集装置的数量为一个或多个。
在一些实施方式中,所述指定的处理操作包括图像识别处理。
此外,本公开实施例提供了一种终端设备,所述终端设备包括图像采集装置,且所述终端设备还包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述任一所述的图像处理方法。
图5为本公开实施例提供的一种终端设备的结构示意图,该终端设备可以被实现为相机设备或图像处理设备。如图5所示,终端设备500包括一个或多个处理器501和存储器502。
处理器501可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元,并且可以控制终端设备500中的其他组件以执行期望的功能。
存储器502可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器501可以运行所述程序指令,以实现上文所述的本公开的实施例的图像处理方法以及/或者其他期望的功能。在所述计算机可读存储介质中还可以存储诸如输入信号、信号分量、噪声分量等各种内容。
在一个示例中,终端设备500还可以包括:输入装置503和输出装置504,这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。
此外,该输入装置503还可以包括例如键盘、鼠标等等。
该输出装置504可以向外部输出各种信息,包括确定出的距离信息、方向信息等。该输出装置504可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设备等等。
当然,为了简化,图5中仅示出了该终端设备500中与本公开有关的组件中的一些,省略了诸如总线、输入/输出接口等等的组件。除此之外,根据具体应用情况,终端设备500还可以包括任何其他适当的组件。
除了上述方法和设备以外,本公开的实施例还可以是计算机程序产品,其包括计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本公开实施例所提供的图像处理方法。
所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例操作的程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、C++等,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。
此外,本公开的实施例还可以是计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本公开实施例所提供的图像处理方法。
所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
本公开实施例还提供了一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现本公开实施例中的图像处理方法。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (11)

1.一种图像处理方法,其特征在于,应用于终端设备,所述终端设备包括图像采集装置,所述方法包括:
将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;所述指定压缩格式的压缩率高于预设阈值;
将所述压缩视频流通过通用串行总线传输给所述终端设备中的处理器,以通过所述处理器基于所述压缩视频流执行指定的处理操作。
2.根据权利要求1所述的方法,其特征在于,所述图像采集装置侧设置有压缩单元;
将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理的步骤,包括:
将所述图像采集装置采集到的预览视频流输入至所述压缩单元,并通过所述压缩单元对所述预览视频流按照指定压缩格式进行压缩处理。
3.根据权利要求2所述的方法,其特征在于,所述压缩单元包括硬件编码模组。
4.根据权利要求1所述的方法,其特征在于,所述终端设备中的处理器侧设置有解码单元;
通过所述处理器基于所述压缩视频流执行指定的处理操作的步骤,包括:
通过所述处理器设置的解码单元对所述压缩视频流进行解码,以还原所述预览视频流;
通过所述处理器对解码所得的所述预览视频流执行指定的处理操作。
5.根据权利要求4所述的方法,其特征在于,所述解码单元包括硬件解码模组。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述指定压缩格式包括H264格式或H265格式。
7.根据权利要求1至5任一项所述的方法,其特征在于,所述终端设备配置有Android操作系统;
所述图像采集装置的数量为一个或多个。
8.根据权利要求1至5任一项所述的方法,其特征在于,所述指定的处理操作包括图像识别处理。
9.一种图像处理装置,其特征在于,应用于终端设备,所述终端设备包括图像采集装置,所述图像处理装置包括:
压缩模块,用于将所述图像采集装置采集到的预览视频流按照指定压缩格式进行压缩处理,得到压缩视频流;所述指定压缩格式的压缩率高于预设阈值;
传输模块,用于将所述压缩视频流通过通用串行总线传输给所述终端设备中的处理器,以通过所述处理器基于所述压缩视频流执行指定的处理操作。
10.一种终端设备,其特征在于,所述终端设备包括图像采集装置,且所述终端设备还包括:
处理器;
用于存储所述处理器可执行指令的存储器;
所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述权利要求1-8中任一所述的图像处理方法。
11.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1-8中任一所述的图像处理方法。
CN202210381860.9A 2022-04-12 2022-04-12 图像处理方法、装置、设备、系统及介质 Pending CN115065868A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210381860.9A CN115065868A (zh) 2022-04-12 2022-04-12 图像处理方法、装置、设备、系统及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210381860.9A CN115065868A (zh) 2022-04-12 2022-04-12 图像处理方法、装置、设备、系统及介质

Publications (1)

Publication Number Publication Date
CN115065868A true CN115065868A (zh) 2022-09-16

Family

ID=83196547

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210381860.9A Pending CN115065868A (zh) 2022-04-12 2022-04-12 图像处理方法、装置、设备、系统及介质

Country Status (1)

Country Link
CN (1) CN115065868A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100149304A1 (en) * 2008-12-16 2010-06-17 Quanta Computer, Inc. Image Capturing Device and Image Delivery Method
CN103702020A (zh) * 2013-12-18 2014-04-02 大连维德集成电路有限公司 线阵压缩摄像机
CN106027884A (zh) * 2016-05-17 2016-10-12 福建星网锐捷通讯股份有限公司 一种android设备使用USB摄像头的方法及系统
CN106851317A (zh) * 2017-02-15 2017-06-13 福建时迅信息科技有限公司 一种提高图像数据传输速度的方法和系统
CN107888953A (zh) * 2016-09-29 2018-04-06 上海禾鸟电子科技有限公司 一种新型直播系统的实现方法
CN108206913A (zh) * 2017-07-17 2018-06-26 北京市商汤科技开发有限公司 一种图像采集方法、装置、嵌入式系统和存储介质
CN109040786A (zh) * 2018-09-03 2018-12-18 锐捷网络股份有限公司 摄像头数据的传输方法、装置、系统及存储介质
WO2021179804A1 (zh) * 2020-03-11 2021-09-16 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、存储介质与电子设备
WO2022007893A1 (zh) * 2020-07-10 2022-01-13 华为技术有限公司 一种拍照方法及电子设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100149304A1 (en) * 2008-12-16 2010-06-17 Quanta Computer, Inc. Image Capturing Device and Image Delivery Method
CN103702020A (zh) * 2013-12-18 2014-04-02 大连维德集成电路有限公司 线阵压缩摄像机
CN106027884A (zh) * 2016-05-17 2016-10-12 福建星网锐捷通讯股份有限公司 一种android设备使用USB摄像头的方法及系统
CN107888953A (zh) * 2016-09-29 2018-04-06 上海禾鸟电子科技有限公司 一种新型直播系统的实现方法
CN106851317A (zh) * 2017-02-15 2017-06-13 福建时迅信息科技有限公司 一种提高图像数据传输速度的方法和系统
CN108206913A (zh) * 2017-07-17 2018-06-26 北京市商汤科技开发有限公司 一种图像采集方法、装置、嵌入式系统和存储介质
CN109040786A (zh) * 2018-09-03 2018-12-18 锐捷网络股份有限公司 摄像头数据的传输方法、装置、系统及存储介质
WO2021179804A1 (zh) * 2020-03-11 2021-09-16 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、存储介质与电子设备
WO2022007893A1 (zh) * 2020-07-10 2022-01-13 华为技术有限公司 一种拍照方法及电子设备

Similar Documents

Publication Publication Date Title
US11200426B2 (en) Video frame extraction method and apparatus, computer-readable medium
US9300754B2 (en) Information processing system, information processing apparatus, information processing method, and program
US8929459B2 (en) Systems and methods utilizing efficient video compression techniques for browsing of static image data
US20140082052A1 (en) Data redirection system and method for providing data redirection service
KR101698951B1 (ko) 복수의 시각적 요소를 가지는 스크린을 공유하는 시스템, 장치, 및 방법
WO2021197157A1 (zh) 视频流的处理方法、装置、电子设备及计算机可读介质
CN112261377B (zh) web版监控视频播放方法、电子设备及存储介质
CN104918123A (zh) 用于运动视频回放的方法和系统
CN112601096A (zh) 视频解码方法、装置、设备及可读存储介质
CN113225585A (zh) 一种视频清晰度的切换方法、装置、电子设备以及存储介质
US20170134454A1 (en) System for cloud streaming service, method for still image-based cloud streaming service and apparatus therefor
CN112291483B (zh) 视频推送方法及系统、电子设备及可读存储介质
CN115065868A (zh) 图像处理方法、装置、设备、系统及介质
CN112468763A (zh) 会议电视的视频传输和显示方法、装置、设备及存储介质
CN111093091A (zh) 视频处理方法、服务器及系统
CN111970573A (zh) 云游戏方法和系统
CN105578008A (zh) 一种基于android终端提高USB2.0摄像头高分辨率高帧率的方法
CN115600024A (zh) 一种数据播放方法、装置、存储介质及电子设备
US10547878B2 (en) Hybrid transmission protocol
US20050212784A1 (en) Liquid crystal display system with a storage capability
CN111147928A (zh) 视频处理方法、服务器、终端及系统
CN110798700B (zh) 视频处理方法、视频处理装置、存储介质与电子设备
CN111080728A (zh) 一种贴图处理方法、装置、设备及存储介质
CN110572424A (zh) 设备控制方法、装置、电子设备及存储介质
CN110876069A (zh) 视频截图的获取方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination