CN110708591B - 一种图像处理方法、装置及电子设备 - Google Patents

一种图像处理方法、装置及电子设备 Download PDF

Info

Publication number
CN110708591B
CN110708591B CN201810752312.6A CN201810752312A CN110708591B CN 110708591 B CN110708591 B CN 110708591B CN 201810752312 A CN201810752312 A CN 201810752312A CN 110708591 B CN110708591 B CN 110708591B
Authority
CN
China
Prior art keywords
window
rendering
function
video data
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810752312.6A
Other languages
English (en)
Other versions
CN110708591A (zh
Inventor
朱珍
方利民
杨欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision System Technology Co Ltd
Original Assignee
Hangzhou Hikvision System Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision System Technology Co Ltd filed Critical Hangzhou Hikvision System Technology Co Ltd
Priority to CN201810752312.6A priority Critical patent/CN110708591B/zh
Publication of CN110708591A publication Critical patent/CN110708591A/zh
Application granted granted Critical
Publication of CN110708591B publication Critical patent/CN110708591B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请提供一种图像处理方法及装置，可以通过收到渲染消息时，获取解码后的视频数据；基于第一窗口对所述解码后的视频数据进行渲染，得到视频数据对应的视频图像；在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，自定义信息包括自定义内容、窗口位置和预设透明度，第二窗口是第一窗口的子窗口，第二窗口的背景透明度为预设透明度，第二窗口的窗口内容为根据自定义内容进行绘制得到；在第一窗口中显示视频图像，以及在该窗口位置对应的区域显示第二窗口。因此可以实现在视频图像上叠加复杂的自定义信息，并且不会影响第一窗口的运行，增强视频画面的操作体验。

Description

一种图像处理方法、装置及电子设备
技术领域
本申请涉及视频解码、图像处理技术领域，尤其涉及一种图像处理方法、装置及电子设备。
背景技术
播放库是一种可以把网络视频数据解码和显示的工具，目前绝大多数安防视频厂商都有自己的播放库，以便于用户对视频图像进行二次开发。通常播放库收到网传的经过压缩编码的视频数据后，先通过视频解码技术(如H264等)，把压缩编码的视频数据解码还原为YUV格式的视频数据，再把解码之后的YUV格式的视频数据通过渲染转化为RGB24格式的视频数据并显示出来。
通常用户可以利用播放库中的画图回调函数对播放库渲染出来的视频数据仅简单的自定义信息的叠加。但是无法实现对较为复杂的自定义信息进行叠加，例如按钮或者代码等，并且由于该方案需在画图同时进行回调处理，会导致处理时间较长，容易产生卡顿，影响视频的显示效率和效果。
发明内容
有鉴于此，为了解决现有技术中叠加自定义信息造成卡顿影响显示效果的问题，本申请提供一种图像处理方法、装置及电子设备，以实现在视频图像上叠加复杂的自定义信息并保证视频的播放顺畅。
具体地，本申请是通过如下技术方案实现的：
根据本申请实施例的第一方面，提供一种图像处理方法，所述方法包括：
当收到渲染消息时，获取解码后的视频数据；
基于第一窗口对所述解码后的视频数据进行渲染，得到所述视频数据对应的视频图像；
在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，所述自定义信息包括自定义内容、窗口位置和预设透明度，所述第二窗口是第一窗口的子窗口，所述第二窗口的背景透明度为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到；
在第一窗口中显示所述视频图像，以及在所述窗口位置对应的区域显示所述第二窗口。
根据本申请实施例的第二方面，提供一种图像处理装置，所述装置包括：
获取单元，用于当收到渲染消息时，获取解码后的视频数据；
渲染单元，用于基于第一窗口对所述解码后的视频数据进行渲染，得到所述视频数据对应的视频图像；
绘制单元，用于在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，所述自定义信息包括自定义内容、窗口位置和预设透明度，所述第二窗口是第一窗口的子窗口，所述第二窗口的背景透明度为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到；
显示单元，用于在第一窗口中显示所述视频图像，以及在所述窗口位置对应的区域显示所述第二窗口。
根据本申请实施例的第三方面，提供一种电子设备，包括处理器、通信接口、存储器和通信总线；
其中，所述处理器、通信接口、存储器通过所述通信总线进行相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行所述存储器上所存放的计算机程序，所述处理器执行所述计算机程序时实现上述图像处理方法的步骤。
由上述实施例可见，本申请可以通过收到渲染消息时，获取解码后的视频数据；基于第一窗口对解码后的视频数据进行渲染，得到视频数据对应的视频图像；在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，自定义信息包括自定义内容、窗口位置和预设透明度，第二窗口是第一窗口的子窗口，第二窗口的背景透明度为预设透明度，第二窗口的窗口内容为根据自定义内容进行绘制得到；在第一窗口中显示视频图像，以及在该窗口位置对应的区域显示第二窗口。本申请通过将第二窗口以子窗口形式叠加到第一窗口上，使根据自定义信息绘制的第二窗口可以叠加到第一窗口的视频图像上，因此可以实现在视频图像上叠加复杂的自定义信息，并且不会影响第一窗口的运行，由于子窗口支持随父窗口位置变化而变化，无需开发人员在做额外的计算工作量，同时也不会对内存资源造成浪费，从而可以提高视频播放效率，保证视频播放顺畅，并且使用户能够在视频画面上叠加任意自定义信息，增强视频画面的操作体验。
附图说明
图1为本申请示例性的一种窗口叠加示意图；
图2为本申请示例性的一种图像处理方法的实施例流程图；
图3a为本申请示例性的一种图像处理方法的方案示意图；
图3b为本申请示例性的窗口叠加及自定义信息显示的示意图；
图4为本申请图像处理装置的一个实施例框图；
图5为本申请一种电子设备的一个实施例框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为了在视频上叠加复杂的自定义信息，可以直接在视频窗口上叠加一个窗口用于呈现自定义信息，如图1所示。图中101是视频播放窗口，102是自定义信息窗口。对应的工作流程大致如下：
先将101窗口句柄给播放库，播放库通过101窗口对视频数据进行解码，再进行视频图像渲染，并在102窗口进行自定义绘图。但是由于101窗口的渲染操作和102窗口的绘制操作是分开进行的，并且101窗口的渲染频率远远高于102窗口的绘制频率，因此会导致101窗口渲染的视频画面覆盖102自定义窗口内容，并且102窗口刷新时由于101窗口在高速的进行渲染，因此102窗口会出现闪烁。
如果把自定义的102窗口设置为一个悬浮窗口叠加到101窗口上，虽然101窗口的视频渲染和102窗口的自定义绘制可以互不影响，但是由于悬浮窗口在windows操作系统下的属性一般是window属性，而具备window属性的102窗口会占用更大的内存，而且悬浮窗口不会随着101窗口的移动而移动，因此需要用户在源程序中控制悬浮窗口的显示、隐藏、移动等与业务无关操作，导致操作较为复杂，降低了用户的操作效率，影响用户的操作体验。
为了解决上述技术问题，本申请提供一种图像处理方法、装置及终端，可以通过收到渲染消息时，获取解码后的视频数据；基于第一窗口对解码后的视频数据进行渲染，得到视频数据对应的视频图像；在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，自定义信息包括自定义内容、窗口位置和预设透明度，第二窗口是第一窗口的子窗口，第二窗口的背景透明度为预设透明度，第二窗口的窗口内容为根据自定义内容进行绘制得到；在第一窗口中显示视频图像，以及在该窗口位置对应的区域显示第二窗口。本申请通过将第二窗口以子窗口形式叠加到第一窗口上，使根据自定义信息绘制的第二窗口可以叠加到第一窗口的视频图像上，因此可以实现在视频图像上叠加复杂的自定义信息，并且不会影响第一窗口的运行，由于子窗口支持随父窗口位置变化而变化，无需开发人员在做额外的计算工作量，同时也不会对内存资源造成浪费，从而可以提高视频播放效率，保证视频播放顺畅，并且使用户能够在视频画面上叠加任意自定义信息，增强视频画面的操作体验。
如下，示出下述实施例对本申请提供的图像处理方法进行说明。
请参见图2，为本申请示例性的一种图像处理方法的实施例流程图，该方法包括以下步骤：
步骤201、当收到渲染消息时，获取解码后的视频数据；
在本实施例中，本申请对原有的播放库的功能进行改变，并新增了用于实现本申请方案的图像处理模块，如图3a所示，其中该图像处理模块与播放库均为逻辑结构，具体实现形式不限定。
本申请的播放库可以将原始码流数据解码为YUV格式的视频数据。其中，原始码流数据，指播放库的输入数据，数据源可以是经过网络传输过来的码流数据或者本地录像文件，这些数据是经过编码压缩处理后的。本申请可以将播放库解码后的视频数据回调到本申请的图像处理模块。网络可能存在波动，作为一种实施例，播放库将解码后的视频数据进行缓存，再从该缓存中获取视频数据回调到图像处理模块。通过缓存可以保证视频的流畅性。反之如果不做数据缓存，则解码一帧回调一帧，若网络有波动时视频画面会时快时慢。播放库将经解码的视频数据回调到图像处理模块后，图像处理模块可以根据当前回调的视频数据的图像宽度、高度等信息为该视频数据分配数据存储区，并把回调的该帧视频数据复制到该数据存储区。然后图像处理模块可以进行渲染准备，具体是对渲染图像之前的一些参数进行初始化。当图像处理模块收到渲染消息时，可以根据预先设置的渲染消息和渲染函数的对应关系，调用对应的渲染函数；然后获取回调到数据存储区的解码后的视频数据，作为渲染函数的输入数据。
步骤202、基于第一窗口对解码后的视频数据进行渲染，得到视频数据对应的视频图像；
在本实施例中，图像处理模块基于第一窗口对解码后的视频数据进行渲染，具体为通过使用渲染函数将解码后的视频数据中的颜色分量(例如YUV分量)分别渲染到第一窗口中，从而还原视频数据对应的视频图像。
步骤203、在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，所述自定义信息包括自定义内容、窗口位置和预设透明度，所述第二窗口是第一窗口的子窗口，所述第二窗口的背景透明度为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到；
在本实施例中，第一窗口相当于图1中的视频窗口101，用于显示视频图像，本申请创建了第一窗口的子窗口，即第二窗口，该第二窗口为自定义窗口，用于提供自定义内容的显示区域。
图像处理模块在第一窗口渲染完成时，可以对第一窗口的子窗口进行绘制，由于第二窗口为第一窗口的子窗口，图像处理模块可以获取第二窗口对应的预设的自定义信息，根据自定义信息对第二窗口进行绘制。该自定义信息包括自定义内容、窗口位置和预设透明度，其中，自定义内容可以是播放控件、按钮等；窗口位置是第二窗口在第一窗口上的位置；预设透明度是指第二窗口的背景透明度设置为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到。
在一个实施例中，该透明度的范围一般为0-100％，其中0是不透明，100％为全透明，透明度为0则会在第一窗口中显示第二窗口的背景，因此会对第一窗口中的视频图像有所遮挡。本申请中的第二窗口的背景透明度一般会设置为半透明到全透明之间即可实现窗口叠加的效果。其中，将透明度设置为半透明或全透明时实现了在视频图像上层叠加第二窗口但不会遮挡视频图像，例如图3b所示的自定义的播放控制按钮(位于图3b的顶部)，由于图3b中第二窗口的背景设置为全透明，因此能够透过第一窗口的视频图像，并实现自定义内容叠加在视频图像上的效果。
步骤204、在第一窗口中显示所述视频图像，以及在所述窗口位置对应的区域显示所述第二窗口。
在本实施例中，第一窗口中显示还原的视频图像，如图3b所示。其中背景图像则为第一窗口还原的图像，该图像可以为全彩图像，本实施例中暂用灰度图进行示例性表示，实际可以为彩色图像。此外，在第一窗口的上层所述窗口位置对应的区域显示所述第二窗口(位于图3b的顶部)，由于该第二窗口的背景为预设透明度(在图3b中第二窗口的背景透明度为全透明)，因此第二窗口以及第二窗口中的自定义内容不会遮挡第一窗口中的视频图像。
作为一个实施例，图像处理模块还可以获取视频数据中的功能数据，解析所述功能数据得到功能信息，基于第一窗口将所述功能信息渲染到所述视频图像上，得到叠加功能信息图像的视频图像。所谓功能可以包括提供给用户的附加功能，例如目标定位功能等，目标移动轨迹显示功能等等。图像处理模块可以通过分析视频数据得到功能信息，例如目标定位框，或者移动轨迹图标等。然后基于第一窗口将上述功能信息渲染到视频图像上，得到叠加功能信息图像的视频图像，从而可以使本申请为视频图像的叠加增添更多功能和视觉体验。
相对于现有技术中，播放库对原始码流数据进行解码、渲染、回调等操作实现视频图像中叠加自定义信息的过程，本申请可以对播放库改造，仅保留其解码功能，使图像处理模块进行回调数据缓存，并进行渲染、自定义信息绘制功能，由于图像处理模块中的第一窗口的渲染过程和第二窗口的绘制过程都是根据渲染消息进行触发的，因此保证了视频图像和自定义信息能够同时显示，避免出现窗口闪烁的问题。
本申请通过将子窗口绘制和父窗口中的图像渲染放在同一个渲染消息处理过程中完成，并且由于子窗口支持随父窗口位置变化而变化，因此可以实现第一窗口与第二窗口的同步绘制效果，并且无需开发人员在做额外的计算工作量，同时避免对内存资源的浪费。
由于本申请将自定义窗口以子窗口形式叠加到视频窗口上，使得在视频画面上叠加复杂交互变得简单，开发者只需按照业务需求开发一套自定义交互内容的窗口，并按照所述方案作为子窗口叠加到视频窗口即可，从而使自定义窗口的消息响应不受影响，并可以在消息响应中操作视频画面，同时又不需要做额外其他控制。
随着前端相机，后端存储智能化程度的提高，传统为了实现某个配置目的，从视频画面跳转到另外一个页面配置的操作逐渐会被新的交互方式替代，未来呈现给用户的视频画面将允许更多的操作，本申请能够在视频画面上叠加任意自定义信息，从而可以增强视频画面操作体验。
与前述图像处理方法的实施例相对应，本申请还提供了图像处理装置的实施例。
请参见图4，为本申请图像处理装置的一个实施例框图，该装置40可以包括：
获取单元41，用于当收到渲染消息时，获取解码后的视频数据；
渲染单元42，用于基于第一窗口对所述解码后的视频数据进行渲染，得到所述视频数据对应的视频图像；
绘制单元43，用于在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，所述自定义信息包括自定义内容、窗口位置和预设透明度，所述第二窗口是第一窗口的子窗口，所述第二窗口的背景透明度为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到；
显示单元44，用于在第一窗口中显示所述视频图像，以及在所述窗口位置对应的区域显示所述第二窗口。
作为一个实施例，所述获取单元41，具体用于当收到渲染消息时，根据预先设置的渲染消息和渲染函数的对应关系，调用对应的渲染函数；获取回调到数据存储区的所述解码后的视频数据，作为所述渲染函数的输入数据。
作为一个实施例，所述渲染单元42，具体用于使用所述渲染函数将所述解码后的视频数据中的颜色分量分别渲染到所述第一窗口中，得到所述视频数据对应的视频图像。
作为一个实施例，所述装置还包括：
功能渲染单元45，用于获取视频数据中的功能数据，解析所述功能数据得到功能信息，基于第一窗口将所述功能信息渲染到所述视频图像上，得到叠加功能信息图像的视频图像。
作为一个实施例，所述预设透明度具体为全透明。
由上述实施例可见，本申请可以通过收到渲染消息时，获取解码后的视频数据；基于第一窗口对解码后的视频数据进行渲染，得到视频数据对应的视频图像；在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，自定义信息包括自定义内容、窗口位置和预设透明度，第二窗口是第一窗口的子窗口，第二窗口的背景透明度为预设透明度，第二窗口的窗口内容为根据自定义内容进行绘制得到；在第一窗口中显示视频图像，以及在该窗口位置对应的区域显示第二窗口。本申请通过将第二窗口以子窗口形式叠加到第一窗口上，使根据自定义信息绘制的第二窗口可以叠加到第一窗口的视频图像上，因此可以实现在视频图像上叠加复杂的自定义信息，并且不会影响第一窗口的运行，由于子窗口支持随父窗口位置变化而变化，无需开发人员在做额外的计算工作量，同时也不会对内存资源造成浪费，从而可以提高视频播放效率，保证视频播放顺畅，并且使用户能够在视频画面上叠加任意自定义信息，增强视频画面的操作体验。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
与前述图像处理方法的实施例相对应，本申请还提供了用于执行上述图像处理方法的电子设备的实施例。
作为一个实施例，请参考图5，一种电子设备，包括处理器51、通信接口52、存储器53和通信总线54；
其中，所述处理器51、通信接口52、存储器53通过所述通信总线54进行相互间的通信；
所述存储器53，用于存放计算机程序；
所述处理器51，用于执行所述存储器53上所存放的计算机程序，所述处理51执行所述计算机程序时实现任一所述图像处理方法的步骤。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于电子设备的实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
与前述图像处理方法的实施例相对应，本申请还提供了用于执行上述图像处理方法的计算机可读存储介质的实施例。
作为一个实施例，本申请还包括一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现任一所述图像处理方法的步骤。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例以及计算机可读存储介质实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。

Claims (8)

1.一种图像处理方法，其特征在于，所述方法包括：
当收到渲染消息时，获取解码后的视频数据；
使用渲染函数将所述解码后的视频数据中的颜色分量分别渲染到第一窗口中，得到所述视频数据对应的视频图像；其中，所述渲染函数为预先设置的与渲染消息对应的函数；
在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，所述自定义信息包括自定义内容、窗口位置和预设透明度，所述第二窗口是第一窗口的子窗口，所述第二窗口的背景透明度为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到；
在第一窗口中显示所述视频图像，以及在所述窗口位置对应的区域显示所述第二窗口。
2.根据权利要求1所述的方法，其特征在于，当收到渲染消息时，获取解码后的视频数据，具体为：
当收到渲染消息时，根据预先设置的渲染消息和渲染函数的对应关系，调用对应的渲染函数；
获取回调到数据存储区的所述解码后的视频数据，作为所述渲染函数的输入数据。
3.根据权利要求1所述的方法，其特征在于，在完成视频数据的渲染后，所述方法还包括：
获取视频数据中的功能数据，解析所述功能数据得到功能信息，基于第一窗口将所述功能信息渲染到所述视频图像上，得到叠加功能信息图像的视频图像；
其中，所述功能数据为包含功能信息的数据，所述功能信息为实现目标定位功能或目标移动轨迹显示功能所需的信息。
4.根据权利要求1所述的方法，其特征在于，所述预设透明度具体为全透明。
5.一种图像处理装置，其特征在于，所述装置包括：
获取单元，用于当收到渲染消息时，获取解码后的视频数据；
渲染单元，用于使用渲染函数将所述解码后的视频数据中的颜色分量分别渲染到第一窗口中，得到所述视频数据对应的视频图像；其中，所述渲染函数为预先设置的与渲染消息对应的函数；
绘制单元，用于在完成视频数据的渲染后，根据自定义信息，对第二窗口进行绘制，所述自定义信息包括自定义内容、窗口位置和预设透明度，所述第二窗口是第一窗口的子窗口，所述第二窗口的背景透明度为预设透明度，所述第二窗口的窗口内容为根据自定义内容进行绘制得到；
显示单元，用于在第一窗口中显示所述视频图像，以及在所述窗口位置对应的区域显示所述第二窗口。
6.根据权利要求5所述的装置，其特征在于，
所述获取单元，具体用于当收到渲染消息时，根据预先设置的渲染消息和渲染函数的对应关系，调用对应的渲染函数；获取回调到数据存储区的所述解码后的视频数据，作为所述渲染函数的输入数据。
7.根据权利要求5所述的装置，其特征在于，所述装置还包括：
功能渲染单元，用于获取视频数据中的功能数据，解析所述功能数据得到功能信息，基于第一窗口将所述功能信息渲染到所述视频图像上，得到叠加功能信息图像的视频图像；
其中，所述功能数据为包含功能信息的数据，所述功能信息为实现目标定位功能或目标移动轨迹显示功能所需的信息。
8.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线；
其中，所述处理器、通信接口、存储器通过所述通信总线进行相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行所述存储器上所存放的计算机程序，所述处理器执行所述计算机程序时实现权利要求1-4任一所述图像处理方法的步骤。
CN201810752312.6A 2018-07-10 2018-07-10 一种图像处理方法、装置及电子设备 Active CN110708591B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810752312.6A CN110708591B (zh) 2018-07-10 2018-07-10 一种图像处理方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810752312.6A CN110708591B (zh) 2018-07-10 2018-07-10 一种图像处理方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN110708591A CN110708591A (zh) 2020-01-17
CN110708591B true CN110708591B (zh) 2022-04-26

Family

ID=69192555

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810752312.6A Active CN110708591B (zh) 2018-07-10 2018-07-10 一种图像处理方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN110708591B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114089898A (zh) * 2021-11-23 2022-02-25 国汽智控(北京)科技有限公司 车辆信息的显示方法、装置、设备、存储介质、程序产品
CN115065787A (zh) * 2022-08-18 2022-09-16 芯见(广州)科技有限公司 嵌入式系统视频透明叠加方法、装置和存储介质
CN116112744A (zh) * 2023-02-15 2023-05-12 北京字跳网络技术有限公司 视频处理方法、装置、电子设备及存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101146199A (zh) * 2006-09-13 2008-03-19 索尼株式会社 视频信息处理设备、视频信息处理方法和计算机程序
CN101500125A (zh) * 2008-02-03 2009-08-05 突触计算机系统（上海）有限公司 用户终端上用于在视频显示时提供用户交互的方法及装置
CN101572770A (zh) * 2009-06-18 2009-11-04 中国科学技术大学 一种可用于实时监控的运动检测方法与装置
CN201393268Y (zh) * 2008-11-19 2010-01-27 广东铁将军防盗设备有限公司 倒车辅助装置及其摄像装置
CN102510539A (zh) * 2011-12-02 2012-06-20 深圳市万兴软件有限公司 一种在播放的视频上显示内容的方法和系统
CN102739983A (zh) * 2011-04-11 2012-10-17 腾讯科技（深圳）有限公司 一种实现半透明效果的方法及系统
CN102929654A (zh) * 2012-09-21 2013-02-13 福建天晴数码有限公司 一种在游戏中内嵌视频播放的方法
CN103780928A (zh) * 2012-10-26 2014-05-07 中国电信股份有限公司 视频信息中加入位置信息的方法、系统与视频管理服务器
CN104301788A (zh) * 2014-09-26 2015-01-21 北京奇艺世纪科技有限公司 一种提供视频交互的方法和装置
CN107679497A (zh) * 2017-10-11 2018-02-09 齐鲁工业大学 视频面部贴图特效处理方法及生成系统
CN108198232A (zh) * 2017-12-14 2018-06-22 浙江大华技术股份有限公司 一种轨迹框绘制的方法及设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3906031B2 (ja) * 2001-01-31 2007-04-18 株式会社東芝 動画像再生装置及び動画像再生処理をコンピュータに実行させるためのプログラム
US8890874B2 (en) * 2007-12-14 2014-11-18 Microsoft Corporation Changing visual content communication

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101146199A (zh) * 2006-09-13 2008-03-19 索尼株式会社 视频信息处理设备、视频信息处理方法和计算机程序
CN101500125A (zh) * 2008-02-03 2009-08-05 突触计算机系统（上海）有限公司 用户终端上用于在视频显示时提供用户交互的方法及装置
CN201393268Y (zh) * 2008-11-19 2010-01-27 广东铁将军防盗设备有限公司 倒车辅助装置及其摄像装置
CN101572770A (zh) * 2009-06-18 2009-11-04 中国科学技术大学 一种可用于实时监控的运动检测方法与装置
CN102739983A (zh) * 2011-04-11 2012-10-17 腾讯科技（深圳）有限公司 一种实现半透明效果的方法及系统
CN102510539A (zh) * 2011-12-02 2012-06-20 深圳市万兴软件有限公司 一种在播放的视频上显示内容的方法和系统
CN102929654A (zh) * 2012-09-21 2013-02-13 福建天晴数码有限公司 一种在游戏中内嵌视频播放的方法
CN103780928A (zh) * 2012-10-26 2014-05-07 中国电信股份有限公司 视频信息中加入位置信息的方法、系统与视频管理服务器
CN104301788A (zh) * 2014-09-26 2015-01-21 北京奇艺世纪科技有限公司 一种提供视频交互的方法和装置
CN107679497A (zh) * 2017-10-11 2018-02-09 齐鲁工业大学 视频面部贴图特效处理方法及生成系统
CN108198232A (zh) * 2017-12-14 2018-06-22 浙江大华技术股份有限公司 一种轨迹框绘制的方法及设备

Also Published As

Publication number Publication date
CN110708591A (zh) 2020-01-17

Similar Documents

Publication Publication Date Title
CN109246464B (zh) 用户界面显示方法、装置、终端及存储介质
CN102780893B (zh) 图像处理设备及其控制方法
CN110708591B (zh) 一种图像处理方法、装置及电子设备
CN110505471B (zh) 一种头戴显示设备及其屏幕采集方法、装置
KR20120138187A (ko) 인쇄매체 기반 혼합현실 구현 장치 및 방법
CN109445891B (zh) 画面组态及展示方法、装置、计算机可读存储介质
CN104615418B (zh) 一种可滑动播放窗口的实现方法和装置
CN107924690A (zh) 用于促进扩展场景中的导航的方法、装置和系统
EP2549764A1 (en) Input apparatus of display apparatus, display system and control method thereof
CN113645494B (zh) 一种屏幕融合方法、显示设备、终端设备及服务器
CN113891167B (zh) 投屏方法和电子设备
EP2547113A1 (en) 3D image processing apparatus, implementation method thereof and computer-readable storage medium thereof
CN113613067B (zh) 视频处理方法、装置、设备及存储介质
KR20140040875A (ko) 카툰 제공 시스템, 카툰 제공 장치 및 카툰 제공 방법
CN113082696A (zh) 显示控制方法、装置和电子设备
US20170185422A1 (en) Method and system for generating and controlling composite user interface control
CN109525880A (zh) 视频数据的合成方法、装置、设备和存储介质
CN107197356B (zh) 一种在电视中显示屏幕菜单的方法、装置及电视
CN112672131A (zh) 一种全景视频图像显示方法及显示设备
CN113852757B (zh) 视频处理方法、装置、设备和存储介质
CN108255562B (zh) 页面跳转方法和装置
CN109587561A (zh) 视频处理方法、装置、电子设备及存储介质
CN111314777B (zh) 视频生成方法及装置、计算机存储介质、电子设备
CN116342880A (zh) 对视频进行关键内容分割的方法及电子设备
CN115661418A (zh) 混合现实显示装置、方法、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant