CN112911387A - 处理方法及处理装置 - Google Patents

处理方法及处理装置 Download PDF

Info

Publication number
CN112911387A
CN112911387A CN202110128583.6A CN202110128583A CN112911387A CN 112911387 A CN112911387 A CN 112911387A CN 202110128583 A CN202110128583 A CN 202110128583A CN 112911387 A CN112911387 A CN 112911387A
Authority
CN
China
Prior art keywords
audio
stream signal
image content
video stream
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110128583.6A
Other languages
English (en)
Inventor
宋祎斐
王惠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN202110128583.6A priority Critical patent/CN112911387A/zh
Publication of CN112911387A publication Critical patent/CN112911387A/zh
Priority to US17/552,440 priority patent/US20220247891A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H04N5/06—Generation of synchronising signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425—Monitoring of client processing errors or hardware failure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例提供了一种处理方法及处理装置，应用于电子设备，所述电子设备包括显示屏；所述处理方法包括：通过第一接口获取输入信号，所述输入信号至少包括视频流信号；通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容；通过所述显示屏显示最终的图像内容。通过本申请实施例提出的处理方法及处理装置，可以实现对外部输入信号中的视频流信号无缝输出，同时无需生产额外的芯片来处理视频流信号，通过虚拟摄像头预览的方式即可获取视频流信号中的图像内容，耗费成本低，对各种来源的视频信号的适应性好，提升了用户体验。

Description

处理方法及处理装置
技术领域
本申请涉及显示处理技术领域，特别涉及一种处理方法及处理装置。
背景技术
随着显示处理技术的发展及用户需求的多样性，电子设备例如电视作为显示器，可以用于输出从外部的源设备接入的视频流信号。但是电视的体积较大，不便于携带。平板的尺寸大小合适，便于携带，但是，应用平板作为显示屏输出外部的源设备接入的视频流信号时，需为该平板增加处理该视频流信号的芯片，生成成本高。
发明内容
有鉴于现有技术中存在的上述问题，本申请提供了一种处理方法及处理装置，本申请实施例采用的技术方案如下：
一方面，本申请实施例提出了一种处理方法，应用于电子设备，所述电子设备包括显示屏；所述处理方法包括：
通过第一接口获取输入信号，所述输入信号至少包括视频流信号；
通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容；
通过所述显示屏显示最终的图像内容。
一些实施例中，所述通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容，包括：
调用所述虚拟摄像头，针对所述视频流信号启用预览以获取所述图像内容。
一些实施例中，所述调用所述虚拟摄像头，包括：
获取所述虚拟摄像头的接口信息，通过所述接口信息开启所述虚拟摄像头并调整所述虚拟摄像头的参数信息，以接收所述视频流信号。
一些实施例中，所述通过第一接口获取输入信号，所述输入信号至少包括视频流信号，包括：
通过所述第一接口获取包含视频流信号和音频流信号的输入信号；
所述方法还包括：
对所述视频流信号和音频流信号进行匹配处理；
在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频。
一些实施例中，所述对所述视频流信号和音频流信号进行匹配处理，包括：
分别获取视频流信号的视频帧，以及音频流信号的音频帧；
以时间戳分别标记所述视频帧和音频帧。
一些实施例中，所述以时间戳分别标记所述视频帧和音频帧，包括：
以第一时间戳标记所述视频帧的每一帧和所述音频帧的每一帧；
或者
以第二时间戳标记所述视频帧的部分帧和所述音频帧的部分帧。
一些实施例中，所述在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频，包括：
基于每一帧上所标记的第一时间戳，同步显示所述图像内容和输出音频；或者
基于部分帧上所标记的第二时间戳，同步显示该帧作为起始帧的图像内容和输出音频。
一些实施例中，所述在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频,包括：
根据相对时间戳调整图像内容和与其对应的音频信息的输出时间和输出顺序。
一些实施例中，所述第一接口包括DisplayPort接口。
一些实施例中，所述通过所述显示屏显示最终的图像内容之前，还包括：
基于所述显示屏的设备参数，通过对图像属性信息的处理调整图像幅面变化，以适配于所述显示屏。
另一方面，本申请实施例提出了一种处理装置，包括：
获取单元，配置为通过第一接口获取输入信号，所述输入信号至少包括视频流信号；
图像处理单元，配置为通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容；
显示单元，配置为通过所述显示屏显示最终的图像内容。
通过本申请实施例提出的处理方法及处理装置，可以实现对外部输入信号中的视频流信号无缝输出，同时无需生产额外的芯片来处理视频流信号，通过虚拟摄像头预览的方式即可获取视频流信号中的图像内容，耗费成本低，对各种来源的视频信号的适应性好，提升了用户体验。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例的处理方法的流程图；
图2为本申请实施例的处理装置的结构框图；
图3为本申请实施例提供的电子设备的结构示意图。
具体实施方式
为了使得本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例的附图，对本申请实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例是本申请的一部分实施例，而不是全部的实施例。基于所描述的本申请的实施例，本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
除非另外定义，本申请使用的技术术语或者科学术语应当为本申请所属领域内具有一般技能的人士所理解的通常意义。本申请中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系，当被描述对象的绝对位置改变后，则该相对位置关系也可能相应地改变。
为了保持本申请实施例的以下说明清楚且简明，本申请省略了已知功能和已知部件的详细说明。
本申请实施例提供了一种处理方法，该处理方法应用于设有显示屏的电子设备，电子设备在获取到视频流输入信号时，通过虚拟摄像头预览的方式获取视频流信号中的图像内容，以将所述图像内容显示于显示屏上，从而能通过电子设备无缝切换的播放输入信号对应的图像内容。
图1为本申请实施例的处理方法的流程图，参见图1所示，本申请实施例的处理方法具体包括如下步骤：
S1，通过第一接口获取输入信号，所述输入信号至少包括视频流信号。
本申请中，电子设备的第一接口为显示接口，用于将音频或视频信号从源设备传输到电子设备，常见的接口类型包括但不限于高清多媒体接口(HDMI)、DisplayPort(DP)、或移动工业处理器接口(MIPI)显示器串行接口(DSI)。
本步骤中，电子设备的第一接口通过线缆外接输出信号的源设备时，电子设备通过该第一接口获取到输入信号，具体的，所述输入信号中包括视频流信号，从而可将视频流信号对应的内容输入到电子设备，以通过该电子设备进行播放。
S2，通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容。
本步骤中，电子设备获取到包括视频流信号的输入信号后，通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容。为解析输入信号中的视频流信号以在电子设备上进行播放，要先获取视频流信号中的图像内容，在具体实施时，通过启用虚拟摄像头，将视频流信号的图像数据传输至虚拟摄像头，然后开启虚拟摄像头的预览功能，获取虚拟摄像头所接收的图像内容。
S3，通过所述显示屏显示最终的图像内容。
本步骤中，利用虚拟摄像头预览的方式所获取的图像内容，通过安卓系统(android系统)的图像显示模块组件处理后，可呈现于显示屏上，从而电子设备可以无缝切换地将源设备上的播放内容播放显示于显示屏上。具体实施时，虚拟摄像头预览的方式所获取的图像内容经框架层Framwork组合相关服务后传输至显示模块组件，显示模块组件至少包括：视图View、图层投递者Surface Flinger、框架缓存器frame buffer和液晶显示器驱动LCD Driver，视图View将利用虚拟摄像头预览的方式所获取的图像内容绘制出来，提交给图层投递者Surface Flinger进行合成，合成后的图像数据暂存于框架缓存器framebuffer中，以通过液晶显示器驱动LCD Driver将图像数据刷新至显示屏上，从而在显示屏上呈现出最终的图像内容。
通过本申请实施例提出的处理方法，可以实现对外部输入信号中的视频流信号无缝输出，同时无需生产额外的芯片来处理视频流信号，通过虚拟摄像头预览的方式即可获取视频流信号中的图像内容，耗费成本低，对各种来源的视频信号的适应性好，提升了用户体验。
一些实施例中，所述通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容，包括：调用所述虚拟摄像头，针对所述视频流信号启用预览以获取所述图像内容。本申请中，在具体实施时，电子设备可通过第一接口获取到视频流信号后，经过图像处理芯片将视频流信号中的图像信号转换成能通过相机串行接口摄像头串行接口(Camera SerialInterface，CSI)输出的相应格式的数据信号，以通过移动行业处理器接口(MobileIndustry Processor Interface，MIPI)摄像头串行接口(Camera Serial Interface，CSI)传输所述视频流信号中的图像信息。在采用虚拟摄像头预览的方式获取所述视频流信号中的图像内容前，需预先创建虚拟摄像头组件，该虚拟摄像头组件包括虚拟摄像头、摄像头驱动及硬件抽象层(Hardware Abstraction Layer，HAL)上的摄像头模块。在需通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容，通过HAL层调用虚拟摄像头，在具体的实施例中，可以先获取所述虚拟摄像头的接口信息，通过所述接口信息开启所述虚拟摄像头并调整所述虚拟摄像头的参数信息；在摄像头驱动接收到MIPICSI接口传输的图像内容的具体数据参数后，HAL层接收到摄像头驱动上报的图像内容的相关信息，通过虚拟摄像头的预览功能接收关于视频流信号的图像数据，从而获取到所述视频流信号中的图像内容。
一些实施例中，所述通过第一接口获取输入信号，所述输入信号至少包括视频流信号，包括：通过所述第一接口获取包含视频流信号和音频流信号的输入信号；所述方法还包括：对所述视频流信号和音频流信号进行匹配处理；在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频。本申请中，通过电子设备的第一接口输入的信号中同时包含视频流信号和音频流信号时，为采集该音频流信号，先将从第一接口获取的音频流信号中的音频数据的格式转换为I2S格式，以基于I2S协议将音频数据通过I2S接口输出，经I2S接口传输的音频数据进一步传输到音频处理芯片进行处理，具体的，音频数据经I2S接口传输至I2S驱动，然后传输到Alsa(音频驱动)，Alsa(音频驱动)获取到音频数据后上报至HAL层，在HAL层音频数据经AF(Audio Flinger)合成处理后，通过多媒体服务Media输出相应的音频。在本实施例中，为使输入信号中的视频流信号和音频流信号在输出时能保持同步，需要对所述视频流信号和音频流信号进行匹配处理，从而在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频。
在一些实施例中，所述对所述视频流信号和音频流信号进行匹配处理，包括：分别获取视频流信号的视频帧，以及音频流信号的音频帧；以时间戳分别标记所述视频帧和音频帧。
具体实施时，在采集所述视频流信号时，记录视频流信号中的各视频帧，并采用时间戳标记各视频帧；同样地，在采集所述音频流信号时，记录音频流信号中的各音频帧，同时采用时间戳标记各音频帧。
在本申请的一些实施例中，可通过第一时间戳标记来标记所述视频帧的每一帧和所述音频帧的每一帧。例如，以第一个视频帧的时间戳为起始时间戳，之后再对第二个视频帧、第三个视频帧直至最后一个视频帧进行顺序标记，打上相应的时间戳，从而通过第一时间戳将各视频帧标记起来；同时，采用相同的方法来标记各音频帧，以第一个音频帧的时间戳为起点时间戳，之后对第二个音频帧、第三个音频帧直至最后一个音频帧进行顺序标记，打上相应的时间戳，从而通过第一时间戳将各音频帧标记起来。这样标记完成后，在本申请的一些具体的实施例中，为在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频，可以基于每一帧上所标记的第一时间戳，输出对应的视频帧和音频帧，从而同步显示所述图像内容和输出对应的音频。
在本申请实施例中，还可以通过第二时间戳标记所述视频帧的部分帧和对应的所述音频帧的部分帧。例如，可以以第一个视频帧以外的其他视频帧的时间戳为起始时间戳，之后基于预设的时间间隔，对后续的视频帧进行顺序标记，打上相应的时间戳，以通过第二时间戳将各视频帧标记起来；同时，采用相同的方法标记各音频帧，以与前述其他视频帧对应的音频帧为起始时间戳，之后基于预设的时间间隔，对后续的音频帧进行顺序标记，打上相应的时间戳，以通过第二时间戳将各音频频帧标记起来。这样标记完成后，在本申请的一些具体的实施例中，为在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频，可以基于部分帧上所标记的第二时间戳，同步显示该帧作为起始帧的图像内容和输出音频，输出对应的视频帧和音频帧，从而同步显示所述图像内容和输出对应的音频。
一些实施例中，所述在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频,包括：根据相对时间戳调整图像内容和与其对应的音频信息的输出时间和输出顺序。本实施例中，可基于获取的视频帧为对应的音频帧打上相对时间戳，当然，或者也可以根据获取的音频帧为对应的视频帧打上相对时间戳，这样，在输出图像内容时可以根据相对时间戳调整相应的音频帧的输出时间和输出顺序；或者在音频内容输出时根据相对时间戳调整相应的视频帧所对应的图像内容的输出时间和输出顺序，从而同步显示所述图像内容和其对应的音频。
一些实施例中，所述通过所述显示屏显示最终的图像内容之前，还包括：
基于所述显示屏的设备参数，通过对图像属性信息的处理调整图像幅面变化，以适配于所述显示屏。具体实施中，根据显示屏的尺寸大小，对图像内容的尺寸大小和分辨率进行调整，从而使得输出的图像内容能在所述显示屏上全屏幕显示。
本申请实施例还提供了一种处理装置，参见图2所示，所述处理装置包括：
获取单元10，配置为通过第一接口获取输入信号，所述输入信号至少包括视频流信号。
本步骤中，获取单元10从该第一接口获取到输入信号，具体的，所述输入信号中包括视频流信号，从而可将视频流信号对应的内容输入到获取单元10，以能对所述输入信号进行处理。
图像处理单元20，配置为通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容。
本步骤中，获取单元10获取到包括视频流信号的输入信号后，图像处理单元20通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容。为解析输入信号中的视频流信号，图像处理单元20要先获取视频流信号中的图像内容，在具体实施时，图像处理单元20通过启用虚拟摄像头，将视频流信号的图像数据传输至虚拟摄像头，然后开启虚拟摄像头的预览功能，获取虚拟摄像头所接收的图像内容。
显示单元30，配置为通过所述显示屏显示最终的图像内容。
本步骤中，利用虚拟摄像头预览的方式所获取的图像内容，通过显示单元30的图像显示模块组件处理后，可呈现于显示屏上，从而处理装置可以无缝切换地将源设备上的播放内容播放显示于显示屏上。具体实施时，虚拟摄像头预览的方式所获取的图像内容经框架层Framwork组合相关服务后传输至显示单元30的显示模块组件，显示模块组件至少包括：视图View、图层投递者Surface Flinger、框架缓存器frame buffer和液晶显示器驱动LCD Driver，视图View将利用虚拟摄像头预览的方式所获取的图像内容绘制出来，提交给图层投递者Surface Flinger进行合成，合成后的图像数据暂存于框架缓存器framebuffer中，以通过液晶显示器驱动LCD Driver将图像数据刷新至显示屏上，从而在显示屏上呈现出最终的图像内容。
基于同一发明构思，本申请实施例还提供了一种电子设备，该电子设备的结构示意图可以如图3所示，至少包括存储器901和处理器902，存储器901上存储有计算机程序，处理器902在执行存储器901上的计算机程序时实现本公开任意实施例提供的处理方法。
可选地，本实施例中的具体示例可以参考上述任意实施例中所描述的示例，本实施例在此不再赘述。
此外，尽管已经在本文中描述了示例性实施例，其范围包括任何和所有基于本申请的具有等同元件、修改、省略、组合(例如，各种实施例交叉的方案)、改编或改变的实施例。权利要求书中的元件将被基于权利要求中采用的语言宽泛地解释，并不限于在本说明书中或本申请的实施期间所描述的示例，其示例将被解释为非排他性的。因此，本说明书和示例旨在仅被认为是示例，真正的范围和精神由以下权利要求以及其等同物的全部范围所指示。
以上描述旨在是说明性的而不是限制性的。例如，上述示例(或其一个或更多方案)可以彼此组合使用。例如本领域普通技术人员在阅读上述描述时可以使用其它实施例。另外，在上述具体实施方式中，各种特征可以被分组在一起以简单化本申请。这不应解释为一种不要求保护的公开的特征对于任一权利要求是必要的意图。相反，本申请的主题可以少于特定的公开的实施例的全部特征。从而，以下权利要求书作为示例或实施例在此并入具体实施方式中，其中每个权利要求独立地作为单独的实施例，并且考虑这些实施例可以以各种组合或排列彼此组合。本申请的范围应参照所附权利要求以及这些权利要求赋权的等同形式的全部范围来确定。
以上对本申请多个实施例进行了详细说明，但本申请不限于这些具体的实施例，本领域技术人员在本申请构思的基础上，能够做出多种变型和修改实施例，这些变型和修改都应落入本申请所要求保护的范围之内。

Claims (10)

1.一种处理方法，应用于电子设备，所述电子设备包括显示屏；其中，所述处理方法包括：
通过第一接口获取输入信号，所述输入信号至少包括视频流信号；
通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容；
通过所述显示屏显示最终的图像内容。
2.根据权利要求1所述的方法，其中，所述通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容，包括：
调用所述虚拟摄像头，针对所述视频流信号启用预览以获取所述图像内容。
3.根据权利要求2所述的方法，其中，所述调用所述虚拟摄像头，包括：
获取所述虚拟摄像头的接口信息，通过所述接口信息开启所述虚拟摄像头并调整所述虚拟摄像头的参数信息，以接收所述视频流信号。
4.根据权利要求1所述的方法，其中，
所述通过第一接口获取输入信号，所述输入信号至少包括视频流信号，包括：
通过所述第一接口获取包含视频流信号和音频流信号的输入信号；
所述方法还包括：
对所述视频流信号和音频流信号进行匹配处理；
在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频。
5.根据权利要求4所述的方法，其中，所述对所述视频流信号和音频流信号进行匹配处理，包括：
分别获取视频流信号的视频帧，以及音频流信号的音频帧；
以时间戳分别标记所述视频帧和音频帧。
6.根据权利要求5所述的方法，其中，所述以时间戳分别标记所述视频帧和音频帧，包括：
以第一时间戳标记所述视频帧的每一帧和所述音频帧的每一帧；
或者
以第二时间戳标记所述视频帧的部分帧和所述音频帧的部分帧。
7.根据权利要求6所述的方法，其中，所述在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频，包括：
基于每一帧上所标记的第一时间戳，同步显示所述图像内容和输出音频；
或者
基于部分帧上所标记的第二时间戳，同步显示该帧作为起始帧的图像内容和输出音频。
8.根据权利要求5所述的方法，其中，所述在所述显示屏上显示所述图像内容，且同步地通过音频输出装置输出音频,包括：
根据相对时间戳调整图像内容和与其对应的音频信息的输出时间和输出顺序。
9.根据权利要求1所述的方法，其中，所述通过所述显示屏显示最终的图像内容之前，还包括：
基于所述显示屏的设备参数，通过对图像属性信息的处理调整图像幅面变化，以适配于所述显示屏。
10.一种处理装置，其中，包括：
获取单元，配置为通过第一接口获取输入信号，所述输入信号至少包括视频流信号；
图像处理单元，配置为通过虚拟摄像头预览的方式获取所述视频流信号中的图像内容；
显示单元，配置为通过所述显示屏显示最终的图像内容。
CN202110128583.6A 2021-01-29 2021-01-29 处理方法及处理装置 Pending CN112911387A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110128583.6A CN112911387A (zh) 2021-01-29 2021-01-29 处理方法及处理装置
US17/552,440 US20220247891A1 (en) 2021-01-29 2021-12-16 Processing method and processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110128583.6A CN112911387A (zh) 2021-01-29 2021-01-29 处理方法及处理装置

Publications (1)

Publication Number Publication Date
CN112911387A true CN112911387A (zh) 2021-06-04

Family

ID=76121370

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110128583.6A Pending CN112911387A (zh) 2021-01-29 2021-01-29 处理方法及处理装置

Country Status (2)

Country Link
US (1) US20220247891A1 (zh)
CN (1) CN112911387A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101291303A (zh) * 2008-06-12 2008-10-22 北京中星微电子有限公司 多媒体文件远程浏览方法、系统和终端
US20130223812A1 (en) * 2012-02-26 2013-08-29 Antonio Rossi Streaming video navigation systems and methods
CN108810621A (zh) * 2018-05-25 2018-11-13 青岛海信移动通信技术股份有限公司 一种视频数据的播放方法、装置、移动终端和存储介质
CN111757158A (zh) * 2020-06-29 2020-10-09 北京百度网讯科技有限公司 音视频同步播放方法、装置、设备和存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101535827B1 (ko) * 2008-12-05 2015-07-27 삼성전자주식회사 무선 통신 네트워크에서 오디오 및 비디오 동기화 장치 및 방법
JP2011244265A (ja) * 2010-05-19 2011-12-01 Sony Corp 受信装置および受信方法
WO2016176219A1 (en) * 2015-04-26 2016-11-03 Intel Corporation All in one mobile computing device
KR20170091913A (ko) * 2016-02-02 2017-08-10 삼성전자주식회사 영상 서비스 제공 방법 및 장치
KR102664723B1 (ko) * 2019-11-01 2024-05-09 삼성전자주식회사 프리뷰를 제공하는 방법 및 프리뷰를 표시하는 전자 장치
KR20210101089A (ko) * 2020-02-07 2021-08-18 삼성전자주식회사 전자 장치의 디스플레이의 열화를 감소시키는 방법 및 그 방법을 적용한 폴더블 전자 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101291303A (zh) * 2008-06-12 2008-10-22 北京中星微电子有限公司 多媒体文件远程浏览方法、系统和终端
US20130223812A1 (en) * 2012-02-26 2013-08-29 Antonio Rossi Streaming video navigation systems and methods
CN108810621A (zh) * 2018-05-25 2018-11-13 青岛海信移动通信技术股份有限公司 一种视频数据的播放方法、装置、移动终端和存储介质
CN111757158A (zh) * 2020-06-29 2020-10-09 北京百度网讯科技有限公司 音视频同步播放方法、装置、设备和存储介质

Also Published As

Publication number Publication date
US20220247891A1 (en) 2022-08-04

Similar Documents

Publication Publication Date Title
TWI595786B (zh) 基於時間戳記的音訊與視訊處理方法及其系統
CN102036044B (zh) 发送器、发送方法、接收器和接收方法
US7626637B2 (en) Method and apparatus for capturing full-screen frames
US20140300810A1 (en) Handheld Device and Method for Displaying Synchronously with TV Set
CN111107411B (zh) 一种分布式跨节点视频同步方法及系统
CN112217960A (zh) 一种多屏播放画面同步显示的方法
CN109831662A (zh) Ar眼镜屏幕的实时画面投射方法、装置及控制器和介质
CN110798682B (zh) 一种延时测试系统
JP2004080327A (ja) 画像処理装置および画像処理方法、記録媒体、並びにプログラム
CN112911387A (zh) 处理方法及处理装置
JP2003219372A (ja) データ放送受信再生装置、その制御方法、データ放送システム、データ放送装置、データ放送ショッピングにおける商品表示方法、及び制御プログラム
CN110798699A (zh) 视频直播方法及装置
EP1705558A2 (en) Method and apparatus for capturing full-screen frames
CN107340983B (zh) 一种电子设备双显示方法、装置及电子设备
EP1079595A3 (en) Reception apparatus and picture data processing method
WO2006098038A1 (ja) 画像処理装置
CN103139510A (zh) 一种电视画面分屏扩展系统
JP2002232815A (ja) ビデオプリントシステムおよび情報配信システムならびに受信装置
CN102111571B (zh) 一种字幕图元播出方法及装置
JP2003224783A (ja) データ放送受信再生装置、その制御方法、データ放送システム、放送データ送信装置、データ放送ショッピングにおける商品表示方法、及び制御プログラム
JPH11275484A (ja) 画像表示装置及び方法、並びに、画像送信装置及び方法
JP2014041455A (ja) 画像処理装置、画像処理方法、及びプログラム
US7233366B2 (en) Method and apparatus for sending and receiving and for encoding and decoding a telop image
CN114189730B (zh) 一种视频录像方法、视频回放方法及装置
CN115640248A (zh) 一种可配置视频图像处理的采集卡及其视频图像处理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210604