CN108737881A - 一种信号源实时动态预览方法及系统 - Google Patents

一种信号源实时动态预览方法及系统 Download PDF

Info

Publication number
CN108737881A
CN108737881A CN201810394692.0A CN201810394692A CN108737881A CN 108737881 A CN108737881 A CN 108737881A CN 201810394692 A CN201810394692 A CN 201810394692A CN 108737881 A CN108737881 A CN 108737881A
Authority
CN
China
Prior art keywords
signal source
content
user interface
previewing
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810394692.0A
Other languages
English (en)
Inventor
吕天麒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MStar Semiconductor Inc Taiwan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MStar Semiconductor Inc Taiwan filed Critical MStar Semiconductor Inc Taiwan
Priority to CN201810394692.0A priority Critical patent/CN108737881A/zh
Publication of CN108737881A publication Critical patent/CN108737881A/zh
Priority to TW107140880A priority patent/TW201946444A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开一种信号源实时动态预览方法和系统，包括：获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的指令，并发出该预览指令和第一信号源输出指令；接收第一信号源输出指令并发送相应的第一信号源的内容；接收该预览指令，并响应该指令获取至少一个第二信号源的内容；将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，用以在显示第一信号源的内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容，此发明可实现第一和第二信号源的内容与用户界面相融合，得到稳定动态的连续画面，实现各个信号源的实时动态预览，提供一种新的节目预览及播放模式。

Description

一种信号源实时动态预览方法及系统
技术领域
本发明涉及电视机技术领域，尤其涉及一种信号源实时动态预览方法及系统。
背景技术
随着智能终端的不断发展，使用智能电视已经成为一种趋势。目前市场上已有的智能电视，虽然有些能做到当前画面信号源的预览显示，但其本质还是采用传统的静态贴图，并非实时动态的，而且无法做到所有信号源的实时动态预览功能。
传统的画中画功能可实现多画面的播放。比如在有线电视上加上画中画播放器，可使得用户在观看某一频道节目时，从电视屏幕某一位置的小窗口观看到其他频道的节目，有选择地收看自己喜爱的节目。传统的画中画播放器包括一个时分复用控制器和一个画中画处理器组成。主画面可以从某一频道或某一信源获得主画面输入，子画面从另一频道或另一信源获得子画面输入。在某一时刻，画中画子画面循环播放其余各频道或各信源的节目图像。时分复用控制器用来控制该多个频道或多个信源，将主画面和子画面输入到画中画处理器中进行处理，最后得到画中画输出。若使用传统的画中画功能实现多个信号源的实时动态预览功能，需增加画中画处理器这一系列的硬件成本。若需要同时得到更多画面的播放效果，则需要增加多个画中画处理器，其硬件成本更高。因为预览功能并不需要像传统画中画那样做到两个通道同时播放，只是需要实时预览多个信源的当前节目情况，即预览一段时间的视频即可供用户选择，用传统的画中画功能来实现的话可谓大材小用，于是亟需发明一种低成本实现多信号源的实时动态预览功能的方案。
发明内容
本发明的目的在于提供一种信号源实时动态预览方法及系统，旨在解决智能电视无法实时动态预览各个信号源视频图像内容的问题。
为实现上述目的，本发明提供的一个技术方案是：提供一种信号源实时动态预览方法，包括：获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的预览指令，并发出该预览指令和第一信号源输出指令；接收第一信号源输出指令并发送相应的第一信号源的内容；接收该预览指令，并响应该指令获取至少一个第二信号源的内容；以及将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，用以在显示第一信号源的内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。
本发明还提供一个技术方案是：提供一种信号源实时动态预览系统，包括：处理器，用于获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的预览指令，并发出该预览指令和第一信号源输出指令；复用器，与处理器连接，用于在收到第一信号源输出指令时发送相应的第一信号源的内容；响应器，与处理器和复用器相连接，用于接收该预览指令，响应该指令从复用器中获取至少一个第二信号源的内容；以及编辑器，与复用器和响应器相连接，用于将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，以在显示第一信号源内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。
本发明有益效益：区别于现有技术，本发明通过获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的指令，进一步响应指令以获取至少一个第二信号源的内容，然后在主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。通过这种方式，本发明可以在不切换当前信号源的情况下，将各个信号源的内容以用户界面小窗口的形式进行显示，与用户界面相融合，得到稳定动态的连续画面，实现各个信号源的实时动态预览，提供一种新的节目预览及播放模式。
附图说明
图1是是本发明信号源实时动态预览系统实施例一的示意图；
图2是是本发明信号源实时动态预览系统实施例一的响应器13的示意图；
图3是是本发明信号源实时动态预览系统实施例一视频服务进程的示意图；
图4是本发明信号源实时动态预览方法实施例一的流程图；
图5是本发明信号源实时动态预览方法实施例一中步骤S43的具体流程图；
图6是本发明信号源实时动态预览方法实施例一中步骤S51具体流程图；
图7是本发明信号源实时动态预览方法实施例一中步骤S54的具体流程图；
图8是本发明信号源实时动态预览方法实施例一中步骤S705的具体流程图；
图9是本发明信号源实时动态预览方法实施例一中步骤S802的具体流程图。
具体实施方式
为使本领域的技术人员更好地理解本发明的技术方案，下面结合附图和具体实施方式对本发明所提供的一种信号源实时动态预览方法及系统做进一步详细描述。
如图1所示，是本发明信号源实时动态预览系统实施例一的示意图，该系统用来输入多个信源，包括第一信号源和至少一个第二信号源，该系统包括处理器11，复用器12，响应器13，编辑器14以及与编辑器14连接的屏幕15，其中屏幕15可以设置在该系统内或者系统外，本实施例中将屏幕15设置在系统中以示说明，但是本领域的技术人员可知此处不能理解为限制本发明的专利保护范围。
处理器11，用来获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的预览指令，并发出该预览指令和第一信号源输出指令。
具体地，主画面窗口显示播放第一信号源的视频图像内容，主画面窗口通常是指用户当前观看的频道，在当前观看的频道上接收预览至少一个第二信号源的内容的指令，使得在不切换当前信号源的情况下，实现预览其他信号源内容的功能，其中第一信号源和/或第二信号源是：模拟电视(Analog Television Limited，ATV)、数字电视(DigitalTelevision，DTV)、高清晰度多媒体接口(High Definition Multimedia Interface，
HDMI)、视频传输接口(Video Graphics Array，VGA)、分量接口(YPBPR)、视频音频接口(Audio/Video，AV)、复合视频广播(Composite Video Broadcast Signal，CVBS)、多媒体中的一种或几种，这些信号源可以是广播信号源、网络信号源、多媒体等。
复用器12，与处理器11相连接，用于在收到处理器11发出的第一信号源输出指令时发送相应的第一信号源的内容。
响应器13，与处理器11和复用器12相连接，用于从处理器11处接收该预览指令，响应该指令从复用器12中获取至少一个第二信号源的内容。
在接收用户通过按键、触摸屏或手势检测系统输入的至少一个第二信号源的内容的预览指令后，响应该指令获取至少一个第二信号源的内容，第二信号源不同于第一信号源。不仅可以是广播信号源的内容，也可以是网络信号源或多媒体的内容。
编辑器14，与复用器12和响应器13相连接，用于将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，用以在显示第一信号源内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。将获取的内容在主画面窗口上以用户界面小窗口的形式显示出来，用户界面不同于传统电视的显示屏窗口，它是依托在智能电视操作系统的人机交互界面，可以在主画面窗口上生成多个用户界面小窗口，使得每一个第二信号源的内容对应显示在一个用户界面小窗口内，或者可选在主画面窗口上生成一个用户界面小窗口，多个第二信号源的内容按某一顺序排列在这个用户小窗口内，以安卓系统的智能电视为例，可选Picture显示控件或自定义显示控件。
多个用户界面小窗口可选同时播放多个第二信号源的内容，或者随着光标焦点在各个用户界面小窗口之间移动，用户界面小窗口随之播放其对应第二信号源的视频图像内容。由于用户界面小窗口是可操作生成的，因此一般来说，有多少个信号源，就可以生成多少个用户界面小窗口，其对硬件条件的要求有限，将各个信号源的内容在用户界面小窗口中显示，从而实现几乎所有信号源的实时动态预览。
屏幕15，与编辑器14相连接，用以在主画面窗口上以用户界面小窗口的形式显示至少一个第二信号源的内容。
具体地，从复用器12中获取的第一信号源的内容，直接通过编辑器14在屏幕上的主画面窗口中进行播放，而至少一个第二信号源的内容是响应器13响应预览指令持续从复用器12中获取的，再传输至编辑器14，在屏幕15上以用户界面小窗口的形式显示出来，可以看出，第一信号源与第二信号源从获取内容后到在屏幕上显示出来，所走的路径不同。在本实施例中，将至少一个第二信号源的内容通过响应器13实时动态地传输至编辑器14内在屏幕上进行显示，不影响当前频道即第一信号源的播放内容，从而实现一种新的节目预览与播放模式。
如图2所示，是本发明信号源实时动态预览系统实施例一的响应器13的示意图。响应器13包括一抓图引擎21、一与之连接的硬件图形引擎22和缓存23。
响应器13从处理器11处接收到该预览指令后，连接视频服务进程、摄像头服务进程以及用户界面进程，抓图引擎21从复用器12中截取第二信号源的视频图像内容，然后将截取的第二信号源的视频图像内容发送至硬件图形引擎22，通过视频服务进程控制硬件图形引擎22将视频图像内容转换成用户界面小窗口需要大小和格式的动态数据。
具体的，抓图引擎21将第二信号源的视频图像内容的某一帧抓取下来，并缩放到指定的大小，接着将数据送入到硬件图形引擎22，硬件图形引擎22将数据按照需要进行转换，并将转换后的动态数据存储到缓存23中。
接着，响应器13执行的视频服务进程首先接收来自摄像头服务进程获取动态数据的请求，然后发送动态数据至摄像头服务进程，经由摄像头服务进程向用户界面进程提供缓存23中的转换后的动态数据，以最终在屏幕15上生成的用户界面小窗口中显示出来稳定连续的实时动态预览数据。这个过程实现将各个信号源视频图像内容转换为稳定连续的实时动态预览数据，并达到比较高的帧率，得到连续动态画面的实时预览。
在其他实施例中，摄像头服务进程可通过其他硬件资源如摄像头硬件资源获取视频图像动态数据，再进行后续操作。
实际应用在如安卓(Android)系统的智能电视时，在系统启动的时候，通常就要将视频服务进程以及摄像头服务进程启动，这样如果上层需要实时动态数据服务，就可以随时向摄像头服务进程发出请求。在本实例中，视频服务进程在开机时加入了Android的default service manger中，而摄像头服务进程在media service中启动。
如图3所示，图3是本发明信号源实时动态预览系统实施例一视频服务进程的示意图。为了使视频服务进程更好的融入到Android系统架构中，本实施例将视频服务进程模拟成一个虚拟摄像头设备，这样视频服务进程不仅可以与Android系统实现无缝衔接，借用摄像头服务进程本身的接口又能提供更加灵活强大的功能，例如动态截屏、视频录制等。用户界面进程也可以灵活的连接其它硬件视频源，例如系统默认的id为0的真实摄像头设备，本领域技术人员可知，本发明也可不连接其他硬件视频，仅利用视频服务进程即成为摄像头服务进程的id为1的虚拟摄像头设备就可实现动态预览的功能，此处与真实摄像头设备相连接仅为另一实施例的示意，不能看作限制本发明的专利保护范围。
如图4所示，是本发明信号源实时动态预览方法实施例一的流程图，该方法包括：
步骤S41:获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的预览指令，并发出该预览指令和第一信号源输出指令；
步骤S42:接收第一信号源输出指令并发送相应的第一信号源的内容；
步骤S43:接收该预览指令，并响应该指令获取至少一个第二信号源的内容；以及
步骤S44:将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，用以在显示第一信号源的内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。
如图5所示，是本发明信号源实时动态预览方法实施例一中步骤S43的具体流程图，具体包括：
步骤S51:在接收到该预览指令后，连接视频服务进程、摄像头服务进程以及用户界面进程，并截取第二信号源的视频图像内容；
步骤S52:经由视频服务进程将视频图像内容转换成用户界面小窗口需要大小和格式的动态数据；
步骤S53:缓存转换后的动态数据；
步骤S54:经由视频服务进程接收来自摄像头服务进程获取动态数据的请求，然后发送动态数据至摄像头服务进程；
步骤S55:经由摄像头服务进程向用户界面进程提供缓存中的转换后的动态数据；以及
步骤S56：经由用户界面进程生成动态数据对应的图像。
本实施例中按照上述方法，固定帧率的动态数据会从视频服务进程不断的送往摄像头服务进程，再从摄像头服务进程送入用户界面进程，用户界面进程生成一帧帧视频图像数据，在主画面窗口上以用户界面小窗口的形式进行显示。
具体的，是将第二信号源的视频图像内容的某一帧抓取下来，并缩放到指定的大小，接着将数据按照需要进行转换，并将转换后的动态数据存储到缓存中，这个过程实现将各个信号源视频图像内容转换为稳定连续的实时动态预览数据，并达到比较高的帧率，得到连续动态画面的实时预览。
步骤S51：在接收到该预览指令后，连接视频服务进程、摄像头服务进程以及用户界面进程，并截取第二信号源的视频图像内容具体流程如图6所示，图6是本发明信号源实时动态预览方法实施例一中步骤S51的具体流程图。首先执行步骤S601:将用户界面进程与摄像头服务进程进行连接，比如：可以通过摄像头客户端服务(Camera client)进行连接，然后执行步骤S602:将摄像头服务进程与视频服务进程进行连接，接著执行步骤S603:判断摄像头服务进程与视频服务进程是否连接成功，若不成功，则执行步骤S604：异常退出；若是，则执行步骤S605:进一步判断视频服务进程是否支持用户界面进程需要的参数，比如图像的大小、帧率等，如果不支持就执行步骤S606:将摄像头服务进程和视频服务进程断开连接，接着执行步骤S604:异常退出；如果支持，那就执行步骤S607：设置回调函数，该回调函数是用于数据发送的回调函数，包括摄像头服务进程的回调函数和用户界面进程的回调函数，并且执行步骤S608：通知视频服务进程，通过视频服务进程控制抓图引擎开启抓图功能，截取第二信号源的视频图像内容，再进行后续操作。只有当用户界面进程主动调用摄像头服务进程的停止(Stop)接口时才会停止动态数据的传送。停止接口中的操作是图6所示步骤的一个相反操作过程。首先会去设置回调函数为空，然后停止视频服务进程的抓图动作，断开跟视频服务进程的连接。
在一实施例中，步骤S54：视频服务进程首先接收来自摄像头服务进程获取动态数据的请求，然后发送动态数据至摄像头服务进程的具体流程如图7所示，图7是本发明信号源实时动态预览方法实施例一中步骤S54的具体流程图，包括：
步骤S701：准备动态数据，等待发送；
视频服务进程接收来自摄像头服务进程获取动态数据的请求，调用抓图引擎接口(API)等待下一帧动态数据，等待发送。如果下一帧动态数据还没准备好，进程就会因为调用此API而睡眠，等数据好了以后，就会被唤醒。
步骤S702：判断视频服务进程的空闲序列中是否有可用的缓存，如果空闲序列中有可用的缓存，则执行步骤S703:将转换后的动态数据复制到可用的缓存，否则，执行步骤S701，重新获取新的动态数据等待发送；
实际应用中，视频服务进程、摄像头服务进程都可以提供线程池(Thread pool)，这样可以支持数据的并发访问，提高性能。视频服务进程、摄像头服务进程可以并发的访问其内的2个缓存序列即空闲序列(Free list)和发送序列(Send list)。对于视频服务进程，它本身控制的抓图引擎和硬件图形引擎可以并发访问其内的2个缓存序列。而视频服务进程、摄像头服务进程的2个缓存序列通常需要用线程锁来保护，以保证在同一个进程内多线程(Thread)的互斥访问。
进程被唤醒后，首先查看空闲序列中是否有缓存可以用，如果有，拿出此缓存，根据用户界面小窗口需要的参数设置，通过硬件图形引擎进行大小和格式转换，将转换后的动态数据输出到该空闲序列的缓存中。如果没有可用的缓存，就忽略此帧，返回步骤S701重新准备下一帧动态数据等待发送。
步骤S704：将包括动态数据的可用的缓存移至视频服务进程的发送序列的末尾，进一步发送至摄像头服务进程。
步骤S55:经由摄像头服务进程向用户界面进程提供缓存中的转换后的动态数据具体流程可参考图8所示，图8是本发明的是本发明信号源实时动态预览方法实施例一中步骤S55的具体流程图，该发送流程包括：
步骤S801：将动态数据复制到用户界面进程的缓存；
本实施例中，摄像头服务进程收到动态数据后，并不去做判断其是否有缓存，直接将该动态数据复制到用户界面进程的缓存中。
但是在其他实施例中，可选摄像头服务进程采用2个缓存序列即空闲序列和发送序列，在收到动态数据后首先判断其空闲序列中是否有缓存，如果有就将动态数据复制到可用的缓存中，然后将复制好动态数据的缓存移进发送序列的末端，调用回调函数将数据发送至用户界面进程的缓存中；如果没有缓存，则说明用户界面进程由于某些原因，例如系统非常繁忙，之前送去的缓存还没有处理完，此时直接忽略这帧数据，等待下一帧。
步骤S802：通知视频服务进程释放复制的动态数据对应的缓存。在将动态数据复制到用户界面进程的缓存后，需要通知视频服务进程释放相应的缓存，为后续不断发送的动态数据提供足够的缓存空间；如果采用2个缓存序列，在将动态数据复制到可用的缓存中后，通知视频服务进程释放相应的缓存，具体释放过程如图9所示，图9是本发明信号源实时动态预览方法实施例一中步骤S802的具体流程图，包括：
步骤S901:从视频服务进程的发送序列中拿出第一个缓存，判断是否是用户界面进程请求要释放的缓存；若是，则执行步骤S902:将发送序列的第一个缓存移入空闲序列的末尾，否则，则执行步骤S903:报错中断；步骤S904:释放缓存。
理论上，凡是摄像头服务进程中正在使用的动态数据，以及使用完后还没来得及释放的缓存均在视频服务进程的发送序列内。缓存在发送序列中的顺序是跟数据之前发送的顺序一样，所以，每次释放的缓存都应该是发送序列中的第一个缓存。对于用户界面进程调用释放缓存接口时，首先要去视频服务进程的发送序列中拿第一个缓存，查看是否跟用户界面进程要释放的缓存相同，若相同，就将其从发送序列移动进空闲序列，进行释放。否则，报错中断，可选发出一个断言(Assert)，说明系统程序出现故障。
步骤用户界面进程利用摄像头预览功能，设置摄像头预览的缓存区，摄像头服务进程发送的动态数据通过回调函数不断投递到这个缓存区内，因为用户界面进程的数据是比较大的，所以数据不会被携带传至上层如编辑器等，而是直接在两个缓存区之间复制，一个是底层采集数据的缓存区，一个是用于显示的界面缓存区。
前面提到，用户界面进程通过摄像头客户端服务与摄像头服务进程建立连接，在连接成功时摄像头客户端服务就会设置回调函数，对底层采集数据进行处理，利用底层采集数据生成一帧视频图像数据，复制到界面缓存区，在屏幕上直接以用户界面小窗口的形式进行显示。
本实施例依托安卓系统平台进行应用，但并不表示本发明信号源实时动态预览方法限定在安卓系统平台上，在其他实施例中，也可应用于其他操作系统如IOS系统中，本实施例中涉及步骤顺序也并不限定，以实际需求为准。
本发明的信号源实时动态预览方法及系统实现节目预览，实验表明，每一信号源的视频图像内容从获取至传输到上层所需的时间最快可为18ms，因此各个信号源的视频图像内容可几乎同步显示在用户界面小窗口上，可在不切换当前信号源的情况下，实现各个信号源的实时动态节目预览，画面流畅。
本发明通过上述实施例详细描述了一种信号源实时动态预览方法及系统，通过获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的指令，进一步响应指令以获取至少一个第二信号源的内容，然后在主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。通过这种方式，本发明可以在不切换当前信号源的情况下，将各个信号源的内容以用户界面小窗口的形式进行显示，与用户界面相融合，得到稳定动态的连续画面，实现各个信号源的实时动态预览，提供一种新的节目预览及播放模式。
在本发明所提供的几个实施方式中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施方式仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方式方案的目的。
另外，在本发明各个实施方式中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本发明各个实施方式所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种信号源实时动态预览方法，其特征在于，包括：
获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的预览指令，并发出该预览指令和第一信号源输出指令；
接收第一信号源输出指令并发送相应的第一信号源的内容；
接收该预览指令，并响应该指令获取至少一个第二信号源的内容；以及
将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，用以在显示第一信号源的内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。
2.根据权利要求1所述的方法，其特征在于，所述接收该预览指令并响应该指令获取至少一个第二信号源的内容包括：
在接收到该预览指令后，连接视频服务进程、摄像头服务进程以及
用户界面进程以截取第二信号源的视频图像内容；
经由视频服务进程将第二信号源的视频图像内容转换成用户界面小窗口需要大小和格式的动态数据；
缓存转换后的动态数据；
经由视频服务进程接收来自摄像头服务进程获取动态数据的请求，然后发送动态数据至摄像头服务进程；
经由摄像头服务进程向用户界面进程提供缓存中的转换后的动态数据；以及
经由用户界面进程生成动态数据对应的图像。
3.根据权利要求2所述的方法，其特征在于，所述在接收到该预览指令后，连接视频服务进程、摄像头服务进程以及用户界面进程以截取第二信号源的视频图像内容的步骤包括：
将用户界面进程与摄像头服务进程进行连接；
将摄像头服务进程与视频服务进程进行连接；
判断摄像头服务进程与视频服务进程是否连接成功；
若摄像头服务进程与视频服务进程连接不成功，则执行异常退出；
若摄像头服务进程与视频服务进程连接成功，则判断视频服务进程是否支持用户界面进程需要的参数；
若视频服务进程不支持用户界面进程的参数，则将摄像头服务进程和视频服务进程断开连接，并异常退出；
若视频服务进程支持用户界面进程的参数，则设置回调函数，该回调函数是用于数据发送的回调函数，包括摄像头服务进程的回调函数和用户界面进程的回调函数；以及
通知视频服务进程，控制抓图引擎开启抓图功能，截取第二信号源的视频图像内容。
4.根据权利要求2所述的方法，其特征在于，所述经由摄像头服务进程向用户界面进程提供缓存中的转换后的动态数据具体流程包括：
将动态数据复制到用户界面进程的缓存；以及
通知视频服务进程释放复制的动态数据对应的缓存。
5.根据权利要求4所述的方法，其特征在于，所述通知视频服务进程释放复制的动态数据对应的缓存包括：
从视频服务进程的发送序列中拿出第一个缓存，判断是否是用户界面进程请求要释放的缓存；
若判断结果为是，则将发送序列的第一个缓存移入空闲序列的末尾；若判断结果为否，则报错中断；以及
释放缓存。
6.根据权利要求1所述的方法，其特征在于，
所述第一信号源和/或所述第二信号源包括：ATV、DTV、HDMI、VGA、YPBPR、AV、CVBS、多媒体中的一种或几种。
7.一种信号源实时动态预览系统，其特征在于，包括：
处理器，用于获取在对应第一信号源的主画面窗口中同时预览至少一个第二信号源的内容的预览指令，并发出该预览指令和第一信号源输出指令；
复用器，与处理器连接，用于在收到第一信号源输出指令时发送相应的第一信号源的内容；
响应器，与处理器和复用器相连接，用于接收该预览指令，响应该指令从复用器中获取至少一个第二信号源的内容；以及
编辑器，与复用器和响应器相连接，用于将第一信号源的内容和至少一个第二信号源的内容进行混合编辑，以在显示第一信号源内容的主画面窗口以用户界面小窗口的形式显示至少一个第二信号源的内容。
8.根据权利要求7所述的系统，其特征在于，所述响应器在收到该预览指令时，会连接视频服务进程、摄像头服务进程以及用户界面进程，该响应器包括：
抓图引擎，用于经由视频服务进程从复用器中截取并发送第二信号源的视频图像内容；
硬件图形引擎，连接于所述抓图引擎，用于经由视频服务进程将第二信号源的视频图像内容转换成用户界面小窗口需要的大小和格式的动态数据；以及
缓存，连接于所述硬件图形引擎，用于缓存所述转换后的动态数据；
其中，所述响应器经由视频服务进程接收来自摄像头服务进程获取动态数据的请求，然后发送动态数据至摄像头服务进程，经由摄像头服务进程向用户界面进程提供缓存中的所述转换后的动态数据，以及经由用户界面进程生成动态数据对应的图像。
CN201810394692.0A 2018-04-27 2018-04-27 一种信号源实时动态预览方法及系统 Pending CN108737881A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810394692.0A CN108737881A (zh) 2018-04-27 2018-04-27 一种信号源实时动态预览方法及系统
TW107140880A TW201946444A (zh) 2018-04-27 2018-11-16 一種信號源即時動態預覽方法及系統

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810394692.0A CN108737881A (zh) 2018-04-27 2018-04-27 一种信号源实时动态预览方法及系统

Publications (1)

Publication Number Publication Date
CN108737881A true CN108737881A (zh) 2018-11-02

Family

ID=63940053

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810394692.0A Pending CN108737881A (zh) 2018-04-27 2018-04-27 一种信号源实时动态预览方法及系统

Country Status (2)

Country Link
CN (1) CN108737881A (zh)
TW (1) TW201946444A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112492193A (zh) * 2019-09-12 2021-03-12 华为技术有限公司 一种回调流的处理方法及设备
CN113377310A (zh) * 2021-06-04 2021-09-10 西安诺瓦星云科技股份有限公司 输入源显示方法、装置及系统和计算机可读存储介质
CN114726838A (zh) * 2022-01-24 2022-07-08 北京仁光科技有限公司 对多个信号源进行远程安全交互的系统和方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957752A (zh) * 2010-09-03 2011-01-26 广州市千钧网络科技有限公司 Flash视频预览方法及其系统,flash播放器
CN103210371A (zh) * 2010-09-30 2013-07-17 苹果公司 内容预览
CN103500081A (zh) * 2013-09-26 2014-01-08 乐视致新电子科技（天津）有限公司 一种显示方法及显示设备
CN106060633A (zh) * 2016-05-31 2016-10-26 青岛海信电器股份有限公司 一种信号源的图像预览方法及电视终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957752A (zh) * 2010-09-03 2011-01-26 广州市千钧网络科技有限公司 Flash视频预览方法及其系统,flash播放器
CN103210371A (zh) * 2010-09-30 2013-07-17 苹果公司 内容预览
CN103500081A (zh) * 2013-09-26 2014-01-08 乐视致新电子科技（天津）有限公司 一种显示方法及显示设备
CN106060633A (zh) * 2016-05-31 2016-10-26 青岛海信电器股份有限公司 一种信号源的图像预览方法及电视终端

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112492193A (zh) * 2019-09-12 2021-03-12 华为技术有限公司 一种回调流的处理方法及设备
CN112492193B (zh) * 2019-09-12 2022-02-18 华为技术有限公司 一种回调流的处理方法及设备
US11849213B2 (en) 2019-09-12 2023-12-19 Huawei Technologies Co., Ltd. Parallel preview stream and callback stream processing method and device
CN113377310A (zh) * 2021-06-04 2021-09-10 西安诺瓦星云科技股份有限公司 输入源显示方法、装置及系统和计算机可读存储介质
CN113377310B (zh) * 2021-06-04 2023-12-05 西安诺瓦星云科技股份有限公司 输入源显示方法、装置及系统和计算机可读存储介质
CN114726838A (zh) * 2022-01-24 2022-07-08 北京仁光科技有限公司 对多个信号源进行远程安全交互的系统和方法
CN114726838B (zh) * 2022-01-24 2022-11-25 北京仁光科技有限公司 对多个信号源进行远程安全交互的系统和方法

Also Published As

Publication number Publication date
TW201946444A (zh) 2019-12-01

Similar Documents

Publication Publication Date Title
CN108012161B (zh) 视频直播方法、系统和终端设备
KR101193698B1 (ko) 줌가능 사용자 인터페이스를 위한 클라이언트-서버아키텍처 및 방법
KR101436771B1 (ko) 홈 엔터테인먼트 시스템 세션의 캡처 및 리콜
US20090265723A1 (en) Electronic device and control method of the same
CN108737881A (zh) 一种信号源实时动态预览方法及系统
CN103118299B (zh) Iptv视频通话控制方法及机顶盒
JP6499324B2 (ja) ビデオを再生するための方法、クライアント及びコンピュータ記憶媒体
JP5082152B2 (ja) 映像再生装置、映像変換再生システム及びプログラム
US20160249108A1 (en) Method and apparatus for providing a customized viewing experience
CN111901654A (zh) 一种显示设备及屏幕录制方法
CN111949564A (zh) 一种内存交换方法及显示设备
WO2022012154A1 (zh) 显示设备、屏幕录制方法及录屏分享方法
CN102970542B (zh) 一种视频数据转换的方法、装置和智能电视
CN105100870A (zh) 一种截屏方法及终端设备
CN112328553A (zh) 一种缩略图的抓取方法及显示设备
CN114143600A (zh) 直播画面调整方法、装置、设备和存储介质
CN105812883A (zh) 视频译码方法以及应用此方法的电子系统
KR20110102411A (ko) 2개의 고해상도 영상 소스들 간의 전환
CN111954043A (zh) 一种信息栏显示方法及显示设备
CN108882004B (zh) 视频录制方法、装置、设备及存储介质
CN113316022B (zh) 视频播放方法、装置、设备、系统和存储介质
KR20240008319A (ko) 사용자 맞춤형 콘텐츠와 미리 작성된 미디어 콘텐츠의 전송 간 전환
US11595707B2 (en) Media session management
CN103888838B (zh) 一种数据处理方法、装置及电子设备
WO2020147507A1 (zh) 显示设备和显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200414

Address after: No.1, Duhang 1st Road, Hsinchu City, Hsinchu Science Park, Taiwan, China

Applicant after: MEDIATEK Inc.

Address before: 1, 4th Floor, 26 Taiyuan Street, Zhubei City, Xinzhu County

Applicant before: MStar Semiconductor, Inc.

TA01 Transfer of patent application right
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20181102

WD01 Invention patent application deemed withdrawn after publication