CN108347641B - 配合电视传播系统的动态影像处理装置及动态影像处理方法 - Google Patents

配合电视传播系统的动态影像处理装置及动态影像处理方法 Download PDF

Info

Publication number
CN108347641B
CN108347641B CN201710060978.0A CN201710060978A CN108347641B CN 108347641 B CN108347641 B CN 108347641B CN 201710060978 A CN201710060978 A CN 201710060978A CN 108347641 B CN108347641 B CN 108347641B
Authority
CN
China
Prior art keywords
picture
merged
frame
sampling
layouts
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201710060978.0A
Other languages
English (en)
Other versions
CN108347641A (zh
Inventor
童怡新
黄子容
林和源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Priority to CN201710060978.0A priority Critical patent/CN108347641B/zh
Publication of CN108347641A publication Critical patent/CN108347641A/zh
Application granted granted Critical
Publication of CN108347641B publication Critical patent/CN108347641B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Image Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一动态影像处理装置及动态影像处理方法，其中包含一降取样电路、一合并电路、一中介数据产生电路与一编码器。降取样电路根据对应于K种画面布局的一预设画面布局资讯对P个动态影像施以降取样程序。每一个动态影像对应于一个电视节目。合并电路根据预设画面布局资讯将该P个降取样后动态影像合并，以产生对应于该K种画面布局的合并后动态影像。中介数据产生电路根据预设画面布局资讯产生中介数据，描述与各画面布局对应的电视节目资讯。编码器将合并后动态影像与中介数据编码为符合特定传播格式的影像数据，供电视传播系统进行传播。

Description

配合电视传播系统的动态影像处理装置及动态影像处理方法
技术领域
本发明与电视系统相关，并且尤其与能于同一画面中呈现多个电视节目的动态影像的技术相关。
背景技术
电视在多数现代家庭中是不可或缺的硬件设备。由于电视频道的数量与日俱增，若有一个清楚方便的节目选单，能帮助使用者快速浏览目前各频道正在播放的电视节目，可为使用者节省大量时间，无须藉由逐一转台来寻找想看的电视节目。
“动态电视墙”是目前更受欢迎的节目选单型态，也就是利用分割画面，在屏幕上同时呈现多个电视节目的即时动态影像。举例而言，屏幕画面可能如图1所示，在水平与垂直方向各自被平均切割为两等份，同时播放四个电视节目(CH1～CH4)的即时动态影像。
在许多广泛使用的电视讯号传播标准中，每个电视节目在传送端被编码为一初级串流(elementary stream)，多个初级串流再进一步被包裹为一传输串流(transportstream)，透过同一个频段进行传播。接收端的电视芯片包含至少一个调谐器(tuner)。当调谐器被设定为接收一特定频段中的数据，电视系统能播放的便是透过这个特定频段传播的传输串流中的数个电视节目。若接收到转台指令，且转台的目标是透过另一个频段传播的电视节目，调谐器的接收频段就必须改变，切换至目标节目所属的传输串流的传播频段。
由此可知，若图1中同时播放的电视节目CH1～CH4系透过四种不同的频段传播，接收端的电视芯片必须包含至少四个调谐器，各自接收一个传输串流。接着，再由四组解码电路将四个电视节目各自的初级串流自该等传输串流中取出、加以解码。随后，电视芯片中的影像处理电路将四个节目的画面尺寸缩小、加以组合为如图1所示的画面。由此可知，动态电视墙所涵盖的节目数量愈多，就可能需要愈庞大的电视芯片硬件，始能提供足够的调谐器与解码电路。
目前有一种利用仅具有一个调谐器的低阶电视芯片实现动态电视墙的方法，令调谐器在多个频段间切换，轮流接收透过该等频段传播的电视节目。缺点是每次切换调谐器的接收频段都需要一段转换时间，可能会使得动态画面变得不流畅或频频停顿。
发明内容
为解决上述问题，本发明提出一种新的配合电视传播系统的动态影像处理装置及动态影像处理方法。
根据本发明的一具体实施例为一种配合一电视传播系统的动态影像处理装置，其中包含一降取样电路、一合并电路、一中介数据产生电路与一编码器。该电视传播系统用以根据一特定传播格式传播P个动态影像，分别对应于多个电视节目，且P为大于1的整数。该降取样电路用以接收该P个动态影像与对应于K种画面布局的一预设画面布局资讯，并根据该预设画面布局资讯对该P个动态影像分别施以一降取样程序，以产生P个降取样后动态影像，对应P个子画面。该合并电路用以根据该预设画面布局资讯合并该P个降取样后动态影像，以产生包含多个合并后画面的一合并后动态影像，每一个合并后画面包含至少一子画面。该中介数据产生电路用以根据该预设画面布局资讯为该合并后动态影像产生一中介数据，描述与每一该K种画面布局对应的电视节目资讯。该编码器将该合并后动态影像与该中介数据编码为符合该特定传播格式的一影像数据，供该电视传播系统进行传播。
根据本发明的另一具体实施例为一种配合一电视传播系统的动态影像处理方法，包含根据一特定传播格式传播P个动态影像，分别对应于多个电视节目。P个动态影像与对应于K种画面布局的一预设画面布局资讯被接收。根据该预设画面布局资讯，该P个动态影像被分别施以一降取样程序，以产生P个降取样后动态影像，以及该P个降取样后动态影像被合并，以产生包含多个合并后画面的一合并后动态影像。根据该预设画面布局资讯，该合并后动态影像的一中介数据被产生。随后，该合并后动态影像与该中介数据编码为符合该特定传播格式的一影像数据，供该电视传播系统进行传播。
关于本发明的优点与精神可以藉由以下发明详述及附图得到进一步的了解。
附图说明
图1为一动态电视墙的分割画面示意图。
图2为根据本发明的一实施例中的动态影像处理装置的功能方块图。
图3(A)～图3(C)呈现一组在空间轴进行降取样与合并的范例。
图4(A)～图4(C)呈现一组在空间轴与时间轴皆进行降取样与合并的范例。
图5(A)～图5(C)呈现一组在时间轴进行降取样与合并的范例。
图6呈现一位元流结构范例。
图7为根据本发明的一实施例中的影像处理方法的流程图。
符号说明
100：动态影像处理装置 12：降取样电路
14：合并电路 16：编码器
18：中介数据产生电路 200：电视传播系统
210：广播天线塔 300：电视系统
S71～S75：流程步骤
须说明的是，本文的附图并非细部电路图，且其中的连接线仅用以表示信号流。功能性元件及/或程序间的多种互动关系不一定要透过直接的电性连结始能达成。此外，个别元件的功能不一定要如附图中绘示的方式分配，且分散式的区块不一定要以分散式的电子元件实现。
具体实施方式
根据本发明的一具体实施例为一种动态影像处理装置100，其功能方块图如图2所示。动态影像处理装置100应用于电视传播系统200。此处所称的电视传播系统涵盖各种具备传播模拟、数字或网络电视信号能力的系统，例如但不限于电视信号发射站与电视信号串流伺服器。本发明的范畴并不限于以某种特定组态或架构来实现电视传播系统200。动态影像处理装置100包含一降取样电路12、一合并电路14、一编码器16与一中介数据产生电路18。动态影像处理装置100可以独立存在，也可以被整合在电视传播系统200内部。
图2中，电视传播系统200接收P个动态影像(P为大于1的整数)，其中的每一个动态影像对应于一个电视节目。实务上，这些动态影像可能是由一个或多个电视服务供应商所提供。电视传播系统200负责控制、协调这些动态影像向使用者端的电视系统播送。举例而言，电视传播系统200可将多个动态影像各自编码为多个初级串流，再进一步包裹为一传输串流，随后透过广播天线塔210向电视系统300发送包含这P个动态影像的一个或多个传输串流。
本发明的动态影像处理装置100中的降取样电路12亦接收此P个动态影像。在图2的范例中，这P个动态影像在送入电视传播系统200的过程中被分流至降取样电路12。降取样电路12负责根据对应于K种画面布局的一预设画面布局资讯对该P个动态影像分别施以一降取样程序(K为一正整数)，以产生P个降取样后动态影像。于实际应用中，此预设画面布局资讯可以由动态影像处理装置100的管理者或是电视服务供应商决定。预设画面布局即是指这P个动态影像在同一屏幕上所显示的排列布局，所谓K种画面布局的定义将于后续段落以范例详细说明。
接着，合并电路14会根据同一个预设画面布局资讯合并该P个降取样后动态影像，以产生对应于该K种画面布局的一合并后动态影像。以下介绍几种预设画面布局的范例，以及降取样电路12与合并电路14会如何回应该等预设画面布局进行运作。
首先请参阅图3(A)～图3(C)。在这个范例中，P等于四，K等于一。也就是说，此范例中的预设画面布局资讯包含将四个动态影像合并，且合并后动态影像中的每一张画面都是对应于同一种画面布局。假设降取样电路12接收的第一动态影像～第四动态影像分别对应于电视节目CH1～CH4，且这四个动态影像的原始画面尺寸与画面更新率皆相同。图三(A)为降取样电路12的输入信号的示意图。在每一个时间点(t0、t1、t2……)，降取样电路12都接收到四个画面，分别来自电视节目CH1～CH4。又，此范例中所假设的预设画面布局资讯包含：(1)合并后动态影像仅包含一种画面布局(K等于一)；(2)此画面布局包含2*2个大小相同的子画面；(3)由左至右、由上至下，这四个子画面各自对应于电视节目CH1～CH4。
回应于上述要求一合并后画面包含多个子画面的预设画面布局资讯，降取样电路12可在空间轴的长度与宽度两个方向分别对第一动态影像～第四动态影像中的每一个原始画面进行降取样，令其画面尺寸缩小为原本的四分之一(长度与宽度各减少为一半)。举例而言，若原本每个原始画面的画面尺寸为1920像素*1080像素，每个降取样后动态影像的画面尺寸即为960像素*540像素。图3(B)呈现这四个降取样后动态影像的示意图。
回应于上述预设画面布局资讯，合并电路14将对应于相同时间点的四个降取样后动态影像的四个画面合并为单一画面。图3(C)为合并电路14的输出信号的示意图。如图3(C)所示，合并电路14在时间点t’0产生的合并后画面包含四个子画面，其中每一个子画面对应于一个电视节目(CH1～CH4)但对应于相同的时间点t0。相似地，合并电路14在时间点t’1产生的合并后画面是由同样对应于时间点t1的四个子画面组成，依此类推。该等依序产生的合并后画面便组成一合并后动态影像。
实务上，降取样电路12可包含多组平均值计算电路，并将一原始画面分割为多组2*2的像素。该等平均值计算电路被用以针对每一组像素中的四个像素的影像数据(例如灰阶值)取平均值，产生一笔新的像素影像数据，藉此达成在空间轴降取样的效果。另一方面，合并电路14可包含一个尺寸为1920像素*1080像素的画面缓冲器(frame buffer)，供降取样电路12将其产生的新像素影像数据写入。合并电路14可根据上述预设画面布局资讯决定每一笔新像素影像数据写入该画面缓冲器的适当位置，使得四个尺寸各自为960像素*540像素的降取样后画面都被写入后，在该画面缓冲器中即组合成一张新的合并后画面。以图3(C)为例，合并电路14可令对应于电视节目CH1的960*540笔新像素影像数据被写入该画面缓冲器中对应于画面最左上角960像素*540像素的位置。
中介数据(metadata)产生电路18根据该预设画面布局资讯为合并后动态影像产生一中介数据，描述与每一该K种画面布局对应的电视节目资讯。藉由上述中介数据，电视系统300可取得该预设画面布局资讯及/或其他相关资讯。举例而言，除了每一种画面布局中的子画面数量与位置分配，该中介数据所描述的电视节目资讯还可进一步包含下列资讯中的一个或多个资讯：每一种画面布局中每个子画面所对应的节目频道辨识码、每个子画面所对应的节目供应商辨识码、每个子画面所对应的节目类型(例如新闻、旅游、运动等等)辨识码。
编码器16负责将合并电路14产生的合并后动态影像以及中介数据产生电路18产生的中介数据编码为符合一特定传播格式的影像数据，并提供给电视传播系统200进行传播。以电视传播系统200采用高效率视讯编码(high efficiency videocoding,HEVC)规范的情况为例，编码器16可将合并后动态影像与中介数据编码为一初级串流(elementarystream)，电视传播系统200进一步将该初级串流包装于一传输串流(transport stream)中进行传播。换句话说，此合并后动态影像的格式与其他一般的电视节目相同，可被视为一个电视节目播送，且电视系统300若接收、解码、播放这个电视节目，其效果即为符合图1呈现的预设画面布局、同时呈现电视节目CH1～CH4的动态电视墙。值得注意的是，即使是仅包含一个调谐器与一组解码电路的低阶电视芯片，亦能在无需切换接收频段的情况下顺利接收并播放此动态电视墙。
接着请参阅图4(A)～图4(C)。在这个范例中，P等于八，K等于二。也就是说，此范例中的预设画面布局资讯要求将八个动态影像合并，且合并后动态影像中的合并后画面对应于两种不同的画面布局。假设降取样电路12接收的第一动态影像～第八动态影像分别对应于电视节目CH1～CH8，且这八个动态影像的原始画面尺寸与画面更新率皆相同。图4(A)为降取样电路12的输入信号的示意图。如图4(A)所示，在每一个时间点(t0、t1、t2……)，降取样电路12都接收到八个画面，分别来自电视节目CH1～CH8。又，此范例中的预设画面布局资讯包含：(1)合并后动态影像包含两种画面布局；(2)两种画面布局各自包含2*2个大小相同的子画面；(3)在第一种画面布局中，由左至右、由上至下，这四个子画面各自对应于电视节目CH1～CH4；(4)在第二种画面布局中，由左至右、由上至下，这四个子画面各自对应于电视节目CH5～CH8。
图4(B)为降取样电路12回应于上述预设画面布局资讯所产生的八个降取样后动态影像的示意图。于本实施例中，由于目前的两种画面布局都要求合并后画面包含多个子画面，且合并后动态影像中必须包含多种画面布局(正整数K大于一)，降取样电路12于空间轴及时间轴皆进行降取样，因此这八个降取样后动态影像除了画面尺寸变小，画面更新率亦被降低为原本的一半。更具体地说，在这个范例中，降取样电路12保留第一动态影像～第四动态影像对应于时间点t0、t2、t4……的画面，舍弃第一动态影像～第四动态影像对应于时间点t1、t3、t5……的画面。并且，降取样电路12保留第五动态影像～第八动态影像对应于时间点t1、t3、t5……的画面，舍弃第五动态影像～第八动态影像对应于时间点t0、t2、t4……的画面。
随后，回应于目前的预设画面布局资讯，合并电路14将第一降取样后动态影像～第四降取样后动态影像中原本对应于相同时间点的四个降取样后动态影像的四个画面合并为单一画面，并将第五降取样后动态影像～第八降取样后动态影像中原本对应于相同时间点的四个降取样后动态影像的四个画面合并为单一画面。图4(C)为合并电路14的输出信号的示意图。合并电路14在时间点t’0产生的合并后画面对应于第一种画面布局，其中包含四个子画面，各自对应于电视节目CH1～CH4以及相同的时间点t0。合并电路14在时间点t’1产生的合并后画面对应于第二种画面布局，其中包含四个子画面，各自对应于电视节目CH5～CH8以及相同的时间点t1。随后，在时间点t’2产生的合并后画面再次对应于电视节目CH1～CH4，而在时间点t’3产生的合并后画面再次对应于电视节目CH5～CH8，t’0～t’3为前后连续的时间点。也就是说，合并后动态影像中包含第一种画面布局对应于电视节目CH1～CH4，第二种画面布局对应于电视节目CH5～CH8。
相似地，中介数据产生电路18会根据目前的预设画面布局资讯为合并后动态影像产生一中介数据，描述与这两种画面布局对应的电视节目资讯。接着，编码器16将图4(C)呈现的合并后动态影像及其中介数据编码为符合电视传播系统200所采用的传播格式的影像数据，并提供给电视传播系统200进行传播。
实务上，透过中介数据，电视系统300便能掌握动态影像处理装置100采用的预设画面布局资讯，并能自行运用动态影像处理装置100产生的影像数据，例如可将图4(C)呈现的合并后动态影像拆解为两个动态电视墙各自播放，其中一个画面呈现电视节目CH1～CH4，另一个画面呈现电视节目CH5～CH8。或者，使用者端的电视系统亦可自收到的影像数据中撷取出电视节目CH1～CH8各自的降取样后影像对应的八个子画面，进行重新组合等运用，例如组合出一个呈现电视节目CH1、CH3、CH5、CH7的动态电视墙。
虽然在前述的范例中，每个合并后画面都各自包含2*2个子画面，但本发明的范畴不以此为限。无论是空间轴降取样比例或时间轴降取样比例，该预设画面布局资讯具有弹性。举例而言，该预设画面布局资讯指定的一种画面布局可以包含2*3个或4*3个子画面，且每个子画面的尺寸不需要完全相同。
利用上述概念，动态影像处理装置100与电视传播系统200可以只透过一个或数个影像数据，便将数十个甚至上百个电视节目的降取样后动态影像所对应的画面提供给电视系统300。电视系统300可自行决定要撷取出哪些电视节目所对应的降取样后动态影像，重组成一个或多个新的动态电视墙，且实际呈现于电视系统300的屏幕上的画面布局亦可由使用者自行决定。
图5(A)～图5(C)呈现另一种预设画面布局的范例。在这个范例中，P等于二，且K等于二。也就是说，此范例中的预设画面布局资讯要求将两个动态影像合并，且合并后动态影像中的合并后画面对应于两种不同的画面布局。假设降取样电路12接收的第一动态影像与第二动态影像分别对应于电视节目CH1、CH2，且这两个动态影像的原始画面尺寸与画面更新率皆相同。图5(A)为降取样电路12的输入信号的示意图，在每一个时间点(t0、t1、t2……)，降取样电路12都接收到两个画面，分别来自电视节目CH1、CH2。此范例中的预设画面布局资讯包含：(1)合并后动态影像包含两种画面布局；(2)两种画面布局各自包含一个子画面；(3)第一种画面布局中的子画面系对应于电视节目CH1；(4)第二种画面布局中的子画面各自对应于电视节目CH2。
图5(B)为降取样电路12回应于上述预设画面布局资讯所产生的两个降取样后动态影像的示意图。由于目前的两种画面布局皆未要求合并后画面包含多个子画面，降取样电路12不需要在空间轴进行降取样。另一方面，由于合并后动态影像中必须包含多种画面布局(正整数K大于一)，降取样电路12在时间轴进行降取样，亦即舍弃对应于某些时间点的画面。降取样电路12保留第一动态影像对应于时间点t0、t2、t4……的画面，舍弃第一动态影像对应于时间点t1、t3、t5……的画面。并且，降取样电路12保留第二动态影像对应于时间点t1、t3、t5……的画面，舍弃第二动态影像对应于时间点t0、t2、t4……的画面。图5(C)呈现了合并电路 14回应于此预设画面布局资讯所产生的合并后动态影像。
须说明的是，依照指定比例于空间轴或时间轴对动态影像进行降取样程序的实作细节为本发明所属技术领域中具有通常知识者所知，于此不赘述。另一方面，合并电路14可利用多种电路实现，例如可程式化逻辑门阵列、针对特定应用的集成电路、微控制器、微处理器、数位信号处理器。此外，合并电路14可被设计为透过执行一存储器中所储存的处理器指令来完成其合并任务。
于一实施例中，中介数据产生电路18所产生的中介数据进一步包含K种索引值，各自指向该K种画面布局。举例而言，中介数据产生电路18可令索引值1指向第一种画面布局，而索引值2指向第二种画面布局，依此类推。以图5(C)为例，于时间点t’0、t’2、t’4……产生的合并后画面因对应于第一种画面布局可被分派以索引值1，而于时间点t’1、t’3、t’5……产生的合并后画面因对应于第二种画面布局可被分派以索引值2。相对应地，编码器16可将合并后动态影像及其中介数据编码为具有一位元流结构，且编码器16是将电视节目资讯编写入该位元流结构中的第一层级，并将该多个索引值编写入该位元流结构中的第二层级。举例而言，该第一层级对应于连续的多个画面，而该第二层级对应于单一个画面。以高效率视讯编码(HEVC)规范为例，编码器16可将与K种画面对应的电视节目资讯编写为K个辅助加强资讯(supplemental enhancement information,SEI)置入序列层级(sequence level)的参数组，让连续的多个画面共用这K组电视节目资讯。另一方面，编码器16可同样以辅助加强资讯(SEI)的形式，将该多个索引值编写入画面层级(picture level)的参数组，让每一个画面的影像数据前端各自带有一个索引值，指出此画面是对应于哪一种画面布局。如图6所示，合并画面资讯_1～合并画面资讯_K跟随于序列参数组之后，而合并画面索引值置于画面参数组与影像数据之间。
上述“将电视节目资讯与索引值分别写入不同层级”做法的好处在于，动态影像处理装置100不需要在每一张画面的中介数据中都详载其电视节目资讯。使用者端的电视系统只要根据每张画面的索引值获得较高层级的中介数据，即可取得该画面的详细资讯。藉此，电视传播系统200须传播至电视系统300的数据量可被有效减少。
根据本发明的另一具体实施例为一种配合一电视传播系统的动态影像处理方法，其流程图系绘示于图7。该电视传播系统用以根据一特定传播格式传播P个动态影像，其中每一个动态影像对应于一个电视节目，且P为大于1的整数。首先，步骤S71为接收该P个动态影像以及对应于K种画面布局的一预设画面布局资讯，其中K为一正整数。其次，步骤S72为根据该预设画面布局资讯，对该P个动态影像分别施以一降取样程序，以产生P个降取样后动态影像。接着，步骤S73为根据该预设画面布局资讯，合并该P个降取样后动态影像，以产生对应于该K种画面布局的一合并后动态影像。随后，步骤S74为根据该预设画面布局资讯为该合并后动态影像产生一中介数据，用以描述与该K种画面布局中每一种画面布局对应的电视节目资讯。步骤S75则是将该合并后动态影像与该中介数据编码为符合该特定传播格式的一影像数据，供该电视传播系统进行传播。
本发明所属技术领域中具有通常知识者可理解，先前在介绍动态影像处理装置100时描述的各种操作变化亦可应用至图7中的影像处理方法，其细节不再赘述。
藉由以上较佳具体实施例的详述，希望能更加清楚描述本发明的特征与精神，而并非以上述所揭露的较佳具体实施例来对本发明的范畴加以限制。相反地，其目的是希望能涵盖各种改变及具相等性的安排于本发明所欲申请的专利范围的范畴内。

Claims (12)

1.一种配合一电视传播系统的动态影像处理装置，该电视传播系统用以根据一特定传播格式传播P个动态影像，其中每一个动态影像对应于一个电视节目，P为大于1的整数，该动态影像处理装置包含：
一降取样电路，用以接收该P个动态影像，并根据对应于K种画面布局之一预设画面布局资讯对该P个动态影像分别施以一降取样程序，以产生P个降取样后动态影像，其中K为一正整数；
一合并电路，耦接至该降取样电路，用以根据该预设画面布局资讯合并该P个降取样后动态影像，以产生包含多个合并后画面的一合并后动态影像，其中，该P个降取样后动态影像对应于P个子画面，该每一个合并后画面包含至少一子画面；
一中介数据产生电路，用以根据该预设画面布局资讯为该合并后动态影像产生一中介数据，描述与该K种画面布局中每一种画面布局对应的电视节目资讯；以及
一编码器，耦接至该合并电路与该中介数据产生电路，用以将该合并后动态影像与该中介数据编码为符合该特定传播格式的一影像数据，供该电视传播系统进行传播；
其中该中介数据产生电路所产生的该中介数据进一步包含K种索引值；该K种索引值中的每一种索引值指向该K种画面布局中的一种画面布局；该编码器将该合并后动态影像与该中介数据编码为具有一位元流结构，且该编码器系将该每一种画面布局对应的电视节目资讯编写入该位元流结构的一第一层级，并将该K种索引值编写入该位元流结构的一第二层级。
2.如权利要求1所述的动态影像处理装置，其特征在于，当该K种画面布局中的一种画面布局要求一合并后画面包含多个子画面，该降取样电路所进行的该降取样程序包含于空间轴进行降取样。
3.如权利要求1所述的动态影像处理装置，其特征在于，当正整数K大于一，该降取样电路所进行的该降取样程序包含于时间轴进行降取样，使得该合并电路于一第一时间点产生一第一合并后画面，于一第二时间点产生一第二合并后画面，该第一合并后画面与该第二合并后画面分别对应于该K种画面布局中不同的画面布局。
4.如权利要求1所述的动态影像处理装置，其特征在于，当该K种画面布局中的一种画面布局要求一合并后画面包含多个子画面，且正整数K大于一，该降取样电路所进行的该降取样程序包含于空间轴以及时间轴皆进行降取样。
5.如权利要求1所述的动态影像处理装置，其特征在于该特定传播格式为一传输串流，且该编码器将该合并后动态影像与该中介数据编码为一初级串流。
6.如权利要求1所述的动态影像处理装置，其特征在于，于该位元流结构中，该第一层级对应于连续的多个合并后画面，而该第二层级对应于单一个合并后画面；该编码器令该合并后动态影像中的每一个合并后画面各自带有该K种索引值中的一种索引值。
7.如权利要求1所述的动态影像处理装置，其特征在于，该中介数据所描述的与该每一种画面布局对应的该电视节目资讯包含下列资讯中的一个或多个资讯：每个子画面所对应的节目频道辨识码、每个子画面所对应的节目供应商辨识码、每个子画面所对应的节目类型辨识码。
8.一种配合一电视传播系统的动态影像处理方法，该电视传播系统用以根据一特定传播格式传播P个动态影像，其中每一个动态影像对应于一个电视节目，且P为大于1的整数，该动态影像处理方法包含：
(a)接收该P个动态影像以及对应于K种画面布局的一预设画面布局资讯，其中K为一正整数；
(b)根据该预设画面布局资讯，对该P个动态影像分别施以一降取样程序，以产生P个降取样后动态影像；
(c)根据该预设画面布局资讯，合并该P个降取样后动态影像，以产生包含多个合并后画面的一合并后动态影像，其中，该P个降取样后动态影像对应于P个子画面，该每一个合并后画面包含至少一子画面；
(d)根据该预设画面布局资讯为该合并后动态影像产生一中介数据，用以描述与该K种画面布局中每一种画面布局对应的电视节目资讯；以及
(e)将该合并后动态影像与该中介数据编码为符合该特定传播格式的一影像数据，供该电视传播系统进行传播；
其中步骤(d)所产生的该中介数据包含：
K组画面布局资讯，用以描述该K种画面布局中每一种画面布局所对应的电视节目资讯；以及
K种索引值，每一种索引值指向该K种画面布局之一；
其中，步骤(e)包含将该合并后动态影像与该中介数据编码为具有一位元流结构，并且将电视节目资讯编写入该位元流结构的一第一层级、将该K种索引值编写入该位元流结构的一第二层级。
9.如权利要求8所述的动态影像处理方法，其特征在于，当该K种画面布局中的一种画面布局要求一合并后画面包含多个子画面，步骤(b)所进行的该降取样程序包含于空间轴进行降取样。
10.如权利要求8所述的动态影像处理方法，其特征在于，当正整数K大于一，步骤(b)所进行的该降取样程序包含于时间轴进行降取样，且步骤(c)包含：
于一第一时间点产生一第一合并后画面，于一第二时间点产生一第二合并后画面，该第一合并后画面与该第二合并后画面分别对应于该K种画面布局中不同的画面布局。
11.如权利要求8所述的动态影像处理方法，其特征在于，当该K种画面布局中的一种画面布局要求一合并后画面包含多个子画面，且正整数K大于一，步骤(b)所进行的该降取样程序包含于空间轴以及时间轴皆进行降取样。
12.如权利要求8所述的动态影像处理方法，其特征在于，于该位元流结构中，该第一层级系对应于连续的多个画面，而该第二层级对应于单一个画面；步骤(e)包含令该合并后动态影像中的每一个合并后画面各自带有该K种索引值中的一种索引值。
CN201710060978.0A 2017-01-25 2017-01-25 配合电视传播系统的动态影像处理装置及动态影像处理方法 Expired - Fee Related CN108347641B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710060978.0A CN108347641B (zh) 2017-01-25 2017-01-25 配合电视传播系统的动态影像处理装置及动态影像处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710060978.0A CN108347641B (zh) 2017-01-25 2017-01-25 配合电视传播系统的动态影像处理装置及动态影像处理方法

Publications (2)

Publication Number Publication Date
CN108347641A CN108347641A (zh) 2018-07-31
CN108347641B true CN108347641B (zh) 2021-01-22

Family

ID=62963307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710060978.0A Expired - Fee Related CN108347641B (zh) 2017-01-25 2017-01-25 配合电视传播系统的动态影像处理装置及动态影像处理方法

Country Status (1)

Country Link
CN (1) CN108347641B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113905171B (zh) * 2020-07-06 2024-04-26 瑞昱半导体股份有限公司 多路图像处理装置及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200922326A (en) * 2007-09-20 2009-05-16 Alticast Corp Method and system for providing program guide service
CN103118272A (zh) * 2013-02-22 2013-05-22 浪潮齐鲁软件产业有限公司 一种多场景数字电视的实现方法
CN104349200A (zh) * 2013-08-09 2015-02-11 晨星半导体股份有限公司 电视控制装置与相关方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5460390B2 (ja) * 2010-03-12 2014-04-02 インターナショナル・ビジネス・マシーンズ・コーポレーション レイアウト変換装置、レイアウト変換プログラム、およびレイアウト変換方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200922326A (en) * 2007-09-20 2009-05-16 Alticast Corp Method and system for providing program guide service
CN103118272A (zh) * 2013-02-22 2013-05-22 浪潮齐鲁软件产业有限公司 一种多场景数字电视的实现方法
CN104349200A (zh) * 2013-08-09 2015-02-11 晨星半导体股份有限公司 电视控制装置与相关方法

Also Published As

Publication number Publication date
CN108347641A (zh) 2018-07-31

Similar Documents

Publication Publication Date Title
US7836193B2 (en) Method and apparatus for providing graphical overlays in a multimedia system
CN110868625A (zh) 一种视频播放方法、装置、电子设备及存储介质
US20200092600A1 (en) Method and apparatus for presenting video information
CN109819272B (zh) 视频发送方法、装置、计算机可读存储介质及电子设备
CN100531298C (zh) 用于执行画中画功能的多媒体信号匹配系统和方法
JP2019517191A (ja) ３６０度ビデオのためのハイブリッドなグラフィックスおよびピクセル領域アーキテクチャ
US8111932B2 (en) Digital image decoder with integrated concurrent image prescaler
CN102845068A (zh) 用于3d电视节目素材的分配的方法和装备
KR101459557B1 (ko) 실시간 시청률에 기반한 모자이크 채널 가이드를 제공하는 서버 및 방법
CN101207749A (zh) 多画面动态显示多路电视节目内容的装置与方法
US11006069B2 (en) Transmission device, transmission method, reception device, and reception method
CN102104788A (zh) 一种用于视频处理的方法和系统
EP3627439A1 (en) Method and device for processing media data
CN103202032A (zh) 用于视频流的客户端合成的装置和方法
CN105430451A (zh) 一种多机位hls的描述方法及一种基于hls的多机位视频直播系统
US11375171B2 (en) System and method for preloading multi-view video
US20110200093A1 (en) Method and apparatus for transmitting and receiving video and video links
US20080240669A1 (en) Mpeg-based user interface device and method of controlling function using the same
CN108347641B (zh) 配合电视传播系统的动态影像处理装置及动态影像处理方法
JP4504627B2 (ja) データ送信装置及びデータ受信装置
JP2011511554A (ja) ビデオデータをストリーミングするための方法
CN104038776A (zh) 视频处理装置和视频处理方法
TWI635749B (zh) 配合電視傳播系統之動態影像處理裝置及動態影像處理方法
KR20010089660A (ko) 디지털 ｔｖ 시스템용 신호 처리 유닛
US20040258148A1 (en) Method and device for coding a scene

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200414

Address after: No.1, Duhang 1st Road, Hsinchu City, Hsinchu Science Park, Taiwan, China

Applicant after: MEDIATEK Inc.

Address before: 1/2, 4th floor, 26 Taiyuan Street, Zhubei City, Hsinchu County, Taiwan, China

Applicant before: MSTAR SEMICONDUCTOR Inc.

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210122

Termination date: 20220125