CN111630867A - 多媒体通信桥接器 - Google Patents

多媒体通信桥接器 Download PDF

Info

Publication number
CN111630867A
CN111630867A CN201980008857.9A CN201980008857A CN111630867A CN 111630867 A CN111630867 A CN 111630867A CN 201980008857 A CN201980008857 A CN 201980008857A CN 111630867 A CN111630867 A CN 111630867A
Authority
CN
China
Prior art keywords
data stream
data
video
information
video frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980008857.9A
Other languages
English (en)
Other versions
CN111630867B (zh
Inventor
黄炯
曹志成
崔薰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lattice Semiconductor Corp
Original Assignee
Lattice Semiconductor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lattice Semiconductor Corp filed Critical Lattice Semiconductor Corp
Priority to CN202110381042.4A priority Critical patent/CN113114967B/zh
Publication of CN111630867A publication Critical patent/CN111630867A/zh
Application granted granted Critical
Publication of CN111630867B publication Critical patent/CN111630867B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08—Protocols for interworking; Protocol conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/14—Multichannel or multilink protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22—Parsing or analysis of headers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/28—Timers or timing mechanisms used in protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/083—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical and the horizontal blanking interval, e.g. MAC data signals
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Power Engineering (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

桥接芯片接收符合第一多媒体通信标准的第一数据流。第一数据流包括第一输入视频帧的第一视频数据、第二输入视频帧的第二视频数据以及描述针对第二视频数据的传递函数的信息，该信息被包括在第一输入视频帧的视频消隐间隔中。桥接芯片提取描述针对第二视频数据的传递函数的信息。然后，桥接芯片生成符合第二多媒体通信标准的第二数据流。第二数据流包括第一出站视频帧中的第一视频数据、第二出站视频帧中的第二视频数据以及描述针对第二视频数据的传递函数的提取信息。最后，将所生成的第二数据流发送到目的地设备。

Description

多媒体通信桥接器
技术领域
本公开的一个或多个实施例总体涉及针对不同多媒体通信标准的通信桥接。
背景技术
随着多媒体通信标准的发展，新的特性被添加到较新版本的标准中。随着新标准的发布，针对系统的芯片的实现被更新，以实现添加到较新版本的标准中的新特性。更新片上系统(SoC)以实现较新发布的标准的新特性可能既耗时又昂贵。
例如，高清多媒体接口(HDMI)2.1标准包括HDMI 2.0标准不本地支持的诸如动态高动态范围(D-HDR)的特性。由于在HDMI 2.1标准发布之前针对HDMI 2.0标准特别设计的SoC没有实现D-HDR特性，因此要实现与HDMI 2.1标准兼容的D-HDR特性，就需要新的SoC。这可能会耗费时间，并可能延迟HDMI2.1设备的发布。
附图说明
所公开的实施例具有其它优点和特征，这些优点和特征将从详细描述、所附权利要求书和附图(或图)中更加明显。以下是附图的简要介绍。
图1示出了使用预定义多媒体通信标准向接收设备发送信息的源设备的系统结构。
图2A至图2C示出了根据各种实施例的适于使用第二多媒体通信标准向接收设备发送信息的源设备的系统架构。
图3A示出了根据一个实施方式的在HDMI 2.0标准中定义的针对视频流的单个帧的数据流。
图3B示出了根据一个实施方式的在HDMI 2.1标准中定义的针对视频流的单个帧的数据流。
图4A示出了符合第一多媒体通信标准的第一数据流被重新编码为符合第二多媒体通信标准的第二数据流。
图4B示出了根据一个实施方式的第一数据流中的VSIF分组的报头。
图4C示出了根据一个实施方式的FAPA中的分组的报头。
图5A示出了根据一个实施方式的桥电路的框图。
图5B示出了根据一个实施方式的桥电路的框图。
图6示出了根据一个实施方式的用于将符合第一多媒体通信标准的第一数据流转换为符合第二多媒体通信标准的第二数据流的过程的流程图。
具体实施方式
附图(FIGS.)和以下描述仅通过说明的方式涉及优选实施例。应注意，从下面的讨论中，本文中公开的结构和方法的替代实施例将容易地被认为是可行的替代方案，并且在不脱离所要求保护的原理的情况下可以采用这些替代方案。
现在将详细参考几个实施例，其示例在附图中示出。应注意，只要可行，在附图中可以使用类似或相似的附图标记，并且可以指示类似或相似的功能。附图仅出于说明的目的描述所公开的系统(或方法)的实施例。本领域技术人员将容易地从以下描述中认识到，在不脱离本文中所述原理的情况下，可以采用本文中所示的结构和方法的替代实施例。
配置概述
在较新版本的标准中添加的新特性是使用桥接芯片实现的。桥接芯片与符合第一多媒体通信标准的SoC接口，并生成符合第二多媒体通信标准的数据流。
桥接芯片接收符合第一多媒体通信标准的第一数据流。第一数据流包括第一输入视频帧的第一视频数据、第二输入视频帧的第二视频数据以及描述针对第二视频数据的传递函数的信息，该信息包括在第一输入视频帧的视频消隐间隔中。桥接芯片提取描述针对第二视频数据的传递函数的信息。然后，桥接器生成符合第二多媒体通信标准的第二数据流。第二数据流包括第一出站视频帧中的第一视频数据、第二出站视频帧中的第二视频数据以及描述针对第二视频数据的传递函数的提取信息。最后，将所生成的第二数据流发送到目的地设备。
系统架构
图1示出了使用预定义多媒体通信标准向接收设备100B发送信息的源设备100A的系统架构。源设备100A和接收设备100B经由多媒体通信链路150彼此连接。使用图1所示的系统架构的示例性设置是使用高清多媒体接口(HDMI)2.0b标准使用HDMI电缆150与高清电视(HDTV)100B通信的蓝光播放器100A。
源设备100A和接收设备100B中的每一个包括适于发送和接收使用预定义多媒体通信标准编码的数据流的片上系统(SoC)110。
图2A示出了根据一个实施方式的适于使用第二多媒体通信标准向接收设备200B发送信息的源设备200A的系统架构。源设备200A和接收设备200B经由多媒体通信链路160彼此连接。源设备200A包括SoC 110A和桥接芯片210A。SoC 110A是被配置为生成用与第二多媒体通信标准不同的第一多媒体通信标准编码的数据流的IC芯片。例如，SoC 110A生成并发送用HDMI 2.0b标准编码的数据流。桥接芯片210A接收用第一多媒体通信标准编码的数据流，并重新编码该数据流以符合第二多媒体通信标准。例如，桥接器210A接收用HDMI2.0b标准编码的数据流，并且重新编码所接收的数据流以符合HDMI 2.1标准。HDMI 2.0b和HDMI 2.1将被用作整个应用中不同多媒体通信标准的示例。然而，本文中描述的原理适用于除HDMI之外的其它多媒体通信标准，例如DisplayPort或其它标准。
接收设备200B包括SoC 110B和桥接芯片210B。SoC 110B被配置为接收用第一多媒体通信标准编码的数据流，并基于所接收的数据流执行一组指令。例如，接收设备200B可以是高清电视(HDTV)，并且SoC 110B被配置为接收用HDMI 2.0B标准编码的数据流，解译所接收的数据流，并且呈现图像以由HDTV的显示面板显示。桥接芯片210B接收用第二多媒体通信标准编码的数据流，并使用第一多媒体通信标准重新编码该数据流。即，在图2A的示例中，桥接器210B将HDMI 2.1数据流重新编码为HDMI 2.0数据流。
在一些实施例中，如图2B所示，接收器设备200B包括SoC 220B，其能够本地处理用符合第二多媒体通信标准(例如，HDMI 2.1)的协议编码的数据流。在该实施例中，接收器设备200B不具有耦合到SoC 220B的输入的桥接芯片210B。在其它实施例中，如图2C所示，源设备200A包括SoC 220A，SoC 220A能够本地发送用符合第二多媒体通信标准(例如，HDMI2.1)的协议编码的数据流。在该实施例中，源设备200A不具有耦合到SoC 220A的输出的桥接芯片210A。
多媒体通信标准中的视频帧
图3A示出了根据一个实施方式的在HDMI 2.0标准中定义的视频流的单个视频帧300A。视频帧包括活动视频区域310、垂直消隐间隔(VBI或VBlank)320和水平消隐间隔(HBI或HBlank)330。
活动视频区域310承载要由显示设备(例如，HDTV)的显示面板显示的视频数据。例如，活动区域包括使用RGB或YUV编码的1920×1080像素阵列(2k或全高清分辨率)的视频数据。
垂直消隐间隔(VBlank)320是视频帧的在前一帧的活动视频区域的最后一行的末尾处开始，并且在视频帧的活动视频区域310的第一行的开始处结束的部分。在一些实施例中，VBlank 320包括设定数量的行(例如，90行)。水平消隐间隔(HBlank)330是数据流300B中对应于处于活动视频周期310的两行之间的视频帧的部分。在一些实施例中，HBlank 330具有设置宽度(例如，相当于560像素的颜色信息的数据宽度)。
VBlank 320和HBlank 330可以包括供应商特定信息帧(VSIF)340，其是具有由设计实现HDMI 2.0标准的电子设备的不同供应商定义和使用的结构的数据分组。例如，VSIF340分组可以包括针对经由HDMI数据流传输的视频的闭路字幕信息。源设备100A可以生成包括多个VSIF分组的视频帧。连接到源设备的接收设备100B可以解译由源设备100A生成的VSIF分组，或者可以忽略和丢弃VSIF分组。
图3B示出了根据一个实施方式的在HDMI 2.1标准中定义的视频流的单个视频帧300B。视频帧300B包括活动视频区域350、具有帧精确分组区域(FAPA)370的垂直消隐间隔(VBI或VBlank)360和水平消隐间隔(HBI或HBlank)380。
活动视频区域350承载要由显示设备(例如，HDTV)的显示面板显示的视频信息。例如，活动区域包括在sRGB颜色空间中以每个分量(例如，红、绿和蓝分量)10比特实现的3840×2160像素(4k分辨率)的数据。即，活动区域包括2160行颜色数据，每行包括3840像素的颜色数据。
垂直消隐间隔(VBlank)360是数据流300B中与视频帧相对应的部分，该部分从前一帧的活动视频区域的最后一行的末尾处开始，并在视频帧的活动视频区域310的第一行的开始处结束。在一些实施例中，VBlank 360包括设定数量的行(例如，90行)。
VBlank 360包括帧精确分组区域(FAPA)370。FAPA 370在VBlank360的开始处开始，并持续预定数量的行。在一些实施例中，FAPA 370的行数为
Figure BDA0002588455690000051
如果VBlank是偶数
Figure BDA0002588455690000052
如果VBlank是奇数
在一些实施例中，FAPA 370是视频帧300B中发送一个或多个扩展元数据分组(EM)的部分。EM分组包括3字节的报头和最多28字节的有效载荷。FAPA可以由HDMI 2.1定义为一时间段，可以在该时间段期间发送EM分组。
水平消隐间隔(HBlank)380是数据流300B中对应于处于活动区域的两行之间的视频帧的部分。在一些实施例中，HBlank 380具有设置宽度(例如，相当于560像素的颜色信息的数据宽度)。
在一些实施例中，以比第一视频流300A更快的比特率发送第二视频流300B。例如，以HDMI 2.0B标准中定义的18Gbit/s的比特率发送第一视频流300A，并且以HDMI 2.1标准中定义的40Gbit/s或更高的比特率发送第二视频流300B。
多媒体数据流重新编码
图4A示出了将符合第一多媒体通信标准的第一数据流410A重新编码为符合第二多媒体通信标准的第二数据流410B。例如，第一多媒体通信标准是HDMI 2.0标准，并且第二多媒体通信标准是HDMI 2.1标准。
第一数据流400包括两个帧410A和410B。第一帧410A和第二帧410B中的每一个分别包括活动视频区域310A和310B。第一帧410A还包括VBlank间隔和HBlank间隔，VBlank间隔和HBlank间隔包括多个VSIF 420A至420C(统称为VSIF 420)。VSIF 420包括描述第二帧410B的活动视频区域310B中包括的、针对视频数据的传递函数的信息。例如，第一数据流400的第一帧410A的VSIF 420可以包括针对第一数据流400的第二视频帧410B的活动视频周期310B的视频数据的动态高动态范围(D-HDR)元数据。D-HDR元数据可以描述用于将视频数据从8比特颜色空间颜色映射到10比特颜色空间的传递函数。例如，传递函数可以是S-Log3电光传递函数(EOTF)、ST 2084感知量化器(PQ)传递函数、或混合对数伽马(HLG)传递函数。在一些实施例中，包括在VSIF 420中的信息不是由第一多媒体通信标准本地支持的，而是由第二多媒体通信标准本地支持的。由于包含在VSIF 420中的信息不需要由第一多媒体通信标准支持，因此如果源设备200A连接到支持第一多媒体通信标准、但不支持第二多媒体通信标准的接收设备100B，则接收设备100B可以简单地忽略包含在VSIF 420中的信息。
在第一数据流400中编码的信息被重新编码为第二数据流405。第二数据流405包括两个视频帧415A和415B。在第二数据流405的第一帧415A的有效区域350A中重新编码第一数据流400的第一帧410A的有效视频区域310A。在第二数据流405的第二帧415B的有效区域350B中重新编码第一数据流400的第二帧410B的有效区域310B。即，包括在第一数据流400的第一帧410A的活动视频区域310A中的视频分组430A被包括在第二数据流405的第二帧415A的活动视频区域350A中。在一些实施例中，视频分组430A在第二数据流405的第一帧415A中的位置与视频分组430A在第一数据流400的第一帧410A中的位置相同。在其它实施例中，与第一数据流400中的视频分组相比，第二数据流405中的视频分组被延迟。
在第一数据流400的第一帧410A中包括的VSIF 420中编码的信息被重新编码，并被包括在第二数据流405的第二帧415B的FAPA370B中。由于与在VSIF 420中编码的信息相关联的特性由第二多媒体通信标准本地支持，因此在VSIF 420中编码的信息被重新编码以符合第二多媒体通信标准的规范。在一些实施例中，在第二数据流405的第二帧415B的FAPA370B中的对应分组中重新编码VSIF分组420A到420C中的每一个。在其它实施例中，在VSIF420中编码的信息被组合或分割成第二数据流405的第二帧415B的FAPA 370B中的不同数目的分组。
在一些实施例中，包括在第二数据流405的FAPA 370中的重新编码的信息具有预定义报头。在一个实施方式中，FAPA 370中的分组的报头具有与第一数据流400中的VSIF分组420的报头不同的报头。例如，根据一个实施方式，图4B示出了第一数据流400中的VSIF分组420的报头，并且图4C示出了FAPA 370中的分组的报头。
VSIF分组420的报头包括由桥接器210的设计者如此编程的第一八进制数(HB0)。第一八进制数(HB0)可以用于标识要在第二数据流405的FAPA 370中重新编码的分组。VSIF分组420还包括标识版本的第二八进制数(HB1)，以及第三八进制数(HB2)，该第三八进制数(HB2)包括该分组是否是一系列分组的第一分组的标识、该分组是否是该系列分组的最后分组的标识、以及指示VSIF分组420的长度的长度字段。
FAPA 370中的分组的报头包括标识分组的类型的第一八进制数(HB0)。在图4C的示例中，第一八进制数的值为0x7F。FAPA分组还包括第二八进制数，该第二八进制数指示分组是一系列分组中的第一分组还是最后分组。FAPA分组还包括指示FAPA分组的序列索引的第三八进制数(HB2)。
由于将在第二数据流405的第二帧415B中编码的信息包括在第一数据流400的第一帧410A中，因此减少了生成和发送第二数据流的等待时间。即，可以提前一帧执行包括在VSIF 420中的信息的重新编码或重新分组。
此外，D-HDR被编码在VSIF 420中并且第二数据流是HDMI 2.1流的示例，将D-HDR分组重新编码到HDMI 2.1数据流的FAPA 470中允许D-HDR分组以HDMI 2.1标准指定的扩展元数据分组(EM)传送。
图5A示出了根据一个实施方式的桥电路的框图。图5A的框图被配置为在HDMI 2.0源信号和HDMI 2.1目的地信号之间桥接。桥接电路500包括接收器电路510、解分组器电路520、缓冲器电路530、分组器电路540和发送器电路550。
根据一个实施方式，接收器电路510接收以符合第一多媒体通信标准的方式编码的源数据流590，并将数据流分成数据流中包括的每个特定分量。例如，接收器510接收源HDMI 2.0数据流，并将源数据流分成视频分量560、音频分量570和数据分量580。
解分组器520接收数据分量580并解码包括在数据流中的数据。在一些实施例中，解分组器520识别具有特定属性的分组并提取具有特定属性的分组。例如，解分组器520识别数据流的数据分量580部分中的在分组的报头部分中具有特定值的数据分组。在一个实施例中，解分组器从数据流的视频帧中提取描述针对后续视频帧的传递函数的信息。然后，解分组器将包括在所识别的分组中的信息存储在缓冲器530中。在一些实施例中，未存储在缓冲器530中的其它分组被直接提供给分组器540。
缓冲器530存储从解分组器520接收的数据。在一些实施例中，缓冲器530是静态随机存取存储器(SRAM)模块。在其它实施例中，缓冲器530是被设计成存储由第二多媒体通信标准支持的特定特性的数据的寄存器。例如，缓冲器530可以被设计成存储D-HDR元数据。
分组器电路540接收存储在缓冲器530中的数据，并生成符合第二多媒体通信标准(例如，HDMI 2.1标准)的分组。由分组器540接收的存储在缓冲器530中的数据是从源数据流的前一帧解分组的。在一些实施例中，分组器540还从解分组器520接收数据分组并生成符合第二多媒体通信标准的分组。从解分组器520接收的数据分组被从源数据流的当前帧解分组。
发送器电路550接收来自接收器510的视频数据560和音频数据570以及来自分组器540的数据分组，并生成符合第二多媒体通信标准的目的地数据流595。例如，发送器电路550生成符合HDMI 2.1标准的目的地数据流595。发送器电路550可以是将视频、音频和来自分组器电路540的分组混合在一起的音频视频混合器。然后，发送器电路550发送以符合第二多媒体通信标准的方式编码的数据流595。
在一些实施例中，如图5B所示，发送器电路550直接从解分组器520而不是从分组器540接收未存储在缓冲器530中的数据分量。在该实施例中，分组器540生成要被延迟一帧的分组，并将所生成的分组提供给发送器电路550以生成完整视频帧。
图6示出了用于将符合第一多媒体通信标准的第一数据流转换为符合第二多媒体通信标准的第二数据流的过程的流程图。符合第一多媒体通信标准的第一数据流被接收610。第一数据流包括第一输入视频帧的第一视频数据、第二输入视频帧的第二视频数据以及描述针对第二视频数据的传递函数的信息，该信息包括在第一输入视频帧的视频消隐间隔中。
描述针对第二视频数据的传递函数的信息被从第一输入视频帧的视频消隐间隔提取620。在一些实施例中，通过识别包括在第一帧的视频消隐间隔中的分组的报头中的特定值来识别描述针对第二视频数据的传递函数的信息。
符合第二多媒体通信标准的第二数据流被生成630。第二数据流包括第一出站视频帧中的第一视频数据、第二出站视频帧中的第二视频数据以及描述第二出站视频帧的视频消隐间隔中针对第二视频数据的传递函数的提取信息。最后，将所生成的第二数据流发送640到目的地设备。
其他配置考虑
贯穿本说明书，多个实例可以实现描述为单个实例的组件、操作或结构。尽管一个或多个方法的各个操作被示出并描述为单独的操作，但是各个操作中的一个或多个可以被并发地执行，并且不需要按照所示的顺序执行操作。在示例配置中呈现为单独组件的结构和功能可以实现为组合的结构或组件。类似地，呈现为单个组件的结构和功能可以实现为单独的组件。这些和其它变化、修改、添加和改进落入本文主题的范围内。
本文将某些实施例描述为包括逻辑或多个组件、模块或机构。模块可以构成软件模块(例如，体现在机器可读介质上或传输信号中的代码)或硬件模块。硬件模块是能够执行某些操作的有形单元，并且可以以某种方式配置或布置。在示例实施例中，一个或多个计算机系统(例如，独立的、客户机或服务器计算机系统)或计算机系统的一个或多个硬件模块(例如，处理器或处理器组)可以由软件(例如，应用程序或应用程序部分)配置为操作以执行本文所述的某些操作的硬件模块。
在各种实施例中，可以机械地或电子地实现硬件模块。例如，硬件模块可以包括永久配置(例如，作为专用处理器，诸如现场可编程门阵列(FPGA)或专用集成电路(ASIC))以执行某些操作的专用电路或逻辑。硬件模块还可以包括由软件临时配置以执行某些操作的可编程逻辑或电路(例如，如包含在通用处理器或其它可编程处理器内的)。应当理解，在专用和永久配置的电路中，或者在临时配置的电路(例如，由软件配置的)中机械地实现硬件模块的决策可以由成本和时间考虑驱动。
本文描述的示例方法的各种操作可以至少部分地由临时配置(例如，通过软件)或永久配置以执行相关操作的一个或多个处理器执行。不管是临时配置还是永久配置，这样的处理器可以构成操作以执行一个或多个操作或功能的处理器实现的模块。在一些示例实施例中，本文所提及的模块可以包括处理器实现的模块。
一个或多个处理器还可以操作以支持在“云计算”环境中或作为“软件即服务”(SaaS)的相关操作的性能。例如，至少一些操作可以由一组计算机(作为包括处理器的机器的示例)来执行，这些操作可以经由网络(例如，互联网)和经由一个或多个适当的接口(例如，应用程序接口(API))来访问。
某些操作的性能可以分布在一个或多个处理器之间，不仅驻留在单个机器内，而且部署在多个机器上。在一些示例实施例中，一个或多个处理器或处理器实现的模块可以位于单个地理位置中(例如，在家庭环境、办公室环境或服务器群内)。在其它示例实施例中，一个或多个处理器或处理器实现的模块可以分布在多个地理位置上。
本说明书的一些部分以对存储为机器存储器(例如，计算机存储器)内的比特或二进制数字信号的数据的操作的算法或符号表示的方式呈现。这些算法或符号表示是数据处理领域的普通技术人员所使用的技术的示例，以将其工作的实质传达给本领域的其他技术人员。如本文所使用的，“算法”是导致期望结果的操作或类似处理的自洽序列。在这种情况下，算法和操作涉及对物理量的物理操作。典型地，但不是必须地，这些量可以采取能够由机器存储、访问、传输、组合、比较或以其它方式操纵的电、磁或光信号的形式。有时，主要出于共同使用的原因，使用诸如“数据”、“内容”、“比特”、“值”、“元素”、“符号”、“字符”、“术语”、“数字”，“数字的”等词语来指代这样的信号是方便的。然而，这些词语仅仅是方便的标记，并将与适当的物理量相关联。
除非具体地另有说明，本文中使用诸如“处理”、“计算”、“测算”、“确定”、“呈现”、“显示”等词语的讨论可以指的是机器(例如计算机)的动作或过程，该机器(例如计算机)操作或转换表示为一个或多个存储器(例如易失性存储器、非易失性存储器或其组合)、寄存器或接收、存储、发送或显示信息的其它机器组件内的物理(例如电子，磁或光)量的数据。
如本文所使用的，任何对“一个实施例”或“实施例”的提及意味着结合实施方式描述的特定元件、特征、结构或特性包括在至少一个实施例中。“在一个实施例中”这句话在说明书的各个地方出现，并不一定都是指同一个实施例。
可以使用表达“耦合的”和“连接的”以及它们的衍生词来描述一些实施例。例如，可以使用术语“耦合”来描述一些实施例，以指示两个或更多个元件直接物理或电接触。然而，术语“耦合的”还可以意味着两个或更多个元件不彼此直接接触，但仍然彼此协作或交互。实施例在此上下文中不受限制。
如本文所使用的，术语“包括”、“包含”、“含有”、“具有”或其任何其它变体旨在覆盖非排他性包含。例如，包括元素列表的过程、方法、制品或装置不一定仅限于那些元素，而是可以包括未明确列出的或这种过程、方法、制品或装置固有的其他元素。此外，除非有相反的明确说明，“或”指的是包含性的或，而不是排他性的或。例如，条件A或B满足下列任一项：A为真(或存在)而B为假(或不存在)、A为假(或不存在)而B为真(或存在)、以及A和B均为真(或存在)。
此外，使用“一”或“一个”来描述本文中的实施例的元件和组件。这样做仅仅是为了方便和给出本发明的一般意义。本说明书应理解为包括一个或至少一个，并且单数也包括复数，除非显然其含义不同。
在阅读本公开之后，本领域技术人员将理解通过本文所公开的原理的另外的可选结构和功能设计。因此，虽然已经图示和描述了特定的实施例和应用，但是应当理解，所公开的实施例不限于本文公开的精确结构和组件。在不脱离所附权利要求书中限定的精神和范围的情况下，可以对本文公开的方法和设备的布置、操作和细节进行各种修改、改变和变化，这对本领域技术人员来说是显而易见的。

Claims (19)

1.一种在第一设备中操作的方法，所述方法包括：
接收符合第一多媒体通信标准的第一数据流，所述第一数据流包括：
第一输入视频帧的第一视频数据，
第二输入视频帧的第二视频数据，
描述针对所述第二视频数据的颜色信息的传递函数的信息，所述信息被包括在所述第一输入视频帧的视频消隐间隔中；
从所述第一数据流提取描述针对所述第二视频数据的传递函数的信息；
生成符合第二多媒体通信标准的第二数据流，所述第二数据流包括：
第一出站视频帧中的所述第一视频数据，
第二出站视频帧中的所述第二视频数据，以及
所提取的描述针对所述第二视频数据的颜色信息的所述传递函数的信息，所提取的信息被包括在所述第二出站视频帧的视频消隐间隔中；以及
将所述第二数据流发送至第二设备。
2.根据权利要求1所述的方法，其中所述第一多媒体通信标准是高清多媒体接口(HDMI)2.0标准，并且所述第二多媒体通信标准是HDMI 2.1标准。
3.根据权利要求1所述的方法，其中在所述第一入站消隐间隔中的所提取的信息包括针对所述第二视频数据的动态高动态范围(D-HDR)元数据。
4.根据权利要求1所述的方法，其中所述第一数据流以第一比特率被接收，并且所述第二数据流以高于所述第一比特率的第二比特率被发送。
5.根据权利要求1所述的方法，其中所提取的信息用于由所述第二多媒体通信标准支持且不需要由所述第一多媒体通信标准支持的特征。
6.根据权利要求1所述的方法，其中：
在所述第一数据流中，所述信息被包括在所述第一输入视频帧中先于所述第一视频数据的所述第一输入视频帧的垂直消隐间隔中，或者所述信息被包括在所述第一输入视频帧的水平消隐间隔中，并且
在所述第二数据流中，所提取的信息被包括在所述第二输出视频帧中先于所述第二视频数据的所述第二输出视频帧的垂直消隐间隔中。
7.根据权利要求1所述的方法，其中，
描述针对所述第二视频数据的颜色信息的所述传递函数的所述信息在所述第一数据流中的一个或多个分组中被发送，所述一个或多个分组具有预定义报头，并且
所提取的描述针对所述第二视频数据的颜色信息的所述传递函数的信息在所述第二数据流中的一个或多个分组中被发送，所述第二数据流中的一个或多个分组具有与所述第一数据流中的一个或多个分组的预定义报头不同的预定义报头。
8.根据权利要求1所述的方法，其中所提取的描述针对所述第二视频数据的颜色信息的所述传递函数的信息在所述第二数据流的所述垂直消隐间隔的第一半中被发送。
9.一种用于在符合第一标准的第一数据流和符合第二标准的第二数据流之间进行转换的设备，所述设备包括：
接收器电路，用于接收符合所述第一标准的所述第一数据流，所述第一数据流包括：
第一输入视频帧的第一视频数据，
第二输入视频帧的第二视频数据，
描述针对所述第二视频数据的颜色信息的传递函数的信息，所述信息被包括在所述第一输入视频帧的视频消隐间隔中；
解分组器电路，用于从所述第一数据流提取所述描述针对所述第二视频数据的颜色信息的传递函数的信息；以及
发送器电路，用于生成符合第二多媒体通信标准的第二数据流，所述第二数据流包括：
第一出站视频帧中的所述第一视频数据，
第二出站视频帧中的所述第二视频数据，以及
所提取的描述描述针对所述第二视频数据的颜色信息的所述传递函数的所述信息的信息，所提取的信息被包括在所述第二出站视频帧的视频消隐间隔中。
10.根据权利要求9所述的设备，其中所述解分组器电路通过在所述第一消隐间隔中识别具有预定格式的一个或多个入站数据分组来提取所述描述针对所述第二视频数据的颜色信息的所述传递函数的信息。
11.根据权利要求10所述的设备，还包括：
缓冲器，用于存储所提取的描述针对所述第二视频数据的颜色信息的所述传递函数的信息。
12.根据权利要求11所述的设备，还包括：
分组器电路，被配置为生成针对所述第二出站视频帧的数据分组，所生成的数据分组符合所述第二多媒体通信标准，并且基于描述存储在所述缓冲器中的针对所述第二视频数据的颜色信息的传递函数的所述信息而被生成。
13.根据权利要求9所述的设备，其中所述描述针对所述第二视频数据的颜色信息的传递函数的所述信息被包括在对应于所述第一数据流的所述第一输入帧的消隐间隔中，以及被包括在对应于所述第二数据流的所述第二输入视频帧的消隐间隔中。
14.根据权利要求9所述的设备，其中所述第一多媒体通信标准是高清多媒体接口(HDMI)2.0标准，并且所述第二多媒体通信标准是HDMI 2.1标准。
15.根据权利要求9所述的设备，其中所述第一入站消隐间隔中的所提取的信息包括针对所述第二视频数据的动态高动态范围(D-HDR)元数据。
16.根据权利要求9所述的设备，其中所述第一数据流以第一比特率被接收，并且所述第二数据流以高于所述第一比特率的第二比特率被发送。
17.根据权利要求9所述的设备，其中所提取的信息用于由所述第二多媒体通信标准支持且不需要由所述第一多媒体通信标准支持的特征。
18.根据权利要求9所述的设备，其中：
在所述第一数据流中，所述信息被包括在所述第一输入视频帧中先于所述第一视频数据的所述第一输入视频帧的垂直消隐间隔中，或者所述信息被包括在所述第一输入视频帧的水平消隐间隔中，并且
在所述第二数据流中，所提取的信息被包括在所述第二输出视频帧中先于所述第二视频数据的所述第二输出视频帧的垂直消隐间隔中。
19.根据权利要求9所述的设备，其中
描述针对所述第二视频数据的颜色信息的所述传递函数的所述信息在所述第一数据流中的一个或多个分组中被发送，所述一个或多个分组具有预定义报头，并且
所提取的描述针对所述第二视频数据的颜色信息的所述传递函数的信息在所述第二数据流中的一个或多个分组中被发送，所述第二数据流中的一个或多个分组具有与所述第一数据流中的一个或多个分组的预定义报头不同的预定义报头。
CN201980008857.9A 2018-01-22 2019-01-18 多媒体通信桥接器 Active CN111630867B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110381042.4A CN113114967B (zh) 2018-01-22 2019-01-18 多媒体通信桥接器

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/876,902 US10645199B2 (en) 2018-01-22 2018-01-22 Multimedia communication bridge
US15/876,902 2018-01-22
PCT/US2019/014356 WO2019144051A1 (en) 2018-01-22 2019-01-18 Multimedia communication bridge

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110381042.4A Division CN113114967B (zh) 2018-01-22 2019-01-18 多媒体通信桥接器

Publications (2)

Publication Number Publication Date
CN111630867A true CN111630867A (zh) 2020-09-04
CN111630867B CN111630867B (zh) 2021-04-27

Family

ID=67300323

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202110381042.4A Active CN113114967B (zh) 2018-01-22 2019-01-18 多媒体通信桥接器
CN201980008857.9A Active CN111630867B (zh) 2018-01-22 2019-01-18 多媒体通信桥接器

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202110381042.4A Active CN113114967B (zh) 2018-01-22 2019-01-18 多媒体通信桥接器

Country Status (4)

Country Link
US (2) US10645199B2 (zh)
EP (1) EP3744105B1 (zh)
CN (2) CN113114967B (zh)
WO (1) WO2019144051A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI831517B (zh) * 2022-12-14 2024-02-01 瑞昱半導體股份有限公司 電子裝置與相關的影像處理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101076130A (zh) * 2006-05-16 2007-11-21 索尼株式会社 通信方法及系统、传送方法及设备、接收方法及设备
CN103947183A (zh) * 2011-06-30 2014-07-23 埃科360公司 用于嵌入式应用的方法和装置
CN105052137A (zh) * 2013-01-24 2015-11-11 美国莱迪思半导体公司 视频数据中的辅助数据编码
US20160366470A1 (en) * 2015-06-09 2016-12-15 Qualcomm Incorporated Tunneling hdmi data over wireless connections
US9769417B1 (en) * 2014-11-05 2017-09-19 Lattice Semiconductor Corporation Metadata transfer in audio video systems

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9930787D0 (en) * 1999-12-30 2000-02-16 Koninkl Philips Electronics Nv Method and apparatus for convrerting data streams
JP5011308B2 (ja) * 2005-12-23 2012-08-29 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ データストリームの分割
US20070230461A1 (en) * 2006-03-29 2007-10-04 Samsung Electronics Co., Ltd. Method and system for video data packetization for transmission over wireless channels
US7818466B2 (en) * 2007-12-31 2010-10-19 Synopsys, Inc. HDMI controller circuit for transmitting digital data to compatible audio device using address decoder where values are written to registers of sub-circuits
US8090030B2 (en) * 2008-01-04 2012-01-03 Silicon Image, Inc. Method, apparatus and system for generating and facilitating mobile high-definition multimedia interface
US8209733B2 (en) * 2008-05-28 2012-06-26 Broadcom Corporation Edge device that enables efficient delivery of video to handheld device
US8325757B2 (en) * 2009-12-17 2012-12-04 Silicon Image, Inc. De-encapsulation of data streams into multiple links
US8422858B2 (en) * 2010-01-21 2013-04-16 Robert Paul Morris Methods, systems, and computer program products for coordinating playing of media streams
US9516372B2 (en) * 2010-12-10 2016-12-06 Lattice Semiconductor Corporation Multimedia I/O system architecture for advanced digital television
US9412330B2 (en) * 2011-03-15 2016-08-09 Lattice Semiconductor Corporation Conversion of multimedia data streams for use by connected devices
US8923326B2 (en) 2012-02-23 2014-12-30 Cisco Technology, Inc. High-definition multimedia interface copper adapter
CN105531687B (zh) * 2013-05-16 2018-01-02 美国莱迪思半导体公司 利用转换最小化差分信令(tmds)编码来编码用于经通信接口传输的保护频带数据
US20150015782A1 (en) * 2013-07-12 2015-01-15 Vixs Systems, Inc. Video processing device for reformatting an audio/video signal and methods for use therewith
CN105594204B (zh) 2013-10-02 2017-08-15 杜比实验室特许公司 通过hdmi传输显示管理元数据
EP3185572B1 (en) * 2014-08-19 2023-03-08 Panasonic Intellectual Property Management Co., Ltd. Transmission method, reproduction method and reproduction device
KR101724342B1 (ko) 2015-03-20 2017-04-10 주식회사 와이젯 인터페이스 규격에 상관없는 무선 인터페이스 장치
CN104869342A (zh) * 2015-06-09 2015-08-26 柳州桂通科技股份有限公司 一种多媒体多信息同步重现的方法及其应用
CN105430296A (zh) * 2015-11-26 2016-03-23 深圳市捷视飞通科技股份有限公司 一种高清视频多画面分割裂屏显示的解决方法
CN106603953A (zh) * 2016-09-28 2017-04-26 杭州青杉奇勋科技有限公司 一种hdmi接口转化成mipi接口的视频显示方法及系统
US11183147B2 (en) * 2016-10-07 2021-11-23 Sony Semiconductor Solutions Corporation Device and method for processing video content for display control

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101076130A (zh) * 2006-05-16 2007-11-21 索尼株式会社 通信方法及系统、传送方法及设备、接收方法及设备
CN103947183A (zh) * 2011-06-30 2014-07-23 埃科360公司 用于嵌入式应用的方法和装置
CN105052137A (zh) * 2013-01-24 2015-11-11 美国莱迪思半导体公司 视频数据中的辅助数据编码
US9769417B1 (en) * 2014-11-05 2017-09-19 Lattice Semiconductor Corporation Metadata transfer in audio video systems
US20160366470A1 (en) * 2015-06-09 2016-12-15 Qualcomm Incorporated Tunneling hdmi data over wireless connections

Also Published As

Publication number Publication date
EP3744105B1 (en) 2023-11-22
CN113114967B (zh) 2024-01-02
CN113114967A (zh) 2021-07-13
US20190230196A1 (en) 2019-07-25
EP3744105A1 (en) 2020-12-02
WO2019144051A1 (en) 2019-07-25
EP3744105A4 (en) 2021-11-24
US11451648B2 (en) 2022-09-20
CN111630867B (zh) 2021-04-27
US20200236200A1 (en) 2020-07-23
US10645199B2 (en) 2020-05-05

Similar Documents

Publication Publication Date Title
US7557815B2 (en) System and method for producing a video signal
US8072449B2 (en) Workstation for processing and producing a video signal
US10574937B2 (en) Method for high-definition image processing, method for high-definition image playback and related apparatus and system
EP3685575B1 (en) Display apparatus, method for controlling the same and image providing apparatus
US10638139B2 (en) Encoding device, encoding method, sending device, sending method, receiving device, receiving method, and program
US11151747B2 (en) Creating video augmented reality using set-top box
US20080259011A1 (en) Image output apparatus and image display apparatus
CN111630867B (zh) 多媒体通信桥接器
US7382375B2 (en) Video card with interchangeable connector module
CN106464946B (zh) 媒体流数据与控制参数同步
US6642968B1 (en) System and method for frame rate matching
KR100662459B1 (ko) Ｈｄｍｉ 수신기 및 전송기 개발 장치 및 그 방법
US6919897B1 (en) System and method for pre-processing a video signal
US20180255264A1 (en) Electronic apparatus for playing substitutional advertisement and controlling method thereof
TWI358046B (en) Method of decompressing a set of subsampled image
CN113269785A (zh) 图像处理方法、设备、存储介质及程序产品
KR20170059757A (ko) 영상 신호 송신 장치, 그의 영상 신호 송신 방법, 영상 신호 수신 장치 및 그의 영상 신호 수신 방법
US20160057436A1 (en) Video processing apparatus and video display apparatus
CN114928730A (zh) 图像处理方法和图像处理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant