TWI587695B - 多媒體系統、多媒體裝置及其方法 - Google Patents

多媒體系統、多媒體裝置及其方法 Download PDF

Info

Publication number
TWI587695B
TWI587695B TW100144722A TW100144722A TWI587695B TW I587695 B TWI587695 B TW I587695B TW 100144722 A TW100144722 A TW 100144722A TW 100144722 A TW100144722 A TW 100144722A TW I587695 B TWI587695 B TW I587695B
Authority
TW
Taiwan
Prior art keywords
audio
video data
data stream
input
video
Prior art date
Application number
TW100144722A
Other languages
English (en)
Other versions
TW201242339A (en
Inventor
崔宏
金大卿
尹朱煥
楊又升
金榮一
艾利克斯 雪維
提摩西 維林
Original Assignee
萊迪思半導體公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 萊迪思半導體公司 filed Critical 萊迪思半導體公司
Publication of TW201242339A publication Critical patent/TW201242339A/zh
Application granted granted Critical
Publication of TWI587695B publication Critical patent/TWI587695B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

多媒體系統、多媒體裝置及其方法
本發明的實施例一般而言有關於電子元件的領域，特定而言係有關於先進數位電視之多媒體輸出入系統架構。
為了處理來自多種輸出入介面，包含例如乙太網路、通用序列匯流排(USBTM，Universal Serial Bus)、高清晰多媒體介面(HDMITM，High-Definition Multimedia Interface)、數位視訊介面(DVITM，Digital Visual Interface)及舊有類比埠等介面，之多種視訊及音訊串流的大量資料，先進數位電視系統的需求越趨增加。
此樣電視之高運算能力需求已驅使音訊/視訊處理核心之製造商製造出例如使用深次微米(deep sub-micron)製程將更多的邏輯整合於一已知晶粒尺寸內之元件。隨著處理核心的複雜度增加，可能需要更深層之次微米製程。
然而，每當目標製程改變，對於內含於處理核心內之現存輸出入介面電路亦需要製程遷移工作。此類製程不但對於佈局重繪(layout redrawing)會產生高額之工程成本，而且對於耗時的元件驗證程序(validation processes)亦是如此。
為避免追求更深層製程時所遭遇之輸出入介面電路製程遷移，電視製造商可利用晶片外(off-chip)輸出入介面方案並利用分離之輸出入晶片，以取代將輸出入介面區塊整合於單一處理核心晶片內。
本發明的實施例一般而言係針對先進數位電視之多媒體輸出入系統架構。
於本發明之第一觀點中，多媒體系統之一實施例包含一輸出入控制晶片，上述輸出入控制晶片包含一個或以上之音訊/視訊次處理引擎，用以處理一個或以上之資料串流；一處理核心晶片，用以處理資料，上述資料包含從上述輸出入控制晶片接收之音訊/視訊資料；以及一個或以上之共享式輸出入通道，用以在上述輸出入控制晶片與上述處理核心晶片之間傳送資料。
本發明的實施例一般而言係針對先進數位電視之多媒體輸出入系統架構。
於先進數位電視系統的傳統輸出入系統架構中，分離之輸出入晶片係以並聯方式連接至處理核心晶片，以支援多種輸出入埠。此架構係為直接，但對於處理核心晶片會產生高額之製造成本，乃因會增加以接腳對接腳(pin-to-pin)方式連接所有輸出入晶片所需要之接腳數(pin count)。
於某些實施例中，一裝置或系統包含一輸出入控制晶片，其與一處理核心晶片耦合，上述晶片透過一個或以上之共享輸出入通道進行通訊。於某些實施例中，系統之輸出入介面係整合於單一輸出入控制晶片內。於某些實施例中，輸出入控制晶片係操作成將多種資料串流傳輸中之某些資料流量加以降低，以減少輸出入控制晶片與處理核心晶片之間的資料流量。
第一圖係顯示先進數位電視系統之輸出入系統架構的一實施例。於某些實施例中，系統架構100包含二個晶片組：處理核心晶片180與輸出入控制晶片110。於某些實施例中，上述二晶片透過高效能之共享式輸出入通道(high-performance shared I/O channel or channels)175與彼此進行通訊。
於某些實施例中，所有輸出入介面電路整合於單一輸出入控制晶片110內。輸出入介面區塊係以內部方式連接至一晶片上匯流排(on-chip bus)系統並共享可用頻寬。於某些實施例中，輸出入控制晶片110可包含一多重輸入高清晰多媒體介面(HDMI)/數位視訊介面(DVI)埠處理器135、一類比轉數位轉換器145、一乙太網路介面以及一通用序列匯流排集線器(未圖示)、一音訊/視訊次處理引擎125、一介面橋接器165以及其他元件。
於某些實施例中，介面橋接器165將匯流排處置(bus transactions)透過晶片外之共享式輸出入通道175傳送至處理核心晶片180或透過晶片外之共享式輸出入通道175從處理核心晶片180傳送匯流排處置。共享式輸出入通道175可為標準介面或專屬介面通道，且可為單一介面或由多個介面包含多個異質介面所組成。於某些實施例中，第一圖所示之系統架構100可產生與多個資料串流有關之通訊瓶頸(communication bottleneck)。於某些實施例中，為了解決此問題，在輸出入控制晶片內可提供足夠的效能，以適應所有的介面頻寬。
於某些實施例中，藉由將接腳數最小化且同時支援多種輸出入介面，系統架構100之共享式通訊可用以減少製造成本。於某些實施例中，音訊/視訊次處理引擎125可整合於輸出入控制晶片110內。整合此音訊/視訊次處理引擎125可降低需要被傳送至共享式輸出入通道175上之通訊資料的量，上述通訊資料的傳送係藉由資料壓縮及改變大小(resizing)進行且係在該資料被傳送至處理引擎之前進行。再者，包含此音訊/視訊次處理引擎125可操作成藉由分配運算負荷至輸出入控制晶片110而卸載處理核心晶片180。
第二圖係顯示埠處理器之一實施例。如第二圖所示，埠處理器200，例如高清晰多媒體介面/數位視訊介面埠處理器，包含資料解密元件210，例如用以解密由高頻寬數位內容保護(HDCP，High-bandwidth Digital Content Protection)所加密之資料、多工器例如圖中所示之主要多工器215及次要多工器220用以多工處理多種高清晰度音訊/視訊串流，以及尺寸縮小或壓縮元件225用以產生一個或以上之音訊/視訊資料串流230。於某些實施例中，類比轉數位轉換器，例如第一圖所示之類比轉數位轉換器145，將舊有類比音訊/視訊輸入資料串流轉換成平行之數位資料封包，而音訊/視訊次處理引擎，例如第一圖所示之音訊/視訊次處理引擎125，藉由在傳送資料至共享式輸出入通道上之前處理音訊/視訊串流而卸載處理核心晶片(第一圖中之處理核心晶片180)之運算重擔。
於某些實施例中，每一區塊(例如音訊/視訊次處理引擎、高清晰多媒體介面/數位視訊介面埠處理器、類比轉數位轉換器、乙太網路介面及通用序列匯流排集線器)係連接至介面橋接器(第一圖中之介面橋接器165)。於某些實施例中，如同記憶體映射輸出入(memory mapped IO)方法或透過其他方法，處理核心晶片180中之主要處理器可控制輸出入控制晶片中之每一區塊。於某些實施例中，當使用記憶體映射輸出入方法，存在於介面橋接器(第一圖中之介面橋接器165)後方之每一區塊係被指定一互相排斥的位址範圍。於某些實施例中，處理核心晶片可利用記憶體讀/寫操作來控制並存取每一輸出入區塊。於某些實施例中，對於緊急資料串流輸出入(time-critical data streaming I/O)，直接記憶體存取(Direct Memory Access，DMA)可在主要處理器的最小介入之下傳送資料串流。
第三圖係顯示介面橋接器的某些實施例。於某些實施例中，介面橋接器300或305(可為第一圖中之介面橋接器165)從內部介面區塊接收結果串流以作為輸入。於某些實施例中，在經接收之資料處理完成後，介面橋接器300-305透過一個或以上之共享式輸出入通道(第一圖中之共享式輸出入通道175)將結果傳送至處理核心晶片(第一圖中之處理核心晶片180)。
於某些實施例中，當同步傳送多種音訊/視訊串流時，可有兩種模式：第一模式(模式一)係顯示成與介面橋接器300有關，其具有利用空白填塞(blank stuffing)之單一串流，而第二模式(模式二)係顯示成與介面橋接器305有關，其具有以仲裁處理之多個串流。
於某些實施例中，於單一串流空白填塞之第一模式中，一主要音訊/視訊串流可利用介面橋接器300加以傳送。為了透過串流混合器310與主要串流同步傳送其他次要串流，主要串流之空白區域係以其他次要串流資料加以填塞。
於某些實施例中，於具有以仲裁處理之多個串流的第二模式中，每一輸入串流在開始其處置之前從仲裁器320獲得一同意。
於某些實施例中，每一模式係基於時間共享機制，以共享共享式輸出入通道的頻寬。由於一個或以上之共享式輸出入通道的頻寬受限，故一些經傳送之音訊/視訊串流的資料尺寸可能會被限制。於某些實施例中，埠處理器及音訊/視訊次處理引擎可操作成實施下列功能中之一者或以上者：尺寸縮小(downscaling)、壓縮、圖框率(frame-rate)控制及其他功能以減少傳送資料的量。
然而，本發明之實施例並不限於任何特定架構，且可利用若干使用模型(usage models)中之其中一者連接輸出入介面及卸載處理核心晶片之處理負荷。
於第一使用實例中，於一輸出入架構例如第一圖所示之輸出入架構中，多種音訊/視訊串流，例如高清晰多媒體介面/數位視訊介面串流及類比音訊/視訊串流，係分別藉由高清晰多媒體介面/數位視訊介面埠處理器及類比轉數位轉換器轉換成數位平行格式。於某些實施例中，串流係以一連串之資料封包透過共享式輸出入通道傳送至處理核心晶片。於某些實施例中，處理核心晶片接著暫時將串流儲存於內部記憶體內並處理該串流以產生最終音訊/視訊串流。於此使用實例中，輸出入控制晶片可主要操作成將資料串流傳遞至共享式輸出入通道上，而大部分之音訊/視訊操作可由處理核心晶片實施。
於第二使用實例中，同步傳送多種高清晰音訊/視訊資料串流可能需要過多頻寬以致於不能容許傳遞所有資料串流至同一個共享式輸出入通道上。於某些實施例中，一個或以上之資料串流可以精簡格式(reduced format)進行傳遞，而一個或以上之其他資料串流係以其原生格式進行傳遞。於某些實施例中，埠處理器及音訊/視訊次處理引擎可實施尺寸縮小、圖框率控制、壓縮或其他功能，以在將資料串流傳遞至處理核心晶片之前產生較低資料率之串流或快照。於某些實施例中，處理核心晶片接著操作成將其餘之音訊/視訊資料處理完成，例如子母畫面(picture-in-picture)混合。
於第三使用實例中，部份之音訊/視訊運算可由輸出入控制晶片內之音訊/視訊次處理引擎來實施。傳遞及處理高清晰音訊/視訊串流不但需要大量之共享式輸出入通道頻寬，還需要大量的處理核心晶片處理能力。於某些實施例中，在傳送資料串流至處理核心晶片之前，次處理引擎可壓縮資料量，並藉由壓縮、子母畫面覆蓋及提升音訊/視訊資料串流減少運算複雜度。藉由利用音訊/視訊次處理引擎的運算能力，此處所述之配置可用以卸載處理核心晶片的一些運算重擔。
於一實例中，電視收看者可能期望在單一螢幕中觀看到多個資料串流作為子母畫面，例如四個高清晰多媒體介面輸入串流。於某些實施例中，音訊/視訊次處理引擎可操作成將高清晰多媒體介面串流合併成單一資料串流。於此實例中，在共享式輸出入通道上之資料量可減少成原本的量之四分之一。此外，處理核心晶片可節省若非如此將影像合併以產生子母畫面的程序所需要之運算能力。
於第四使用實例中，其類似於前述之第三使用實例，類比轉數位轉換器之輸出係連接至高清晰多媒體介面/數位視訊介面埠處理器之輸入埠。於某些實施例中，此配置可使音訊/視訊次處理引擎得以接收類比介面以作為輸入。於一實例中，當電視收看者期望在單一螢幕上觀看到類比輸入及高清晰多媒體介面輸入作為子母畫面時，音訊/視訊次處理引擎可將高清晰多媒體介面/數位視訊介面埠處理器之結果與類比轉數位轉換器之結果結合在一起，以產生子母畫面。於某些實施例中，於此使用實例中，處理核心晶片可操作成節省產生子母畫面所需要之運算能力。
第四圖係顯示先進數位電視系統之輸出入系統架構的一實施例。系統架構400之元件係如同先前關於第一圖所敘述者。於本實施例中提供了第五使用實例，其中反向之共享式輸出入通道475係用以將音訊/視訊資料串流從處理核心晶片480傳送至輸出入控制晶片410，顯示為來自MPEG(Moving Pictures Experts Group，動態影像專家組)/H.264(亦稱為AVC(Advanced Video Coding，先進視訊編碼))解碼器的視訊460之資料串流係由多重輸入高清晰多媒體介面/數位視訊介面埠處理器135所接收。於某些實施例中，音訊/視訊次處理引擎125可用作為硬體加速器，其具有多種音訊/視訊處理功能，例如影像提升、子母畫面覆蓋以及影像壓縮/解壓縮。在運算完成後，結果資料串流係從輸出入控制晶片410傳送回處理核心晶片480，以顯示於顯示螢幕上。
於一實例中，第四圖所提供之配置可用在當電視收看者期望例如同時觀看到廣播電視頻道與高清晰多媒體介面輸入串流作為子母畫面之時。於某些實施例中，處理核心晶片之MPEG/H.264解碼器(未圖示)將數位電視(DTV，digital television)選台訊號(tuner signal)解碼並透過反向之共享式輸出入通道475將經解碼之串流傳送至輸出入控制晶片410。於某些實施例中，音訊/視訊次處理引擎125接著將此資料串流作為輸入，並將其與有關之高清晰多媒體介面資料串流合併以產生子母畫面，而所產生之資料串流係在順向之共享式輸出入通道475上傳遞回處理核心晶片480。
第五圖係顯示電子元件的一實施例。於本實施例中，某些標準且廣為人知但與本發明並不密切相關之元件並未加以顯示。於某些實施例中，元件500可為包含用於數位電視之輸出入架構的元件。
於某些實施例中，元件500包含互連結構或橫跨結構505或其他用以傳輸資料之通訊手段。上述資料可包含各種資料，包含例如音訊-視訊資料及相關之控制資料。元件500可包含處理手段例如一個或以上之處理器510，其與互連結構505耦合以用於處理資訊。處理器510可包含一個或以上之實體處理器及一個或以上之邏輯處理器。再者，處理器510之每一者可包含多處理器核心(multiple processor cores)。互連結構505係顯示為單一互連結構，以用於簡化，但可代表多個不同之互連結構或匯流排，且至此樣互連結構之元件連結可加以改變。第五圖所示之互連結構505係代表由適當之橋接器(bridges)、配接器(adapter)或控制器所連接之任何一個或以上之獨立實體匯流排、點對點連結或兩者之抽象化。互連結構505可包含例如系統匯流排、週邊元件互連(PCI，peripheral component interconnect)或第三代週邊元件互連(PCI Express，PCIe)匯流排、HT匯流排(HyperTransport)或工業標準架構(industry standard architecture，ISA)匯流排、小型電腦系統介面(small computer system interface，SCSI)匯流排、內部積體電路(inter integrated circuit，IIC，I2C)匯流排，或美國電機及電子工程師協會(Institute of Electrical and Electronics Engineers，IEEE)標準1394匯流排，有時稱為「火線」(美國電機及電子工程師協會(IEEE)於1996年8月30日所發行之“Standard for a High Performance Serial Bus”1394-1995，及其增刊(supplements))。
於某些實施例中，元件500更包含隨機存取記憶體(random access memory，RAM)或其他動態儲存裝置以作為主記憶體515，用以儲存資訊及欲由處理器510執行之指令。主記憶體515亦可用以儲存用於資料流(data streams)或子資料流(data sub-streams)之資料。隨機存取記憶體包含動態隨機存取記憶體(dynamic random access memory，DRAM)，其需要更新記憶體內容，以及靜態隨機存取記憶體(static random access memory，SRAM)，其不需要更新內容但其成本會增加。動態隨機存取記憶體(DRAM)可包含同步動態隨機存取記憶體(synchronous dynamic random access memory，SDRAM)，其包含時脈信號以控制信號，以及擴展式資料輸出動態隨機存取記憶體(extended data out dynamic random access memory，EDO DRAM)。於某些實施例中，系統之記憶體可包含某些暫存器或其他特定目的之記憶體。元件500亦可包含唯讀記憶體(read only memory，ROM)525或其他靜態儲存裝置，用以儲存靜態資訊及用於處理器510之指令。元件500可包含一個或以上之非揮發性記憶體元件(non-volatile memory elements)530，用以儲存某些元件。
資料儲存520亦可耦合至元件500之互連結構505，用以儲存資訊及指令。資料儲存520可包含磁碟或其他記憶體裝置。此樣元件可彼此結合或可為獨立元件，並可利用元件500之部份其他元件。
元件500亦可透過互連結構505耦合至輸出顯示器或展示裝置(presentation device)540。於某些實施例中，顯示器540可包含液晶顯示器(LCD，liquid crystal display)或任何其他顯示技術，用以顯示資訊或內容至終端使用者。於某些實施例中，顯示器540可包含觸控螢幕，其亦用作為至少一部分之輸入裝置。於某些實施例中，顯示器540可為或可包含音訊裝置，例如揚聲器，用以提供音訊資訊，包含電視節目之音訊部份。
一個或以上之傳送器或接收器545亦可耦合至互連結構505。於某些實施例中，元件500可包含一個或以上之埠550，用以接收或傳送資料。元件500可進一步包含一個或以上之天線555，用以透過無線電訊號，例如無線保真(Wi-Fi)網路，接收資料。
元件500亦可包含一電源裝置或系統560，其可包含電源供應器、電池、太陽能電池、燃料電池或其他用以提供或產生電力之系統或裝置。電源裝置或系統560所提供之電力可依需求分配至元件500之元件。
為說明本發明上述敘述提出了若干特定細節，以利於徹底瞭解本發明。然而，應得以領會者為，對本領域具通常知識之技藝者而言，本發明可在不需要其中的某些特定細節之下實施。於其他實例中，已知的結構及裝置係以方塊圖的形式顯示。圖中所示之元件之間可能有中間結構。此處所述或所顯示之元件可能有額外的輸入或輸出並未加以顯示或敘述。所顯示之元件或組件亦可以不同之配置方式或順序加以配置，包含任何欄位之重新排序或欄位大小之修改。
本發明可包含不同的方法。本發明之方法可藉由硬體元件加以實施或可具體實施於電腦可讀指令中，其可用以使一般用途或特定用途之處理器或編程有指令之邏輯電路實施本方法。另則，本方法可藉由硬體與軟體的結合加以實施。
部份之本發明可提供為電腦程式產品，上述電腦程式產品可包含非暫時性電腦可讀儲存媒體(non-transitory computer-readable storage medium)，其具有電腦程式指令儲存於其上，其可用以編程一電腦(或其他電子元件)以實施根據本發明之方法。電腦可讀儲存媒體可包含但不限於軟碟、光碟、唯讀光碟(compact disk read-only memory，CD-ROMs)及磁性光碟(magneto-optical disks)、唯讀記憶體(ROM)、隨機存取記憶體(RAM)、可抹除可編程唯讀記憶體(erasable programmable read-only memory，EPROMs)、可電性式抹除可編程唯讀記憶體(electrically-erasable programmable read-only memory，EEPROMs)、磁性或光學性卡片、快閃記憶體或其他類型之適於儲存電子指令之媒體/電腦可讀媒體。此外，本發明亦可下載成電腦程式產品，其中程式可從遠端電腦傳送至進行要求之電腦。
本發明之方法中的若干者係以其最基礎的形式加以敘述，但在不脫離本發明之基礎範圍下仍可加入若干方法至其任一者或從其任一者刪除若干方法，且可增加若干資訊至此處所述訊息之任一者中或從其刪減若干資訊。此領域具通常知識之技藝者應得以領會，可對本發明進一步做若干更動及配適。此處所提供之特定實施例並非用以限制本發明，而係用以說明本發明。
若敘述了「A」元件耦合至「B」元件或與其耦合，則A元件可直接耦合至B元件或透過例如C元件非直接耦合。當說明書敘述了A元件、特徵、結構、方法或特性「造成」B元件、特徵、結構、方法或特性，其係指「A」為「B」的至少一部分原因，但亦可能有至少一其他元件、特徵、結構、方法或特性協助造成「B」。若說明書指出一元件、特徵、結構、方法或特性「得」、「可能」或「可」被包含，則該特定元件、特徵、結構、方法或特性並不要求一定要被包含。若說明書指「一」元件，則其並不意指僅有一個所述元件。
本發明之實施例係為本發明之實作或實例。說明書中所提到之「一實施例」、「某些實施例」或「其他實施例」係指與實施例有關而敘述之特定特徵、結構或特性被包含於至少某些實施例中，但不一定是所有實施例。「一實施例」或「某些實施例」之若干次出現並不一定全部指向相同之實施例。應領會者為，於上述本發明之示範性實施例的敘述中，為簡化揭露內容並有助於瞭解若干進步之觀點中之一者或以上者，本發明之若干特徵有時會聚集於單一實施例、圖式或其敘述中。
100．．．系統架構
110．．．輸出入控制晶片
125．．．音訊/視訊次處理引擎
135．．．多重輸入高清晰多媒體介面/數位視訊介面埠處理器
145．．．類比轉數位轉換器
165．．．介面橋接器
175．．．共享式輸出入通道
180．．．處理核心晶片
200．．．埠處理器
210．．．資料解密元件
215．．．主要多工器
220．．．次要多工器
225．．．尺寸縮小或壓縮元件
230．．．音訊/視訊資料串流
300．．．介面橋接器
305．．．介面橋接器
310．．．串流混合器
320．．．仲裁器
400．．．系統架構
410．．．輸出入控制晶片
460．．．來自MPEG/H.264解碼器的視訊
475．．．共享式輸出入通道
480．．．處理核心晶片
500．．．元件
505．．．互連結構或橫跨結構
510．．．處理器
515．．．主記憶體
520．．．資料儲存
525．．．唯讀記憶體
530．．．非揮發性記憶體元件
540．．．輸出顯示器或展示裝置
545．．．傳送器或接收器
550．．．埠
555．．．天線
560．．．電源裝置或系統
本發明之實施例係藉由後附圖式中之實例加以說明，而非用以限制本發明。後附圖式中相似之元件符號係指類似之元件。
第一圖係顯示先進數位電視系統之輸出入系統架構的一實施例。
第二圖係顯示埠處理器之一實施例。
第三圖係顯示介面橋接器的某些實施例。
第四圖係顯示先進數位電視系統之輸出入系統架構的一實施例。
第五圖係顯示電子元件的一實施例。
100．．．系統架構
110．．．輸出入控制晶片
125．．．音訊/視訊次處理引擎
135．．．多重輸入高清晰多媒體介面/數位視訊介面埠處理器
145．．．類比轉數位轉換器
165．．．介面橋接器
175．．．共享式輸出入通道
180．．．處理核心晶片

Claims (20)

  1. 一種多媒體系統，包含：一輸出入控制晶片，該輸出入控制晶片包含：一第一輸入埠，用以從一外部來源接收一第一音訊/視訊資料串流；一介面橋接器，用以接收一第二音訊/視訊資料串流；以及一個或以上之音訊/視訊次處理引擎，用以合併該第一音訊/視訊資料串流與第二音訊/視訊資料串流以產生一合併之音訊/視訊資料串流；一處理核心晶片，用以處理從該輸出入晶片所接收之該合併之音訊/視訊資料串流以輸出一子母畫面顯示，並用以產生該第二音訊/視訊資料串流；以及一個或以上共享式通道，用以將該合併之音訊/視訊資料串流從該輸出入控制晶片傳送至該處理核心晶片並將該第二音訊/視訊資料串流從該處理核心晶片傳送至該輸出入控制晶片；其中該介面橋接器透過該一個或以上之共享式輸出入通道從該處理核心晶片接收該第二音訊/視訊資料串流，且其中該介面橋接器進一步透過該一個或以上之共享式輸出入通道將該合併之音訊/視訊資料串流從該一個或以上音訊/視訊次處理引擎傳送至該處理核心晶片。
  2. 如請求項1所述之多媒體系統，其中該輸出入控制晶片 更包含一埠處理器，用以從該外部來源接收該第一音訊/視訊資料串流及從一類比轉數位轉換器接收一數位音訊/視訊資料串流，該埠處理器用以將一主要音訊/視訊資料串流輸出至一音訊/視訊次處理引擎及將一原始或成比例之音訊/視訊資料串流輸出至該介面橋接器，其中該介面橋接器進一步組態以透過該一個或以上共享式輸出入通道將該原始或成比例之音訊/視訊資料串流輸出至該處理核心晶片。
  3. 如請求項2所述之多媒體系統，其中該輸出入控制晶片更包含一類比轉數位轉換器，用以將一個類比音訊/視訊資料串流轉換成該數位音訊/視訊資料串流。
  4. 如請求項2所述之多媒體系統，其中該音訊/視訊次處理引擎經組態以合併該主要音訊/視訊資串流與該第二音訊/視訊資料串流以產生該合併之音訊/視訊資料串流。
  5. 如請求項2所述之多媒體系統，其中該埠處理器為高清晰多媒體介面/數位視訊介面相容處理器。
  6. 一種用於多媒體系統之輸出入控制晶片，經操作以同時處理二個或以上音訊/視訊資料串流至一處理核心晶片，該輸出入控制晶片包含： 一第一輸入埠，用以從一外部來源接收一第一音訊/視訊資料串流；一介面橋接器，耦合至該一個或以上共享式輸出入通道，用以透過該一個或以上共享式輸出入通道從該處理核心晶片接收一第二音訊/視訊資料串流；複數個輸出入介面區塊包含：一埠處理器，用以接收該第一音訊/視訊資料串流與該第二音訊/視訊資料串流及用以輸出包含該第一及第二音訊/視訊資料之一主要音訊/視訊資料串流及一原始或成比例之數位音訊/視訊資料串流；以及一個或以上音訊/視訊次處理引擎，用以從該埠處理器接收該主要音訊/視訊資料串流及用以合併從該埠處理器接收之該主要音訊/視訊資料串流之該第一與該第二音訊/視訊資料串流，成為一合併之音訊/視訊資料串流；其中該合併之音訊視訊資料串流包含該第一與第二音訊/視訊資料串流之一子母畫面顯示；其中該介面橋接器經組態以從該一個或以上訊/視訊次處理引擎接收該合併之音訊/視訊資料處理串流及從該埠處理器接收該原始或成比例之訊/視訊資料串流並透過該一個或以上共享式輸出入通道傳送該合併之訊/視訊資料串流至該處理核心晶片做更進一步之處理；其中該介面橋接器係組態以操作於一第一模式或一第 二模式；其中當操作於該第一模式時，該介面橋接器從該原始或成比例音訊/視訊資料串流中以次串流資料填塞該合併之音訊/視訊資料串流之空白區域；以及其中當操作於該第二模式時，該橋接器適用仲裁處裡以在該合併之音訊/視訊資料串流與該原始或成比例之音訊/視訊串流中仲裁。
  7. 如請求項6所述之輸出入控制晶片，其中該輸出入介面區塊更包含一類比轉數位轉換器，用以將一類比音訊/視訊資料串流轉換至一數位音訊/視訊資料串流以由該埠處理器處理。
  8. 如請求項6所述之輸出入控制晶片，其中該埠處理器為高清晰多媒體介面/數位視訊介面相容處理器。
  9. 一種多媒體方法，包含：在一輸出入控制晶片之一埠處理器接收二個或以上數位音訊/視訊資料串流，該二個或以上音訊/視訊資料串流包括一第一音訊/視訊資料串流與一第二音訊/視訊資料串流；將該二個或以上音訊/視訊資料串流同步地提供至該輸出入控制晶片之一個或以上音訊/視訊次處理引擎以合併該二個或以上音訊/視訊資料串流至一合併之音訊/視 訊資料串流；在將該二個或以上音訊/視訊資料串流合併至該合併之音訊/視訊資料串流時，其中該合併之音訊/視訊資料串流包含該二個或以上音訊/視訊之一子母畫面顯示；在該輸出入介面晶片之一介面橋接器中接收包含該合併音訊/視訊資料串流之匯流排傳輸器；以及其中當操作該介面橋接器於一第一模式時，該介面橋接器從由埠連接器輸出之一原始或成比例音訊/視訊資料串流中以次串流資料填塞該合併之音訊/視訊資料串流之空白區域，以藉由在該輸出入介面晶片與該處理核心晶片間一個或以上共享式輸出入通道將該合併之音訊/視訊資料串流傳送至一處理核心晶片；以及其中當操作於一第二模式時，該橋接器適用仲裁處裡以在該合併之音訊/視訊資料串流與該原始或成比例之音訊/視訊串流間仲裁，以透過在該輸出入介面晶片與該處理核心晶片之間該一個或以上共享式輸出入通道將該合併之音訊/視訊資料串流傳送至該處理核心晶片。
  10. 如請求項9所述之多媒體方法，更包含：在該輸出入控制晶片上接收一類比音訊/視訊資料串流；在一類比轉數位轉換器上轉換該類比音訊/視訊資料串流至數位音訊/視訊資料串流；以及將該數位音訊/視訊資料串流提供至該埠處理器，該數 位音訊/視訊資料串流為由該埠處理器所接收之該二個或以上音訊/視訊資料串流之一。
  11. 如請求項1所述之多媒體系統，其中輸出入控制晶片經操作透過該輸出入控制晶片與該處理核心晶片間之該一個或以上共享式輸出入通道傳輸該合併之音訊/視訊資料串流以減少資料流量。
  12. 如請求項11所述之多媒體系統，其中傳輸該合併之音訊/視訊資料串流以減少資料流量包含一個或以上的尺寸縮小、圖框率控制以及壓縮。
  13. 如請求項1所述之多媒體系統，其中該處理核心晶片控制該輸出入控制晶片之每一個輸出入介面區塊。
  14. 如請求項13所述之多媒體系統，其中該每一個輸出入介面區塊被指定一互相排斥的位址範圍，且其中該處理核心晶片使用記憶體讀寫操作來控制該輸出入介面區塊。
  15. 如請求項6所述之輸出入控制晶片，其中輸出入控制晶片經操作在該輸出入控制晶片與該處理核心晶片間傳輸該合併之音訊/視訊資料串流以減少資料流量。
  16. 如請求項9所述之傳輸方法，更包含該輸出入控晶片在該輸出入控制晶片與該處理核心晶片間傳輸該合併之音訊/視訊資料串流以減少資料流量。
  17. 如請求項1所述之多媒體系統，其中該介面橋接器經組態以操作於一第一模式或一第二模式，其中當操作於該第一模式時，該介面橋接器從由該埠處理器輸出之一原始或成比例音訊/視訊資料串流中以次串流資料填塞該合併之音訊/視訊資料串流之空白區域，及其中當操作於該第二模式時，該介面橋接器適用仲裁處裡以在該合併之音訊/視訊資料串流與該原始或成比例之音訊/視訊串流間仲裁。
  18. 如請求項1所述之多媒體系統，其中該一個或以上音訊/視訊處理引擎產生該子母畫面顯示。
  19. 如請求項1所述之多媒體系統，其中該處理核心晶片產生該子母畫面顯示。
  20. 如請求項1所述之多媒體系統，其中該輸出入控制晶片更包含一埠處理器，該埠處理器包含：一資料解密引擎，用以解密該第一數位音訊/視訊資料串流；一多工器，用以多工處理該第一與該第二數位音訊/視 訊資料串流以輸出一主要音訊/視訊資料串流與一第三音訊/視訊資料串流；以及一尺寸縮小或壓縮引擎，用以縮小尺寸或壓縮該第三音訊/視訊資料串流以產生一原始或成比例音訊/視訊資料串流及輸出該原始或成比例音訊/視訊資料串流至介面橋接器。
TW100144722A 2010-12-10 2011-12-05 多媒體系統、多媒體裝置及其方法 TWI587695B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US42206310P 2010-12-10 2010-12-10
US13/302,452 US9516372B2 (en) 2010-12-10 2011-11-22 Multimedia I/O system architecture for advanced digital television

Publications (2)

Publication Number Publication Date
TW201242339A TW201242339A (en) 2012-10-16
TWI587695B true TWI587695B (zh) 2017-06-11

Family

ID=46199042

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100144722A TWI587695B (zh) 2010-12-10 2011-12-05 多媒體系統、多媒體裝置及其方法

Country Status (7)

Country Link
US (1) US9516372B2 (zh)
EP (1) EP2649806A4 (zh)
JP (2) JP5942323B2 (zh)
KR (1) KR101920317B1 (zh)
CN (1) CN103262559B (zh)
TW (1) TWI587695B (zh)
WO (1) WO2012078411A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI488046B (zh) * 2013-08-02 2015-06-11 Orise Technology Co Ltd 於智慧型手機／平板電腦中減少視頻訊號於行動工業處理器介面傳輸頻寬及耗電之方法及裝置
US9041863B2 (en) * 2013-08-30 2015-05-26 Xiaomi Inc. Electronic device and method for displaying resources
FR3047378B1 (fr) * 2016-01-29 2018-05-18 STMicroelectronics (Alps) SAS Circuit de fourniture d'un signal video analogique
US10248615B2 (en) * 2016-09-19 2019-04-02 Harman International Industries, Incorporated Distributed processing in a network
US10528505B2 (en) * 2016-10-11 2020-01-07 International Business Machines Corporation HDMI devices and methods with stacking support
US10645199B2 (en) * 2018-01-22 2020-05-05 Lattice Semiconductor Corporation Multimedia communication bridge

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW552512B (en) * 1999-07-29 2003-09-11 Ibm Enhanced bus arbiter utilizing variable priority and fairness
TW200531527A (en) * 2004-03-05 2005-09-16 Chunghwa Telecom Co Ltd An independent MPEG–2 hardware coding system with VGA interface
US20060158568A1 (en) * 2005-01-14 2006-07-20 Tarek Kaylani Single integrated high definition television (HDTV) chip for analog and digital reception
TW200635357A (en) * 2005-03-24 2006-10-01 Avermedia Tech Inc Video processing apparatus and computer system integrated with the same

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6558049B1 (en) 1996-06-13 2003-05-06 Texas Instruments Incorporated System for processing video in computing devices that multiplexes multiple video streams into a single video stream which is input to a graphics controller
CN1411656A (zh) 2000-03-03 2003-04-16 汤姆森特许公司 至少两个传输流和一个对应数字流的多路分解设备及方法
JP3974572B2 (ja) * 2003-11-28 2007-09-12 松下電器産業株式会社 画像表示装置、画像データ転送方法、プログラム
JP2006019997A (ja) 2004-06-30 2006-01-19 Toshiba Corp 動画データ転送システム
US20080007616A1 (en) * 2004-12-06 2008-01-10 Ftd Technology Pte. Ltd. Universal multimedia display adapter
US8560753B1 (en) * 2005-03-30 2013-10-15 Teradici Corporation Method and apparatus for remote input/output in a computer system
JP4070778B2 (ja) 2005-05-13 2008-04-02 株式会社ソニー・コンピュータエンタテインメント 画像処理システム
US20060282785A1 (en) 2005-06-09 2006-12-14 Sbc Knowledge Ventures, L.P. System and method of displaying content in display windows
US7404645B2 (en) 2005-06-20 2008-07-29 Digital Display Innovations, Llc Image and light source modulation for a digital display system
US9153125B2 (en) 2005-12-20 2015-10-06 Savant Systems, Llc Programmable multimedia controller with programmable services
US8218091B2 (en) * 2006-04-18 2012-07-10 Marvell World Trade Ltd. Shared memory multi video channel display apparatus and methods
US7996869B2 (en) 2006-08-18 2011-08-09 Sony Corporation Automatically reconfigurable multimedia system with interchangeable personality adapters
TW200814776A (en) * 2006-09-11 2008-03-16 Realtek Semiconductor Corp TV system and method of processing video signals
US20080129822A1 (en) 2006-11-07 2008-06-05 Glenn Daniel Clapp Optimized video data transfer
US8565337B2 (en) * 2007-02-07 2013-10-22 Valens Semiconductor Ltd. Devices for transmitting digital video and data over the same wires
US8925010B2 (en) 2007-04-02 2014-12-30 Tp Lab, Inc. Method and system for television channel group
US8863187B2 (en) * 2007-04-02 2014-10-14 Tp Lab, Inc. System and method for presenting multiple pictures on a television
US8695034B2 (en) 2007-08-31 2014-04-08 Silicon Image, Inc. Delivering on screen display data to existing display devices
JP5242111B2 (ja) * 2007-10-02 2013-07-24 株式会社ソニー・コンピュータエンタテインメント 送信装置、画像データ送信方法、受信装置および受信装置における画像表示方法
KR20100058334A (ko) 2008-11-24 2010-06-03 삼성전자주식회사 디스플레이장치, 디스플레이 시스템 및 디스플레이장치의 제어방법
KR101606133B1 (ko) 2009-02-10 2016-03-24 삼성전자주식회사 디지털 티브이와 외부 기기를 이용한 디지털 멀티미디어 방송 서비스 제공 방법 및 장치
US8248535B2 (en) * 2009-02-18 2012-08-21 Csr Technology Inc. System and method for a versatile display pipeline architecture for an LCD display panel
KR20100104025A (ko) * 2009-03-16 2010-09-29 삼성전자주식회사 디지털 인터페이스의 신호처리장치 및 그 방법
KR101570696B1 (ko) 2009-05-29 2015-11-20 엘지전자 주식회사 영상표시장치 및 그 동작방법
US9325929B2 (en) * 2010-04-29 2016-04-26 Ati Technologies Ulc Power management in multi-stream audio/video devices
US8698958B2 (en) * 2010-06-16 2014-04-15 Silicon Image, Inc. Mechanism for memory reduction in picture-in-picture video generation

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW552512B (en) * 1999-07-29 2003-09-11 Ibm Enhanced bus arbiter utilizing variable priority and fairness
TW200531527A (en) * 2004-03-05 2005-09-16 Chunghwa Telecom Co Ltd An independent MPEG–2 hardware coding system with VGA interface
US20060158568A1 (en) * 2005-01-14 2006-07-20 Tarek Kaylani Single integrated high definition television (HDTV) chip for analog and digital reception
TW200635357A (en) * 2005-03-24 2006-10-01 Avermedia Tech Inc Video processing apparatus and computer system integrated with the same

Also Published As

Publication number Publication date
JP5942323B2 (ja) 2016-06-29
WO2012078411A1 (en) 2012-06-14
TW201242339A (en) 2012-10-16
CN103262559A (zh) 2013-08-21
KR20140032967A (ko) 2014-03-17
US9516372B2 (en) 2016-12-06
EP2649806A1 (en) 2013-10-16
KR101920317B1 (ko) 2018-11-20
CN103262559B (zh) 2017-04-12
JP2014504479A (ja) 2014-02-20
JP2016178667A (ja) 2016-10-06
EP2649806A4 (en) 2014-05-14
US20120147271A1 (en) 2012-06-14
JP6196705B2 (ja) 2017-09-13

Similar Documents

Publication Publication Date Title
JP6196705B2 (ja) 高度デジタルテレビに関するマルチメディアｉ／ｏシステムアーキテクチャ
US9247157B2 (en) Audio and video data multiplexing for multimedia stream switch
CN103903568B (zh) Led显示屏控制卡
US20140362096A1 (en) Display controller, screen transfer device, and screen transfer method
US11032357B2 (en) Data processing offload
US20120314777A1 (en) Method and apparatus for generating a display data stream for transmission to a remote display
TW201212647A (en) Mechanism for memory reduction in Picture-in-Picture video generation
US20140173249A1 (en) System and method for connecting a system on chip processor and an external processor
US20220360803A1 (en) Video Frame Codec Architectures
US20170039932A1 (en) Display control apparatus and method of configuring an interface bandwidth for image data flow
CN204598150U (zh) 一种基于fpga的3×3高清视频矩阵切换装置
US10609283B2 (en) Sharing panoramic video images over a wireless display session
US9609215B2 (en) Moving-image recording/reproduction apparatus
US8269897B2 (en) Method and apparatus for video format conversion
CN102957842B (zh) 一种视频图像处理方法、装置及系统
CN203120081U (zh) 一种基于开放互联网的视频服务装置及互联网电视机
US9472168B2 (en) Display pipe statistics calculation for video encoder
TWI450749B (zh) 遊戲處理裝置
TWI466100B (zh) 電子裝置及其顯示資料之處理方法
US9721528B2 (en) Processing system display controller interface to programmable logic
CN103634597B (zh) 一种在4k2k电视机上解码图片的方法
Gosain et al. Xilinx Advanced Multimedia Solutions with Video Codec/Graphics Engines
CN219627775U (zh) 一种视频播放设备和视频播放系统
Tanaka H. 264 Transcoder LSI Chip