TW201820857A - 用於傳送視訊之方法及資料傳送器 - Google Patents

用於傳送視訊之方法及資料傳送器 Download PDF

Info

Publication number
TW201820857A
TW201820857A TW106132973A TW106132973A TW201820857A TW 201820857 A TW201820857 A TW 201820857A TW 106132973 A TW106132973 A TW 106132973A TW 106132973 A TW106132973 A TW 106132973A TW 201820857 A TW201820857 A TW 201820857A
Authority
TW
Taiwan
Prior art keywords
transmitter
packets
receiver
data
packet
Prior art date
Application number
TW106132973A
Other languages
English (en)
Other versions
TWI766883B (zh
Inventor
拉明 穆巴舍
傑海里 卡瑪力
格雷戈里W 庫克
大衛 薩莫拉
Original Assignee
南韓商三星顯示器有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 南韓商三星顯示器有限公司 filed Critical 南韓商三星顯示器有限公司
Publication of TW201820857A publication Critical patent/TW201820857A/zh
Application granted granted Critical
Publication of TWI766883B publication Critical patent/TWI766883B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784Data processing by the network
    • H04N21/64792Controlling the complexity of the content stream, e.g. by dropping packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/324Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the data link layer [OSI layer 2], e.g. HDLC
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0002Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission rate
    • H04L1/0003Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission rate by switching between different modulation schemes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0006Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0009Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the channel coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0041Arrangements at the transmitter end
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0056Systems characterized by the type of code used
    • H04L1/007Unequal error protection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0078Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0083Formatting with frames or packets; Protocol or part of protocol for error control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0078Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0086Unequal error protection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/37Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/66Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343Extraction or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4351Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reassembling additional data, e.g. rebuilding an executable program from recovered modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/38Transmitter circuitry for the transmission of television signals according to analogue transmission standards
    • H04N5/40Modulation circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/025Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H04N7/0255Display systems therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/025Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H04N7/035Circuits for the digital non-picture data signal, e.g. for slicing of the data signal, for regeneration of the data-clock signal, for error detection or correction of the data signal
    • H04N7/0357Circuits for the digital non-picture data signal, e.g. for slicing of the data signal, for regeneration of the data-clock signal, for error detection or correction of the data signal for error detection or correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W28/00Network traffic management; Network resource management
    • H04W28/02Traffic management, e.g. flow control or congestion control
    • H04W28/0268Traffic management, e.g. flow control or congestion control using specific QoS parameters for wireless networks, e.g. QoS class identifier [QCI] or guaranteed bit rate [GBR]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1825Adaptation of specific ARQ protocol parameters according to transmission conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Computer Security & Cryptography (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

在一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,傳送器與一接收器進行電子通訊,方法包含:由傳送器自一資料源接收一視訊資料訊框;由傳送器根據視訊資料訊框之位元之重要性等級將視訊資料訊框重新組織成複數個封包;由傳送器為各該封包產生一標籤,標籤對應於封包之不同相對重要性等級;由傳送器基於與各該封包對應之標籤而為各該封包執行不同保護技術;以及由傳送器將封包及標籤傳送至接收器以供在顯示面板上顯示,使得各該封包是基於封包之對應標籤而根據不同保護技術被傳送。

Description

用於傳送視訊之方法及資料傳送器 【優先權聲明】
本申請案主張於2016年9月26日在美國專利與商標局提出申請之名稱為「用於在經由數十億位元通道進行無線視訊傳輸時進行跨層影像最佳化(CLIO)之系統及方法(A SYSTEM AND METHOD FOR CROSS LAYER IMAGE OPTIMIZATION(CLIO)FOR WIRELESS VIDEO TRANSMISSION OVER MULTI-GIGABIT CHANNELS」之美國第62/400,042號臨時專利申請案之優先權及權利,以及主張於2016年11月22日在美國專利與商標局提出申請之美國第15/359,564號非臨時專利申請案之優先權及權利,且該二個美國專利申請案之全部內容以引用方式併入本文中。
本發明之一或多個實例性實施例之態樣是關於一種用於電子資料通訊之系統及方法。
對無線視訊傳輸之需求因新應用及使用案例之出現而正在增加。近年來,高解析度顯示螢幕之技術進步以及高品質視訊(高清晰度(High Definition;HD)、全高清晰度(Full High Definition;FHD)、超高清晰度(Ultra High Definition;UHD)等)之出現已使得對高通量(throughput) 傳輸之頻寬要求增加。舉例而言,未壓縮超高清晰度(UHD)視訊需要12Gbps之頻寬。
除高資料速率約束以外,無線視訊傳輸亦是時間敏感/延遲敏感的。當以每秒60個訊框之速率提供時,訊框間時間是1/60=16.6毫秒(ms)。因此,在16.6毫秒內未接收到之一訊框之任一部分必須被丟棄,俾使顯示器可開始渲染下一訊框,且資料重傳通常並非是一可行之選項。除高頻寬及延時(latency)要求以外,無線通道亦可能易受干擾影響,此可使一無線通道之品質隨時間發生不可預測之變化。因此,可能難以為經由一無線通道發送高品質視訊資料提供一有保證之服務品質(Quality of Service;QoS)。
在此先前技術章節中所論述之上述資訊僅用於增強對所述技術之背景之理解,且因此,其可能含有並不構成為此項技術中之通常知識者所已知的先前技術之資訊。
本發明之一或多個實例性實施例之態樣是關於一種用於電子資料通訊之系統及方法。
根據某些實例性實施例,一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,該傳送器與一接收器進行電子通訊,該方法包含:由該傳送器自一資料源接收一資料訊號;由該傳送器自該接收器接收一傳回訊號(return signal);由該傳送器基於通道品質、視訊品質、編碼解碼器(codec)要求、或資料速率要求至少其中之一而自複數個設定檔(profiles)中選擇一設定檔,該等設定檔各自包含用於將該 資料訊號傳送至該接收器之一或多個參數,該等設定檔包含與傳送未壓縮視訊資料對應之一或多個設定檔及與傳送經壓縮視訊資料對應之一或多個設定檔;以及由該傳送器根據所選之該設定檔將該資料訊號傳送至該接收器,以供在該顯示面板上顯示。
根據某些實施例,由該傳送器接收之該資料訊號是一視訊資料訊號。
根據某些實施例,該方法更包含基於該傳回訊號而自該等設定檔中選擇該設定檔,其中該傳回訊號包含由該接收器量測的該無線通訊通道之一品質之一指示符(indicator)。
根據某些實施例,該方法更包含基於該傳回訊號而自該等設定檔中選擇該設定檔,其中該傳回訊號包含由該接收器量測的視覺品質之一指示符。
根據某些實施例,該方法更包含:基於該傳回訊號而識別與該接收器對應之一顯示裝置;以及由該傳送器基於與該接收器對應之該顯示裝置而選擇該設定檔。
根據某些實施例,該等設定檔包含以下其中之一或多者:一第一設定檔,定義用於傳送未壓縮視訊資料之複數個參數,在該第一設定檔中,通道品質超過一第一臨限等級,使得若在傳輸之後,一具有複數個畫素之群組中之任一畫素之畫素資料在該接收器處丟失,則該接收器藉由對複數個周圍畫素之值求平均來重新計算丟失之該畫素資料;一第二設定檔,定義用於傳送未壓縮視訊資料之複數個參數,在該第二設定檔中,通道品質低於該第一臨限等級但高於一第二臨限等級,使得一具有複數個畫 素之群組中之一個畫素之畫素資料不被傳送至該接收器,且該接收器藉由對複數個周圍畫素之值求平均來重新計算該一個畫素之該畫素資料;一第三設定檔,定義用於傳送未壓縮視訊資料之複數個參數,在該第三設定檔中,通道品質低於該第一臨限等級及該第二臨限等級但高於一第三臨限等級,使得一封包中之複數個畫素之一最低有效位元不被傳送至該接收器,且該接收器補償該最低有效位元;一第四設定檔、一第五設定檔、一第六設定檔、及一第七設定檔,定義用於傳送經壓縮視訊資料之複數個參數,該經壓縮視訊資料是使用產生複數個資料層之一基於層之壓縮方法(layer-based compression method)而壓縮,該等資料層包含具有一第一壓縮比之一最高層、以及具有在被添加至該最高層及任何中間層時具有一第二壓縮比之資料之一最低層,該第二壓縮比是低於該第一壓縮比之一比率,其中:根據該第四設定檔,各該資料層皆被傳送至該接收器;根據該第五設定檔,該等資料層之一子集被傳送至該接收器;根據該第六設定檔,該等資料層中之一單個資料層被傳送至該接收器;以及根據該第七設定檔,該等資料層其中之一或多者之僅一部分被傳送至該接收器;以及一第八設定檔,基於用於顯示具有不同優先等級之視訊資料之一顯示裝置而定義用於傳送該視訊資料之複數個參數。
根據某些實施例,該方法更包含由該傳送器藉由該資料訊號之一標頭(header)封包中之一位元選擇(bit selection)將關於所選之該設定檔之資訊傳送至該接收器。
根據某些實施例,關於所選之該設定檔之該資訊包含與所選之該設定檔對應之以下資訊至少其中之一:解壓縮資訊、反轉分層(reverse layering)資訊、解碼資訊、或錯誤校正資訊。
根據本發明之某些實例性實施例,在一種用於經由一無線通訊通道將用於一顯示面板之資料傳送至一接收器之傳送器中,該傳送器用以:自一資料源接收一資料訊號;自一接收器接收一傳回訊號;基於通道品質、視訊品質、編碼解碼器要求、或資料速率要求至少其中之一而自複數個設定檔中選擇一設定檔,該等設定檔各自包含用於將該資料訊號傳送至該接收器之一或多個參數,該等設定檔包含與傳送未壓縮視訊資料對應之一或多個設定檔及與傳送經壓縮視訊資料對應之一或多個設定檔;以及根據所選之該設定檔將該資料訊號傳送至該接收器,以供在該顯示面板上顯示。
根據某些實施例,由該傳送器接收之該資料訊號是一視訊資料訊號。
根據某些實施例,該傳送器更用以基於該傳回訊號而自該等設定檔中選擇該設定檔,其中該傳回訊號包含由該接收器量測的該無線通訊通道之一品質之一指示符。
根據某些實施例,該傳送器更用以:基於該傳回訊號而識別與該接收器對應之一顯示裝置;以及基於與該接收器對應之該顯示裝置而選擇該設定檔。
根據某些實施例,該等設定檔包含以下其中之一或多者:一第一設定檔,定義用於傳送未壓縮視訊資料之複數個參數,在該第一設定檔中,通道品質超過一第一臨限等級,使得若在傳輸之後,一具有複數個畫素之群組中之任一畫素之畫素資料在該接收器處丟失,則該接收器藉由對複數個周圍畫素之值求平均來重新計算丟失之該畫素資料;一第二設定檔,定義用於傳送未壓縮視訊資料之複數個參數,在該第二設定檔中,通 道品質低於該第一臨限等級但高於一第二臨限等級,使得一具有複數個畫素之群組中之一個畫素之畫素資料不被傳送至該接收器,且該接收器藉由對複數個周圍畫素之值求平均來重新計算該一個畫素之該畫素資料;一第三設定檔,定義用於傳送未壓縮視訊資料之複數個參數,在該第三設定檔中,通道品質低於該第一臨限等級及該第二臨限等級但高於一第三臨限等級,使得一封包中之複數個畫素之一最低有效位元不被傳送至該接收器,且該接收器補償該最低有效位元;一第四設定檔、一第五設定檔、一第六設定檔、及一第七設定檔,定義用於傳送經壓縮視訊資料之複數個參數,該經壓縮視訊資料是使用產生複數個資料層之一基於層之壓縮方法而壓縮,該等資料層包含具有一第一壓縮比之一最高層、以及具有在被添加至該最高層及任何中間層時具有一第二壓縮比之資料之一最低層,該第二壓縮比低於該第一壓縮比,其中:根據該第四設定檔,各該資料層被傳送至該接收器;根據該第五設定檔,該等資料層之一子集被傳送至該接收器;根據該第六設定檔,該等資料層中之一單個資料層被傳送至該接收器;以及根據該第七設定檔,該等資料層其中之一或多者之僅一部分被傳送至該接收器;以及一第八設定檔,基於用於顯示具有不同優先等級之視訊資料之一顯示裝置而定義用於傳送該視訊資料之複數個參數。
根據某些實施例,該傳送器更用以藉由該資料訊號之一標頭封包中之一位元選擇將關於所選之該設定檔之資訊傳送至該接收器,其中關於所選之該設定檔之該資訊包含與所選之該設定檔對應之以下資訊至少其中之一:解壓縮資訊、反轉分層資訊、解碼資訊、或錯誤校正資訊。
根據本發明之某些實施例,一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,該傳送器與一接收器進行 電子通訊,該方法包含:由該傳送器自一資料源接收一資料訊號;由該傳送器自該接收器接收一傳回訊號;由該傳送器自複數個設定檔中選擇一設定檔,該等設定檔各自包含用於將該資料訊號傳送至該接收器之一或多個參數,該等設定檔包含與傳送未壓縮視訊資料對應之一或多個設定檔及與傳送經壓縮視訊資料對應之一或多個設定檔;以及由該傳送器根據所選之該設定檔將該資料訊號傳送至該接收器,以供在該顯示面板上顯示。
根據某些實施例,該方法更包含基於通道品質而選擇該設定檔。
根據某些實施例,該方法更包含基於在該接收器處量測之視訊品質而選擇該設定檔。
根據某些實施例,該方法更包含基於編碼解碼器要求而選擇該設定檔。
根據某些實施例,該方法更包含基於資料速率要求而選擇該設定檔。
根據某些實施例,該方法更包含基於該傳回訊號而識別與該接收器對應之一顯示裝置;以及由該傳送器基於與該接收器對應之該顯示裝置而選擇該設定檔。
根據某些實施例,該方法更包含:由該傳送器監測來自該接收器之該傳回訊號;以及由該傳送器基於通道品質或視訊品質至少其中之一之一改變而為後續傳輸選擇另一設定檔。
根據本發明之某些實例性實施例,在一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,該傳送器與一接 收器進行電子通訊,該方法包含:由一傳送器自一資料源接收一視訊資料訊框;由該傳送器將與該視訊資料訊框對應之位元分組成複數個群組,該等群組各自對應於複數個重要性等級;由該傳送器將該等群組按重要性次序重新組織以產生一經重新組織之資料訊框,該經重新組織之資料訊框具有與具有一最高重要性等級之複數個封包標頭對應且被配置為該等群組中之第一者之一群組;由該傳送器在各該封包標頭之前插入一值,該值指示與各該封包標頭對應之一資料位元長度;以及由該傳送器將與該視訊資料訊框對應之該等位元傳送至該接收器以供在該顯示面板上顯示,使得該等群組中之每一群組是基於該等群組之對應重要性等級而根據不同保護技術被傳送。
根據某些實施例,各該群組基於該等群組之對應重要性等級而具有一不同調變與編碼方案(modulation and coding scheme;MCS)值。
根據某些實施例,各該群組基於該等群組之對應重要性等級而具有一不同前向錯誤校正編碼率(forward error correction coding rate)。
根據某些實施例,該接收器處之一解碼器用以重新建構該視訊資料訊框。
根據某些實施例,重新建構該視訊資料訊框之步驟包含將各該封包標頭移動至其原始相對位置。
根據某些實施例,重新建構該視訊資料訊框之步驟包含移除指示資料位元之長度之該值。
根據某些實施例,該方法更包含:由該傳送器監測來自該接收器之一傳回訊號;以及由該傳送器為後續傳輸調整該等不同保護技術。
根據某些實施例,該方法更包含由該傳送器根據與該接收器對應之顯示裝置之一類型來選擇該等不同保護技術。
根據本發明之某些實例性實施例,在一種用於經由一無線通訊通道將用於一顯示面板之資料傳送至一接收器之傳送器中,該傳送器用以:自一資料源接收一視訊資料訊框;將與該視訊資料訊框對應之位元分組成複數個群組,該等群組各自對應於複數個重要性等級;將該等群組按重要性次序重新組織以產生一經重新組織之資料訊框,該經重新組織之資料訊框具有與具有一最高重要性等級之複數個封包標頭對應且被配置為該等群組中之第一者之一群組;在各該封包標頭之前插入一值,該值指示與各該封包標頭對應之一資料位元長度;以及將與該視訊資料訊框對應之該等位元傳送至該接收器以供在該顯示面板上顯示,使得該等群組中之每一群組是基於該等群組之對應重要性等級而根據不同保護技術被傳送。
根據某些實施例,各該群組基於該等群組之對應重要性等級而具有一不同調變與編碼方案(MCS)值。
根據某些實施例,各該群組基於該等群組之對應重要性等級而具有一不同前向錯誤校正編碼率。
根據某些實施例,該接收器處之一解碼器用以藉由將各該封包標頭移動至其原始相對位置來重新建構該視訊資料訊框。
根據某些實施例,該傳送器更用以:監測來自該接收器之一傳回訊號;以及為後續傳輸調整該等不同保護技術。
根據本發明之某些實例性實施例,在一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,該傳送器與一接 收器進行電子通訊,該方法包含:由一傳送器自一資料源接收一視訊資料訊框;由該傳送器將與該視訊資料訊框對應之位元分組成複數個群組,該等群組各自對應於複數個重要性等級;由該傳送器將該等群組按重要性次序重新組織以產生一經重新組織之資料訊框,該經重新組織之資料訊框具有與具有一最高重要性等級之複數個封包標頭對應且被配置為該等群組中之第一者之一群組;以及由該傳送器將與該視訊資料訊框對應之該等位元傳送至該接收器以供在該顯示面板上顯示,使得該等群組中之每一群組是基於該等群組之對應重要性等級而根據不同保護技術被傳送。
根據某些實施例,該方法更包含由該傳送器在各該封包標頭之前插入一值,該值指示與各該封包標頭對應之一資料位元長度。
根據某些實施例,各該群組基於該等群組之對應重要性等級而具有一不同調變與編碼方案(MCS)值。
根據某些實施例,各該群組基於該等群組之對應重要性等級而具有一不同前向錯誤校正編碼率。
根據某些實施例,該接收器處之一解碼器用以重新建構該視訊資料訊框。
根據某些實施例,該方法更包含:由該傳送器監測來自該接收器之一傳回訊號;以及由該傳送器基於通道品質或視訊品質至少其中之一之一改變而為後續傳輸調整該等不同保護技術。
根據某些實施例,該方法更包含由該傳送器根據與該接收器對應之顯示裝置之一類型為與一影像之不同區對應之資料選擇該等不同保護技術。
根據本發明之某些實例性實施例,在一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,該傳送器與一接收器進行電子通訊,該方法包含:由一傳送器自一資料源接收一視訊資料訊框;由該傳送器根據該視訊資料訊框之位元之重要性等級將該視訊資料訊框重新組織成複數個封包;由該傳送器為各該封包產生一標籤(tag),該等標籤對應於該等封包之不同相對重要性等級;由該傳送器基於與各該封包對應之該標籤而為各該封包執行不同保護技術;以及由該傳送器將該等封包及該等標籤傳送至該接收器以供在該顯示面板上顯示,使得各該封包是基於該等封包之對應標籤而根據該等不同保護技術被傳送。
根據某些實施例,該標記各該封包之步驟包含將一位元型樣(bit pattern)添加至一封包之一標頭,該位元型樣指示該封包之一相對重要性等級。
根據某些實施例,各該封包之該標籤基於該等封包之對應重要性等級而對應於一調變與編碼方案(MCS)值。
根據某些實施例,重要性較高之封包具有較重要性較低之封包低之一調變與編碼方案值。
根據某些實施例,各該封包之該標籤基於該等封包之對應重要性等級而對應於一前向錯誤校正編碼率。
根據某些實施例,該方法更包含:由該傳送器將該等封包打包成複數個聚合媒體存取控制(media access control;MAC)協定資料單元(Aggregated MAC Protocol Data Unit;A-MPDU)子訊框;以及由該傳送器將該等聚合媒體存取控制協定資料單元子訊框傳送至該接收器。
根據某些實施例,該方法更包含:由該傳送器以一相同標籤來標記複數個實體層收斂程序(Physical Layer Convergence Procedure;PLCP)協定資料單元(PLCP Protocol Data Unit;PPDU)訊框;由該傳送器將具有一相同重要性等級之該等聚合媒體存取控制協定資料單元子訊框打包至該等實體層收斂程序協定資料單元訊框中;以及由該傳送器將該等實體層收斂程序協定資料單元訊框傳送至該接收器。
根據某些實施例,該方法更包含由該傳送器根據與該接收器對應之顯示裝置之一類型為該視訊資料訊框之一影像之不同區選擇該等不同保護技術。
根據某些實施例,在一種用於經由一無線通訊通道將用於一顯示面板之資料傳送至一接收器之傳送器中,該傳送器用以:自一資料源接收一視訊資料訊框;根據該視訊資料訊框之位元之重要性等級將該視訊資料訊框重新組織成複數個封包;為各該封包產生一標籤,該等標籤對應於該等封包之不同相對重要性等級;基於與各該封包對應之該標籤為各該封包執行不同保護技術;以及將該等封包及該等標籤傳送至該接收器以供在該顯示面板上顯示,使得各該封包是基於該等封包之對應標籤而根據該等不同保護技術被傳送。
根據某些實施例,該標記各該封包之步驟包含將一位元型樣添加至一封包之一標頭,該位元型樣指示該封包之一相對重要性等級。
根據某些實施例,各該封包之該標籤基於該等封包之對應重要性等級而對應於一調變與編碼方案(MCS)值。
根據某些實施例,各該封包之該標籤基於該等封包之對應重 要性等級而對應於一前向錯誤校正編碼率。
根據某些實施例,該傳送器更用以:將該等封包打包成複數個聚合媒體存取控制協定資料單元(A-MPDU)子訊框;以及將該等聚合媒體存取控制協定資料單元子訊框傳送至該接收器。
根據某些實施例,該傳送器更用以:標記複數個實體層收斂程序(PLCP)協定資料單元(PPDU)訊框;將具有一相同重要性等級之該等聚合媒體存取控制協定資料單元子訊框打包至該等實體層收斂程序協定資料單元訊框中;以及將該等實體層收斂程序協定資料單元訊框傳送至該接收器。
根據本發明之某些實例性實施例,在一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法中,該傳送器與一接收器進行電子通訊,該方法包含:由該傳送器自一資料源接收一視訊資料訊框;由該傳送器根據該視訊資料訊框之位元之重要性等級將該視訊資料訊框重新組織成複數個封包;由該傳送器為各該封包產生一標籤,該等標籤對應於該等封包之不同相對重要性等級;以及由該傳送器將該等封包及該等標籤傳送至該接收器以供在該顯示面板上顯示,使得各該封包是基於該等封包之對應標籤而根據不同保護技術被傳送。
根據某些實施例,該方法更包含由該傳送器基於與各該封包對應之該標籤而為各該封包執行不同保護技術。
根據某些實施例,該標記各該封包之步驟包含將一位元型樣添加至一封包之一標頭,該位元型樣指示該封包之一相對重要性等級。
根據某些實施例,該方法更包含:由該傳送器將該等封包打 包成複數個聚合媒體存取控制協定資料單元(A-MPDU)子訊框;以及由該傳送器將該等聚合媒體存取控制協定資料單元子訊框傳送至該接收器。
根據某些實施例,該方法更包含:由該傳送器以一相同標籤來標記複數個實體層收斂程序(PLCP)協定資料單元(PPDU)訊框;由該傳送器將具有一相同重要性等級之該等聚合媒體存取控制協定資料單元子訊框打包至該等實體層收斂程序協定資料單元訊框中;以及由該傳送器將該等實體層收斂程序協定資料單元訊框傳送至該接收器。
根據某些實施例,該方法更包含:由該傳送器監測來自該接收器之一傳回訊號;以及由該傳送器至少基於通道品質或視訊品質至少其中之一之一改變而調整該等不同保護技術。
100‧‧‧無線資料傳輸系統
102‧‧‧傳送器
103‧‧‧輸入端子
104‧‧‧資料源
106‧‧‧接收器
108‧‧‧電子裝置
110‧‧‧顯示面板
112‧‧‧無線電設備
114‧‧‧無線電設備
116‧‧‧應用層
118‧‧‧媒體存取控制層
120‧‧‧實體層
122‧‧‧應用層
124‧‧‧媒體存取控制層
126‧‧‧實體層
130‧‧‧直接通道
132‧‧‧傳回通道
134‧‧‧跨層影像最佳化模組
300‧‧‧實體層
302‧‧‧實體層
1200~1216‧‧‧步驟
藉由參照結合圖式而考量之以下詳細說明,將會更易於獲得對本發明以及其圖式及態樣中之諸多圖式及態樣之更完整瞭解,乃因本發明會變得更好理解,在圖式中,相同參考符號指示相同組件。
第1圖是例示根據本發明某些實例性實施例之一無線資料傳輸系統之方塊圖,其例示一跨層最佳化系統之高階概述說明。
第2圖例示根據本發明某些實例性實施例而利用之一實例性基於層之壓縮方案。
第3圖是例示根據本發明某些實例性實施例,一跨層最佳化系統之一實例性架構及某些組件之其他細節之方塊圖。
第4圖例示根據本發明某些實例性實施例,將畫素分割成不同類型之一實例性分割。
第5圖例示根據本發明某些實例性實施例,一隻眼睛之一視域之一實例。
第6圖例示根據本發明某些實例性實施例,對一封包或層結構之重新組織之一實例。
第7圖例示根據本發明某些實例性實施例之一實例性標頭結構。
第8圖例示根據本發明某些實例性實施例,對資料之實例性重新組織。
第9圖例示根據本發明某些實例性實施例,對畫素位元及封包之實例性重新組織。
第10圖例示在一無線通訊標準下之可用標頭欄位。
第11圖是例示根據本發明某些實例性實施例之一跨層影像最佳化過程之流程圖。
本發明之實例性實施例之態樣是關於一種用於電子資料通訊之系統及方法。
以下結合圖式所陳述之詳細說明旨在闡述根據本發明而提供之一種用於在經由數十億位元通道進行無線視訊傳輸時進行跨層影像最佳化(cross layer image optimization;CLIO)之系統及方法之實例性實施例,而非旨在表示可構造或利用本發明之僅有形式。本說明結合所例示實施例來陳述本發明之特徵。然而,應理解,可藉由亦旨在囊括於本發明之精神 及範圍內之不同實施例來達成相同或等效之功能及結構。如本文中別處所示,相同元件編號旨在指示相同元件或特徵。
將來之顯示技術會包含一個充滿以各種無線串流傳輸(streaming)裝置(行動電話、視訊盒(set-top box)、投影機等)作為饋源之廉價顯示器的世界。經由無線鏈路進行之高品質視訊傳輸已顯示出具有挑戰性。無線裝置是非固定的,而無線鏈路具有稀少頻寬且易受諸多類型之雜訊影響。延時亦可以是高且可變的,此對於視訊而言尤其不利。因對視訊傳輸之嚴格要求,其中各不同層(例如,應用(Application;APP)層、媒體存取控制層(media access control;MAC)層及實體(Physical;PHY)層)被獨立地設計之常見設計方法並不有利於高資料速率無線資料傳輸。因此,本發明之實施例提供一種跨層方法,其中利用一個層處之資訊來改變不同層處之參數。此種靈活性容許迅速地適應無線鏈路之快速改變。
IEEE 802.11ad標準能夠為未壓縮全高清晰度(FHD)無線視訊提供所需位元速率。802.11ad使用頻寬為2.16GHz之通道在60GHz頻帶中工作且使用一單個載波在實體層(PHY)處提供高達4.6Gbps之頻寬,此對於未壓縮全高清晰度視訊傳輸而言是足夠的。然而,IEEE 802.11ad僅能夠在某些部署形式中獲得最大頻寬。舉例而言,IEEE 802.11ad需要將傳送器及接收器定位成彼此相距短的距離且處於視線(line of sight;LoS)內。因此,本發明之實施例提供一種改良之無線資料傳輸方法。
根據數個實施例,本發明之各種特性可用於為經由無線網路進行之視訊串流傳輸改良並保證服務品質,包括實體(PHY)、媒體存取控制(MAC)、或應用(APP)跨層解決方案。因此,可使用來自一個層(例 如,媒體存取控制層)之資訊將另一層(例如,應用層)中之參數最佳化。舉例而言,在視訊串流傳輸中,應用層可利用關於通道品質之資訊來進行速率控制(網路感知性)。下部層亦可用以利用關於視訊流量特性之資訊。根據各種實施例,系統採用動態設定檔分割、動態封包標記、在基於層之壓縮技術中針對不同層之不等錯誤保護、及重要性等級感知調變及調變/編碼選擇、封包化(packetization)、及位元剪除(pruning)或畫素剪除。
根據一個實施例,可在延遲受約束之可縮放視訊傳輸中利用一種跨層方法來將覺察品質(perceptual quality)最佳化。另外,可根據實體層中之封包丟失可見性而針對每一視訊層採用不等錯誤保護(Unequal Error Protection;UEP)。在應用層中亦存在緩衝器感知源調適(buffer-aware source adaptation)。針對基於IEEE 802.11媒體獨立移交(Media Independent Handover;MIH)框架之服務品質驅動型(QoS-driven)無縫交遞方案使用一種速率調適方案。為控制速率,對於單層編碼(AVC/H.264)而調適量化參數(Quantization Parameter;QP),且對於可縮放編碼(SVC/H.264)而丟棄增強層(enhancement layer)。亦包含進行速率與流量調適以及允入控制(admission control)及自動層管理,以在無線視訊傳輸中在允入會話數目及視訊品質方面將服務品質最佳化。對於在蜂巢式網路中藉由使用者資料包協定/即時傳輸協定(User Datagram Protocol/Real-time Transport Protocol;UDP/RTP)進行視訊串流傳輸,包含流量管理、路徑選擇及訊框篩選來跨層最佳化技術。跨層框架包含視訊編碼解碼器最佳化、針對層編碼傳輸之時間切片最佳化、以及一種自適應性調變與編碼方案(MCS),該自適應性調變與編碼方案用以鑒於顯示器大小及能量約束將使用者之服務品質等級及無線多媒體廣播接收器之能效最佳化。
壓縮本質上是自一源移除冗餘且因此在本質上對傳輸錯誤更敏感。存在數種可供一壓縮系統用於減輕一視訊串流中傳輸錯誤之影響的方法。若視訊串流具有品質、空間或時間可縮放性,則我們可使用不等錯誤保護(UEP)概念來為較重要之資訊位元提供較高保護等級。在接收器側上,若視訊串流具有抗錯性(error resilience),則錯誤蔓延得以最小化且一良好比例之錯誤可得以忽略。在解碼之後,可對經解碼輸出應用錯誤隱藏(error concealment)。一種使用時間錯誤隱藏之技術是保存前一訊框並在當前訊框毀壞時重放該訊框。另一種可能性是使用出錯之一區域之周圍畫素來預測當前畫素。通常,若其他方法皆失效,則使用錯誤隱藏來作為最後終極手段。
第1圖是例示根據本發明某些實例性實施例之一無線資料傳輸系統100之方塊圖。無線資料傳輸系統100包含一傳送器102,傳送器102用以在一輸入端子103處自一資料源104(例如,一外部資料源,例如一視訊卡電腦系統)接收資料(例如,未壓縮視訊資料)。無線資料傳輸系統100更包含一接收器106。接收器106可併入至具有一顯示面板110之一使用者裝置或電子裝置108(例如,一電子顯示裝置、智慧型電話、電視機、平板電腦等)中,顯示面板110用以顯示影像及視訊。顯示面板110包含複數個畫素,各該畫素可包含複數個不同顏色組件(或子畫素)(例如,各該畫素可包含一紅色組件、一綠色組件及一藍色組件)。
在視訊之背景中,每一視訊訊框作為一影像而顯示(例如,短暫地顯示)於顯示面板110上。在某些實施例中,顯示面板110可例如作為具有一整合式顯示器之任何電子裝置108(例如一電視機、一監視器、一蜂巢式電話、一平板電腦、一可佩戴式裝置、一擴增實境(augmented reality; AR)頭戴式耳機、或一虛擬實境(virtual reality;VR)頭戴式耳機)之一部分而被包含在內。
另外,傳送器102藉由分別併入至傳送器102及接收器106中之無線電設備112及114與接收器106進行無線資料通訊。因此,傳送器102及接收器106用以使用任何適合之無線資料頻譜及標準(例如,電氣與電子工程師協會(Institute of Electrical and Electronics Engineers;IEEE)802.11標準)在彼此之間往返地傳送資料。舉例而言,傳送器102用以藉由一直接(例如,資料)通道130(例如,一無線通訊通道)將資料訊號連同跨層影像最佳化方案之參數或特性一起傳送至接收器106,且接收器106用以藉由一傳回通道132將一回饋資料或一傳回訊號(例如,包含通道品質資料或視覺品質資料)傳送至傳送器102。
除其他元件外,傳送器102更包含一應用(APP)層116(例如,包含一顯示協定模組及一視訊編碼器模組)、一媒體存取控制(MAC)層118及一實體(PHY)層120。根據本發明之實施例,在應用層116、媒體存取控制層118及實體層120中實施或執行跨層影像最佳化之各種態樣。類似地,接收器106包含一應用層122、一媒體存取控制層124及一實體層126。
無線資料傳輸系統100可更包含一跨層影像最佳化(CLIO)模組(或一跨層影像最佳化引擎)134,其作為傳送器102之一部分或協同傳送器102而運作以控制跨層影像最佳化系統及方法。跨層影像最佳化模組134可例如包含一處理器及耦合至該處理器之一記憶體,其中該記憶體儲存指令,在由該處理器執行時,該等指令使該處理器執行本文所述跨層影像最佳化系統及方法之各種操作。舉例而言,跨層影像最佳化模組134可與應用層116、媒體存取控制層118及實體層120進行電子通訊,以往返地交換用 於實施本文所述跨層影像最佳化系統及方法之資料及命令。
因此,如第1圖中所例示,無線資料傳輸系統100用以在一傳送器102處接收資料,並於在應用層116、媒體存取控制層118及實體層126中實施跨層影像最佳化之各種機制之後將資料傳送至接收器106。
可以基本上六種不同方式來評估一視訊壓縮/解壓縮系統或編碼解碼器:壓縮、品質(失真)、複雜性、延時、品質可縮放性(quality scalability)、及抗錯性。
根據本發明之某些實例性實施例,可利用一基於層之壓縮架構(layer-based compression architecture)來進行資料壓縮或視訊壓縮,其中將一視訊串流或一資料串流剖析或劃分成多個品質層、解析度層、空間位置、或顏色分量。在先前技術之基於層之壓縮架構(例如,JPEG2000)中,一資料串流以一訊框標頭開始、隨後為一由封包標頭及資料位元形成之序列。然而,該串流可能未被按重要性次序進行排序,對於即時超高清晰度編碼解碼器而言尤其如此。
在一個實施例中,作為跨層影像最佳化系統及方法(例如,由跨層影像最佳化模組134執行)之一部分,利用一基於層之壓縮系統(例如或類似於JPEG2000標準)來進行基於層之壓縮。根據本發明實施例之一基於層之編碼器可採用以下步驟:對各分量進行顏色變換(color transform)、對每一顏色通道進行小波變換(wavelet transform)、對小波係數進行量化、以及最後對小波係數之矩形區域進行算術編碼(被稱為碼區塊(code-block))。此種編碼器藉由基於顏色分量、解析度等級、空間區塊位置、或層而容許此等碼區塊具有各種序列來為經編碼資料之結構提供靈活性。個別碼區塊可以是可獨立解碼的,但此等碼區塊之標頭可相依於先 前標頭且因此可被依序解碼。
根據本發明實施例而利用之一經基於層壓縮編碼之資料串流可以一訊框標頭開始,該訊框標頭後接續著由封包標頭及資料位元形成之序列。如上所述,該資料串流可被劃分成多個品質層、解析度等級、空間位置、及顏色分量。然而,視所利用之具體編碼系統(例如,JPEG2000)而定,該串流可能未被按重要性次序進行排序,對於即時超高清晰度編碼解碼器而言尤其如此。第2圖中之實例顯示在各層中創建之一經基於層壓縮編碼之資料串流之一實例;例如,第一層可對應於一壓縮等級8:1;在第二層之末尾(已解碼所有第一層封包),壓縮被設定為4:1。最後,解碼第三層封包可等效於以2:1壓縮來發送串流。本發明之實施例並非僅限於以上所論述之壓縮比或層數目。而是,本發明之實施例可根據跨層影像最佳化系統及方法之設計及功能而利用任何適合數目之具有任何適合壓縮比之層,俾使第一層或最高層具有最高壓縮比,下一層具有在被添加至第一層時得到較第一層之壓縮比低之一壓縮比之資料,依此類推,直至最低層或最後一個層具有在被添加至前面層中之每一者時得到相對低的對於觀看者而言在視覺上無損失或在視覺上幾乎無損失之一壓縮比(例如,1:1、1.5:1、2:1)之資料。
根據某些實施例,在一虛擬實境顯示器之背景中,當立體影像被傳送至接收器時,資料傳輸錯誤可影響左側影像及右側影像二者,即使該錯誤僅位於一側上亦如此。因此,在本發明之某些實施例中,跨層影像最佳化系統及方法(例如,跨層影像最佳化模組134、及/或應用層116之視訊編碼器模組)可對左側影像以及對右側影像差執行壓縮,且然後確保左側影像以及右側影像差之各種切片被編碼為一經多工串流。此種程序可 可減少(例如,減半)其中一資料傳輸錯誤影響假影可見性之例項之數目。
本發明之實施例在用於改良視訊串流傳輸品質之跨層演算法中可更利用實體層之一或多個特徵,例如,動態自適應性調變與編碼(Adaptive Modulation and Coding;AMC),其中基於實體層中通道品質之一指示符而改變調變與編碼方案(MCS)。越低之一調變與編碼方案值提供越低之一位元錯誤率,但亦達成越低之通量。媒體存取控制層可將調變與編碼方案告知應用層,以基於調變與編碼方案來調整壓縮率。
不同位元及封包之丟失對視訊品質具有不同之影響,且本發明之實施例運作以在視訊接收中利用不等錯誤保護方法來保護較重要之位元,包括在未壓縮/經壓縮視訊中更多地保護最高有效位元(most significant bit;MSB)、在JPEG 2000中更多地保護封包標頭、或在MPEG-4中更多地保護I訊框。可藉由使用更穩健調變與編碼方案、重傳、或一附加錯誤校正碼(如裏德-索羅門(Reed-Solomon))來達成保護。
第3圖是例示根據本發明某些實例性實施例,一無線資料傳輸系統100之一跨層最佳化系統之一實例性架構及某些組件之其他細節之方塊圖,無線資料傳輸系統100在應用層、媒體存取控制層及實體層處包含控制方案。使用量測值與回饋區塊來估計如位元錯誤率、視訊品質及某一服務級別之可用頻寬等條件。然後,應用層及媒體存取控制層中之模型可藉由進行最佳位元分配、減少前向錯誤校正所需之位元數目以及根據封包丟失之影響而確定封包之優先級來使視訊品質之失真最小化。
在某些實施例中,如第3圖中所例示,在應用層中,系統可基於來自接收器之回饋及量測值(例如,基於在傳回通道132上自接收器106接收之資料)而啟用/停用輕壓縮。回饋可以是例如基於視訊品質,且視訊 品質之量測值可以是例如基於由接收器報告之訊號雜訊比(signal-to-noise ratio;SNR)或峰值訊號雜訊比(peak signal-to-noise ratio;PSNR)。
第3圖中之媒體存取控制層可包含諸多功能、模組或程序,例如包括畫素分割(pixel partitioning)、重傳及多重循環冗餘檢查(Cyclic Redundancy Check;CRC)、具有如最高有效位元(MSB)/最低有效位元(least significant bit;LSB)間隔等特徵之封包化、及不同緩衝器。基於自實體層接收之回饋或應用層中之參數,系統(例如,跨層影像最佳化模組134)可在媒體存取控制層中改變此等功能之參數並判斷此等功能、模組或程序應如何工作。舉例而言,系統可判斷是否執行畫素分割以及若執行畫素分割則判斷如何將各分區劃分成封包。此外,系統可用以判斷或選擇是否啟用重傳。
根據某些實施例,系統(例如,跨層影像最佳化模組134)可在不等錯誤保護實施方案中利用此等特徵。舉例而言,封包中之某些可具有如重傳等此等特徵,或此等特徵對於不同封包可具有不同參數(如不同調變與編碼方案或最高有效位元/最低有效位元間隔)。
如第3圖中所例示,實體層(例如,在接收器中具有一對應實體層126之實體層302、以及在傳送器中具有一對應實體層120之實體層300)亦可併入有多個層以實施不等錯誤保護。可以不同調變與編碼方案值經由不同層來發送不同封包。不同層亦可與具有不同優先級之不同緩衝器相關聯。根據某些實例性實施例,系統(例如,跨層影像最佳化模組134)可根據視訊品質及量測值回饋而使不同封包與不同層及緩衝器相關聯。
根據本發明之某些實例性實施例,在進行未壓縮或壓縮傳輸時跨層影像最佳化中之第一步驟是分層(layering)或分割。本發明之實施 例利用以下更詳細闡述之複數個預定義分層及/或分割設定檔。作為一資料傳輸會話之一部分,基於例如包括以下在內之一或多個預定義參數來選擇不同分層及/或分割設定檔其中之一:顯示裝置之類型、視訊視覺品質(包括峰值訊號雜訊比(PSNR))之不同標準或指示符、通道品質之不同標準或指示符、編碼解碼器要求或選擇、調變與編碼方案、及資料速率要求等。各該設定檔指示傳送器及接收器中之不同一組程序(例如,包括一不同錯誤校正技術、壓縮、或封包化)或由該不同一組程序定義。
另外,作為跨層影像最佳化之一部分,本發明之實施例可對不同層之有序位元串流利用一不等錯誤保護(UEP)方法。可對經基於層壓縮之視訊或未壓縮視訊執行位元串流或封包之定序。根據通道品質而對不同層利用不同調變與編碼方案值。
根據本發明之某些實例性實施例,作為本發明之跨層影像最佳化系統及方法之一部分,可利用封包動態標記(例如,在IEEE 802.11ad中)。可將重要性等級及對應資訊傳送或傳訊至接收器,乃因在傳送器之媒體存取控制封包化器及接收器之解封包化器中實施了重要性等級感知程序(importance level aware procedure)。
如以上所述,根據本發明之實施例,作為本發明之跨層影像最佳化系統及方法之一部分,系統可利用動態分層及分割設定檔。傳送器及接收器(例如,傳送器102及接收器106)二者可利用或商定複數個預定義分層/分割設定檔。可基於以下來選擇此等設定檔:視訊視覺品質(包括峰值訊號雜訊比)之不同標準、通道品質之不同標準、編碼解碼器要求或選擇、調變與編碼方案、資料速率要求等。然後,接收器選擇對應演算法來運行以將分層方法反轉及/或使用與所選設定檔對應之一錯誤隱藏演算法 來進一步校正任何傳輸錯誤。
在一個實施例中,系統將7個設定檔與各種通道條件一起使用,但設定檔之數目並非僅限於此,且可根據無線資料傳輸系統之設計及功能而利用任何適合數目之設定檔。
舉例而言,當通道以理想或幾乎理想之條件運作時,可定義一設定檔「00」,而當通道以極差條件運作時,可定義一設定檔「06」。然後,針對各種中間條件定義介於「00」與「06」間之設定檔。
舉例而言,當通道品質是高時,可為未壓縮視訊傳輸定義一個設定檔(例如,設定檔「00」或理想/幾乎理想條件設定檔)。對於此種設定檔,畫素分割技術可假定彼此靠近之畫素含有極類似內容之概率是高的。若具有4個畫素之一群組中之任一畫素遺漏,則可依據其他3個所擷取畫素重新計算出該畫素。如第4圖中所例示,可藉由將一影像劃分成4種類型之畫素來選擇設定檔「00」。將一種類型中三種顏色之畫素打包成1個封包。所有四種類型之封包皆被傳送至接收器。由於知曉傳送的是設定檔「00」,因而接收器可改良影像品質。舉例而言,若該等畫素其中之任一者之畫素資料(或該畫素中之任一顏色)遺漏,則接收器運行一求平均方法,以藉由對具有4或8個周圍畫素之一群組(用於求平均之畫素之數目可以是動態的)求平均來替換遺漏之畫素或顏色。影像壓縮方法亦依賴於如下理念:每一畫素旁邊之畫素將具有相關值。與一熵編碼壓縮演算法(entropy-coded compression algorithm)相較,此種方法之實施可更簡單且防位元錯誤能力更穩健。
類似於第一設定檔(設定檔「00」),可藉由將一影像劃分成4種類型之畫素來選擇一第二設定檔(例如,設定檔「01」)。然而,選擇三 種類型之畫素來進行傳輸。系統計算因丟棄一種類型之畫素所引起之所得失真是否低於一臨限值。若此設定檔被傳訊至接收器,則接收器將依據四個畫素類型其中之每一者內三個(或更多個)其他畫素之一平均值來估計遺漏之畫素資料值。可基於例如包括視覺品質(例如,峰值訊號雜訊比)在內之不同標準來選擇臨限值。亦可傳訊對不被傳送之畫素類型之選擇以及臨限值。
一第三設定檔(例如,設定檔「02」)可在較以上所述之前二個設定檔(例如,設定檔「00」及「01」)低之一頻寬上運作(例如,該第三設定檔因該較低之頻寬而被選擇)。舉例而言,第三設定檔可不在封包其中之一或全部中傳送畫素之最低有效位元(LSB)。然後,在接收器中,一求平均演算法可補償彼等位元。對於未壓縮視訊,可考量另一失真臨限等級來選擇第三設定檔(例如,設定檔「02」)而非以上所述之第一設定檔或第二設定檔(例如,設定檔「01」或「00」)。
對於經壓縮視訊,當通道之品質較低且實體層傳訊調變與編碼方案之一較低值時,可考量其他設定檔。舉例而言,可使用多種品質分層,以為無線視訊傳輸定義新的設定檔。在基於層之壓縮中,可如以上所述產生多個層。根據本發明之實施例,最高層可包含在該等層中具有最高壓縮比之資料,且最低層可包含在被添加至更高層時將形成具有一相對低壓縮比(例如,1:1或1:1.5、或者任何適合或在視覺上無損失之壓縮比)之一影像之資料。舉例而言,在一三層式壓縮方案(例如,如第2圖中所例示),層1可包含壓縮比為4:1之經壓縮影像資料。層2可包含在被添加至層1時將形成壓縮比為2:1之經壓縮影像之資料。層3可包含在被添加至層1及層2時所得影像具有壓縮比1:1(或1.5:1、或者任何其他在視覺上無損失之壓縮比)之 位元串流。
傳送器根據通道品質、視覺品質、編碼解碼器要求等來選擇欲發送哪些層。我們可將一第四設定檔(例如,設定檔「03」)定義為發送層1、層2及層3(或所有層),將一第五設定檔(例如,設定檔「04」)設定為發送層1及層2(或該等層之一子集),並將一第六設定檔(例如,設定檔「05」)設定為僅發送層1或具有最高壓縮比之層。對於一第七設定檔(例如,設定檔「06」),傳送器可發送該等層其中之一之一部分,例如,層1及層2二者以及層3之僅一部分。由於知曉傳送的是第七設定檔(例如,設定檔「06」),因而接收器將查找遺漏之資料資訊或運行附加校正演算法。傳送器可在封包標頭中指示原始封包之長度以及所傳送封包長度。因此,接收器知曉層之一部分未被接收到且可推斷所接收封包之正確大小。此外,接收器警告解碼器:一封包之一部分未被接收到,且接收器可請求傳送器重新發送或重傳額外資訊。
可根據以下來建立附加設定檔:正傳送之資料之類型、將在上面顯示影像之顯示器之性質、或一影像之特定部分相對於同一影像之其他部分之重要性。舉例而言,根據某些實施例,影像之某些部分或某些區可在以下意義上較影像之其他部分重要:與影像之一部分對應之位元之資料傳輸錯誤可較與影像之另一部分對應之位元之資料傳輸錯誤更易被觀看者覺察到。
根據某些實施例,可例如在其中顯示器(例如,顯示面板110)是一虛擬實境顯示器之一虛擬實境顯示系統之背景中部署跨層影像最佳化系統及方法。在此等情形中,觀看者對影像之絕大部分(例如,90%)覺察是集中於影像之中心及中心周圍(例如,中心15度視野),乃因使用者往往 會移動其頭來集中於一影像之不同部分上。因此,如第5圖中所例示,跨層影像最佳化系統及方法(例如,跨層影像最佳化模組134)可將與一影像之一第一區或中心區(例如,在第5圖中以標示「A」標示之區,例如,15度視野)對應之資料之優先級排定為高於該影像之一第二區(例如,在第5圖中以標示「B」標示之區,例如,介於第一區與第一區以外之一第二視域之間或介於15度視野與20度視野之間)。此外,影像之第一區及第二區二者之優先級可被排定為高於影像之一第三區(例如,在第5圖中標示為「C」之區,例如在第一區及第二區以外或在20度視野以外)。
美國專利申請案第15/288,977號中闡述另一種識別一影像的具有較高重要性或優先級之區之方法,該美國專利申請案以引用方式全文併入本文中。舉例而言,根據某些實施例,與一影像的具有較低重要性之區對應之資料相較,與一影像的具有較高重要性之區對應之資料可被指定為具有一更高重要性等級或一更高錯誤保護程度。一影像的具有較高重要性之區可根據與接收器對應之顯示裝置之類型而變化,例如,如本文參照第5圖所述。
由於影像之不同區可具有不同優先級,因而跨層影像最佳化系統及方法(例如,跨層影像最佳化模組134)可選擇一設定檔(例如,一分層/分割設定檔,如以上所論述)或一不等錯誤保護方案(以下更詳細所述),俾使第一區中之資料與影像之其他區中之資料相較具有最低錯誤等級,影像之第二區具有第二最低錯誤等級,依此類推。此外,根據某些實施例,跨層影像最佳化系統及方法(例如,跨層影像最佳化模組134)可將資料分割成使得一或多個外區中之錯誤不會蔓延至影像之最高優先級(例如,中心)區。
根據某些實例性實施例,跨層影像最佳化系統可在進行傳輸時例如利用以上所述之各種設定檔(例如,第一設定檔至第七設定檔)來將影像之不同部分排定優先級,進而為影像之較高優先級部分選擇編號較低之一設定檔(例如,易錯性較低之一設定檔),且為影像之較低優先級部分選擇編號較高之一設定檔(例如,易錯性較高之一設定檔)。根據某些實施例,可根據顯示裝置之類型(例如,電視機、虛擬實境顯示器、擴增實境顯示器、無線醫療顯示器等)來特別地預定義一單獨設定檔,俾使資料是根據正被交換之影像資料部分之優先等級而藉由不同傳送程序(例如,壓縮、編碼、封包化、位元丟棄(bit dropping)、或剪除)或藉由不同接收程序(例如,解壓縮、解碼、錯誤校正、解封包化、或重傳)被傳送。
在一個實施例中,分層或分割設定檔之選擇標準可以是基於視訊視覺品質(例如,峰值訊號雜訊比)及/或通道品質(例如,訊號雜訊比)。分層會識別出應發送未壓縮視訊、某些封包被丟棄之未壓縮視訊還是具有不同壓縮比之經壓縮視訊。不同層可在佇列優先級(queue priority)、延遲容限(delay tolerance)、錯誤保護、及/或可靠性方面被不同地對待。對應地,藉由選擇一設定檔或接收一設定檔編號,傳送器及接收器可在資料傳輸之前或作為資料傳輸之一部分啟用不同程序(例如,壓縮、編碼、封包化、位元丟棄、或剪除)、或者在資料接收之前或作為資料接收之一部分啟用不同程序(例如,解壓縮、解碼、錯誤校正、或解封包化)。
根據某些實施例,可藉由一媒體存取控制層標頭封包或實體層標頭封包中之位元選擇而將對設定檔之選擇傳送至接收器。基於位元選擇,接收器可識別出所選之分層方法。除設定檔編號以外,亦可將所選設定檔所需之任何其他資訊傳送至接收器,例如包括壓縮中之層數目及/或每 一層中之封包/位元組數目。額外資訊可以是藉由封包標頭中之位元型樣或經由一安全通道來進行發送、或者可被預定義。
因此,本發明之一或多個實例性實施例包含一種用於選擇一組預定義分層及/或分割設定檔來經由一無線資料通訊通道將資料(例如,未壓縮視訊資料)自一傳送器傳送至一接收器之系統及方法。可根據例如包括以下在內之各種條件或參數來選擇設定檔:通道品質、視訊品質、編碼解碼器要求或選擇、調變與編碼方案及資料速率要求、正傳送之資料之性質或特性、位於接收器端處(例如,耦合至接收器)之一顯示裝置之性質或特性等。舉例而言,可藉由媒體存取控制層標頭封包及/或實體層標頭封包中之一位元選擇將對設定檔之選擇自傳送器傳送至接收器。視所選設定檔而定,亦可將附加資訊自傳送器傳送(例如,在媒體存取控制層標頭封包及/或實體層標頭封包中)至接收器,以指示用於解壓縮、解碼、錯誤校正等之一或多個參數。基於自傳送器傳送至接收器之資訊(例如,位元選擇),接收器可能夠識別在傳送器處用於資料分層及/或分割及/或壓縮之方法及/或協定,且藉此選擇一對應演算法或程序來執行,以將分層及/或分割及/或壓縮反轉且亦利用與所選設定檔對應之錯誤隱藏演算法或程序來校正傳輸期間之任何錯誤。
本發明之實施例可更利用基於優先級之不等錯誤保護(UEP)來保護(例如,便利於恰當地傳輸)對於例如視訊解碼目的而言較重要之位元。舉例而言,在基於層之壓縮中,與一越高壓縮率相關聯或對應(例如,與基礎層或層1對應)之位元在視訊解碼中越重要且因此需要越多保護。另外,封包標頭或訊框標頭中之位元錯誤會使得視訊解碼器不能夠解碼後面之資料位元。在跨層影像最佳化系統及方法之一個實施例中, 如第6圖中所例示,將封包標頭移動至每一訊框之開頭。另外,如第7圖中所例示,可藉由獨有之開頭值及末尾值來識別封包標頭。當標頭被移動至訊框之開頭時,識別符亦被移動以將各標頭彼此分隔開。根據某些實例性實施例,亦可移除末尾識別符。可保持最後一個末尾識別符,以區分標頭資訊之末尾與下一層中之資料資訊。
根據某些實例性實施例,跨層影像最佳化系統及方法(例如,跨層影像最佳化模組134)可針對彼等標頭及基礎層利用不同保護技術以防在無線媒體中發生丟失或錯誤。舉例而言,根據某些實施例,可針對不同層利用不同調變與編碼方案值,或者可將不同前向錯誤校正(FEC)演算法與不同編碼率一起使用。另外,可在媒體存取控制層處執行不等錯誤保護操作,藉此使本發明之實施例能夠改良或最佳化重新組織引擎(reorganization engine)且亦使其適用於不同編碼解碼器。舉例而言,儘管應用層將整個資料遞送至媒體存取控制層,但媒體存取控制層在執行本文所述之各種跨層影像最佳化操作方面具有較大靈活性。另外,藉由在媒體存取控制層中執行不等錯誤保護,系統是相對更動態的,乃因可如本文中所述根據特定情形來以不同參數修改不同功能。此外,本發明之實施例可因此能夠基於無線通道之狀態而僅執行局部重新組織。
根據本發明實施例而利用之壓縮技術除提供具有不同壓縮比之層之外亦可藉由如第8圖中所例示提供不同資料分量而提供附加分割技術。舉例而言,各種類似之畫素位元(例如,具有相同或類似調變與編碼方案值之畫素位元)可被重新組織於一封包中,以被分組於一起。可使用亦可將輸出分割成優先級不同之多個層之任何適合之壓縮技術。可使用相同的移動標頭及資料之方法。可對標頭或資料分區使用不同調變與編碼 方案值或具有不同編碼率之前向錯誤校正。
在一個實施例中,標頭包含關於一訊框中位於該標頭之後的資料封包之長度之資訊。在某些例項中,跨層影像最佳化系統及方法可根據通道條件、調變與編碼方案條件、頻寬條件等在每一層或分區中傳送資料位元之一部分。因此,亦可將可被傳送之資料串流之長度附加至標頭資訊並傳送至接收器。舉例而言,可保留一固定或預定數目之位元組(N個位元組)來識別此長度。根據某些實例性實施例,為易於識別,可使資料串流之長度位於每一標頭之末尾。
因此,根據本發明某些實例性實施例之一種系統及方法可用以在經由無線資料通訊通道進行傳輸時在一基於層或基於等級之壓縮系統中根據優先級、延遲容限、及/或保護等級或可靠性等級來重新分割或重新組織位元。一資料訊框包含一訊框標頭及複數個封包標頭位元,該訊框標頭及該等封包標頭位元相較於資料位元需要一更高之保護等級。訊框中之資料位元亦可被分割成不同優先級、保護等級及/或可靠性等級。可根據一預定義或已知之位元串(bit string)識別標頭,且可根據一重要性次序將資料位元排序。根據某些實施例,可將優先級較高或延遲容限較低之位元移動或重新組織至一資料訊框之開頭。舉例而言,一資料訊框可以訊框標頭開始、後跟封包標頭、後跟資料位元(例如,按優先級次序或重要性次序)。可藉由預定義或預定位元串來分隔或識別各封包標頭。另外,根據某些實施例,可藉由將與每一封包標頭對應之長度之一指示符插入至封包標頭中、之前或之後來指示資料位元串流之長度。接收器處之一解碼器例如藉由以下操作來重新建構訊框:將封包標頭及其他資料位元移動至其原始位置(在重新組織之前),並移除任何另外插入之資料(例如資料長度位元), 然而,重新建構訊框亦使用附加資料。
因此,對於跨層影像最佳化,本發明之實施例可為任何基於層及/或基於等級之壓縮技術提供不等錯誤保護實施方案。可根據重要性等級或優先等級來重新組織各標頭、層及/或資料分區,且可在傳送器之媒體存取控制層中執行此種重新組織。根據跨層影像最佳化方案,可移除或丟棄每一封包中之資料之某一部分,且可將關於此資料之資訊併入至標頭資訊中。另外,本發明之實施例可例如藉由以下方式來利用不等錯誤保護:利用不同調變與編碼方案值來進行前向錯誤校正,進而以不同重要性等級或不同地保護資訊。作為根據本發明某些實例性實施例之不等錯誤保護之一部分,由於所有標頭可被重新組織以被分組於一起(例如,一個位置處),因而所有標頭可經歷一種不等錯誤保護演算法之作用,而非例如對一訊框中之標頭其中之每一者單獨地利用多次小的前向錯誤校正。
根據本發明之某些實例性實施例,由於可使用不等錯誤保護及基於層/基於分區之壓縮來不同地保護不同封包,因而丟失不同封包會不同地影響視覺品質。舉例而言,若基礎層或標頭中之某些封包丟失,則系統可能不能在接收器側處重新建構視訊。另一方面,某些封包之丟失可使得峰值訊號雜訊比劣化。另外,如以上所論述,視在系統中利用之顯示裝置之類型而定,影像資料之不同部分可較影像資料之其他部分在使錯誤最小化方面具有一更高優先級。因此,本發明之實施例可更利用動態不等錯誤保護及重要性感知標記,如以下更詳細所述。
如以上所論述,根據本發明實施例之跨層影像最佳化系統及方法運作以基於優先級、延遲容限、保護或可靠性而將封包分割成不同重要性等級。每一重要性等級可在傳送及/或接收中被不同地對待。
在一個實施例中,每一訊框被劃分成重要性等級不同之多個視訊封包。然後,系統為各該封包標記對應重要性等級,且對應位元被打包成聚合媒體存取控制協定資料單元(Aggregated MAC Protocol Data Unit;A-MPDU)子訊框及實體層收斂程序(Physical Layer Convergence Procedure;PLCP)協定資料單元(PLCP Protocol Data Unit;PPDU)訊框。在一個實例中,實體層收斂程序協定資料單元可被標記有重要性等級且被動態地與具有相同重要性等級之封包及聚合媒體存取控制協定資料單元子訊框打包於一起。若啟用重傳,則需要將需被重傳之聚合媒體存取控制協定資料單元子訊框排成佇列並放置於具有恰當重要性等級之恰當實體層收斂程序協定資料單元中。
根據另一實施例,可根據重要性等級來標記每一聚合媒體存取控制協定資料單元子訊框。在此種情形中,所有實體層收斂程序協定資料單元在重要性等級方面被視為等同的,且其被與具有不同重要性等級之聚合媒體存取控制協定資料單元打包於一起。在需要重傳之延遲敏感情景中,較佳可標記聚合媒體存取控制協定資料單元子訊框而非實體層收斂程序協定資料單元封包。雖然標記聚合媒體存取控制協定資料單元子訊框而非實體層收斂程序協定資料單元封包可對標籤資訊利用更多額外負荷(overhead),但此種方法對於管理具多個重要性等級之封包而言可更容易。
根據各種實施例,可將一位元型樣添加至聚合媒體存取控制協定資料單元或實體層收斂程序協定資料單元之標頭,以標記封包。該位元型樣可以是M個位元,其中0...0表示最高重要性且1...1表示最低重要性。根據某些實施例,值M可被預定義,或者值M可作為標頭資訊之一部分被傳訊。根據某些實施例,傳送器及接收器可定義2^M個重要性等級並為每一等 級定義不同程序。
為在以IEEE 802.11ad或IEEE 802.11ay進行無線視訊傳輸時達成一有保證之服務品質,根據本發明某些實例性實施例之跨層影像最佳化系統及方法可藉由動態重要性等級感知自適應性調變與編碼來為每一被標記之重要性等級實施不等錯誤保護。可以不同調變與編碼方案值來調變不同重要性等級,或者可以不同前向錯誤校正(FEC)值或以相同前向錯誤校正值但以不同編碼率來編碼不同重要性等級。
在先前技術之系統中,實體層可推薦適於當前通道情形之調變與編碼方案索引。然而,根據本發明之某些實施例,跨層影像最佳化系統及方法可針對位元串流之大部分來調適所推薦之調變與編碼方案。舉例而言,系統可針對重要性較高之層或封包使調變與編碼方案索引遞減,且針對重要性較低之層或封包使調變與編碼方案索引遞增。第9圖例示未壓縮視訊傳輸之一實例,其中系統為表示畫素中之紅色、綠色及藍色(Red,Green,and Blue;RGB)之位元之最高有效位元/最低有效位元部分選擇不同調變與編碼方案值。四個最高有效位元是以MCS-1進行發送,接下來的2個位元是以MCS進行發送,且最後2個最低有效位元是以MCS+1進行發送。該實例亦包含將位元重新分組成複數個封包/聚合媒體存取控制協定資料單元子訊框,俾使具有相同調變與編碼方案索引之位元被分組至同一封包/聚合媒體存取控制協定資料單元子訊框中。
舉例而言,對於經壓縮視訊傳輸,在如以上參照第6圖及第8圖所述執行基於層之壓縮並根據傳輸之重要性等級將位元重新組織之後,標頭及基礎層1是以MCS-1進行傳送,層2是以MCS進行傳送,且最後,層3可以是以MCS或MCS+1進行發送。因此,標頭及層1受到更多保護且幾乎 無錯誤地被傳送。由於此等資訊位元是以MCS-1進行發送,因而所需頻寬很可能會超過通道關於調變與編碼方案所支援之頻寬。為進行補償,可丟棄層3之某些部分,及/或可以MCS+1來調變層3位元。
在IEEE 802.11ad中,對於具有262,143個位元組之每一實體層收斂程序協定資料單元封包,僅傳訊調變與編碼方案索引。因此,若實體層收斂程序協定資料單元被標記有重要性等級,則本發明之實施例可利用IEEE 802.11ad程序,以對每一封包使用所推薦之調變與編碼方案索引或經修改之調變與編碼方案索引。根據某些實施例,可將IEEE 802.11ad中之傳訊修改成使得針對每一聚合媒體存取控制協定資料單元子訊框而傳訊調變與編碼方案。舉例而言,可利用每一封包之標頭中當前保留之位元或未使用之資訊。根據IEEE 802.11ad規範,標頭包含第10圖所示欄位。作為一實例,在點對點(peer-to-peer)連接中,本發明之實施例使用「位址4」來傳訊調變與編碼方案。本發明之實施例可另外將新位元組添加至標頭,以為每一聚合媒體存取控制協定資料單元傳訊調變與編碼方案。
因此,根據本發明某些實例性實施例之一跨層影像最佳化系統及方法可運作以例如基於優先級、延遲容限、及/或保護或可靠性而將一視訊訊框之資料(例如,畫素資料、封包等)分割成不同重要性類別。可將每一視訊訊框劃分成多個重要性等級,且可將對應位元打包成複數個聚合媒體存取控制協定資料單元子訊框。可根據重要性等級來標記不同封包(例如,聚合媒體存取控制協定資料單元子訊框、實體層收斂程序協定資料單元子訊框等),且根據某些實施例,可將不同封包根據其重要性次序傳送至接收器。可將不同封包(例如,聚合媒體存取控制協定資料單元子訊框)根據其重要性等級來進行分組(例如,分組成複數個實體層收斂程序 協定資料單元封包)。可將指示重要性等級之一值或標籤添加至封包之標頭。在接收器端處,接收器可能夠確定標籤等級,且藉此根據標記來進一步啟用不同錯誤恢復及/或隱藏程序。另外,可藉由為每一封包選擇不同調變與編碼方案(MCS)值而不同地保護具有不同重要性等級之資料。除標籤以外,亦可將對應調變與編碼方案值插入至封包之標頭中。
因此,本發明之實施例可針對無線資料傳輸在傳送器及接收器中啟用動態分割及/或封包標記(例如,在IEEE數十億位元802.11中)以及重要性感知程序,包括用於無線跨層影像最佳化之自適應性調變與編碼。本發明之實施例可能夠以多個內容驅動型標籤來標記聚合媒體存取控制協定資料單元(資料)封包內之每一小封包。該等標籤可被傳送及傳訊至接收器。可使不同程序或參數與該等標籤相關聯,該等程序或參數併入有本文所述跨層影像最佳化機制之各種態樣。另外,本發明之實施例可利用基於不等錯誤保護之標籤,例如自適應性調變與編碼(針對標籤進行調變與編碼方案調適)。
根據本發明之各種實施例,系統可在進行跨層影像最佳化時連續地監測各種參數及因數,並相應地進行調整。舉例而言,系統可監測來自接收器之傳回訊號,且隨著情形改變而例如藉由如以上所論述為後續資料傳輸選擇不同設定檔、壓縮或錯誤校正技術等來相應地調整跨層影像最佳化。
第11圖是例示根據本發明某些實例性實施例,一跨層影像最佳化方法中之各種操作之實例性流程圖。然而,第11圖所例示操作之數目及次序並非僅限於所例示之流程圖。舉例而言,根據某些實施例,可修改操作之次序(除非另有指示),或者可使過程包含附加操作或更少操作,此 皆不背離本發明之精神及範圍。舉例而言,根據本發明之某些實例性實施例,可將在本發明及對應各圖中所述之各種其他特徵及操作併入至該過程中,或者可省略某些操作。
該過程開始,且在1200處,系統(例如,無線資料傳輸系統100及/或傳送器102)自一資料源接收資料(例如,包含例如未壓縮視訊資料之一視訊資料訊號)。在1202處,由一接收器(例如,接收器106)接收傳回資料,該傳回資料包含關於對接收器之資料傳輸之各種資訊,例如包括通道品質、視覺品質、及連接至接收器之顯示裝置之類型。然後,在1204處,系統可識別顯示裝置之類型。在1206處,基於例如包括以下在內之一或多個預定義參數來選擇且然後傳送一分層/分割設定檔:顯示裝置之類型、視訊視覺品質(包括峰值訊號雜訊比(PSNR))之不同標準或指示符、通道品質之不同標準或指示符、編碼解碼器要求或選擇、調變與編碼方案、及資料速率要求等。
在1208處,可例如根據所選分層/分割設定檔來對資料執行基於層或基於等級之壓縮。然後,在1210處,如以上所論述,將資料之層、分區、封包、或位元根據其重要性等級而重新組織成複數個群組或封包。
在1212處,可標記資料以指示資料及/或資料封包之重要性等級。然後,在1214處,基於不同資料類型之重要性等級,可針對將資料傳送至接收器而執行不等錯誤保護。在1216處,將資料傳送至接收器,以例如供在一顯示面板上顯示。
可利用任何適合之硬體、韌體(例如,一應用專用積體電路(application-specific integrated circuit))、軟體、或軟體、韌體及硬體之一適合組合來實施根據本文所述本發明實施例之一無線資料傳輸系統及/或任 何其他相關裝置或組件。舉例而言,該無線資料傳輸系統之各種組件可形成於一個積體電路(integrated circuit;IC)晶片上或複數個單獨之積體電路晶片上。此外,該無線資料傳輸系統之各種組件可實施於一撓性印刷電路膜(flexible printed circuit film)、一膠帶載體封裝(tape carrier package;TCP)、一印刷電路板(printed circuit board;PCB)上,或者可與顯示裝置形成於同一基板上。此外,該無線資料傳輸系統之各種組件可以是一種過程(process)或執行緒(thread),該過程或執行緒在一或多個計算裝置中之一或多個處理器上運行、用於執行電腦程式指令並與其他系統組件互動以執行本文中所述之各種功能。該等電腦程式指令儲存於可使用一標準記憶體裝置(例如,一隨機存取記憶體(random access memory;RAM))而實施於一計算裝置中之一記憶體中。該等電腦程式指令亦可儲存於其他非暫時性電腦可讀取媒體(例如,一光碟唯讀記憶體(compact disc-read only memory;CD-ROM)、隨身碟(flash drive)等)中。此外,本發明所屬技術領域中具有通常知識者應認識到,各種計算裝置之功能可被組合或整合至一單個計算裝置中,或一特定計算裝置之功能可跨一或多個其他計算裝置分佈,此並不背離本發明實例性實施例之範圍。
雖然已在某些具體實施例中闡述了本發明,然而,本發明所屬技術領域中具有通常知識者將不難設計出所述實施例之變化形式,該等變化形式絕不背離本發明之範圍及精神。此外,本文發明自身將向本發明所屬技術領域中具有通常知識者暗示其他任務之解決方案及針對其他應用所作之變更。申請人之意圖是使申請專利範圍涵蓋本發明之所有此類用途、以及可在不背離本發明精神及範圍之條件下對為便於闡述本發明而選擇之本文發明實施例作出之彼等改變及潤飾。因此,本發明之實施例在所有方面皆應被視為例示性而非限制性,且本發明之範圍應由隨附申請專利 範圍及其等效內容而非以上說明來指示。

Claims (19)

  1. 一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法,該傳送器與一接收器進行電子通訊,該方法包含:由該傳送器自一資料源接收一視訊資料訊框;由該傳送器根據該視訊資料訊框之位元之重要性等級將該視訊資料訊框重新組織成複數個封包;由該傳送器為各該封包產生一標籤(tag),該等標籤對應於該等封包之不同相對重要性等級;由該傳送器基於與各該封包對應之該標籤而為各該封包執行不同保護技術;以及由該傳送器將該等封包及該等標籤傳送至該接收器以供在該顯示面板上顯示,使得各該封包是基於該等封包之對應標籤而根據該等不同保護技術被傳送。
  2. 如請求項1所述之方法,其中該標記各該封包之步驟包含將一位元型樣(bit pattern)添加至一封包之一標頭,該位元型樣指示該封包之一相對重要性等級。
  3. 如請求項1所述之方法,其中各該封包之該標籤基於該等封包之對應重要性等級而對應於一調變與編碼方案(modulation and coding scheme;MCS)值。
  4. 如請求項3所述之方法,其中重要性較高之封包具有較重要性較低之封包低之一調變與編碼方案值。
  5. 如請求項1所述之方法,其中各該封包之該標籤基於該等封包之對應重 要性等級而對應於一前向錯誤校正編碼率(forward error correction coding rate)。
  6. 如請求項1所述之方法,更包含:由該傳送器將該等封包打包成複數個聚合媒體存取控制(media access control;MAC)協定資料單元(Aggregated MAC Protocol Data Unit;A-MPDU)子訊框;以及由該傳送器將該等聚合媒體存取控制協定資料單元子訊框傳送至該接收器。
  7. 如請求項6所述之方法,更包含:由該傳送器以一相同標籤來標記複數個實體層收斂程序(Physical Layer Convergence Procedure;PLCP)協定資料單元(PLCP Protocol Data Unit;PPDU)訊框;由該傳送器將具有一相同重要性等級之該等聚合媒體存取控制協定資料單元子訊框打包至該等實體層收斂程序協定資料單元訊框中;以及由該傳送器將該等實體層收斂程序協定資料單元訊框傳送至該接收器。
  8. 如請求項1所述之方法,更包含由該傳送器根據與該接收器對應之一顯示裝置之一類型為該視訊資料訊框之一影像之不同區選擇該等不同保護技術。
  9. 一種用於經由一無線通訊通道將用於一顯示面板之資料傳送至一接收器之傳送器,該傳送器用以: 自一資料源接收一視訊資料訊框;根據該視訊資料訊框之位元之重要性等級將該視訊資料訊框重新組織成複數個封包;為各該封包產生一標籤,該等標籤對應於該等封包之不同相對重要性等級;基於與各該封包對應之該標籤為各該封包執行不同保護技術;以及將該等封包及該等標籤傳送至該接收器以供在該顯示面板上顯示,使得各該封包是基於該等封包之對應標籤而根據該等不同保護技術被傳送。
  10. 如請求項9所述之傳送器,其中該標記各該封包之步驟包含將一位元型樣添加至一封包之一標頭,該位元型樣指示該封包之一相對重要性等級。
  11. 如請求項9所述之傳送器,其中各該封包之該標籤基於該等封包之對應重要性等級而對應於一調變與編碼方案(MCS)值。
  12. 如請求項9所述之傳送器,其中各該封包之該標籤基於該等封包之對應重要性等級而對應於一前向錯誤校正編碼率。
  13. 如請求項9所述之傳送器,其中該傳送器更用以:將該等封包打包成複數個聚合媒體存取控制協定資料單元(A-MPDU)子訊框;以及將該等聚合媒體存取控制協定資料單元子訊框傳送至該接收器。
  14. 如請求項13所述之傳送器,其中該傳送器更用以:標記複數個實體層收斂程序(PLCP)協定資料單元(PPDU)訊框; 將具有一相同重要性等級之該等聚合媒體存取控制協定資料單元子訊框打包至該等實體層收斂程序協定資料單元訊框中;以及將該等實體層收斂程序協定資料單元訊框傳送至該接收器。
  15. 一種用於由一傳送器經由一無線通訊通道傳送用於一顯示面板之視訊之方法,該傳送器與一接收器進行電子通訊,該方法包含:由該傳送器自一資料源接收一視訊資料訊框;由該傳送器根據該視訊資料訊框之位元之重要性等級將該視訊資料訊框重新組織成複數個封包;由該傳送器為各該封包產生一標籤,該等標籤對應於該等封包之不同相對重要性等級;以及由該傳送器將該等封包及該等標籤傳送至該接收器以供在該顯示面板上顯示,使得各該封包是基於該等封包之對應標籤而根據不同保護技術被傳送。
  16. 如請求項15所述之方法,其中該標記各該封包之步驟包含將一位元型樣添加至一封包之一標頭,該位元型樣指示該封包之一相對重要性等級。
  17. 如請求項15所述之方法,更包含:由該傳送器將該等封包打包成複數個聚合媒體存取控制協定資料單元(A-MPDU)子訊框;以及由該傳送器將該等聚合媒體存取控制協定資料單元子訊框傳送至該接收器。
  18. 如請求項17所述之方法,更包含:由該傳送器以一相同標籤來標記複數個實體層收斂程序(PLCP) 協定資料單元(PPDU)訊框;由該傳送器將具有一相同重要性等級之該等聚合媒體存取控制協定資料單元子訊框打包至該等實體層收斂程序協定資料單元訊框中;以及由該傳送器將該等實體層收斂程序協定資料單元訊框傳送至該接收器。
  19. 如請求項15所述之方法,更包含:由該傳送器監測來自該接收器之一傳回訊號;以及由該傳送器基於通道品質或視訊品質至少其中之一之一改變而調整該等不同保護技術。
TW106132973A 2016-09-26 2017-09-26 用於傳送視訊之方法及資料傳送器 TWI766883B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201662400042P 2016-09-26 2016-09-26
US62/400,042 2016-09-26
US15/359,564 US10616383B2 (en) 2016-09-26 2016-11-22 System and method for electronic data communication
US15/359,564 2016-11-22

Publications (2)

Publication Number Publication Date
TW201820857A true TW201820857A (zh) 2018-06-01
TWI766883B TWI766883B (zh) 2022-06-11

Family

ID=59930286

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106132973A TWI766883B (zh) 2016-09-26 2017-09-26 用於傳送視訊之方法及資料傳送器

Country Status (6)

Country Link
US (1) US10616383B2 (zh)
EP (2) EP3300277A1 (zh)
JP (1) JP7071080B2 (zh)
KR (1) KR102326312B1 (zh)
CN (1) CN107872735B (zh)
TW (1) TWI766883B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019040066A1 (en) * 2017-08-24 2019-02-28 Hewlett-Packard Development Company, L.P. COLLISION AVOIDANCE FOR PORTABLE DEVICES
CN109150405B (zh) * 2018-09-19 2022-11-29 湖北工业大学 一种基于tv白频段的视频组播传输方法
US11523449B2 (en) * 2018-09-27 2022-12-06 Apple Inc. Wideband hybrid access for low latency audio
CN109257744B (zh) * 2018-11-05 2021-11-26 广东工业大学 5g数据传输方法、系统以及5g数据发送与接收装置
WO2020204251A1 (ko) * 2019-03-29 2020-10-08 엘지전자 주식회사 무선 스트림 전송 장치 및 수신 장치
CN112532342B (zh) * 2019-09-17 2023-05-16 华为技术有限公司 一种背反射通信中的数据传输方法和装置
US11576078B2 (en) * 2021-03-15 2023-02-07 International Business Machines Corporation Selective compression of data for uplink to a telecommunication network
WO2023115283A1 (zh) * 2021-12-20 2023-06-29 Oppo广东移动通信有限公司 一种通信方法、装置、网元、通信设备及计算机存储介质
CN114884937B (zh) * 2022-05-27 2024-01-09 宁夏中宁县京能新能源有限公司 一种新能源集控系统数据断点续传方法

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5881176A (en) * 1994-09-21 1999-03-09 Ricoh Corporation Compression and decompression with wavelet style and binary style including quantization by device-dependent parser
US6754277B1 (en) 1998-10-06 2004-06-22 Texas Instruments Incorporated Error protection for compressed video
ATE472897T1 (de) 2000-09-28 2010-07-15 Nokia Corp Verfahren und kompressor zur komprimierung von zeitstempelinformation von paketen
DE60036295T2 (de) 2000-12-08 2008-05-29 Sony Deutschland Gmbh Schnittstelle auf hoher Ebene für dienstqualitätbasierte mobile Multimedia-Anwendungen
US7406522B2 (en) 2001-09-26 2008-07-29 Packeteer, Inc. Dynamic partitioning of network resources
US7194622B1 (en) 2001-12-13 2007-03-20 Cisco Technology, Inc. Network partitioning using encryption
EP1953919A3 (en) * 2002-01-16 2009-09-23 Aviom, Inc. System and method for transmitting audio or video data using multiple levels of protection
US6952450B2 (en) * 2002-02-15 2005-10-04 Koninklijke Philips Electronics, N.V. Unequal error protection of video based on motion vector characteristics
US7509687B2 (en) * 2002-03-16 2009-03-24 Trustedflow Systems, Inc. Remotely authenticated operation method
WO2005043856A1 (fr) 2003-10-30 2005-05-12 Utstarcom (China) Co. Ltd. Dispositif et procede de transfert sans fil de paquets ip en temps reel a l'aide d'une technique d'en-tete de compression
US8090857B2 (en) 2003-11-24 2012-01-03 Qualcomm Atheros, Inc. Medium access control layer that encapsulates data from a plurality of received data units into a plurality of independently transmittable blocks
US7580356B1 (en) 2005-06-24 2009-08-25 Packeteer, Inc. Method and system for dynamically capturing flow traffic data
WO2007073362A1 (en) 2005-08-30 2007-06-28 Thomson Licensing Cross-layer optimization for scalable video multicast over ieee 802.11 wireless local area networks
WO2007031090A1 (en) 2005-09-15 2007-03-22 Aalborg Universitet A method of compressing the header of a data packet
US8006168B2 (en) * 2005-12-19 2011-08-23 Amimon Ltd Apparatus and method for applying unequal error protection during wireless video transmission
US8009609B2 (en) 2006-06-09 2011-08-30 Alcatel Lucent Maintaining quality of service for wireless communications
KR100893863B1 (ko) * 2006-09-05 2009-04-20 엘지전자 주식회사 무선 통신 시스템에서의 링크 적응적 데이터 전송 방법
JP2010522468A (ja) * 2006-12-20 2010-07-01 トムソン ライセンシング Tcpackの管理によるlanにおけるスループット改善
US8612857B2 (en) * 2007-01-08 2013-12-17 Apple Inc. Monitor configuration for media device
US7775431B2 (en) * 2007-01-17 2010-08-17 Metrologic Instruments, Inc. Method of and apparatus for shipping, tracking and delivering a shipment of packages employing the capture of shipping document images and recognition-processing thereof initiated from the point of shipment pickup and completed while the shipment is being transported to its first scanning point to facilitate early customs clearance processing and shorten the delivery time of packages to point of destination
US8300661B2 (en) * 2007-04-10 2012-10-30 Samsung Electronics Co., Ltd. System and method for wireless communication of uncompressed video using mode changes based on channel feedback (CF)
US20090103635A1 (en) * 2007-10-17 2009-04-23 Peshala Vishvajith Pahalawatta System and method of unequal error protection with hybrid arq/fec for video streaming over wireless local area networks
US8345778B2 (en) * 2007-10-29 2013-01-01 Lightwaves Systems, Inc. High bandwidth data transport system
US8095736B2 (en) 2008-02-25 2012-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Methods and systems for dynamic cache partitioning for distributed applications operating on multiprocessor architectures
KR101509257B1 (ko) * 2008-03-18 2015-04-08 한국전자통신연구원 광대역 고주파수 무선 시스템에서 다양한 형태의 비압축 동영상 신호 전송을 위한 차별적 오류 보호 방법 및 그 장치
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
KR101597987B1 (ko) 2009-03-03 2016-03-08 삼성전자주식회사 계층 독립적 잔차 영상 다계층 부호화 장치 및 방법
US9083986B2 (en) * 2009-05-01 2015-07-14 Broadcom Corporation Method and system for adaptive rate video compression and transmission
EP2249569A1 (en) 2009-05-08 2010-11-10 Imec Cross-layer optimization for transmission of video codec over wireless networks
EP2509359A4 (en) * 2009-12-01 2014-03-05 Samsung Electronics Co Ltd METHOD AND APPARATUS FOR TRANSMITTING A MULTIMEDIA DATA PACKET USING LAYER OPTIMIZATION
CA2743738A1 (en) 2010-06-18 2011-12-18 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Multilayer decoding using persistent bits
US9113371B2 (en) 2010-07-01 2015-08-18 The Hong Kong University Of Science And Technology Cross-layer optimization for next-generation WiFi systems
JP5663093B2 (ja) * 2010-10-01 2015-02-04 ドルビー ラボラトリーズ ライセンシング コーポレイション 参照ピクチャー処理のための最適化されたフィルタ選択
WO2012050758A1 (en) 2010-10-12 2012-04-19 Dolby Laboratories Licensing Corporation Joint layer optimization for a frame-compatible video delivery
US8553769B2 (en) 2011-01-19 2013-10-08 Blackberry Limited Method and device for improved multi-layer data compression
MX2013010281A (es) * 2011-03-09 2014-07-11 Sirius Xm Radio Inc Sistema y metodo para incrementar la eficiencia del ancho de banda de transmision.
US9210446B2 (en) 2011-09-12 2015-12-08 San Diego State University Research Foundation Slice priority prediction system for H.264 video
US9591318B2 (en) 2011-09-16 2017-03-07 Microsoft Technology Licensing, Llc Multi-layer encoding and decoding
MY178763A (en) 2011-09-29 2020-10-20 Mimos Berhad A method of allocating quality of service based on quality of transmission
US8971250B2 (en) 2011-10-29 2015-03-03 Ofinno Technologies, Llc Special subframe allocation
US20130203400A1 (en) 2011-11-16 2013-08-08 Flextronics Ap, Llc On board vehicle presence reporting module
US9942580B2 (en) 2011-11-18 2018-04-10 At&T Intellecutal Property I, L.P. System and method for automatically selecting encoding/decoding for streaming media
GB2511214B (en) * 2011-12-09 2018-06-27 Lg Electronics Inc Method for transmitting and receiving a frame in a wireless LAN system, and apparatus for supporting the method
CN107241606B (zh) 2011-12-17 2020-02-21 杜比实验室特许公司 解码系统、方法和设备以及计算机可读介质
US9819717B2 (en) * 2011-12-28 2017-11-14 Intel Corporation Video adaptation for content-aware wireless streaming
US20130243100A1 (en) * 2012-03-15 2013-09-19 Mediatek Inc. System and Method for Adaptive Frame Re-compression in Video Processing System
US9491108B2 (en) * 2012-05-15 2016-11-08 Marvell World Trade Ltd. Extended priority for ethernet packets
WO2014005077A1 (en) * 2012-06-29 2014-01-03 Vid Scale, Inc. Frame prioritization based on prediction information
GB2505399B (en) * 2012-07-11 2015-09-23 Canon Kk Method and device for receiving or transmitting data
WO2014160709A2 (en) * 2013-03-25 2014-10-02 Altiostar Networks, Inc. Systems and methods for scheduling of data packets based on delay tolerance of applications
JP5989934B2 (ja) 2013-03-26 2016-09-07 ドルビー ラボラトリーズ ライセンシング コーポレイション マルチレイヤvdr符号化における知覚量子化ビデオコンテンツのエンコーディング
US9818422B2 (en) 2013-08-30 2017-11-14 The Regents Of The University Of California Method and apparatus for layered compression of multimedia signals for storage and transmission over heterogeneous networks
AU2014316299B2 (en) 2013-09-05 2017-08-03 Sony Corporation Information processing device and information processing method
US9226137B2 (en) 2013-09-30 2015-12-29 Qualcomm Incorporated Method and apparatus for real-time sharing of multimedia content between wireless devices
US10264272B2 (en) 2013-10-15 2019-04-16 Qualcomm Incorporated Device and method for scalable coding of video information
WO2015075937A1 (ja) * 2013-11-22 2015-05-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報処理プログラム、受信プログラムおよび情報処理装置
KR101857666B1 (ko) 2014-01-03 2018-05-14 엘지전자 주식회사 로버스트 헤더 컴프레션 패킷 스트림을 포함하는 방송 신호를 송수신하는 방법 및 장치
US9832481B2 (en) 2014-01-03 2017-11-28 Qualcomm Incorporated Support of base layer of a different codec in multi-layer video coding
US9407734B2 (en) 2014-01-31 2016-08-02 Aruba Networks, Inc. System and method for efficient frame aggregation based on aggregation limits or parameters
US9591316B2 (en) 2014-03-27 2017-03-07 Intel IP Corporation Scalable video encoding rate adaptation based on perceived quality
CN105450969B (zh) * 2014-06-16 2019-01-15 联想(北京)有限公司 一种实时视频数据传输方法及电子设备
US10321350B2 (en) 2014-08-19 2019-06-11 Cambium Networks Limited Rate adapt algorithm for a wireless connection
CN107431819B (zh) 2014-12-31 2022-02-01 诺基亚技术有限公司 用于视频解码的方法、装置、计算机可读存储介质及视频解码器
CN105744275B (zh) * 2016-02-22 2019-04-05 青岛海信电器股份有限公司 一种视频数据输入、输出方法和装置

Also Published As

Publication number Publication date
CN107872735A (zh) 2018-04-03
US20180091634A1 (en) 2018-03-29
CN107872735B (zh) 2022-04-29
EP3300277A1 (en) 2018-03-28
KR20180035140A (ko) 2018-04-05
JP2018056994A (ja) 2018-04-05
US10616383B2 (en) 2020-04-07
JP7071080B2 (ja) 2022-05-18
KR102326312B1 (ko) 2021-11-15
TWI766883B (zh) 2022-06-11
EP3920445A1 (en) 2021-12-08

Similar Documents

Publication Publication Date Title
US10911763B2 (en) System and method for electronic data communication
TWI766883B (zh) 用於傳送視訊之方法及資料傳送器
TWI730181B (zh) 用於傳送視訊之方法及資料傳送器
CN107872296B (zh) 用于传输视频的方法和数据发射机
US8665967B2 (en) Method and system for bit reorganization and packetization of uncompressed video for transmission over wireless communication channels
US9648363B2 (en) Enhanced user experience for miracast devices
CN109937578A (zh) 用于视频流的方法和系统
KR102428831B1 (ko) 데이터 전송 방법 및 송신기
Mobasher et al. Cross layer image optimization (CLIO) for wireless video transmission over 802.11 ad multi-gigabit channels
CN115250383A (zh) 一种流媒体数据传输的方法及相关设备