TWI624174B - 音頻－視頻資料的發送方法、接收方法和音頻－視頻資料的傳輸系統 - Google Patents

音頻－視頻資料的發送方法、接收方法和音頻－視頻資料的傳輸系統 Download PDF

Info

Publication number
TWI624174B
TWI624174B TW105144325A TW105144325A TWI624174B TW I624174 B TWI624174 B TW I624174B TW 105144325 A TW105144325 A TW 105144325A TW 105144325 A TW105144325 A TW 105144325A TW I624174 B TWI624174 B TW I624174B
Authority
TW
Taiwan
Prior art keywords
audio
data
video
frame
signal
Prior art date
Application number
TW105144325A
Other languages
English (en)
Other versions
TW201728182A (zh
Inventor
吳其昌
石偉峰
Original Assignee
矽力杰半導體技術（杭州）有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 矽力杰半導體技術（杭州）有限公司 filed Critical 矽力杰半導體技術（杭州）有限公司
Publication of TW201728182A publication Critical patent/TW201728182A/zh
Application granted granted Critical
Publication of TWI624174B publication Critical patent/TWI624174B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/04—Systems for the transmission of one television signal, i.e. both picture and sound, by a single carrier
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/38—Transmitter circuitry for the transmission of television signals according to analogue transmission standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/10—Adaptations for transmission by electrical cable

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Abstract

本發明公開了一種音頻-視頻資料的發送方法，接收方法和音頻-視頻資料的傳輸系統。按照第一編碼規則將所述音頻資料轉換為音頻資料序列；按照第二編碼規則生成開始資料碼，結束資料碼和音頻幀時鐘碼；所述第一編碼規則不同於所述第二編碼規則；根據所述音頻幀時鐘信號和所述音頻資料序列生成一低速資料幀；通過這種特殊編碼的方式，尤其是對音頻幀時鐘信號的特殊編碼，可以使得在音頻資料的寫入和讀取所採用的時鐘信號是一致的，因此，音頻幀時鐘信號能夠準確的傳遞和還原，保證音頻資料讀取的準確性，音頻信號在傳輸過程中不會產生誤差；同時，在視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收端發送所述低速資料幀，大大提高了傳輸速率和效率。

Description

音頻-視頻資料的發送方法、接收方法和音頻-視頻資料的傳輸系統
本發明涉及音頻和視頻資料的傳輸技術領域，尤其涉及一種僅用一串列線同時傳輸音頻和視頻資料的傳輸方法和傳輸系統。
電子產品的視頻和音頻資料能夠給使用者帶來優秀的消費體驗，例如車載多媒體導航系統，百萬圖元攝像系統以及汽車後座娛樂設施等。隨著電子資訊技術的飛速發展，對視頻資料和音頻資料的傳輸也提出了更高的要求，如何佔用較少的資源，快速傳輸音頻和視頻資料是目前音視頻資料傳輸的發展方向。
根據現有技術的一種實現方案中，視頻信號和音頻信號在進行傳輸時，需要佈置兩條獨立的單串列線，即視頻同軸線纜和音頻同軸線纜。在傳輸過程中，視頻信號和音頻信號不是同步進行傳輸的，因此在接收端可能會出現視頻信號和音頻信號不同步的問題。同時，兩條單串列線的佈設也增加了系統的成本和成本。
根據現有技術的另一些實現方案中，視頻信號和音頻信號能夠通過一條單串列線進行同時傳輸。參考圖1A，為了能夠通過一條單串列線同時傳輸視頻信號和音頻信號，需要將視頻信號和音頻信號進行按照一 定的規則進行編碼和串列化，以形成具有圖1A所示的格式的串列資料。這裏，以串列資料為32bit為例，D0-D26為視頻信號比特位元，D27-D28為輔助控制信號比特位元，D29為音頻信號比特位元，其通過對音頻資料以及時鐘信號進行相應的資料編碼而獲得；D30為前饋控制通道比特位，D31為奇偶校驗比特位。圖1A所示的串列資料通過發送端和接收端之間的單串列線單串列線傳遞至接收端。然後，接收端對接收到的串列資料進行去串列化以及解碼以分別得到視頻信號和音頻信號。
但是，採樣這種實現方案，參考圖1B所示的依據現有技術的通過單串列線同時傳輸視頻信號和音頻信號，接收裝置恢復音頻信號的原理示意圖，在音頻寫入時，所依據的時鐘信號為PCLK，而在音頻輸出時，所依據的時鐘信號為OCLK，如可以為一振盪信號，由於寫入和讀取所採用的時鐘信號不一致，會影響音頻信號讀取的準確性，可能會使音頻信號在傳輸過程中產生一定的誤差。
另一方面，採用上述實現方案，音頻信號僅在串列資料傳輸的音頻信號時間區間內進行傳輸，資料的傳輸效率較低。
有鑒於此，本發明的目的在於提供一種新型的同時傳輸音頻和視頻資料的傳輸方法和傳輸系統，以解決現有技術中資料傳輸效率低，資料傳輸準確度低以及傳輸系統實現複雜，難度高等技術問題。
依據本發明一實施例的音頻和視頻資料的發送方法，包括，接收來自視頻源的視頻信號和來自音頻源的音頻信號；接收該音頻信號的音頻資料，以及檢測該音頻信號的音頻幀時鐘信號； 按照第一編碼規則將該音頻資料轉換為音頻資料序列；根據該音頻資料序列和該音頻幀時鐘信號，並按照第二編碼規則生成開始資料碼，結束資料碼和音頻幀時鐘碼；該第一編碼規則不同於該第二編碼規則；根據該音頻幀時鐘信號和該音頻資料序列生成一低速資料幀；在每一該音頻資料序列的開始時刻插入該開始資料碼，在該音頻資料序列的結束時刻插入該結束資料碼；以及在每一該音頻幀時鐘信號的開始時刻，將該音頻幀時鐘碼插入該低速資料幀；將該低速資料幀和該視頻信號集成封包以形成一高速資料幀；將該高速資料幀進行並轉串處理以形成一音視頻傳輸資料。
優選的，該音視頻傳輸資料的一個比特位元為該低速資料幀。
優選的，在每一音頻幀時鐘信號的上升沿時刻，將該音頻幀時鐘碼插入該低速資料幀。
優選的，該低速資料幀與幀之間可以填充無效資料。
優選的，所述音視頻傳輸資料的傳輸位元率是所述第一編碼規則所使用的時鐘頻率的整數倍。
優選的，該開始資料碼，該結束資料碼和該音頻幀時鐘碼插入編碼後的該音頻資料序列；並能與所述音頻資料序列區分出來。
優選的，在該視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收端發送該低速資料幀。
優選的，僅在該視頻信號的空閒時間區間內的該視頻資料時間段發送該低速資料幀。
優選的，在該視頻信號的有效時間區間內的音頻資料時間段和該視頻信號的空閒時間區間內的該視頻資料時間段發送該低速資料幀。
優選的，在該視頻信號的有效時間區間內的音頻資料時間段發送該低速資料幀的該音頻幀時鐘碼，在該視頻信號的空閒時間區間內的該視頻資料時間段發送該低速資料幀的該音頻資料序列。
依據本發明一實施例的音頻-視頻資料的接收方法，用以接收依據上述音頻-視頻資料的發送方法所產生的音視頻傳輸資料，包括，接收該音視頻傳輸資料；去串列化該音視頻傳輸資料，以得到該高速資料幀；拆包該高速資料幀，以得到該視頻信號和該低速資料幀；檢測該低速資料幀；當檢測到該低速資料幀的該開始資料碼時，開始累積檢測到的該音頻資料序列直至檢測到該結束資料碼；解碼該音頻資料序列，以得到該音頻資料；當檢測到該音頻幀時鐘碼時，解碼該音頻幀時鐘碼以得到該音頻幀時鐘信號；根據該音頻幀時鐘信號和該音頻資料得到該音頻信號。
依據本發明一實施例的音頻-視頻資料傳輸系統，包括， 發送裝置，用以接收來自視頻源的視頻信號和來自音頻源的音頻信號，並對視頻信號和音頻信號進行相適應的編碼、封包和串並行處理，以獲得承載視頻信號和音頻信號資訊的音視頻傳輸資料；該發送裝置包括音頻資料編碼模組、音頻幀時鐘信號檢測模組和低速資料幀封包模組；該音頻資料編碼模組用以依據第一編碼規則將該音頻信號的音頻資料轉換為音頻資料序列；該音頻幀時鐘信號檢測模組用以檢測該音頻信號的音頻幀時鐘信號，以獲得音頻幀時鐘信號資訊；該低速資料幀封包模組用以封包該音頻資料序列，開始資料碼，結束資料碼和音頻幀時鐘碼，以形成低速資料幀；該開始資料碼，該結束資料碼和該音頻幀時鐘碼根據第二編碼規則生成，該第一編碼規則不同於該第二編碼規則；根據該音頻幀時鐘信號和該音頻資料序列生成一低速資料幀；單串列線，用以傳輸該音視頻傳輸資料；接收裝置，接收該音視頻傳輸資料，並相應的進行拆包和解碼，分別獲取該視頻信號和該音頻信號。
優選的，在每一該音頻資料序列的開始時刻插入該開始資料碼，在該音頻資料序列的結束時刻插入該結束資料碼；以及在每一該音頻幀時鐘信號的開始時刻，將該音頻幀時鐘碼插入該低速資料幀。
優選的，在該視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收裝置發送該低速資料幀。
優選的，該接收裝置包括，串轉並模組，用以對接收該音視頻資料信號進行串並行處理，以獲得該高速資料幀；高速資料幀拆包模組，用以對所述高速資料幀進行拆包，以分別獲得所述視頻資料和低速資料幀；低速資料幀拆包模組，用以對該低速資料幀進行拆包和解碼，以分別獲得該音頻資料序列和該音頻幀時鐘信號資訊；音頻資料解碼模組，用以對該音頻資料序列進行解碼，以獲得該音頻資料；音頻幀時鐘信號還原模組，用以根據該音頻幀時鐘碼獲得該音頻幀時鐘信號；根據該音頻資料和該音頻幀時鐘信號獲得該音頻信號。
通過這種特殊編碼的方式，尤其是對音頻幀時鐘信號的特殊編碼，可以使得在音頻資料的寫入和讀取所採用的時鐘信號是一致的，因此，音頻幀時鐘信號能夠準確的傳遞和還原，保證音頻資料讀取的準確性，音頻信號在傳輸過程中不會產生誤差。
在依據本發明實施例的音頻-視頻資料的發送方法中，首先，判斷當前視頻信號的有效狀態和無效狀態，當視頻信號為有效狀態時，在視頻資料時間段內傳輸高速資料幀，在音頻資料時間段內傳輸低速資料幀；而當視頻信號為無效狀態時，即在視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收端發送所述低速資料幀，大大提高了傳輸速率和效率。
801‧‧‧視頻源
802‧‧‧高速數據幀封包模組
803‧‧‧並轉串模組
804‧‧‧音頻源
805‧‧‧音頻數據編碼模組
806‧‧‧高速幀時鐘信號檢測模組
807‧‧‧低速數據幀封包模組
808‧‧‧串轉並模組
809‧‧‧高速數據拆包模組
810‧‧‧低速數據拆包模組
811‧‧‧音頻數據解碼模組
812‧‧‧音頻幀時鐘信號還原模組
813‧‧‧音頻信號輸出
814‧‧‧發送裝置
815‧‧‧單串列線單串列線
816‧‧‧接收裝置
817‧‧‧視頻信號輸出
圖1A所示為依據現有技術的通過單串列線同時傳輸視頻信號和音頻信號時串列資料的格式示例圖；圖1B所示為依據現有技術的通過單串列線同時傳輸視頻信號和音頻信號，接收裝置恢復音頻信號的原理示意圖；圖2所示為依據本發明一實施例的音頻-視頻資料的發送方法的流程示意圖；圖3所示為依據本發明一實施例的低速資料幀的格式示意圖；圖4所示為採用雙時鐘符號編碼規則的原理示意圖；圖5所示為依據本發明一具體實施例的低速資料幀的格式示意圖；圖6所示為依據本發明一實施例的音頻-視頻資料的發送方法的原理示意圖；圖7所示為依據本發明實施例的音頻-視頻資料的接收方法的流程圖圖8所示為依據本發明一實施例的音頻-視頻資料傳輸系統的原理示意圖。
以下結合附圖對本發明的幾個優選實施例進行詳細描述，但本發明並不僅僅限於這些實施例。本發明涵蓋任何在本發明的精髓和範圍上做的替代、修改、等效方法以及方案。為了使公眾對本發明有徹底的瞭 解，在以下本發明優選實施例中詳細說明了具體的細節，而對本領域技術人員來說沒有這些細節的描述也可以完全理解本發明。
本發明可以各種形式呈現，以下將描述其中一些示例。
參考圖2，所示為依據本發明一實施例的音頻-視頻資料的發送方法的流程示意圖。在該實施例中，同時接收來自視頻源的視頻信號和來自音頻源的音頻信號，以及對接收到的視頻信號和音頻信號所進行的相適應的處理也是同時的，並無先後順序之分。在圖2的示例圖中的順序僅為方便說明而採用。
在該實施例中，音頻-視頻資料的發送方法包括以下步驟：S201：接收來自視頻源的視頻信號和來自音頻源的音頻信號；S202：接收所述音頻信號的音頻資料，以及檢測所述音頻信號的音頻幀時鐘信號；S203：按照第一編碼規則將所述音頻資料轉換為音頻資料序列；S204：根據所述音頻資料序列和所述音頻幀時鐘信號，並按照第二編碼規則生成開始資料碼，結束資料碼和音頻幀時鐘碼；S205：根據所述音頻幀時鐘信號和所述音頻資料序列生成一低速資料幀；在每一所述音頻資料序列的開始時刻插入所述開始資料碼，在所述音頻資料序列的結束時刻插入所述結束資料碼；以及在每一所述音頻幀時鐘信號的開始時刻，將所述音頻幀時鐘碼插入所述低速資料幀；S206：將所述低速資料幀和所述視頻信號集成封包以形成一高速資料幀； S207：將所述高速資料幀進行並轉串處理以形成一音視頻傳輸資料。
這裏，該第一編碼規則不同於該第二編碼規則。利用一些不會在編碼後的音頻資料序列出現的特徵碼來標識開始資料碼，結束資料碼和音頻幀時鐘碼，並用這些特徵碼來分界編碼後的音頻資料序列和插入音頻幀時鐘信號。
具體的，可以在每一該音頻資料序列的開始時刻插入該開始資料碼，在該音頻資料序列的結束時刻插入該結束資料碼來區分每一音頻資料序列；以及在每一該音頻幀時鐘信號的開始時刻，將該音頻幀時鐘碼插入該低速資料幀。
根據一具體實施例，檢測音頻幀時鐘信號的上升沿，以在每一音頻幀時鐘信號的上升沿時刻，將音頻幀時鐘碼插入該低速資料幀。
在具體實施例中，該低速資料幀與幀之間可以填充無效資料。
在形成該低速資料幀的過程中，音頻資料序列、音頻幀時鐘碼和無效資料按照一定的時序形成該低速資料幀。
參考圖3，所示為依據本發明一實施例的低速資料幀的格式示意圖。在每一低速資料幀的開始時刻插入開始資料碼，然後開始輸出記錄音頻資料序列的資料，由於音頻幀時鐘碼具有最高的優先順序，因此，如果在輸出音頻資料序列的資料的過程中，檢測到音頻幀時鐘信號，則中斷當前音頻資料序列的資料輸出，在插入該音頻幀時鐘信號碼後，再次開始輸出剩餘的當前音頻資料序列的資料直至結束，並在結束時刻插入結束資料碼。類似的，當檢測到另一低速資料幀的開始時刻時，則重複上述操 作，以將音頻資料序列和音頻幀時鐘信號依次記錄。與音頻資料序列編碼方式不同的開始資料碼和結束資料碼用來劃分每一音頻資料序列。低速資料幀與幀之間可以插入無效資料。
這裏，第一編碼規則可以是任何合適的編碼規則，第二編碼規則是與第一編碼規則不同的編碼規則，以將開始資料碼、結束資料碼和音頻幀時鐘信號碼與音頻資料序列相區分。
通過這種特殊編碼的方式，尤其是對音頻幀時鐘信號的特殊編碼，可以使得在音頻資料的寫入和讀取所採用的時鐘信號是一致的，因此，音頻幀時鐘信號能夠準確的傳遞和還原，保證音頻資料讀取的準確性，音頻信號在傳輸過程中不會產生誤差。
根據本發明的一實施例，第一編碼規則可以是雙時鐘符號編碼規則。參考圖4，所示為採用雙時鐘符號編碼規則的原理示意圖。
與傳統的雙相符號編碼規則不相同，根據該實施例的雙時鐘符號編碼規則，使用兩個相鄰高頻時鐘週期內的兩個狀態來表示一個資料比特。即兩個高頻時鐘來傳輸一個低速資料比特。第一個時鐘週期內的狀態總是和前一狀態相反，第二個時鐘週期內的狀態是和第一個時鐘週期內狀態相同還是相反，取決於這個音頻資料AUD的值。
當音頻資料AUD為1時，在其兩個時鐘週期內音頻資料序列AUS轉變一次電位(0->1或1->0)，使得音頻資料AUD變成兩個不同電位的資料，變成10或01；而當音頻資料AUD為0時，則不轉變電位，變成11或00。
利用這種編碼，所有的音頻資料將被編碼成音頻資料序列。因此，序列裏可以插入用第二編碼規則編碼的的特殊碼做其他用途。
第二編碼規則與第一編碼規則不同，例如，利用一些不可能在編碼後的音頻資料序列出現的特徵編碼碼來標識開始資料碼，結束資料碼，和音頻幀時鐘碼，並用這些特徵碼來分界編碼的音頻資料序列和插入音頻幀時鐘。
參考圖5，所示為一具體實施例的低速資料幀的格式示意圖。在該示例中，示出了特徵編碼--開始資料碼，結束資料碼，和音頻幀時鐘碼一種具體編碼數值，其數值如下表1所示。
這裏，由表徵音頻資料的低速資料幀和表徵視頻資料的視頻資料幀集成封包並進行串並行處理後形成的音視頻傳輸資料的位元數可以為合適的數值，例如，24bit，32bit等，其中，低速資料幀佔據該音視頻傳輸資料的一個比特位元。
依據現有技術的技術方案，由表徵音頻資料的低速資料幀和表徵視頻資料的視頻資料幀集成封包形成的音視頻傳輸資料通過單串列線向接收端發送方式為，在視頻資料時間段內發送視頻資料幀，在音頻資料時間段內發送低速資料幀。但是，由於低速資料幀通常情況下僅佔據該音視頻傳輸資料的一個比特位元，所以發送低速資料幀的音頻資料時間段較短，音頻資料的傳輸效率較低。
因此，在依據本發明實施例的音頻-視頻資料的發送方法中，首先，判斷當前視頻信號的有效狀態和無效狀態，當視頻信號為有效狀態時，在視頻資料時間段內傳輸視頻資料幀，在音頻資料時間段內傳輸低速資料幀；而當視頻信號為無效狀態時，即在視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收端發送所述低速資料幀。
參考圖6，所示為依據本發明一實施例的音頻-視頻資料的發送方法的原理示意圖。在該實施例中，當視頻信號為有效狀態時，在視頻資料時間段內傳輸視頻資料幀，在音頻資料時間段內傳輸低速資料幀；而當視頻信號為無效狀態時，即在視頻信號的空閒時間區間內，利用了16個視頻資料時間段來傳輸低速資料幀，大大提高了傳輸速率和效率。
不限於以上實施例的實現方式，也可以根據需要選擇其他合適的傳輸時間。例如，在所述視頻信號的有效時間區間內的音頻資料時間段和所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀；或者在所述視頻信號的有效時間區間內的音頻資料時間段發送所述低速資料幀的所述音頻幀時鐘碼，在所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀的所述音頻資料序列。
以下將結合實施例詳細說明依據本發明實施例的音頻-視頻資料的接收方法。
參考圖7，所示為依據本發明實施例的音頻-視頻資料的接收方法的流程圖。在該實施例中，接收圖2所示的音視頻傳輸資料，以分離出相應的高速資料幀和低速資料幀，並對高速資料幀和低速資料幀進行拆包 和解碼以獲得相應的音頻信號和視頻信號，上述操作是同時進行的，並無先後順序之分。在圖7的示例圖中的順序僅為方便說明而採用。
在該實施例中，音頻-視頻資料的發送方法包括以下步驟：S701：接收音視頻傳輸資料，去串列化該音視頻傳輸資料，以得到高速資料幀；S702：拆包該高速資料幀，以得到相應的視頻信號和低速資料；S703：檢測該低速資料幀；S704：當檢測到該低速資料幀的開始資料碼時，開始累積檢測到的音頻資料序列直至檢測到結束資料碼；S705：解碼該音頻資料序列，以得到相應的音頻資料；S706：當檢測到音頻幀時鐘碼時，解碼該音頻幀時鐘碼以得到該音頻幀時鐘信號；S707：根據該音頻幀時鐘信號和該音頻資料得到該音頻資料。
由於音頻幀時鐘信號採用是與音頻資料不同的特殊編碼，因此在音頻資料的寫入和讀取所採用的時鐘信號是一致的，因此，音頻幀時鐘信號能夠準確的傳遞和還原，保證音頻資料讀取的準確性，音頻信號在傳輸過程中不會產生誤差；同時，系統實現也會相對簡單。
參考圖8，所示為依據本發明一實施例的音頻-視頻資料傳輸系統的原理框圖。依據本實施例，音頻-視頻資料傳輸系統800包括發送裝置814，接收裝置816，以及連接在發送裝置814和接收裝置816之間的單串列線單串列線815。發送裝置814用以接收來自視頻源701的視頻信號和來自音頻源802的音頻信號，並對視頻信號和音頻信號進行相適應的編碼和包封，以 獲得承載視頻信號和音頻信號資訊的音視頻傳輸資料。通過單串列線單串列線815，接收裝置816接收該音視頻傳輸資料，並相應的進行去包封和解碼，分別獲取視頻信號並傳遞至視頻信號輸出810和音頻信號並傳遞至音頻信號輸出813。
具體的，發送裝置814包括音頻資料編碼模組805，音頻幀時鐘信號檢測模組806和低速資料幀封包模組807，用以對接收到的音頻信號進行轉換和處理。其中，音頻資料編碼模組805用以對接收到的音頻信號的音頻資料根據第一編碼規則進行編碼以獲得音頻資料序列；音頻幀時鐘信號檢測模組806用以檢測該音頻信號的音頻幀時鐘信號，以獲得音頻幀時鐘信號資訊；低速資料幀封包模組807接收音頻資料序列和音頻幀時鐘信號資訊，並根據第二編碼規則和該音頻幀時鐘信號資訊生成開始資料碼，結束資料碼和音頻幀時鐘碼；然後，根據該開始資料碼，結束資料碼和音頻幀時鐘碼和該音頻資料序列生成一低速資料幀。在每一所述音頻資料序列的開始時刻插入所述開始資料碼，在所述音頻資料序列的結束時刻插入所述結束資料碼；以及在每一所述音頻幀時鐘信號的開始時刻，將所述音頻幀時鐘碼插入所述低速資料幀。
發送裝置814還包括高速資料幀封包模組802和並轉串模組803。其中，高速資料幀封包模組802用以將接收到的視頻信號和該低速資料幀進行集成封包，以形成一高速資料幀；並轉串模組803用以將所述高速資料幀進行並轉串處理，以形成串列的音視頻傳輸資料。
單串列線816用以將該具有一定比特位元數的音視頻傳輸資料傳遞至接收裝置815。通常情況下，在視頻資料時間段內傳輸表徵視頻信 號的視頻資料，在音頻資料時間段內傳輸低速資料幀。為了提高音頻資料的傳輸效率，發送裝置814還可以包括視頻信號狀態檢測模組，以來檢測當前視頻信號的狀態。並判斷當前視頻信號是有效狀態還是無效狀態，當視頻信號為有效狀態時，在視頻資料時間段內傳輸表徵視頻信號的視頻資料，在音頻資料時間段內傳輸低速資料幀；而當視頻信號為無效狀態時，即在視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收端發送所述低速資料幀。
例如，當視頻信號為有效狀態時，在視頻資料時間段內傳輸視頻資料，在音頻資料時間段內傳輸低速資料幀；而當視頻信號為無效狀態時，即在視頻信號的空閒時間區間內，利用了部分視頻資料時間段來傳輸低速資料幀，大大提高了傳輸速率和效率。
不限於以上實施例的實現方式，也可以根據需要選擇其他合適的傳輸時間。例如，在所述視頻信號的有效時間區間內的音頻資料時間段和所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀；或者在所述視頻信號的有效時間區間內的音頻資料時間段發送所述低速資料幀的所述音頻幀時鐘碼，在所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀的所述音頻資料序列。
具體的，接收裝置815包括串轉並模組808，用以將收到的音視頻傳輸資料進行串轉並處理，以獲得高速資料幀。接收裝置815所包括的高速資料幀拆包模組809用以對高速資料幀進行拆包和解碼，以獲得相應的視頻資料及低速資料，並傳遞視頻資料至視頻信號輸出817和傳遞低速資料幀到低速資料幀拆包模組811。接收裝置815所包括的低速資料幀拆包模組 810用以對低速資料幀進行拆包和解碼以分別獲得音頻資料序列和音頻幀時鐘信號資訊。音頻資料解碼模組811用以對音頻資料序列進行解碼，以獲得音頻資料，音頻幀時鐘信號還原模組812用以通過檢測所述音頻幀時鐘碼獲得音頻幀時鐘信號。根據音頻資料和音頻幀時鐘信號能夠準確的將音頻信號還原，並傳遞至音頻信號輸出813。
在該實施例中，通過這種特殊編碼的方式，尤其是對音頻幀時鐘信號的特殊編碼，可以使得在音頻資料的寫入和讀取所採用的時鐘信號是一致的，因此，音頻幀時鐘信號能夠準確的傳遞和還原，保證音頻資料讀取的準確性，音頻信號在傳輸過程中不會產生誤差。
應當說明的是，在本文中，諸如第一和第二等之類的關係術語僅僅用來將一個實體或者操作與另一個實體或操作區分開來，而不一定要求或者暗示這些實體或操作之間存在任何這種實際的關係或者順序。而且，術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含，從而使得包括一系列要素的過程、方法、物品或者設備不僅包括那些要素，而且還包括沒有明確列出的其他要素，或者是還包括為這種過程、方法、物品或者設備所固有的要素。在沒有更多限制的情況下，由語句“包括一個......”限定的要素，並不排除在包括所述要素的過程、方法、物品或者設備中還存在另外的相同要素。
依照本發明的實施例如上文所述，這些實施例並沒有詳盡敍述所有的細節，也不限制該發明僅為所述的具體實施例。顯然，根據以上描述，可作很多的修改和變化。本說明書選取並具體描述這些實施例，是為了更好地解釋本發明的原理和實際應用，從而使所屬技術領域技術人員 能很好地利用本發明以及在本發明基礎上的修改使用。本發明僅受權利要求書及其全部範圍和等效物的限制。

Claims (15)

  1. 一種音頻-視頻資料的發送方法，其特徵在於，包括，接收來自視頻源的視頻信號和來自音頻源的音頻信號；接收所述音頻信號的音頻資料，以及檢測所述音頻信號的音頻幀時鐘信號；按照第一編碼規則將所述音頻資料轉換為音頻資料序列；根據所述音頻資料序列和所述音頻幀時鐘信號，並按照第二編碼規則生成開始資料碼，結束資料碼和音頻幀時鐘碼；所述第一編碼規則不同於所述第二編碼規則；根據所述音頻幀時鐘信號和所述音頻資料序列生成一低速資料幀；在每一所述音頻資料序列的開始時刻插入所述開始資料碼，在所述音頻資料序列的結束時刻插入所述結束資料碼；以及在每一所述音頻幀時鐘信號的開始時刻，將所述音頻幀時鐘碼插入所述低速資料幀；將所述低速資料幀和所述視頻信號集成封包以形成一高速資料幀；將所述高速資料幀進行並轉串處理以形成一音視頻傳輸資料。
  2. 根據請求項1所述的音頻-視頻資料的發送方法，其中，所述音視頻傳輸資料的一個比特位元為所述低速資料幀。
  3. 根據請求項1所述的音頻-視頻資料的發送方法，其中，在每一音頻幀時鐘信號的上升沿時刻，將所述音頻幀時鐘碼插入所述低速資料幀。
  4. 根據請求項1所述的音頻-視頻資料的發送方法，其中，所述低速資料幀還包括無效資料。
  5. 根據請求項1所述的音頻-視頻資料的發送方法，其中，所述第一編碼規則所使用的時鐘頻率是所述音視頻傳輸資料的傳輸位元率的整數倍。
  6. 根據請求項5所述的音頻-視頻資料的發送方法，其中，所述開始資料碼，所述結束資料碼和所述音頻幀時鐘碼與編碼後的所述音頻資料序列不相同。
  7. 根據請求項1所述的音頻-視頻資料的發送方法，其中，在所述視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收端發送所述低速資料幀。
  8. 根據請求項7所述的音頻-視頻資料的發送方法，其中，僅在所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀。
  9. 根據請求項7所述的音頻-視頻資料的發送方法，其中，在所述視頻信號的有效時間區間內的音頻資料時間段和所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀。
  10. 根據請求項7所述的音頻-視頻資料的發送方法，其中，在所述視頻信號的有效時間區間內的音頻資料時間段發送所述低速資料幀的所述音頻幀時鐘碼，在所述視頻信號的空閒時間區間內的所述視頻資料時間段發送所述低速資料幀的所述音頻資料序列。
  11. 一種音頻-視頻資料的接收方法，用以接收如請求項1所述發送方法中的音視頻傳輸資料，其特徵在於，包括：接收所述音視頻傳輸資料；去串列化所述音視頻傳輸資料，以得到所述高速資料幀；拆包所述高速資料幀，以得到所述視頻信號和所述低速資料幀；檢測所述低速資料幀；當檢測到所述低速資料幀的所述開始資料碼時，開始累積檢測到的所述音頻資料序列直至檢測到所述結束資料碼；解碼所述音頻資料序列，以得到所述音頻資料；當檢測到所述音頻幀時鐘碼時，解碼所述音頻幀時鐘碼以得到所述音頻幀時鐘信號；根據所述音頻幀時鐘信號和所述音頻資料得到所述音頻信號。
  12. 一種音頻-視頻資料傳輸系統，其特徵在於，包括，發送裝置，用以接收來自視頻源的視頻信號和來自音頻源的音頻信號，並對視頻信號和音頻信號進行相適應的編碼、封包和串並行處理，以獲得承載視頻信號和音頻信號資訊的音視頻傳輸資料；所述發送裝置包括音頻資料編碼模組、音頻幀時鐘信號檢測模組和低速資料幀封包模組；所述音頻資料編碼模組用以依據第一編碼規則將所述音頻信號的音頻資料轉換為音頻資料序列；所述音頻幀時鐘信號檢測模組用以檢測所述音頻信號的音頻幀時鐘信號，以獲得音頻幀時鐘信號資訊；所述低速資料幀封包模組用以封包所述音頻資料序列，開始資料碼，結束資料碼和音頻幀時鐘碼，以形成低速資料幀；所述開始資料碼，所述結束資料碼和所述音頻幀時鐘碼根據第二編碼規則生成，所述第一編碼規則不同於所述第二編碼規則；根據所述音頻幀時鐘信號和所述音頻資料序列生成一低速資料幀；單串列線，用以傳輸所述音視頻傳輸資料；接收裝置，接收所述音視頻傳輸資料，並相應的進行拆包和解碼，分別獲取所述視頻信號和所述音頻信號。
  13. 根據請求項12所述的音頻-視頻資料傳輸系統，其中，在每一所述音頻資料序列的開始時刻插入所述開始資料碼，在所述音頻資料序列的結束時刻插入所述結束資料碼；以及在每一所述音頻幀時鐘信號的開始時刻，將所述音頻幀時鐘碼插入所述低速資料幀。
  14. 根據請求項12所述的音頻-視頻資料傳輸系統，其中，在所述視頻信號的空閒時間區間內，利用全部或者部分視頻資料時間段向接收裝置發送所述低速資料幀。
  15. 根據請求項12所述的音頻-視頻資料傳輸系統，其中，所述接收裝置包括，串轉並模組，用以對接收所述音視頻資料信號進行串並行處理，以獲得所述所述高速資料幀；高速資料幀拆包模組，用以對所述高速資料幀進行拆包，以分別獲得所述視頻信號和所述低速資料幀；低速資料幀拆包模組，用以對所述低速資料幀進行拆包和解碼，以分別獲得所述音頻資料序列和所述音頻幀時鐘信號資訊；音頻資料解碼模組，用以對所述音頻資料序列進行解碼，以獲得所述音頻資料；音頻幀時鐘信號還原模組，用以根據所述音頻幀時鐘信號碼獲得所述音頻幀時鐘信號；根據所述音頻資料和所述音頻幀時鐘信號獲得所述音頻信號。
TW105144325A 2015-12-30 2016-12-30 音頻－視頻資料的發送方法、接收方法和音頻－視頻資料的傳輸系統 TWI624174B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
??201511018356.9 2015-12-30
CN201511018356.9A CN105635748B (zh) 2015-12-30 2015-12-30 音频-视频数据的发送方法、接收方法和音频-视频数据的传输系统

Publications (2)

Publication Number Publication Date
TW201728182A TW201728182A (zh) 2017-08-01
TWI624174B true TWI624174B (zh) 2018-05-11

Family

ID=56050177

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105144325A TWI624174B (zh) 2015-12-30 2016-12-30 音頻－視頻資料的發送方法、接收方法和音頻－視頻資料的傳輸系統

Country Status (3)

Country Link
US (1) US9967517B2 (zh)
CN (1) CN105635748B (zh)
TW (1) TWI624174B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10701367B2 (en) * 2017-08-09 2020-06-30 Raytheon Company Method for encoding raw high frame rate video via an existing HD video architecture
CN108769699B (zh) * 2018-05-10 2019-11-19 天津瑞发科半导体技术有限公司 一种视频传输系统及方法
CN111105744A (zh) * 2019-12-31 2020-05-05 上海易维视科技有限公司 基于可编程逻辑的嵌入式显示端口实现方法及系统
CN112685355B (zh) * 2021-01-11 2022-03-18 龙迅半导体（合肥）股份有限公司 一种加串器

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5396497A (en) * 1993-02-26 1995-03-07 Sony Corporation Synchronization of audio/video information
US5661728A (en) * 1994-12-23 1997-08-26 Sip - Societa Italiana Per L'esercizio Delle Telecomunicazioni P.A. Decoder for audio signals of compressed and coded audiovisual streams
US20030035486A1 (en) * 2001-07-11 2003-02-20 Naoe Kato MPEG encoding apparatus, MPEG decoding apparatus, and encoding program
US20080175558A1 (en) * 2005-05-24 2008-07-24 Pixtree Technologis, Inc. Hardware Apparatus and Method Having Video/Audio Encoding and Multiplexing Functionality
TW200843364A (en) * 2007-04-27 2008-11-01 Magima Digital Information Co Ltd An audio decoder and method thereof
US20090028516A1 (en) * 2001-11-30 2009-01-29 Victor Company Of Japan, Ltd. After-recording apparatus
US20150181157A1 (en) * 2013-12-19 2015-06-25 Silicon Image, Inc. Apparatus, system and method for formatting audio-video information

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5132992A (en) 1991-01-07 1992-07-21 Paul Yurt Audio and video transmission and receiving system
US5579239A (en) 1994-02-16 1996-11-26 Freeman; Mitchael C. Remote video transmission system
CN1214588C (zh) * 1999-05-25 2005-08-10 索尼公司 传送方法、传送装置及传送系统
US6665002B2 (en) 2001-05-11 2003-12-16 Leadtek Research Inc. Real-time video/audio quality adjustment method
US7088398B1 (en) * 2001-12-24 2006-08-08 Silicon Image, Inc. Method and apparatus for regenerating a clock for auxiliary data transmitted over a serial link with video data
US20070035611A1 (en) 2005-07-27 2007-02-15 Chao-Hung Wu Mobile audio/video data transmission system and method for the same
JP2011043716A (ja) * 2009-08-21 2011-03-03 Sharp Corp 情報処理装置、会議システム、情報処理方法及びコンピュータプログラム
US8780939B2 (en) * 2009-11-03 2014-07-15 Maxim Integrated Products, Inc. System and method for transmitting audio data over serial link
DE102012200264B4 (de) * 2012-01-10 2024-02-01 Bayerische Motoren Werke Aktiengesellschaft Bildverarbeitungssystem fuer ein Fahrzeug
CN103051928B (zh) * 2013-01-25 2016-08-03 上海德思普微电子技术有限公司 无线音视频数据传输方法及装置
CN103237259A (zh) * 2013-03-29 2013-08-07 天脉聚源(北京)传媒科技有限公司 一种视频声道处理装置及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5396497A (en) * 1993-02-26 1995-03-07 Sony Corporation Synchronization of audio/video information
US5661728A (en) * 1994-12-23 1997-08-26 Sip - Societa Italiana Per L'esercizio Delle Telecomunicazioni P.A. Decoder for audio signals of compressed and coded audiovisual streams
US20030035486A1 (en) * 2001-07-11 2003-02-20 Naoe Kato MPEG encoding apparatus, MPEG decoding apparatus, and encoding program
US20090028516A1 (en) * 2001-11-30 2009-01-29 Victor Company Of Japan, Ltd. After-recording apparatus
US20080175558A1 (en) * 2005-05-24 2008-07-24 Pixtree Technologis, Inc. Hardware Apparatus and Method Having Video/Audio Encoding and Multiplexing Functionality
TW200843364A (en) * 2007-04-27 2008-11-01 Magima Digital Information Co Ltd An audio decoder and method thereof
US20150181157A1 (en) * 2013-12-19 2015-06-25 Silicon Image, Inc. Apparatus, system and method for formatting audio-video information

Also Published As

Publication number Publication date
US9967517B2 (en) 2018-05-08
CN105635748B (zh) 2019-02-01
US20170195622A1 (en) 2017-07-06
CN105635748A (zh) 2016-06-01
TW201728182A (zh) 2017-08-01

Similar Documents

Publication Publication Date Title
TWI624174B (zh) 音頻－視頻資料的發送方法、接收方法和音頻－視頻資料的傳輸系統
KR101949964B1 (ko) 임베딩된 클록을 갖는 직교 차동 벡터 시그널링 코드
US9059724B2 (en) Differential decoder
US8780939B2 (en) System and method for transmitting audio data over serial link
KR102357899B1 (ko) 유효 인코딩을 위한 방법 및 장치
CN105637495A (zh) 低功率相机控制接口总线和设备
JP2018513635A (ja) Ｎベース数から物理線状態シンボルへの転換方法
TW201810959A (zh) 用於符號轉變時鐘轉碼的偵錯和糾錯的翻轉位元
US10320593B2 (en) Receiver for data communication
CN106933767B (zh) 一种适用于jesd204b协议的逗号检测和字对齐方法及系统
JP2002521917A (ja) 高速シリアルデータ通信システム
CN102946293B (zh) 一种基于ds编码的并行接收方法及其装置
KR102161735B1 (ko) 펄스폭 변조 데이터 복원 장치 및 이의 구동 방법
CN108156557B (zh) 数字音频接口的时钟及数据回复电路及回复方法
US20140350891A1 (en) Interface for transferring time-sampled sensor data
KR102100653B1 (ko) 직렬 데이터 멀티플렉싱
US20170195608A1 (en) Methods for transmitting audio and video signals and transmission system thereof
KR20130111586A (ko) 저 레이턴시 직렬 상호 접속 아키텍처에서의 피드백 루프의 제공
US7928884B2 (en) Analog-to-digital converter with a balanced output
US12038864B2 (en) Signal processing circuit and reception device
JP2005142615A (ja) マンチェスタ符号データ受信装置
TWI593247B (zh) Computer system through the audio interface to transfer digital data methods
JP2009060307A (ja) フレーム同期データ転送方法、その送信側装置及び受信側装置
JP2007243984A (ja) 同時双方向データ送受信システム
US20150146824A1 (en) Indexed i/o symbol communications