TWI531219B - 即時影音傳輸方法及其系統 - Google Patents

即時影音傳輸方法及其系統 Download PDF

Info

Publication number
TWI531219B
TWI531219B TW103124921A TW103124921A TWI531219B TW I531219 B TWI531219 B TW I531219B TW 103124921 A TW103124921 A TW 103124921A TW 103124921 A TW103124921 A TW 103124921A TW I531219 B TWI531219 B TW I531219B
Authority
TW
Taiwan
Prior art keywords
media
paragraph
segment
file
media file
Prior art date
Application number
TW103124921A
Other languages
English (en)
Other versions
TW201605230A (zh
Inventor
林啟芳
魏豪廷
張揚政
Original Assignee
元智大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 元智大學 filed Critical 元智大學
Priority to TW103124921A priority Critical patent/TWI531219B/zh
Priority to US14/485,699 priority patent/US9641908B2/en
Publication of TW201605230A publication Critical patent/TW201605230A/zh
Application granted granted Critical
Publication of TWI531219B publication Critical patent/TWI531219B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format

Description

即時影音傳輸方法及其系統
本發明是有關於一種影音串流的處理，且特別是有關於一種即時影音串流的處理。
由於網路技術的開發進展，可提供更快速及寬頻的網路服務，而使得多媒體資料在網路中傳輸的速度大幅改善。隨之而來的是，日益盛行的播放網路多媒體資料，使用者利用多媒體影音資料可完整及清楚表達資訊的優點，以大量的傳遞所欲發送的訊息，例如教學影片、新聞直播或網路電視等等。過去許多學術機構、研發單位以及相關業者不斷研發多媒體的編解碼技術及規格，使得在網路上瀏覽現場影音資料的相關應用非常豐富，例如使用者只需要在智慧型手機或電腦設備上安裝手機程式或網路播放程式，即可使用個人的電子設備透過網際網路觀看即時的影音資料。
然而，目前的網路多媒體發展中，均需要在個人設備上安裝相關的軟體或應用程式，並且各家廠商例如攝影機開發商、伺服器供應商或用戶端瀏覽器提供者均可能使用其自家編解碼規格或網路傳輸規格，使得使用者在觀看網路多媒體資料時，往往需要視不同的開發商或供應商的需求而安裝不同的軟體或應用程式，造成使用者的不便。並且，即使依據開發商或供應商的需求安裝的軟體或應用程式，但往往因為開發的問題，仍導致網路多媒體 在即時播送時的品質低落，像是斷斷續續或是不穩定等問題，使得多媒體在網路上播放的品質，無法在已妥善開發的網路傳輸品質的環境下，達到最佳的使用者體驗。
有鑑於此，本發明揭露一種即時影音傳輸方法，提供更有彈性的即時影音串流處理的編解碼規格，在伺服器對即時影音串流編碼為破碎式媒體檔案後，根據用戶端裝置發送的播放指令將破碎式媒體檔案封裝為段落式媒體檔案，使得用戶端裝置可更輕易地解析即時影音串流，並可更彈性的依據需求播放即時影音串流，使更順暢地播送，提供更加的使用者體驗。
本發明實施例提供一種即時影音傳輸方法，包括下述多個步驟。首先，伺服器會接收即時影音串流。接著，轉換前述即時影音串流為破碎式媒體檔案，並將破碎式媒體檔案儲存在伺服器的儲存模組。其中，前述破碎式媒體檔案包括起始位置、整體分段資訊，以及至少一媒體分段。接著，當伺服器接收到播放指令時，還會將前述破碎式媒體檔案封裝為段落式媒體檔案，使得段落式媒體檔案包括初始段落資訊以及至少一播放段落。其中，將前述破碎式媒體檔案封裝為前述段落式媒體檔案的步驟還包括，將前述破碎式媒體檔案的起始位置及整體分段資訊封裝為前述段落式媒體檔案的初始段落資訊，並且各前述播放段落均具有多個媒體分段以及記錄各媒體分段的分段序列的分段索引。最後，傳送前述段落式媒體檔案至瀏覽平台程式以進行播放。
本發明實施例還提供一種即時影音傳輸系統。即時影音傳輸系統包括伺服器、破碎式媒體檔案編解碼模組、段落式媒體檔案編解碼模組，以及傳輸模組。前述伺服器可透過網路接收至少一攝影機產生的即時影音串流。前述破碎式媒體檔案編解碼模組是用以將前述即時影音串流編碼為破碎式媒體檔案。前述段落式媒體 檔案編解碼模組是用以將前述破碎式媒體檔案轉換為段落式媒體檔案。前述傳輸模組可經由網路傳輸協定，傳送瀏覽平台程式要求的前述段落式媒體檔案。
基於上述，本發明實施例的即時影音傳輸方法以及即時影音傳述系統除了提供相容性更高的即時影音串流處理及播放方法之外，採取即時影音串流轉碼為破碎式媒體檔案的技術手段，可增加伺服器載入即時影音串流的效能。此外，提供給瀏覽平台程式的段落式媒體檔案由於是從破碎式媒體檔案所封裝而得，還可使得瀏覽平台程式不需要額外安裝編解碼器而可輕易解析出段落式媒體檔案，使得瀏覽平台程式可更順暢地接收並播放即時影音串流，提升瀏覽平台程式的播放效能。
為了能更進一步瞭解本發明為達成既定目的所採取的技術、方法及功效，請參閱以下有關本發明的詳細說明、圖式，相信本發明的目的、特徵與特點，當可由此得以深入且具體的瞭解，然而所附圖式與附件僅提供參考與說明用，並非用來對本發明加以限制。
10‧‧‧即時影音傳輸網路架構
101、103‧‧‧攝影機
105‧‧‧伺服器
107‧‧‧用戶端裝置
20‧‧‧伺服器
201‧‧‧破碎式媒體檔案編解碼模組
203‧‧‧儲存模組
205‧‧‧段落式媒體檔案編解碼模組
207‧‧‧傳輸模組
30‧‧‧破碎式媒體檔案
301‧‧‧起始位置
303‧‧‧整體分段資訊
3031‧‧‧全體段落描述
3033‧‧‧軌道資訊
305‧‧‧媒體分段
3051‧‧‧媒體分段資訊
3051a‧‧‧分段標頭
3051b‧‧‧軌道資料
3053‧‧‧媒體資料
307‧‧‧媒體分段隨機存取點
3071‧‧‧軌道分段存取點
3073‧‧‧媒體分段存取偏移
40‧‧‧段落式媒體檔案
401‧‧‧初始段落資訊
403‧‧‧播放段落
4031‧‧‧分段索引
4033‧‧‧段落檔案
4035‧‧‧媒體分段
50‧‧‧初始段落資訊
501‧‧‧起始位置
503‧‧‧段落檔案資訊
5031‧‧‧全體段落描述
5033‧‧‧軌道資訊
60‧‧‧媒體分段
601‧‧‧分段描述訊息
6011‧‧‧分段標頭
6013‧‧‧軌道標頭
603‧‧‧媒體資料
70‧‧‧多媒體介面
701‧‧‧顯示畫面
703‧‧‧控制鈕
705‧‧‧時點按鈕
S801、S803、S805、S807‧‧‧步驟
圖1是本發明根據一實施例所繪示的即時影音傳輸網路架構示意圖。
圖2是本發明根據一實施例所繪示的伺服器的功能方塊示意圖。
圖3是本發明根據一實施例所繪示的破碎式媒體檔案的資料格式示意圖。
圖4是本發明根據一實施例所繪示的段落式媒體檔案的資料格式示意圖。
圖5是本發明根據一實施例所繪示的初始段落資訊的資料格式示意圖。
圖6是本發明根據一實施例所繪示的媒體分段的資料格式示意圖。
圖7是本發明根據一實施例所繪示的在瀏覽平台程式上的多媒體介面。
圖8是本發明根據一實施例所繪示的即時影音傳輸方法的流程圖。
在下文中，將藉由圖式說明本發明之各種例示實施例來詳細描述本發明。然而，本發明概念可能以許多不同形式來體現，且不應解釋為限於本文中所闡述之例示性實施例。此外，圖式中相同參考數字可用以表示類似的元件。
〔即時影音傳輸系統的實施例〕
圖1是本發明根據一實施例所繪示的即時影音傳輸網路架構示意圖。請參照圖1，即時影音傳輸網路架構10包括攝影機101、103、伺服器105以及用戶端裝置107。攝影機101、103是此網路架構中提供即時影音串流的節點。攝影機101、103提供的即時影音串流例如H.262的視訊編解碼標準的多媒體串流。攝影機101、103例如是網路攝影機(IP camera)或者是具備攝影模組的行動通訊電子裝置如筆記型電腦(Notebook)、平板電腦(Tablet)以及行動手持裝置(Mobile)等，均屬可應用在本發明實施例的即時影音傳輸網路架構的攝影機101、103的範疇內。攝影機101、103可設置在任何的播放現場，以提供現場的任何影像和/或音訊資料。攝影機101、103將截取到的影像和/或音訊資料轉為網路封包格式，並透過網際網路傳送至伺服器105。
伺服器105是在即時影音傳輸網路架構10中用於彙整即時影音串流的節點，以提供彙整後的即時影音資料給用戶端裝置107。 在本實施例中，伺服器105接收攝影機101、103的即時影音串流的網路封包後，立即地將解析此些即時影音串流封包，並轉碼為破碎式媒體檔案。本範例中的破碎式媒體檔案是破碎式MP4格式的媒體檔案。破碎式媒體檔案的資料格式實施例將於圖3詳述。接著，即時影音串流轉碼為破碎式媒體檔案的資料格式後，伺服器105儲存此些破碎式媒體檔案。接著，伺服器105進一步將所處理的破碎式媒體檔案封裝為段落式媒體檔案，以在用戶端裝置107要求播放時，提供即時影音串流的資料格式。
用戶端裝置107是使用者可接收與播放即時影音串流的電子裝置，透過網際網路向伺服器105取得攝影機101、103的即時影音串流。用戶端裝置107例如個人桌上型電腦、筆記型電腦、行動手持裝置或平板電腦，任何支援超文件標示語言(Hypertext Markup Language，HTML)的瀏覽平台程式的電子裝置均可作為本範例的用戶端裝置107。因此，使用者可在用戶端裝置107上執行支援HTML的瀏覽平台程式例如Chrome、Opera、Internet Explorer、Firefox、Safari等等。用戶端裝置107經由超文件傳輸協定(HyperText Transfer Protocol，HTTP)或超文件加密傳輸協定(HyperText Transfer Protocol Secure，HTTPS)建立與伺服器105之間的通訊連線後，向伺服器105發出播放即時影音串流的請求，取得相關的即時串流資料後，在用戶端裝置107的瀏覽平台程式播放攝影機101、攝影機103的即時影音串流。
圖2是本發明根據一實施例所繪示的伺服器的功能方塊示意圖。伺服器20包括破碎式媒體檔案編解碼模組201、儲存模組203、段落式媒體檔案編解碼模組205以及傳輸模組207。伺服器20透過網路接收即時影音串流，例如在一直播現場接收具有網路通訊協議功能的攝影機所截取的即時影音串流。由網路中的攝影機擷取及壓縮的即時影音串流是例如H.264編解碼標準。接著，破碎式媒體檔案編解碼模組201將接收的即時影音串流編碼為破碎 式媒體檔案，破碎式媒體檔案的資料格式將於下的圖3詳述。在伺服器20的一實施例中，破碎式媒體檔案編解碼模組201將資料格式為H.264的即時影音串流，轉碼為破碎式MPEG-4媒體檔案。伺服器20對於轉碼為破碎式媒體檔案的資料，存放於儲存模組203。。
段落式媒體檔案編解碼模組205用於將破碎式媒體檔案封裝為段落式媒體檔案。段落式媒體檔案是例如段落式MPEG-4媒體檔案。段落式媒體檔案的資料格式將於下的圖4詳述。在本發明的一實施例中，伺服器20會接收用戶端裝置產生的播放指令，例如用戶端裝置的瀏覽平台程式透過HTTP或HTTPS與伺服器建立接收與發送通道後，在瀏覽平台程式提供的多媒體介面，按下多媒體介面上的播放按鈕。在伺服器20收到用戶端裝置的播放指令後，解碼儲存模組203中的破碎式媒體檔案，並重新封裝為段落式媒體檔案，由傳輸模組207傳送段落式媒體檔案至客戶端裝置的瀏覽平台程式的多媒體介面，以回應客戶端裝置的播放請求。
圖3是本發明根據一實施例所繪示的破碎式媒體檔案的資料格式示意圖。請參照圖3，本範例的破碎式媒體檔案是破碎式MPEG-4的檔案格式(Fragmented MP4)，可根據ISO/IEC 14496-1：2001或是ISO/IEC 14496-14：2003的檔案格式標準來實施。請同時參照圖1、圖2及圖3，攝影機101、攝影機103擷取的即時影音串流傳送至伺服器105後，破碎式媒體檔案編解碼模組201立即將影音串流封包為破碎式媒體檔案，例如每1分鐘的即時影音串流切割為一個破碎式媒體檔案，而對於持續接收的即時影音串流切割為連續的多個破碎式媒體檔案。
破碎式媒體檔案30的資料格式包括起始位置301、整體分段資訊303、媒體分段305以及媒體分段隨機存取點307。起始位置301為媒體的檔案運作訊息，例如多媒體適用的應用程式等資訊。起始位置可以是MP4資料格式的檔案類型與相容性(ftyp，file type and compatibility)來實現。整體分段資訊303記載多媒體的元數據(metadata)資訊，可以由MP4資料格式的所有元數據的容器(moov，container for all the metadata)來實現。整體分段資訊303包括全體段落描述3031以及軌道資訊3033。全體段落描述3031記載多媒體的媒體性質資訊，例如建立的時間、時間長度等等資訊。全體段落描述3031可以由記載MP4資料格式的多媒體標頭及整體描述(mvhd，movie header and overall declarations)來實現。軌道資訊3033記載多媒體的整體軌道相關訊息，例如音頻及字幕等訊息，可以是MP4資料格式的單一軌道或串流的容器(trak，container for an individual track or stream)來實現。
媒體分段(fragment)305記載多媒體的內容，在本實施的媒體分段305具有可供播放的媒體資料3053。值得一提的是，一個破碎式媒體檔案30可以包括至少一個的媒體分段305，而各媒體分段305中記載的資訊使得在編解碼時可以得知各媒體分段305的排序。媒體分段305包括媒體分段資訊3051以及媒體資料3053。媒體分段資訊3051記載多媒體的分段描述訊息，可以由記載MP4資料格式的(moof，movie fragment)來實現。媒體分段資訊3051包括分段標頭3051a以及軌道資料3051b。分段標頭3051a記載分段性質資訊，可以由記載MP4資料格式的(mfhd，movie fragment header)來實現。軌道資料3051b記載單一軌道訊息，可以由記載MP4資料格式的(traf，track fragment)來實現。媒體資料3053記載多媒體資料，可以由記載MP4資料格式的(mdat，media data container)來實現。倘破碎式媒體檔案30中具有多個媒體分段305，則媒體分段305的分段標頭3051a與軌道資料3051b可提供編解碼器識別各媒體分段305之間的順序，使得可依正確的時間順序播放媒體資料3053。
媒體分段存取點307位於破碎式媒體檔案30的末端，指示該破碎式媒體檔案30的結尾。媒體分段存取點307可以由記載MP4 資料格式的(mfra，movie fragment random access)來實現。媒體分段存取點307包括軌道分段存取點3071以及媒體分段存取偏移3073。軌道分段存取點3071記載軌道結束的位置，可以由記載MP4資料格式的(tfra，track fragment random access)來實現。媒體分段存取偏移3073記載媒體分段305的偏移，可以由記載MP4資料格式的(mfro，movie fragment random access offset)來實現。
本發明實施例將即時影音串流轉碼為破碎式媒體檔案30，利用破碎式媒體檔案30的資料格式提供簡單且迅速的轉換，使得轉碼及載入的時間減少，節省處理即時影音串流的所需時間。
值得注意的是，請同時參照圖1及圖3，倘伺服器105直接將轉碼後的多個破碎式媒體檔案30提供給客戶端裝置107，由於各破碎式媒體檔案30均具有媒體分段隨機存取點307，記錄該破碎式媒體檔案30的結尾以及偏移，使得客戶端裝置107在播放即時影音串流時，需要讀取到每個媒體分段隨機存取點307，並自行計算偏移值，以取得下一個破碎式媒體檔案，使得客戶端裝置107在播放即時影音串流時的效率不彰。為提升客戶端裝置107播放即時影音串流的效率，本發明實施例的伺服器105還可將破碎式媒體檔案30封裝為段落式媒體檔案的資料格式，以提升客戶端裝置107在播放即時影音串流的效率。
圖4是本發明根據一實施例所繪示的段落式媒體檔案的資料格式示意圖。本範例的段落式媒體檔案是分段式MPEG-4的檔案格式(Segmented MP4)，可根據ISO/IEC 14496-1：2001或是ISO/IEC 14496-14：2003的檔案格式標準來實施。請參照圖4，段落式媒體檔案40包括初始段落資訊(styp，Segment Type)401以及多個播放段落403。更詳細的初始段落資訊401的資料格式詳見圖5。圖5是本發明根據一實施例所繪示的初始段落資訊的資料格式示意圖。初始段落資訊50包括起始位置501以及段落檔案資訊503。起始位置501為媒體的檔案運作訊息，例如多媒體適用的應用程 式等資訊。起始位置可以是MP4資料格式的檔案類型與相容性(ftyp)來實現。段落檔案資訊503記載多媒體的元數據資訊，可以由MP4資料格式的所有元數據的容器(moov)來實現。段落檔案資訊503包括全體段落描述5031以及軌道資訊5033。全體段落描述5031記載多媒體的媒體性質資訊，例如建立的時間、時間長度等等資訊。全體段落描述4051可以由記載MP4資料格式的多媒體標頭及整體描述(mvhd)來實現。軌道資訊5033記載多媒體的整體軌道相關訊息，例如音頻及字幕等訊息，可以是MP4資料格式的單一軌道或串流的容器(trak)來實現。
請同時參照圖2至圖5，段落式媒體檔案編解碼模組205在封裝段落式媒體檔案40的過程中，會先對破碎式媒體檔案30作解碼，取得起始位置301以及整體分段資訊303，將此些記錄多媒體的整體概要資訊的部分封裝為初始段落資訊50。接著，伺服器20對破碎式媒體檔案30的媒體分段305封裝為段落式媒體檔案40的多個播放段落403。
請復參照圖4，段落式媒體檔案40的多個播放段落403包括分段索引4031以及多個媒體分段4035。分段索引(sidx，segment index)4031記錄各媒體分段的分段序列，以指示該播放段落403的各媒體分段4035的序列。多個媒體分段4035更詳細的資料格式詳見圖6。圖6是本發明根據一實施例所繪示的媒體分段的資料格式示意圖。媒體分段(fragment)60記載多媒體的內容，在本實施的媒體分段60包括分段描述訊息601以及媒體資料603。分段描述訊息301記載多媒體的分段的細部資訊，可以由記載MP4資料格式的(moof)來實現。分段描述訊息601包括分段標頭6011以及軌道標頭6013。分段標頭6011記載分段性質資訊，可以由記載MP4資料格式的(mfhd)來實現。軌道標頭6013記載單一軌道訊息，尤其是單一軌道的標投訊息，可以由記載MP4資料格式的(tfhd，track fragment header)來實現。媒體資料603記載多媒體 資料，可以由記載MP4資料格式的(mdat)來實現。
請同時參照圖2、圖3、圖4及圖6，段落式媒體檔案編解碼模組205解碼破碎式媒體檔案30的媒體分段305後，一一將破碎式媒體檔案30的媒體分段305封裝在播放段落403中。因此，封裝後的播放段落403具有多個與媒體分段305相同資料格式的媒體分段60，各媒體分段60本身可具有分段的分段標頭6011以及軌道標頭6013，使得在播放段落403中透過分段索引4031識別各媒體分段4035，例如指示各媒體分段4035的軌道時間點或各軌道的長度。在本範例的段落式媒體檔案40提供伺服器20可迅速地解碼破碎式媒體檔案30，並不需要花費額外時間解碼而可快速地封裝初始段落資訊401。並且，段落式媒體檔案40的多個媒體分段4035的資料格式與破碎式媒體檔案30的多個媒體分段305的資料格式相同，但透過讀取播放段落403的分段索引4031，使得段落式媒體檔案40有足夠的資訊使多個媒體分段4035可在非連續讀取的狀態下提供媒體資料603，而不需要如破碎式媒體檔案30受限於必須讀取媒體分段隨機存取點307才能取得下一個破碎式媒體檔案30的媒體分段305的資料。
舉例來說，圖1的用戶端裝置107從伺服器105下載即時影音串流，在瀏覽平台程式上播放段落式媒體檔案40時，瀏覽平台程式解析段落式媒體檔案40的資料格式後，讀取初始段落資訊401取得多媒體的概括資料，並且依據各播放段落403的分段索引4031辨識各媒體分段4035。如此一來，當瀏覽平台程式並非依據播放段落403的順序和/或各媒體分段4035的順序(例如多媒體的時間軸順序或各分段序列)下載該些播放段落403或媒體分段4035，瀏覽平台程式仍可在多媒體介面上播放已下載的播放段落403和/或媒體分段4035。因此，本發明實施例在圖2提供的伺服器20除了將即時影音串流轉碼為圖3的破碎式媒體檔案30，可提升轉碼的效率之外，還可將破碎式媒體檔案30封裝為圖4的段落 式媒體檔案40，更提升圖1的用戶端裝置107在下載及播放即時影音串流的效率，減少使用者等待即時影音串流的時間，使瀏覽平台程式在播放即時影音串流時更貼近現場的播放時間，減少用戶端裝置107與直播現場的誤差，並增加使用者觀看即時影音串流的同步體驗。
圖7是本發明根據一實施例所繪示的在瀏覽平台程式上的多媒體介面。請參照圖7，多媒體介面70包括顯示畫面701、多個控制鈕703，以及多個時點按鈕705。顯示畫面701為播放即時影音串流的畫面區塊。圖7的控制鈕703是提供使用者是否接收即時影音串流的控制鈕例如播放、停止、前進或回放的控制鈕。在一實施例中，使用者按下播放控制鈕後，圖1的伺服器105根據播放指令提供封裝後的段落式媒體檔案給用戶端裝置107。在另一實施例中，圖1的伺服器105在接收到播放指令後，才開始進行段落式媒體檔案的封裝程序，伺服器105只在用戶端裝置107有播放需求時才進行封裝，以節省伺服器105的處理資源。在更另一實施例中，瀏覽平台程式提供的多媒體介面可以不需要有播放控制鈕，而是在使用者開啟可導向該即時影音串流的統一資源定位符(URL，Universal Resource Locator)的網頁，伺服器105成功接收網路傳輸協定例如HTTP或HTTPS的請求後，傳送段落式媒體檔案的網路封包給用戶端裝置107。
圖7中的多個時點按鈕705用於提供使用者可直接切換即時影音串流的播放時點。在本實施例中，請同時參照圖4及圖7，圖4的每個播放段落403可更進一步將數個連續的媒體分段4035封裝在一個段落檔案(Segment)4033，如圖4的虛線所示，因此一個播放段落403可具有至少一個段落檔案4033。例如，每個媒體分段4035為1秒的播放時間，而具有10個媒體分段的段落檔案4033則可播放10秒的即時影音串流。如此一來，圖1的用戶端裝置107可將下載的段落檔案4035儲存在緩衝區(buffer)，並進行 播放。使用者可依據實際使用需求而對每個媒體分段4035和/或段落檔案4033作不同播放時間長度的設計，本範例僅作為說明用，並不以此為限。瀏覽平台程式的多媒體介面上的多個時點按鈕705可分別對應一段落檔案4035，例如每10秒為一前進或回放的時間單位，提供使用者直接以該時點向伺服器請求播放的即時影音串流，而節省使用者不必要的即時影音串流的下載，仍可順利地觀看即時的多媒體訊息。
〔即時影音傳輸方法的實施例〕
圖8是本發明根據一實施例所繪示的即時影音傳輸方法的流程圖。首先，在步驟S801中，伺服器接收攝影機所截取的即時影音串流。接著，在步驟S803中，伺服器將即時影音串流轉碼為破碎式媒體檔案。在步驟S805中，當伺服器接收到用戶端裝置發出的播放指令時，將存放在儲存模組中的破碎式媒體檔案解析並封裝為段落式媒體檔案。最後，在步驟S807中，用戶端裝置接收段落式媒體檔案，並由瀏覽平台程式解析出初始段落資訊及播放段落和/或媒體分段，在多媒體介面播放即時影音串流。
值得一提的是，本發明實施例的瀏覽平台程式可支援超文件標示語言，尤其是HTML5技術，使得瀏覽平台程式可解析網頁程式上的視訊標籤(Video Tag)。如此一來，用戶端裝置可透過網路通訊協議與伺服器進行溝通，透過本發明實施例提供的破碎式媒體檔案的編碼技術及段落式媒體檔案的封裝技術，使用戶端裝置可藉由網頁語言內嵌的視訊標籤在瀏覽平台程式，直接播放伺服器提供的即時影音串流。
綜上所述，本發明實施例提出的即時影音傳輸方法與即時影音傳輸系統，提供伺服器將即時影音串流轉碼為破碎式媒體檔案，可節省對即時影音串流的處理時間，減少載入時間。並且，伺服器可在接收用戶端裝置發出的播放指令後，對破碎式媒體檔 案重新封裝為段落式媒體檔案，還可增加用戶端裝置下載及播放即時影音串流的效率。此外，本發明實施例提出的破碎式媒體檔案與段落式媒體檔案均屬相同的多媒體檔案格式下的變化，因此用戶端裝置的瀏覽平台程式不需要額外安裝其他的編解碼器，只需安插應用程式介面(API，Application Programming Interface)讓瀏覽平台程式可解析段落式媒體檔案的資料格式，後續即可由瀏覽平台程式本身的編解碼器成功地解碼出資料格式中的多媒體資訊，而在瀏覽平台程式的多媒體介面上播放即時影音串流，供使用者觀看。
以上所述僅為本發明的可行實施例，凡依本發明申請專利範圍所做的均等變化與修飾，均應屬本發明以下的申請專利範圍。
20‧‧‧伺服器
201‧‧‧破碎式媒體檔案編解碼模組
203‧‧‧儲存模組
205‧‧‧段落式媒體檔案編解碼模組
207‧‧‧傳輸模組

Claims (9)

  1. 一種即時影音傳輸方法，包括：一伺服器接收一即時影音串流；轉換該即時影音串流為一破碎式媒體檔案並儲存於該伺服器的一儲存模組，其中該破碎式媒體檔案包括一起始位置、一整體分段資訊，以及至少一媒體分段；當該伺服器接收一播放指令時，將該破碎式媒體檔案封裝為一段落式媒體檔案，其中該段落式媒體檔案包括一初始段落資訊以及至少一播放段落，且各該播放段落具有該多個媒體分段及記錄各該媒體分段的分段序列的一分段索引，封裝該段落式媒體檔案的步驟包括將該起始位置及該整體分段資訊封裝為該初始段落資訊；以及傳送該段落式媒體檔案至一瀏覽平台程式進行播放；其中該瀏覽平台程式播放該段落式媒體檔案包括解析該初始段落資訊以識別該段落式媒體檔案的起始位置並下載各該播放段落，以及在分段序列較早的該媒體分段未完成下載時，播放已下載完成且分段序列較晚的該多個媒體分段。
  2. 如請求項1所述的即時影音傳輸方法，其中解析該初始段落資訊的步驟還包括取得一段落檔案資訊，以獲得該段落式媒體檔案的元數據。
  3. 如請求項2所述的即時影音傳輸方法，其中還包括該瀏覽平台程式解析該段落資訊檔案的一全體段落描述，以識別各該播放段落的媒體性質資訊，以及解析該段落檔案資訊的一軌道資訊，以識別該即時影音串流的整體軌道信息。
  4. 如請求項1所述的即時影音傳輸方法，其中播放該播放段落的步驟包括讀取該分段索引以識別該播放段落所屬的各該媒體分段的分段序列，以及讀取各該媒體分段的一分段描述訊息以取得該媒體分段的一分段標頭以及一軌道資料，並根據該媒體 分段的分段序列、該媒體分段的該分段標頭與該軌道資料播放該媒體分段的一媒體資料。
  5. 如請求項4所述的即時影音傳輸方法，其中該瀏覽平台程式播放完該播放段落後且該即時影音串流未結束，讀取該段落式媒體檔案的該下一個播放段落。
  6. 如請求項1所述的即時影音傳輸方法，其中該播放段落包括至少一段落檔案，該段落檔案由一預先設定數量的該媒體分段組成，各該段落檔案存放在該伺服器的一緩衝器以供該瀏覽平台程式緩衝存取各該段落檔案。
  7. 如請求項6所述的即時影音傳輸方法，其中該瀏覽平台程式的一多媒體介面包括多個時點按鈕，該時點按鈕對應該段落檔案，以在該瀏覽平台程式回放及快進該即時影音串流。
  8. 一種即時影音傳輸系統，包括：一伺服器，透過網路接收至少一攝影機產生的一即時影音串流，包括：一破碎式媒體檔案編解碼模組，用以將該即時影音串流編碼為一破碎式媒體檔案，並儲存於該伺服器的一儲存模組，其中該破碎式媒體檔案包括一起始位置、一整體分段資訊，以及至少一媒體分段；一段落式媒體檔案編解碼模組，用以將該破碎式媒體檔案封裝為一段落式媒體檔案，其中該段落式媒體檔案包括一初始段落資訊以及至少一播放段落，且各該播放段落具有該多個媒體分段及記錄各該媒體分段的分段序列的一分段索引，封裝該段落式媒體檔案的步驟包括將該起始位置及該整體分段資訊封裝為該初始段落資訊；以及一傳輸模組，經由一網路傳輸協定傳送一瀏覽平台程式要求的該段落式媒體檔案；其中當該伺服器接收一播放指令時，將該破碎式媒體檔案封 裝為該段落式媒體檔案，且透過該傳輸模組傳送該段落式媒體檔案至該瀏覽平台程式進行播放，以供該瀏覽平台程式播放該分段式媒體檔案包括解析該初始段落資訊以識別該分段式媒體檔案的起始位置並下載各該播放段落，以及在分段序列較早的該媒體分段未完成下載時，播放已下載完成且分段序列較晚的該多個媒體分段。
  9. 如請求項8所述的即時影音傳輸系統，其中該網路傳輸協定為超文件傳輸協定或超文件加密傳輸協定。
TW103124921A 2014-07-21 2014-07-21 即時影音傳輸方法及其系統 TWI531219B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW103124921A TWI531219B (zh) 2014-07-21 2014-07-21 即時影音傳輸方法及其系統
US14/485,699 US9641908B2 (en) 2014-07-21 2014-09-13 Method and system for transferring real-time audio/video stream

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103124921A TWI531219B (zh) 2014-07-21 2014-07-21 即時影音傳輸方法及其系統

Publications (2)

Publication Number Publication Date
TW201605230A TW201605230A (zh) 2016-02-01
TWI531219B true TWI531219B (zh) 2016-04-21

Family

ID=55075705

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103124921A TWI531219B (zh) 2014-07-21 2014-07-21 即時影音傳輸方法及其系統

Country Status (2)

Country Link
US (1) US9641908B2 (zh)
TW (1) TWI531219B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI599218B (zh) 2016-07-29 2017-09-11 元智大學 即時影音傳輸系統
CN110545466B (zh) 2018-05-29 2021-07-06 北京字节跳动网络技术有限公司 基于网页的媒体文件的播放方法、装置及存储介质
CN109086307B (zh) * 2018-06-22 2020-04-14 阿里巴巴集团控股有限公司 文件处理的方法及装置
CN109889882B (zh) * 2019-01-24 2021-06-18 深圳亿幕信息科技有限公司 一种视频剪辑合成方法和系统
CN111369938A (zh) * 2020-04-26 2020-07-03 上海年润光电科技有限公司 一种模块化led显示屏及其控制系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4767443B2 (ja) * 2001-07-04 2011-09-07 富士通株式会社 ネットワーク蓄積型ビデオカメラシステム
US9124947B2 (en) * 2013-09-04 2015-09-01 Arris Enterprises, Inc. Averting ad skipping in adaptive bit rate systems

Also Published As

Publication number Publication date
US9641908B2 (en) 2017-05-02
TW201605230A (zh) 2016-02-01
US20160021404A1 (en) 2016-01-21

Similar Documents

Publication Publication Date Title
JP6455741B2 (ja) ビデオの向きの調整（ｃｖｏ）を伴うストリーミング
US20160337424A1 (en) Transferring media data using a websocket subprotocol
JP6258856B2 (ja) 放送システムにおける制御メッセージ構成装置及び方法
US8788933B2 (en) Time-shifted presentation of media streams
TWI643502B (zh) 內容重製系統、內容重製裝置、程式、內容重製方法、及提供內容伺服器
KR102303582B1 (ko) 웹 콘텐츠에 대한 파일 트랙들을 사용하여 미디어 데이터를 프로세싱
CN104796796B (zh) 提高Android平台的HLS流播放器容错的方法
TWI531219B (zh) 即時影音傳輸方法及其系統
US20130031222A1 (en) Methods, apparatuses and computer program products for pausing video streaming content
WO2013053326A1 (zh) 回看节目录制、播放方法、服务器、客户端及系统
WO2013152580A1 (zh) 一种在线媒体数据转换的方法、播放视频方法及相应装置
US11321516B2 (en) Processing dynamic web content of an ISO BMFF web resource track
US20180176278A1 (en) Detecting and signaling new initialization segments during manifest-file-free media streaming
WO2017219575A1 (zh) 在线播放电视的方法及装置
CN107534793B (zh) 接收装置、传输装置以及数据处理方法
JP6359539B2 (ja) レンダリング時の制御
KR20100072113A (ko) 무선 네트워크를 통한 플래시 컨텐츠 제공 방법 및 그 시스템과 플래시 컨텐츠 변환 방법 및 그 장치
CN107534792B (zh) 接收设备、发送设备以及数据处理方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees