TWI830978B - 由組合傳送之多個串流取出特定串流播放之系統及方法 - Google Patents

由組合傳送之多個串流取出特定串流播放之系統及方法 Download PDF

Info

Publication number
TWI830978B
TWI830978B TW109146792A TW109146792A TWI830978B TW I830978 B TWI830978 B TW I830978B TW 109146792 A TW109146792 A TW 109146792A TW 109146792 A TW109146792 A TW 109146792A TW I830978 B TWI830978 B TW I830978B
Authority
TW
Taiwan
Prior art keywords
view
frame
stream
source
signal
Prior art date
Application number
TW109146792A
Other languages
English (en)
Other versions
TW202226838A (zh
Inventor
陳韋廷
Original Assignee
光陣三維科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 光陣三維科技有限公司 filed Critical 光陣三維科技有限公司
Priority to TW109146792A priority Critical patent/TWI830978B/zh
Publication of TW202226838A publication Critical patent/TW202226838A/zh
Application granted granted Critical
Publication of TWI830978B publication Critical patent/TWI830978B/zh

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一種由組合傳送之多個串流取出特定串流播放之系統及方法,其透過陣列伺服器將多個訊號源所輸出的影音串流組合為一個包含所有影音串流的多源串流並將組合產生的多源串流傳送給串流伺服器,使串流伺服器將多源串流提供給客戶端,客戶端由所接收到的多源串流中取出欲播放之影音串流之技術手段,可以在觀賞直播時即時切換播放不同視角之影音串流,並達成降低直播之伺服器之負載的技術功效。

Description

由組合傳送之多個串流取出特定串流播放之系統及方法
一種串流播放系統及其方法,特別係指一種由組合傳送之多個串流取出特定串流播放之系統及方法。
串流媒體(Streaming media)是指將包含一連串的影格的多媒體檔案壓縮後,經過網際網路分段傳送被壓縮的多媒體檔案,藉以即時提供觀賞多媒體檔案之內容的一種技術,此技術使得封裝多媒體檔案的封包得以像流水一樣由伺服端被傳送到接收端,且接收端可以在下載多媒體檔案的同時播放以下載的內容,而不需要預先下載完整的多媒體檔案。
目前,使用串流媒體的其中一種應用是網路直播,直播主或直播單位傳送影音訊號給串流伺服器,客戶端可以接收串流伺服器所傳送之包含影音訊號的影音串流(串流媒體),藉以播放直播主或直播單位所直播的畫面。若直播單位提供以不同的視角觀看直播的現場畫面,則直播單位可以傳送多個 影音訊號給串流伺服器,串流伺服器可以傳送使用者欲觀看之視角的影音串流給客戶端。
事實上,光是傳送一個影音串流給大量的不同客戶端就可能讓串流伺服器接近可負載的上限,因此,串流伺服器通常不會將不同視角的影音串流同時提供給同一個客戶端,因此,客戶端的使用者在需要切換視角時,只能將視角切換請求發送給串流伺服器,使得串流伺服器依據所接收到的視角切換請求將相對應之視角變更後的影音串流傳送給客戶端,然而,由於串流伺服器的負載接近上限,導致串流伺服器可能無法接收到或無法即時處理客戶端所發送的視角切換請求,導致視角變更後的影音串流遲遲無法傳送到客戶端;另外,即使客戶端接收到視角變更後的影音串流,但在所接收到之影音串流包含的影格數(即可播放的時間)尚未達到預定值前,客戶端不會開始播放視角變更後的影音串流,造成客戶端所播放的畫面停止,導致客戶端的使用者可能有一段時間無法觀看到直播畫面。
綜上所述,可知先前技術中長期以來一直存在觀賞直播時切換視角需要反應時間的問題,因此有必要提出改進的技術手段,來解決此一問題。
有鑒於先前技術存在觀賞直播時切換視角需要反應時間的問題,本發明遂揭露一種由組合傳送之多個串流取出特定串流播放之系統及方法,其中:本發明所揭露之由組合傳送之多個串流取出特定串流播放之系統,至少包含:多個第一訊號源,分別輸出第一影音串流;串流伺服器;陣列 伺服器,用以接收各第一影音串流,並持續由各第一影音串流中分別取出各第一單視角影格,及將所有被取出之第一單視角影格影格組合為第一多視角影格,並將第一多視角影格以第一多源串流傳送到串流伺服器;客戶端,用以連線至串流伺服器,並接收第一多源串流,及持續由第一多視角影格中取得相同第一訊號源所產生之第一單視角影格,並顯示被取得之第一單視角影格,使第一影音串流被播放,及用以於第一切換訊號被產生時,改為持續由第一多視角影格中取出與第一切換訊號對應之另一第一訊號源所產生之第一單視角影格,並顯示被取出之另一第一單視角影格,使另一第一影音串流被播放。
本發明所揭露之由組合傳送之多個串流取出特定串流播放之方法,其步驟至少包括:陣列伺服器接收多個第一訊號源所輸出之第一影音串流;陣列伺服器持續由各第一影音串流中分別取出各第一單視角影格,並將所有被取出之第一單視角影格組合為第一多視角影格,及將各第一多視角影格以第一多源串流傳送給串流伺服器;客戶端連線至串流伺服器,並接收第一多源串流;客戶端持續由第一多視角影格中取得相同第一訊號源所產生之第一單視角影格,並顯示被取得之第一單視角影格,使第一影音串流被播放;客戶端於第一切換訊號被產生時,改為持續由第一多視角影格中取出與第一切換訊號對應之另一第一訊號源所產生之第一單視角影格,並顯示被取出之另一第一單視角影格,使另一第一影音串流被播放。
本發明所揭露之系統與方法如上,與先前技術之間的差異在於本發明透過陣列伺服器將多個訊號源所輸出的影音串流組合為一個包含所有影音串流的多源串流並將組合產生的多源串流傳送給串流伺服器,使串流伺服器將多源串流提供給客戶端,客戶端由所接收到的多源串流中取出欲播放之影音串 流,藉以解決先前技術所存在的問題,並可以達成降低直播之服務伺服器之負載的技術功效。
110~126:第一訊號源
130~146:第二訊號源
151:陣列伺服器
153:串流伺服器
160:客戶端
200:多視角影格
211~244:區塊
400:觸控螢幕
410:主顯示區域
步驟310:陣列伺服器接收第一訊號源所輸出之第一影音串流
步驟330:服務伺服器持續由第一影音串流中取出第一單視角影格,並將所有第一單視角影格組合為第一多視角影格,及將第一多視角影格以第一多源串流傳送到串流伺服器
步驟350:客戶端連線至串流伺服器,並接收第一多源串流
步驟360:客戶端持續由第一多視角影格中取得同一第一訊號源所輸出之第一單視角影格,並顯示被取得之第一單視角影格
步驟370:客戶端於第一切換訊號被產生時,改為持續由第一多視角影格中取出與第一切換訊號對應之第一單視角影格,並顯示被取出之第一單視角影格
步驟610:陣列伺服器接收第一訊號源所輸出之第一影音串流及第二訊號源所輸出之第二影音串流
步驟630:陣列伺服器持續由第一與第二影音串流中分別取出第一與第二單視角影格,並將所有第一單視角影格與第二單視角影格分別組合為第一多視角影格與第二多視角影格,及分別將第一多視角影格與第二多視角影格以第一多源串流與第二多源串流傳送到串流伺服器
步驟650:客戶端連線至串流伺服器,並接收第一與第二多源串流
步驟660:客戶端持續由第一多視角影格中取得同一第一訊號源所輸出之第一單視角影格,並顯示第一單視角影格
步驟680:客戶端於第二切換訊號被產生時,改為持續由第二多源串流所包含之第二多視角影格中取出與當前被顯示之單視角影格對應之第二單視角影格,並顯示被取出之第二單視角影格
第1圖為本發明所提之由組合傳送之多個串流取出特定串流播放之系統架構圖。
第2圖為本發明實施例所提之M*N個區塊之示意圖。
第3圖為本發明所提之由組合傳送之多個串流取出特定串流播放之方法流程圖。
第4圖為本發明實施例所提之操作介面之示意圖。
第5圖為本發明實施例所提之訊號源架設之示意圖。
第6圖為本發明所提之另一種由組合傳送之多個串流取出特定串流播放之方法流程圖。
第7圖為本發明實施例所提之另一種訊號源架設之示意圖。
以下將配合圖式及實施例來詳細說明本發明之特徵與實施方式,內容足以使任何熟習相關技藝者能夠輕易地充分理解本發明解決技術問題所應用的技術手段並據以實施,藉此實現本發明可達成的功效。
本發明可以在不改變現有串流服務之架構下,由陣列伺服器將多個訊號源所發出的影音串流組合為另一個解析度較大且包含所有影音串流的多 源串流,並可以將多源串流傳送給既有的串流伺服器,使得客戶端可以由串流伺服器取得多源串流並可以由多源串流中取出並播放特定訊號源所發出的影音串流,且能夠依據使用者的操作由多源串流中取出並播放另一個影音串流,藉以讓使用者快速的切換到顯示不同視角的另一個影音串流觀賞。其中,陣列伺服器、串流伺服器與客戶端可以是計算設備。
本發明所提之計算設備包含但不限於一個或多個處理模組、一條或多條記憶體模組、以及連接不同硬體元件(包括記憶體模組和處理模組)的匯流排等硬體元件。透過所包含之多個硬體元件,計算設備可以載入並執行作業系統,使作業系統在計算設備上運行,也可以執行軟體或程式。另外,計算設備也包含一個外殼,上述之各個硬體元件設置於外殼內。
本發明所提之計算設備的匯流排可以包含一種或多個類型,例如包含資料匯流排(data bus)、位址匯流排(address bus)、控制匯流排(control bus)、擴充功能匯流排(expansion bus)、及/或局域匯流排(local bus)等類型的匯流排。計算設備的匯流排包括但不限於的工業標準架構(Industry Standard Architecture,ISA)匯流排、周邊元件互連(Peripheral Component Interconnect,PCI)匯流排、視頻電子標準協會(Video Electronics Standards Association,VESA)局域匯流排、以及串列的通用序列匯流排(Universal Serial Bus,USB)、快速周邊元件互連(PCI Express,PCI-E/PCIe)匯流排等。
本發明所提之計算設備的處理模組與匯流排耦接。處理模組包含暫存器(Register)組或暫存器空間,暫存器組或暫存器空間可以完全的被設置在處理模組之處理晶片上,或全部或部分被設置在處理晶片外並經由專用電氣連接及/或經由匯流排耦接至處理晶片。處理模組可為中央處理器、微處理器或 任何合適的處理元件。若計算設備為多處理器設備,也就是計算設備包含多個處理模組,則計算設備所包含的處理模組都相同或類似,且透過匯流排耦接與通訊。處理模組可以解釋一個計算機指令或一連串的多個計算機指令以進行特定的運算或操作,例如,數學運算、邏輯運算、資料比對、複製/移動資料等,藉以驅動計算設備中的其他硬體元件或運行作業系統或執行各種程式及/或模組。
計算設備中通常也包含一個或多個晶片組(Chipset)。計算設備的處理模組可以與晶片組耦接或透過匯流排與晶片組電性連接。晶片組是由一個或多個積體電路(Integrated Circuit,IC)組成,包含記憶體控制器以及周邊輸出入(I/O)控制器等,也就是說,記憶體控制器以及周邊輸出入控制器可以包含在一個積體電路內,也可以使用兩個或更多的積體電路實現。晶片組通常提供了輸出入和記憶體管理功能、以及提供多個通用及/或專用暫存器、計時器等,其中,上述之通用及/或專用暫存器與計時器可以讓耦接或電性連接至晶片組的一個或多個處理模組存取或使用。
計算設備的處理模組也可以透過記憶體控制器存取安裝於計算設備上的記憶體模組和大容量儲存區中的資料。上述之記憶體模組包含任何類型的揮發性記憶體(volatile memory)及/或非揮發性(non-volatile memory,NVRAM)記憶體,例如靜態隨機存取記憶體(Static Random Access Memory,SRAM)、動態隨機存取記憶體(Dynamic Random Access Memory,DRAM)、唯讀記憶體(Read-Only Memory,ROM)、快閃記憶體(Flash memory)等。上述之大容量儲存區可以包含任何類型的儲存裝置或儲存媒體,例如,硬碟機、光碟(optical disc)、隨身碟(flash drive)、記憶卡(memory card)、固態硬 碟(Solid State Disk,SSD)、或任何其他儲存裝置等。也就是說,記憶體控制器可以存取靜態隨機存取記憶體、動態隨機存取記憶體、快閃記憶體、硬碟機、固態硬碟中的資料。
計算設備的處理模組也可以透過周邊輸出入控制器經由周邊輸出入匯流排與周邊輸出裝置、周邊輸入裝置、通訊介面、及GPS接收器等周邊裝置或介面連接並通訊。周邊輸入裝置可以是任何類型的輸入裝置,例如鍵盤、滑鼠、軌跡球、觸控板、搖桿等,周邊輸出裝置可以是任何類型的輸出裝置,例如顯示器、印表機等,周邊輸入裝置與周邊輸出裝置也可以是同一裝置,例如觸控螢幕等。通訊介面可以包含無線通訊介面及/或有線通訊介面,無線通訊介面可以包含支援無線區域網路(如Wi-Fi、Zigbee等)、藍牙、紅外線、近場通訊(Near-field communication,NFC)、3G/4G/5G等行動通訊網路(蜂巢式網路)或其他無線資料傳輸協定的介面,有線通訊介面可為乙太網路裝置、DSL數據機、纜線(Cable)數據機、非同步傳輸模式(Asynchronous Transfer Mode,ATM)裝置、或光纖通訊介面及/或元件等。處理模組可以週期性地輪詢(polling)各種周邊裝置與介面,使得計算設備能夠透過各種周邊裝置與介面進行資料的輸入與輸出,也能夠與具有上面描述之硬體元件的另一個計算設備進行通訊。
以下先以「第1圖」本發明所提之由組合傳送之多個串流取出特定串流播放之系統架構圖來說明本發明的系統運作。如「第1圖」所示,本發明之系統含有第一訊號源110、陣列伺服器151、串流伺服器153、客戶端160,及可附加的第二訊號源130。其中,第一訊號源110、第二訊號源130、串流伺服器153可以透過實體連接線或無線通訊之方式與陣列伺服器151連接,且串流伺服器153與客戶端160之間可以透過無線網路連接,但本發明並不以此為限。
第一訊號源110負責輸出第一影音串流、第二訊號源130可以輸出第二影音串流。一般而言,在本發明中,訊號源(第一訊號源110、第二訊號源130)所輸出的影音串流(第一影音串流、第二影音串流)通常是由訊號源自身產生,例如,訊號源可以持續擷取外部影像以產生連續的影格(frame),並將所產生的影格依據被產生的先後順序依序輸出為影音串流,但本發明並不以此為限。
一般而言,訊號源可以是能夠擷取影像與聲音並將所擷取之影像與聲音轉換為影音訊號並輸出的計算設備,如攝影機等,但本發明並不以此為限,舉例來說,訊號源也可以是能夠儲存影音檔案並可以將所儲存之影音檔案傳送給陣列伺服器151的計算設備。其中,訊號源可以使用習知之各種協定將影音訊號/影音檔案傳送給陣列伺服器151,例如使用Network Device Interface(NDI)協定,但本發明並不以此為限。
要說明的是,在本發明中,可以包含兩個或兩個以上的第一訊號源110,也可以包含兩個或兩個以上的第二訊號源130。一般而言,第二訊號源130的數量通常可以與第一訊號源110的數量相同,且每一個不同的第一訊號源110可以與不同的第二訊號源130對應,即第一訊號源110與第二訊號源130可以是一對一的對應關係。
陣列伺服器151負責接收第一訊號源110所輸出的第一影音串流,並負責分別由所接收到之每一個第一影音串流中取出一個不同的第一單視角影格,及將自不同第一影音串流所取出的各個第一單視角影格組合為一個第一多視角影格。
更詳細的,陣列伺服器151可以先產生如「第2圖」所示之M*N個區塊的多視角影格200,且多視角影格200中之區塊的數量大於或等於第一訊號源110的數量。其中,M、N大於1。在大部分的實施例中,M、N為相同的數值,且為2的次方數,但本發明並不以此為限,也就是說,M、N除了可以是2、4等數值之外,也可以是3或5等,且M、N並不一定相同。
陣列伺服器151也可以依據第一訊號源110之來源識別資料定義所取得之各個第一單視角影格與多視角影格200中之各個區塊的對應關係,並可以將所取得之各個第一單視角影格置於多視角影格200中之相對應的區塊中以產生第一多視角影格。其中,來源識別資料為可以表示特定訊號源的資料,通常是由特定數量的文字、字母、數字、符號以特定方式排列而成,例如訊號源所使用的網路位址、訊號源所連接的介面編號、訊號源的產品序號、預先被設定在訊號源上的特定資料等,但本發明並不以此為限。
舉例來說,陣列伺服器151可以依據各個訊號源(第一訊號源110)之來源識別資料排列各個訊號源,並可以將排列後之訊號源所產生的影格(第一單視角影格)以先左後右由上到下的順序依序定義各第一單視角影格與多視角影格200中之各區塊的對應關係。例如,在某些實施例中,存在四個第一訊號源(111~114),若陣列伺服器151可以定義2*2個區塊(以左上、左下、右上、右下的位置排列),並可以依據第一訊號源(111~114)的來源識別資料排列出之各第一訊號源的順序為第一訊號源114、第一訊號源113、第一訊號源112、第一訊號源111,則第一訊號源114所產生的第一單視角影格可以與位置在左上角的區塊對應、第一訊號源113所產生的第一單視角影格可以與位在右上角的區塊 對應、第一訊號源112所產生的第一單視角影格可以與左下角的區塊對應、第一訊號源111所產生的第一單視角影格可以與右下角的區塊對應。
在部分的實施例中,若第一單視角影格的解析度與多視角影格200中之區塊的解析度不同,則陣列伺服器151也可以調整(放大或縮小)第一單視角影格的解析度,使得第一單視角影格的解析度與多視角影格200中之區塊的解析度相同。
事實上,陣列伺服器151並不只執行一次產生一個第一多視角影格的動作,而是可以持續不斷的重複執行上述動作,藉以產生一連串的第一多視角影格。也就是說,陣列伺服器151在產生一個第一多視角影格後,可以繼續由接收自不同訊號源的每一個第一影音串流中取出另一個不同的第一單視角影格(通常是排列在先前所取出之第一單視角影格之後且與先前所取出之第一單視角影格相鄰的另一個第一單視角影格),並可以將再次取出之另一個不同的第一單視角影格組合為另一個不同的第一多視角影格,如此不斷重複,直到沒有接收到任何訊號源所傳送之第一影音串流為止。
陣列伺服器151也負責產生第一多源串流。陣列伺服器151所產生之第一多源串流中包含陣列伺服器151所產生之第一多視角影格,且第一多源串流中的各個第一多視角影格依照陣列伺服器151產生的順序排列。
陣列伺服器151也負責將所產生的第一多源串流傳送給串流伺服器153。一般而言,陣列伺服器151可以使用即時訊息協定(Real-Time Messaging Protocol,RTMP)將第一多源串流傳送給串流伺服器153,但本發明並不以此為限,凡可以用來傳送影音串流的方式都可以在陣列伺服器151與串流伺服器153 之間被使用。其中,陣列伺服器151通常可以在每產生一個多視角影格時,便將所產生的多視角影格傳送給串流伺服器153。
陣列伺服器151也可以如上述產生第一多源串流的過程,將所有第二訊號源130所輸出的第二影音串流組成第二多源串流,並可以將所產生的第二多源串流傳送到串流伺服器153。也就是說,陣列伺服器151可以接收每個第二訊號源130所輸出的第二多源串流,並可以分別持續由各個第二多源串流中取出一個第二單視角影格,及可以持續將所有被取出的第二單視角影格組合為一個第二多視角影格,並可以產生包含依序產生之第二多視角影格的第二多源串流。
串流伺服器153可以接收陣列伺服器151所產生的第一多源串流。若陣列伺服器151也有產生第二多源串流,則串流伺服器153也可以接收陣列伺服器151所產生的第二多源串流。
串流伺服器153也負責提供客戶端160連接,並負責將第一多源串流提供給請求第一多源串流的客戶端160,在部分的實施例中,串流伺服器153也可以將第二多源串流與第一多源串流一同提供給請求第一多源串流的客戶端160。
客戶端160通常是手機、平板電腦等方便使用者攜帶的裝置,但本發明並不以此為限。
客戶端160負責連線至串流伺服器153,並負責向串流伺服器153請求第一多源串流,藉以接收串流伺服器153所提供的第一多源串流。客戶端160也可以在接收第一多源串流時一併接收來自串流伺服器153的第二多源串流。其中,客戶端160可以使用HTTP Live Streaming的傳輸協定(HLS)接收第一多源 串流與第二多源串流,但本發明並不以此為限,凡可以傳輸影音訊號的傳輸方式都可以在串流伺服器153與客戶端160之間被使用。
客戶端160也負責由第一多源串流中取出一個第一多視角影格,並負責由所取出之第一多視角影格中取得一個第一單視角影格,及負責顯示被取得之第一單視角影格。實務上,客戶端160可以持續的依據第一多源串流所包含之各個第一多視角影格的順序,由第一多源串流中的每一個第一多視角影格取出位置相同(相同區塊)的第一單視角影格並依序顯示所取出的第一單視角影格,使得包含所取出之第一單視角影格的第一影音串流被播放。在本發明中,客戶端160可以依據預定值取出在對應位置(區塊)中的第一單視角影格,其中,預定值可以對應特定角落(如左上角或右上角)的區塊、對應位在中央的區塊、或對應排列在總區塊數一半的區塊(如在有16個區塊時排列在第8個位置的區塊)等,但本發明並不以此為限。
另外,客戶端160在持續由第一多源串流中取出第一多視角影格並由第一多視角影格取得並播放第一單視角影格的同時,第一切換訊號或第二切換訊號或暫停控制訊號可能隨著客戶端160之使用者對客戶端160進行特定操作而被產生。其中,第一切換訊號/第二切換訊號可以是客戶端160之使用者在如「第4圖」之客戶端160之觸控螢幕400的主顯示區域410上朝移動方向滑動一段移動距離所產生的觸控訊號,也可以是使用者將客戶端160朝移動方向或角度轉動所產生的轉動訊號,但產生第一切換訊號/第二切換訊號的特定操作並不以上述為限;暫停控制訊號可以是使用者在主顯示區域410上單擊或雙擊所產生的觸控訊號,但本發明亦不以上述為限。
客戶端160可以在第一切換訊號被產生時,由第一多源串流所取出之第一多視角影格中取得與第一切換訊號對應的另一個不同的第一單視角影格,並顯示所取得之另一個第一單視角影格,使包含與第一切換訊號對應之第一單視角影格的另一個不同的第一影音串流(在本發明中亦以與第一切換訊號對應之第一影音串流表示)被播放。
在部分的實施例中,若所有第一訊號源110以一定順序排列,則客戶端160可以依據與第一切換訊號所表示之移動方向對應的方向,由第一多視角影格中取得排列在與輸出當前被顯示之第一單視角影格的第一訊號源110相距一定間隔之另一個第一訊號源110所輸出之第一單視角影格。
例如,若與當前被顯示之第一單視角影格對應的區塊為排列在第九個位置的區塊231(「第2圖」參照),且第一多視角影格中之各區塊的排列順序為先左後右由上往下(也就是在兩個相鄰的區塊中,在左/上的區塊之排列順序比在右/下的區塊為先),則當第一切換訊號為向左滑動之觸控訊號時,第一切換訊號即與排列在第八個位置的區塊224對應,即客戶端160可以改為持續由第一多視角影格中取得置於區塊224中的第一單視角影格,而當第一切換訊號為向右滑動之觸控訊號時,第一切換訊號即與排列在第十個位置的區塊232對應,客戶端160可以改為持續由第一多視角影格中取得置於區塊232中的第一單視角影格。相似的,若當前被顯示之第一單視角影格與排列在第八個位置的區塊224對應,則當第一切換訊號為向左滑動之觸控訊號時,第一切換訊號與排列在第七個位置的區塊223對應,即客戶端160可以改為持續由第一多視角影格中取得置於區塊223中的第一單視角影格,而當第一切換訊號為向右滑動之觸控訊 號時,第一切換訊號即與排列在第九個位置的區塊231對應,客戶端160可以改為持續由第一多視角影格中取得置於區塊231中的第一單視角影格。
又如,第一切換訊號所對應之區塊也可以與第一切換訊號所表示之移動方向與移動距離有關,也就是說,假設與當前被顯示之第一單視角影格對應的區塊為排列在第九個位置的區塊231,且存在多個不同長度值的距離門檻值,當第一切換訊號為向左滑動之觸控訊號時,若第一切換訊號的移動距離未符合第一距離門檻值,則第一切換訊號可以與排列在前一個位置(第八個)的區塊224對應,若第一切換訊號的移動距離僅符合第一距離門檻值,則第一切換訊號可以與排列在前二個位置(第七個)的區塊223對應,若第一切換訊號的移動距離符合第一距離門檻值與第二距離門檻值,則第一切換訊號可以與排列在前三個位置(第六個)的區塊222對應,依此類推,相似的,當第一切換訊號為向右滑動之觸控訊號時,若第一切換訊號的移動距離未符合第一距離門檻值,則第一切換訊號可以與排列在後一個位置(第十個)的區塊232對應,若第一切換訊號的移動距離僅符合第一距離門檻值,則第一切換訊號可以與排列在後二個位置(第十一個)的區塊233對應,若第一切換訊號的移動距離符合第一距離門檻值與第二距離門檻值,則第一切換訊號可以與排列在後三個位置(第十二個)的區塊234對應,依此類推。
客戶端160也可以在暫停控制訊號被產生時,暫停由第一多源串流中取出之第一多視角影格,也可以暫停由第一多視角影格中取得第一單視角影格,或可以不顯示由第一多視角影格中取得之第一單視角影格,例如可以持續顯示暫停控制訊號被產生前之最後取得的第一單視角影格,使第一影音串流暫停播放。客戶端160也可以在暫停控制訊號被產生後,播放控制訊號未被產生 前,第一切換控制訊號被產生時,由包含當前被顯示之第一單視角影格的多視角影格中取出與第一切換訊號對應之另一個不同的第一單視角影格,並顯示被取出之另一個單視角影格。其中,客戶端160同樣可以上述的方式,依據第一切換控制訊號所表示的移動方向或移動方向與移動距離選擇由取出當前被顯示之第一單視角影格的多視角影格中取出不同的第一單視角影格。客戶端160也可以在暫停控制訊號被產生後,播放控制訊號被產生時,依據預設值選擇繼續顯示由當前所接收到之第一多源串流中取出之第一多視角影格,或選擇由暫停控制訊號被產生後接收到之第一多源串流中取出的第一多視角影格開始顯示,本發明沒有特別的限制。
客戶端160也可以在第一切換訊號被產生後,將預定值設定為與被產生之第一切換訊號所對應之區塊對應。如此,在客戶端160繼續由第一多源串流取出之第一多視角影格中取得第一單視角影格時,便是由與第一切換訊號所對應之區塊中取得第一單視角影格,也就是持續由第一多視角影格中之位在同一個位置的區塊取得第一單視角影格。
客戶端160也可以在第二切換訊號被產生時,改為持續由第二多源串流所取出之第二多視角影格中取得與當前被顯示之第一單視角影格對應之第二單視角影格,並顯示所取得之第二單視角影格,使包含第二單視角影格的第二影音串流(在本發明中亦以與第二切換訊號對應之第二影音串流表示)被播放。一般而言,與當前被顯示之第一單視角影格對應的第二單視角影格即為與在第二多視角影格中位置與當前被顯示之第一單視角影格對應之區塊在第一多視角影格中的位置相同(排列順序相同)之區塊對應的第二單視角影格。例如,若與當前被顯示之第一單視角影格對應的區塊排列在第一多視角影格中的 第九個位置,則與當前被顯示之第一單視角影格對應之第二單視角影格相對應的區塊也排列在第二多視角影格中之第九個位置。
在本發明中,也可能並不只一組第二訊號源130,當有多組第二訊號源130時,第二切換訊號所表示的移動距離可以讓第二切換訊號對應到不同組的第二訊號源130,例如,若有兩組設置在第一訊號源110之平面上方的第二訊號源130,則客戶端160可以有一個距離閥值,當第二切換訊號所表示的移動距離未超過距離閥值時,第二切換訊號可以對應到與第一訊號源110距離較近的一組第二訊號源130,當第二切換訊號所表示的移動距離超過距離閥值時,第二切換訊號可以對應到與第一訊號源110距離較遠的另一組第二訊號源130。
接著以第一實施例來解說本發明的運作系統與方法,並請參照「第3圖」本發明所提之由組合傳送之多個串流取出特定串流播放之方法流程圖。在本實施例中,假設第一訊號源110為攝影機,且第一訊號源110共有十六個,但本發明並不以此為限。
首先,在使用本發明提供串流服務前,需要先架設第一訊號源110。在本實施例中,假設第一訊號源(111~126)被架設在表演舞台的周圍,且第一訊號源(111~126)以一個圓形(或弧形)的軌跡被架設在同一個水平面上,如「第5圖」所示,其中,第一訊號源(111~126)的網路位址分別為172.0.0.1~16,且第一訊號源(111~126)依網路位址的順序由小至大排列,也就是說,網路位址為172.0.0.1之第一訊號源111與網路位址為172.0.0.2之第一訊號源112及172.0.0.16之第一訊號源126相鄰、網路位址為172.0.0.2之第一訊號源112與網路位址為172.0.0.1之第一訊號源111及172.0.0.3之第一訊號源113相鄰、…、網路位址為172.0.0.15之第一訊號源125與網路位址為172.0.0.14之第一訊號源 124及172.0.0.16之第一訊號源126相鄰、網路位址為172.0.0.16之第一訊號源126與網路位址為172.0.0.15之第一訊號源125及172.0.0.1之第一訊號源111相鄰。
在完成第一訊號源110的架設後,第一訊號源110可以開始拍攝表演舞台上的影像,並可以將所拍攝到的影像以影音串流(串流媒體)的方式傳送給陣列伺服器151。在本實施例中,假設第一訊號源(111~126)所產生之第一影音串流的解析度可以是960*540,且第一訊號源(111~126)可以透過NDI協定將第一影音串流傳送給陣列伺服器151。
在陣列伺服器151接收到第一訊號源110所傳送的第一影音串流(步驟310)後,陣列伺服器151可以持續由各個第一影音串流中分別取出一個不同的第一單視角影格,陣列伺服器151也可以將每一次由各個第一影音串流取出的各個不同的第一單視角影格組合為一個第一多視角影格,並可以將包含第一多視角影格以第一多源串流傳送給串流伺服器153(步驟330)。在本實施例中,假設陣列伺服器151可以產生解析度為3840*2160的第一多視角影格,並在第一多視角影格中定義如「第2圖」所示之4*4個區塊(每個區塊的解析度為960*540),及依據第一訊號源(111~126)之網路位址(來源識別資料)定義各個由不同第一影音串流中所取出之第一單視角影格與第一多視角影格中之各區塊的對應關係。若陣列伺服器151定義4*4的區塊以先左後右由上至下的順序排列,則陣列伺服器151可以定義網路位址為172.0.0.1之攝影機(第一訊號源111)所產生之第一影音串流中的第一單視角影格對應區塊211、網路位址為172.0.0.2之攝影機(第一訊號源112)所產生之第一影音串流中的第一單視角影格對應區塊212、網路位址為172.0.0.3之攝影機(第一訊號源113)所產生之第一影音串流中的第一單視角影格對應區塊213、…、網路位址為172.0.0.5之攝影機(第一訊 號源115)所產生之第一影音串流中的第一單視角影格對應區塊221、…、網路位址為172.0.0.13之攝影機(第一訊號源123)所產生之第一影音串流中的第一單視角影格對應區塊241、…、網路位址為172.0.0.15之攝影機(第一訊號源125)所產生之第一影音串流中的第一單視角影格對應區塊243、網路位址為172.0.0.16之攝影機(第一訊號源126)所產生之第一影音串流中的第一單視角影格對應區塊244,接著,陣列伺服器151可以將各個第一單視角影格置入相對應的區塊(211~244)中,如此,陣列伺服器151可以產生包含十六個第一單視角影格的一個第一多視角影格,進而可以產生包含多個第一多視角影格的第一多源串流,及可以使用推流的方式透過即時訊息協定將第一多源串流傳送給串流伺服器153。
在串流伺服器153接收到陣列伺服器151所產生第一多源串流後,客戶端160可以連線到串流伺服器153,並可以向串流伺服器153請求第一多源串流。串流伺服器153在接收到客戶端160所發出的請求後,可以將第一多源串流傳送給客戶端160,使得客戶端160可以接收第一多源串流(步驟350)。在本實施例中,假設客戶端160可以使用拉流的方式,透過HLS協定接收第一多源串流。
在客戶端160接收到多源串流後,客戶端160可以持續的由所接收到的第一多源串流中取出第一多視角影格,並可以持續的由每一個第一多視角影格中取得第一單視角影格,及可以持續顯示所取得之第一單視角影格,使得第一影音串流被播放(步驟360)。在本實施例中,假設預設值表示取得排列在第一個位置之區塊中的單視角影格,則客戶端160可以由左上角開始計算(若左上角之像素在第一多視角影格中的座標為(1,1)),對每一個第一多視角影格中取 出X軸為第1到第960個像素且Y軸為第1到540個像素的影像(被取出之影像即為第一單視角影格),再顯示所取出的影像(第一單視角影格),如此,第一訊號源111所拍攝產生的第一影音串流便可以在客戶端160上被播放。其中,客戶端160可以將第一多源串流的每秒影格數(frames per second,FPS)做為由第一多源串流中取出第一多視角影格的頻率。
在客戶端160播放第一影音串流時,若第一切換訊號被產生,則客戶端160可以持續由接收到之多源串流中改為取出另一個第一單視角影格,並可以持續顯示所取得之第一單視角影格,使得另一個第一影音串流被播放(步驟370)。在本實施例中,假設第一切換訊號為客戶端160之使用者的手指在客戶端160之觸控螢幕400的主顯示區域410(第4圖參照)上向右滑動而產生之觸控訊號,若在主顯示區域410上左右滑動之觸控訊號可以改變當前被播放之影音串流的視角,則客戶端160可以在第一切換訊號被產生後,依據向右滑動之觸控訊號(第一切換訊號)選擇與輸出當前被播放之第一影音串流之第一訊號源111位置相鄰且排列在第一訊號源111之後(假設為逆時針方向)的第一訊號源112所輸出的第一影音串流,也就是說,客戶端160可以由左上角開始計算,改為持續對每一個第一多源影格中取出X軸為第961到第1920個像素且Y軸為第1到540個像素的影像(被取出之影像即為第一訊號源112所產生的第一單視角影格),再顯示所取出的第一單視角影格,如此,第一訊號源112所拍攝產生的第一影音串流便可以在主顯示區域410上被播放。
相似的,若在客戶端160播放第一訊號源112所拍攝產生的第二影音串流時,若向右滑動之觸控訊號(第一切換訊號)再次被產生,則客戶端160同樣可以持續由接收到之第一多源串流中取出第一多視角影格,並可以持續的 由每一個第一多視角影格中取得與第一切換訊號對應之另一個第一訊號源113所產生的第一單視角影格,也就是對每一個第一多視角影格中取出X軸為第1921到第2880個像素且Y軸為第1到540個像素的影像,及可以持續顯示所取得之影像,使得第一訊號源113所拍攝產生的第一影音串流被播放;而若再次被產生之第一切換訊號為向左滑動之觸控訊號,則客戶端160可以持續由接收到之第一多源串流中取出第一多視角影格,並可以持續的由每一個第一多視角影格中取得與第一切換訊號對應之第一訊號源111所產生的第一單視角影格,也就是對每一個第一多視角影格中取出X軸為第1到第960個像素且Y軸為第1到540個像素的影像,及可以持續顯示所取得之影像,使得第一訊號源111所拍攝產生的第一影音串流被播放。
另外,客戶端160也可以在第一切換訊號被產生後,選擇與輸出當前被播放之第一影音串流之第一訊號源111在與移動方向對應且位置排列在與移動距離對應之間隔位置的另一個第一訊號源所輸出的第一影音串流,若向右的移動方向表示以逆時針方向選擇第一訊號源110,也就是表示選擇相對應之區塊排列在後的第一單視角影格,當移動距離未大於第一距離門檻值時,客戶端160可以在主顯示區域410中改為播放第一訊號源112所輸出的第一影音串流,也就是說,客戶端160可以由左上角開始計算,改為持續對每一個第一多視角影格中取出X軸為第961到第1920個像素且Y軸為第1到540個像素的影像(被取出之影像即為第一訊號源112所輸出的第一單視角影格),再於主顯示區域410中顯示所取出的第一單視角影格;而當移動距離大於第一距離門檻值但未大於第二距離門檻值時,客戶端160可以改為在主顯示區域410中播放第一訊號源113所輸出的第一影音串流,即客戶端160可以改為持續由第一多視角影格中取出X 軸為第961到第1920個像素且Y軸為第1到540個像素的影像;…;當移動距離大於第三距離門檻值但未大於第四距離門檻值時,客戶端160可以改為在主顯示區域410中播放第一訊號源115所輸出的第一影音串流,即客戶端160可以改為持續由第一多視角影格中取出X軸為第1到第960個像素且Y軸為第541到1080個像素的影像,…;依此類推。
如此,透過本發明,陣列伺服器151可以將多個訊號源所輸出的影音串流以較大的解析度組合為包含所有影音串流的多源串流後再由串流伺服器153傳送給客戶端160,使得客戶端160可以在本地(local)切換播放不同訊號源所輸出的影音串流,藉以在幾乎沒有延遲時間的情況下切換播放不同視角的影音串流。
上述第一實施例中,在客戶端160播放第一影音串流時,若暫停控制訊號先被產生,則客戶端160可以暫停由第一多源串流中取出之第一多視角影格,也可以暫停由第一多視角影格中取得第一單視角影格,並可以持續顯示暫停控制訊號被產生前最後取得的第一單視角影格,使第一影音串流暫停播放。客戶端160也可以在暫停控制訊號被產生後,第一切換控制訊號被產生時,由包含當前被顯示之第一單視角影格的多視角影格中取出與第一切換訊號對應之另一個不同的第一單視角影格,並顯示被取出之另一個單視角影格。例如,客戶端160可以隨著第一切換訊號的每一次產生,改由排列位置在前或後之區塊中取出並顯示第一單視角影格;或可以隨著第一切換訊號所表示的移動方向與移動距離選擇由排列位置在前或後一定間隔之區塊中取出並顯示第一單視角影格。
繼續以第二實施例來解說本發明的運作系統與方法,並請參照「第6圖」本發明所提之另一種由組合傳送之多個串流取出特定串流播放之方法流程圖。在本實施例中,假設如「第7圖」所示,包含第一訊號源110與第二訊號源130等兩組訊號源,第一訊號源110、第二訊號源130為被架設在表演舞台周圍的攝影機,且第一訊號源110與第二訊號源130各有十六個,但本發明並不以此為限。其中,第一訊號源(111~126)的網路位址為172.0.0.1~16、第二訊號源(131~146)的網路位址為172.0.1.1~16,且第一訊號源(111~126)依網路位址的順序被環形設置在離表演舞台約150公分的平面上、第二訊號源源(131~146)依網路位址的順序被環形設置在離表演舞台約200公分的另一個平面上,同時,網路位址為172.0.1.1之第二訊號源131與網路位址為172.0.0.1之第一訊號源111對應、網路位址為172.0.1.2之第二訊號源132與網路位址為172.0.0.2之第一訊號源112對應、…、依此類推。
在完成第一訊號源110、第二訊號源130的設置後,第一訊號源110、第二訊號源130可以開始拍攝表演舞台上的影像,並可以將所拍攝到的影像以影音串流的方式傳送給陣列伺服器151。在本實施例中,假設所有訊號源(第一訊號源110、第二訊號源130)所產生之影音串流(第一影音串流、第二影音串流)的解析度都是960*540,且所有訊號源都可以透過NDI協定將影音串流傳送給陣列伺服器151。
在陣列伺服器151接收到第一訊號源110所傳送的第一影音串流與第二訊號源130所傳送的第二影音串流(步驟610)後,陣列伺服器151可以如第一實施例中的描述,持續由各個第一影音串流中分別取出一個第一單視角影格,並可以將每一次取出的不同第一單視角影格組合為一個第一多視角影格, 並可以將第一多視角影格以第一多源串流傳送給串流伺服器153,另外,陣列伺服器151也可以由各第一影音串流產生第一多源串流相同的過程,持續由各個第二影音串流中分別取出一個第二單視角影格,並可以將每一次取出的不同第二單視角影格組合為一個第二多視角影格,並可以將所產生之第二多視角影格以第二多源串流傳送到串流伺服器153(步驟630)。在本實施例中,假設陣列伺服器151產生第一多源串流的過程不再贅述,另外,陣列伺服器151同樣可以產生如「第2圖」所示之包含4*4個解析度為960*540之區塊的第二多視角影格,及可以依據第二訊號源(131~146)的網路位址(來源識別資料)定義每一個第二單視角影格與各個區塊的對應關係,或可以依據第二訊號源130所對應之第一訊號源110所產生之第一單視角影格在第一多視角影格中的位置定義相對應之第二訊號源130所產生之第二單視角影格與各區塊的對應關係。也就是說,若陣列伺服器151定義區塊以先左後右由上至下的順序排列,則陣列伺服器151可以定義網路位址為172.0.1.1之攝影機(第二訊號源131)所產生之第二影音串流中的第二單視角影格對應區塊211、網路位址為172.0.1.2之攝影機(第二訊號源132)所產生之第二影音串流中的第二單視角影格對應區塊212、…、網路位址為172.0.1.16之攝影機所產生之第二影音串流中的第二單視角影格對應區塊244,接著,陣列伺服器151可以將各個第二單視角影格置入相對應的區塊中,如此,陣列伺服器151可以產生包含十六個第二單視角影格的第二多視角影格,並可以產生包含第二多視角影格的第二多源串流,及可以使用推流的方式透過即時訊息協定將第一多源串流與第二多源串流傳送給串流伺服器153。
在串流伺服器153接收到陣列伺服器151所傳送的第一多源串流與第二多源串流後,客戶端160可以連線到串流伺服器153,並可以向串流伺服 器153請求第一多源串流。串流伺服器153在接收到客戶端160所發出的請求後,可以將第一多源串流與第二多源串流傳送給客戶端160,使得客戶端160接收第一多源串流與第二多源串流(步驟650)。在本實施例中,假設客戶端160可以使用拉流的方式,透過HLS協定接收第一多源串流與第二多源串流。
在客戶端160接收到第一多源串流與第二多源串流後,客戶端160可以持續的由所接收到的第一多源串流中取出第一多視角影格,並可以持續的由每一個第一多視角影格中取得第一單視角影格,及可以持續顯示所取得之第一單視角影格,使得第一影音串流被播放(步驟660)。在本實施例中,假設預設值表示取得排列在第一個位置之區塊中的單視角影格,則客戶端160可以由左上角開始計算,對每一個第一多視角影格中取出X軸為第1到第960個像素且Y軸為第1到540個像素的影像(被取出之影像即為第一單視角影格),再顯示所取出的影像(第一單視角影格),如此,第一訊號源111所拍攝產生的第一影音串流便可以在客戶端160上被播放。
在客戶端160播放第一影音串流時,若第一切換訊號被產生,則客戶端160可以如第一實施例所述,持續由接收到之第一多源串流中取出第一多視角影格,並可以持續的由每一個第一多視角影格中取得與第一切換訊號對應的另一個不同的第一單視角影格,及可以持續顯示所取得之第一單視角影格,使得另一個第一影音串流被播放;而若第二切換訊號被產生,則客戶端160可以改為由與第二切換訊號對應之第二多源串流中取出第二多視角影格,並可以持續的由每一個第二多視角影格中取得與當前播放之第一單視角影格對應的第二單視角影格,及可以持續顯示所取得之第二單視角影格,使得第二影音串流被播放(步驟680)。在本實施例中,假設第二切換訊號為客戶端160之使用者的 手指在客戶端160的觸控螢幕400的主顯示區域410(第4圖參照)上向上滑動而產生之觸控訊號,若在主顯示區域410上下滑動之觸控訊號可以改變當前所播放之影音串流的視角,客戶端160可以在第二切換訊號被產生後,依據向上滑動之觸控訊號(第二切換訊號)選擇與輸出當前被播放之第一影音串流之第一訊號源111對應之第二訊號源131所輸出的第二影音串流,也就是說,客戶端160可以由左上角開始計算,對每一個第二單視角影格中取出X軸為第1到第960個像素且Y軸為第1到540個像素的影像(被取出之影像即為第二訊號源131所產生的第二單視角影格),再顯示所取出的第二單視角影格,如此,第二訊號源131所拍攝輸出的第二影音串流便可以在客戶端160上被播放。
相似的,若在客戶端160播放第二訊號源131所拍攝產生的第二影音串流時,若向下滑動之觸控訊號(第二切換訊號)被產生,則客戶端160可以改為持續由與第二切換訊號對應之第一多源串流中取出第一多視角影格,並可以持續的由每一個第一多視角影格中取得與輸出當前播放之第二單視角影格之第二訊號源131對應之第一訊號源111所輸出的第一單視角影格,也就是對每一個第一多視角影格中取出X軸為第1到第960個像素且Y軸為第1到540個像素的影像,及可以持續顯示所取得之影像,使得第一訊號源111所拍攝產生的第一影音串流被播放;另外,若是被產生的觸控訊號為第一切換訊號而非第二切換訊號,則客戶端160可以持續由接收到之第二多源串流中取出第二多視角影格,並可以持續的由每一個第二多視角影格中取得與第一切換訊號對應之第二訊號源132所產生的第二單視角影格,也就是對每一個第二多視角影格中取出X軸為第961到第1920個像素且Y軸為第1到540個像素的影像,及可以持續顯示所取得之影像,使得第二訊號源132所拍攝產生的第二影音串流被播放。其中,第一切換 訊號並不限於與第二訊號源132對應,客戶端160也可以依據第一切換訊號所表示之移動方向與移動距離而與其他非第二訊號源131之第二訊號源(133~146)對應,並可以持續由第二多視角影格中取出相對應之位置的影像並顯示。
綜上所述,可知本發明與先前技術之間的差異在於具有陣列伺服器將多個訊號源所輸出的影音串流組合為一個包含所有影音串流的多源串流並將組合產生的多源串流提供給客戶端,客戶端由所接收到的多源串流中取出欲播放之影音串流之技術手段,藉由此一技術手段可以來解決先前技術所存在觀賞直播時切換視角需要反應時間的問題,進而達成降低直播之服務伺服器之負載的技術功效。
再者,本發明之由組合傳送之多個串流取出特定串流播放之方法,可實現於硬體、軟體或硬體與軟體之組合中,亦可在電腦系統中以集中方式實現或以不同元件散佈於若干互連之電腦系統的分散方式實現。
雖然本發明所揭露之實施方式如上,惟所述之內容並非用以直接限定本發明之專利保護範圍。任何本發明所屬技術領域中具有通常知識者,在不脫離本發明所揭露之精神和範圍的前提下,對本發明之實施的形式上及細節上作些許之更動潤飾,均屬於本發明之專利保護範圍。本發明之專利保護範圍,仍須以所附之申請專利範圍所界定者為準。
步驟310:陣列伺服器接收第一訊號源所輸出之第一影音串流
步驟330:陣列伺服器持續由第一影音串流中取出第一單視角影格,並將所有第一單視角影格組合為第一多視角影格,及將第一多視角影格以第一多源串流傳送到串流伺服器
步驟350:客戶端連線至串流伺服器,並接收第一多源串流
步驟360:客戶端持續由第一多視角影格中取得同一第一訊號源所輸出之第一單視角影格,並顯示被取得之第一單視角影格
步驟370:客戶端於第一切換訊號被產生時,改為持續由第一多視角影格中取出與第一切換訊號對應之第一單視角影格,並顯示被取出之第一單視角影格

Claims (10)

  1. 一種由組合傳送之多個串流取出特定串流播放之方法,該方法至少包含下列步驟:一陣列伺服器接收多個第一訊號源所輸出之各第一影音串流;該陣列伺服器產生包含多個第一多視角影格之一第一多源串流,並將該第一多源串流傳送至一串流伺服器,其中,該陣列伺服器是由每一該第一影音串流中分別取出一第一單視角影格,並依據各該第一訊號源之來源識別資料將各該第一單視角影格組合為一該第一多視角影格;一客戶端連線至該串流伺服器,並接收該第一多源串流;該客戶端持續由該些第一多視角影格中取得同一該第一訊號源所產生之一該第一單視角影格,並顯示該被取得之第一單視角影格,使一該第一影音串流被播放;及該客戶端於朝一移動方向滑動一移動距離之一第一切換訊號被產生時,改為持續取得與發出當前被顯示之一該第一單視角影格之一該第一訊號源在與該移動方向之對應方向且排列在與該移動距離對應之一間隔位置之另一該第一訊號源所輸出之另一該第一單視角影格,並顯示被取出之另一該第一單視角影格,使包含被取出之另一該第一單視角影格之另一該第一影音串流被播放,其中,該第一切換訊號產生過程中,該移動方向與該移動距離隨著該客戶端之操作改變。
  2. 如請求項1所述之由組合傳送之多個串流取出特定串流播放之方法,其中該方法於一該第一影音串流被播放之步驟後,更包含該客戶端於一暫停控制訊號被產生後該第一切換訊號被產生時,由包含當前被顯示之一該第 一單視角影格之一該多視角影格中取出與該第一切換訊號對應之另一該第一單視角影格,並顯示被取出之另一該第一單視角影格。
  3. 如請求項1所述之由組合傳送之多個串流取出特定串流播放之方法,其中該方法於一該第一影音串流被播放之步驟後,更包含該客戶端於一暫停控制訊號被產生時,由持續顯示該暫停控制訊號被產生前最後顯示之一該單視角影格之步驟。
  4. 如請求項1所述之由組合傳送之多個串流取出特定串流播放之方法,其中該陣列伺服器將各該第一單視角影格組合為一該第一多視角影格之步驟為該陣列伺服器產生包含M*N個區塊之一該第一多視角影格,並依據各該第一訊號源之來源識別資料依序排列各該第一訊號源,並依排列順序分別將各該第一訊號源所輸出之一該第一單視角影格依序置於相對應之一該區塊中以產生一該第一多視角影格。
  5. 如請求項1所述之由組合傳送之多個串流取出特定串流播放之方法,其中該方法更包含該陣列伺服器接收多個第二訊號源所輸出之各第二影音串流,並持續由每一該第二影音串流中分別取出一第二單視角影格,及將該些第二單視角影格組合為一第二多視角影格,並將各該第二多視角影格以一第二多源串流傳送到該串流伺服器,該客戶端於接收該第一多源串流時一併接收該第二多源串流,及於一第二切換訊號被產生時,改為持續由與該第二切換訊號對應之該第二多源串流所包含之一該第二多視角影格中取出與當前被顯示之一該單視角影格對應之一該第二單視角影格,並顯示被取出之一該第二單視角影格之步驟。
  6. 一種由組合傳送之多個串流取出特定串流播放之系統,該系統至少包含:多個第一訊號源,每一該第一訊號源用以輸出一第一影音串流;一串流伺服器;一陣列伺服器,用以接收各該第一影音串流,及用以產生包含多個第一多視角影格之一第一多源串流,並將該第一多源串流傳送至該串流伺服器,其中,該陣列伺服器是由每一該第一影音串流中分別取出一第一單視角影格,及依據各該第一訊號源之來源識別資料將各該第一單視角影格組合為一該第一多視角影格;及一客戶端,用以連線至該串流伺服器,並接收該第一多源串流,及持續由該些第一多視角影格中取得同一該第一訊號源所產生之一該第一單視角影格,並顯示該被取得之第一單視角影格,使一該第一影音串流被播放,及用以於朝一移動方向滑動一移動距離之一第一切換訊號被產生時,改為持續取得與發出當前被顯示之一該第一單視角影格之一該第一訊號源在與該移動方向之對應方向且排列在與該移動距離對應之間隔位置之另一該第一訊號源所輸出之另一該第一單視角影格,並顯示被取出之另一該第一單視角影格,使包含被取得之另一該第一單視角影格之另一該第一影音串流被播放,其中,該第一切換訊號產生過程中,該移動方向與該移動距離隨著該客戶端之操作改變。
  7. 如請求項6所述之由組合傳送之多個串流取出特定串流播放之系統,其中該客戶端更用以於一暫停控制訊號被產生後該第一切換訊號被產生 時,由取出當前被顯示之一該第一單視角影格之一該多視角影格中取出與該第一切換訊號對應之另一該第一單視角影格,並顯示被取出之另一該單視角影格。
  8. 如請求項6所述之由組合傳送之多個串流取出特定串流播放之系統,其中該客戶端更用以於一暫停控制訊號被產生時,由持續顯示該暫停控制訊號被產生前最後顯示之一該單視角影格。
  9. 如請求項6所述之由組合傳送之多個串流取出特定串流播放之系統,其中每一該第一多視角影格包含M*N個區塊,該陣列伺服器是依據各該第一訊號源之來源識別資料依序排列各該第一訊號源,並依排列順序分別將各該第一訊號源所輸出之一該第一單視角影格依序置於相對應之一該區塊中以產生一該第一多視角影格。
  10. 如請求項6所述之由組合傳送之多個串流取出特定串流播放之系統,其中該系統更包含多個第二訊號源,每一該第二訊號源分別用以輸出一第二影音串流,該陣列伺服器更用以接收各該第二影音串流,並持續由每一該第二影音串流中取出一第二單視角影格,及將該些第二單視角影格組合為一第二多視角影格,並將各該第二多視角影格以一第二多源串流傳送到該串流伺服器,該客戶端更用以於接收該第一多源串流時一併接收該第二多源串流,及於一第二切換訊號被產生時,改為持續由與該第二切換訊號對應之該第二多源串流所包含之一該第二多視角影格中取出與當前被顯示之一該第一單視角影格對應之一該第二單視角影格,並顯示該被取出之另一該第二單視角影格。
TW109146792A 2020-12-30 2020-12-30 由組合傳送之多個串流取出特定串流播放之系統及方法 TWI830978B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW109146792A TWI830978B (zh) 2020-12-30 2020-12-30 由組合傳送之多個串流取出特定串流播放之系統及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW109146792A TWI830978B (zh) 2020-12-30 2020-12-30 由組合傳送之多個串流取出特定串流播放之系統及方法

Publications (2)

Publication Number Publication Date
TW202226838A TW202226838A (zh) 2022-07-01
TWI830978B true TWI830978B (zh) 2024-02-01

Family

ID=83436804

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109146792A TWI830978B (zh) 2020-12-30 2020-12-30 由組合傳送之多個串流取出特定串流播放之系統及方法

Country Status (1)

Country Link
TW (1) TWI830978B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109218739A (zh) * 2017-07-06 2019-01-15 阿里巴巴集团控股有限公司 视频流的视角切换方法、装置、设备和计算机存储介质
CN111669567A (zh) * 2019-03-07 2020-09-15 阿里巴巴集团控股有限公司 多角度自由视角视频数据生成方法及装置、介质、服务器
TWM610558U (zh) * 2020-12-30 2021-04-11 光陣三維科技有限公司 由組合傳送之多個串流取出特定串流播放之系統

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109218739A (zh) * 2017-07-06 2019-01-15 阿里巴巴集团控股有限公司 视频流的视角切换方法、装置、设备和计算机存储介质
CN111669567A (zh) * 2019-03-07 2020-09-15 阿里巴巴集团控股有限公司 多角度自由视角视频数据生成方法及装置、介质、服务器
TWM610558U (zh) * 2020-12-30 2021-04-11 光陣三維科技有限公司 由組合傳送之多個串流取出特定串流播放之系統

Also Published As

Publication number Publication date
TW202226838A (zh) 2022-07-01

Similar Documents

Publication Publication Date Title
US10003741B2 (en) System for processing data from an omnidirectional camera with multiple processors and/or multiple sensors connected to each processor
US6539547B2 (en) Method and apparatus for electronically distributing images from a panoptic camera system
CN106992959B (zh) 一种3d全景音视频直播系统及音视频采集方法
WO2018014495A1 (zh) 实时全景直播网络摄像机和系统及方法
US9843725B2 (en) Omnidirectional camera with multiple processors and/or multiple sensors connected to each processor
US20160249108A1 (en) Method and apparatus for providing a customized viewing experience
KR20150029461A (ko) 파노라마 영상의 스트리밍 서비스 제공 시스템에서 타일링 영상 동기화 방법
WO2019041227A1 (zh) 车载安防监控方法、系统及终端设备
US9445142B2 (en) Information processing apparatus and control method thereof
TW202137770A (zh) 沉浸式媒體提供方法、獲取方法、裝置、設備及存儲介質
WO2022143212A1 (zh) 由组合传送的多个串流取出特定串流播放的系统及方法
WO2020093862A1 (zh) 一种vr视频处理的方法及相关装置
KR101311463B1 (ko) 원격 영상정보 제공시스템
TWM610558U (zh) 由組合傳送之多個串流取出特定串流播放之系統
CN111741343B (zh) 视频处理方法及装置、电子设备
TWI830978B (zh) 由組合傳送之多個串流取出特定串流播放之系統及方法
JP2008109364A (ja) カメラサーバシステム、データの処理方法、およびカメラサーバ
CN112188219A (zh) 视频接收方法和装置以及视频发送方法和装置
US11930290B2 (en) Panoramic picture in picture video
JP2021078114A (ja) 撮影装置、配信システム、配信方法および記録媒体
US20240007758A1 (en) Device for immersive capture of streaming video and imaging and method thereof
TWI770697B (zh) 影像擷取裝置及其方法
TWI837830B (zh) 依三維影像轉動選擇播放對應影像串流之系統及方法
CN109005453B (zh) 一种视频流播放控制方法及电子设备
WO2024081320A1 (en) Bandwidth-adaptive light field video transmission on mobile and portable devices