TW589892B - Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology - Google Patents

Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology Download PDF

Info

Publication number
TW589892B
TW589892B TW092105339A TW92105339A TW589892B TW 589892 B TW589892 B TW 589892B TW 092105339 A TW092105339 A TW 092105339A TW 92105339 A TW92105339 A TW 92105339A TW 589892 B TW589892 B TW 589892B
Authority
TW
Taiwan
Prior art keywords
real
time
mentioned
online game
audio
Prior art date
Application number
TW092105339A
Other languages
English (en)
Other versions
TW200418328A (en
Inventor
Shi-Kang Tsau
Original Assignee
Asustek Comp Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Asustek Comp Inc filed Critical Asustek Comp Inc
Priority to TW092105339A priority Critical patent/TW589892B/zh
Priority to US10/797,006 priority patent/US20040179554A1/en
Application granted granted Critical
Publication of TW589892B publication Critical patent/TW589892B/zh
Publication of TW200418328A publication Critical patent/TW200418328A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6175—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal

Description

五、發明說明（J) 發明所屬之技術領域 本發明係有關於一種影音會够 二；以影音同步技術實現於網路遊J行於 之方法。 心歡y進仃即時影音會談 先前技術 個網Γ、以一網路遊戲伺服器及多 *保存由=客;料網…以處理 網路遊；==遊戲間之互動。換言之，所有 運算。而送至網路遊戲飼服器進行處理及 升而即時影音會談係利用游 土久 及麥克風，透過網路傳送即時影^ 知電腦上之攝影機 遊戲客戶端進行會談。 貝枓，以便與其他網路 時進於網路遊… ::=::度:—=:時難有;工 :„面，現行之視訊資料 =ΪΓΐ幕畫面時’同時顯示即時視訊書面: :則及傳輸若均以網路遊戲伺服ΐ進 仃W其負擔Qoad)及頻寬（band w 服态進 對地影響網路遊戲執行的速度。发- =…法負荷，相 時音訊甚益 八一’即日卞視訊畫面盥即 取影音資料後，直接透過網路傳送至接收之網：：：= 第4頁 0660-9881twf(nl);92022;teresa.ptd 589892 五、發明說明（2) __ =，而接收之網路遊戲客戶端直接播放所接收到之欠 4 :在路頻寬良好且資料處理的能力足以負擔的；：貝 端It成影音同步之要求。但若傳送之網路遊戲客^ 網路或接收之網路遊戲客戶端稍 二 2產生不同步的現象’而且此不同步 ：：音 持績累積。實務上，現行之網敗 θ思者4間 理的能力並無法負擔影音同步之需15頻寬及資料處 J戲並不支援於網路遊戲中同時進行即時影音；⑵路 發明内容 有鑑於此，本發明的目的就在於以姻故说& & =路遊戲客户端間建立網路傳輸通道客戶端與 -貝料於網路遊戲客戶端進行|縮 =1即時影音 他網路遊戲客戶端。而接收到即’並傳輪 戲客戶端，便進行影音資料解碼，並料之網路遊 視矾流及三度空間動畫」模組口同時支援即時 間動畫獨佔螢幕畫面時，尚^1網路遊戲以三度空 以音效卡透過耳機、剩叭支援播：：：·即時視訊畫面，另 「同時支援即時視訊流 二=。 :視訊：料做為材質貼圖， ：=畫」才莫組係將即 達到同時顯示之目的。 路逛戲之遊戲畫面上， 為達成上述目的，
0660-9881twf(nl)；92022;teresa.ptd 第5頁 現於網路遊戲進行即時影音會談以影音同步技術實 _ 傳輸通道，網路遊戲客戶端執行： 589892 五、發明說明（3) 路遊戲並連線至網路遊戲^ — 3路=伺服器。網路傳輸通道C輸通道不經過 路遊龄ΐ通訊錄指定或直接指定欲進-係由網路遊戲客戶 ，J戲客戶端之網路位址，通訊錄可了即時影音會談之網 影曰會談之網路遊戲 f可包括所有可進杆g、士 二出r要求至欲：二:;匕址。網::::卩： =被指定之網路遊戲客戶端戲客戶端 n要未建立網路傳於 接著，於網路遊戲客 音訊資料。將即時視訊資料壓以：：視訊資料以及即時 ::時音訊資料壓縮編碼為音訊資料』ί硯訊資料框架，將 =以及音訊資料框架為網木，封裝視訊資 傳輪封包内，時間標藏加入時間標藏於 :=】訊。然後，透1::;=料和即時視4 傳送至其他網路遊戲客戶端。 道，將網路傳輪封 當網路傳輸通道之頻 料以及即時音訊資料時，；時;時傳送即時視訊資 考慮。、以音輸封包會以即時音訊。：：： 曰a貝科為優先考虎的傷 貝针為優先 至非常小’因此即使在網路；二2:音訊資料可壓紹 維持音訊資料的即時性，達到即的情形下，仍3 最後，接收網路傳輪封勺 衫a s谈的基本要求。 傳輸封包解碼為視訊資料以會將網路 曰汛貝枓，根據時間標籤同 —------ !1 0660-9881twf(nl);92022;tere sa.ptd 第6頁 瞧 589892 五、發明說明（4) 步即時音訊資料和即時視訊資料，並顯示視訊資料及播放 音訊資料，達成於網路遊戲中同時進行即時影音會談之目 的。顯示視訊資料係將即時視訊資料做為材質貼圖，混入 網路遊戲之遊戲晝面上，達到同時顯示之目的。 影音同步的重點在於，如何於播放影音資料之網路遊 戲客戶端維持正確的時間資訊，當播放影音資料之網路遊 戲客戶端即為擷取影音資料之網路遊戲客戶端時，影音資 料的同步播放並不會產生問題，因為擷取影音資料的系統 時間與播放影音資料之系統時間相同。當擷取影音資料之 網路遊戲客戶端與播放影音資料之網路遊戲客戶端不同 時，則需以播放影音資料之網路遊戲客戶端系統時間，加 上前述時間標籤以作為播放即時音訊資料以及顯示即時視 訊資料之時間。 另外，將網路傳輸封包解碼為視訊資料以及音訊資料 時，因為網路傳輸封包係以音訊資料為優先考量，因此可 能會產生網路傳輸封包所傳輸之視訊資料框架少於原有視 訊資料框架的情形，加上網路傳輸封包於解碼時，也可能 因視訊資料壓縮之參照性（IPB參照編碼），丟棄（drop)網 路傳輸封包中的資料框架。因此，影音同步則需以前述時 間標籤以及即時視訊資料之數量，將即時視訊資料進行間 隔顯示，達成影音同步之效果。此同步之動作可在影音資 料解碼前或影音資料解碼後進行。 其次，本發明提出一種以影音同步技術實現於網路遊 戲進行即時影音會談之系統，包括網路遊戲伺服器以及多
0660-9881twf(nl);92022;teresa.ptd 第7頁 發明說明（5) 五 個網路遊戲客戶山 式。網路遊戲客，山網路遊戲伺服器執行網路遊戲主程 戲客戶端以及網路:私包括欲進行即時影音會談之網路遊 伺服器連接以進疒，輸通道，網路遊戲客戶端與網路遊戲 時影音會談之網^^^遊戲，網路傳輸通道連接欲進行即 影音會談傳送戲客戶端。 器、資料編碼器遊戲客戶端包括即時資料擷取 資料擷取器，用以於網裝器以及網路傳輸器。即時 及即時音訊資料。遊，客戶端擷取即時視訊資料以 碼產生視訊資料框架’，以=用以將即時視訊資料麼縮蝙 音訊資料框架。網路 即時音訊資料壓縮編碼產生 音訊資料框架為網路傳$封^益，封裝視訊資料框架以及 輸封包内，時間標籤^ 並加入時間標籤於此網路 同步關係，即為產；資料和即時視訊資：； 】訊：：路傳輸器，透過；路時視訊資料之時間 傳迗至接收網路遊戲客戶端。專輸通道，將網路傳輪封包 網路傳輸通道的建立 =或直接指定欲進行即時景2客戶端，根據通訊 路遊戲客戶端之網路位址。網行即時影音會談之網 么至欲進行即時影音會談之網路遊=客戶端發出接續要求 、周路遊戲客戶端根據接續要五客戶端’再由被指定之 傳輸通道之頻寬無法支援同，路傳輸通道。當網路 音訊資料時，即時音訊資料視訊資料以及即時 一______ 先權向於即時視訊資料， 0660.9881twf(nl)；92022;teresa.ptd — 五、發明說明（6) 也就是網路傳輪封 ^ — 影音會談接收方夕έ時音訊資科為優先考 及影音播放器f方之網路遊戲客戶端、：考慮 njt i9 。為料解碼号用以從 匕括貝料解碼器以 =資料以及即時音路傳輸封包解碼為即 輸封包解碼為視訊資科以及I / Θ音播放器，會將網路傳 :即時音訊資料和即：二I;:資#，根據時間標藏1 曰讯資料。顯示視訊資料係將'^並顯示視訊資料及播放 圖，混入網路遊戲之遊時視訊資料做為材質貼 々的。前述同步係以網路遊：土 ：達到畫面同時顯示之目 戴’作為播放即時音訊資料以及m時間加上時間標 間。或者，以砗μ挪# 及顯不即時視訊資料之砗 視訊眘粗、· 標鐵以及即時視訊資料之赵旦 再者，本發明提出ΐ影音會談之效果。 戲進仃即時影音會談之方法，其滴用二，打λ現於網路遊 端。網路遊戲客戶端連線至網路遊戲飼：：路遊戲客戶 遊戲並顯示遊戲晝面 ：’以執行網路 ;，建立網路傳輸通道至外:；：路=客路；戲執行 路遊戲並連接至遊戲伺服器:再執行網 服器。 j峪得翻通道不經過遊戲伺 利用即時資料掏取器，擷取即時視 9貝料。壓縮編碼即時視訊資料和即時立1L ρ 包，並加入時間標藏於此網二 表示即時音訊資料和即時視訊資料之同步關：，夺 ’’、、生即時音訊資料和即時視訊資料之時間資訊。” ?
— 五、發明說叼（?） 傳輸Π的網路傳輸通道，傳送網路傳輪封, 定外部網路遊戲客戶：：，訊錄指 所有外部網路遊戲客戶端之網：：路位址，通訊錄可包： 遊戲客戶網路遊戲客戶端，再由被#f戶端發 通道之頻宽：法要求建立網路傳輸通道。：ίί網路 資斜拄冕…法支援同時傳送即時初邙次刺、田路傳輪 ,，，即時音訊資料之優先權古/貝料以及即時音訊 疋網路傳輸封包會以即時音即時視訊資料，也就 傳輸封包。並將網路二過網路傳輸通道，接收網路 資料和即時音訊資料。=$ l解壓縮/解碼產生即時視訊 間標籤，同步即時音次^ ，在網路遊戲執行中，根據時 音訊資料及顯示即時二二和即時視訊資料，並播放即時 訊資料係將即時視訊次貝料於遊戲晝面中。顯示即時視 遊戲畫面上，達到同時顯做為材質貼圖，混入網路遊戲之 戲客戶端之系統時間加1 =之1 。前述同步係以網路遊 料以及顯示即時視訊資日寸間標籤，作為播放即時音訊資 即時視訊資料之數量，將之時間。或者，以時間標籤以及 成即時影音會談之效果j P時視汛資料進行間隔顯示。達 、又再者，本發明提出一 程式，上述電腦程式用以 存媒體，用以儲存一電月1^ 述電腦系統執行如上所述入:電腦系統中並且使得上 戲進行即時影音會談之^ =以影音同步技術實現於網路遊 0660-9881twf(nl);92022;teresa.ptd 第10頁 五 發明說明（8) 另外，本發明提出_籀 網路遊戲並且具有一儲存ρ $電腦系統’其執行- 電腦程式，上述電腦程儲存媒體用以儲存- 音同步技術實現腦系統執行如上所述之以影 實施方式遊戲進行即時影音會談之方法。 清參照第1圖，第1圖係顯示本發明所揭 行流程圖。首先，於網路遊戲進行；月= : = ;之執 建立網路傳輸通道(步驟S100)，此網路二端 任何標準網路協定建立，如 傳輸通道可以 (TCP/IP)等。此網路 二協疋/網際網路協定 m ^ ^ ^ 得輸通道並不經過網路遊戲伺服时 肩路傳輸通道的建立係由網路遊戲客戶端 艮裔。 J或直接指定欲進行即時影音會談之網路遊戲客^錄指 =:通訊錄可包括所有可進行即時影音會談之=網 ^客戶知之網路位址。網路遊戲客戶端.發出接路遊 進行即時影音會談之網路遊戲客戶端，再由被指:至欲 遊戲客戶端根據接續要求建立網路傳輸通道。接^之網路 執行欲進行之網路遊戲程式並連接至遊戲伺服器。，則可 然後，執行網路遊戲程式並連接至網路遊戲伺 (步驟sl〇1)。於網路遊戲客戶端操取即時視訊器 時音訊資料（步驟Sl〇2)。即時視訊資料可利用攝$ =及即 (Camera)等視訊擷取裝置（Vide〇 Capture 僅 而即時音訊資料則可利用麥克風（Micr〇ph〇ne)等立/入， 裝置（Audio Capture Device)傳入。 9 七擷取 第11頁 0660-9881twf(η 1);92022;teresa.ptd 589892 五、發明說明（9) --------- 接著’將即時視訊資料壓縮（compress)編碼（enc〇de) 碼ΐΐΐ資料框架（frame)，以及將即時音訊資料壓縮編 之壓資料框架（步驟S1〇4)。此壓縮編碼可利用標準 壓細格式，如H. 263、MPEG1/2/4、G723等其 絪f本數量龐大之影音資料，經過壓縮編碼，缩小為嘀乂 網路傳輸之格式。 7 %小為適合 同步ΐίΐ;:;?輸ΠΠ資料時，音訊順暢及影音 資料框架為優先，。視提出之方法係以音訊 r傳輸封包心：r 框架為 效果。並加入時間標籤於此網路二m音同步之 示即時音訊資料和即時視％ 包内，時間標籤表 時音訊資料和即時視訊料之關係’即為產生即 也就是當網路傳輸通道之=u(/^si〇7)。 視訊資料以及即時音訊資料時，即0:ΐ支棱同時傳送即時 ，時視訊資料。此外在網路。=資料之優先權高 戡，=即時視訊資料以及即心jj:=入時間標 後，透過網路傳鈐 貝抖同步之依據。 客戶端(步驟：ί:路封包傳送至其 之々路遊戲客戶端會 3接收網路傳輪 以及即時音訊資料(傳輪封包解碼為即時心： 資料和即時視訊資:二〇)步，=據時間標藏，同“ 科及顯不即時視訊資 ，驟SU1 )，播放即時音 訊資料係將即時視訊料：(步驟sn2)。顯；： 二__^^ 抖做為材質貼圖1入網路遊戟: $ 12頁 0660-9881twf(nl)；92022;teresa.7t7 589892 五、發明說明（10) 遊戲晝面上，達到同時顯示之目的。 步驟S11 1之同步係以播放影立 統時間加上時間標籤，作為播0::路遊戲客戶端之系 時視訊資料之時間。或者，以日±夺日訊資料以及顯示即 之數量，將即時視訊資料進行戴以及即時視訊資料 内顯示較少之視訊資料，延遲每=j不，即相同時間區間 以達到影音同步之目的。 視矾畫面顯示的時間， 步驟S11 1之同步動作也可 差別在於若先進行同步再進行：步細0之前執行’其 還會有視訊資料的丟棄現象。若^可能因解碼器的不同 則解碼器所產生之視訊資料的去：二：再進行同步’ 視訊資料之最終數量。 ’、象已^生’故可掌握 請參照第2圖，第2圖係顯示 能方塊圖。本發明提出一種於網心戶:揭7之糸統之功 之系統，包括網路遊戲伺服_以，”订即時影音會談 式。網路遊戲客戶端24、26、28、Μ :凋路遊戲主程 音會談之網路遊戲客戶端2 4、2 6以及網進行即時影 =戲客戶端24、26、28、30與網路遊戲’網 成網路遊戲伺服器網路2 2以進行網路 ° 連接形 器網路22用以傳輸網路遊戲客户端24」：二路遊戲词服 至網路遊戲伺服器20以進行運算、 、3〇之資料 連32連接欲進行即時立 專，網路傳輸通道 請參照第3圖第;=之：；遊戲客戶端“、26。 β所揭不之系統之細
0660-9881twf(nl);92022;teresa.ptd 第13頁 589892 五、發明說明（ll) 部功月b方塊圖。影音會談傳送方之網路遊戲客戶端goo包 括即時資料擷取器302、資料編碼器304、網路傳輸封裂器 306以及網路傳輸器3〇8。即時資料擷取器302，用以於%^ 路遊戲客戶端擷取即時視訊資料以及即時音訊資料。即時 資料操取器3 02可以為分開的裝置，分別擷取即時視訊資、 料以及即時音訊資料。也可設計為同一裝置，同時擷取貝即 時視訊資料以及即時音訊資料，再分別進行後續資料處17 理。即時資料擷取器302可以是攝影機以及麥克風蓉处 擷取裝置。 、寸貝料 ^資料編碼器30 4用以將即時視訊資料壓縮編碼產生 ί二枓Ϊ架，以及將即時音訊資料壓縮編碼產生音訊資料 私木。貝料編碼器3〇4可以設計為分開的裝置，分、」 即時視訊資料壓縮編碼以及即時音仃 也可設計於同一裝置中，分別對：m編碼’或者 資料進行壓縮編碼。 視机-貝料及即時音訊 網路傳輸封裝器306，係以音訊資 裝視訊資料框架以月立^7次±丨上★、斗忙木為優先，封 寸不L木以及日汛資料框架為網路 入時間標籤於此網路傳輸封包内，時：士匕，並加 f料和即時視訊資料之同步關係，即為時音訊 :::時視訊資料之時間資訊。網即時曰訊資料 傳輸通道31〇，將網路傳輸封專輪/=，透過網路 路傳輸議及網路網路傳輪封裳器讓、網 語言撰寫成模組，以實現上述功能 電腦可執行之程式
第14頁 五、發明說明（12) 器二會Λ接播收Λ:路:戲客戶端32°包括資料解碼 傳輸封包解碼為即時視％科解碼器322，用以將網路 :碼以⑴資料解碼“^1^ 刀別對即％視訊資料及即時 裝置 之資料編碼器304及資料解_ 〇 、，、進仃解碼。前述 式語言撰寫成模电，貝碼益3 22均可以電腦可執行之程 功能。 、’，電腦中執行以完成所需之編解碼 影音播放器3 2 4，會將锎攸爲认 資料以及音訊資料，根據時路傳輸封包解碼過後之視訊 即時視訊資料，並顯 .二二戴，冋步即時音訊資料和 時視訊資料係將即播放音訊資料。顯示即 戲之遊戲畫面上，以立；i做為材質貼圖，混入網路遊 資料，達到機、剩°八播放即時音訊 遊戲客戶端，因影音合談二^仃即時影音會談之網路 接收的功能，即同丄”n又向θ談，會同時具有傳送及 舉例而言及32°所包含之元件及功能。 之實施例之示音H > 圖’第4圖係顯示本發明所揭示 端之間，網路二輸通道5。於網路遊戲客戶 ，戲。於網路遊戲進=接；飼服器並執行網 時影音會談時，攝旦彡 田、·周路遊戲客戶端欲進行即 資料，麥克風42=遊°:;=客戶端操取即時視訊 資料編碼琴44 An 3 戶知擷取即時音訊資料。 4、46將即時視訊資料壓縮編碼為視訊資
Ptd _ 〇660-9881twf(nl)；92〇22；teresa. 五、發明說明（13) 料框架440、442、 資料壓縮編碼為音 ，假設共有P個，將即時音訊 個。在本實施例中：：路=0”462 ; 464，假設共有L 為優先，封裝視訊資 封裝益，係以曰訊資料框架 封包48。亦即在一#味以及音訊資料框架為網路傳輸 納入封包48中，剩二“;優先將音訊框架46。 440至視訊資料框架 并次時間再/刀配給視訊資料框架 架440至442封纟成網路傳幹匡架460與視訊資料框 封包48中，而有（p_N)别子匕48，例如僅有N個被納入 於此網路傳輪封包内，時' 包48中°並加入時間標籤 視訊資料之同步關係，即^ 時音訊資料和即時 資料之時間資訊。 .、、生即8^曰訊貧料和即時視訊 透過網路傳輸通道5〇， 包48傳送至另-網路遊戲客戶端將網路傳輪封 路傳輸封包4 8解碼為即時視 貝抖解广器52、54將網 522 ’以及即時音訊資料54〇。^ 20至即時視訊資料 僅接收到Μ個（Μ小於或等於^ 、斗杧木都會破接收，例如 訊資料框架“2的數i:二 ^ ^ ί „ t； ： t ： l ：5,2;"- IPB杈式，所以有些即時視訊資 鲕之方式例如 有K個（K小於或等於M)會被解壓“ ^棄不用’例如僅 料540會全部被解壓縮出來可但是即時音訊資 步之預定效果。 古丈可達到音訊順暢及影音同 第16頁 0660-9881twf(nl)；92022;teresa.ptd 589892 五、發明說明（14) 影音播放器56、 空間動畫」模組顯示 流及三度空間動晝」 圖，混入網路遊戲之 系統時間加上時間標 即時視訊資料之時間 標籤以及即時視訊資 顯示，達成影音同步 碼器52、54之前或之 卡透過耳機、喇队5 8 中同時進行影音會談 綜言之，本發明 之架構，由網路遊戲 成於網路遊戲中進行 以音訊資料優先考慮 籤進行影音資料同步 的音訊流暢及影音同 無需增加網路遊戲饲 無法解決之問題，僅 感，達到本發明所欲 雖然本發明已以 限定本發明，任何熟 和範圍内，當可作些 範圍當視後附之申請 58 ’以「同 即時視訊資 模組係將即 遊戲晝面上 籤，作為播 。或者，影 料之數量， 之效果。影 後執行。影 播放即時音 之功能。 所提出之方 客戶端之間 即時影音會 之影音同步 之技術，達 步之效果。 服器額外的 增加虛擬遊 達到之目的 較佳實施例 習此技藝者 許之更動與 專利範圍所 時支援 料，「 時視訊 。影音 放即時 音播放 將即時 音同步 音播放 訊資料 即時視訊 同時支援 資料做為 播放器5 6 音訊資料 器56 、 58 視訊資料 的動作可 器56 、 58 ’達到於 流及三度 即時視訊 材質貼 、58會以 以及顯示 會以時間 進行間隔 在資料解 並以音效 網路遊戲 法’可以獨立於網路遊戲 建立網路傳輸通道，以完 谈之目的。本發明更採用 封裝機制以及利用時間標 到即時影音會談中最重要 而且本發明所提出之方法 負擔，便可解決現行技術 戲世界的即時性與真實 揭露如上，然其並非用以 、’在不脫離本發明之精神 潤飾，因此本發明之保護 界定者為準。
589892 圖式簡單說明 第1圖係顯示本發明所揭示之方法之執行流程圖。 第2圖係顯示本發明所揭示之系統之功能方塊圖。 第3圖係顯示本發明所揭示之系統之細部功能方塊 圖。 第4圖係顯示本發明所揭示之實施例之示意圖。（第4 圖包括第4a圖及第4b圖） 符號說明 2 0 —網路遊戲伺服器； 2 2 —網路遊戲伺服器網路； 24、26、28、30 —網路遊戲客戶端； 3 2 —網路傳輸通道； 3 0 0 —網路遊戲客戶端； 3 1 0 —網路傳輸通道； 3 2 0 —網路遊戲客戶端； 3 0 2 —即時資料擷取器； 3 〇 4 —資料編碼器； 3 0 6 —網路傳輸封裝器； 3 0 8 —網路傳輸器； 3 2 2 —資料解碼器； 32 4 —影音播放器； 4 0 —攝影機； 4 2 —麥克風； 4 4、4 6 —資料編碼器； 48 —網路傳輸封包；
0660-9881twf(nl);92022;teresa.ptd 第18頁 589892 圖式簡單說明 440 44 2、444、44 6 -視訊資料框架 46 0、46 2、464 —音訊資料框架； 50 —網路傳輸通道； 52、54 —資料解碼器； 5 6 —同時支援即時視訊流及三度空間動晝模 58 —音效卡及耳機、°刺π八； 5 2 0 ' 52 2 —即時視訊資料； 5 4 0 —即時音訊資料。
0660-9881twf(nl);92022;teresa.ptd 第19頁

Claims (1)

  1. 589892 /、、申請專利範圍1年—- 】.一種以影音同步技術實現於網路遊 會談之方法，包括下列步驟： 子办音 建立一網路傳輪通道於一第一網路 —網路遊戲客戶端間，上M綑致禮於、s i 土，尸麵與—第 戲伺服器； 上述網路傳輸通道未經過一網路遊 端勃ί上述，一網路遊戲客戶端與上述第二網路遊戲客戶 4執了―網路遊戲並連線至上述網路遊戲飼服器；戶 在上述網路遊戲進行中，於上述第一網路遊獻 擁取J數第一即時視訊資料以及複數第 巧二端 時視戲客戶端，/編碼上述第即， 第一即時音訊資料產生複數第一音訊資料框、年.編馬上述 於上述第一網路遊戲客戶端，封裝上第丄 框架以及上述第一音訊資料框架為讯-貝料 ^一時間標籤於上述網路傳輸封包内 並加 表示上述第-即時音訊資料和上 2間標臧用以 步關係； 卩時視訊資料之同 透過上述網路傳輸通道，將上述 上述第二網路遊戲客戶端； 峪傳輪封包傳送至 於上述第二網路遊戲客戶端，將 碼產生複數第二即時視訊資料以及二、祠路傳輸封包解 料；以及 弟二即時音訊資 於上述第二網路遊戲客戶端，根據上 步上述第二即時音訊資料和上述 述時間標籤，同 一卩時視訊資料，並播 0660-9881twfl(nl);92022；teresa.ptc 第20頁 丄 、一 案號 /、申睛專利範園 曰 修正 放上述證一 aj 時視訊資料 於上、f f—即時音訊資料以及顯- 上迷網路遊戲之遊戲畫面上上述帛......... 於铜牧如申請專利範圍第1項所、十、 網：；；；r即·時影音會=方之，影音同步技術實現 了輪通道之步驟，尚：决，其中上述建立上述 $述第-網路遊戲客戶 1::步輝： 乂第二網路遊戲 ^通訊錄指定或直接指 上迷卜網路遊戲客戶位址，上述通訊錄包含 上述第一網政雄私周路位址； 網路遊戲客戶端；以及客戶端發出-接續要求至上述第二 網路傳輪網路遊戲客戶端根據上述接續要求建立上述 I如申請專利範圍第1 a遊戲進行即時影音會談斤之述之以景=同步 網路傳輸封包之步驟中，I k方法’其中上述封裝上述 2同時傳送上述第一即：土 =傳巧道之頻寬無* ^料時，上述第一即j時曰況貝枓和上述第-即時視訊 時視訊資料之優先權。’曰訊資料之優先權高於上述第-即 網路傳輸封包 g會琰之方法，其中上述產生上述 即時音訊資料和上辻，上述時間標籤係為產生上述第-=卄f上述第一即時視訊資料之時間資訊。 於網路遊^ =圍第1項所述之以影音同步技術實現 路遊戲進仃即時影音會談之方法，其中上述同步上述 第21頁 六 修正 曰 _隸丨歡頁 申請專利範圍 笛 一 —— 一"即時音*^ίΐ咨* 2H Y 述同步係以上’ 一口上述第二即時視訊資料之步驟中，上 時間標籤以作^ i ^網路遊戲客戶端之系統時S加上上述 第二即時視二 上述第二即時音訊資料以及顯示上述 1 f視矾資料之時間。 於網路遊：：ί利範圍第1項所述之以影音同步技術實現 即dtr即時影音會談之方法’上述同步上述第二 步係以1ΐ和上述第二即時視訊資料之步驟中，上述同 將上、,f贫時間標籤以及上述第二即時視訊資料之數量， α第一即時視訊資料進行間隔顯示。 於網7路第1項所述之以影音同步技術實現 第一 k進仃即時影音會談之方法，其中上述顯示上述 :即時視訊資料之步驟中，係將上述第二即時視訊資料 ’、、、一材質貼圖，混入上述網路遊戲之遊戲畫面上。 8 · 一種以影音同步技術實現於網路遊戲進行即時影音 會談之系統，包括： 〜曰 一網路遊戲伺服器，用以執行一網路遊戲；以及 複數網路遊戲客戶端，上述網路遊戲客戶端包括一第 、’，罔路遊戲客戶端、一第二網路遊戲客戶以及一網路傳輸 通道’上述第一網路遊戲客戶端以及上述第二網路遊戲客 戶端連線至上述網路遊戲伺服器，用以進行上述網路遊 戲’上述網路傳輸通道耦接於上述第一網路遊戲客戶端以 及上述第二網路遊戲客戶端。 9 ·如申請專利範圍第8項所述之以影音同步技術實現 於網路遊戲進行即時影音會談之系統，其中上述第一網路
    0660-9881twfl(nl)；92022;teresa.ptc 第22頁 589892 曰 修正 —缝I荔2—顏鞭 六、申請專利範圚 遊戲客戶端尚包括: 一即時資料擷取器，用以 擷取複數第-即時視訊資料以及戲客戶端 -資料編碼器，其耦 复，第-即時曰訊資料； 料框架以及Λ = 料’產生複數第一視訊資 第-音訊資=架述第一即時音訊資料，產生複數 封裝：d:;;框；麵接於上述資料編碼器，用以 -網路傳輪封包，】力,及上述第-音訊資料框架為 内’上述時間標籤用以表示上述第―即士士:”傳輸封包 第一即時視訊資料之同步關係；以及 >料和上述 一網路傳輸器，其耦接於上述網 =網路傳輸通道，將上述網路傳輸2===過 網路遊戲客戶端。 匕得廷至上述第二 10.如申請專利範圍第9項 之 於網路遊戲進行即時影音會談之系統，現 封裝器，當上述網路傳輸去u傳輸 述第-即時音訊資料和上述第一即時；;時= 先權。 《優先權-於上述第-即時視訊資料之優 11·如申請專利範圍第9項所述之以影音 於網路遊戲進行即時影音會談之系統，其中上現 封裝器中，上述時間椤鑛係盔姦Ψ上、f笛 述網路傳輸 亏間钻紙係為產生上述第一即時音訊資料 第23頁 0660-9881twfl(nl);92022;teresa.ptc 層892 丄 ---塞號 六、申請專利範圍 修正 曰 年 月 η 述第一即時視訊資料之時間資訊。 於網游如^申請專利範圍第8項所述之以影音同步技術實現 遊戲客？sn:時影音會談之系統，其中上述第二網路 「資料解碼器，其耦接於上述網路傳輸通 以=?:包解碼產生複數第二視訊資料以及將上： 輪封包解碼產生複數第二音訊資料；以及 上述；放3丄其麵接於上述資料解碼器，用以根據 時視j資述第二即時音訊資料和上述第二即 資料°。、播放上述第二視訊資料以及上述第二音訊 13·如申請專利範圍第12 述之以 路遊戲進行即時影音會談之系統 门/技:貫 =:ίϊΓ:;Γ為播放上述第二即時=⑵ 4弟一即時視訊資料之時間。 π Η ί^ ·如申吻專利範圍第12項所述之以景}音同牛ϋ ^ 路遊戲進行即時 談 门步技，實 之步係以上述時間標藏以及上以2播 二 ^將上述第二即時視訊資料進行間隔as ’現 •如申請專利範圍第1 2項所述之以影音同0舟杜、示。 現於網路遊戲進行即時影音會談之系統，复°步技術實 =，係將上述第二即時視訊資料作為一；：=影音推 上述網路遊戲之遊戲晝面上。 材質貼圖，筅入 第24頁 0660-9881twfl(nl);92022;teresa.ptc 589892 '申請專利範圍 六 接ί係由上述第-網路遊戲i戶端祀摅其中上述網路傳輪 接指定上述第。網路遊灼〗J戶鈿根據-通訊錄指定或直 要求至ίί;，遊戲客戶端之網路位址，並發Ϊ:錄 铋根據上述連接要求这第一網路遊戲 1 7.—種以影立π牛#上这凋路傳輸通道。 音會談之方法，其=步於技術6實現於網路遊戲進行即— 戲客戶端係連線至一網路^遊戲客戶端，上述網路^ 網外部網:遊以:驟丄 〜卜、士過上述網 广鳊，上述 利用-即時資料掏c服器； ^ -第一即時音訊資料；。肖取-第-即時視訊資 壓縮/編碼上述第一 σ =資料，產生一第一網路傳y見封訊包資料和上述第一即時音 述第一即時音訊資料 上迷第一時間禪田 間k #; “4和上述第-即時視訊ί:”表示』 透過上述網路傳輸通道，η步關 包，、、、、 、上述第'網路傳輪封 透過上述網路傳輪通道 、 解愿縮/解碼上述笫- 收一第二網路彳4认 第-網路傳輪封包乂路傳輪封包； ---- 屋生—第二即 第25頁 0660-9881twfl(nl);92022;teresa.ptc V 申巧專利範^ «««-i_l · 時視訊資料 在上迷第二即時音訊資料；以及 上述笛 路遊戲執行中，奸減一楚* 第一即時音m眘 根據第一時間標籤， 上述第二即時立。貝枓和上述第二即時視訊資料，2步 上述遊戲晝面中。 不上述第二即時視訊資料^ 現於網路_ 專利範圍第17項所述之以影音同牛# 述網路傳輪通道：=二會談之方法，•中上述建立上 由 、之步驟包括下列步驟： 上 — &遊戲客戶端和上述外部網 &另一者之網路位址； 尸、之 利用JL、十、么 部網者 網路遊戲求去二述網路遊戲客戶端和上述外ί 19 、之另一者建立上述網路傳輸通道。 現於網專利範圍第17項所述之以影音同步技術實 一網路值戲進行即時影音會談之方法，其中產生上述第 、、 <傳輪封包之步驟中，當上述網路傳輸通道之頻寬無 1 i，同時傳送上述第一即時音訊資料和上述第一即時视 成貝料時’上述第一即時音訊資料之優先權高於上述第— 即時視訊資料之優先權。 2 0 ·如申請專利範圍第1 7項所述之以影音同步技術實 現於網路遊戲進行即時影音會談之方法，其中建立上述網 路傳輸通道之步驟，係根據一通訊錄所執行，上述通訊錄 包含上述外部網路遊戲客戶端之網路位址。
    0660-9881twfl(nl);92022;teresa.ptc 第26頁 589892 案號 4¾½¾爐可 —〔e 修正 曰 申請專利範圍 91 1 由 4 : ΤΓ •如申研專利範圍第1 7項所述之以影音同步技術實 ，=網路遊戲進行即時影音會談之方法，其中上述同步上 V、了即時曰δί1資料和上述第二即時視訊資料之步驟中， ^述同步係以上述網路遊戲客戶端之系統時間加上上述第 一時間標籤以作為播放上述第二即時音訊資料以及顯示上 述第二即時視訊資料之時間。 六 22·如申請專利範圍第1 7項所述之以影音同步技術實 現於網路遊戲進行即時影音會談之方法，其中上述同步上 述第二即時音訊資料和上述第二即時視訊資料之步驟中， ^述同^係以上述第二時間標籤以及上述第二即時視訊資 料之數量’將上述第二即時視訊資料進行間隔顯示。 23.如申請專利範圍第17項所述之以影音同步技術實 現於網路遊戲進行即時影音會談之方法，其中顯示上述第 二即時視訊資料之步驟中，係將上述第二即時視訊資料做 為一材質貼圖，混入上述遊戲畫面並顯示於上述顯示器 24· —種儲存媒體，用以儲存一電腦程式，上述電腦 私式用以載入至一電腦系統中並且使得上述電腦系統執行 如申明專利範圍第1 7至2 3項中任一者所述之於網路遊戲 行即時影音會談之方法。 2 5 · —種網路遊戲電腦系統，其執行一網路遊戲並且 具有一儲存媒體，上述儲存媒體用以儲存一電腦程式，上 述電腦程式用以載入至上述網路遊戲電腦系統中並且使得 上述網路遊戲電腦系統執行如申請專利範圍第1 7至U項中
    0660-9881twfl(nl);92022;teresa.ptc 第27頁 壬申請專利範年月互— 任二所述之於網路ϋ進行即時影音會談之方法。 音會』之—Λ"χ影音同步技術實現於網路遊戲進行即時影 遊戲客戶端=門用於一第—網路遊戲客戶端與―第二網路 路遊戲客勃上述第-網路遊戲客戶端與上述第二網 器，上述方；網路遊戲並連線至一網路遊戲伺服 々/2:至少包括下列步驟： 述第上述第-網路遊戲客戶端與上 上述網路遊戲之間’且上述網路傳輪通道未經過 資斗ci Z u述第網路遊戲客戶端擷取複數個第p 士 貝枓以及複數個第一即時 稷数個第-即時視訊 加·產生複數第-視訊資；二複數個第“ 架， 是数1固罘音訊資料框 加达封裝上述第一視訊資料框架以及I-、f筮一 木為一網路傳輸封包，並加二及上述第一音訊資料框 封包内，i述時間標籤卜間標籤於上述網路傳輸 上述J::時視訊資：：：以述第-即時音訊資料和 將：述二網路遊戲客戶端； 料以及複數個第二即時音生複數個第二即時視訊資 於上述第二網路遊戲客X;及 步上述第二即時音訊資料和上t货根據上述時間標籤，同 放上述第二即時音訊資料以及^第二即時視訊資料，並播 於上述網路遊戲之遊戲畫面上=不上述第二即時视訊資料
    六 中請: 一修正 曰 述網路傳輪通道之二之方法，，中上述建立上 上述第二步驟，尚包括下列步驟： 網路遊戲客戶端通訊錄指定上述第二 路遊=戶端之網：：：址，上述通訊錄包含上述第二網 網路遊戲ί戶：路客戶端發出-接續要求至上述第二 網路傳S通道。路遊戲客戶端根據上述接續要求建立上述 現於網路遊申戲利乾圍^6項所述之以景^音同步技術實 述網路傳輸封包第ί:二封。 傳輸封包中，再依據剩餘頻寬將上 時視訊1料納入上述網路傳輸封包中。 2 9 ·如申請專利範圍第2 6項所述之以影音同步技術眘 現於網路遊戲進行即時影音會談之方法，其中上述複數個 第一視訊資料框架及上述複數個第一音訊資料框架係由 縮/編碼所產生。 3 0 ·如申請專利範圍第2 6項所述之以影音同步技術實 現於網路遊戲進行即時影音會談之方法，其中上述網路傳 輸封包係透過一網路傳輸通道傳送至上述第二網路遊戲客 戶端。 31 ·如申請專利範圍第2 6項所述之以影音同步技術實
    589892 1 號 Si|hE 去
    月 六、申請專利範圍 曰 修正 現於網路遊戲進音會談之方法，其中上述同步上 述第二即時音訊資料和上述第二即時視訊資料之步驟中， 上述同步係以上述第二網路遊戲客戶端之系統時間加上 述時間標籤以作為播放上述第二即時音訊資料以及顯禾 述第二即時視訊資料之時間。 32·如申請專利範圍第26項所述之以影音同步技術實 現於網路遊戲進行即時影音會談之方法，上述同步上迷第 了即時音訊資料和上述第二即時視訊資料之步驟中，上述 ，步係以上述時間標籤以及上述第二即時視訊資料之數^ 量’將上述第二即時視訊資料進行間隔顯示。 立 33· —/種以影音同步技術實現於網路遊戲進行即時影 曰會谈之系統，用於一第一網路遊戲客戶端、一第二網路 遊戲客戶及一網路遊戲伺服器之間，上述網路遊戲伺服器 係用以執行一網路遊戲，上述系統至少包括： 一網路傳輸通道，上述第一網路遊戲客戶端以及上 第=網路遊戲客戶端連線至上述網路遊戲伺服器，以進^ 上述網路遊戲，上述網路傳輸通道耦接於上 ^ :客：端以及上述第二網路遊戲客戶端之間以：二J 曰會口
    589892 93年4月20曰 修正頁 乙20 網路遊戲伺服器
    24 26 28 30
    第2圖 589892 η '頁 ) 日
    Ιώ Τ·Ί 寸寸寸 9寸寸
    0寸槭 个
    (Ν寸 Hq寸浓i Hcj寸浓 589892
TW092105339A 2003-03-12 2003-03-12 Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology TW589892B (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW092105339A TW589892B (en) 2003-03-12 2003-03-12 Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology
US10/797,006 US20040179554A1 (en) 2003-03-12 2004-03-11 Method and system of implementing real-time video-audio interaction by data synchronization

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW092105339A TW589892B (en) 2003-03-12 2003-03-12 Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology

Publications (2)

Publication Number Publication Date
TW589892B true TW589892B (en) 2004-06-01
TW200418328A TW200418328A (en) 2004-09-16

Family

ID=32960707

Family Applications (1)

Application Number Title Priority Date Filing Date
TW092105339A TW589892B (en) 2003-03-12 2003-03-12 Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology

Country Status (2)

Country Link
US (1) US20040179554A1 (zh)
TW (1) TW589892B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9602769B2 (en) 2015-01-12 2017-03-21 Compal Electronics, Inc. Timestamp-based audio and video processing method and system thereof

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090118019A1 (en) * 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
US8832772B2 (en) * 2002-12-10 2014-09-09 Ol2, Inc. System for combining recorded application state with application streaming interactive video output
US8949922B2 (en) 2002-12-10 2015-02-03 Ol2, Inc. System for collaborative conferencing using streaming interactive video
US8661496B2 (en) 2002-12-10 2014-02-25 Ol2, Inc. System for combining a plurality of views of real-time streaming interactive video
US9032465B2 (en) * 2002-12-10 2015-05-12 Ol2, Inc. Method for multicasting views of real-time streaming interactive video
US9108107B2 (en) 2002-12-10 2015-08-18 Sony Computer Entertainment America Llc Hosting and broadcasting virtual events using streaming interactive video
US8495678B2 (en) 2002-12-10 2013-07-23 Ol2, Inc. System for reporting recorded video preceding system failures
US9003461B2 (en) * 2002-12-10 2015-04-07 Ol2, Inc. Streaming interactive video integrated with recorded video segments
US8549574B2 (en) * 2002-12-10 2013-10-01 Ol2, Inc. Method of combining linear content and interactive content compressed together as streaming interactive video
US8893207B2 (en) 2002-12-10 2014-11-18 Ol2, Inc. System and method for compressing streaming interactive video
US8468575B2 (en) * 2002-12-10 2013-06-18 Ol2, Inc. System for recursive recombination of streaming interactive video
US8387099B2 (en) 2002-12-10 2013-02-26 Ol2, Inc. System for acceleration of web page delivery
US8840475B2 (en) * 2002-12-10 2014-09-23 Ol2, Inc. Method for user session transitioning among streaming interactive video servers
US11650784B2 (en) 2003-07-28 2023-05-16 Sonos, Inc. Adjusting volume levels
US8086752B2 (en) * 2006-11-22 2011-12-27 Sonos, Inc. Systems and methods for synchronizing operations among a plurality of independently clocked digital data processing devices that independently source digital data
US11294618B2 (en) 2003-07-28 2022-04-05 Sonos, Inc. Media player system
US8290603B1 (en) 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US11106424B2 (en) 2003-07-28 2021-08-31 Sonos, Inc. Synchronizing operations among a plurality of independently clocked digital data processing devices
US11106425B2 (en) 2003-07-28 2021-08-31 Sonos, Inc. Synchronizing operations among a plurality of independently clocked digital data processing devices
US9207905B2 (en) 2003-07-28 2015-12-08 Sonos, Inc. Method and apparatus for providing synchrony group status information
US8234395B2 (en) 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US9977561B2 (en) 2004-04-01 2018-05-22 Sonos, Inc. Systems, methods, apparatus, and articles of manufacture to provide guest access
US9374607B2 (en) 2012-06-26 2016-06-21 Sonos, Inc. Media playback system with guest access
US8326951B1 (en) 2004-06-05 2012-12-04 Sonos, Inc. Establishing a secure wireless network with minimum human intervention
US8868698B2 (en) 2004-06-05 2014-10-21 Sonos, Inc. Establishing a secure wireless network with minimum human intervention
US20060227813A1 (en) * 2005-04-11 2006-10-12 Mavrogeanes Richard A Method and system for synchronized video recording/delivery
US9202509B2 (en) 2006-09-12 2015-12-01 Sonos, Inc. Controlling and grouping in a multi-zone media system
US8483853B1 (en) 2006-09-12 2013-07-09 Sonos, Inc. Controlling and manipulating groupings in a multi-zone media system
US8788080B1 (en) 2006-09-12 2014-07-22 Sonos, Inc. Multi-channel pairing in a media system
CN101420347B (zh) * 2008-03-18 2011-11-09 王睿斌 一种将Flash单机双人游戏在双主机上同步运行的方法
US20100040349A1 (en) * 2008-05-01 2010-02-18 Elliott Landy System and method for real-time synchronization of a video resource and different audio resources
US20090273712A1 (en) * 2008-05-01 2009-11-05 Elliott Landy System and method for real-time synchronization of a video resource and different audio resources
EP2312846A1 (en) * 2009-09-30 2011-04-20 Alcatel Lucent Method to connect several terminals in a same game community
EP2561661B1 (en) * 2010-06-04 2018-11-28 Skype Ireland Technologies Holdings Server-assisted video conversation
US11429343B2 (en) 2011-01-25 2022-08-30 Sonos, Inc. Stereo playback configuration and control
US11265652B2 (en) 2011-01-25 2022-03-01 Sonos, Inc. Playback device pairing
US9729115B2 (en) 2012-04-27 2017-08-08 Sonos, Inc. Intelligently increasing the sound level of player
US9008330B2 (en) 2012-09-28 2015-04-14 Sonos, Inc. Crossover frequency adjustments for audio speakers
US9226073B2 (en) 2014-02-06 2015-12-29 Sonos, Inc. Audio output balancing during synchronized playback
US9226087B2 (en) 2014-02-06 2015-12-29 Sonos, Inc. Audio output balancing during synchronized playback
US9286383B1 (en) * 2014-08-28 2016-03-15 Sonic Bloom, LLC System and method for synchronization of data and audio
US10248376B2 (en) 2015-06-11 2019-04-02 Sonos, Inc. Multiple groupings in a playback system
US10712997B2 (en) 2016-10-17 2020-07-14 Sonos, Inc. Room association based on name
US11819758B2 (en) * 2018-04-06 2023-11-21 Novi Digital Entertainment Private Limited Synchronization of online gaming environment with video streaming of a live event
WO2020171824A1 (en) * 2019-02-22 2020-08-27 Mursion, Inc. Peer to peer communication system and method
CN111669605B (zh) * 2019-03-06 2021-10-26 腾讯科技（深圳）有限公司 多媒体数据与其关联互动数据的同步方法和装置
CN110867185A (zh) * 2019-11-04 2020-03-06 江苏税软软件科技有限公司 一种内外网隔离的语音转文字实时输入系统及其方法
US11741779B2 (en) * 2019-11-27 2023-08-29 Playtech Software Limited System and method for executing a remote interactive live game
CN112272305B (zh) * 2020-09-28 2023-03-24 天下秀广告有限公司 一种多路实时交互视频缓存存储方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5899810A (en) * 1997-01-24 1999-05-04 Kaon Interactive Corporation Distributed game architecture to overcome system latency
US6697869B1 (en) * 1998-08-24 2004-02-24 Koninklijke Philips Electronics N.V. Emulation of streaming over the internet in a broadcast application
US6947761B2 (en) * 2000-11-22 2005-09-20 Leap Wireless International Inc. Method and system for improving the efficiency of state information transfer over a wireless communications network
US6761636B2 (en) * 2001-01-16 2004-07-13 Fucom Company, Ltd. Real time data exchange system
US20030232648A1 (en) * 2002-06-14 2003-12-18 Prindle Joseph Charles Videophone and videoconferencing apparatus and method for a video game console
TW589891B (en) * 2003-03-07 2004-06-01 Asustek Comp Inc Real-time video conferencing method, system and storage medium in web game

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9602769B2 (en) 2015-01-12 2017-03-21 Compal Electronics, Inc. Timestamp-based audio and video processing method and system thereof

Also Published As

Publication number Publication date
US20040179554A1 (en) 2004-09-16
TW200418328A (en) 2004-09-16

Similar Documents

Publication Publication Date Title
TW589892B (en) Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology
CN107846633B (zh) 一种直播方法及系统
CN110431850B (zh) 在使用mime类型参数的网络视频流式传输中发信重要视频信息
US6580756B1 (en) Data transmission method, data transmission system, data receiving method, and data receiving apparatus
CN113287323B (zh) 用于检索媒体数据的方法、客户端设备及计算机可读介质
US11405699B2 (en) Using GLTF2 extensions to support video and audio data
TW589891B (en) Real-time video conferencing method, system and storage medium in web game
CN107637040A (zh) 使用websocket子协议来传输媒体数据
TWI703854B (zh) 用於在經由超文本傳輸協定（http）之動態自適應串流（dash）中之魚眼虛擬實境視訊之增強的高階發信號
CN107005729A (zh) 用于多媒体和文件传输的传输接口
WO2008061416A1 (fr) Procédé et système permettant d'accepter des données media de divers formats de codage
CN107819809B (zh) 对内容进行同步操作的方法及装置
CN105900445A (zh) Dash的稳健实况操作
CN102364952A (zh) 一种多路音视频同时播放时处理音视频同步的方法
TW201909642A (zh) 用於魚眼虛擬實境視訊之增強的高階發信號
CN1534503A (zh) 实现网络游戏中实时影音会谈的方法、系统及储存媒体
CN108494792A (zh) 一种flash播放器播放hls视频流的转换系统及其工作方法
WO2012071931A1 (zh) 一种分段节目中动态插播节目的方法及系统
CN112866725A (zh) 一种直播控制方法及装置
CN106412646B (zh) 一种实现同步播放的方法和装置
CN103188210A (zh) 在大屏幕客户端上播放移动终端的媒体内容的方法及终端
EP1090491A1 (en) Preprocessing method for adapting mpeg-4 data streams to the internet network
CN110602523A (zh) 一种vr全景直播多媒体处理合成系统和方法
CN113473158B (zh) 直播数据处理方法、装置、电子设备、介质
CN109104635A (zh) 即时传送屏幕图像的方法及系统

Legal Events

Date Code Title Description
MK4A Expiration of patent term of an invention patent