TWI772192B - 影片處理之系統、方法及電腦可讀媒體 - Google Patents

影片處理之系統、方法及電腦可讀媒體 Download PDF

Info

Publication number
TWI772192B
TWI772192B TW110136485A TW110136485A TWI772192B TW I772192 B TWI772192 B TW I772192B TW 110136485 A TW110136485 A TW 110136485A TW 110136485 A TW110136485 A TW 110136485A TW I772192 B TWI772192 B TW I772192B
Authority
TW
Taiwan
Prior art keywords
user
area
video
user terminal
real
Prior art date
Application number
TW110136485A
Other languages
English (en)
Other versions
TW202316851A (zh
Inventor
巫劭元
邱柏盛
張育銓
鄭明哲
Original Assignee
日商１７Ｌｉｖｅ股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商１７Ｌｉｖｅ股份有限公司 filed Critical 日商１７Ｌｉｖｅ股份有限公司
Priority to TW110136485A priority Critical patent/TWI772192B/zh
Application granted granted Critical
Publication of TWI772192B publication Critical patent/TWI772192B/zh
Publication of TW202316851A publication Critical patent/TW202316851A/zh

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Holo Graphy (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本發明係關於一種用於影片處理之系統、方法及電腦可讀媒體。該方法包含：將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中。該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。本發明可改良一電話會議或一群組呼叫期間之互動。

Description

影片處理之系統、方法及電腦可讀媒體
本發明係關於一即時影片串流或一影片電話會議中之影像處理或影片處理。
已知用於使使用者能夠參與相互線上通信之各種技術。應用程式包含即時串流、即時電話會議及其類似者。隨著此等應用程式越來越普遍，使用者在通信期間對改良互動體驗之需求也在上升。
一種根據本發明之一個實施例之方法係用於影片處理之一方法。該方法包含：將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中。該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。
一種根據本發明之一個實施例之系統係包含一個或複數個處理器之用於影片處理之一系統，且該一個或複數個處理器執行一機器可讀指令以執行：將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中。該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。
一種根據本發明之一個實施例之電腦可讀媒體係包含用於影片處理之一程式之一非暫時性電腦可讀媒體，且該程式引起一個或複數個電腦執行：將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中。該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。
一些即時串流服務、應用程式(APP)或平台允許多個使用者(諸如直播主、觀看者、廣播者及主播)參與一群組呼叫模式或一電話會議模式，其中多個使用者之影片同時展示於顯示群組呼叫或參與群組呼叫之一使用者終端機之螢幕上。使用者終端機可為使用者之一者用其參與群組呼叫之一智慧型電話、一平板電腦、一個人電腦或一膝上型電腦。
圖1展示一群組呼叫之一實例。S1係顯示群組呼叫之一使用者終端機之一螢幕。RA係顯示一使用者A之一即時影片之螢幕S1內之一區域。RB係顯示一使用者B之一即時影片之螢幕S1內之一區域。使用者A之即時影片可由定位於使用者A附近之一影片捕捉裝置(諸如一攝影機)拍攝及提供。使用者B之即時影片可由定位於使用者B附近之一影片捕捉裝置(諸如一攝影機)拍攝及提供。
傳統上，使用者A之影片僅可展示於區域RA中且無法展示於區域RB中。同樣地，使用者B之影片僅可展示於區域RB中且無法展示於區域RA中。此可在通信期間引起不便或阻礙一些應用程式。例如，在使用者B在群組呼叫中向使用者A呈現一新開發產品之一例示性場景中，使用者A無法精確指出產品之一部分或一部件用於詳細討論。因此，期望在一群組呼叫或一電話會議期間具有更多互動。
圖2展示根據本發明之一些實施例之一群組呼叫之一實例。如圖2中所展示，使用者A之一部分A1延伸至或再現/複製於其中顯示使用者B之區域RB中。在此實施例中，部分A1係區域RA中之使用者A之一手，且部分A11係顯示於區域RB中之部分A1之延伸、再現或複製版本。部分A11指向或引導向區域RB中之一物件B1。在一些實施例中，區域RB中所展示之使用者B之影片係一即時影片。在一些實施例中，區域RB中所展示之使用者B之影片係一重播影片。
在一些實施例中，部分A11跟隨部分A1之移動或軌跡。在一些實施例中，部分A11與部分A1同步移動。使用者A可控制或移動部分A11以指向使用者A想要藉由簡單移動其手(其係部分A1)來討論之區域RB中之一位置。在一些實施例中，部分A11可表示或顯示為一圖形物件或一動畫物件。
如圖2中所展示，區域RA中存在一邊框A3。邊框A3界定區域RA內之一區域A31及一區域A32。在此實施例中，區域A31環繞區域A32。區域A31可指稱或界定為一互動區域。部分A1 (其延伸至或再現於區域RB內)在互動區域A31內。部分A1朝向區域RA中之使用者B延伸。在一些實施例中，僅互動區域A31之部分可延伸至或顯示於區域RB中。在一些實施例中，若使用者A想要藉由將使用者A之一部分延伸至區域RB來與使用者B互動，則使用者A將部分簡單移動至互動區域A31且部分將接著顯示於區域RB中。在此實施例中，區域RA及區域RB彼此分離。在一些實施例中，區域RA及區域RB可在螢幕S1上至少部分重疊。
如圖2中所展示，區域RB內存在一邊框B3。邊框B3界定區域RB內之一區域B31及一區域B32。在此實施例中，區域B31環繞區域B32。區域B31可指稱或界定為一互動區域。在一些實施例中，互動區域B31中之部分可延伸至或顯示於區域RA中。在一些實施例中，若使用者B想要藉由將使用者B之一部分延伸至區域RA來與使用者A互動，則使用者B將部分簡單移動至互動區域B31且部分將接著顯示於區域RA中。在一些實施例中，邊框A3及/或邊框B3可不顯示於區域RA及/或區域RB上。
在圖2中，使用者A及使用者B或區域RA及區域RB沿使用者終端機之螢幕S1上之一橫向方向對準，且使用者A之即時影片之部分A1朝向區域RA中之使用者B延伸。
圖3展示根據本發明之一些實施例之一群組呼叫之另一實例。至少4個使用者(使用者A、使用者B、使用者C及使用者D)參與群組呼叫。在圖3中，使用者A及使用者B沿使用者終端機之螢幕S1上之一垂直方向對準。如圖3中所展示，使用者A之一部分A2延伸至或再現/複製於其中顯示使用者B之區域RB中。在此實施例中，部分A2包含使用者A之一手及由手握持之一物件，且部分A21係顯示於區域RB中之部分A2之延伸、再現或複製版本。部分A21接近或引導向區域RB中之使用者B。在部分A21觸碰使用者B時，一特殊效果SP1顯示於區域RB中。特殊效果SP1可包含一圖形物件或一動畫物件。在一些實施例中，特殊效果SP1可包含一音效。
在一些實施例中，部分A21跟隨部分A2之移動或軌跡。在一些實施例中，部分A21與部分A2同步移動。使用者A可控制或移動部分A21以指向或觸碰使用者A想要藉由簡單移動其手(其可握持一物件)來與其互動之區域RB中之一位置。在一些實施例中，部分A21可表示或顯示為一圖形物件或一動畫物件。
如圖3中所展示，區域RA內存在一邊框A3。邊框A3界定區域RA內之一區域A31及一區域A32。在此實施例中，區域A31環繞區域A32。區域A31可指稱或界定為一互動區域。部分A2 (其延伸至或再現於區域RB中)在互動區域A31內。部分A2朝向區域RA中之使用者B延伸。在一些實施例中，僅互動區域A31之部分可延伸至或顯示於區域RB中。在一些實施例中，若使用者A想要藉由將使用者A之一部分延伸至區域RB來與使用者B互動，則使用者A將部分簡單移動至互動區域A31且部分將接著顯示於區域RB中。
圖4展示根據本發明之一些實施例之一群組呼叫之另一實例。至少4個使用者(使用者A、使用者B、使用者C及使用者D)參與群組呼叫。在圖4中，使用者A及使用者D沿使用者終端機之螢幕S1上之一對角線方向對準。如圖4中所展示，使用者A之一部分A1延伸至或再現/複製於其中顯示使用者D之區域RD中。在此實施例中，部分A1係使用者A之一手，且部分A11係顯示於區域RD中之部分A1之延伸、再現或複製版本。部分A11指向或引導向區域RD中之使用者D。
在一些實施例中，部分A11跟隨部分A1之移動或軌跡。在一些實施例中，部分A11與部分A1同步移動。使用者A可控制或移動部分A11以指向使用者A想要藉由簡單移動其手(其係部分A1)來互動之區域RD中之一位置。在一些實施例中，部分A11可表示或顯示為一圖形物件或一動畫物件。
如圖4中所展示，區域RA內存在一邊框A3。邊框A3界定區域RA內之一區域A31及一區域A32。區域A31環繞區域A32。區域A31可指稱或界定為一互動區域。在此實施例中，互動區域A31包含一子區域A311。部分A1 (其延伸至或再現於區域RD中)在子區域A311內。子區域A311位於使用者A與使用者D之間。子區域A311位於自使用者A之視角面向區域RD之區域RA之一位置中。
如圖2、圖3及圖4中之實例中所展示，使用者A之一部分在區域RA中延伸朝向之一方向可判定其中使用者之部分之延伸、複製或再現版本顯示之區域。因此，使用者A可藉由朝向對應方向簡單移動或延伸使用者A之部分來判定與其互動之區域(及對應使用者)。例如，使用者A可沿一橫向方向延伸一部分以與其顯示區域沿相對於螢幕S1上之使用者A之一橫向方向對準或定位之一使用者互動。在另一實例中，使用者A可沿一垂直方向延伸一部分以與其顯示區域沿相對於螢幕S1上之使用者A之一垂直方向對準或定位之一使用者互動。在又一實例中，使用者A可沿一對角線方向延伸一部分以與其顯示區域沿相對於螢幕S1上之使用者A之一對角線方向對準或定位之一使用者互動。
在一些實施例中，一使用者可調整互動區域之形狀以更便於與另一使用者互動。圖5展示根據本發明之一些實施例之一群組呼叫之另一實例。至少4個使用者(使用者A、使用者B、使用者C及使用者D)參與群組呼叫。如圖5中所展示，邊框A3界定互動區域A31(其係使用者A用於與其他使用者互動之一區域)，如先前例示性實施例中所描述。互動區域A31包含一子區域A311。邊框A3包含至少一邊界BR1及一邊界BR2。在一些實施例中，當使用者A想要與另一使用者進行更方便互動時，使用者A可調整邊界BR1之一位置及/或邊界BR2之一位置以調整互動區域A31之形狀及子區域A311之形狀。邊界BR1對應於使用者C或區域RC相對於區域RA之一方向，且位於區域RA與區域RC之間。邊界BR2對應於使用者B或區域RB相對於區域RA之一方向，且位於區域RA與區域RB之間。
例如，使用者A可拖動或移動邊界BR1更靠近使用者A，使得使用者A與使用者C之間的互動區域A31之一子區域A312變得更寬且更靠近使用者A。依此方式，使用者A易於使用使用者A之一部分來與使用者C互動。使用者A僅需將使用者A之部分延伸一相對較短距離以橫越邊界BR1且到達互動區域A31之子區域A312，且接著部分將在其中顯示使用者C之區域RC中延伸、複製或再現。
又例如，使用者A可拖動或移動邊界BR2更靠近使用者A，使得使用者A與使用者B之間的互動區域A31之一子區域A313變得更寬且更靠近使用者A。依此方式，使用者A易於使用使用者A之一部分與使用者B互動。使用者A僅需將使用者A之部分延伸一相對較短距離以橫越邊界BR2且到達互動區域A31之子區域A312，且接著部分將在其中顯示使用者B之區域RB中延伸、複製或再現。
又例如，使用者A可拖動或移動邊界BR1及/或邊界BR2更靠近使用者A，使得使用者A與使用者D之間的互動區域A31之子區域A311變得更寬且更靠近使用者A。依此方式，使用者A易於使用使用者A之一部分與使用者D互動。使用者A僅需將使用者A之部分沿一對角線方向延伸一相對較短距離以到達互動區域A31之子區域A311，且接著部分將在其中顯示使用者D之區域RD中延伸、複製或再現。
圖6展示根據本發明之一些實施例之一群組呼叫之另一實例。在一些實施例中，僅提取互動區域之外部以顯示於螢幕S1上。更具體而言，針對使用者A，僅由邊框A3圍封之區域展示於螢幕S1上。針對使用者B、使用者C及使用者D，僅由邊框B3、C3及D3圍封之區域展示於螢幕S1上。藉此，其可提高互動之真實性。例如，當使用者A將一部分延伸至另一使用者之顯示區域時，該部分將不會展示於使用者A之顯示區域中。
圖7展示根據本發明之一些實施例之一通信系統1之一示意組態。通信系統1可提供具有經由一內容之互動之一即時串流服務。此處，術語「內容」指代可在一電腦裝置上播放之一數位內容。通信系統1使一使用者能夠線上參與與其他使用者之即時互動。通信系統1包含複數個使用者終端機10、一後端伺服器30及一串流伺服器40。使用者終端機10、後端伺服器30及串流伺服器40經由一網路90 (其可為(例如)網際網路)連接。後端伺服器30可為用於同步使用者終端機及/或串流伺服器40之間的互動之一伺服器。在一些實施例中，後端伺服器30可指稱一應用程式(APP)提供商之源伺服器。串流伺服器40係用於處理或提供串流資料或影片資料之一伺服器。在一些實施例中，後端伺服器30及串流伺服器40可為獨立伺服器。在一些實施例中，後端伺服器30及串流伺服器40可整合成一個伺服器。在一些實施例中，使用者終端機10係用於即時串流之用戶端裝置。在一些實施例中，使用者終端機10可指稱觀看者、直播主、主播、播客、觀眾、聽眾或其類似者。使用者終端機10、後端伺服器30及串流伺服器40之各者係一資訊處理裝置之一實例。在一些實施例中，串流可為即時串流或影片重播。在一些實施例中，串流可為音訊串流及/或影片串流。在一些實施例中，串流可包含諸如線上購物、脫口秀、選秀節目、娛樂事件、運動事件、音樂影片、電影、喜劇、音樂會、群組呼叫、電話會議或其類似者之內容。
圖8展示根據本發明之一些實施例之一通信系統之一例示性功能組態。在圖8中，省略網路90。
後端伺服器30包含一訊息單元32。訊息單元32經組態以自使用者終端機接收資料或資訊，處理及/或儲存此等資料且將資料傳輸至使用者終端機。在一些實施例中，訊息單元32可為與後端伺服器30分離之一單元。
串流伺服器40包含一資料接收器400及一資料傳輸器402。資料接收器400經組態以自各種使用者終端機接收資料或資訊，諸如串流資料或影片資料。資料傳輸器402經組態以將資料或資訊傳輸至使用者終端機，諸如串流資料或影片資料。
使用者終端機10A可為由一使用者A操作之一使用者終端機。使用者終端機10A包含一攝影機700、一渲染器702、一顯示器704、一編碼器706、一解碼器708、一結果發送器710、一擷取單元712、及一物件辨識單元714。
攝影機700可為或可包含任何類型之影片捕捉裝置。攝影機700經組態以捕捉(例如)使用者A之影片資料。
渲染器702經組態以自攝影機700接收影片資料(使用者A之影片資料)，自解碼器708接收影片資料(其可包含來自使用者B之影片資料)，且產生將顯示於顯示器704上之一渲染影片(諸如顯示群組呼叫之一影片，其中顯示使用者A及使用者B)。
顯示器704經組態以顯示來自渲染器702之渲染影片。在一些實施例中，顯示器704可為使用者終端機10A上之一螢幕。
編碼器706經組態以編碼來自攝影機700之影片資料，且將編碼影片資料傳輸至串流伺服器40之資料接收器400。編碼資料可作為串流資料傳輸。
解碼器708經組態以自串流伺服器40之資料傳輸器402接收影片資料或串流資料(其可包含來自使用者B之影片資料)，將其解碼成解碼影片資料，且將解碼影片資料傳輸至渲染器702用於渲染。
擷取單元712經組態以對來自攝影機700之影片資料(其係使用者A之影片資料)執行一擷取程序(影像擷取或影片擷取)。擷取程序可包含一輪廓辨識程序、一影像比較程序、一移動物件偵測程序及/或一剪裁程序。可使用包含恆定色彩擷取、差異擷取及自然影像擷取之技術來執行擷取程序。擷取程序中涉及之演算法可包含貝葉斯(Bayesian)擷取、卜瓦松(Poisson)擷取或穩健(Robust)擷取。在一些實施例中，影像比較程序週期性地比較一初始或預設背景影像與一當前或即時影像以偵測一互動區域中之使用者A之一部分。
例如，擷取單元712自攝影機700接收使用者A之影片資料。影片資料可包含如上文用圖2、圖3、圖4及圖5中之實例描述之一互動區域。在一些實施例中，擷取單元712執行一擷取程序以偵測或提取影片資料中之使用者A之一輪廓。在一些實施例中，擷取單元712執行一擷取程序以偵測或提取互動區域中之使用者A之一部分(諸如使用者A之一手，或使用者A握持一物件之一手)。在一些實施例中，擷取單元712執行一剪裁程序以自使用者A之影片資料移除互動區域外之一區域或一部分。在一些實施例中，擷取單元712偵測、辨識或判定互動其中偵測到使用者A之部分之互動區域中之一位置。在一些實施例中，可在一剪裁程序之前執行一輪廓辨識程序或一影像比較程序，其可提高互動區域中使用者A之部分之一偵測準確度。
在一些實施例中，互動區域及對應邊框或邊界可由使用者終端機10A之一處理器(圖中未展示)或啟用群組呼叫之一應用程式界定。在一些實施例中，互動區域及對應邊框或邊界可由使用者A藉由使用者終端機10A之一UI (使用者介面)單元(圖中未展示)判定。在一些實施例中，擷取單元712藉由偵測橫越區域RA中之一邊界之使用者A之一部分來偵測或判定互動區域中之使用者A之部分(或使用者A之即時影片之部分)。區域RA中之邊界可為(例如)圖5中之邊界BR1或邊界BR2。
物件辨識單元714經組態以對來自擷取單元712之輸出資料進行一物件辨識程序。輸出資料可包含使用者A之一偵測部分或一提取部分(諸如使用者A之一手，或使用者A握持一物件之一手)。物件辨識單元714執行物件辨識程序以判定使用者A之偵測部分是否包含任何預定圖案、物件及/或手勢。在一些實施例中，物件辨識程序可包含諸如模板匹配、圖案匹配、輪廓匹配、手勢辨識、皮膚辨識、輪廓匹配、色彩或形狀匹配及基於特徵之匹配之技術。在一些實施例中，物件辨識單元714計算使用者A之偵測部分(或其一部分)與一組預定圖案之間的匹配相關性以判定在使用者A之偵測部分內是否匹配或辨識出任何圖案。在一些實施例中，物件辨識單元714偵測、辨識或判定其中偵測到使用者A之部分之互動區域中之一位置。在一些實施例中，可對來自其中尚未執行一剪裁程序之擷取單元712之一影像或影片執行物件辨識程序，其可提高物件辨識程序之一準確度。在一些實施例中，物件辨識單元714辨識且提取互動區域中之使用者A之部分之影像或影片，且將提取影像或影片傳輸至結果發送器710。
結果發送器710經組態以將物件辨識單元714之輸出結果(其可包含擷取單元712之輸出)傳輸至後端伺服器30之訊息單元32。在一些實施例中，結果發送器710可將輸出直接傳輸至結果接收器810，而非經由訊息單元32傳輸。
使用者終端機10B可為由一使用者B操作之一使用者終端機。使用者終端機10B包含一攝影機800、一渲染器802、一顯示器804、一編碼器806、一解碼器808、一結果接收器810及一影像處理器812。
攝影機800可為或可包含任何類型之影片捕捉裝置。攝影機800經組態以捕捉(例如)使用者B之影片資料。攝影機800將捕捉影片資料傳輸至編碼器806、渲染器802及/或影像處理器812。
渲染器802經組態以自攝影機800接收影片資料(例如使用者B之影片資料)，自解碼器808接收影片資料(其可包含來自諸如使用者A之另一使用者之影片資料)，接收影像處理器812之輸出資料，且產生將顯示於顯示器804上之一渲染影片(諸如顯示其中顯示使用者A及使用者B之一群組呼叫之一影片)。
顯示器804經組態以顯示來自渲染器802之渲染影片。在一些實施例中，顯示器804可為使用者終端機10B上之一螢幕。
編碼器806經組態以編碼資料，其包含來自攝影機800之影片資料及/或來自影像處理器812之影片資料。編碼器806將編碼影片資料傳輸至串流伺服器40之資料接收器400。編碼資料可作為串流資料傳輸。
解碼器808經組態以自串流伺服器40之資料傳輸器402接收影片資料或串流資料(其可包含來自使用者A之影片資料)，將其解碼成解碼影片資料，且將解碼影片資料傳輸至渲染器802用於渲染。
結果接收器810經組態以自後端伺服器30之訊息單元32接收輸出資料，且將資料傳輸至影像處理器812。來自訊息單元32之輸出資料包含來自擷取單元712及物件辨識單元714之資料或資訊。在一些實施例中，來自訊息單元32之輸出資料包含由物件辨識單元714執行之物件辨識程序之一結果。例如，來自訊息單元32之輸出資料可包含有關一匹配或辨識圖案、物件或手勢之資訊。在一些實施例中，來自訊息單元32之輸出資料包含互動區域中(使用者終端機10A上)之一位置之資訊，其中使用者A之部分(例如)由使用者終端機10A之擷取單元712或物件辨識單元714偵測。在一些實施例中，來自訊息單元32之輸出資料包含互動區域中之使用者A之一偵測/辨識部分之一影片或影像。
影像處理器812經組態以自攝影機800接收影片資料，及/或自結果接收器810接收資料或資訊。在一些實施例中，影像處理器812基於自結果接收器810接收之資料或資訊來對自攝影機800接收之影片資料執行影像處理或影片處理。例如，若自結果接收器810接收之資料指示由物件辨識單元714執行之物件辨識程序成功辨識使用者A之部分中之一預定圖案(其在使用者終端機10A之一螢幕上之互動區域中)，則影像處理器812可包含、渲染或重疊對應於預定圖案之一特殊效果至自攝影機800接收之影片資料上。重疊影片稍後傳輸至渲染器802，且隨後可顯示於使用者終端機804上。在一些實施例中，特殊效果資料可儲存於使用者終端機10B上之一儲存器(圖中未展示)中。
在一些實施例中，訊息單元32基於來自擷取單元712之資料及/或來自物件辨識單元714之資料來判定訊息單元32之輸出資料之一目的地。在一些實施例中，訊息單元32基於互動區域中偵測之使用者A之部分之位置來判定延伸、複製或再現使用者A之部分之區域。
例如，參考圖5，若其中使用者A之部分由擷取單元712 (或物件辨識單元714)偵測之互動區域A31之位置在子區域A312內，則訊息單元32可判定使用者C之使用者終端機作為發送訊息單元32之輸出資料之目的地。使用者A之部分將接著延伸至或複製/再現/顯示於區域RC中，其可由使用者C之使用者終端機之一影像處理器完成。
在另一實例中，若其中使用者A之部分由擷取單元712偵測之互動區域A31之位置在子區域A311內，則訊息單元32可判定使用者D之使用者終端機作為發送訊息單元32之輸出資料之目的地。使用者A之部分將接著延伸至或複製/再現/顯示於區域RD中，其可用使用者D之使用者終端機中之一影像處理器及/或渲染器之協作來完成。
在另一實例中，若其中使用者A之部分由擷取單元712偵測之互動區域A31之位置在子區域A313內，則訊息單元32可判定使用者B之使用者終端機作為發送訊息單元32之輸出資料之目的地。使用者A之部分將接著延伸至或複製/再現/顯示於區域RB中，其可用使用者B之使用者終端機中之一影像處理器及/或渲染器之協作來完成。
在一些實施例中，訊息單元32之輸出資料可包含區域RA之互動區域中之使用者A之偵測部分之一影像或影片。影像處理器812隨後可將使用者A之部分重疊、複製或再現至自攝影機800接收之使用者B之影片上。在此方法中，互動區域中之使用者A之部分可延伸至區域B，而非被表示為一圖形或動畫物件。
在一些實施例中，影像處理器812可透過解碼器808接收使用者A之影像或影片資料，且接著利用來自訊息單元32之資訊(其可包含有關互動區域中偵測之使用者A之部分之一範圍、外形或輪廓資訊)以將互動區域中之使用者A之部分重疊、複製或再現至自攝像機800接收到之使用者B之影片上。在此方法中，互動區域中之使用者A之部分可延伸至區域B而非表示為一圖形或動畫物件。
在一些實施例中，擷取單元712及/或物件辨識單元714可不在使用者終端機10A內實施。例如，擷取單元712及物件辨識單元714可在後端伺服器30或串流伺服器40內實施。
圖9展示繪示根據本發明之一些實施例之一通信系統之一操作之一例示性序列圖。在一些實施例中，圖9繪示一使用者(例如使用者A)之一部分如何延伸至於其中顯示另一使用者(例如使用者B)之一區域。
在步驟S200中，使用者終端機10A之攝影機700將使用者A之影片資料傳輸至使用者終端機10A之擷取單元712。
在步驟S202中，擷取單元712偵測使用者終端機10A之一螢幕上之互動區域中之使用者A之一部分。偵測可包含一擷取程序及/或一剪裁程序。在一些實施例中，擷取單元712判定其中偵測到使用者A之部分之互動區域內之一位置。
在步驟S204中，使用者終端機10A之物件辨識單元714自擷取單元712接收輸出資料，且對擷取單元712之輸出執行一物件辨識程序以判定互動區域中之使用者A之偵測部分中能否辨識任何預定圖案、手勢或物件。在一些實施例中，物件辨識程序可包含一匹配程序、一手勢辨識程序及/或一皮膚辨識程序。
在步驟S206中，物件辨識單元714辨識一預定圖案、手勢或物件，且接著物件辨識單元714收集預定圖案、手勢或物件之相關資訊(諸如位置及大小)用於判定資料應傳輸之目的地。
在步驟S208中，物件辨識單元714之輸出透過使用者終端機10A之結果發送器710傳輸至後端伺服器30之訊息單元32。
在步驟S210中，訊息單元32根據包含於來自使用者終端機10A之資料中之有關互動區域中之使用者A之部分之位置之資訊來判定傳輸來自使用者終端機10A之資料之目的地。例如，資訊可在步驟S206中判定。
在步驟S211中，訊息單元32將來自使用者終端機10A之資料傳輸至使用者終端機10B之結果接收器810 (在訊息單元32判定目的地為使用者B或區域RB之一例示性場景中)。
在步驟S212中，結果接收器810將接收資料傳輸至使用者終端機10B之影像處理器812。
在步驟S214中，影像處理器812將使用者A之偵測部分(或使用者A之偵測部分在區域RA之互動區域中之一部分)重疊或疊加至使用者B之影片資料上。在一些實施例中，使用者A之偵測部分之影像或影片資料透過串流伺服器40傳輸至使用者終端機10B。在一些實施例中，使用者A之偵測部分之影像或影片資料透過訊息單元32傳輸至使用者終端機10B。使用者B之影像或影片資料自使用者終端機10B之攝影機800傳輸至影像處理器812。
在步驟S216中，影像處理器812將處理影像或影片資料傳輸至使用者終端機10B之渲染器802用於渲染。例如，處理影像或影片資料可與來自使用者終端機10B之解碼器808之影片資料及/或來自攝影機800之影片資料一起渲染。
在步驟S218中，渲染影片資料傳輸至使用者終端機10B之顯示器804用於顯示於使用者終端機10B之螢幕上。
在步驟S220中，影像處理器812將處理影像或影片資料傳輸至使用者終端機10B之編碼器806用於一編碼程序。
在步驟S222中，編碼影片資料傳輸至串流伺服器40。
在步驟S224中，串流伺服器40將編碼影片資料(來自使用者終端機10B)傳輸至使用者終端機10A之解碼器708用於一解碼程序。
在步驟S226中，解碼影片資料傳輸至使用者終端機10A之渲染器702用於一渲染程序。
在步驟S228中，渲染影片資料傳輸至顯示器804用於顯示於使用者終端機10A之螢幕上。
以上例示性程序或步驟可連續或週期性地執行。例如，擷取單元712連續地或週期性地偵測互動區域中之使用者A之一部分。物件辨識單元714對互動區域中之使用者A之部分連續或週期性地執行一辨識程序。訊息單元32連續或週期性地判定發送自使用者終端機10A接收之資料之目的地。使用者終端機10B之影像處理器812基於自訊息單元32接收之資訊來連續或週期性地執行一重疊或疊加程序，以確保區域RB中之使用者A之延伸或再現/複製部分與區域RA中之使用者A之部分同步移動。在一些實施例中，使用者終端機10B具有用於判定區域RB中之使用者A之延伸或再現部分是否觸碰使用者B之影像或影片之一處理單元(諸如一CPU或一GPU)。判定之結果可由影像處理器812用於決定是否在區域RB中包含一特殊效果。
本發明使電話會議或群組呼叫更方便、有趣或具有互動性。本發明可在一使用者想要討論另一使用者之顯示區域中之一物件時防止誤解。本發明可提高使用者參與一群呼聊天室(其可呈一即時串流形式)之動機。本發明可吸引更多直播主或觀看者加入直播群呼。
本發明中所描述之處理及程序可由除明確描述之內容之外之軟體、硬體、或軟體及硬體之任何組合實現。例如，本說明書中所描述之處理及程序可藉由實施對應於一媒體(諸如一積體電路、一揮發性記憶體、一非揮發性記憶體、一非暫時性電腦可讀媒體及一磁碟)中之處理及程序之一邏輯來實現。此外，本說明書中所描述之處理及程序可實施為對應於處理及程序之一電腦程式，且可由各種類型之電腦執行。
以上實施例中所描述之系統或方法可整合至儲存於一電腦可讀非暫時性媒體(諸如一固態記憶體裝置、一光碟儲存裝置或一磁碟儲存裝置)中之程式中。替代地，程式可經由網際網路自一伺服器下載且由處理器執行。
儘管上文描述本發明之技術內容及特徵，但具有本發明之技術領域中之常識之一人仍可在不違背本發明之教示及揭示內容之情況下作出諸多變動及修改。因此，本發明之範疇不限於已揭示之實施例，而是包含不違背本發明之另一變動及修改，且係由專利申請範圍涵蓋之範疇。
1:系統 10:使用者終端機 10A:使用者終端機 10B:使用者終端機 30:後端伺服器 32:訊息單元 40:串流伺服器 90:網路 400:資料接收器 402:資料傳輸器 700:攝影機 702:渲染器 704:顯示器 706:編碼器 708:解碼器 710:結果發送器 712:擷取單元 714:物件辨識單元 800:攝影機 802:渲染器 804:顯示器 806:編碼器 808:解碼器 810:結果接收器 812:影像處理器 A1:部分 A2:部分 A3:邊框 A11:部分 A21:部分 A31:互動區域 A32:區域 A311:子區域 A312:子區域 A313:子區域 B1:物件 B3:邊框 B31:互動區域 B32:區域 BR1:邊界 BR2:邊界 C3:邊框 D3:邊框 RA:區域 RB:區域 RC:區域 RD:區域 S1:螢幕 S200:步驟 S202:步驟 S204:步驟 S206:步驟 S208:步驟 S210:步驟 S212:步驟 S214:步驟 S216:步驟 S218:步驟 S220:步驟 S222:步驟 S224:步驟 S226:步驟 S228:步驟 SP1:特殊效果
圖1展示一群組呼叫之一實例。
圖2展示根據本發明之一些實施例之一群組呼叫之一實例。
圖3展示根據本發明之一些實施例之一群組呼叫之一實例。
圖4展示根據本發明之一些實施例之一群組呼叫之一實例。
圖5展示根據本發明之一些實施例之一群組呼叫之一實例。
圖6展示根據本發明之一些實施例之一群組呼叫之一實例。
圖7展示根據本發明之一些實施例之一通信系統之一示意組態。
圖8展示根據本發明之一些實施例之一通信系統之一例示性功能組態。
圖9展示繪示根據本發明之一些實施例之一通信系統之一操作之一例示性序列圖。
A1:部分
A3:邊框
A11:部分
A31:互動區域
A32:區域
B1:物件
B3:邊框
B31:互動區域
B32:區域
RA:區域
RB:區域
S1:螢幕

Claims (20)

  1. 一種用於影片處理之方法，其包括： 將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及 將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中； 其中該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。
  2. 如請求項1之方法，其進一步包括： 界定該第一區域中之一互動區域； 偵測該互動區域中之該第一使用者之一部分；及 將該第一使用者之該部分顯示於該第二區域中。
  3. 如請求項2之方法，其中偵測該互動區域中之該第一使用者之該部分包含一擷取程序。
  4. 如請求項2之方法，其中偵測該互動區域中之該第一使用者之該部分包含一物件辨識程序。
  5. 如請求項4之方法，其進一步包括：若該物件辨識程序辨識該第一使用者之該部分中之一預定圖案，則將一特殊效果顯示於該使用者終端機上。
  6. 如請求項4之方法，其中該物件辨識程序包含一手勢辨識程序或一皮膚辨識程序。
  7. 如請求項2之方法，其中偵測該互動區域中之該第一使用者之該部分包含一影像比較程序或一移動物件偵測程序。
  8. 如請求項1之方法，其中該第一使用者及該第二使用者沿該使用者終端機上之一橫向方向對準，且該第一使用者之該即時影片之該部分朝向該第一區域中之該第二使用者延伸。
  9. 如請求項1之方法，其中該第一使用者及該第二使用者沿該使用者終端機上之一垂直方向對準，且該第一使用者之該即時影片之該部分朝向該第一區域中之該第二使用者延伸。
  10. 如請求項1之方法，其中該第一使用者及該第二使用者沿該使用者終端機上之一對角線方向對準，且該第一使用者之該即時影片之該部分朝向該第一區域中之該第二使用者延伸。
  11. 如請求項2之方法，其進一步包括： 判定該互動區域中之該第一使用者之該部分之一位置；及 基於該互動區域中之該第一使用者之該部分之該位置來判定該第二區域之一位置。
  12. 如請求項1之方法，其進一步包括：藉由偵測橫越該使用者終端機上之該第一區域中之一邊界之該第一使用者之一部分來判定該第一使用者之該即時影片之該部分。
  13. 如請求項12之方法，其中該邊界之一位置由該第一使用者判定。
  14. 如請求項12之方法，其中該邊界對應於該第二區域相對於該第一區域之一方向且位於該第一區域與該第二區域之間。
  15. 如請求項1之方法，其中該第二使用者之該影片係一即時影片。
  16. 如請求項1之方法，其中延伸至該第二區域之該第一使用者之該即時影片之該部分表示為一圖形物件。
  17. 如請求項1之方法，其進一步包括： 若該第一使用者之該即時影片之該部分延伸至該第二區域且觸碰該第二使用者，則將一特殊效果顯示於該第二區域中。
  18. 一種用於影片處理之系統，其包括一個或複數個處理器，其中該一個或複數個處理器執行一機器可讀指令以執行： 將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及 將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中； 其中該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。
  19. 如請求項18之系統，其中該一個或複數個處理器執行該機器可讀指令以進一步執行： 界定該第一區域中之一互動區域； 偵測該互動區域中之該第一使用者之一部分；及 將該第一使用者之該部分顯示於該第二區域中。
  20. 一種包含用於影片處理之一程式之非暫時性電腦可讀媒體，其中該程式引起一個或複數個電腦執行： 將一第一使用者之一即時影片顯示於一使用者終端機上之一第一區域中；及 將一第二使用者之一影片顯示於該使用者終端機上之一第二區域中； 其中該第一使用者之該即時影片之一部分延伸至該使用者終端機上之該第二區域。
TW110136485A 2021-09-30 2021-09-30 影片處理之系統、方法及電腦可讀媒體 TWI772192B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW110136485A TWI772192B (zh) 2021-09-30 2021-09-30 影片處理之系統、方法及電腦可讀媒體

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW110136485A TWI772192B (zh) 2021-09-30 2021-09-30 影片處理之系統、方法及電腦可讀媒體

Publications (2)

Publication Number Publication Date
TWI772192B true TWI772192B (zh) 2022-07-21
TW202316851A TW202316851A (zh) 2023-04-16

Family

ID=83439773

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110136485A TWI772192B (zh) 2021-09-30 2021-09-30 影片處理之系統、方法及電腦可讀媒體

Country Status (1)

Country Link
TW (1) TWI772192B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180182203A1 (en) * 2016-12-22 2018-06-28 Takara Gaming Solutions Limited Methods of user and machine interaction and apparatus for facilitating user interaction
TW201901561A (zh) * 2017-05-22 2019-01-01 阿特通雲端資訊有限公司 網路社群系統
US20200336518A1 (en) * 2017-04-19 2020-10-22 Rabbit Asset Purchase Corp. Display of virtual room

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180182203A1 (en) * 2016-12-22 2018-06-28 Takara Gaming Solutions Limited Methods of user and machine interaction and apparatus for facilitating user interaction
US20200336518A1 (en) * 2017-04-19 2020-10-22 Rabbit Asset Purchase Corp. Display of virtual room
TW201901561A (zh) * 2017-05-22 2019-01-01 阿特通雲端資訊有限公司 網路社群系統

Also Published As

Publication number Publication date
TW202316851A (zh) 2023-04-16

Similar Documents

Publication Publication Date Title
CN111818359B (zh) 直播互动视频的处理方法、装置、电子设备及服务器
CN107659416B (zh) 一种会议记录分享的方法、装置、会议终端和存储介质
US11863813B2 (en) System and methods for interactive filters in live streaming media
WO2018113140A1 (zh) 一种视频直播中虚拟礼物显示方法和系统
CN104618803B (zh) 信息推送方法、装置、终端及服务器
US8644467B2 (en) Video conferencing system, method, and computer program storage device
CN107979772B (zh) 共用和个人装置协作提供个性化用户功能的方法和设备
CN109309844B (zh) 视频台词处理方法、视频客户端及服务器
CN113286191B (zh) 内容协同方法、装置、电子设备以及存储介质
CN111629151B (zh) 视频合拍方法、装置、电子设备及计算机可读介质
CN112044055B (zh) 图像数据采集方法、系统、装置、电子设备及存储介质
US20210368214A1 (en) Method and mobile terminal for processing data
CN110856005B (zh) 直播流显示方法、装置、电子设备及可读存储介质
CN113660503B (zh) 同屏互动控制方法及装置、电子设备、存储介质
WO2020030958A1 (zh) 一种添加水印的方法、装置、设备/终端/服务器以及存储介质
JP2023001324A (ja) 映像コーディングを行うコンピュータプログラム
US20140325396A1 (en) Methods and systems for simultaneous display of multimedia during a video communication
CN109511010B (zh) 视频处理方法、视频处理装置、电子设备及存储介质
CN113573090A (zh) 游戏直播中的内容显示方法、装置、系统和存储介质
TWI772192B (zh) 影片處理之系統、方法及電腦可讀媒體
KR101915792B1 (ko) 얼굴인식을 이용한 광고 삽입 시스템 및 방법
JP7426021B2 (ja) 映像処理のためのシステム、方法、及びコンピュータ可読媒体
CN110809172A (zh) 交互特效展示方法、装置及电子设备
CN112995692B (zh) 互动数据处理方法、装置、设备及介质
WO2021088973A1 (zh) 直播流显示方法、装置、电子设备及可读存储介质