TW201919388A - 視頻通信的方法、裝置、終端及電腦可讀儲存介質 - Google Patents

視頻通信的方法、裝置、終端及電腦可讀儲存介質 Download PDF

Info

Publication number
TW201919388A
TW201919388A TW107126230A TW107126230A TW201919388A TW 201919388 A TW201919388 A TW 201919388A TW 107126230 A TW107126230 A TW 107126230A TW 107126230 A TW107126230 A TW 107126230A TW 201919388 A TW201919388 A TW 201919388A
Authority
TW
Taiwan
Prior art keywords
special effect
terminal
display
instruction
video
Prior art date
Application number
TW107126230A
Other languages
English (en)
Other versions
TWI683578B (zh
Inventor
朱瑩
王超
梁穎蕾
匡皓琦
石琳
王金杰
朱維松
Original Assignee
大陸商騰訊科技(深圳)有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商騰訊科技(深圳)有限公司 filed Critical 大陸商騰訊科技(深圳)有限公司
Publication of TW201919388A publication Critical patent/TW201919388A/zh
Application granted granted Critical
Publication of TWI683578B publication Critical patent/TWI683578B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N2005/2726Means for inserting a foreground image in a background image, i.e. inlay, outlay for simulating a person's appearance, e.g. hair style, glasses, clothes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145Handheld terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Geometry (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

一種視頻通信的方法、裝置、終端及電腦可讀存儲介質。所述視頻通信的方法應用於一第一終端並包括:在至少兩個終端的視頻通信過程中,在視頻通信介面的至少兩個顯示分區分別顯示所述至少兩個終端的視頻圖像;獲取第一特效顯示指令,其中所述第一特效顯示指令用於指示為所述至少兩個顯示分區添加第一特效;以及為所述至少兩個顯示分區添加所述第一特效,並向至少一個第二終端發送所述第一特效顯示指令,其中所述第二終端為所述至少兩個終端中除所述第一終端以外的終端。

Description

視頻通信的方法、裝置、終端及電腦可讀儲存介質
本揭示關於網路技術領域,特別是關於一種視頻通信的方法、裝置、終端及電腦可讀儲存介質。
隨著通信技術的發展,視頻通信逐漸成為一種較為普遍的通信方式,終端上安裝的社交應用程式一般具有視頻通信功能,使用者可以通過社交應用程式與好友進行視頻通信,從而不僅方便了使用者之間的資訊交流,還提高了資訊交流的真實性。
習知技術中,第一終端與第二終端進行視頻通信時,第一終端向第二終端發送拍攝得到的第一視頻資料。第一終端接收第二終端發送的第二視頻資料,通過大小畫面的顯示方式顯示該第一視頻資料和第二視頻資料對應的視頻圖像。該大小畫面的顯示方式為:第一終端在當前螢幕中全螢幕顯示該第二視頻資料的視頻圖像,在當前螢幕的右上角矩形區域中縮小顯示該第一視頻資料的視頻圖像。另外,在視頻通信過程中,終端使用者可以通過特效來增加視頻通信的趣味性。例如,第一終端的使用者可以選擇某個特效(例如,在人臉上增加鬍鬚和耳朵等),在第一終端的視頻圖像中添加該特效,並使第二終端在顯示第一終端的視頻圖像時也能夠顯示該特效。
在實現本揭示的過程中,發明人發現習知技術至少存在以下問題:上述方法需要通過大小畫面的顯示方式顯示視頻資料,第一使用者 和第二使用者之間在進行互動時,會受到當前螢幕中對方使用者所佔畫面大小的限制,而由於這種畫面上的限制,使得在添加特效時,僅能夠為佔據大畫面的視頻圖像添加,缺少了交互感,浪費了視頻通信的網路資源,大幅降低了視頻通信的實際效率。
為瞭解決相關技術的問題,本揭示實施例提供了一種視頻通信的方法、裝置、終端及電腦可讀儲存介質。
第一方面,提供了一種視頻通信的方法,應用於第一終端,所述視頻通信的方法包括:在至少兩個終端的視頻通信過程中,在視頻通信介面的至少兩個顯示分區分別顯示所述至少兩個終端的視頻圖像;獲取第一特效顯示指令,其中所述第一特效顯示指令用於指示為所述至少兩個顯示分區添加第一特效;以及為所述至少兩個顯示分區添加所述第一特效,並向至少一個第二終端發送所述第一特效顯示指令,其中所述第二終端為所述至少兩個終端中除所述第一終端以外的終端。
第二方面,提供了一種視頻通信的裝置,應用於第一終端,所述視頻通信的裝置包括:一顯示模組,用於在至少兩個終端的視頻通信過程中,在視頻通信介面的至少兩個顯示分區分別顯示所述至少兩個終端的視頻圖像;一第一獲取模組,用於獲取第一特效顯示指令,其中所述第一特效顯示指令用於指示為所述至少兩個顯示分區添加第一特效;一第一添加模組,用於為所述至少兩個顯示分區添加所述第一特效;以及一發送模組,用於向至少一個第二終端發送所述第一特效顯示指令,其中所述第二終端為所述至少兩個終端中除所述第一終端以外的終端。
第三方面,提供了一種終端,所述終端包括:至少一處理器;以及至少一記憶體,所述至少一記憶體中存儲有至少一指令,所述至少一指令由所述至少一處理器載入並執行上述視頻通信的方法。
第四方面,提供了一種電腦可讀儲存介質,儲存有至少一指 令,所述指令由至少一處理器載入並執行上述視頻通信的方法。
本揭示實施例提供的技術方案帶來的有益效果是:本揭示實施例中,通過將視頻通信介面分為互不重疊的多個分區來顯示不同終端的視頻圖像,突破了畫面上的限制,使得在添加特效時,不僅能夠在多個分區上進行特效的添加,而且能夠通過特效的添加,增強交互感,避免了對視頻通信的網路資源的浪費,大幅提高了視頻通信的實際效率。
100‧‧‧終端
101‧‧‧第一終端
102‧‧‧第二終端
110‧‧‧射頻電路
120‧‧‧記憶體
130‧‧‧輸入單元
131‧‧‧觸敏表面
132‧‧‧其他輸入裝置
140‧‧‧顯示單元
141‧‧‧顯示面板
150‧‧‧感測器
160‧‧‧音訊電路
161‧‧‧揚聲器
162‧‧‧傳聲器
170‧‧‧傳輸模組
180‧‧‧處理器
190‧‧‧電源
801‧‧‧顯示模組
802‧‧‧第一獲取模組
803‧‧‧第一添加模組
804‧‧‧發送模組
S301-S308、S701-S711‧‧‧步驟
第1圖是本揭示實施例提供的一種實施環境的示意圖。
第2A圖是本揭示實施例提供的一種分屏顯示的方式示意圖。
第2B圖是本揭示實施例提供的一種分屏顯示的方式示意圖。
第2C圖是本揭示實施例提供的一種分屏顯示的方式示意圖。
第3圖是本揭示實施例提供的一種視頻通信的方法的流程圖。
第4圖是本揭示實施例提供的一種分屏顯示的方式示意圖。
第5圖是本揭示實施例提供的一種掛件特效的示意圖。
第6圖是本揭示實施例提供的一種跨分區特效的示意圖。
第7圖是本揭示實施例提供的一種跨分區特效的邏輯流程圖。
第8圖是本揭示實施例提供的一種視頻通信的裝置的結構示意圖。
第9圖是本揭示實施例提供的一種終端的結構示意圖。
下面將結合本揭示實施例中的附圖,對本揭示實施例中的技術方案進行清楚、完整地描述,顯然,所描述的實施例是本揭示一部分實施例,而不是全部的實施例。基於本揭示中的實施例,本揭示所屬技術領域中具有通常知識者在沒有做出創造性勞動前提下所獲得的所有其他實施例,都屬於本揭示保護的範圍。
第1圖是本揭示實施例提供的一種實施環境的示意圖,該實 施環境包括:第一終端101以及與第一終端101進行視頻通信的至少一個第二終端102。第一終端101和至少一個第二終端102進行視頻通信過程中,第一終端101向至少一個第二終端102發送第一終端101的視頻圖像,並接收至少一個第二終端102發送的第二終端102的視頻圖像,在視頻通信介面中通過分屏顯示的方式顯示該第一終端101的視頻圖像以及該至少一個第二終端102的視頻圖像。該分屏顯示的方式為:第一終端101在視頻通信介面的至少兩個顯示分區,分別顯示至少兩個終端的視頻圖像,各個顯示分區之間互不重疊。第一終端101根據至少兩個顯示分區在視頻通信介面中的形狀和大小,將至少兩個終端的視頻圖像分別顯示在至少兩個顯示分區中。
以第一終端101與一個第二終端102進行視頻通信為例,如第2A圖所示,第一終端101的視頻通信介面上包括兩個左右並行排列、大小相等的矩形顯示分區,分別顯示第一終端101的視頻圖像和第二終端102的視頻圖像。或者,第一終端101的視頻通信介面上包括上下並行排列、大小相等的矩形顯示分區,分別顯示第一終端101的視頻圖像和該第二終端102的視頻圖像。當然,具體哪個分區顯示哪個終端的視頻圖像,可以由終端使用者按照自身的使用習慣自行調整。
以第一終端101與兩個第二終端102進行視頻通信為例,如第2B圖所示,第一終端101的視頻通信介面的上半區域包括兩個並行排列、大小相等的矩形顯示分區,下半區域包括一個矩形顯示分區,在劃分的三個矩形顯示分區中,分別顯示第一終端101的視頻圖像和兩個第二終端102的視頻圖像。或者,第一終端101的視頻通信介面上包括三個在橫向上並行排列、大小相等的矩形顯示分區,分別顯示第一終端101的視頻圖像和兩個第二終端102的視頻圖像。當然,在視頻通信過程中,具體在哪個分區顯示哪個終端的視頻圖像,可以由終端使用者按照自身的使用習慣自行調整。
以第一終端101與四個第二終端102進行視頻通信為例,如第2C圖所示,第一終端101的視頻通信介面可以採用模組化視窗顯示的方式來 顯示各個顯示分區,事實上,通過模組化視窗顯示的方式時,各個顯示分區也可以互相不重疊。該視頻通信介面包括一個位於中心區域的矩形顯示分區以及圍繞在該中心區域周圍的四個多邊形顯示分區。在劃分的五個顯示分區中,分別顯示第一終端101的視頻圖像和四個第二終端102的視頻圖像。當然,在視頻通信過程中,具體在哪個分區顯示哪個終端的視頻圖像,可以由終端使用者按照自身的使用習慣自行調整。
本揭示實施例中所涉及的特效可以包括掛件(widget)特效和跨分區特效,掛件特效是指能夠基於人臉座標而顯示的特效,例如基於人臉座標中的嘴部位置在視頻圖像的嘴部顯示大紅唇,或基於人臉座標中的頭部位置在頭頂顯示貓耳朵等。需要說明的是,本揭示實施例中的掛件特效是針對至少兩個顯示分區內的視頻圖像的特效,亦即是同時為至少兩個顯示分區內的視頻圖像添加的特效。例如當兩個終端進行視頻通信時,可以提供掛件特效選項,該掛件特效選項包括至少兩個掛件特效,一個是貓造型,一個是狗造型,當第一終端選擇添加該掛件特效時,可以為第一顯示分區內的人臉添加貓耳朵和貓鼻子,為第二顯示分區內的添加狗耳朵和狗鼻子等。特效的添加實際上可以是通過在已顯示的視頻圖像上添加圖層,基於獲取到的特效參數進行繪製的過程,這些特效參數包括但不限於線條參數、色彩參數、運動軌跡參數等等。
需要說明的是,第一終端101和至少一個第二終端102之間的交互實際上是通過伺服器進行的,由伺服器作為視頻資料以及指令的中介,本揭示實施例中,為了簡化第一終端101和至少一個第二終端102之間的交互過程,不再具體指出交互過程中涉及的伺服器的過程。
為了便於理解本揭示的原理,在本揭示實施例中,僅以兩個終端之間進行視頻通信為例進行說明,第3圖是本揭示實施例提供的一種視頻通信的方法流程圖。參見第3圖,該方法包括:
步驟S301、第一終端獲取第一終端上所觸發的分屏顯示指 令。
該分屏顯示指令用於指示該第一終端通過分屏顯示的方式顯示該兩個終端的視頻圖像。在該揭示實施例中,該具體的分屏顯示的方式為:將視頻通信介面劃分為兩個左右並行排列、大小相等的矩形的顯示分區,每個顯示分區用於顯示視頻通信中一個參與終端的視頻圖像。
上述獲取分屏顯示指令的過程是以第一終端通過在本終端上的操作觸發分屏顯示指令為例進行說明的。其具體觸發方式可以包括:在第一終端和第二終端進行視頻通信過程中,第一終端在視頻通信介面顯示分屏按鈕,當第一終端檢測到該分屏按鈕被觸發時,第一終端生成分屏顯示指令,從而第一終端獲取第一終端的分屏顯示指令。進一步地,為了讓視頻通信的參與終端均能夠保持一致的顯示效果,第一終端在獲取第一終端的分屏顯示指令之後,會向第二終端發送該分屏顯示指令,該第一終端向第二終端發送的分屏顯示指令用於指示該第二終端通過分屏顯示的方式顯示該第一終端的視頻圖像和第二終端的視頻圖像,當第二終端接收到該分屏顯示指令時,可以進行分屏顯示。
當然,獲取分屏顯示指令的方式還可以包括由第二終端發起分屏,由第一終端接收該第二終端發送的分屏顯示指令。在第一終端和第二終端進行視頻通信過程中,如果第二終端檢測到第二終端的視頻通信介面中的分屏按鈕被觸發時,第二終端生成分屏顯示指令,並且第二終端向第一終端發送該分屏顯示指令,由第一終端接收第二終端發送的分屏顯示指令。
需要說明的是,上述分屏顯示指令可以是經互動特效按鈕及分屏按鈕共同觸發的指令,具體過程為:第一終端開啟視頻通信介面後,在視頻通信介面顯示互動特效按鈕,當第一終端檢測到該互動特效按鈕被觸發時,顯示多個特效按鈕,並顯示用於觸發分屏顯示指令的分屏顯示按鈕,當第一終端檢測到該分屏顯示按鈕被觸發時,獲取分屏顯示指令。當 然,上述分屏顯示指令也可以是分屏按鈕直接觸發的指令,具體過程為:第一終端直接在視頻通信介面顯示分屏按鈕,當第一終端檢測到該分屏按鈕被觸發時,獲取分屏顯示指令。
需要說明的是,本揭示實施例對具體由誰發起分屏不做具體限定,當然,在本揭示實施例中是以在視頻通信過程中顯示方式切換至分屏顯示為例進行說明,而在實際場景中,該視頻通信過程在被觸發時就可以直接採用分屏顯示進行,而無需通過轉換操作才能夠實施。例如在發起視頻通信時,終端使用者可以直接選擇視頻通信時所採用的顯示方式,從而發起對應的視頻通信。進一步地,該分屏顯示指令還可以用於指示具體如何對視頻通信介面進行分屏,第一終端在接收到分屏顯示指令時,可以基於所指示的不同分屏方式進行分屏顯示。
當然,對於第二終端來說,如果第一終端發起了分屏顯示,而第二終端的使用者不想進行分屏顯示的情況下,還可以在分屏後通過使用者操作切換回大小畫面的顯示方式。或者,第二終端在接收到第一終端的分屏顯示指令時,可以顯示選擇選項,該選擇選項用於提示第二終端的使用者確定是否切換至分屏顯示方式,如果第二終端檢測到使用者選擇了不切換,則不進行切換,如果檢測到使用者選擇切換,則執行後續的分屏顯示過程。
步驟S302、在第一終端和第二終端的視頻通信過程中,第一終端在視頻通信介面的兩個顯示分區分別顯示該兩個終端的視頻圖像。
在接收到分屏顯示指令時,第一終端可以根據分屏顯示指令所指示的分屏顯示方式對視頻通信介面進行切分,以得到兩個顯示分區,該兩個顯示分區之間不相互重疊,並根據該兩個顯示分區的形狀和大小對第一終端的原始視頻資料和第二終端的原始視頻資料進行視頻資料解碼,以得到與該兩個顯示分區匹配的視頻圖像,並將經過解碼所得到的第一終端的視頻圖像顯示於第一顯示分區,將第二終端的視頻圖像顯示於第二顯 示分區。在上述過程中,是以對解碼參數進行調整從而對視頻圖像進行調整為例進行說明的,而在實際場景中,還可以是基於原解碼方式,而是對解碼得到的視頻圖像進行調整。例如將視頻圖像的長和寬按照相同比例裁剪或拉伸,得到與兩個顯示分區相匹配的視頻圖像,從而使得各個顯示分區中的視頻圖像與使用者的實際人臉的比例相符。當然,具體採用哪種調整方式,本揭示實施例不做限定。
本揭示實施例中,該第一顯示分區和第二顯示分區在視頻通信介面中的排列方式、形狀和大小可以是系統預設的,也可以根據使用者需要設置並更改,本揭示實施例對此不作具體限定。例如第一顯示分區和第二顯示分區可以為視頻通信介面中兩個並行排列、大小相等的矩形的顯示分區。或者,視頻通信介面中兩個上下排列、大小相等的矩形兩個顯示分區,左右均分的螢幕佈局一方面可以給使用者營造“在一起”的心理陪伴感,另一方面,也讓左右跨屏互動玩法有了更多可能。或者,視頻通信介面中兩個並行排列、大小各占視頻通信介面比例為3:2的矩形顯示分區等。例如如第4圖所示,第一終端在視頻通信介面中兩個並行排列、大小相等的矩形顯示分區,分別顯示第一終端的視頻圖像和第二終端的視頻圖像。通過分屏顯示的方式顯示兩個終端的視頻圖像,使得使用者更加清晰的看清視頻圖像中的人臉,提高了視頻通信時的使用者體驗。
步驟S303、第一終端獲取第一特效顯示指令,該第一特效顯示指令用於指示為該兩個顯示分區添加第一特效。
上述獲取第一特效顯示指令的過程可以使用者對視頻通信介面的觸發獲取,本步驟中,第一終端可以在視頻通信介面顯示多個特效按鈕,每個特效按鈕對應於不同特效,從而使用者可以通過對任一個特效按鈕的觸發操作,來觸發第一特效顯示指令,以添加對應特效。該過程涉及到使用者對視頻通信介面的手動操作,具體過程可以如下:
多個特效按鈕可以包括多個掛件特效按鈕和多個跨分區特 效按鈕。當第一終端檢測到掛件特效按鈕被觸發時,獲取該掛件特效按鈕對應的掛件特效指令,該掛件特效指令用於指示第一終端為該兩個顯示分區添加掛件特效;當第一終端檢測到跨分區特效按鈕被觸發時,獲取該跨分區特效按鈕對應的跨分區特效指令,該跨分區特效指令用於指示第一終端為兩個顯示分區添加跨分區特效。
上述獲取第一特效顯示指令的過程還可以由使用者的手勢操作或表情變化等觸發獲取,本步驟中,第一終端還可以通過兩個終端的視頻圖像中的指定手勢或指定表情,觸發第一特效顯示指令。
以手勢操作為例,第一終端獲取第一特效顯示指令的步驟可以為:當第一終端檢測到該兩個顯示分區中顯示的視頻圖像中均存在指定手勢時,獲取該指定手勢對應的手勢特效指令,該手勢特效指令用於指示為該兩個顯示分區中顯示的視頻圖像添加與該指定手勢對應的特效。本步驟中,第一終端通過第一預設識別演算法,識別該第一終端的視頻圖像中的手勢操作以及第二終端的視頻圖像中的手勢操作,判斷兩個手勢操作是否為指定手勢。如果是,第一終端獲取該指定手勢對應的手勢特效指令;如果否,第一終端不獲取任何手勢特效指令。
第一終端可以預先設置並儲存該指定手勢的軌跡參數和形狀參數,該指定手勢的軌跡參數和形狀參數可以根據使用者需要設置並更改,本揭示實施例對此不做具體限定。例如該指定手勢可以為第一終端的視頻圖像和第二終端的視頻圖像中的通過比心組合成的心形手勢,亦即是當第一終端檢測到視頻圖像中的通話雙方均比出了心形手勢,則確定檢測到指定手勢,並觸發第一特效顯示指令,以向該兩個顯示分區添加對應特效。
以表情變化為例,第一終端獲取第一特效顯示指令的步驟可以為:當第一終端檢測到該兩個顯示分區中顯示的視頻圖像中任一個視頻圖像中存在指定表情時,獲取該指定表情對應的表情特效指令,該指定表 情對應的表情特效指令用於指示為該兩個顯示分區中顯示的視頻圖像添加與該指定表情對應的特效。本步驟中,第一終端獲取指定表情對應的表情特徵,通過第二預設識別演算法提取該第一終端的視頻圖像和第二終端的視頻圖像中的人臉中的多個表情特徵,根據該多個表情特徵與指定表情對應的表情特徵,判斷該人臉中是否存在指定表情。如果是,第一終端獲取該指定表情對應的表情特效指令;如果否,第一終端不獲取任何手勢特效指令。
第一終端可以預先設置並儲存該指定表情對應的表情特徵。該指定表情可以根據使用者需要設置並更改,本揭示實施例對此不做具體限定。例如,該指定表情可以為“麼麼噠”動作時對應的人臉表情。第一預設識別演算法及第二預設識別演算法可以根據使用者需要設置並更改,本揭示實施例對此不做具體限定。例如該第一預設識別演算法可以為基於標準像素的圖像識別演算法,第二預設識別演算法可以為特徵提取演算法。
通過手勢或表情的變化來對特效添加進行控制,可以提供一種更加便捷的操控方式,無需使用者手動觸發,大幅提高了操作效率。
需要說明的是,上述第一特效顯示指令還可以是由使用者發出的語音指令,亦即是使用者可以通過說話的方式來命令終端添加特效。例如第一終端可以通過麥克風檢測到語音指令形式的第一特效顯示指令,並繼續執行步驟S304以及後續步驟。通過語音指令對特效添加進行控制可以提供一種更加便捷的操控方式,無需使用者手動觸發,大幅提高了操作效率。
需要說明的是,對於不同的分屏顯示方式可以提供不同的特效。例如對於該揭示實施例中的左右顯示的場景,可以提供雙人掛件特效或是跨越兩個顯示分區的跨分區特效,而如果是四人通話場景,按照四宮格顯示,則可以提供四人掛件特效或是跨越四個顯示分區的跨分區特效或跨越兩個顯示分區的跨分區特效。具體地,在接收到分屏顯示指令時,可 以在根據分屏顯示指令進行分屏時,獲取與分屏方式對應的特效按鈕,並將該特效按鈕顯示於分屏顯示的視頻通信介面中。
步驟S304、第一終端向第二終端發送該第一特效顯示指令。
本揭示實施例中,為了使得視頻通信的參與終端的一致性,第一終端獲取第一特效顯示指令後,向第二終端發送該第一特效顯示指令,第二終端在接收該第一特效顯示指令後,從而後續根據該第一特效顯示指令為第二終端的視頻通信介面添加該第一特效顯示指令對應的第一特效,其具體基於指令添加特效的過程與第一終端同理,在此不做贅述。當然,為了提供更靈活的對話模式,並且避免由於特效的添加造成的遮擋等,還可以取消已添加的特效,該取消可以由視頻通信的任一個參與終端發起。例如當第一終端在添加了某個特效後,再次點擊該特效按鈕時,則觸發特效取消指令,第一終端則可以取消已添加的特效,並將特效取消指令發送至第二終端,使得第二終端也取消已添加的特效。
需要說明的是,在本揭示實施例中,當獲取到第一特效顯示指令時,可以在第一終端基於第一特效顯示指令進行特效添加時,向第二終端發送第一特效顯示指令。當然,為了提高視頻通信的一致性,也可以在獲取到第一特效顯示指令時,立刻向第二終端發送第一特效顯示指令,以避免延時過長。
本揭示實施例中,特效指令可以分為掛件特效指令和跨分區特效指令,分別用於指示添加掛件特效和跨分區特效,當該第一特效顯示指令為掛件特效指令時,該第一特效為掛件特效。相應地,第一終端為該兩個顯示分區添加掛件特效的步驟可以通過以下步驟S305-S307實現。
步驟S305、第一終端根據該掛件特效指令,獲取該掛件特效指令對應的兩個掛件特效。
掛件特效指令用於指示第一終端為視頻通信介面中的兩個終端的視頻圖像分別添加一個掛件特效。因此,每個掛件特效指令對應兩 個掛件特效。本揭示實施例中,每個掛件特效指令對應兩個掛件特效,包括第一終端的視頻圖像的第一掛件特效和第二終端的視頻圖像的第二掛件特效。
本步驟中,第一終端在本地中預先儲存多個掛件特效指令和掛件特效的對應關係。因此,本步驟可以為:第一終端根據該掛件特效指令,從多個掛件特效指令和掛件特效的對應關係中,獲取該掛件特效指令對應的第一掛件特效和第二掛件特效。本揭示實施例中,該第一掛件特效和第二掛件特效均可以是一組子掛件的集合,每個子掛件可以是與人臉上某個器官相匹配的掛件,將第一掛件特效和第二掛件特效添加至視頻圖像中,可以達到兩個終端的視頻圖像在視覺上更加生動形象的效果,從而豐富視頻通信的趣味性,滿足使用者更加個性化的使用者體驗。
需要說明的是,第一終端可以在第一次使用掛件特效功能時下載各個掛件特效對應的具體特效參數,從而在進行特效添加時,可以直接從終端本地獲取特效參數以進行特效的添加,以提高添加速度。當然,第一終端在使用掛件特效功能時,還可以僅下載各個掛件特效的圖示,當檢測到使用者對任一個特效圖示的選中操作時,才下載被選中掛件特效的特效參數,以避免對流量和儲存空間的浪費。
由於掛件特效需要添加到視頻圖像中的人臉對應位置上,因此,第一終端還需先通過以下步驟S306,獲取人臉座標,再通過以下步驟S307,基於人臉座標添加掛件特效。
步驟S306、第一終端獲取兩個終端的視頻圖像的人臉座標。
本揭示實施例中,第一終端和第二終端可以通過下述任一種方式獲取人臉座標:
對於第一種實現方式,視頻通信的參與終端可以各自提取自身的視頻圖像的人臉座標,本步驟可以為:第一終端對該第一終端的視頻圖像進行人臉識別,得到該第一終端的視頻圖像的人臉座標,第二終端對 該第二終端的視頻圖像進行人臉識別,得到該第二終端的視頻圖像的人臉座標,第一終端將該第一終端的視頻圖像的人臉座標發送至第二終端,使得第二終端接收該第一終端的視頻圖像的人臉座標,該第一終端接收由該第二終端通過人臉識別得到的該第二終端的視頻圖像的人臉座標。
第一終端對該第一終端的視頻圖像進行人臉識別,得到該第一終端的視頻圖像的人臉座標的步驟可以為:第一終端可以通過預設的人臉識別演算法,從該第一終端的視頻圖像中提取人臉中每個器官的人臉座標,從提取的人臉座標中獲取與第一掛件特效相匹配的器官的人臉座標,將與第一掛件特效相匹配的器官的人臉座標作為第一終端的視頻圖像的人臉座標。當然,該人臉識別得到人臉座標的過程還可以是一個粗略識別人臉輪廓的過程,以得到用於代表人臉輪廓的人臉座標,由於人臉的五官的大體位置比較固定,因此可以採用人臉輪廓作為特效添加的基準,能夠在實現特效添加的同時,降低終端的計算負擔。
需要說明的是,第一終端和第二終端進行視頻通信過程中,第一終端的視頻圖像中與第一掛件特效相匹配的器官可能會發生移動,則該器官的人臉座標也會隨之改變。因此,第一終端還需即時更新該人臉座標,該過程可以為:第一終端每隔預設週期,通過上述步驟獲取與第一掛件特效相匹配的器官的人臉座標,將當前獲取的人臉座標作為第一終端的視頻圖像的人臉座標。該預設週期可以根據使用者需要設置並更改,本揭示實施例對此不做具體限定。例如該預設週期可以為0.2秒、0.01秒等。
對於第二種實現方式,終端各自通過兩個終端的視頻圖像提取人臉座標,本步驟可以為:第一終端對該兩個終端的視頻圖像分別進行人臉識別,得到該兩個終端的視頻圖像的人臉座標。本步驟的實現方式與第一種實現方式中,獲取第一終端的視頻圖像的人臉座標的實現方式一致,此處不做贅述。
步驟S307、第一終端基於該兩個終端的視頻圖像的人臉座 標,分別在該兩個終端的視頻圖像的對應位置上添加該兩個掛件特效。
本步驟中,以第一終端在第一終端的視頻圖像上添加第一掛件特效為例。第一終端在第一終端的視頻圖像上繪製用於添加第一掛件特效的掛件特效圖層,並根據與第一掛件特效相匹配的器官的人臉座標,在掛件特效圖層中將第一掛件特效添加到該人臉座標處,從而使得掛件特效圖層中的第一掛件特效同其匹配的器官相貼合。如第5圖所示,通過為兩個終端的視頻圖像添加該兩個掛件特效,使得視頻通信介面更加個性化,提高了視頻通信的趣味性。
需要說明的是,步驟S306中,第一終端即時更新人臉座標。因此,本步驟中,第一終端將第一掛件特效添加到掛件特效圖層後,還會即時對第一掛件特效進行調整,該過程可以為:第一終端每隔預設週期,根據當前預設週期內獲取的第一終端的視頻圖像的人臉座標,判斷前一個預設周內獲取的第一終端的視頻圖像的人臉座標是否與當前預設週期對應的人臉座標相同。如果不相同,第一終端將該第一掛件特效移至當前預設週期對應的人臉座標處,以使該第一掛件特效位於當前預設週期內獲取的人臉座標處;如果相同,不做處理。需要說明的是,第一終端在第二終端的視頻圖像上添加第二掛件特效的實現方式同上述實現方式一致,此處不再一一贅述。
本揭示實施例中,當該第一特效顯示指令為跨分區特效指令時,該第一特效為跨分區特效。相應地,第一終端為視頻通信介面添加跨分區特效的步驟可以通過以下步驟S308實現。
步驟S308、第一終端在該兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的特效。
本揭示實施例中,第一終端在本地中預先儲存多個跨分區特效指令和跨分區特效的對應關係。跨分區特效包括直接顯示的特效和基於人體動作的多結局的特效。
當該跨分區特效為直接顯示的特效時,本步驟可以為:第一終端根據該跨分區特效指令,從跨分區特效指令和跨分區特效的對應關係中獲取該跨分區特效指令對應的跨分區特效的指定運動軌跡,該指定運動軌跡為從一個分區移動至其他分區,在第一終端的視頻圖像和第二終端的視頻圖像上繪製跨分區特效圖層,按照該指定運動軌跡,在該跨分區特效圖層上顯示運動軌跡為從一個顯示分區移動至其他顯示分區的移動特效。例如該跨分區特效為多個金幣從第一顯示分區移動至第二顯示分區的送金幣特效。
跨分區特效可以是一種用於體現通信參與者之間的互動的特效。因此,可以基於參與者的人體動作來選擇不同的顯示效果。例如該跨分區特效為基於人體動作的多結局的特效時,本步驟可以通過以下兩步驟實現。
第一步驟:第一終端根據該跨分區特效的運動軌跡參數,在該兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的移動特效。
本揭示實施例中,該跨分區特效包括先顯示的移動特效以及基於對該移動特效回饋的人體動作的結局特效。該跨分區特效的運動軌跡參數用於指示跨分區特效中移動特效的運動軌跡,該運動軌跡參數包括但不限於運動軌跡曲線,或者運動的起點及終點等。
本步驟中,第一終端根據該跨分區特效指令,獲取該跨分區特效指令對應的運動軌跡參數,在第一終端的視頻圖像和第二終端的視頻圖像上繪製跨分區特效圖層。第一終端根據該運動軌跡參數,在該跨分區特效圖層上顯示按照運動軌跡曲線為從一個顯示分區移動至其他顯示分區的移動特效。或者,第一終端根據該運動軌跡參數,在該跨分區特效圖層上顯示按照該運動的起點及終點,從運動的起點直線移動至終點的移動特效。該運動軌跡曲線以及該運動的起點及終點可以根據使用者需要設置並 更改,本揭示實施例對此不做具體限定。
例如該運動的起點可以為第一顯示分區和第二顯示分區的臨界線的中點,終點可以為第二顯示分區中的人臉所在區域的任一點,該移動特效可以為將拳擊圖形從起點移動至第二顯示分區中人臉所在區域的打拳特效。
例如該運動軌跡曲線可以為從第一顯示分區下方至第二顯示分區下方軌跡曲線,對應的移動可以為將氣球圖形從第一顯示分區的下方移動至第二顯示分區的下方。
本揭示實施例中,由於第一終端通過步驟S304,向第二終端發送跨分區特效顯示指令,第二終端同步顯示該移動特效。因此,在第一終端顯示該移動特效過程中,第二終端的使用者可以通過做出不同的人體動作,對該來源於第一終端的移動特效進行回饋,從而進一步增加視頻通信過程中互動的趣味性。
第二步驟:在移動特效顯示過程中,第一終端根據作為特效中動作接收方的第二終端的視頻圖像中的人體動作的不同,在該兩個終端的視頻圖像上添加不同的結局特效,每個結局特效用於指示該跨分區特效的動作結局。
本揭示實施例中,由於不同使用者對該移動特效回饋的人體動作也各不相同,在移動特效顯示過程中,第一終端可基於不同的人體動作,添加不同的結局特效。
本步驟中,對於每個跨分區特效,第一終端可以儲存不同的人體動作和結局特效之間的對應關係。因此,本步驟可以為:在第一終端顯示該移動特效過程中,第一終端根據作為特效中動作接收方的第二終端的視頻圖像中的人體動作以及人體動作和結局特效之間的對應關係,判斷該人體動作對應的結局特效,該結局特效用於指示該跨分區特效的動作結局,第一終端在該跨分區特效圖層上顯示中該人體動作對應的結局特效。
本揭示實施例中,第一終端可以基於該人體動作是否為預設動作,顯示該跨分區特效中的是否進行互動的不同結局特效。具體地,本步驟可以為:第一終端如果檢測到該其他顯示分區中有預設動作,則在該移動特效的有效時長結束後,為該兩個終端的視頻圖像添加第一結局特效,該第一結局特效用於指示接收方基於該跨分區特效進行了互動;第一終端如果檢測到該其他分區中沒有預設動作,則在該移動特效的有效時長結束後,為該兩個終端的視頻圖像上添加第二結局特效,該第二結局特效用於指示接收方未基於該跨分區特效進行互動。該預設動作可以為基於第二顯示分區中的各個人體器官的位置變化所確定的動作。對於每個跨分區特效,第一終端中預先儲存了每個結局特效以及與該結局特效對應的預設動作。例如該跨分區特效中的移動特效可以為將拳擊圖形從起點移動至第二顯示分區中人臉所在區域的打拳特效。該預設動作可以為人臉向一側偏移的動作。
相應地,第一終端如果檢測到第二顯示分區中存在人臉向一側偏移的動作,第一終端根據該人臉向一側偏移的動作,確定該第二終端的視頻圖像中的人臉躲開該拳擊圖形,即接收方基於該跨分區特效進行了互動,為該兩個終端的視頻圖像添加第一結局特效。第一終端如果沒有檢測到第二顯示分區中存在人臉向一側偏移的動作,確定該第二終端的視頻圖像中的人臉沒有躲開該拳擊圖形,即接收方未基於該跨分區特效進行互動,為該兩個終端的視頻圖像添加第二結局特效。
進一步地,本揭示實施例中,跨分區特效中的結局特效可以包括圖形特效和音效。例如如第6圖所示,第二結局特效中可以包括:在第一終端的視頻圖像的人臉中添加驚訝或者得意的第一圖形特效,在第二終端的視頻圖像的人臉中添加閉眼睛的第二圖形特效;以及在視頻通信介面播放人臉被擊中時疼痛尖叫的音效。
例如該跨分區特效中的移動特效還可以為將氣球圖形從第 一顯示分區移動至第二顯示分區的特效。該預設動作可以為第二終端的使用者用手指點擊氣球圖形的動作,當第一終端檢測到第二終端的視頻圖像所在的第二顯示分區內存在手指點擊氣球圖形的動作時,確定作為接收方對應第二終端的使用者基於該跨分區特效進行了互動。第一終端從該跨分區特效的多個結局特效中獲取基於跨分區特效進行了互動時對應的第一結局特效。當第一終端沒有檢測到第二終端的視頻圖像所在的第二顯示分區內存在手指點擊氣球圖形的動作時,確定作為接收方對應第二終端的使用者沒有基於該跨分區特效進行互動。第一終端從該跨分區特效的多個結局特效中獲取沒有基於跨分區特效進行互動時對應的第二結局特效。
進一步地,本揭示實施例中,跨分區特效中的結局特效可以包括圖形特效和音效。例如第一結局特效中可以包括氣球被點中時第二顯示分區出現勝利手勢的圖形特效,以及在視頻通信介面播放氣球爆炸的音效。
需要說明的是,添加結局特效時,第一終端事實上是根據第二終端的視頻圖像的人臉座標檢測預設動作,並且跨分區特效中移動特效的運動軌跡也可能與人臉所在區域有關。因此,添加跨分區特效過程中,第一終端需獲取第一終端的視頻圖像和/或第二終端的視頻圖像中的人臉座標,從而根據第二終端的視頻圖像中的人臉座標檢測第二顯示分區中是否存在預設動作,或者確定移動特效的運動軌跡參數。第一終端需獲取第一終端的視頻圖像和/或第二終端的視頻圖像中的人臉座標的實現方式,與添加掛件特效時涉及的獲取人臉座標的實現方式一致,此處不再贅述。
需要說明的是,第一終端向第二終端發送跨分區特效指令時,該跨分區特效指令攜帶特效標識,第二終端可以在本地儲存每個跨分區特效指令對應的跨分區特效,從而第二終端根據第一特效顯示指令中的特效標識,從本地獲取該特效標識對應的跨分區特效,添加移動特效,並基於第二終端的視頻通信介面中作為特效中動作接收方的第二終端的視頻 圖像中的人體動作的不同,為該兩個終端的視頻圖像中添加不同的結局特效。
需要說明的是,對於跨分區特效中的基於人體動作的多結局的特效,如第7圖所示,上述過程在實際實現時,邏輯上可以包括以下步驟S701-S711:
步驟S701,第一終端獲取第一特效顯示指令。
步驟S702,第一終端添加第一特效之前,第一終端先判斷該第一特效顯示指令對應的第一特效的設定檔是否下載。若是,執行步驟S703。若否,執行步驟S704。
步驟S703,第一終端將該第一特效的設定檔下載至本地。執行步驟S704。
步驟S704,第一終端根據該第一特效顯示指令,讀取該第一特效的設定檔,啟動計時器。
步驟S705,判斷該跨分區特效是否需要進行觸發條件判定,即判斷視頻通信介面中當前顯示的方式是否為分屏顯示的方式。若是,即需要進行觸發條件判定,執行步驟S706。若否,結束。
步驟S706,顯示移動特效。
步驟S707,基於人體動作判斷是否滿足該跨分區特效的觸發條件。若是,執行步驟S708。若否,執行步驟S709。
步驟S708,基於人體動作,顯示第一結局特效。執行步驟S710。
步驟S709,基於人體動作,顯示第二結局特效。執行步驟S711。
步驟S710,判斷該第一結局特效的顯示時長是否達到第一特效時長。若是,結束。若否,執行步驟S708。
步驟S711,判斷第二結局特效的顯示時長是否到達第二特效 時長。若是,結束。若否,執行步驟S709。
在上述過程中,該預設動作的檢測可以由視頻通信過程中的參與終端在終端本地分別進行,還可以由任一個參與終端進行,並將檢測結果通知給其他終端,這種由一個終端進行檢測的方式,可以在保證雙方都能看到最全、最準確的效果的同時,顯著降低性能消耗。
需要說明的是,不同的跨分區特效可以對應於不同的預設動作,本揭示實施例可以根據跨分區特效的實際顯示效果來設置不同的預設動作,具體設置方式不做限定。
本揭示實施例中,第一終端在添加了第一特效後,還可能會獲取到用於指示添加第二特效的第二特效顯示指令,而針對該第二特效顯示指令,該第一終端可以採用下述任一種處理方式:
第一種處理方式:第一終端僅顯示一個特效。亦即是如果第一終端獲取到第二特效顯示指令,取消該兩個顯示分區中已添加的第一特效,並為該兩個顯示分區添加該第二特效顯示指令對應的第二特效。當該第二特效的特效有效時長結束時,為該兩個顯示分區重新添加該第一特效。
本揭示實施例中,如果第一終端獲取第二特效顯示指令,第一終端通過在第一特效的第一特效圖層上清除該第一特效,或者第一終端還可以直接清除該第一特效圖層,從而實現取消該第一特效。
如果第一終端停止在第一特效圖層上對該第一特效進行繪製,第一終端直接在第一特效圖層上繪製第二特效指令對應的第二特效。當第一終端檢測到第二特效的特效有效時長結束時,第一終端重新獲取第一特效顯示指令對應的第一特效,在該第一特效圖層上恢復顯示該第一特效,如果第一終端直接清除該第一特效圖層,第一終端在該第一終端的視頻圖像和該第二終端的視頻圖像上繪製用於顯示第二特效的第二特效圖層。第一終端基於該第二特效圖層,添加該第二特效顯示指令對應的第二特效。其實現方式同第一終端添加第一特效的實現方式一致,此處不再一 一贅述。
然後,當第一終端檢測到第二特效的特效有效時長結束時,第一終端清除第二特效圖層,重新繪製第一特效對應的第一特效圖層,為該第一終端的視頻圖像和該第二終端的視頻圖像重新添加該第一特效。
第二種處理方式:第一終端對兩個特效進行疊加顯示。亦即是第一終端如果獲取到第二特效顯示指令,為已添加了第一特效的該兩個顯示分區疊加該第二特效顯示指令對應的第二特效。
本揭示實施例中,如果第一終端獲取第二特效顯示指令,第一終端在第一特效圖層上疊加第二特效圖層,獲取該第二特效顯示指令對應的第二特效,在該第二特效圖層上顯示第二特效,從而實現第一特效和第二特效的同時顯示。又或者,第一終端還可以在第一特效圖層上進一步繪製第二特效,以實現特效的疊加顯示。
本揭示實施例中,可以在通過分屏顯示的方式進行顯示過程中,由第一終端取消分屏顯示,該步驟可以為:第一終端獲取該第一終端的取消分屏指令,通過大小畫面的方式顯示該兩個終端的視頻圖像。本步驟中,該取消分屏指令用於指示第一終端中斷分屏顯示的方式,通過大小畫面的方式顯示該兩個終端的視頻圖像。大小畫面的方式為第一終端全螢幕顯示該第一終端的視頻圖像,在視頻通信介面的右上角矩形區域中縮小顯示該第二終端的視頻圖像。第一終端可以通過取消分屏按鈕,以觸發取消分屏指令。當第一終端檢測到視頻通信介面上的取消分屏按鈕被觸發時,獲取取消分屏指令,將第一終端的第一視頻資料中的每幀視頻圖像全螢幕顯示在視頻通信介面中,根據矩形區域的大小,調整第二終端的第二視頻資料中的每幀視頻圖像,將調整後的視頻圖像顯示在該矩形區域中。
本揭示實施例中,通過將視頻通信介面分為互不重疊的多個分區來顯示不同終端的視頻圖像,突破了畫面上的限制,使得在添加特效時,不僅能夠在多個分區上進行特效的添加,而且能夠通過特效的添加, 增強交互感,避免了對視頻通信的網路資源的浪費,大幅提高了視頻通信的實際效率。
進一步地,通過在終端本地採用已配置的特效參數進行特效添加,以在各端進行特效顯示,可以大幅降低交互時的資料,且不對視頻的正常解析造成影響。並且,在上述視頻通信過程中,可以僅在視頻通信過程中交互視頻和人臉座標等資訊,降低了性能消耗。在整個特效實現過程中,還支持特效的中斷和恢復,新的特效可以中斷當前特效的顯示,當前特效結束之後可能需要恢復上一次特效,使得每一次互動均是完整的,從而保證最好的使用者體驗。
第8圖是本揭示實施例提供的一種視頻通信的裝置的結構示意圖。該裝置應用於第一終端,參見第8圖,該裝置包括:顯示模組801、第一獲取模組802、第一添加模組803、以及發送模組804。
該顯示模組801用於在至少兩個終端的視頻通信過程中,在視頻通信介面的至少兩個顯示分區分別顯示該至少兩個終端的視頻圖像,各個顯示分區之間不相互重疊。
該第一獲取模組802用於獲取第一特效顯示指令,該第一特效顯示指令用於指示為該至少兩個顯示分區添加第一特效。
該第一添加模組803用於為該至少兩個顯示分區添加該第一特效。
該發送模組804用於向至少一個第二終端發送該第一特效顯示指令,該第二終端為該至少兩個終端中除該第一終端以外的終端。
可選地,該裝置還包括:第二獲取模組,用於獲取該第一終端的分屏顯示指令或者接收任一個第二終端發送的分屏顯示指令,該分屏顯示指令用於指示該第一終端通過分屏顯示的方式顯示該至少兩個終端的視頻圖像。
可選地,當該第一特效顯示指令為掛件特效指令時,該第一 特效為掛件特效,相應地,該第一添加模組803包括:第一獲取單元,用於根據該掛件特效指令,獲取該掛件特效指令對應的至少兩個掛件特效;第二獲取單元,用於獲取該至少兩個終端的視頻圖像的人臉座標;以及第一添加單元,用於基於該至少兩個終端的視頻圖像的人臉座標,分別在該至少兩個終端的視頻圖像的對應位置上添加該至少兩個掛件特效。
可選地,該第二獲取單元,包括:第一識別子單元,用於對該至少兩個終端的視頻圖像分別進行人臉識別,得到該至少兩個終端的視頻圖像的人臉座標;或者,第二識別子單元,用於對該第一終端的視頻圖像進行人臉識別,得到該第一終端的視頻圖像的人臉座標,接收由該至少一個第二終端通過人臉識別得到的該至少一個第二終端的視頻圖像的人臉座標。
可選地,當該第一特效顯示指令為跨分區特效指令時,該第一特效為跨分區特效,相應地,該第一添加模組803還用於在該至少兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的特效。
可選地,該第一添加模組803包括:第二添加單元,用於根據該跨分區特效的運動軌跡參數,在該至少兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的移動特效;以及第三添加單元,用於在特效顯示過程中,根據作為特效中動作接收方的第二終端的視頻圖像中的人體動作的不同,在該至少兩個終端的視頻圖像上添加不同的結局特效,每個結局特效用於指示該跨分區特效的動作結局。
可選地,該第三添加單元包括:第一添加子單元,用於如果檢測到該其他顯示分區中有預設動作,在該移動特效的有效時長結束後,在該至少兩個終端的視頻圖像上添加第一結局特效,該第一結局特效用於指示接收方基於該跨分區特效進行了互動;以及第二添加子單元,用於如果檢測到該其他顯示分區中沒有預設動作,在該移動特效的有效時長結束 後,在該至少兩個終端的視頻圖像上添加第二結局特效,該第二結局特效用於指示接收方未基於該跨分區特效進行互動。
可選地,該裝置還包括:取消模組,用於如果獲取到第二特效顯示指令,取消該至少兩個顯示分區中已添加的第一特效;第二添加模組,用於為該至少兩個顯示分區添加該第二特效顯示指令對應的第二特效;以及第三添加模組,用於當該第二特效的有效時長結束時,為該至少兩個顯示分區重新添加該第一特效。
可選地,該裝置還包括:疊加模組,用於如果獲取到第二特效顯示指令,為已添加了第一特效的該至少兩個顯示分區疊加該第二特效顯示指令對應的第二特效。
可選地,該裝置還包括:第三獲取模組,用於獲取該第一終端的取消分屏指令,通過大小畫面的方式顯示該至少兩個終端的視頻圖像。
可選地,該第一獲取模組802包括:第三獲取單元,用於當檢測到該至少兩個顯示分區中顯示的視頻圖像中均存在指定手勢時,獲取該指定手勢對應的手勢特效指令,該手勢特效指令用於指示為該至少兩個顯示分區中顯示的視頻圖像添加與該指定手勢對應的特效;或第四獲取單元,用於當檢測到該至少兩個顯示分區中顯示的視頻圖像中任一個視頻圖像中存在指定表情時,獲取該指定表情對應的表情特效指令,該指定表情對應的表情特效指令用於指示為該至少兩個顯示分區中顯示的視頻圖像添加與該指定表情對應的特效。
本揭示實施例提供的裝置,通過將視頻通信介面分為互不重疊的多個分區來顯示不同終端的視頻圖像,突破了畫面上的限制,使得在添加特效時,不僅能夠在多個分區上進行特效的添加,而且能夠通過特效的添加,增強交互感,避免了對視頻通信的網路資源的浪費,大幅提高了視頻通信的實際效率。
進一步地,通過在終端本地採用已配置的特效參數進行特效 添加,以在各端進行特效顯示,可以大幅降低交互時的資料,且不對視頻的正常解析造成影響。並且,在上述視頻通信過程中,可以僅在視頻通信過程中交互視頻和人臉座標等資訊,降低了性能消耗。在整個特效實現過程中,還支持特效的中斷和恢復,新的特效可以中斷當前特效的顯示,當前特效結束之後可能需要恢復上一次特效,使得每一次互動均是完整的,從而保證最好的使用者體驗。
上述所有可選技術方案可以採用任意結合形成本揭示的可選實施例,在此不再一一贅述。
需要說明的是,上述實施例提供的視頻通信的裝置在視頻通信時,僅以上述各功能模組的劃分進行舉例說明,實際應用中,可以根據需要而將上述功能分配由不同的功能模組完成,即將裝置的內部結構劃分成不同的功能模組,以完成以上描述的全部或者部分功能。另外,上述實施例提供的視頻通信的裝置與視頻通信的方法實施例屬於同一構思,其具體實現過程詳見方法實施例,這裡不再贅述。
第9圖是本揭示實施例提供的一種終端的結構示意圖。該終端可以用於實施上述實施例所示出的視頻通信方法中的終端所執行的功能。
終端100可以包括射頻(Radio Frequency,RF)電路110、記憶體120(包括有一個或一個以上電腦可讀儲存介質)、輸入單元130、顯示單元140、感測器150、音訊電路160、傳輸模組170、處理器180(包括有一個或者一個以上處理核心)以及電源190等部件。本揭示所屬技術領域中具有通常知識者可以理解第9圖中示出的終端結構並不構成對終端的限定,可以包括比圖示更多或更少的部件,或者組合某些部件,或者不同的部件佈置。
射頻電路110可用於收發資訊或通話過程中,信號的接收和發送,特別地,將基站的下行資訊接收後,交由一個或者一個以上處理器 180處理。另外,將涉及上行的資料發送給基站。通常,射頻電路110包括但不限於天線、至少一個放大器、調諧器、一個或多個振盪器、使用者身份模組(Subscriber Identity Module,SIM)卡、收發信機、耦合器、低雜訊放大器(Low Noise Amplifier,LNA)、雙工器等。此外,射頻電路110還可以通過無線通訊與網路和其他終端通信。所述無線通訊可以使用任一通信標準或協定,包括但不限於全球行動通信系統(Global System for Mobile Communication,GSM)、通用封包無線服務技術分組無線服務(General Packet Radio Service,GPRS)、分碼多工多重存取(Code Division Multiple Access,CDMA)、寬頻多重分碼存取(Wideband Code Division Multiple Access,W-CDMA)、長期演進技術(Long Term Evolution,LTE)、電子郵件、文字訊息(Short Messaging Service,SMS)等。
記憶體120可用於儲存軟體程式以及模組,如上述示例性實施例所示出的終端所對應的軟體程式以及模組,處理器180通過運行儲存在記憶體120的軟體程式以及模組,從而執行各種功能應用以及資料處理,如實現基於視頻的交互等。記憶體120可主要包括儲存程式區和儲存資料區,儲存程式區可儲存作業系統、至少一個功能所需的應用程式(例如聲音播放功能、圖像播放功能等)等。儲存資料區可儲存根據終端100的使用所創建的資料(例如音訊資料、電話本等)等。此外,記憶體120可以包括高速隨機存取記憶體,還可以包括非易失性記憶體,例如至少一個磁碟記憶體件、快閃記憶體器件、或其他易失性固態記憶體件。相應地,記憶體120還可以包括記憶體控制器,以提供處理器180和輸入單元130對記憶體120的訪問。
輸入單元130可用於接收輸入的數位或字元資訊,以及產生與使用者設置以及功能控制有關的鍵盤、滑鼠、操作杆、光學或者軌跡球信號輸入。具體地,輸入單元130可包括觸敏表面131以及其他輸入裝置132。觸敏表面131也稱為觸摸顯示幕或者觸控板,可收集使用者在其上或 附近的觸摸操作(例如使用者使用手指、觸筆等任何適合的物體或附件在觸敏表面131上或在觸敏表面131附近的操作),並根據預先設定的程式驅動相應的連結裝置。可選地,觸敏表面131可包括觸摸檢測裝置和觸摸控制器兩個部分。觸摸檢測裝置檢測使用者的觸摸方位,並檢測觸摸操作帶來的信號,將信號傳送給觸摸控制器。觸摸控制器從觸摸檢測裝置上接收觸摸資訊,並將它轉換成觸點座標再送給處理器180,並能接收處理器180發來的命令並加以執行。此外,可以採用電阻式、電容式、紅外線以及表面聲波等多種類型實現觸敏表面131。除了觸敏表面131,輸入單元130還可以包括其他輸入裝置132。具體地,其他輸入裝置132可以包括但不限於物理鍵盤、功能鍵(例如音量控制按鍵、開關按鍵等)、軌跡球、滑鼠、操作杆等中的一種或多種。
顯示單元140可用於顯示由使用者輸入的資訊或提供給使用者的資訊以及終端100的各種圖形使用者介面,這些圖形使用者介面可以由圖形、文本、圖示、視頻和其任意組合來構成。顯示單元140可包括顯示面板141,可選的,可以採用液晶顯示器(Liquid Crystal Display,LCD)、有機發光二極體(Organic Light-Emitting Diode,OLED)等形式來配置顯示面板141。進一步地,觸敏表面131可覆蓋顯示面板141,當觸敏表面131檢測到在其上或附近的觸摸操作後,傳送給處理器180以確定觸摸事件的類型,隨後處理器180根據觸摸事件的類型在顯示面板141上提供相應的視覺輸出。雖然在第9圖中,觸敏表面131與顯示面板141是作為兩個獨立的部件來實現輸入和輸入功能,但是在某些實施例中,可以將觸敏表面131與顯示面板141集成而實現輸入和輸出功能。
終端100還可包括至少一種感測器150,例如光感測器、運動感測器以及其他感測器。具體地,光感測器可包括環境光感測器及接近感測器。環境光感測器可根據環境光線的明暗來調節顯示面板141的亮度,接近感測器可在終端100移動到耳邊時,關閉顯示面板141和/或背光。作為運 動感測器的一種,重力加速度感測器可檢測各個方向上(一般為三軸)加速度的大小,靜止時可檢測出重力的大小及方向,可用於識別手機姿態的應用(例如橫豎屏切換、相關遊戲、磁力計姿態校準)、振動識別相關功能(比如計步器、敲擊)等。至於終端100還可配置的陀螺儀、氣壓計、濕度計、溫度計、紅外線感測器等其他感測器,在此不再贅述。
音訊電路160、揚聲器161及傳聲器162可提供使用者與終端100之間的音訊介面。音訊電路160可將接收到的音訊資料轉換後的電信號傳輸到揚聲器161,由揚聲器161轉換為聲音信號輸出。另一方面,傳聲器162將收集的聲音信號轉換為電信號,由音訊電路160接收後轉換為音訊資料,再將音訊資料輸出處理器180處理後,經射頻電路110以發送給例如另一終端,或者將音訊資料輸出至記憶體120以便進一步處理。音訊電路160還可能包括耳塞插孔,以提供外設耳機與終端100的通信。
終端100通過傳輸模組170可以幫助使用者收發電子郵件、流覽網頁和訪問流式媒體等,為使用者提供了無線或有線的寬頻網際網路訪問。雖然第9圖示出了傳輸模組170,但是可以理解的是,其並不屬於終端100的必須構成,完全可以根據需要在不改變揭示的本質的範圍內而省略。
處理器180是終端100的控制中心,利用各種介面和線路連結整個終端100的各個部分,通過運行或執行儲存在記憶體120內的軟體程式和/或模組,以及調用儲存在記憶體120內的資料,執行終端100的各種功能和處理資料,從而對終端100進行整體監控。可選地,處理器180可包括一個或多個處理核心。優選的,處理器180可整合應用處理器和調製解調處理器。應用處理器主要處理作業系統、使用者介面和應用程式等,調製解調處理器主要處理無線通訊。可以理解的是,上述調製解調處理器也可以不整合到處理器180中。
終端100還包括給各個部件供電的電源190(例如電池)。優選地,電源可以通過電源管理系統與處理器180邏輯相連,從而通過電源管 理系統實現管理充電、放電、以及功耗管理等功能。電源190還可以包括一個或一個以上的直流或交流電源、再充電系統、電源故障檢測電路、電源轉換器或者逆變器、電源狀態指示器等任意元件。
儘管未示出,終端100還可以包括攝像頭、藍牙模組等,在此不再贅述。具體在本實施例中,終端100的顯示單元140可以是觸控式螢幕顯示器。
記憶體120包括一個或者一個以上的程式儲存於記憶體120中,且經配置以由一個或者一個以上處理器180執行上述一個或者一個以上程式。上述一個或者一個以上程式包含用於實施上述實施例中終端100所執行操作的指令。
在示例性實施例中,還提供了一種儲存有電腦程式的電腦可讀儲存介質,例如儲存有電腦程式的記憶體,上述電腦程式被處理器執行時實現上述實施例中的視頻通信的方法。例如所述電腦可讀儲存介質可以是唯讀記憶體(Read-Only Memory,ROM)、隨機存取記憶體(Random Access Memory,RAM)、唯讀光碟(Compact Disc Read-Only Memory,CD-ROM)、磁帶、軟碟和光資料存放裝置等。
本揭示所屬技術領域中具有通常知識者可以理解實現上述實施例的全部或部分步驟可以通過硬體來完成,也可以通過程式來指令相關的硬體完成,所述程式可以儲存於一種電腦可讀儲存介質中,上述提到的儲存介質可以是唯讀記憶體、磁片或光碟等。
雖然本揭示已用較佳實施例揭露如上,然其並非用以限定本揭示,本揭示所屬技術領域中具有通常知識者在不脫離本揭示之精神和範圍內,當可作各種之更動與潤飾,因此本揭示之保護範圍當視後附之申請專利範圍所界定者為準。

Claims (15)

  1. 一種視頻通信的方法,應用於一第一終端,所述視頻通信的方法包括:在至少兩個終端的視頻通信過程中,在視頻通信介面的至少兩個顯示分區分別顯示所述至少兩個終端的視頻圖像;獲取第一特效顯示指令,其中所述第一特效顯示指令用於指示為所述至少兩個顯示分區添加第一特效;以及為所述至少兩個顯示分區添加所述第一特效,並向至少一個第二終端發送所述第一特效顯示指令,其中所述第二終端為所述至少兩個終端中除所述第一終端以外的終端。
  2. 如請求項1之視頻通信的方法,所述在視頻通信介面的至少兩個顯示分區分別顯示所述至少兩個終端的視頻圖像之前,所述視頻通信的方法還包括:獲取所述第一終端上所觸發的分屏顯示指令,或者接收任一個第二終端發送的分屏顯示指令,其中所述分屏顯示指令用於指示所述第一終端通過分屏顯示的方式顯示所述至少兩個終端的視頻圖像。
  3. 如請求項1之視頻通信的方法,其中當所述第一特效顯示指令為掛件特效指令時,所述第一特效為掛件特效,所述為所述至少兩個顯示分區添加所述第一特效包括:根據所述掛件特效指令,獲取所述掛件特效指令對應的至少兩個掛件特效;獲取所述至少兩個終端的視頻圖像的人臉座標;以及基於所述至少兩個終端的視頻圖像的人臉座標,分別在所述至少兩個終端的視頻圖像的對應位置上添加所述至少兩個掛件特效。
  4. 如請求項3之視頻通信的方法,其中所述獲取所述至少兩個終端的視頻圖像的人臉座標包括:對所述至少兩個終端的視頻圖像分別進行人臉識別,得到所述至少兩 個終端的視頻圖像的人臉座標;或者,對所述第一終端的視頻圖像進行人臉識別,得到所述第一終端的視頻圖像的人臉座標,接收由所述至少一個第二終端通過人臉識別得到的所述至少一個第二終端的視頻圖像的人臉座標。
  5. 如請求項1之視頻通信的方法,其中當所述第一特效顯示指令為跨分區特效指令時,所述第一特效為跨分區特效,所述為所述至少兩個顯示分區添加所述第一特效包括:在所述至少兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的特效。
  6. 如請求項5之視頻通信的方法,其中所述在所述至少兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的特效包括:根據所述跨分區特效的運動軌跡參數,在所述至少兩個終端的視頻圖像上添加顯示效果為從所述一個顯示分區移動至所述其他顯示分區的移動特效;以及在所述移動特效顯示過程中,根據作為特效中動作接收方的第二終端的視頻圖像中的人體動作的不同,在所述至少兩個終端的視頻圖像上添加不同的結局特效,其中每個結局特效用於指示所述跨分區特效的動作結局。
  7. 如請求項6之視頻通信的方法,其中所述根據作為特效中動作接收方的第二終端的視頻圖像中的人體動作的不同,在所述至少兩個終端的視頻圖像上添加不同的結局特效包括:如果檢測到所述其他顯示分區中有預設動作,在所述移動特效的有效時長結束後,在所述至少兩個終端的視頻圖像上添加第一結局特效,其中所述第一結局特效用於指示接收方基於所述跨分區特效進行了互動;如果檢測到所述其他顯示分區中沒有所述預設動作,在所述移動特效的有效時長結束後,在所述至少兩個終端的視頻圖像上添加第二結局特效,其中所述第二結局特效用於指示所述接收方未基於所述跨分區特效進 行互動。
  8. 如請求項1之視頻通信的方法,所述為所述至少兩個顯示分區添加所述第一特效之後,所述視頻通信的方法還包括:如果獲取到第二特效顯示指令,取消所述至少兩個顯示分區中已添加的第一特效;為所述至少兩個顯示分區添加所述第二特效顯示指令對應的第二特效;以及當所述第二特效的有效時長結束時,為所述至少兩個顯示分區重新添加所述第一特效。
  9. 如請求項1之視頻通信的方法,還包括:獲取所述第一終端的取消分屏指令,通過大小畫面的方式顯示所述至少兩個終端的視頻圖像。
  10. 如請求項1之視頻通信的方法,其中所述獲取第一特效顯示指令包括:當檢測到所述至少兩個顯示分區中顯示的視頻圖像中均存在指定手勢時,獲取所述指定手勢對應的手勢特效指令,其中所述手勢特效指令用於指示為所述至少兩個顯示分區中顯示的視頻圖像添加與所述指定手勢對應的特效;或者,當檢測到所述至少兩個顯示分區中顯示的視頻圖像中任一個視頻圖像中存在指定表情時,獲取所述指定表情對應的表情特效指令,其中所述指定表情對應的表情特效指令用於指示為所述至少兩個顯示分區中顯示的視頻圖像添加與所述指定表情對應的特效。
  11. 一種視頻通信的裝置,應用於第一終端,所述視頻通信的裝置包括:一顯示模組,用於在至少兩個終端的視頻通信過程中,在視頻通信介面的至少兩個顯示分區分別顯示所述至少兩個終端的視頻圖像;一第一獲取模組,用於獲取第一特效顯示指令,其中所述第一特效顯 示指令用於指示為所述至少兩個顯示分區添加第一特效;一第一添加模組,用於為所述至少兩個顯示分區添加所述第一特效;以及一發送模組,用於向至少一個第二終端發送所述第一特效顯示指令,其中所述第二終端為所述至少兩個終端中除所述第一終端以外的終端。
  12. 如請求項11之視頻通信的裝置,其中當所述第一特效顯示指令為掛件特效指令時,所述第一特效為掛件特效,所述第一添加模組包括:一第一獲取單元,用於根據所述掛件特效指令,獲取所述掛件特效指令對應的至少兩個掛件特效;一第二獲取單元,用於獲取所述至少兩個終端的視頻圖像的人臉座標;以及一第一添加單元,用於基於所述至少兩個終端的視頻圖像的人臉座標,分別在所述至少兩個終端的視頻圖像的對應位置上添加所述至少兩個掛件特效。
  13. 如請求項11之視頻通信的裝置,其中當所述第一特效顯示指令為跨分區特效指令時,所述第一特效為跨分區特效,所述第一添加模組還用於在所述至少兩個終端的視頻圖像上添加顯示效果為從一個顯示分區移動至其他顯示分區的特效。
  14. 一種終端,包括:至少一處理器;以及至少一記憶體,所述至少一記憶體中存儲有至少一指令,所述至少一指令由所述至少一處理器載入並執行以實現如請求項1至10中任一項之視頻通信的方法。
  15. 一種電腦可讀存儲介質,儲存有至少一指令,所述指令由至少一處理器載入並執行以實現如請求項1至10中任一項之視頻通信的方法。
TW107126230A 2017-08-03 2018-07-27 視頻通信的方法、裝置、終端及電腦可讀儲存介質 TWI683578B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710656897.7 2017-08-03
??201710656897.7 2017-08-03
CN201710656897.7A CN109391792B (zh) 2017-08-03 2017-08-03 视频通信的方法、装置、终端及计算机可读存储介质

Publications (2)

Publication Number Publication Date
TW201919388A true TW201919388A (zh) 2019-05-16
TWI683578B TWI683578B (zh) 2020-01-21

Family

ID=65233379

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107126230A TWI683578B (zh) 2017-08-03 2018-07-27 視頻通信的方法、裝置、終端及電腦可讀儲存介質

Country Status (4)

Country Link
US (1) US11425315B2 (zh)
CN (1) CN109391792B (zh)
TW (1) TWI683578B (zh)
WO (1) WO2019024750A1 (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11212439B2 (en) * 2018-07-24 2021-12-28 Ricoh Company, Ltd. Communication terminal, display method, and non-transitory computer-readable medium for displaying images and controller
CN111629156A (zh) * 2019-02-28 2020-09-04 北京字节跳动网络技术有限公司 图像特效的触发方法、装置和硬件装置
CN110035321B (zh) * 2019-04-11 2022-02-11 北京大生在线科技有限公司 一种在线实时视频的装饰方法与系统
CN109889893A (zh) * 2019-04-16 2019-06-14 北京字节跳动网络技术有限公司 视频处理方法、装置及设备
CN109996026B (zh) * 2019-04-23 2021-01-19 广东小天才科技有限公司 基于穿戴式设备的视频特效互动方法、装置、设备及介质
CN110427805B (zh) * 2019-06-20 2024-03-19 平安科技(深圳)有限公司 视频显示方法、装置、计算机设备和存储介质
CN112132859A (zh) * 2019-06-25 2020-12-25 北京字节跳动网络技术有限公司 贴纸生成方法、装置、介质和电子设备
CN110298327B (zh) * 2019-07-03 2021-09-03 北京字节跳动网络技术有限公司 一种视觉特效处理方法及装置、存储介质与终端
KR20210017081A (ko) 2019-08-06 2021-02-17 삼성전자주식회사 객체에 대응하는 그래픽 요소 표시 방법 및 장치
CN110807728B (zh) 2019-10-14 2022-12-13 北京字节跳动网络技术有限公司 对象的显示方法、装置、电子设备及计算机可读存储介质
CN110851098B (zh) * 2019-10-31 2024-01-12 维沃移动通信有限公司 一种视频窗口显示方法及电子设备
CN111107280B (zh) * 2019-12-12 2022-09-06 北京字节跳动网络技术有限公司 特效的处理方法、装置、电子设备及存储介质
CN111240482B (zh) * 2020-01-10 2023-06-30 北京字节跳动网络技术有限公司 一种特效展示方法及装置
CN112752161B (zh) * 2020-01-13 2023-10-13 腾讯科技(深圳)有限公司 一种基于实时通信的互动方法、社交应用终端及相关装置
CN113315924A (zh) * 2020-02-27 2021-08-27 北京字节跳动网络技术有限公司 图像特效处理方法及装置
CN111371993A (zh) * 2020-03-13 2020-07-03 腾讯科技(深圳)有限公司 一种图像拍摄方法、装置、计算机设备和存储介质
CN111314649B (zh) * 2020-03-16 2021-11-19 哈尔滨海能达科技有限公司 一种建立视频会议的方法、装置及视频会议系统
CN113497898B (zh) * 2020-04-02 2023-04-07 抖音视界有限公司 视频特效配置文件生成方法、视频渲染方法及装置
CN113556500B (zh) * 2020-04-24 2022-05-13 华为技术有限公司 一种视频叠加方法、装置及系统
CN111510645B (zh) * 2020-04-27 2022-09-27 北京字节跳动网络技术有限公司 视频处理方法、装置、计算机可读介质和电子设备
CN111611941B (zh) * 2020-05-22 2023-09-19 腾讯科技(深圳)有限公司 特效处理方法及相关设备
CN114257775B (zh) * 2020-09-25 2023-04-07 荣耀终端有限公司 视频特效添加方法、装置及终端设备
CN114449200B (zh) * 2020-10-30 2023-06-06 华为技术有限公司 音视频通话方法、装置及终端设备
CN112752158B (zh) * 2020-12-29 2023-06-20 北京达佳互联信息技术有限公司 一种视频展示的方法、装置、电子设备及存储介质
US11825239B1 (en) * 2020-12-31 2023-11-21 Snap Inc. Sharing social augmented reality experiences in video calls
CN116077946A (zh) * 2021-11-08 2023-05-09 脸萌有限公司 角色信息交互方法、设备、存储介质及程序产品
JP7465486B2 (ja) 2021-12-30 2024-04-11 17Live株式会社 画像認識のためのシステム、方法、及びコンピュータ可読媒体
CN115278082A (zh) * 2022-07-29 2022-11-01 维沃移动通信有限公司 视频拍摄方法、视频拍摄装置及电子设备
CN115396716B (zh) * 2022-08-23 2024-01-26 北京字跳网络技术有限公司 一种直播视频处理方法、装置、设备及介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60160780A (ja) * 1984-01-31 1985-08-22 Nec Corp 特殊効果用画像記憶装置
US8213774B2 (en) * 2005-11-30 2012-07-03 Broadcom Corporation Spotlight effect in video processing and playback
US8099462B2 (en) * 2008-04-28 2012-01-17 Cyberlink Corp. Method of displaying interactive effects in web camera communication
CN101287093B (zh) * 2008-05-30 2010-06-09 北京中星微电子有限公司 在视频通信中添加特效的方法及视频客户端
KR101513615B1 (ko) * 2008-06-12 2015-04-20 엘지전자 주식회사 이동 단말기 및 그 음성 인식 방법
CN102447873A (zh) * 2010-10-13 2012-05-09 张明 哈哈视频网络视频聊天娱乐辅助系统
US8941707B2 (en) * 2011-12-01 2015-01-27 Tangome, Inc. Video messaging
CN103368929B (zh) * 2012-04-11 2016-03-16 腾讯科技(深圳)有限公司 一种视频聊天方法及系统
US10712936B2 (en) * 2013-03-18 2020-07-14 Lenovo (Beijing) Co., Ltd. First electronic device and information processing method applicable to first or second electronic device comprising a first application
CN105396289A (zh) * 2014-09-15 2016-03-16 掌赢信息科技(上海)有限公司 实时游戏和多媒体会话过程中实现特效的方法及装置
CN104780459A (zh) * 2015-04-16 2015-07-15 美国掌赢信息科技有限公司 一种即时视频中的特效加载方法和电子设备
CN104902212B (zh) * 2015-04-30 2019-05-10 努比亚技术有限公司 一种视频通信方法及装置
US20170168628A1 (en) * 2015-12-15 2017-06-15 Le Holdings (Beijing) Co., Ltd. Method and electronic device for split-screen display
CN105578113A (zh) * 2016-02-02 2016-05-11 北京小米移动软件有限公司 一种视频通信的方法、装置和系统
CN106331880B (zh) * 2016-09-09 2020-12-04 腾讯科技(深圳)有限公司 一种信息处理方法及系统

Also Published As

Publication number Publication date
US20200177823A1 (en) 2020-06-04
CN109391792B (zh) 2021-10-29
TWI683578B (zh) 2020-01-21
US11425315B2 (en) 2022-08-23
WO2019024750A1 (zh) 2019-02-07
CN109391792A (zh) 2019-02-26

Similar Documents

Publication Publication Date Title
TWI683578B (zh) 視頻通信的方法、裝置、終端及電腦可讀儲存介質
TWI672629B (zh) 表情展示方法、裝置及電腦可讀取儲存媒體
CN109087239B (zh) 一种人脸图像处理方法、装置及存储介质
CN108255304B (zh) 基于增强现实的视频数据处理方法、装置和存储介质
WO2020063758A1 (en) Game Picture Display Method and Apparatus, Storage Medium and Electronic Device
CN108234276B (zh) 一种虚拟形象之间互动的方法、终端及系统
WO2019029406A1 (zh) 表情展示方法、装置、计算机可读存储介质及终端
CN109614176B (zh) 一种应用界面布局方法、终端及计算机可读存储介质
CN105320262A (zh) 操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜
CN111031108B (zh) 一种同步方法及电子设备
CN107087137B (zh) 呈现视频的方法和装置及终端设备
CN110300274B (zh) 视频文件的录制方法、装置及存储介质
CN110096326A (zh) 一种截屏方法、终端设备及计算机可读存储介质
CN108900407B (zh) 会话记录的管理方法、装置及存储介质
CN109683768A (zh) 一种应用的操作方法及移动终端
CN109885371A (zh) 防误触交互方法、移动终端及计算机可读存储介质
CN106330672B (zh) 一种即时通信方法及系统
CN111045628A (zh) 一种信息传输方法及电子设备
CN116320721A (zh) 一种拍摄方法、装置、终端及存储介质
CN115193043A (zh) 一种游戏信息发送方法、装置、计算机设备及存储介质
CN115379113A (zh) 拍摄处理方法、装置、设备及存储介质
CN112121409A (zh) 一种游戏交互方法、柔性屏终端及计算机可读存储介质
CN110032411A (zh) 应用智能显示控制方法、终端及计算机可读存储介质
CN110753030B (zh) 一种语音通讯方法、可穿戴设备及计算机可读存储介质
WO2024082883A1 (zh) 虚拟对象的交互方法、装置、设备及计算机可读存储介质