TWI743669B - 設定多使用者虛擬實境聊天環境的方法與裝置 - Google Patents

設定多使用者虛擬實境聊天環境的方法與裝置 Download PDF

Info

Publication number
TWI743669B
TWI743669B TW109103368A TW109103368A TWI743669B TW I743669 B TWI743669 B TW I743669B TW 109103368 A TW109103368 A TW 109103368A TW 109103368 A TW109103368 A TW 109103368A TW I743669 B TWI743669 B TW I743669B
Authority
TW
Taiwan
Prior art keywords
participant
avatar
virtual reality
scene
free operation
Prior art date
Application number
TW109103368A
Other languages
English (en)
Other versions
TW202036263A (zh
Inventor
李承祐
Original Assignee
新加坡商鴻運科股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 新加坡商鴻運科股份有限公司 filed Critical 新加坡商鴻運科股份有限公司
Publication of TW202036263A publication Critical patent/TW202036263A/zh
Application granted granted Critical
Publication of TWI743669B publication Critical patent/TWI743669B/zh

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/57Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for processing of video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046Interoperability with other network applications or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1818Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Computing Systems (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

一種設定多使用者虛擬實境聊天環境的方法。自複數虛擬實境場景中選擇一個虛擬實境聊天場景,令第一參與者與第二參與者加入該虛擬實境聊天場景。在該虛擬實境聊天場景中放置該第一參與者之第一頭像與該第二參與者之第二頭像,接收與該第一參與者相關的聲音訊號及與該第二參與者相關的聲音訊號,取得與該第一參與者相關的聲音訊號之第一音量值及該第二參與者相關的聲音訊號之第二音量值。根據該第一音量值與該第二音量值將該虛擬實境聊天場景中之該第一頭像與該第二頭像之間的距離由第一距離調整為第二距離。

Description

設定多使用者虛擬實境聊天環境的方法與裝置
本發明係有關於電腦技術,且特別有關於一種設定多使用者虛擬實境聊天環境的方法與裝置。
使用者要與親友一起互動都必須在同一個地方或是透過電話聊天軟體交談等方式。目前的技術可以讓使用者透過電話或是聊天軟體來與遠方好友交談,但卻無法體驗到與遠方好友一起互動的感覺,例如,即時互動交談、氛圍感染等情境。
有鑑於此,本發明提供了一種設定多使用者虛擬實境聊天環境的方法與裝置,藉由虛擬實境(Virtual Reality,VR),根據使用者輸入的資訊,建立出和現實相仿的虛擬人物,達到與他人互動交談的真實感受。
本發明實施例提供一種設定多使用者虛擬實境聊天環境的方法,應用於一電子裝置中,包括下列步驟:自複數虛擬實境場景中選擇一個虛擬實境聊天場景;令一第一參與者與一第二參與者加入該虛擬實境聊天場景;在該虛擬實境聊天場景中放置該第一參與者之一第一頭像與該第二參與者之一第二 頭像;接收與該第一參與者相關的聲音訊號及與該第二參與者相關的聲音訊號;取得與該第一參與者相關的聲音訊號之一第一音量值及該第二參與者相關的聲音訊號之一第二音量值;及根據該第一音量值與該第二音量值將該虛擬實境聊天場景中之該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離由一第一距離調整為一第二距離。
本發明實施例還提供一種設定多使用者虛擬實境聊天環境的裝置,包括:一處理單元,用於執行一種設定多使用者虛擬實境聊天環境的方法,包括:自複數虛擬實境場景中選擇一個虛擬實境聊天場景;令一第一參與者與一第二參與者加入該虛擬實境聊天場景;在該虛擬實境聊天場景中放置該第一參與者之一第一頭像與該第二參與者之一第二頭像;接收與該第一參與者相關的聲音訊號及與該第二參與者相關的聲音訊號;取得與該第一參與者相關的聲音訊號之一第一音量值及該第二參與者相關的聲音訊號之一第二音量值;及根據該第一音量值與該第二音量值將該虛擬實境聊天場景中之該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離由一第一距離調整為一第二距離。
以下結合附圖和具體實施例對本發明進行詳細描述,但不作為對本發明的限定。
101:處理單元
102:頭戴顯示裝置
110、110a、110b、110c、110d:虛擬實境系統
111:應用商店
112:追蹤模組
113:VR引擎
120:VR伺服器
121:顯示裝置
122:音訊輸出
123:光學區塊
124:定位器
125:位置傳感器
126:慣性測量單元
130a、130b、130c:使用者
200:VR聊天場景
201a、201b、201c:頭像
202a、202b、202c:自由操作區
900:裝置
901:處理器
902:記憶體
903:大量儲存裝置
904:網路介面
圖1係顯示本發明實施例之虛擬實境系統的硬體架構圖。
圖2係顯示本發明另一實施例之虛擬實境系統的硬體架構圖。
圖3係顯示本發明實施例之設定多使用者虛擬實境聊天環境的裝置的硬體架構示意圖。
圖4係顯示本發明實施例之複數使用者各自通過獨立的虛擬實境伺服器加入聊天環境的示意圖。
圖5係顯示本發明實施例之複數使用者通過其中一個使用者的虛擬實境伺服器加入聊天環境的示意圖。
圖6係顯示本發明實施例之設定多使用者虛擬實境聊天環境的方法的步驟流程圖。
圖7係顯示本發明實施例之虛擬實境聊天場景的示意圖。
圖8係顯示本發明另一實施例之虛擬實境聊天場景的示意圖。
圖9係顯示本發明另一實施例之虛擬實境聊天場景的示意圖。
圖10係顯示本發明另一實施例之虛擬實境聊天場景的示意圖。
圖11係顯示本發明實施例之虛擬實境聊天場景調整的示意圖。
為了能夠更清楚地理解本發明的上述目的、特徵和優點,下面結合附圖和具體實施例對本發明進行詳細描述。需要說明的是,在不衝突的情況下,本申請的實施例及實施例中的特徵可以相互組合。
在下面的描述中闡述了很多具體細節以便於充分理解本發明,所描述的實施例僅僅是本發明一部分實施例,而不是全部的實施例。基於本發明中的實施例,本領域普通技術人員在沒有做出創造性勞動前提下所獲得的所有其他實施例,都屬於本發明保護的範圍。
除非另有定義,本文所使用的所有的技術和科學術語與屬於本發明的技術領域的技術人員通常理解的含義相同。本文中在本發明的說明書中所使用的術語只是為了描述具體的實施例的目的,不是旨在於限制本發明。
需要說明的是,在本發明中涉及“第一”、“第二”等的描述僅用於描述目的,而不能理解為指示或暗示其相對重要性或者隱含指明所指示的技術特徵的數量。由此,限定有“第一”、“第二”的特徵可以明示或者隱含地包括至少一個該特徵。另外,各個實施例之間的技術方案可以相互結合,但是必須是以本領域普通技術人員能夠實現為基礎,當技術方案的結合出現相互矛盾或無法實現時應當認為這種技術方案的結合不存在,也不在本發明要求的保護範圍之內。
本發明實施例之設定多使用者虛擬實境(Virtual Reality,VR)聊天環境的方法執行於一電子裝置中,該電子裝置可能為VR裝置、遊戲機、個人電腦或智慧型手機。
圖1係顯示本發明實施例之虛擬實境系統的硬體架構圖。處理單元101輸出一或多個VR場景給頭戴顯示裝置102。頭戴顯示裝置102接收該VR場景,並將該VR場景顯示給一活躍使用者(Active User)。頭戴顯示裝置102可設置在可穿戴VR耳機上。當該活躍使用者將可穿戴VR耳機戴上時,頭戴顯示裝置102提供VR景色給該活躍使用者。頭戴顯示裝置102具有一顯示裝置121、一音訊輸出122、光學區塊(Optical Blocks)123、定位器124、一位置傳感器125與一慣性測量單元(Inertial measurement unit,IMU)126。頭戴顯示裝置102可參考美國公開專利(US 20170131774)的VR耳機。
在某些實施例中,處理單元101可能是電腦、VR伺服器、智慧型手機、遊戲機或任何可控制或驅動頭戴顯示裝置102的裝置。處理單元101可參考美國公開專利(US 20170131774)的VR控制台(Console)。處理單元101包括一應用商店111、一追蹤模組112與一VR引擎113。應用商店111儲存VR應用程式。每一個VR應用程式提供至少一個VR場景。追蹤模組112追蹤並輸出頭戴顯 示裝置102的移動和位置給VR引擎113。VR引擎113判斷該活躍使用者的頭像在該VR場景中的位置。
處理單元101可通過無線傳輸通道與頭戴顯示裝置102連線,也可通過有線傳輸通道與頭戴顯示裝置102連線。處理單元101可與頭戴顯示裝置102耦接,使得處理單元101與頭戴顯示裝置102成為一固定實體。圖2係顯示本發明另一實施例之虛擬實境系統的硬體架構圖。VR裝置110d為VR系統110的其中一個實施態樣,其中處理單元101與頭戴顯示裝置102整合在同一個硬體內。另一方面,處理單元101不與頭戴顯示裝置102耦接,頭戴顯示裝置102以行動連線方式與處理單元101連接。
圖3係顯示本發明實施例之設定多使用者虛擬實境聊天環境的裝置的硬體架構示意圖。本發明實施例之設定多使用者虛擬實境聊天環境的方法可由儲存在裝置900的大量儲存裝置(Mass Storage) 903中的電腦程式來執行。執行該方法的電腦程式在由處理器901載入到記憶體902時,令裝置900的處理器901執行該設定多使用者虛擬實境聊天環境的方法。處理器901通過網路介面904與其它實體溝通。
圖4係顯示本發明實施例之複數使用者各自通過獨立的虛擬實境伺服器加入聊天環境的示意圖。VR系統110a、110b與110c的每一個都表示本發明實施例中的VR系統110。在一實施例中,VR伺服器120可以是處理單元110的一種實施態樣。在VR伺服器120中的應用程式商店111提供複數VR應用程式中的其中一個VR應用程式給VR系統110a、110b與110c。在一實施例中,VR伺服器120的追蹤模組112追蹤VR系統110a的使用者130a、VR系統110b的使用者130b與VR系統110c的使用者130c。在一實施例中,VR伺服器120的VR引擎113判斷使用者 130a使用者130b與使用者130c的頭像位置,並且將該些頭像放置在該VR應用程式提供的場景中。
圖5係顯示本發明實施例之複數使用者通過其中一個使用者的虛擬實境伺服器加入聊天環境的示意圖。在本實施例中,VR系統110b的處理單元101做為VR伺服器120。任一個處理單元101執行如圖6所示的設定多使用者虛擬實境聊天環境的方法,且處理單元101是主要的處理單元。舉例來說,圖4中的主處理單元為VR伺服器120,而圖5中的主處理單元為VR系統110b的處理單元101。根據使用者操作,圖5中的VR系統110a與110c的處理單元101可做為主處理單元。
圖6係顯示本發明實施例之設定多使用者虛擬實境聊天環境的方法的步驟流程圖。主處理單元接收使用者130a、130b與130c的使用者資料(步驟S1),並且根據接收的使用者資料產生使用者130a、130b與130c的個人檔案(步驟S2)。舉例來說,使用者的個人檔案包括使用者的肖像影像、性別、身高與體重。根據使用者130a、130b與130c的個人檔案,主處理單元為使用者130a、130b與130c各建立一個頭像(步驟S3)。主處理單元接收來自VR系統110a參加聊天的邀請,並且將該邀請傳送給VR系統110b與110c(步驟S4)。主處理單元令該些使用者自複數VR場景中選擇一個VR場景,並且設定與聊天有關的VR應用程式之該選擇的VR場景(步驟S5)。主處理單元令使用者130a、130b與130c加入該聊天而成為參與者,並且令使用者130a、130b與130c的頭像進入與該聊天相關的該選擇的VR場景(步驟S6)。
圖7係顯示本發明實施例之虛擬實境聊天場景的示意圖。主處理單元將使用者130a的頭像201a、使用者130b的頭像201b與使用者130c的頭像201c分配至VR聊天場景200中(步驟S7)。
主處理單元監控使用者聲音並處理背景音樂(步驟S8)。舉例來說,主處理單元分別接收VR系統110a與110b的使用者130a與130b的聲意訊號。
主處理單元取得表示與說話參與者(例如,使用者130a)相關的聲音訊號音量的第一音量值x 1。主處理單元根據第一音量值x 1將該VR聊天場景中之該第一參與者的第一頭像與該第二參與者的第二頭像之間的距離由第一距離y 1調整為第二距離y 2。主處理單元重新安排該選擇的VR場景與該些頭像(步驟S9)。在步驟S9中,若該第一參與者的第一音量值x 1與該第二參與者的第二音量值之至少其一超過一音量臨界值x 2,主處理單元縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離。舉例來說,主處理單元根據公式(1)取得第二距離y 2
Figure 109103368-A0305-02-0009-1
參考圖7,主處理單元定義環繞使用者130a之頭像201a的第一自由操作區202a及環繞使用者130b之頭像201b的第一自由操作區202b。
在步驟S9中,當縮減該虛擬實境聊天場景中該第一頭像與該第二頭像之間的距離時,主處理單元重新安排該VR場景,並且防止該第一參與者之該第一頭像進入該第二參與者之該第二自由操作區及防止該第二參與者之該第二頭像進入該第一參與者之該第一自由操作區。圖8係顯示本發明另一實施例之虛擬實境聊天場景的示意圖。舉例來說,當縮減該VR聊天場景中第一頭像201a與第二頭像201b之間的距離時,主處理單元防止使用者130a之頭像201a進入使用者130b之自由操作區202b及防止使用者130b之頭像201b進入使用者130a之自由操作區202a。
主處理單元判斷是否有另一個參與者參與聊天(步驟S10)。圖9係顯示本發明另一實施例之虛擬實境聊天場景的示意圖。當有第三參與者(例如,使用者130c)要求或被邀請參與聊天,主處理單元允許使用者130c加入聊天(步驟S6),放置使用者130c的頭像201c到VR聊天場景200中(步驟S7),並且分別自VR系統110a、110b與110c接收使用者130a、130b與130c接收聲音訊號(步驟S8)。主處理單元重新安排該VR場景與該些頭像(步驟S9)。 主處理單元定義環繞使用者130c之頭像201c的第三自由操作區202c。在步驟S9中,當縮減該虛擬實境聊天場景中該第三頭像與該第一頭像之間的距離時,主處理單元重新安排該VR場景,並且防止該第三參與者之該第三頭像進入該第一自由操作區,及防止該第一參與者之該第一頭像進入該第三參與者之該第三自由操作區。當縮減該虛擬實境聊天場景中該第三頭像與該第二頭像之間的距離時,主處理單元防止該第三參與者之該第三頭像進入該第二自由操作區,及防止該第二參與者之該第二頭像進入該第三參與者之該第三自由操作區。
當縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離時,主處理單元可根據公式(1)重新配置該第一頭像、該第二頭像與該第三頭像的相對位置。同樣的,主處理單元可讓更多參與者加入聊天。
主處理單元自其中一參與者(例如,使用者130a)的複數聊天模式中選擇一活躍聊天模式。當選擇一耳語模式並將該耳語模式啟動以做為該活躍聊天模式時,主處理單元選擇一接受參與者(Recipient Participant),其中該接受參與者單獨接收與在該耳語模式中之使用者130a有關的聲音訊號(步驟S11)。舉例來說,主處理單元被VR系統110a通知選擇使用者130a為接受參與者,以單獨接收與使用者130a有關的聲音訊號。主處理單元發出提示訊息要求使用者130b同意改變位置並為了使用者130c退後。圖10係顯示本發明另一實施例之虛擬實境聊天場景的示意圖。若使用者130b同意改變位置並為了使用者130c退後,主處理單元重新安排頭像201c與201b的位置,並且產生VR系統110a與110c之間專門用作音訊傳輸的通道。
根據場景200中的一些頭像,也就是加入聊天的使用者,主處理單元可調整場景200的尺寸。圖11係顯示本發明實施例之虛擬實境聊天場景調整的示意圖。VR場景200a是指調整前的場景200,而VR場景200b是指調整後的場景200。VR場景200a的尺寸是Y1(寬)乘以X1(長)。VR場景200b的尺寸是Y2(寬)乘以X2(長)。主處理單元通過在一轉場週期(Transition Period)T內將場景200a轉場到場景200b以完成場景調整。
主處理單元使用一查表(Lookup Table)來判斷轉場週期T以完成場景調整。舉例來說,主處理單元使用表1以自索引D1、D2、D3、D4與D5中獲取索引D。
Figure 109103368-A0305-02-0011-3
主處理單元根據公式(2)取得參數S:
Figure 109103368-A0305-02-0011-2
主處理單元利用參數S與表2自時間值K1、K2、K3、K4與K5中獲取數值K,並且將K設為轉場週期T的值。主處理單元在週期T內執行與完成VR場景調整。
Figure 109103368-A0305-02-0011-4
綜上所述,本發明實施例的設定多使用者虛擬實境聊天環境的方法與裝置根據參與者的音量將該虛擬實境聊天場景中的參與者的頭像之間的距離由第一距離調整為第二距離。VR場景調整可根據查表在有限時間週期內進 行。本方法允許在VR聊天場景中處於耳語模式的參與者可以彼此以耳語方式溝通。
以上實施例僅用以說明本發明的技術方案而非限制,儘管參照實施例對本發明進行了詳細的說明,本領域的普通技術人員應該理解,可以對本發明的技術方案進行修改或等同替換,而不脫離本發明技術方案的精神和範圍。

Claims (8)

  1. 一種設定多使用者虛擬實境聊天環境的方法,應用於一電子裝置中,包括下列步驟:自複數虛擬實境場景中選擇一個虛擬實境聊天場景;令一第一參與者與一第二參與者加入該虛擬實境聊天場景;在該虛擬實境聊天場景中放置該第一參與者之一第一頭像與該第二參與者之一第二頭像;接收與該第一參與者相關的聲音訊號及與該第二參與者相關的聲音訊號;取得與該第一參與者相關的聲音訊號之一第一音量值及該第二參與者相關的聲音訊號之一第二音量值;根據該第一音量值與該第二音量值將該虛擬實境聊天場景中之該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離由一第一距離調整為一第二距離;令一第三參與者加入該虛擬實境聊天;在該虛擬實境聊天場景中放置該第三參與者之一第三頭像;定義環繞該第三參與者之該第三頭像之一第三自由操作區;及當縮減該虛擬實境聊天場景中該第三參與者之該第三頭像與該第二參與者之該第二頭像之間的距離時,防止該第三參與者之該第三頭像進入該第一自由操作區與該第二自由操作區,防止該第一參與者之該第一頭像進入該第二自由操作區與該第三自由操作區,及防止該第二參與者之該第二頭像進入該第一自由操作區與該第三自由操作區。
  2. 如請求項1之設定多使用者虛擬實境聊天環境的方法,其更包括下列步驟:若該第一音量值與該第二音量值之至少其一超過一音量臨界值,縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離。
  3. 如請求項1之設定多使用者虛擬實境聊天環境的方法,其更包括下列步驟: 定義環繞該第一參與者之該第一頭像之一第一自由操作區及環繞該第二參與者之該第二頭像之一第二自由操作區;及當縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離時,防止該第一參與者之該第一頭像進入該第二自由操作區及防止該第二參與者之該第二頭像進入該第一自由操作區。
  4. 如請求項3之設定多使用者虛擬實境聊天環境的方法,其更包括下列步驟:當縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離時,重新定位該第一頭像、該第二頭像與該第三頭像的相對位置。
  5. 一種設定多使用者虛擬實境聊天環境的裝置,包括:一處理單元,用於執行一種設定多使用者虛擬實境聊天環境的方法,包括:自複數虛擬實境場景中選擇一個虛擬實境聊天場景;令一第一參與者與一第二參與者加入該虛擬實境聊天場景;在該虛擬實境聊天場景中放置該第一參與者之一第一頭像與該第二參與者之一第二頭像;接收與該第一參與者相關的聲音訊號及與該第二參與者相關的聲音訊號;取得與該第一參與者相關的聲音訊號之一第一音量值及該第二參與者相關的聲音訊號之一第二音量值;及根據該第一音量值與該第二音量值將該虛擬實境聊天場景中之該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離由一第一距離調整為一第二距離;其中,該處理單元更用於執行下列步驟:令一第三參與者加入該虛擬實境聊天;在該虛擬實境聊天場景中放置該第三參與者之一第三頭像;定義環繞該第三參與者之該第三頭像之一第三自由操作區;及當縮減該虛擬實境聊天場景中該第三參與者之該第三頭像與該第二參與者之該第二頭像之間的距離時,防止該第三參與者之該第三頭像進入該第一自由操作區與該第二自由操作區,防止該第一參與者之該第一頭像進入該第二自由 操作區與該第三自由操作區,及防止該第二參與者之該第二頭像進入該第一自由操作區與該第三自由操作區。
  6. 如請求項5之設定多使用者虛擬實境聊天環境的裝置,其中,該處理單元更用於執行下列步驟:若該第一音量值與該第二音量值之至少其一超過一音量臨界值,縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離。
  7. 如請求項5之設定多使用者虛擬實境聊天環境的裝置,其中,該處理單元更用於執行下列步驟:定義環繞該第一參與者之該第一頭像之一第一自由操作區及環繞該第二參與者之該第二頭像之一第二自由操作區;及當縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離時,防止該第一參與者之該第一頭像進入該第二自由操作區及防止該第二參與者之該第二頭像進入該第一自由操作區。
  8. 如請求項7之設定多使用者虛擬實境聊天環境的裝置,其中,該處理單元更用於執行下列步驟:當縮減該虛擬實境聊天場景中該第一參與者之該第一頭像與該第二參與者之該第二頭像之間的距離時,重新定位該第一頭像、該第二頭像與該第三頭像的相對位置。
TW109103368A 2019-03-28 2020-02-04 設定多使用者虛擬實境聊天環境的方法與裝置 TWI743669B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/367388 2019-03-28
US16/367,388 US10846898B2 (en) 2019-03-28 2019-03-28 Method and device for setting a multi-user virtual reality chat environment

Publications (2)

Publication Number Publication Date
TW202036263A TW202036263A (zh) 2020-10-01
TWI743669B true TWI743669B (zh) 2021-10-21

Family

ID=72606212

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109103368A TWI743669B (zh) 2019-03-28 2020-02-04 設定多使用者虛擬實境聊天環境的方法與裝置

Country Status (3)

Country Link
US (2) US10846898B2 (zh)
CN (1) CN111756616B (zh)
TW (1) TWI743669B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10846898B2 (en) * 2019-03-28 2020-11-24 Nanning Fugui Precision Industrial Co., Ltd. Method and device for setting a multi-user virtual reality chat environment
US11302063B2 (en) * 2020-07-21 2022-04-12 Facebook Technologies, Llc 3D conversations in an artificial reality environment
US11750774B2 (en) 2020-10-19 2023-09-05 Sophya Inc. Systems and methods for triggering livestream communications between users based on proximity-based criteria for avatars within virtual environments that correspond to the users
US11282278B1 (en) * 2021-04-02 2022-03-22 At&T Intellectual Property I, L.P. Providing adaptive asynchronous interactions in extended reality environments
US12001750B2 (en) * 2022-04-20 2024-06-04 Snap Inc. Location-based shared augmented reality experience system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130155169A1 (en) * 2011-12-14 2013-06-20 Verizon Corporate Services Group Inc. Method and system for providing virtual conferencing
US20130321568A1 (en) * 2012-06-01 2013-12-05 Hal Laboratory, Inc. Storage medium storing information processing program, information processing device, information processing system, and information processing method
US20170132845A1 (en) * 2015-11-10 2017-05-11 Dirty Sky Games, LLC System and Method for Reducing Virtual Reality Simulation Sickness
US9729820B1 (en) * 2016-09-02 2017-08-08 Russell Holmes Systems and methods for providing real-time composite video from multiple source devices

Family Cites Families (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010044725A1 (en) * 1996-11-19 2001-11-22 Koichi Matsuda Information processing apparatus, an information processing method, and a medium for use in a three-dimensional virtual reality space sharing system
US7379961B2 (en) * 1997-04-30 2008-05-27 Computer Associates Think, Inc. Spatialized audio in a three-dimensional computer-based scene
GB9800397D0 (en) * 1998-01-09 1998-03-04 Philips Electronics Nv Virtual environment viewpoint control
GB9817834D0 (en) * 1998-08-14 1998-10-14 British Telecomm Predicting avatar movement in a distributed virtual environment
US6784901B1 (en) * 2000-05-09 2004-08-31 There Method, system and computer program product for the delivery of a chat message in a 3D multi-user environment
JP4280901B2 (ja) * 2002-02-05 2009-06-17 株式会社セガ 音声チャットシステム
US6853398B2 (en) * 2002-06-21 2005-02-08 Hewlett-Packard Development Company, L.P. Method and system for real-time video communication within a virtual environment
JP4015173B1 (ja) * 2006-06-16 2007-11-28 株式会社コナミデジタルエンタテインメント ゲーム音出力装置、ゲーム音制御方法、および、プログラム
GB2447095B (en) * 2007-03-01 2010-07-28 Sony Comp Entertainment Europe Entertainment device and method
US20080294721A1 (en) * 2007-05-21 2008-11-27 Philipp Christian Berndt Architecture for teleconferencing with virtual representation
US20090106670A1 (en) * 2007-10-20 2009-04-23 Philipp Christian Berndt Systems and methods for providing services in a virtual environment
US20130218688A1 (en) * 2007-09-26 2013-08-22 Aq Media, Inc. Audio-visual navigation and communication dynamic memory architectures
US20090089685A1 (en) * 2007-09-28 2009-04-02 Mordecai Nicole Y System and Method of Communicating Between A Virtual World and Real World
US8140982B2 (en) * 2007-11-08 2012-03-20 International Business Machines Corporation Method and system for splitting virtual universes into distinct entities
WO2009104564A1 (ja) * 2008-02-20 2009-08-27 インターナショナル・ビジネス・マシーンズ・コーポレーション 仮想空間における会話サーバ、会話のための方法及びコンピュータ・プログラム
US8605863B1 (en) * 2008-03-18 2013-12-10 Avaya Inc. Method and apparatus for providing state indication on a telephone call
CN102084354A (zh) * 2008-04-05 2011-06-01 社会传播公司 基于共享虚拟区域通信环境的装置和方法
US8875026B2 (en) * 2008-05-01 2014-10-28 International Business Machines Corporation Directed communication in a virtual environment
US20100077318A1 (en) * 2008-09-22 2010-03-25 International Business Machines Corporation Modifying environmental chat distance based on amount of environmental chat in an area of a virtual world
US9384469B2 (en) * 2008-09-22 2016-07-05 International Business Machines Corporation Modifying environmental chat distance based on avatar population density in an area of a virtual world
US20100169796A1 (en) * 2008-12-28 2010-07-01 Nortel Networks Limited Visual Indication of Audio Context in a Computer-Generated Virtual Environment
US8424075B1 (en) * 2008-12-31 2013-04-16 Qurio Holdings, Inc. Collaborative firewall for a distributed virtual environment
US8577060B2 (en) * 2009-07-02 2013-11-05 Avaya Inc. Method and apparatus for dynamically determining mix sets in an audio processor
US8334842B2 (en) * 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system
US8653349B1 (en) * 2010-02-22 2014-02-18 Podscape Holdings Limited System and method for musical collaboration in virtual space
WO2011149558A2 (en) * 2010-05-28 2011-12-01 Abelow Daniel H Reality alternate
US8949717B2 (en) * 2010-10-18 2015-02-03 Yehonatan Rafael Maor Method of controlling avatars
US9305319B2 (en) * 2010-10-18 2016-04-05 Yehonatan Rafael Maor Controlling social network virtual assembly places through probability of interaction methods
US9223786B1 (en) * 2011-03-15 2015-12-29 Motion Reality, Inc. Communication in a sensory immersive motion capture simulation environment
US8676937B2 (en) * 2011-05-12 2014-03-18 Jeffrey Alan Rapaport Social-topical adaptive networking (STAN) system allowing for group based contextual transaction offers and acceptances and hot topic watchdogging
JP2013007921A (ja) * 2011-06-24 2013-01-10 Sony Corp 音制御装置、プログラム及び制御方法
US9311742B1 (en) * 2011-07-18 2016-04-12 Motion Reality, Inc. Navigating an avatar through a virtual world in a motion capture simulation environment
US9159152B1 (en) * 2011-07-18 2015-10-13 Motion Reality, Inc. Mapping between a capture volume and a virtual world in a motion capture simulation environment
US20130083151A1 (en) * 2011-09-30 2013-04-04 Lg Electronics Inc. Electronic device and method for controlling electronic device
WO2015103439A1 (en) * 2014-01-03 2015-07-09 Harman International Industries, Incorporated Gesture interactive wearable spatial audio system
US20160292966A1 (en) * 2015-03-31 2016-10-06 Gary Denham System and method of providing a virtual shopping experience
US10275098B1 (en) * 2015-07-12 2019-04-30 sigmund lindsay clements Laser mid-air hologram touch input buttons for a device
US10154071B2 (en) * 2015-07-29 2018-12-11 International Business Machines Corporation Group chat with dynamic background images and content from social media
US10007482B2 (en) * 2015-09-16 2018-06-26 Hashplay Inc. Method and system for voice chat in virtual environment
US10181218B1 (en) * 2016-02-17 2019-01-15 Steelcase Inc. Virtual affordance sales tool
US10168768B1 (en) * 2016-03-02 2019-01-01 Meta Company Systems and methods to facilitate interactions in an interactive space
JP6783541B2 (ja) * 2016-03-30 2020-11-11 株式会社バンダイナムコエンターテインメント プログラム及び仮想現実体験提供装置
US10722800B2 (en) * 2016-05-16 2020-07-28 Google Llc Co-presence handling in virtual reality
US9998606B2 (en) * 2016-06-10 2018-06-12 Glen A. Norris Methods and apparatus to assist listeners in distinguishing between electronically generated binaural sound and physical environment sound
US10235809B2 (en) * 2016-06-30 2019-03-19 Microsoft Technology Licensing, Llc Reality to virtual reality portal for dual presence of devices
CN106200956A (zh) * 2016-07-07 2016-12-07 北京时代拓灵科技有限公司 一种虚拟现实领域多媒体呈现和交互的方法
US20180015362A1 (en) * 2016-07-13 2018-01-18 Colopl, Inc. Information processing method and program for executing the information processing method on computer
WO2018020766A1 (ja) * 2016-07-28 2018-02-01 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
WO2018031621A1 (en) * 2016-08-11 2018-02-15 Magic Leap, Inc. Automatic placement of a virtual object in a three-dimensional space
US20180095636A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180095635A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180096505A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180096507A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180123813A1 (en) * 2016-10-31 2018-05-03 Bragi GmbH Augmented Reality Conferencing System and Method
US10817066B2 (en) * 2016-12-05 2020-10-27 Google Llc Information privacy in virtual reality
CN106657060A (zh) * 2016-12-21 2017-05-10 惠州Tcl移动通信有限公司 一种基于现实场景的vr通讯方法及系统
JP6266814B1 (ja) * 2017-01-27 2018-01-24 株式会社コロプラ 情報処理方法及び当該情報処理方法をコンピュータに実行させるためのプログラム
CN107168518B (zh) * 2017-04-05 2020-06-23 北京小鸟看看科技有限公司 一种用于头戴显示器的同步方法、装置及头戴显示器
US11054272B2 (en) * 2017-05-11 2021-07-06 Disney Enterprises, Inc. Physical navigation guided via story-based augmented and/or mixed reality experiences
US10547654B2 (en) * 2017-05-16 2020-01-28 Microsoft Technology Licensing, Llc Concurrent engagement with live content of multiple conference sessions
US10390166B2 (en) * 2017-05-31 2019-08-20 Qualcomm Incorporated System and method for mixing and adjusting multi-input ambisonics
EP3635949A1 (en) * 2017-06-09 2020-04-15 PCMS Holdings, Inc. Spatially faithful telepresence supporting varying geometries and moving users
US10768776B1 (en) * 2017-08-24 2020-09-08 Amazon Technologies, Inc. Streaming virtual objects for incorporation in virtual environments
US10542238B2 (en) * 2017-09-22 2020-01-21 Faro Technologies, Inc. Collaborative virtual reality online meeting platform
CN107678828A (zh) * 2017-10-26 2018-02-09 北京易讯理想科技有限公司 一种基于图像追踪技术实现的声音音量控制方法
EP3489882A1 (en) * 2017-11-27 2019-05-29 Nokia Technologies Oy An apparatus and associated methods for communication between users experiencing virtual reality
US11082463B2 (en) * 2017-12-22 2021-08-03 Hillel Felman Systems and methods for sharing personal information
US10500496B2 (en) * 2018-01-12 2019-12-10 International Business Machines Corporation Physical obstacle avoidance in a virtual reality environment
US20190221035A1 (en) * 2018-01-12 2019-07-18 International Business Machines Corporation Physical obstacle avoidance in a virtual reality environment
US10225656B1 (en) * 2018-01-17 2019-03-05 Harman International Industries, Incorporated Mobile speaker system for virtual reality environments
EP3751422A4 (en) * 2018-02-07 2021-04-21 Sony Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM
US11126395B2 (en) * 2018-02-13 2021-09-21 SentiAR, Inc. Intercom system for multiple users
US10504290B2 (en) * 2018-05-04 2019-12-10 Facebook Technologies, Llc User interface security in a virtual reality environment
US10564608B2 (en) * 2018-05-11 2020-02-18 Disney Enterprises, Inc. Eliciting user interaction with a stimulus through a computing platform
EP3807743A1 (en) * 2018-06-14 2021-04-21 Apple Inc. Display system having an audio output device
US10777202B2 (en) * 2018-06-19 2020-09-15 Verizon Patent And Licensing Inc. Methods and systems for speech presentation in an artificial reality world
US20180345129A1 (en) * 2018-07-27 2018-12-06 Yogesh Rathod Display virtual objects within predefined geofence or receiving of unique code from closest beacon
US10776933B2 (en) * 2018-12-06 2020-09-15 Microsoft Technology Licensing, Llc Enhanced techniques for tracking the movement of real-world objects for improved positioning of virtual objects
US10846898B2 (en) * 2019-03-28 2020-11-24 Nanning Fugui Precision Industrial Co., Ltd. Method and device for setting a multi-user virtual reality chat environment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130155169A1 (en) * 2011-12-14 2013-06-20 Verizon Corporate Services Group Inc. Method and system for providing virtual conferencing
US20130321568A1 (en) * 2012-06-01 2013-12-05 Hal Laboratory, Inc. Storage medium storing information processing program, information processing device, information processing system, and information processing method
US20170132845A1 (en) * 2015-11-10 2017-05-11 Dirty Sky Games, LLC System and Method for Reducing Virtual Reality Simulation Sickness
US9729820B1 (en) * 2016-09-02 2017-08-08 Russell Holmes Systems and methods for providing real-time composite video from multiple source devices

Also Published As

Publication number Publication date
TW202036263A (zh) 2020-10-01
US20200394829A1 (en) 2020-12-17
CN111756616A (zh) 2020-10-09
CN111756616B (zh) 2022-05-27
US10846898B2 (en) 2020-11-24
US20200311995A1 (en) 2020-10-01
US11138780B2 (en) 2021-10-05

Similar Documents

Publication Publication Date Title
TWI743669B (zh) 設定多使用者虛擬實境聊天環境的方法與裝置
US8099458B2 (en) Workgroup application with contextual clues
US9800622B2 (en) Virtual socializing
US9819902B2 (en) Proximate resource pooling in video/audio telecommunications
US10542237B2 (en) Systems and methods for facilitating communications amongst multiple users
US11418759B2 (en) Method and apparatus for capturing a group photograph during a video conferencing session
US9525658B2 (en) Synchronous communication system and method
JP6883140B1 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
JP2022111966A (ja) 音声及びビデオ会議アプリケーションの音量調節
US11212488B2 (en) Conference system
CN111835617B (zh) 用户头像调整方法、装置及电子设备
US11770356B2 (en) Method and device for providing location based avatar messenger service
JP2004258819A (ja) 電子コミュニケーション支援サーバ
WO2024089887A1 (ja) 情報提示装置、情報提示方法及び情報提示プログラム
US20160080689A1 (en) Video Picker
US20240223625A1 (en) Access control of audio and video streams and control of representations for communication sessions
WO2021235173A1 (ja) 情報処理装置、情報処理方法およびプログラム
US20230351658A1 (en) Information processing system, information processing method, and computer program
WO2023223585A1 (ja) 会議管理装置、会議管理方法及びプログラム
US20240212290A1 (en) Dynamic Artificial Reality Coworking Spaces
JP2023015877A (ja) 会議制御装置、会議制御方法及びコンピュータープログラム
JP2023129018A (ja) リモート会議支援装置、方法及びプログラム
JP2023078629A (ja) 会議システム、会議サーバ、及び会議プログラム
KR20150116204A (ko) 메시지 데이터 표시 방법 및 그 전자 장치
WO2024144861A1 (en) Access control of audio and video streams and control of representations for communication sessions