JP2023553101A - ライブストリーミングインタラクション方法、装置、デバイス及び媒体 - Google Patents

ライブストリーミングインタラクション方法、装置、デバイス及び媒体 Download PDF

Info

Publication number
JP2023553101A
JP2023553101A JP2023534896A JP2023534896A JP2023553101A JP 2023553101 A JP2023553101 A JP 2023553101A JP 2023534896 A JP2023534896 A JP 2023534896A JP 2023534896 A JP2023534896 A JP 2023534896A JP 2023553101 A JP2023553101 A JP 2023553101A
Authority
JP
Japan
Prior art keywords
live streaming
scene
virtual object
interaction information
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023534896A
Other languages
English (en)
Inventor
ヤン,ホ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zitiao Network Technology Co Ltd
Original Assignee
Beijing Zitiao Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zitiao Network Technology Co Ltd filed Critical Beijing Zitiao Network Technology Co Ltd
Publication of JP2023553101A publication Critical patent/JP2023553101A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本開示の実施例は、ライブストリーミングインタラクション方法、装置、デバイス及び媒体に関し、当該方法は、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末が、ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するとともに、複数の視聴者端末からのインタラクション情報を表示することができ、インタラクション情報がトリガー条件を満たしたことに応答して、ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生することを含み、ライブストリーミングシーンは、仮想オブジェクトのライブストリーミングコンテンツのタイプを示す。上記技術案を採用すれば、仮想オブジェクトは、視聴者のインタラクション情報に基づいて、第1ライブストリーミングシーンにおけるライブストリーミングから第2ライブストリーミングシーンにおけるライブストリーミングへの切り替えを実現することができ、仮想オブジェクトと視聴者との間の異なるライブストリーミングシーンのインタラクションセッションを実現して視聴者の多種のインタラクションニーズを満たし、仮想オブジェクトのライブストリーミングの多様性及び興趣性を向上させ、さらに、視聴者のインタラクション体験効果を向上させる。

Description

(関連出願の相互参照)
本出願は、2020年12月11日に提出された、出願番号が202011463601.8であって、出願の名称が「ライブストリーミングインタラクション方法、装置、デバイス及び媒体」である中国特許出願に基づく優先権を主張するものであり、その全内容を本出願に援用により組み込む。
本開示は、ライブストリーミング技術の分野に関し、特に、ライブストリーミングインタラクション方法、装置、デバイス及び媒体に関する。
ライブストリーミング技術が進んでいることに伴い、ライブストリーミングを視聴することは、人々の生活での重要な娯楽活動になっている。
現在、リアリティストリーマーの代わりに仮想オブジェクトを採用してライブストリーミングを行うことが可能である。しかし、上記仮想オブジェクトは通常、予め設置された内容に応じてライブストリーミングを行うことしかできず、視聴者は、受動的に視聴することしかできず、視聴の内容を決めることができず、ライブストリーミングの効果はよくない。
上述した技術的課題を解決するために、または、少なくとも部分的に解決するために、本開示は、ライブストリーミングインタラクション方法、装置、デバイス及び媒体を提供する。
本開示の実施例は、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に適用されるライブストリーミングインタラクション方法を提供し、前記方法は、
ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するステップと、
前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップであって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を含む。
本開示の実施例はさらに、サービスエンドに適用されるライブストリーミングインタラクション方法を提供し、前記方法は、
第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するステップと、
前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するステップであって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を含む。
本開示の実施例はさらに、ライブストリーミングインタラクション装置を提供し、前記装置は、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に設けられ、
ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するための第1ライブストリーミングモジュールと、
前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するための第2ライブストリーミングモジュールであって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる第2ライブストリーミングモジュールと、を含む。
本開示の実施例はさらに、ライブストリーミングインタラクション装置を提供し、前記装置は、サービスエンドに設けられ、
第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するための情報受信モジュールと、
前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するためのデータ送信モジュールであって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるデータ送信モジュールと、を含む。
本開示の実施例はさらに、電子デバイスを提供し、前記電子デバイスは、プロセッサと、前記プロセッサの実行可能指令を記憶するためのメモリと、を含み、前記プロセッサは、前記メモリから前記実行可能指令を読み取って実行することで、本開示の実施例によって提供されるライブストリーミングインタラクション方法を実現する。
本開示の実施例はさらに、コンピュータ可読記憶媒体を提供し、前記記憶媒体は、コンピュータプログラムが記憶されており、前記コンピュータプログラムは、本開示の実施例によって提供されるライブストリーミングインタラクション方法を実行するために用いられる。
本開示の実施例によって提供される技術案は、従来技術と比較すると、以下のような利点を有する。即ち、本開示の実施例によって提供されるライブストリーミングインタラクション方案は、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末がライブストリーミングインターフェースで第1ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するとともに、複数の視聴者端末からのインタラクション情報を表示し、インタラクション情報がトリガー条件を満たしたことに応答して、ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生することができ、ライブストリーミングシーンは、仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる。上記技術案を採用すれば、仮想オブジェクトは、視聴者のインタラクション情報に基づいて、第1ライブストリーミングシーンにおけるライブストリーミングから、第2ライブストリーミングシーンにおけるライブストリーミングへの切り替えを実現することができ、仮想オブジェクトと視聴者との間の異なるライブストリーミングシーンのインタラクションセッションを実現して視聴者の多種のインタラクションニーズを満たし、仮想オブジェクトのライブストリーミングの多様性及び興趣性を向上させ、さらに、視聴者のインタラクション体験効果を向上させる。
本開示の各実施例の上記及び他の特徴、利点、並びに態様は、添付の図に関連して以下の具体的な実施形態を参照することによってより明らかになる。図面全体を通して、同一または類似の符号は、同一または類似の要素を示す。ここで、図面は、概略的なものであり、部品及び要素は必ずしも一定の縮尺で描かれているわけではない。
本開示の実施例によるライブストリーミングインタラクション方法の概略フローチャートである。 本開示の実施例によるライブストリーミングインタラクションの概略図である。 本開示の実施例による別のライブストリーミングインタラクションの概略図である。 本開示の実施例による別のライブストリーミングインタラクション方法の概略フローチャートである。 本開示の実施例によるライブストリーミングインタラクション装置の構成概略図である。 本開示の実施例による別のライブストリーミングインタラクション装置の構成概略図である。 本開示の実施例による電子デバイスの構成概略図である。
以下、図面を参照しながら本開示の実施例についてより詳しく説明する。本開示のいくつかの実施例は図面に示されているが、本開示は様々な形態で実現されることができ、本明細書に記載の実施例に制限されるものと解釈されるべきではなく、むしろこれらの実施例は本開示をより深くかつ完全に理解するために提供されることを理解されたい。また、本開示の図面及び実施例は、例示的な目的のためにのみ使用され、本開示の保護範囲を制限することを意図するものではないことは理解されるべきである。
本開示の方法の実施形態に記載される各ステップは、異なる順序に従って実行され、及び/または並行して実行されることが理解されるべきである。また、方法の実施形態は、追加のステップを含み、及び/または図示されるステップの実行を省略し得る。本開示の範囲はこの点に関して限定されない。
本明細書で使用される「含む」という用語及びその変形は、自由形式の包含、即ち、「含むがこれらに限定されない」という意味である。「に基づく」という用語は、「少なくとも部分的に基づく」という意味である。「一実施例」という用語は、「少なくとも1つの実施例」を意味し、「別の実施例」という用語は、「少なくとも1つの別の実施例」を意味し、「いくつかの実施例」という用語は、「少なくともいくつかの実施例」を意味する。他の用語の関連する定義は、以下で説明される。
なお、本開示で言及される「第1」、「第2」などの概念は、異なる装置、モジュールまたはユニットを区別するためにのみ使用され、これらの装置、モジュール、またはユニットによって実行される機能の順序または相互依存関係を限定することを意図するものでもない。
なお、本開示で言及される「1つ」、「複数」の修飾は限定ではなく、例示的なものであり、当業者であれば理解できるように、本明細書において特に指摘されない限り、「1つまたは複数」として理解されるべきである。
本開示の実施形態における複数の装置の間でやり取りされるメッセージまたは情報の名称は、これらのメッセージまたは情報の範囲を限定することを意図するものではなく、説明する目的のためだけである。
図1は、本開示の実施例によるライブストリーミングインタラクション方法の概略フローチャートであり、当該方法は、ライブストリーミングインタラクション装置によって実行されることができ、当該装置は、ソフトウェア及び/またはハードウェアで実現されることができ、一般的には電子デバイスに統合されることができる。図1に示すように、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に適用され、ステップ101~102を含む。
ステップ101、ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するとともに、複数の視聴者端末からのインタラクション情報を表示する。
仮想オブジェクトは、人工知能(Artificial Intelligence、AI)技術に基づいて予め作成された1つの3次元モデルであってもよく、コンピュータに制御可能なデジタルオブジェクトを設置し、動作キャプチャデバイス及び顔面キャプチャデバイスにより、真人間の肢体動作及び顔面情報を取得して仮想オブジェクトを駆動することができる。仮想オブジェクトの具体的なタイプは、多種を含むことができ、異なる仮想オブジェクトは、異なる外観を有することができ、仮想オブジェクトは具体的に、仮想動物であってもよいし、異なるスタイルの仮想人物であってもよい。本開示の実施例において、人工知能技術とビデオライブストリーミング技術との結合により、仮想オブジェクトは、真人間に代わってビデオライブストリーミングを実現することができる。
ライブストリーミングインターフェースとは、仮想オブジェクトのライブストリーミングルームを表示するためのページを意味し、当該ページは、ウェブページであってもよいし、アプリケーションプログラムのクライアントにおけるページであってもよい。ライブストリーミングシーンは、仮想オブジェクトのライブストリーミングコンテンツのタイプを示すためのシーンであり、仮想オブジェクトのライブストリーミングシーンは、多種を含むことができ、本開示の実施例におけるライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含むことができ、マルチメディアリソースは、閲覧書籍、演唱歌曲、及び絵画のテーマなどを含むことができ、具体的に限定されない。
本開示の実施例において、第1ライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するステップは、演じる対象の複数のマルチメディアリソースのマルチメディアリソース情報をライブストリーミングインターフェースの第1領域で表示するステップと、仮想オブジェクトがターゲットマルチメディアリソースを演じるビデオコンテンツを再生するステップであって、ターゲットマルチメディアリソースは、複数のマルチメディアリソースに対する複数の視聴者端末のトリガー情報に基づいて決定されたものであるステップと、を含むことができる。
マルチメディアリソースが閲覧書籍、演唱歌曲、及び絵画のテーマなどを含むことができるため、演じる対象のマルチメディアリソース情報は、読まれる書籍、歌われる歌、及び描かれる絵画のテーマなどを含むことができる。第1領域は、ライブストリーミングインターフェースに設けられた、演じる対象のマルチメディアリソースのマルチメディアリソース情報を表示するための領域であって、マルチメディアリソースに対する視聴者のトリガー操作をサポートする。トリガー操作は、クリック、ダブルタップ、スワイプ及び音声指令のうちの1種または多種を含む。
さらには、端末は、サービスエンドから送信された、演じる対象の複数のマルチメディアリソースのマルチメディアリソース情報を受信するとともに、マルチメディアリソース情報をライブストリーミングインターフェースの第1領域に表示することができる。各端末は、マルチメディアリソースに対する視聴者のトリガー情報をサービスエンドに送信し、サービスエンドは、トリガー情報に応じて、複数のマルチメディアリソースからターゲットマルチメディアリソースを決定することができ、例えば、トリガー回数が最も多いマルチメディアリソースをターゲットマルチメディアリソースとして決定することができる。端末は、サービスエンドから発されたターゲットマルチメディアリソースのビデオデータを受信するとともに、ビデオデータに基づいて、仮想オブジェクトがマルチメディアリソースを演じるビデオコンテンツをライブストリーミングインターフェースで再生することができる。
上記方案において、仮想オブジェクトは、視聴者の選択に応じて、マルチメディアリソースを演じるライブストリーミングシーンを行うことができ、視聴者は、視聴の内容を決めることができ、関与程度を向上させ、さらに仮想オブジェクトのライブストリーミング効果を向上させる。
本開示の実施例において、ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するステップは、第1ライブストリーミングシーンに対応する第1ビデオデータを受信するステップであって、第1ビデオデータは第1シーンデータ、第1動作データ、及び第1オーディオデータを含み、第1シーンデータは、第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、第1動作データは、第1ライブストリーミングシーンにおける仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、オーディオデータはターゲットマルチメディアリソースにマッチングするステップと、第1ビデオデータに基づいて、仮想オブジェクトが第1ライブストリーミングシーンにおいてターゲットマルチメディアリソースを演じるビデオコンテンツを、ライブストリーミングインターフェースで再生するステップと、を含むことができる。
第1ビデオデータとは、サーバーが予め配置した、仮想オブジェクトが第1ライブストリーミングシーンにおけるライブストリーミングを行うことを実現するためのデータを意味し、第1ビデオデータには、第1シーンデータ、第1動作データ、及び第1オーディオデータが含まれることができる。ライブストリーミングルーム背景画面に対応するシーンは、仮想オブジェクトの第1ライブストリーミングシーンにおける背景シーン及び画面画角シーンを含むことができ、画面画角は、異なるレンズが仮想オブジェクトを撮影する時の画角であってもよく、異なる画面画角に対応するシーン画像の表示サイズ及び/または表示方向などが異なる。第1動作データは、第1ライブストリーミングシーンにおける仮想オブジェクトの表情動作及び肢体動作を生成するために用いられてもよい。オーディオデータは、複数のマルチメディアリソースのうちのターゲットマルチメディアリソースにマッチングし、例えば、ターゲットマルチメディアリソースが1つの演唱歌曲である場合、オーディオデータは当該演唱歌曲のオーディオである。
本開示の実施例において、端末は、仮想オブジェクトに対する視聴者のトリガー操作を検出した後、サービスエンドから送信された、第1ライブストリーミングシーンに対応する第1ビデオデータを取得することができ、第1ビデオデータに対するデコード処理により、対応するビデオコンテンツを生成することができ、仮想オブジェクトが第1ライブストリーミングシーンにおいてターゲットマルチメディアリソースを演じるビデオコンテンツを、ライブストリーミングインターフェースで再生する。また、端末は、仮想オブジェクトが第1ライブストリーミングシーンにおいてターゲットマルチメディアリソースを演じるビデオコンテンツを再生する過程において、複数のライブストリーミング視聴者からの複数のインタラクション情報を受信するとともに、複数のインタラクション情報をライブストリーミングインターフェースに表示することができ、具体的な表示の位置について、実際の状況に応じて設定されてもよい。任意選択で、仮想オブジェクトが第1ライブストリーミングシーンにおいてターゲットマルチメディアリソースを演じるビデオコンテンツを再生する過程において、第1シーンデータ、第1動作データに基づいて、ライブストリーミングルーム背景画面、仮想オブジェクトの動作はビデオコンテンツの変化に伴って、切り替えられることができる。
例示的に、図2は、本開示の実施例によるライブストリーミングインタラクションの概略図であり、図2に示すように、図には、1つの仮想オブジェクト11の第1ライブストリーミングシーンにおけるライブストリーミングインターフェースが表示され、当該ライブストリーミングインターフェースには、仮想オブジェクト11が1つの閲覧書籍を閲覧する1つのライブストリーミング画面が表示され、仮想オブジェクト11の前方に1つの電子リーダーが置かれ、仮想オブジェクト11が1つの閲覧書籍を述べていることを示す。図2におけるライブストリーミングインターフェースの左上隅に、仮想オブジェクト11のアバター、「Aちゃん」である名称、及びフォローボタン12がさらに表示される。
図2を参照し、図2におけるライブストリーミングインターフェースの下方に、仮想オブジェクトのライブストリーミングを視聴している、異なるユーザから送信されたインタラクション情報がさらに表示され、例えば、図におけるユーザA(視聴者A)から送信された「このストーリーは素敵です」、ユーザB(視聴者B)から送信された「こんにちは」、及びユーザC(視聴者C)から送信された「あなたのために来ています」ということである。ライブストリーミングインターフェースの最下方に、現在ユーザがインタラクション情報を送信する編集領域13、及び、例えば、図における選択ボタン14、インタラクションボタン15、及びイベント及び報酬ボタン16などの他の機能ボタンがさらに表示され、異なる機能ボタンは、異なる機能を備える。
ステップ102、インタラクション情報がトリガー条件を満たしたことに応答して、ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生し、ライブストリーミングシーンは、仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる。
トリガー条件とは、視聴者のインタラクション情報に基づいて、ライブストリーミングシーン切り替えを行うか否かを決定するための条件を意味し、本開示の実施例におけるトリガー条件は、インタラクション情報の数が所定の閾値に達すること、インタラクション情報に第1キーワードが含まれること、インタラクション情報における第2キーワードの数がキーワード閾値に達すること、第1ライブストリーミングシーンの時間長がプリセット時間長に達すること、及び第1ライブストリーミングシーンがプリセットマークポイントに到達することのうちの少なくとも1つを含むことができる。上記所定の閾値、第1キーワード、第2キーワード、キーワード閾値、プリセット時間長、及びプリセットマークポイントはいずれも、実際の状況に応じて設定することができる。
本開示の実施例において、ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するステップは、仮想オブジェクトがインタラクション情報について回答するビデオコンテンツを、ライブストリーミングインターフェースで再生するステップを含む。第2ライブストリーミングシーンは、上記第1ライブストリーミングシーンとは異なり、仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを意味する。
具体的には、端末は、1つまたは複数のインタラクション情報に対応する回答オーディオデータを受信するとともに、回答オーディオデータ及び仮想オブジェクトの第2ライブストリーミングシーンにおける第2シーンデータ、第2動作データに基づいて、回答するビデオコンテンツを共同で生成し、それに、仮想オブジェクトがインタラクション情報について回答するビデオコンテンツを、ライブストリーミングインターフェースで再生することができる。
任意選択で、仮想オブジェクトは、インタラクション情報のうちのターゲットインタラクション情報について回答し、ライブストリーミングインタラクション方法は、ライブストリーミングインターフェースの第2領域で、ターゲットインタラクション情報、及びターゲットインタラクション情報に回答するテキスト情報を表示するステップをさらに含むことができる。
ターゲットインタラクション情報は、サービスエンドがプリセット方案に基づいて、ライブストリーミング視聴者から送信された複数のインタラクション情報において決定する、回答が必要な1つまたは複数の情報であり、プリセット方案について、実際の状況に応じて設定することができ、例えば、インタラクション情報を送信するライブストリーミング視聴者のポイントに基づいてターゲットインタラクション情報を決定することであってもよく、または、プリセットキーワードにマッチングするターゲットインタラクション情報を検索することであり、プリセットキーワードは、予めホットスポット情報に応じてマイニングして抽出されたものであってもよいし、ライブストリーミングの内容に関連するキーワードであってもよく、または、インタラクション情報に対して意味認識を行って、表現意味の近いインタラクション情報をクラスタリングし、若干の情報セットを得、インタラクション情報を最も多く持つセットは、ライブストリーミング視聴者がインタラクションする最もホットなトピックであり、当該セットに対応するインタラクション情報をターゲットインタラクション情報とする。ターゲットインタラクション情報に回答するテキスト情報とは、サービスエンドがコーパスに基づいて決定した、ターゲットインタラクション情報にマッチングする回答テキスト情報を意味する。端末は、ターゲットインタラクション情報に回答するテキスト情報を受信するとともに、ライブストリーミングインターフェースの第2領域で、ターゲットインタラクション情報、及びターゲットインタラクション情報に回答する当該テキスト情報を表示することができる。
上記方案において、第2ライブストリーミングシーンにおいて、端末は、仮想オブジェクトがインタラクション情報について回答するビデオコンテンツを、ライブストリーミングインターフェースで再生するとともに、現在のインタラクション情報及び対応する回答テキスト情報を表示することができ、これにより、視聴者に、仮想オブジェクトがどの視聴者の対話内容に回答しているかを了解させ、さらに視聴者と仮想オブジェクトとの間のインタラクションの深さを向上させ、インタラクション対話体験を向上させる。
本開示の実施例において、ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するステップは、第2ライブストリーミングシーンに対応する第2マルチメディアデータを受信するステップであって、第2マルチメディアデータは、第2シーンデータ、第2動作データ、及び第2オーディオデータを含み、第2シーンデータは、第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、第2動作データは、第2ライブストリーミングシーンにおける仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、第2オーディオデータはターゲットインタラクション情報に基づいて生成されたものであるステップと、第2マルチメディアデータに基づいて、仮想オブジェクトが第2ライブストリーミングシーンにおいてターゲットインタラクション情報について回答するビデオコンテンツを、ライブストリーミングインターフェースで再生するステップと、を含むことができる。
第2ビデオデータとは、サーバーが予め配置した、仮想オブジェクトが第2ライブストリーミングシーンにおけるライブストリーミングを行うことを実現するためのデータを意味し、第2ビデオデータには、第2シーンデータ、第2動作データ、及び第2オーディオデータが含まれることができ、各データが表す意味は、上記第1ビデオデータにおけるデータと類似し、ここでは、具体的に説明しない。異なるのは、第1ライブストリーミングシーン、第2ライブストリーミングシーンにおける具体的なビデオデータが異なることである。
本開示の実施例において、サービスエンドは、インタラクション情報に基づいて、トリガー条件を満たしたと決定する場合、第2ライブストリーミングシーンに対応する第2ビデオデータを端末に送信することができる。端末は第2ビデオデータを受信した後、第2ビデオデータに対するデコード処理により、対応するビデオコンテンツを生成することができ、仮想オブジェクトが第2ライブストリーミングシーンにおいてターゲットインタラクション情報について回答するビデオコンテンツを、ライブストリーミングインターフェースで再生する。また、端末は、仮想オブジェクトが第2ライブストリーミングシーンにおいてターゲットインタラクション情報について回答するビデオコンテンツを再生する過程において、複数の視聴者端末からのインタラクション情報を表示してもよい。任意選択で、仮想オブジェクトが第2ライブストリーミングシーンにおいてターゲットインタラクション情報について回答するビデオコンテンツを再生する過程において、第2シーンデータ、第2動作データに基づいて、ライブストリーミングルーム背景画面、仮想オブジェクトの動作はビデオコンテンツの変化に伴って、切り替えられることができるが、第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面、仮想オブジェクトの動作とは異なってもよい。
例示的に、図3は本開示の実施例による別のライブストリーミングインタラクションの概略図であり、図3に示すように、図には、仮想オブジェクト11が第2ライブストリーミングシーンにおいてインタラクション情報について回答する過程における1つのライブストリーミング画面が表示され、図2と比較すると、仮想オブジェクト11の前方には電子リーダーがなくなっている。ライブストリーミングインターフェースの下方に、ライブストリーミングのチャット過程において異なるユーザから送信されたインタラクション情報、例えば、図におけるユーザA(視聴者A)から送信された「会いたい」、ユーザB(視聴者B)から送信された「こんにちは」、及びユーザC(視聴者C)から送信された「チャットしよう」ということがさらに表示される。
図3におけるライブストリーミングページには第2領域17がさらに表示され、第2領域17において、仮想オブジェクトがどの視聴者の対話内容に回答しているかを視聴者に了解させるように、現在一人の視聴者のインタラクション情報及び仮想オブジェクトのインタラクション情報に回答するテキスト情報であってもよい。例えば、図におけるインタラクション情報は、視聴者Cから送信された「チャットしようか」ということであり、仮想オブジェクトの回答テキストは、「もう遅いから、明日にしようか」ということである。回答テキストは回答オーディオデータに対応し、仮想オブジェクトが回答した時の会話内容と一致している。図2及び図3を参照し、図2及び図3において、仮想オブジェクト11は動作が異なり、図2の第1ライブストリーミングシーンにおいて、仮想オブジェクト11は左手で顎を当て、図3の第2ライブストリーミングシーンにおいて、仮想オブジェクト11は左手を上げ、右手で顎を当てる。
なお、上記第1ライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、第2ライブストリーミングシーンは、仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンであり、第1ライブストリーミングシーン及び第2ライブストリーミングシーンの設置は、さらに置き換えられてもよく、つまり、第1ライブストリーミングシーンは、仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンであってもよく、第2ライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであってもよく、具体的に限定されない。また、第1ライブストリーミングシーンと第2ライブストリーミングシーンを、絶えず交互に行うことで、仮想オブジェクトのライブストリーミングシーンが絶えず切り替えられる。
本開示の実施例において、異なるライブストリーミングシーンにおける仮想オブジェクトのライブストリーミングを実現することができ、ライブストリーミングシーンは、視聴者の選択に応じて切り替えられることができ、また、異なるライブストリーミングシーンにおけるライブストリーミングルーム背景画面、仮想オブジェクトの動作を異ならせることができ、視聴者の様々なインタラクションニーズを満たすことができる。
本開示の実施例によって提供されるライブストリーミングインタラクション方案について、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末がライブストリーミングインターフェースで第1ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生するとともに、複数の視聴者端末からのインタラクション情報を表示することができ、インタラクション情報がトリガー条件を満たしたことに応答して、ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける仮想オブジェクトのビデオコンテンツを再生することができ、ライブストリーミングシーンは、仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる。上記技術案を採用すれば、仮想オブジェクトは、視聴者のインタラクション情報に基づいて、第1ライブストリーミングシーンにおけるライブストリーミングから、第2ライブストリーミングシーンにおけるライブストリーミングへの切り替えを実現することができ、仮想オブジェクトと視聴者との間の異なるライブストリーミングシーンのインタラクションセッションを実現して視聴者の多種のインタラクションニーズを満たし、仮想オブジェクトのライブストリーミングの多様性及び興趣性を向上させ、さらに視聴者のインタラクション体験効果を向上させる。
図4は、本開示の実施例による別のライブストリーミングインタラクション方法の概略フローチャートであり、本実施例は上記実施例を基礎とし、さらに上記ライブストリーミングインタラクション方法を最適化する。図4に示すように、当該方法はサービスエンドに適用され、ステップ201~202を含む。
ステップ201、第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、インタラクション情報に基づいて決定する。
ライブストリーミングシーンは、仮想オブジェクトのライブストリーミングコンテンツのタイプを示すためのシーンであり、仮想オブジェクトのライブストリーミングシーンは、多種を含むことができ、本開示の実施例におけるライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含むことができ、マルチメディアリソースは、閲覧書籍、演唱歌曲、及び絵画のテーマなどを含むことができ、具体的に限定されない。インタラクション情報とは、第1ライブストリーミングシーンにおけるライブストリーミングを視聴している複数の視聴者が端末を介して送信したインタラクションテキスト情報を意味する。
具体的には、サービスエンドは、第1ライブストリーミングシーンにおいて複数の視聴者端末から送信されたインタラクション情報を受信するとともに、インタラクション情報及び/または第1ライブストリーミングシーンの関連情報に基づいて、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを決定することができる。本開示の実施例におけるトリガー条件は、インタラクション情報の数が所定の閾値に達すること、インタラクション情報に第1キーワードが含まれること、インタラクション情報における第2キーワードの数がキーワード閾値に達すること、第1ライブストリーミングシーンの時間長がプリセット時間長に達すること、及び第1ライブストリーミングシーンがプリセットマークポイントに到達することのうちの少なくとも1つを含むことができる。上記所定の閾値、第1キーワード、第2キーワード、キーワード閾値、プリセット時間長、及びプリセットマークポイントはいずれも、実際の状況に応じて設定することができる。
本開示の実施例において、第1ライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、ライブストリーミングインタラクション方法は、ターゲットマルチメディアリソースにマッチングする第1オーディオデータをオーディオデータベースにおいて検索し、ターゲットマルチメディアリソースに対応する、第1ライブストリーミングシーンにおける仮想オブジェクトの表情動作及び肢体動作を示すための第1動作データを仮想オブジェクト動作データベースにおいて検索するステップと、第1ライブストリーミングシーンのシーン識別子に基づいて、第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第1シーンデータを決定するステップと、第1動作データ、第1オーディオデータ、及び第1シーンデータを、第1ライブストリーミングシーンに対応する第1ビデオデータに組み合わせるステップと、第1ビデオデータを複数の視聴者端末に送信するステップと、をさらに含むことができる。
オーディオデータベース、仮想オブジェクト動作データベースは、予め設置されたデータベースであってもよい。ターゲットマルチメディアリソースは、複数のマルチメディアリソースのうちの1つである。シーン識別子とは、異なるライブストリーミングシーンを区別するための識別子を意味し、サービスエンドは、予め異なるライブストリーミングシーンに対して対応するシーンデータを設置してもよい。サービスエンドは、オーディオデータベース、仮想オブジェクト動作データベースにおいて検索して、ターゲットマルチメディアリソースにマッチングする第1オーディオデータ、第1動作データを決定し、さらに、第1ライブストリーミングシーンのシーン識別子に基づいて対応する第1シーンデータを決定することができ、その後、サービスエンドは、第1動作データ、第1オーディオデータ、及び第1シーンデータを組み合わせて第1ビデオデータを得るとともに、第1ビデオデータを複数の視聴者端末に送信することができる。
視聴者端末は、第1ビデオデータを受信した後、第1ビデオデータに対するデコード処理により、対応するビデオコンテンツを生成することができ、仮想オブジェクトが第1ライブストリーミングシーンにおいてターゲットマルチメディアリソースを演じるビデオコンテンツを、ライブストリーミングインターフェースで再生する。仮想オブジェクトが第1ライブストリーミングシーンにおいてターゲットマルチメディアリソースを演じるビデオコンテンツを再生する過程において、第1シーンデータ、第1動作データに基づいて、ライブストリーミングルーム背景画面、仮想オブジェクトの動作は、ビデオコンテンツの変化に伴って、切り替えられることができる。
本開示の実施例において、ライブストリーミングインタラクション方法は、複数の視聴者端末からの、第1ライブストリーミングシーンに表示される複数のマルチメディアリソースに対するトリガー情報を受信するステップと、トリガー情報に基づいて、複数のマルチメディアリソースからターゲットマルチメディアリソースを決定するステップと、をさらに含むことができる。トリガー情報は、マルチメディアリソースに対する視聴者のトリガー操作に対応する関連情報であってもよく、例えば、トリガー情報は、トリガー回数、トリガー時間などを含むことができる。
視聴者端末は、ライブストリーミングインターフェースで複数のマルチメディアリソースのマルチメディアリソース情報を表示するとともに、マルチメディアリソースに対する視聴者のトリガー操作を受信し、マルチメディアリソースのトリガー情報をサービスエンドに送信することができる。サービスエンドは、トリガー情報を受信した後、複数のマルチメディアリソースからターゲットマルチメディアリソースを決定することができ、例えば、トリガー回数が最も多いマルチメディアリソースをターゲットマルチメディアリソースとして決定することができる。
ステップ202、トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、複数の視聴者端末に送信し、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる。
本開示の実施例において、トリガー条件は、インタラクション情報のうちの類似インタラクション情報の数が所定の閾値に達した場合、トリガー条件を満たし、類似インタラクション情報は、類似度が類似度閾値よりも大きいインタラクション情報である方式と、インタラクション情報におけるキーワードを抽出し、キーワードをキーワードデータベースにおける第1キーワード及び/または第2キーワードにマッチングし、インタラクション情報に第1キーワードが含まれる場合、及び/またはインタラクション情報における第2キーワードの数がキーワード閾値に達した場合、トリガー条件を満たす方式と、第1ライブストリーミングシーンの時間長がプリセット時間長に達した場合、トリガー条件を満たす方式と、第1ライブストリーミングシーンがプリセットマークポイントに到達した場合、トリガー条件を満たす方式と、の少なくとも1つによって決定される。
具体的には、サービスエンドは、インタラクション情報に対して意味認識を行い、類似度が類似度閾値よりも大きいインタラクション情報をクラスタリングし、類似インタラクション情報と呼ぶことができる。類似インタラクション情報の数が所定の閾値に達した場合、ライブストリーミングシーンの切り替えのトリガー条件を満たすと決定することができる。及び/または、サービスエンドは、語彙に基づいてインタラクション情報におけるキーワードを抽出し、キーワードをキーワードデータベースにおける第1キーワードにマッチングすることができ、マッチングが成功した場合、インタラクション情報に第1キーワードが含まれると決定し、トリガー条件を満たすと決定することができる。及び/または、サービスエンドは、インタラクション情報のキーワードを第2キーワードにマッチングすることができ、マッチングが成功した場合、第2キーワードの数に1を加算し、第2キーワードの数がキーワード閾値に達した場合、トリガー条件を満たすと決定することができる。上記の第1キーワード及び第2キーワードは、第2ライブストリーミングシーンに関連するキーワードであってもよい。
及び/または、サービスエンドは、第1ライブストリーミングシーンの時間長を取得し、当該時間長がプリセット時間長に達した場合、トリガー条件を満たすと決定することができる。及び/または、サービスエンドは、第1ライブストリーミングシーンがプリセットマークポイントに到達すると決定した場合、トリガー条件を満たすと決定することができる。プリセットマークポイントは、予め第1ライブストリーミングシーンにおけるマルチメディアリソースに応じて設置されてもよく、例えば、マルチメディアリソースが閲覧書籍である場合、閲覧書籍を意味分割して、複数の閲覧段落を得ることができ、各テキスト段落の末尾にプリセットマークポイントを設置することができ、さらに例えば、マルチメディアリソースが演唱歌曲である場合、演唱歌曲の属性特徴に基づいてプリセットマークポイントを設置することができる。
本開示の実施例において、第2ビデオデータは、ターゲットインタラクション情報に基づいて、ターゲットインタラクション情報に回答するテキスト情報をプリセットのテキストライブラリにおいて決定するステップと、テキスト情報を第2オーディオデータに変換するステップと、ターゲットインタラクション情報に対応する、第1ライブストリーミングシーンにおける仮想オブジェクトの表情動作及び肢体動作を示すための第2動作データを仮想オブジェクト動作データベースにおいて検索するステップと、第2ライブストリーミングシーンのシーン識別子に基づいて、第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第2シーンデータを決定するステップと、第2動作データ、第2オーディオデータ、及び第2シーンデータを、第2ライブストリーミングシーンに対応する第2ビデオデータに組み合わせるステップと、第2ビデオデータを複数の視聴者端末に送信するステップと、によって生成される。
任意選択で、ターゲットインタラクション情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップは、仮想オブジェクトからフィードバックされた感情情報をターゲットインタラクション情報に基づいて認識するステップと、感情情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップと、を含む。仮想オブジェクト動作データベースには、異なる感情情報に対応する動作データ、例えば、うれしい感情に対応する拍手動作、怒りの感情に対応する、テーブルをたたく動作が予め設置される。
第2ライブストリーミングシーンが、仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンであるため、第2ビデオデータは、ターゲットインタラクション情報に基づいて生成されることができる。具体的には、サービスエンドは、意味認識、分析により、プリセットされたテキストライブラリにおいて、ターゲットインタラクション情報にマッチングするテキスト情報を決定するとともに、当該テキスト情報を、テキストを音声に変換する(Text To Speech、TTS)技術により、仮想オブジェクトのリアルな音声データにリアルタイムに変換し、第2オーディオデータを得ることができ、その後、ターゲットインタラクション情報が示す感情情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索して決定するとともに、第2ライブストリーミングシーンのシーン識別子に基づいて第2シーンデータを決定することにより、サービスエンドは、第2オーディオデータ、第2動作データ、及び第2シーンデータを組み合わせて第2ビデオデータを得ることができ、第2ビデオデータを複数の視聴者端末に送信する。
視聴者端末は、第2ビデオデータを受信した後、第2ビデオデータに対するデコード処理により、対応するビデオコンテンツを生成し、仮想オブジェクトが第2ライブストリーミングシーンにおいてターゲットインタラクション情報について回答するビデオコンテンツを、ライブストリーミングインターフェースで再生することができる。任意選択で、仮想オブジェクトが第2ライブストリーミングシーンにおいてターゲットインタラクション情報について回答するビデオコンテンツを再生する過程において、第2シーンデータ、第2動作データに基づいて、ライブストリーミングルーム背景画面、仮想オブジェクトの動作はビデオコンテンツの変化に伴って、切り替えられることができるが、第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面、仮想オブジェクトの動作とは異なってもよい。
理解できるように、上記第1ライブストリーミングシーンは、仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、第2ライブストリーミングシーンは、仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンであり、これは、例示に過ぎず、第1ライブストリーミングシーン及び第2ライブストリーミングシーンの設置は、さらに置き換えられてもよく、第1ライブストリーミングシーンと第2ライブストリーミングシーンを、絶えず交互に行うことで、仮想オブジェクトのライブストリーミングシーンが絶えず切り替えられる。
本開示の実施例において、ライブストリーミングインタラクション方法は、ターゲットインタラクション情報、及びターゲットインタラクション情報に回答するテキスト情報を複数の視聴者端末に送信するステップ、をさらに含むことができる。
サービスエンドは、プリセット方案に基づいて、ライブストリーミング視聴者から送信された複数のインタラクション情報においてターゲットインタラクション情報を決定することができ、プリセット方案について、実際の状況に応じて設定することができ、例えば、インタラクション情報を送信するライブストリーミング視聴者のポイントに基づいてターゲットインタラクション情報を決定することであってもよく、または、プリセットキーワードにマッチングするターゲットインタラクション情報を検索することであり、プリセットキーワードは、予めホットスポット情報に応じてマイニングして抽出されたものであってもよいし、ライブストリーミングの内容に関連するキーワードであってもよく、または、インタラクション情報に対して意味認識を行い、表現意味の近いインタラクション情報をクラスタリングし、若干の情報セットを得、インタラクション情報を最も多く持つセットは、ライブストリーミング視聴者がインタラクションする最もホットなトピックであり、当該セットに対応するインタラクション情報をターゲットインタラクション情報とする。その後、サービスエンドは、ターゲットインタラクション情報、及びターゲットインタラクション情報に回答するテキスト情報を視聴者端末に送信することができ、端末は、ターゲットインタラクション情報に回答するテキスト情報を受信するとともに、ライブストリーミングインターフェースの第2領域で、ターゲットインタラクション情報、及びターゲットインタラクション情報に回答する当該テキスト情報を表示することができる。
本開示の実施例において、サービスエンドは、第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定し、前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信することができ、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる。上記技術案を採用すれば、サービスエンドは、ライブストリーミングシーン切り替えのトリガー条件を満たすと決定した場合、視聴者端末がライブストリーミングシーンの切り替えを行うように、第2ライブストリーミングシーンのデータを視聴者端末に送信することができ、仮想オブジェクトは、視聴者のインタラクション情報に基づいて、第1ライブストリーミングシーンにおけるライブストリーミングから、第2ライブストリーミングシーンにおけるライブストリーミングへの切り替えを実現することができ、仮想オブジェクトと視聴者との間の異なるライブストリーミングシーンのインタラクションセッションを実現して視聴者の多種のインタラクションニーズを満たし、仮想オブジェクトのライブストリーミングの多様性及び興趣性を向上させ、さらに、視聴者のインタラクション体験効果を向上させる。
図5は、本開示の実施例によるライブストリーミングインタラクション装置の構成概略図であり、当該装置はソフトウェア及び/またはハードウェアによって実現されることができ、一般的には電子デバイスに統合されることができる。図5に示すように、当該装置は、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に設けられ、
ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するための第1ライブストリーミングモジュール301と、
前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するための第2ライブストリーミングモジュール302であって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる第2ライブストリーミングモジュール302と、を含む。
任意選択で、前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む。
任意選択で、前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、前記第1ライブストリーミングモジュール301は具体的に、
演じる対象の複数のマルチメディアリソースのマルチメディアリソース情報を前記ライブストリーミングインターフェースの第1領域で表示し、
前記仮想オブジェクトがターゲットマルチメディアリソースを演じるビデオコンテンツを再生するために用いられ、
前記ターゲットマルチメディアリソースは、前記複数のマルチメディアリソースに対する複数の前記視聴者端末のトリガー情報に基づいて決定されたものである。
任意選択で、前記第2ライブストリーミングモジュール302は具体的に、
前記仮想オブジェクトが前記インタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するために用いられる。
任意選択で、前記トリガー条件は、前記インタラクション情報の数が所定の閾値に達すること、前記インタラクション情報に第1キーワードが含まれること、前記インタラクション情報における第2キーワードの数がキーワード閾値に達すること、前記第1ライブストリーミングシーンの時間長がプリセット時間長に達すること、及び前記第1ライブストリーミングシーンがプリセットマークポイントに到達することのうちの少なくとも1つを含む。
任意選択で、前記仮想オブジェクトは、前記インタラクション情報のうちのターゲットインタラクション情報について回答し、前記装置は、
前記ライブストリーミングインターフェースの第2領域で、前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を表示するための回答モジュールをさらに含む。
任意選択で、前記第1ライブストリーミングモジュール301は具体的に、
前記第1ライブストリーミングシーンに対応する第1ビデオデータを受信し、
前記第1ビデオデータに基づいて、前記仮想オブジェクトが前記第1ライブストリーミングシーンにおいて前記ターゲットマルチメディアリソースを演じるビデオコンテンツを、前記ライブストリーミングインターフェースで再生するために用いられ、
前記第1ビデオデータは、第1シーンデータ、第1動作データ、及び第1オーディオデータを含み、前記第1シーンデータは、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第1動作データは、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記オーディオデータは前記ターゲットマルチメディアリソースにマッチングする。
任意選択で、前記第2ライブストリーミングモジュールは具体的に、
前記第2ライブストリーミングシーンに対応する第2マルチメディアデータを受信し、
前記第2マルチメディアデータに基づいて、前記仮想オブジェクトが前記第2ライブストリーミングシーンにおいて前記ターゲットインタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するために用いられ、
前記第2マルチメディアデータは、第2シーンデータ、第2動作データ、及び第2オーディオデータを含み、前記第2シーンデータは、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第2動作データは、前記第2ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記第2オーディオデータは前記ターゲットインタラクション情報に基づいて生成されたものである。
本開示の実施例によって提供されるライブストリーミングインタラクション装置は、本開示の任意の実施例によって提供されるライブストリーミングインタラクション方法を実行可能であり、実行方法に応じた機能モジュール及び有益な効果を備える。
図6は本開示の実施例による別のライブストリーミングインタラクション装置の構成概略図であり、当該装置はソフトウェア及び/またはハードウェアによって実現されることができ、一般的には電子デバイスに統合されることができる。図6に示すように、当該装置はサービスエンドに設けられ、
第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するための情報受信モジュール401と、
前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するためのデータ送信モジュール402であって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるデータ送信モジュール402と、を含む。
任意選択で、前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む。
任意選択で、前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、前記装置は、データ決定モジュールをさらに含み、前記データ決定モジュールは、
ターゲットマルチメディアリソースにマッチングする第1オーディオデータをオーディオデータベースにおいて検索し、前記ターゲットマルチメディアリソースに対応する、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すための第1動作データを仮想オブジェクト動作データベースにおいて検索し、
前記第1ライブストリーミングシーンのシーン識別子に基づいて、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第1シーンデータを決定し、
前記第1動作データ、前記第1オーディオデータ、及び前記第1シーンデータを、前記第1ライブストリーミングシーンに対応する第1ビデオデータに組み合わせ、
前記第1ビデオデータを前記複数の視聴者端末に送信するために用いられる。
任意選択で、前記装置は、
前記複数の視聴者端末からの、第1ライブストリーミングシーンに表示される複数のマルチメディアリソースに対するトリガー情報を受信し、前記トリガー情報に基づいて、前記複数のマルチメディアリソースから前記ターゲットマルチメディアリソースを決定するためのリソース決定モジュールをさらに含む。
任意選択で、前記装置は、第2データモジュールをさらに含み、前記第2データモジュールは、
ターゲットインタラクション情報に基づいて、前記ターゲットインタラクション情報に回答するテキスト情報をプリセットのテキストライブラリにおいて決定し、
前記テキスト情報を第2オーディオデータに変換し、
前記ターゲットインタラクション情報に対応する、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すための第2動作データを仮想オブジェクト動作データベースにおいて検索し、
前記第2ライブストリーミングシーンのシーン識別子に基づいて、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第2シーンデータを決定し、
前記第2動作データ、前記第2オーディオデータ、及び前記第2シーンデータを、前記第2ライブストリーミングシーンに対応する第2ビデオデータに組み合わせ、
前記第2ビデオデータを前記複数の視聴者端末に送信するために用いられる。
任意選択で、前記第2データモジュールは、
前記仮想オブジェクトからフィードバックされた感情情報を前記ターゲットインタラクション情報に基づいて認識し、
前記感情情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するために用いられる。
任意選択で、前記装置は、
前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を前記複数の視聴者端末に送信するための回答情報送信モジュールをさらに含む。
任意選択で、前記装置はトリガー条件モジュールをさらに含み、前記トリガー条件モジュールは、
前記インタラクション情報のうちの類似インタラクション情報の数が所定の閾値に達した場合、トリガー条件を満たし、前記類似インタラクション情報は、類似度が類似度閾値よりも大きいインタラクション情報であり、
前記インタラクション情報におけるキーワードを抽出し、前記キーワードをキーワードデータベースにおける第1キーワード及び/または第2キーワードにマッチングし、前記インタラクション情報に前記第1キーワードが含まれる場合、及び/または前記インタラクション情報に含まれる前記第2キーワードの数がキーワード閾値に達した場合、トリガー条件を満たし、
前記第1ライブストリーミングシーンの時間長がプリセット時間長に達した場合、トリガー条件を満たし、
前記第1ライブストリーミングシーンがプリセットマークポイントに到達した場合、トリガー条件を満たすために用いられる。
本開示の実施例によって提供されるライブストリーミングインタラクション装置は、本開示の任意の実施例によって提供されるライブストリーミングインタラクション方法を実行可能であり、実行方法に応じた機能モジュール及び有益な効果を備える。
図7は、本開示の実施例による電子デバイスの構成概略図である。以下、具体的に図7を参照し、本開示の実施例における電子デバイス500を実現するのに適した構成概略図が示される。本開示の実施例における電子デバイス500は、携帯電話、ノートパソコン、デジタル放送受信機、PDA(携帯情報端末)、PAD(タブレット)、PMP(ポータブルマルチメディアプレーヤー)、車載端末(例えば、車載ナビゲーション端末)などのモバイル端末、及びデジタルTV、デスクトップコンピュータなどの固定端末を含むことができるが、これらに限定されない。図7に示す電子デバイスは、一例に過ぎず、本開示の実施例の機能及び使用範囲に任意の制限を与えるべきではない。
図7に示すように、電子デバイス500は、リードオンリーメモリ(ROM)502に記憶されたプログラム、または記憶装置508からランダムアクセスメモリ(RAM)503にロードされたプログラムに従って、様々な適切な動作及び処理を実行できる処理装置(例えば、中央処理ユニット、グラフィックプロセッサなど)501を含むことができる。RAM503には、電子デバイス500の操作に必要な様々なプログラム及びデータがさらに記憶されている。処理装置501、ROM502及びRAM503は、バス504を介して互いに接続される。入出力(I/O)インターフェース505もバス504に接続される。
通常、I/Oインターフェース505には、例えばタッチスクリーン、タッチパッド、キーボード、マウス、カメラ、マイクロフォン、加速度計、ジャイロなどを含む入力装置506、例えば、液晶ディスプレー(LCD)、スピーカー、バイブレーターなどを含む出力装置507、例えば、磁気テープ、ハードディスクなどを含む記憶装置508、及び通信装置509が接続されることができる。通信装置509は、電子デバイス500が他の機器と無線または有線通信を行ってデータを交換することを可能にする。図7には、様々な装置を有する電子デバイス500が示されているが、全ての示される装置を実施または具備することが要求されないは理解されるべきである。その代わりに、より多くのまたはより少ない装置を実施または具備してもよい。
特に、本開示の実施例によれば、フローチャートを参照して以上で説明される過程は、コンピュータソフトウェアプログラムとして実現されることができる。例えば、本開示の実施例は、非一時的なコンピュータ可読媒体上に担持されるコンピュータプログラムを含むコンピュータプログラム製品を含み、当該コンピュータプログラムは、フローチャートに示す方法を実行するためのプログラムコードを含む。このような実施例では、当該コンピュータプログラムは、通信装置509を介してネットワークからダウンロードされてインストールされ、または、記憶装置508からインストールされ、またはROM502からインストールされることができる。当該コンピュータプログラムが処理装置501によって実行される場合、本開示の実施例のライブストリーミングインタラクション方法で限定される上記の機能を実行する。
なお、本開示に記載のコンピュータ可読媒体は、コンピュータ可読信号媒体、またはコンピュータ可読記憶媒体、または上記両者の任意の組み合わせであってもよい。コンピュータ可読記憶媒体は、例えば、電気、磁気、光、電磁気、赤外線、または半導体のシステム、装置、若しくはデバイス、または任意の以上の組み合わせであってもよいが、これらに限定されない。コンピュータ可読記憶媒体のより具体的な例としては、1つまたは複数のワイヤを有する電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、消去可能なプログラマブルリードオンリーメモリ(EPROMまたはフラッシュメモリ)、光ファイバ、ポータブルコンパクトディスクリードオンリーメモリ(CD-ROM)、光記憶デバイス、磁気記憶デバイス、または上記の任意の適切な組み合わせを含むことができるが、これらに限定されない。本開示では、コンピュータ可読記憶媒体は、指令実行システム、装置、またはデバイスによって使用され、またはこれらと組み合わせて使用されることができるプログラムを含むか、または記憶する任意の有形媒体であってもよい。本開示では、コンピュータ可読信号媒体は、ベースバンドにおいて、または搬送波の一部として伝搬されるデータ信号を含むことができ、当該データ信号にコンピュータ読み取り可能なプログラムコードが担持される。このように伝搬されるデータ信号は、電磁信号、光信号、または上記の任意の適切な組み合わせを含むがこれらに限定されない様々な形式を採用することができる。コンピュータ可読信号媒体は、コンピュータ可読記憶媒体以外の任意のコンピュータ可読媒体であってもよく、当該コンピュータ可読信号媒体は、指令実行システム、装置、またはデバイスによって使用され、またはこれらと組み合わせて使用されるためのプログラムを送信、伝搬、または伝送することができる。コンピュータ可読媒体に含まれるプログラムコードは、任意の適切な媒体によって伝送されることができ、当該媒体は、電線、光ファイバケーブル、RF(無線周波数)など、または上記の任意の適切な組み合わせを含むが、これらに限定されない。
いくつかの実施形態では、クライアント、サーバーは、例えばHTTP(HyperText Transfer Protocol、ハイパーテキスト・トランスファー・プロトコル)などのような、現在既知、または将来開発される任意のネットワークプロトコルを利用して通信することができ、任意の形態または媒体のデジタルデータ通信(例えば、通信ネットワーク)と相互接続されることができる。通信ネットワークの例は、ローカルネットワーク(「LAN」)、ワイドエリアネットワーク(「WAN」)、ワールドワイドウェブ(例えば、インターネット)、エンドツーエンドネットワーク(例えば、adhocエンドツーエンドネットワーク)、及び任意の現在既知、または将来開発されるネットワークを含む。
上記コンピュータ可読媒体は、上記電子デバイスに含まれてもよいし、当該電子デバイスに配置されず、個別に存在しもよい。
上記コンピュータ可読媒体に1つまたは複数のプログラムが担持されており、上記1つまたは複数のプログラムが当該電子デバイスによって実行される場合、ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するステップと、前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップであって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を当該電子デバイスに実行させる。
或いは、上記コンピュータ可読媒体に1つまたは複数のプログラムが担持されており、上記1つまたは複数のプログラムが当該電子デバイスによって実行される場合、第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するステップと、前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するステップであって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を当該電子デバイスに実行させる。
本開示の操作を実行するためのコンピュータプログラムコードは、1種または多種のプログラミング言語またはそれらの組み合わせで作成されることができ、上記プログラミング言語は、Java、Smalltalk、C++のようなオブジェクト指向プログラミング言語を含み、「C」言語のような従来の手続き型プログラミング言語または類似するプログラミング言語をさらに含むが、これらに限定されない。プログラムコードは、ユーザのコンピュータ上で完全に、ユーザのコンピュータ上で一部的に、1つの独立したソフトウェアパッケージとして、ユーザのコンピュータ上で一部的にかつリモートコンピュータ上で一部的に、またはリモートコンピュータ若しくはサーバーで完全に実行されることができる。リモートコンピュータが関与する場合、リモートコンピュータは、ローカルエリアネットワーク(LAN)またはワイドエリアネットワーク(WAN)を含む任意の種類のネットワークを介してユーザのコンピュータに接続することができ、または、外部コンピュータに接続することができる(例えば、インタネットサービスプロバイダを利用してインターネットを介して接続する)。
図面におけるフローチャート及びブロック図は、本出願の様々な実施例のシステム、方法及びコンピュータプログラム製品に従って実現可能な体系アーキテクチャ、機能及び操作を示す。この点について、フローチャートまたはブロック図における各ブロックは、1つのモジュール、プログラムセグメント、またはコードの一部を代表することができ、当該モジュール、プログラムセグメント、またはコードの一部は、所定の論理機能を実現するための1つまたは複数の実行可能な指令を含む。なお、代替としてのいくつかの実現において、ブロックに示されている機能は、図に示されている順序とは異なる順序に従って発生してもよい。例えば、連続的に示される2つのブロックは実際には、基本的に並行して実行されてもよく、ある場合、逆の順序に従って実行されてもよく、関連する機能に応じて決定される。また、ブロック図及び/またはフローチャートにおける各ブロック、並びにブロック図及び/またはフローチャートにおけるブロックの組み合わせは、所定の機能または操作を実行するための、ハードウェアによる専用システムで実現されてもよいし、または専用ハードウェアとコンピュータ指令との組み合わせで実現されてもよい。
本開示の実施例に記述されたユニットは、ソフトウェアの方式で実現されてもよいし、ハードウェアの方式で実現されてもよい。ユニットの名称は、ある場合、当該ユニット自身への限定を構成しない。
本明細書で上述した機能は、少なくとも部分的に1つまたは複数のハードウェアロジック部品によって実行されてもよい。例えば、利用できるハードウェアロジック部品の例示的なタイプは、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)、特定用途向け標準製品(ASSP)、システムオンチップ(SOC)、コンプレックスプログラマブルロジックデバイス(CPLD)などを含むが、これらに限定されない。
本開示において、機械可読媒体は、指令実行システム、装置またはデバイスによって使用されるか、またはそれらと組み合わせて使用されてもよいプログラムを含むか、または記憶する有形媒体であってもよい。機械可読媒体は、機械可読信号媒体または機械可読記憶媒体であってもよい。機械可読媒体は、電子、磁気、光学、電磁、赤外線、または半導体システム、装置またはデバイス、或いは上記の内容の任意の適切な組み合わせを含むが、これらに限定されない。機械可読記憶媒体のより具体的な例は、1つまたは複数のワイヤによる電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み取り専用メモリ(ROM)、消去可能プログラマブル読み取り専用メモリ(EPROMまたはフラッシュメモリ)、光ファイバ、ポータブルコンパクト磁気ディスク読み取り専用メモリ(CD-ROM)、光記憶装置、磁気記憶装置、または上記内容の任意の適切な組み合わせを含む。
本開示の1つまたは複数の実施例によれば、本開示は、仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に適用されるライブストリーミングインタラクション方法を提供し、
ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するステップと、
前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップであって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、ライブストリーミングインターフェースで、第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
演じる対象の複数のマルチメディアリソースのマルチメディアリソース情報を前記ライブストリーミングインターフェースの第1領域で表示するステップと、
前記仮想オブジェクトがターゲットマルチメディアリソースを演じるビデオコンテンツを再生するステップであって、前記ターゲットマルチメディアリソースは、前記複数のマルチメディアリソースに対する複数の前記視聴者端末のトリガー情報に基づいて決定されたものであるステップと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記ライブストリーミングインターフェースで、第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
前記仮想オブジェクトが前記インタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するステップを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記トリガー条件は、前記インタラクション情報の数が所定の閾値に達すること、前記インタラクション情報に第1キーワードが含まれること、前記インタラクション情報における第2キーワードの数がキーワード閾値に達すること、前記第1ライブストリーミングシーンの時間長がプリセット時間長に達すること、及び前記第1ライブストリーミングシーンがプリセットマークポイントに到達することのうちの少なくとも1つを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記仮想オブジェクトは、前記インタラクション情報のうちのターゲットインタラクション情報について回答し、前記方法は、
前記ライブストリーミングインターフェースの第2領域で、前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を表示するステップをさらに含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、ライブストリーミングインターフェースで、第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
前記第1ライブストリーミングシーンに対応する第1ビデオデータを受信するステップであって、前記第1ビデオデータは第1シーンデータ、第1動作データ、及び第1オーディオデータを含み、前記第1シーンデータは、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第1動作データは、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記オーディオデータは前記ターゲットマルチメディアリソースにマッチングするステップと、
前記第1ビデオデータに基づいて、前記仮想オブジェクトが前記第1ライブストリーミングシーンにおいて前記ターゲットマルチメディアリソースを演じるビデオコンテンツを、前記ライブストリーミングインターフェースで再生するステップと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記ライブストリーミングインターフェースで、第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
前記第2ライブストリーミングシーンに対応する第2マルチメディアデータを受信するステップであって、前記第2マルチメディアデータは、第2シーンデータ、第2動作データ、及び第2オーディオデータを含み、前記第2シーンデータは、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第2動作データは、前記第2ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記第2オーディオデータは前記ターゲットインタラクション情報に基づいて生成されたものであるステップと、
前記第2マルチメディアデータに基づいて、前記仮想オブジェクトが前記第2ライブストリーミングシーンにおいて前記ターゲットインタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するステップと、を含む。
本開示の1つまたは複数の実施例によれば、本開示は、サービスエンドに適用されるライブストリーミングインタラクション方法を提供し、
第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するステップと、
前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するステップであって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、
ターゲットマルチメディアリソースにマッチングする第1オーディオデータをオーディオデータベースにおいて検索し、前記ターゲットマルチメディアリソースに対応する、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すための第1動作データを仮想オブジェクト動作データベースにおいて検索するステップと、
前記第1ライブストリーミングシーンのシーン識別子に基づいて、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第1シーンデータを決定するステップと、
前記第1動作データ、前記第1オーディオデータ、及び前記第1シーンデータを、前記第1ライブストリーミングシーンに対応する第1ビデオデータに組み合わせるステップと、
前記第1ビデオデータを前記複数の視聴者端末に送信するステップと、をさらに含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、
前記複数の視聴者端末からの、第1ライブストリーミングシーンに表示される複数のマルチメディアリソースに対するトリガー情報を受信するステップと、
前記トリガー情報に基づいて、前記複数のマルチメディアリソースから前記ターゲットマルチメディアリソースを決定するステップと、をさらに含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記第2ビデオデータは、
ターゲットインタラクション情報に基づいて、前記ターゲットインタラクション情報に回答するテキスト情報をプリセットのテキストライブラリにおいて決定するステップと、
前記テキスト情報を第2オーディオデータに変換するステップと、
前記ターゲットインタラクション情報に対応する、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すための第2動作データを仮想オブジェクト動作データベースにおいて検索するステップと、
前記第2ライブストリーミングシーンのシーン識別子に基づいて、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第2シーンデータを決定するステップと、
前記第2動作データ、前記第2オーディオデータ、及び前記第2シーンデータを、前記第2ライブストリーミングシーンに対応する第2ビデオデータに組み合わせるステップと、
前記第2ビデオデータを前記複数の視聴者端末に送信するステップと、によって生成される。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記ターゲットインタラクション情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップは、
前記仮想オブジェクトからフィードバックされた感情情報を前記ターゲットインタラクション情報に基づいて認識するステップと、
前記感情情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記方法は、
前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を前記複数の視聴者端末に送信するステップ、をさらに含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション方法において、前記トリガー条件は、
前記インタラクション情報のうちの類似インタラクション情報の数が所定の閾値に達した場合、トリガー条件を満たし、前記類似インタラクション情報は、類似度が類似度閾値よりも大きいインタラクション情報である方式と、
前記インタラクション情報におけるキーワードを抽出し、前記キーワードをキーワードデータベースにおける第1キーワード及び/または第2キーワードにマッチングし、前記インタラクション情報に前記第1キーワードが含まれる場合、及び/または前記インタラクション情報における前記第2キーワードの数がキーワード閾値に達した場合、トリガー条件を満たす方式と、
前記第1ライブストリーミングシーンの時間長がプリセット時間長に達した場合、トリガー条件を満たす方式と、
前記第1ライブストリーミングシーンがプリセットマークポイントに到達した場合、トリガー条件を満たす方式と、の少なくとも1つによって決定される。
本開示の1つまたは複数の実施例によれば、本開示はライブストリーミングインタラクション装置を提供し、
ライブストリーミングインターフェースで第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するための第1ライブストリーミングモジュールと、
前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するための第2ライブストリーミングモジュールであって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる第2ライブストリーミングモジュールと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、前記第1ライブストリーミングモジュールは具体的に、
演じる対象の複数のマルチメディアリソースのマルチメディアリソース情報を前記ライブストリーミングインターフェースの第1領域で表示し、
前記仮想オブジェクトがターゲットマルチメディアリソースを演じるビデオコンテンツを再生するために用いられ、
前記ターゲットマルチメディアリソースは、前記複数のマルチメディアリソースに対する複数の前記視聴者端末のトリガー情報に基づいて決定されたものである。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記第2ライブストリーミングモジュールは具体的に、
前記仮想オブジェクトが前記インタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するために用いられる。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記トリガー条件は、前記インタラクション情報の数が所定の閾値に達すること、前記インタラクション情報に第1キーワードが含まれること、前記インタラクション情報における第2キーワードの数がキーワード閾値に達すること、前記第1ライブストリーミングシーンの時間長がプリセット時間長に達すること、及び前記第1ライブストリーミングシーンがプリセットマークポイントに到達することのうちの少なくとも1つを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記仮想オブジェクトは、前記インタラクション情報のうちのターゲットインタラクション情報について回答し、前記装置は、
前記ライブストリーミングインターフェースの第2領域で、前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を表示するための回答モジュールをさらに含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記第1ライブストリーミングモジュールは具体的に、
前記第1ライブストリーミングシーンに対応する第1ビデオデータを受信し、
前記第1ビデオデータに基づいて、前記仮想オブジェクトが前記第1ライブストリーミングシーンにおいて前記ターゲットマルチメディアリソースを演じるビデオコンテンツを、前記ライブストリーミングインターフェースで再生するために用いられ、
前記第1ビデオデータは第1シーンデータ、第1動作データ、及び第1オーディオデータを含み、前記第1シーンデータは、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第1動作データは、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記オーディオデータは前記ターゲットマルチメディアリソースにマッチングする。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記第2ライブストリーミングモジュールは具体的に、
前記第2ライブストリーミングシーンに対応する第2マルチメディアデータを受信し、
前記第2マルチメディアデータに基づいて、前記仮想オブジェクトが前記第2ライブストリーミングシーンにおいて前記ターゲットインタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するために用いられ、
前記第2マルチメディアデータは、第2シーンデータ、第2動作データ、及び第2オーディオデータを含み、前記第2シーンデータは、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第2動作データは、前記第2ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記第2オーディオデータは前記ターゲットインタラクション情報に基づいて生成されたものである。
本開示の1つまたは複数の実施例によれば、本開示はライブストリーミングインタラクション装置を提供し、
第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するための情報受信モジュールと、
前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するためのデータ送信モジュールであって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるデータ送信モジュールと、を含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、前記装置は、データ決定モジュールをさらに含み、前記データ決定モジュールは、
ターゲットマルチメディアリソースにマッチングする第1オーディオデータをオーディオデータベースにおいて検索し、前記ターゲットマルチメディアリソースに対応する、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すための第1動作データを仮想オブジェクト動作データベースにおいて検索し、
前記第1ライブストリーミングシーンのシーン識別子に基づいて、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第1シーンデータを決定し、
前記第1動作データ、前記第1オーディオデータ、及び前記第1シーンデータを、前記第1ライブストリーミングシーンに対応する第1ビデオデータに組み合わせ、
前記第1ビデオデータを前記複数の視聴者端末に送信するために用いられる。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記装置は、リソース決定モジュールをさらに含み、前記リソース決定モジュールは、
前記複数の視聴者端末からの、第1ライブストリーミングシーンに表示される複数のマルチメディアリソースに対するトリガー情報を受信し、
前記トリガー情報に基づいて、前記複数のマルチメディアリソースから前記ターゲットマルチメディアリソースを決定するために用いられる。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記装置は第2データモジュールをさらに含み、前記第2データモジュールは、
ターゲットインタラクション情報に基づいて、前記ターゲットインタラクション情報に回答するテキスト情報をプリセットのテキストライブラリにおいて決定し、
前記テキスト情報を第2オーディオデータに変換し、
前記ターゲットインタラクション情報に対応する、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すための第2動作データを仮想オブジェクト動作データベースにおいて検索し、
前記第2ライブストリーミングシーンのシーン識別子に基づいて、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第2シーンデータを決定し、
前記第2動作データ、前記第2オーディオデータ、及び前記第2シーンデータを、前記第2ライブストリーミングシーンに対応する第2ビデオデータに組み合わせ、
前記第2ビデオデータを前記複数の視聴者端末に送信するために用いられる。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記第2データモジュールは、
前記仮想オブジェクトからフィードバックされた感情情報を前記ターゲットインタラクション情報に基づいて認識し、
前記感情情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するために用いられる。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記装置は、
前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を前記複数の視聴者端末に送信するための回答情報送信モジュールをさらに含む。
本開示の1つまたは複数の実施例によれば、本開示によって提供されるライブストリーミングインタラクション装置において、前記装置はトリガー条件モジュールをさらに含み、前記トリガー条件モジュールは、
前記インタラクション情報のうちの類似インタラクション情報の数が所定の閾値に達した場合、トリガー条件を満たし、前記類似インタラクション情報は、類似度が類似度閾値よりも大きいインタラクション情報であり、
前記インタラクション情報におけるキーワードを抽出し、前記キーワードをキーワードデータベースにおける第1キーワード及び/または第2キーワードにマッチングし、前記インタラクション情報に前記第1キーワードが含まれる場合、及び/または前記インタラクション情報における前記第2キーワードの数がキーワード閾値に達した場合、トリガー条件を満たし、
前記第1ライブストリーミングシーンの時間長がプリセット時間長に達した場合、トリガー条件を満たし、
前記第1ライブストリーミングシーンがプリセットマークポイントに到達する場合、トリガー条件を満たすために用いられる。
本開示の1つまたは複数の実施例によれば、本開示は電子デバイスを提供し、
プロセッサと、
前記プロセッサの実行可能指令を記憶するためのメモリと、
を含み、
前記プロセッサは、前記メモリから前記実行可能指令を読み取って実行することで、本開示によって提供されるいずれか1項に記載のライブストリーミングインタラクション方法を実現する。
本開示の1つまたは複数の実施例によれば、本開示はコンピュータ可読記憶媒体を提供し、前記記憶媒体は、コンピュータプログラムが記憶されており、前記コンピュータプログラムは、本開示によって提供されるいずれか1項に記載のライブストリーミングインタラクション方法を実行するために用いられる。
以上の記載は、本開示の好適な実施例及び適用される技術原理に対する説明にすぎない。当業者であれば理解できるように、本開示に係る開示範囲は、上記の技術特徴の特定の組み合わせによって形成される技術案に限定されず、その同時、上記の開示された構想から逸脱することなく、上記の技術特徴またはその等価特徴の任意の組み合わせによって形成される他の技術案、例えば、上記の特徴と、本開示に開示された(ただしこれに限定されていない)類似機能を有する技術特徴とを互いに置き換えることによって形成された技術案も含む。
また、特定の順序を採用して各操作を記載したが、示される特定の順番、または順序に従ってこれらの操作を順に実行することを要求するものとして解釈されるべきではない。特定の環境で、マルチタスク及び並行処理は有利である可能性がある。同様に、以上の論述には、いくつかの具体的な実現の詳細が含まれるが、本開示の範囲に対する限定として解釈されるべきではない。単一の実施例の文脈で説明されるいくつかの特徴は、組み合わせて、単一の実施例で実現されてもよい。逆に、単一の実施例の文脈で説明される様々な特徴は、別々に、または任意の適切なサブ組み合わせの形態で、複数の実施例で実現されてもよい。
構成特徴及び/または方法の論理動作に固有の言語で、本主題を説明したが、添付の特許請求の範囲で限定される主題は、上記の特定の特徴または動作に限定されないことを理解すべきである。むしろ、上述した特定の特徴及び動作は、特許請求の範囲を実現するための単なる例示的な形態である。

Claims (23)

  1. 仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に適用されるライブストリーミングインタラクション方法であって、
    ライブストリーミングインターフェースで、第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するステップと、
    前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで、第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップであって、前記トリガー条件は、前記インタラクション情報に基づいてライブストリーミングシーン切り替えを行うか否かを決定するための条件であり、前記ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を含む、
    ことを特徴とする方法。
  2. 前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む、
    ことを特徴とする請求項1に記載の方法。
  3. 前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、
    ライブストリーミングインターフェースで、第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
    演じる対象の複数のマルチメディアリソースのマルチメディアリソース情報を前記ライブストリーミングインターフェースの第1領域で表示するステップと、
    前記仮想オブジェクトがターゲットマルチメディアリソースを演じるビデオコンテンツを再生するステップであって、前記ターゲットマルチメディアリソースは、前記複数のマルチメディアリソースに対する複数の前記視聴者端末のトリガー情報に基づいて決定されたものであるステップと、を含む、
    ことを特徴とする請求項2に記載の方法。
  4. 前記ライブストリーミングインターフェースで、第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
    前記仮想オブジェクトが前記インタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するステップを含む、
    ことを特徴とする請求項1に記載の方法。
  5. 前記トリガー条件は、前記インタラクション情報の数が所定の閾値に達すること、前記インタラクション情報に第1キーワードが含まれること、前記インタラクション情報における第2キーワードの数がキーワード閾値に達することのうちの少なくとも1つを含む、
    ことを特徴とする請求項1に記載の方法。
  6. 前記仮想オブジェクトは、前記インタラクション情報のうちのターゲットインタラクション情報について回答し、前記方法は、
    前記ライブストリーミングインターフェースの第2領域で、前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を表示するステップをさらに含む、
    ことを特徴とする請求項4に記載の方法。
  7. 前記ターゲットインタラクション情報は、インタラクション情報を送信したライブストリーミング視聴者のポイントに基づいて決定されたものであり、或いは、前記ターゲットインタラクション情報は、プリセットキーワードに基づいてマッチングして得られたものである、
    ことを特徴とする請求項6に記載の方法。
  8. ライブストリーミングインターフェースで、第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
    前記第1ライブストリーミングシーンに対応する第1ビデオデータを受信するステップであって、前記第1ビデオデータは、第1シーンデータ、第1動作データ、及び第1オーディオデータを含み、前記第1シーンデータは、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第1動作データは、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記オーディオデータは、前記ターゲットマルチメディアリソースにマッチングするステップと、
    前記第1ビデオデータに基づいて、前記仮想オブジェクトが前記第1ライブストリーミングシーンにおいて前記ターゲットマルチメディアリソースを演じるビデオコンテンツを、前記ライブストリーミングインターフェースで再生するステップと、を含む、
    ことを特徴とする請求項3に記載の方法。
  9. 前記ライブストリーミングインターフェースで、第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するステップは、
    前記第2ライブストリーミングシーンに対応する第2マルチメディアデータを受信するステップであって、前記第2マルチメディアデータは、第2シーンデータ、第2動作データ、及び第2オーディオデータを含み、前記第2シーンデータは、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すために用いられ、前記第2動作データは、前記第2ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられ、前記第2オーディオデータは、前記ターゲットインタラクション情報に基づいて生成されるステップと、
    前記第2マルチメディアデータに基づいて、前記仮想オブジェクトが前記第2ライブストリーミングシーンにおいて前記ターゲットインタラクション情報について回答するビデオコンテンツを、前記ライブストリーミングインターフェースで再生するステップと、を含む、
    ことを特徴とする請求項4に記載の方法。
  10. 前記ライブストリーミングルーム背景画面に対応するシーンは、前記仮想オブジェクトのライブストリーミングシーンにおける背景シーン及び画面画角シーンを含み、前記画面画角シーンは、異なるレンズが前記仮想オブジェクトを撮影した時の画角である、
    ことを特徴とする請求項8または9に記載の方法。
  11. サービスエンドに適用されるライブストリーミングインタラクション方法であって、
    第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを、前記インタラクション情報に基づいて決定するステップと、
    前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するステップであって、ライブストリーミングシーンは、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるステップと、を含む、
    ことを特徴とする方法。
  12. 前記ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーン、及び前記仮想オブジェクトがインタラクション情報に回答するライブストリーミングシーンを含む、
    ことを特徴とする請求項11に記載の方法。
  13. 前記第1ライブストリーミングシーンは、前記仮想オブジェクトがマルチメディアリソースを演じるライブストリーミングシーンであり、
    ターゲットマルチメディアリソースにマッチングする第1オーディオデータをオーディオデータベースにおいて検索し、前記ターゲットマルチメディアリソースに対応する第1動作データを仮想オブジェクト動作データベースにおいて検索するステップであって、前記第1動作データが、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられるステップと、
    前記第1ライブストリーミングシーンのシーン識別子に基づいて、前記第1ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第1シーンデータを決定するステップと、
    前記第1動作データ、前記第1オーディオデータ、及び前記第1シーンデータを、前記第1ライブストリーミングシーンに対応する第1ビデオデータに組み合わせるステップと、
    前記第1ビデオデータを前記複数の視聴者端末に送信するステップと、
    をさらに含むことを特徴とする請求項12に記載の方法。
  14. 前記複数の視聴者端末からの、第1ライブストリーミングシーンに表示される複数のマルチメディアリソースに対するトリガー情報を受信するステップと、
    前記トリガー情報に基づいて、前記複数のマルチメディアリソースから前記ターゲットマルチメディアリソースを決定するステップと、
    をさらに含むことを特徴とする請求項13に記載の方法。
  15. 前記第2ビデオデータは、
    ターゲットインタラクション情報に基づいて、前記ターゲットインタラクション情報に回答するテキスト情報をプリセットのテキストライブラリにおいて決定するステップと、
    前記テキスト情報を第2オーディオデータに変換するステップと、
    前記ターゲットインタラクション情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップであって、前記第2動作データが、前記第1ライブストリーミングシーンにおける前記仮想オブジェクトの表情動作及び肢体動作を示すために用いられるステップと、
    前記第2ライブストリーミングシーンのシーン識別子に基づいて、前記第2ライブストリーミングシーンにおけるライブストリーミングルーム背景画面を示すための第2シーンデータを決定するステップと、
    前記第2動作データ、前記第2オーディオデータ、及び前記第2シーンデータを、前記第2ライブストリーミングシーンに対応する第2ビデオデータに組み合わせるステップと、
    前記第2ビデオデータを前記複数の視聴者端末に送信するステップと、によって生成される、
    ことを特徴とする請求項11に記載の方法。
  16. 前記ターゲットインタラクション情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップは、
    前記仮想オブジェクトからフィードバックされた感情情報を前記ターゲットインタラクション情報に基づいて認識するステップと、
    前記感情情報に対応する第2動作データを仮想オブジェクト動作データベースにおいて検索するステップと、
    を含むことを特徴とする請求項15に記載の方法。
  17. 前記ターゲットインタラクション情報、及び前記ターゲットインタラクション情報に回答するテキスト情報を前記複数の視聴者端末に送信するステップ、
    をさらに含むことを特徴とする請求項15に記載の方法。
  18. 前記ターゲットインタラクション情報は、インタラクション情報を送信したライブストリーミング視聴者のポイントに基づいて決定されたものであり、或いは、前記ターゲットインタラクション情報は、プリセットキーワードに基づいてマッチングして得られたものである、
    ことを特徴とする請求項15~17のいずれか1項に記載の方法。
  19. 前記トリガー条件は、
    前記インタラクション情報のうちの類似インタラクション情報の数が所定の閾値に達した場合、トリガー条件を満たし、前記類似インタラクション情報は、類似度が類似度閾値よりも大きいインタラクション情報である方式と、
    前記インタラクション情報におけるキーワードを抽出し、前記キーワードをキーワードデータベースにおける第1キーワード及び/または第2キーワードにマッチングし、前記インタラクション情報に前記第1キーワードが含まれる場合及び/または前記第2キーワードの数がキーワード閾値に達した場合、トリガー条件を満たす方式と、の少なくとも1つによって決定される、
    ことを特徴とする請求項11に記載の方法。
  20. 仮想オブジェクトのライブストリーミングルームに入る複数の視聴者端末に設けられたライブストリーミングインタラクション装置であって、
    ライブストリーミングインターフェースで、第1ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するとともに、前記複数の視聴者端末からのインタラクション情報を表示するための第1ライブストリーミングモジュールと、
    前記インタラクション情報がトリガー条件を満たしたことに応答して、前記ライブストリーミングインターフェースで、第2ライブストリーミングシーンにおける前記仮想オブジェクトのビデオコンテンツを再生するための第2ライブストリーミングモジュールであって、ライブストリーミングシーンは、前記仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられる第2ライブストリーミングモジュールと、
    を含むことを特徴とするライブストリーミングインタラクション装置。
  21. サービスエンドに設けられたライブストリーミングインタラクション装置であって、
    第1ライブストリーミングシーンにおける複数の視聴者端末のインタラクション情報を受信し、前記インタラクション情報に基づいて、ライブストリーミングシーン切り替えのトリガー条件を満たすか否かを決定するための情報受信モジュールと、
    前記トリガー条件を満たした場合、第2ライブストリーミングシーンに対応する第2ビデオデータを、前記複数の視聴者端末に送信するためのデータ送信モジュールであって、ライブストリーミングシーンが、ライブストリーミングルームにおける仮想オブジェクトのライブストリーミングコンテンツのタイプを示すために用いられるデータ送信モジュールと、
    を含むことを特徴とするライブストリーミングインタラクション装置。
  22. 電子デバイスであって、
    プロセッサと、
    前記プロセッサの実行可能指令を記憶するためのメモリと、
    を含み、
    前記プロセッサは、前記メモリから前記実行可能指令を読み取って実行することで、請求項1~19のいずれか1項に記載のライブストリーミングインタラクション方法を実行する、
    ことを特徴とする電子デバイス。
  23. コンピュータプログラムが記憶されているコンピュータ可読記憶媒体であって、前記コンピュータプログラムは、請求項1~19のいずれか1項に記載のライブストリーミングインタラクション方法を実行するために用いられる、
    ことを特徴とするコンピュータ可読記憶媒体。
JP2023534896A 2020-12-11 2021-11-09 ライブストリーミングインタラクション方法、装置、デバイス及び媒体 Pending JP2023553101A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202011463601.8A CN112616063B (zh) 2020-12-11 2020-12-11 一种直播互动方法、装置、设备及介质
CN202011463601.8 2020-12-11
PCT/CN2021/129508 WO2022121601A1 (zh) 2020-12-11 2021-11-09 一种直播互动方法、装置、设备及介质

Publications (1)

Publication Number Publication Date
JP2023553101A true JP2023553101A (ja) 2023-12-20

Family

ID=75233674

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023534896A Pending JP2023553101A (ja) 2020-12-11 2021-11-09 ライブストリーミングインタラクション方法、装置、デバイス及び媒体

Country Status (3)

Country Link
JP (1) JP2023553101A (ja)
CN (1) CN112616063B (ja)
WO (1) WO2022121601A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112616063B (zh) * 2020-12-11 2022-10-28 北京字跳网络技术有限公司 一种直播互动方法、装置、设备及介质
CN113115061B (zh) * 2021-04-07 2023-03-10 北京字跳网络技术有限公司 直播交互方法、装置、电子设备和存储介质
CN115379265B (zh) * 2021-05-18 2023-12-01 阿里巴巴新加坡控股有限公司 虚拟主播的直播行为控制方法及装置
CN113286162B (zh) * 2021-05-20 2022-05-31 成都威爱新经济技术研究院有限公司 一种基于混合现实的多机位画面直播方法及系统
CN115580753A (zh) * 2021-06-21 2023-01-06 北京字跳网络技术有限公司 一种基于多媒体作品的交互方法、装置、设备及存储介质
CN113448475B (zh) * 2021-06-30 2024-06-07 广州博冠信息科技有限公司 虚拟直播间的交互控制方法、装置、存储介质与电子设备
CN113660503B (zh) * 2021-08-17 2024-04-26 广州博冠信息科技有限公司 同屏互动控制方法及装置、电子设备、存储介质
CN113810729B (zh) * 2021-09-16 2024-02-02 中国平安人寿保险股份有限公司 直播氛围特效匹配方法、装置、设备及介质
CN113965771B (zh) * 2021-10-22 2024-06-28 成都天翼空间科技有限公司 一种vr直播用户互动体验系统
CN116233382B (zh) * 2022-01-07 2024-09-20 深圳看到科技有限公司 基于场景要素的三维场景互动视频生成方法及生成装置
CN114125569B (zh) * 2022-01-27 2022-07-15 阿里巴巴(中国)有限公司 直播处理方法以及装置
CN114615514B (zh) * 2022-03-14 2023-09-22 深圳幻影未来信息科技有限公司 一种虚拟人直播互动系统
CN115022664A (zh) * 2022-06-17 2022-09-06 云知声智能科技股份有限公司 基于人工智能的直播带货辅助方法及装置
CN115225948A (zh) * 2022-06-28 2022-10-21 北京字跳网络技术有限公司 直播间互动方法、装置、设备及介质
CN115243096A (zh) * 2022-07-27 2022-10-25 北京字跳网络技术有限公司 直播间展示方法、装置、电子设备及存储介质
CN116033232A (zh) * 2022-11-10 2023-04-28 北京字跳网络技术有限公司 用于视频交互的方法、装置、设备和存储介质
CN115866284B (zh) * 2022-11-28 2023-09-01 珠海南方数字娱乐公共服务中心 一种基于虚拟现实技术的产品信息直播管理系统及方法
CN116737936B (zh) * 2023-06-21 2024-01-02 圣风多媒体科技(上海)有限公司 一种基于人工智能的ai虚拟人物语言库分类管理系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9462030B2 (en) * 2009-03-04 2016-10-04 Jacquelynn R. Lueth System and method for providing a real-time three-dimensional digital impact virtual audience
US20150088622A1 (en) * 2012-04-06 2015-03-26 LiveOne, Inc. Social media application for a media content providing platform
WO2018103516A1 (zh) * 2016-12-06 2018-06-14 腾讯科技(深圳)有限公司 一种虚拟对象的虚拟资源获取的方法及客户端
CN106878820B (zh) * 2016-12-09 2020-10-16 北京小米移动软件有限公司 直播互动方法及装置
CN107423809B (zh) * 2017-07-07 2021-02-26 北京光年无限科技有限公司 应用于视频直播平台的虚拟机器人多模态交互方法和系统
CN107750005B (zh) * 2017-09-18 2020-10-30 迈吉客科技(北京)有限公司 虚拟互动方法和终端
CN107911724B (zh) * 2017-11-21 2020-07-07 广州华多网络科技有限公司 直播互动方法、装置及系统
CN110519611B (zh) * 2019-08-23 2021-06-11 腾讯科技(深圳)有限公司 直播互动方法、装置、电子设备及存储介质
CN111010589B (zh) * 2019-12-19 2022-02-25 腾讯科技(深圳)有限公司 基于人工智能的直播方法、装置、设备及存储介质
CN111010586B (zh) * 2019-12-19 2021-03-19 腾讯科技(深圳)有限公司 基于人工智能的直播方法、装置、设备及存储介质
CN112616063B (zh) * 2020-12-11 2022-10-28 北京字跳网络技术有限公司 一种直播互动方法、装置、设备及介质

Also Published As

Publication number Publication date
CN112616063B (zh) 2022-10-28
CN112616063A (zh) 2021-04-06
WO2022121601A1 (zh) 2022-06-16

Similar Documents

Publication Publication Date Title
JP2023553101A (ja) ライブストリーミングインタラクション方法、装置、デバイス及び媒体
US11158102B2 (en) Method and apparatus for processing information
US20240155092A1 (en) Interactive information processing method, device and medium
WO2022121557A1 (zh) 一种直播互动方法、装置、设备及介质
JP6889281B2 (ja) 代替インタフェースでのプレゼンテーションのための電子会話の解析
WO2023240943A1 (zh) 生成数字人的方法、模型的训练方法、装置、设备和介质
US9838824B2 (en) Social media processing with three-dimensional audio
CN107294837A (zh) 采用虚拟机器人进行对话交互的方法和系统
CN112752121B (zh) 一种视频封面生成方法及装置
CN114501064B (zh) 一种视频生成方法、装置、设备、介质及产品
KR102358012B1 (ko) 음성 제어 방법, 장치, 전자 기기 및 판독 가능 저장 매체
CN109600559B (zh) 一种视频特效添加方法、装置、终端设备及存储介质
JP7568201B2 (ja) 仮想対象のアクション処理方法およびその装置、コンピュータプログラム
CN108874266A (zh) 文本播放方法、客户端、终端和存储介质
CN110825164A (zh) 基于儿童专用穿戴智能设备的交互方法及系统
CN112182255A (zh) 用于存储媒体文件和用于检索媒体文件的方法和装置
CN114329223A (zh) 媒体内容搜索方法、装置、设备及介质
US20240184433A1 (en) Method, apparatus, device, medium and program product for replying questions
CN110413834A (zh) 语音评论修饰方法、系统、介质和电子设备
WO2024037480A1 (zh) 交互方法、装置、电子设备和存储介质
CN110377842A (zh) 语音评论显示方法、系统、介质和电子设备
CN115981769A (zh) 页面显示方法、装置、设备、计算机可读存储介质及产品
CN115547330A (zh) 基于语音交互的信息展示方法、装置和电子设备
CN115185371A (zh) 终端的控制方法、装置、电子设备和存储介质
CN111159472B (zh) 多模态聊天技术

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230608

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240709

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241008