JP2020036134A - Moving image distribution system, moving image distribution method, and moving image distribution program for live distribution of moving image including animation of character object generated based on movement of distribution user - Google Patents

Moving image distribution system, moving image distribution method, and moving image distribution program for live distribution of moving image including animation of character object generated based on movement of distribution user Download PDF

Info

Publication number
JP2020036134A
JP2020036134A JP2018159802A JP2018159802A JP2020036134A JP 2020036134 A JP2020036134 A JP 2020036134A JP 2018159802 A JP2018159802 A JP 2018159802A JP 2018159802 A JP2018159802 A JP 2018159802A JP 2020036134 A JP2020036134 A JP 2020036134A
Authority
JP
Japan
Prior art keywords
gift
moving image
display
distribution
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018159802A
Other languages
Japanese (ja)
Other versions
JP6491388B1 (en
Inventor
彩 倉淵
Aya Kurabuchi
彩 倉淵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GREE Inc
Original Assignee
GREE Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2018159802A priority Critical patent/JP6491388B1/en
Application filed by GREE Inc filed Critical GREE Inc
Publication of JP6491388B1 publication Critical patent/JP6491388B1/en
Application granted granted Critical
Priority to KR1020217003200A priority patent/KR102490402B1/en
Priority to PCT/JP2019/024876 priority patent/WO2020044749A1/en
Priority to CN201910728240.6A priority patent/CN110866963B/en
Priority to US16/552,367 priority patent/US11044535B2/en
Publication of JP2020036134A publication Critical patent/JP2020036134A/en
Priority to US17/157,176 priority patent/US11336969B2/en
Priority to US17/694,091 priority patent/US11838603B2/en
Priority to US18/493,392 priority patent/US20240056653A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

To provide a moving image distribution system capable of displaying a gift at a desired timing of a distribution user in distributed moving image including an animation of a character object generated based on a movement of the distribution user and performing live distribution of the moving image.SOLUTION: A moving image distribution system 1 includes one or more computer processors. The one or more computer processors execute a computer-readable instruction, display a display instruction object to a distribution user device used by a distribution user in response to reception of a first display request related to a first gift from a viewing user, and display the first gift on a moving image according to an operation on the display instruction object.SELECTED DRAWING: Figure 1

Description

本明細書における開示は、配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラムに関する。   The present disclosure relates to a moving image distribution system, a moving image distribution method, and a moving image distribution program for live distribution of a moving image including animation of a character object generated based on a movement of a distribution user.

従来から、配信ユーザの動きに基づいてキャラクタオブジェクトのアニメーションを生成し、かかるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システムが知られている。このような動画配信システムは、例えば、特開2015−184689号公報(特許文献1)及び「長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74−79」(非特許文献1)に開示されている。   2. Description of the Related Art A moving image distribution system that generates an animation of a character object based on a motion of a distribution user and performs live distribution of a moving image including the animation of the character object has been known. Such a moving image distribution system is disclosed in, for example, Japanese Patent Application Laid-Open No. 2015-184689 (Patent Document 1) and "Yusuke Hasegawa, The Beginning of a New Era of Virtual Idol PROJECT MariA, CG World, Japan, Born Digital, November 2017 10, Vol. 231 pp. 74-79 "(Non-Patent Document 1).

コンテンツを視聴する視聴ユーザからの要求に応じて、当該視聴ユーザが購入したギフトに対応するギフトオブジェクトを表示画面に表示させるコンテンツ配信システムも知られている。例えば、特開2012−120098号公報(特許文献2)に開示されている動画配信システムでは、視聴ユーザは、ギフトアイテムを購入し、この購入したギフトアイテムを配信ユーザに対してギフトとして提供することができる。ギフトは、視聴ユーザからの表示要求に応じて配信中の動画に表示される。ギフトの表示要求は、当該ギフトが視聴ユーザによって購入されたことに応じて自動的に生成されることもある。   There is also known a content distribution system that displays a gift object corresponding to a gift purchased by a viewing user on a display screen in response to a request from a viewing user viewing the content. For example, in the moving image distribution system disclosed in Japanese Patent Application Laid-Open No. 2012-120098 (Patent Document 2), a viewing user purchases a gift item and provides the purchased gift item as a gift to the distribution user. Can be. The gift is displayed on the moving image being distributed in response to a display request from the viewing user. The gift display request may be automatically generated in response to the gift being purchased by the viewing user.

特開2015−184689号公報JP 2015-184689 A 特開2012−120098号公報JP 2012-120098 A

長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74−79Yusuke Hasegawa, Dawn of a New Era of Virtual Idol PROJECT MariA, CG WORLD, Japan, Born Digital Co., Ltd., November 10, 2017, Vol. 74-79

上記の従来技術においては、視聴ユーザからのギフトの表示要求に応じて当該ギフトが配信中の動画に自動的に表示される。したがって、配信ユーザの望まないタイミングでギフトが動画に表示されることがある。これにより、配信ユーザにとっては、キャラクタオブジェクトを通じたパフォーマンスが妨害されるという問題がある。例えば、パフォーマンスを行っている途中で、ギフトが動画中に目立つように表示されると、当該動画においてパフォーマンスを十分に表現することができない。   In the above-described conventional technology, the gift is automatically displayed on the moving image being distributed in response to a display request of the gift from the viewing user. Therefore, the gift may be displayed on the moving image at a timing not desired by the distribution user. As a result, there is a problem that the performance through the character object is hindered for the distribution user. For example, if a gift is displayed prominently in a moving image during a performance, the performance cannot be sufficiently expressed in the moving image.

また、配信ユーザの望みと合致しないタイミングで動画中にギフトが表示されると、視聴ユーザの視聴体験の劣化につながるおそれがある。例えば、動画の主要部分がギフトで隠されると、視聴者が動画の視聴を妨げられたと感じるおそれがある。特に、動画と重複して大量のギフトが表示されると、かかる問題は深刻化するおそれがある。このため、上記特許文献2では、ギフトオブジェクトは、動画が表示されるコンテンツ表示領域には表示されず、コンテンツ表示領域外の背景領域に表示されている。このように、従来の動画配信システムにおいては、配信ユーザの望みと合致しないタイミングで動画中にギフトが表示される可能性があるため、動画の主要部(例えば、キャラクタオブジェクトの周囲)にはギフトの表示領域を配しにくい制約がある。   Also, if a gift is displayed in a moving image at a timing that does not match the desire of the distribution user, the viewing experience of the viewing user may be degraded. For example, if the main part of the moving image is hidden by the gift, the viewer may feel obstructed from watching the moving image. In particular, if a large amount of gifts are displayed overlapping with the moving image, such a problem may become serious. Therefore, in Patent Literature 2, the gift object is not displayed in the content display area where the moving image is displayed, but is displayed in the background area outside the content display area. As described above, in the conventional moving image distribution system, the gift may be displayed in the moving image at a timing that does not match the desire of the distribution user, and thus the main part of the moving image (for example, around the character object) is a gift. Is difficult to arrange the display area.

本開示の目的は、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することである。本開示のより具体的な目的の一つは、配信動画中に配信ユーザの所望のタイミングでギフトを表示できる動画配信システム、動画配信方法及び動画配信プログラムを提供することである。   It is an object of the present disclosure to provide a technical improvement that solves or alleviates at least some of the problems of the prior art described above. One of more specific objects of the present disclosure is to provide a moving image distribution system, a moving image distribution method, and a moving image distribution program that can display a gift at a desired timing of a distribution user during a distribution moving image.

本発明の一態様は、配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システムに関する。当該動画配信システムは、一又は複数のコンピュータプロセッサを備え、前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、前記視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記配信ユーザが使用する配信ユーザ装置に表示指示オブジェクトを表示させ、前記表示指示オブジェクトへの操作に応じて、前記第1ギフトを前記動画に表示させる。   One aspect of the present invention relates to a moving image distribution system that performs live distribution of a moving image including animation of a character object generated based on a movement of a distribution user. The video distribution system includes one or more computer processors, and the one or more computer processors execute a computer-readable instruction to receive a first display request related to a first gift from the viewing user. In response, a display instruction object is displayed on the distribution user device used by the distribution user, and the first gift is displayed on the moving image in response to an operation on the display instruction object.

本発明の一態様において、前記第1ギフトは、前記キャラクタオブジェクトの装着部位と関連付けられた装着ギフトであり、前記装着ギフトは、前記表示指示オブジェクトへの操作に応じて、前記動画において前記装着部位と対応する位置に表示される。   In one aspect of the present invention, the first gift is a mounting gift associated with a mounting portion of the character object, and the mounting gift is included in the moving image in response to an operation on the display instruction object. Is displayed at the position corresponding to.

本発明の一態様において、前記装着ギフトは、前記装着部位のうちの第1装着部位に対応付けられた第1装着ギフトを含み、前記第1装着ギフトには、前記動画に表示される第1表示時間が設定されており、前記一又は複数のコンピュータプロセッサは、前記動画に前記第1装着ギフトが表示されている場合、前記第1表示時間が経過するまでは、前記装着ギフトのうち前記第1装着部位に関連付けられている第2装着ギフトの前記動画への表示を禁止する。   In one aspect of the present invention, the wearing gift includes a first wearing gift associated with a first wearing part of the wearing parts, and the first wearing gift includes a first wearing gift displayed on the moving image. When the display time is set, and the one or more computer processors display the first wearing gift in the moving image, the one or more computer processors output the first one of the wearing gifts until the first display time elapses. The display of the second wearing gift associated with the one wearing part on the moving image is prohibited.

本発明の一態様において、前記一又は複数のコンピュータプロセッサは、前記動画に前記第1装着ギフトが表示されている場合、前記第1表示時間が経過するまでは、前記装着ギフトのうち前記第1装着部位に関連付けられている第2装着ギフトを表示するための前記表示指示オブジェクトをディアクティベートする。   In one embodiment of the present invention, when the first wearing gift is displayed on the moving image, the one or more computer processors may be configured to output the first gift of the wearing gift until the first display time elapses. The display instruction object for displaying the second wearing gift associated with the wearing part is deactivated.

本発明の一態様において、前記視聴ユーザからメッセージと関連付けられたメッセージギフトを受け付けたことに応じて、前記配信ユーザ装置に前記メッセージを表示させ、前記配信ユーザ装置への表示指示操作に応じて、前記動画に前記メッセージギフトを表示させる。   In one aspect of the present invention, in response to receiving a message gift associated with a message from the viewing user, display the message on the distribution user device, in response to a display instruction operation to the distribution user device, The message gift is displayed on the moving image.

本発明の一態様において、前記動画には、前記配信ユーザの音声が合成されており、前記視聴ユーザから前記配信ユーザの音声を変更するためのボイスチェンジギフトを受け付けたことに応じて、前記配信ユーザ装置に音声変更指示オブジェクトを表示し、前記音声変更指示オブジェクトへの操作に応じて、前記配信ユーザの音声を、前記ボイスチェンジギフトにて指定された音声に変更する。   In one aspect of the present invention, the video is synthesized with the voice of the distribution user, and the distribution is performed in response to receiving a voice change gift for changing the voice of the distribution user from the viewing user. A voice change instruction object is displayed on the user device, and the voice of the distribution user is changed to the voice specified by the voice change gift according to an operation on the voice change instruction object.

本発明の一態様において、前記動画を視聴する視聴ユーザから前記キャラクタオブジェクトの特定の部位と対応付けられずに前記動画に表示される第2ギフトに関する第2表示要求を受け付けたことに応じて、前記動画に前記第2ギフトを表示させる。   In one aspect of the present invention, in response to receiving a second display request related to a second gift displayed in the moving image without being associated with a specific part of the character object from a viewing user viewing the moving image, The second gift is displayed on the moving image.

本発明の一態様において、前記動画の配信期間内にギフト表示禁止期間が設定され、前記第2ギフトは、前記動画の配信期間における前記ギフト表示禁止期間以外のタイミングで前記動画に表示される。   In one embodiment of the present invention, a gift display prohibition period is set within a distribution period of the moving image, and the second gift is displayed on the moving image at a timing other than the gift display prohibition period in the distribution period of the moving image.

本発明の一態様は、一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより、配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信方法に関する。当該動画配信方法は、前記視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記配信ユーザが使用する配信ユーザ装置に表示指示オブジェクトを表示させる工程と、前記表示指示オブジェクトへの操作に応じて、前記第1ギフトを前記動画に表示させる工程と、を備える。   One embodiment of the present invention relates to a moving image distribution method for performing live distribution of a moving image including animation of a character object generated based on a movement of a distribution user by executing computer-readable instructions by one or a plurality of computer processors. . The moving image distribution method includes, in response to receiving a first display request related to a first gift from the viewing user, displaying a display instruction object on a distribution user device used by the distribution user; And displaying the first gift in the moving image in response to the operation of (1).

本発明の一態様は、配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信プログラムに関する。当該動画配信プログラムは、一又は複数のコンピュータプロセッサに、前記視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記配信ユーザが使用する配信ユーザ装置に表示指示オブジェクトを表示させる工程と、前記表示指示オブジェクトへの操作に応じて、前記第1ギフトを前記動画に表示させる工程と、を実行させる。   One embodiment of the present invention relates to a moving image distribution program that performs live distribution of a moving image including animation of a character object generated based on a movement of a distribution user. The moving image distribution program causes one or more computer processors to display a display instruction object on a distribution user device used by the distribution user in response to receiving a first display request related to a first gift from the viewing user. A step of displaying the first gift on the moving image in response to an operation on the display instruction object.

本発明の実施形態によれば、配信動画中に配信ユーザの所望のタイミングでギフトを表示できる。   According to the embodiment of the present invention, a gift can be displayed at a desired timing of a distribution user during a distribution moving image.

一実施形態による動画配信システムを示すブロック図である。FIG. 1 is a block diagram illustrating a moving image distribution system according to an embodiment. 図1の動画配信システムで配信される動画を配信する配信ユーザ及び当該配信ユーザが使用している配信ユーザ装置を模式的に示す模式図である。FIG. 2 is a schematic diagram schematically illustrating a distribution user who distributes a moving image distributed by the moving image distribution system of FIG. 1 and a distribution user device used by the distribution user. 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。It is a figure showing an example of a display screen displayed on viewing user device 10 in one embodiment. 一実施形態において配信ユーザ装置20に表示される表示画面の例を示す図である。FIG. 6 is a diagram illustrating an example of a display screen displayed on the distribution user device 20 in one embodiment. 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。図4の表示画面においては通常オブジェクトの例が表示されている。It is a figure showing an example of a display screen displayed on viewing user device 10 in one embodiment. An example of a normal object is displayed on the display screen of FIG. 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。図5aの表示画面においては装着オブジェクトの例が表示されている。It is a figure showing an example of a display screen displayed on viewing user device 10 in one embodiment. An example of the mounted object is displayed on the display screen of FIG. 5A. 一実施形態において配信ユーザ装置20に表示される表示画面の例を示す図である。図5bの表示画面においては装着オブジェクトの例が表示されている。FIG. 6 is a diagram illustrating an example of a display screen displayed on the distribution user device 20 in one embodiment. An example of the mounted object is displayed on the display screen of FIG. 5B. 一実施形態において配信ユーザ装置20に表示される表示画面の例を示す図である。図6の表示画面においてはメッセージ確認ウィンドウの例が表示されている。FIG. 6 is a diagram illustrating an example of a display screen displayed on the distribution user device 20 in one embodiment. An example of the message confirmation window is displayed on the display screen of FIG. 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。図7aの表示画面においてはメッセージウィンドウの例が表示されている。It is a figure showing an example of a display screen displayed on viewing user device 10 in one embodiment. An example of a message window is displayed on the display screen of FIG. 7A. 一実施形態において配信ユーザ装置20に表示される表示画面の例を示す図である。図7bの表示画面においてはメッセージウィンドウの例が表示されている。FIG. 6 is a diagram illustrating an example of a display screen displayed on the distribution user device 20 in one embodiment. An example of a message window is displayed on the display screen of FIG. 7B. 一実施形態における動画配信処理の流れを示すフロー図である。It is a flowchart which shows the flow of a moving image distribution process in one Embodiment. 一実施形態において通常ギフトを表示する処理の流れを示すフロー図である。It is a flowchart which shows the flow of a process which displays a normal gift in one Embodiment. 一実施形態において装着ギフトを表示する処理の流れを示すフロー図である。It is a flow figure showing the flow of processing which displays a wearing gift in one embodiment. 一実施形態においてメッセージギフトを表示する処理の流れを示すフロー図である。It is a flowchart which shows the flow of a process which displays a message gift in one Embodiment. 図1の動画配信システムにおいて配信される動画に設定されたギフト表示禁止期間を説明するための図である。FIG. 2 is a diagram for explaining a gift display prohibition period set for a moving image distributed in the moving image distribution system of FIG. 1.

以下、図面を適宜参照し、本発明の様々な実施形態を説明する。複数の図面において同一の又は類似する構成要素には同じ参照符号が付される。   Hereinafter, various embodiments of the present invention will be described with reference to the drawings as appropriate. The same reference numerals are given to the same or similar components in a plurality of drawings.

図1及び図2を参照して、一実施形態による動画配信システムについて説明する。図1は、一実施形態による動画配信システム1を示すブロック図であり、図2は、動画配信システム1で配信される動画を配信する配信ユーザU1及び当該配信ユーザが使用している配信ユーザ装置20を模式的に示す模式図である。   A moving image distribution system according to an embodiment will be described with reference to FIGS. FIG. 1 is a block diagram illustrating a video distribution system 1 according to an embodiment. FIG. 2 is a distribution user U1 that distributes a video distributed by the video distribution system 1 and a distribution user device used by the distribution user. FIG.

動画配信システム1は、視聴ユーザ装置10と、配信ユーザ装置20と、サーバ装置60と、ストレージ70と、を備える。視聴ユーザ装置10と、配信ユーザ装置20と、サーバ装置60と、ストレージ70とは、ネットワーク50を介して相互に通信可能に接続されている。サーバ装置60は、後述するように、配信ユーザU1のキャラクタのアニメーションを含む動画を配信するように構成される。   The moving image distribution system 1 includes a viewing user device 10, a distribution user device 20, a server device 60, and a storage 70. The viewing user device 10, the distribution user device 20, the server device 60, and the storage 70 are communicably connected via a network 50. The server device 60 is configured to distribute a moving image including an animation of the character of the distribution user U1, as described later.

この動画は、サーバ装置60から視聴ユーザ装置10及び配信ユーザ装置20に配信される。配信された動画は、視聴ユーザ装置10のディスプレイに表示される。視聴ユーザ装置10のユーザである視聴ユーザは、配信された動画を視聴ユーザ装置10により視聴することができる。図面を簡潔するために図1には視聴ユーザ装置10が1台だけ示されているが、動画配信システム1は、複数の視聴ユーザ装置を備えていてもよい。配信ユーザU1は、配信された動画を視聴することにより、動画中の動画を確認しながらパフォーマンスを行うことができる。   This moving image is distributed from the server device 60 to the viewing user device 10 and the distribution user device 20. The distributed moving image is displayed on the display of the viewing user device 10. A viewing user who is a user of the viewing user device 10 can view the distributed moving image with the viewing user device 10. Although only one viewing user device 10 is shown in FIG. 1 for simplicity of the drawing, the moving image distribution system 1 may include a plurality of viewing user devices. By viewing the distributed moving image, the distribution user U1 can perform while checking the moving image in the moving image.

まず、配信ユーザ装置20について説明する。図示の実施形態において、配信ユーザ装置20は、コンピュータプロセッサ21と、通信I/F22と、ディスプレイ23と、カメラ24と、マイク25と、を備えている。   First, the distribution user device 20 will be described. In the illustrated embodiment, the distribution user device 20 includes a computer processor 21, a communication I / F 22, a display 23, a camera 24, and a microphone 25.

コンピュータプロセッサ21は、ストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ21は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ21は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ21は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。   The computer processor 21 is an arithmetic unit that loads an operating system and various programs for realizing various functions from a storage into a memory, and executes instructions included in the loaded programs. The computer processor 21 is, for example, a CPU, an MPU, a DSP, a GPU, various arithmetic devices other than these, or a combination thereof. The computer processor 21 may be realized by an integrated circuit such as an ASIC, a PLD, an FPGA, and an MCU. Although the computer processor 21 is illustrated as a single component in FIG. 1, the computer processor 21 may be a set of a plurality of physically separate computer processors.

通信I/F22は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。配信ユーザ装置20は、通信I/F22を介して、他の装置とデータを送受信することができる。   The communication I / F 22 is implemented as hardware, firmware, communication software such as a TCP / IP driver or a PPP driver, or a combination thereof. The distribution user device 20 can transmit and receive data to and from another device via the communication I / F 22.

ディスプレイ23は、表示パネルと、タッチパネルと、を有する。タッチパネルは、プレイヤのタッチ操作(接触操作)を検出することができるように構成されている。タッチパネルは、プレイヤのタップ、ダブルタップ、ドラッグ等の各種タッチ操作を検出することができる。タッチパネルは、静電容量式の近接センサを備え、プレイヤの非接触操作を検出可能に構成されてもよい。   The display 23 has a display panel and a touch panel. The touch panel is configured to detect a player's touch operation (contact operation). The touch panel can detect various touch operations such as tap, double tap, and drag of the player. The touch panel may include a proximity sensor of a capacitance type, and may be configured to be able to detect a non-contact operation of the player.

カメラ24は、配信ユーザU1の顔を連続的に撮像し、配信ユーザU1の顔の撮像データを取得する。カメラ24により撮像された配信ユーザU1の顔の撮像データは、通信I/F22を介してサーバ装置60に送信される。カメラ24は、人物の顔の奥行きを検出可能な3Dカメラであってもよい。   The camera 24 continuously captures an image of the face of the distribution user U1, and acquires image data of the face of the distribution user U1. The image data of the face of the distribution user U1 imaged by the camera 24 is transmitted to the server device 60 via the communication I / F 22. The camera 24 may be a 3D camera that can detect the depth of a person's face.

マイク25は、入力された音声を音声データに変換するように構成された集音装置である。マイク25は、配信ユーザU1の音声入力を取得することができるように構成され。マイク25により取得された配信ユーザU1の音声入力は音声データに変換され、この音声データが通信I/F22を介してサーバ装置60に送信される。   The microphone 25 is a sound collection device configured to convert input sound into sound data. The microphone 25 is configured to be able to acquire the voice input of the distribution user U1. The voice input of distribution user U1 acquired by microphone 25 is converted into voice data, and this voice data is transmitted to server device 60 via communication I / F22.

視聴ユーザ装置10は、配信ユーザ装置20と同様の構成要素を備えてもよい。例えば、視聴ユーザ装置10は、コンピュータプロセッサ、通信I/F、ディスプレイ、及びカメラを備えてもよい。   The viewing user device 10 may include components similar to those of the distribution user device 20. For example, the viewing user device 10 may include a computer processor, a communication I / F, a display, and a camera.

視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォンなどの情報処理装置である。視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォン以外に、携帯電話機、タブレット端末、パーソナルコンピュータ、電子書籍リーダー、ウェアラブルコンピュータ、ゲーム用コンソール、及びこれら以外の動画を再生可能な各種情報処理装置であってもよい。視聴ユーザ装置10及び配信ユーザ装置20の各々は、上記の構成要素以外に、ジャイロセンサ等の各種センサを備えるセンサユニット、及び各種情報を記憶するストレージを備えてもよい。   The viewing user device 10 and the distribution user device 20 are information processing devices such as smartphones. The viewing user device 10 and the distribution user device 20 are, besides a smartphone, a mobile phone, a tablet terminal, a personal computer, an electronic book reader, a wearable computer, a game console, and various other information processing devices capable of reproducing moving images. You may. Each of the viewing user device 10 and the distribution user device 20 may include a sensor unit including various sensors such as a gyro sensor and a storage for storing various information, in addition to the above-described components.

次に、サーバ装置60について説明する。図示の実施形態において、サーバ装置60は、コンピュータプロセッサ61と、通信I/F62と、ストレージ63と、を備えている。   Next, the server device 60 will be described. In the illustrated embodiment, the server device 60 includes a computer processor 61, a communication I / F 62, and a storage 63.

コンピュータプロセッサ61は、ストレージ63又はその他のストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ61は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ61は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ61は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。   The computer processor 61 is an arithmetic unit that loads an operating system and various programs for realizing various functions from the storage 63 or another storage into a memory, and executes instructions included in the loaded programs. The computer processor 61 is, for example, a CPU, an MPU, a DSP, a GPU, various arithmetic devices other than these, or a combination thereof. The computer processor 61 may be realized by an integrated circuit such as an ASIC, a PLD, an FPGA, and an MCU. Although the computer processor 21 is illustrated as a single component in FIG. 1, the computer processor 61 may be a set of a plurality of physically separate computer processors.

通信I/F62は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。サーバ装置60は、通信I/F62を介して、他の装置とデータを送受信することができる。   The communication I / F 62 is implemented as hardware, firmware, communication software such as a TCP / IP driver or a PPP driver, or a combination thereof. The server device 60 can transmit and receive data to and from another device via the communication I / F 62.

ストレージ63は、コンピュータプロセッサ61によりアクセスされる記憶装置である。ストレージ63は、例えば、磁気ディスク、光ディスク、半導体メモリ、又はデータを記憶可能な前記以外の各種記憶装置である。ストレージ63には、様々なプログラムが記憶され得る。ストレージ63に記憶され得るプログラム及び各種データの少なくとも一部は、サーバ装置60とは物理的に別体のストレージ(例えば、ストレージ70)に格納されてもよい。   The storage 63 is a storage device accessed by the computer processor 61. The storage 63 is, for example, a magnetic disk, an optical disk, a semiconductor memory, or any other storage device capable of storing data. Various programs can be stored in the storage 63. At least a part of the programs and various data that can be stored in the storage 63 may be stored in a storage physically separate from the server device 60 (for example, the storage 70).

本明細書において、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるとして説明されるプログラム又は当該プログラムに含まれる命令はそれぞれ、単一のコンピュータプロセッサで実行されてもよいし、複数のコンピュータプロセッサにより分散して実行されてもよい。また、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるプログラム又は当該プログラムに含まれる命令はそれぞれ、複数の仮想コンピュータプロセッサにより実行されてもよい。   In this specification, a program described as being executed by the computer processor 21 or the computer processor 61 or instructions included in the program may be respectively executed by a single computer processor or distributed by a plurality of computer processors. May be executed. Further, a program executed by the computer processor 21 or 61 or instructions included in the program may be executed by a plurality of virtual computer processors.

次に、ストレージ63に記憶されるデータについて説明する。図示の実施形態においては、ストレージ63には、モデルデータ63a、オブジェクトデータ63b、及び前記以外の配信動画の生成及び配信に必要な様々なデータが記憶される。   Next, data stored in the storage 63 will be described. In the illustrated embodiment, the storage 63 stores model data 63a, object data 63b, and various other data necessary for generating and distributing other distribution moving images.

モデルデータ63aは、キャラクタのアニメーションを生成するためのモデルデータである。モデルデータ63aは、3次元のアニメーションを生成するための3次元モデルデータであってもよいし、2次元のモデルデータを生成するための2次元モデルデータであってもよい。モデルデータ63aは、例えば、キャラクタの顔及び顔以外の部分の骨格を示すリグデータ(「スケルトンデータ」と呼ばれることもある。)と、キャラクタの表面の形状や質感を示す表面データと、を含む。モデルデータ63aには、互いに異なる複数のモデルデータを含むことができる。この複数のモデルデータは、互いに異なるリグデータを有していてもよいし、同じリグデータを有していてもよい。この複数のモデルデータは、互いと異なる表面データを有していてもよいし、同じ表面データを有していてもよい。   The model data 63a is model data for generating a character animation. The model data 63a may be three-dimensional model data for generating a three-dimensional animation, or may be two-dimensional model data for generating two-dimensional model data. The model data 63a includes, for example, rig data (sometimes called “skeleton data”) indicating the skeleton of the character's face and parts other than the face, and surface data indicating the shape and texture of the character's surface. The model data 63a can include a plurality of different model data. The plurality of model data may have different rig data, or may have the same rig data. The plurality of model data may have different surface data from each other, or may have the same surface data.

オブジェクトデータ63bは、動画を構成する仮想空間を構築するためのアセットデータを含む。オブジェクトデータ63bは、動画を構成する仮想空間の背景を描画するためのデータ、動画に表示される各種物体を描画するためのデータ、及びこれら以外の動画に表示される各種オブジェクトを描画するためのデータが含まれる。オブジェクトデータ63bには、仮想空間におけるオブジェクトの位置を示すオブジェクト位置情報を含んでもよい。   The object data 63b includes asset data for constructing a virtual space constituting a moving image. The object data 63b includes data for drawing the background of the virtual space forming the moving image, data for drawing various objects displayed in the moving image, and data for drawing various objects displayed in the moving image other than these. Contains data. The object data 63b may include object position information indicating the position of the object in the virtual space.

オブジェクトデータ63bには、上記以外にも、ギフトオブジェクトが含まれ得る。ギフトオブジェクトは、動画を視聴している視聴ユーザからのギフトの表示要求に基づいて動画に表示される。ギフトオブジェクトには、エフェクトギフトに対応するエフェクトオブジェクトと、通常ギフトに対応する通常オブジェクトと、装着ギフトに対応する装着オブジェクトと、メッセージギフトに対応するメッセージオブジェクトと、が含まれ得る。視聴ユーザは、所望のギフトを購入することができる。   In addition to the above, a gift object may be included in the object data 63b. The gift object is displayed on the moving image based on a gift display request from a viewing user who is watching the moving image. The gift object may include an effect object corresponding to the effect gift, a normal object corresponding to the normal gift, a mounting object corresponding to the mounting gift, and a message object corresponding to the message gift. The viewing user can purchase a desired gift.

エフェクトギフトを示すエフェクトオブジェクトは、配信動画の視聴画面全体の印象に影響を与えるオブジェクトであり、例えば紙吹雪を模したオブジェクトである。紙吹雪を模したオブジェクトは、視聴画面全体に表示されてもよく、これにより表示の前後における視聴画面全体の印象を変えることができる。エフェクトオブジェクトは、キャラクタオブジェクトと重複するように表示されることもあるが、キャラクタオブジェクトの特定の部位と関連付けられずに表示される点で装着オブジェクトと異なっている。   The effect object indicating the effect gift is an object that affects the impression of the entire viewing screen of the distribution moving image, for example, an object imitating confetti. An object imitating a confetti may be displayed on the entire viewing screen, thereby changing the impression of the entire viewing screen before and after the display. The effect object may be displayed so as to overlap with the character object, but is different from the mounted object in that it is displayed without being associated with a specific part of the character object.

通常ギフトを示す通常オブジェクトは、視聴ユーザから配信ユーザ(例えば、配信ユーザU1)へのギフトを示すオブジェクトであり、例えばぬいぐるみ、花束、アクセサリ、又は前記以外のギフトやプレゼントに適した物品を模したオブジェクトである。一態様において、通常オブジェクトは、キャラクタオブジェクトと接しないように動画の表示画面に表示される。一態様において、通常オブジェクトは、キャラクタオブジェクトと重複しないように動画の表示画面に表示される。通常オブジェクトは、仮想空間においてキャラクタオブジェクト以外のオブジェクトと重複するように表示されてもよい。通常オブジェクトは、キャラクタオブジェクトと重複するように表示されることもあるが、キャラクタオブジェクトの特定の部位と関連付けられた表示はなされない点で装着オブジェクトと異なっている。一態様において、通常オブジェクトをキャラクタオブジェクトと重複して表示させる場合には、当該通常オブジェクトは、当該キャラクタオブジェクトの顔を含む頭部以外の部分と重複し、当該キャラクタオブジェクトの頭部とは重複しないように表示される。一態様において、通常オブジェクトをキャラクタオブジェクトと重複して表示させる場合には、当該通常オブジェクトは、当該キャラクタオブジェクトの顔を含む上半身以外の部分と重複し、当該キャラクタオブジェクトの上半身とは重複しないように表示される。   The normal object indicating the normal gift is an object indicating a gift from the viewing user to the distribution user (for example, the distribution user U1), and imitates, for example, a stuffed toy, a bouquet, an accessory, or an article suitable for other gifts and presents. Object. In one aspect, the normal object is displayed on the moving image display screen so as not to contact the character object. In one aspect, the normal object is displayed on the display screen of the moving image so as not to overlap with the character object. The normal object may be displayed so as to overlap with an object other than the character object in the virtual space. The normal object may be displayed so as to overlap with the character object, but is different from the mounted object in that a display associated with a specific part of the character object is not performed. In one aspect, when the normal object is displayed so as to overlap with the character object, the normal object overlaps with a part other than the head including the face of the character object, and does not overlap with the head of the character object. Is displayed as follows. In one aspect, when the normal object is displayed so as to overlap with the character object, the normal object overlaps with a part other than the upper body including the face of the character object, and does not overlap with the upper body of the character object. Is displayed.

装着ギフトを示す装着オブジェクトは、キャラクタオブジェクトの特定の部位(装着部位)と関連付けて表示画面に表示されるオブジェクトである。一態様において、キャラクタオブジェクトの特定の部位と関連付けて表示画面に表示される装着オブジェクトは、当該キャラクタオブジェクトの当該特定の部位に接するように表示画面に表示される。一態様において、キャラクタオブジェクトの特定の部位と関連付けて表示画面に表示される装着オブジェクトは、当該キャラクタオブジェクトの当該特定の部位の一部又は全部を覆うように表示画面に表示される。特定の部位は、3次元座標空間における位置を示す3次元位置情報で特定されてもよいし、3次元座標空間の位置情報に関連付けられていてもよい。例えばキャラクタの頭部において、特定の部位は、頭部の前方左側、前方右側、後方左側、後方右側、中央前側、中央後側、左目、右目、左耳、右耳、及び髪全体という単位で定められてもよい。   The wearing object indicating the wearing gift is an object displayed on the display screen in association with a specific part (wearing part) of the character object. In one aspect, the mounted object displayed on the display screen in association with the specific part of the character object is displayed on the display screen so as to be in contact with the specific part of the character object. In one aspect, the mounting object displayed on the display screen in association with the specific part of the character object is displayed on the display screen so as to cover part or all of the specific part of the character object. The specific part may be specified by three-dimensional position information indicating a position in the three-dimensional coordinate space, or may be associated with position information in the three-dimensional coordinate space. For example, in the head of the character, the specific part is a unit of front left side, front right side, rear left side, rear right side, center front side, center rear side, left eye, right eye, left ear, right ear, and the whole hair. It may be determined.

装着オブジェクトは、例えば、キャラクタオブジェクトに装着されるアクセサリ(カチューシャ、ネックレス、イヤリングなど)、衣服(Tシャツなど)、コスチューム、及びこれら以外のキャラクラオブジェクトに装着可能なオブジェクトである。装着オブジェクトに対応するオブジェクトデータ63bには、当該装着オブジェクトがキャラクタオブジェクトのどの部位に関連付けられるかを示す装着部位情報が含まれてもよい。ある装着オブジェクトの装着部位情報は、当該装着オブジェクトがキャラクタオブジェクトのどの部位に装着されるかを示すことができる。例えば、装着オブジェクトがカチューシャである場合には、当該装着オブジェクトの装着部位情報は、当該装着オブジェクトがキャラクタオブジェクトの「頭部」に装着されることを示してもよい。装着オブジェクトが装着される装着部位情報が3次元座標空間の位置として特定される場合には、当該装着部位情報は3次元座標空間における複数の位置と関連付けられてもよい。例えば「カチューシャ」を示す装着オブジェクトが装着される位置を示す装着部位情報は、キャラクタオブジェクトの「頭部後方左側」と「頭部後方右側」の2つの部位と関連付けられてもよい。つまり、「カチューシャ」を示す装着オブジェクトは、「頭部後方左側」及び「頭部後方右側」の両方に装着されてもよい。装着オブジェクトがTシャツである場合には、当該装着オブジェクトの装着部位情報は、当該装着オブジェクトがキャラクタオブジェクトの「胴部」に装着されることを示してもよい。   The attachment object is, for example, an accessory (such as a headband, a necklace, or an earring) attached to the character object, clothing (such as a T-shirt), a costume, or any other object that can be attached to a character object. The object data 63b corresponding to the mounted object may include mounted part information indicating which part of the character object is associated with the mounted object. The mounting part information of a certain mounting object can indicate which part of the character object the mounting object is mounted on. For example, when the mounted object is a headband, the mounted part information of the mounted object may indicate that the mounted object is mounted on the “head” of the character object. When the mounting part information on which the mounting object is mounted is specified as a position in the three-dimensional coordinate space, the mounting part information may be associated with a plurality of positions in the three-dimensional coordinate space. For example, the mounting part information indicating the position where the mounting object indicating “headband” is mounted may be associated with two parts of the character object, “head rear left” and “head rear right”. That is, the mounting object indicating “headband” may be mounted on both “head rear left” and “head rear right”. When the mounted object is a T-shirt, the mounted part information of the mounted object may indicate that the mounted object is mounted on the “body” of the character object.

装着部位が共通する2種類の装着オブジェクトは、時間を隔てて動画に表示される。すなわち、装着部位が共通する2種類の装着オブジェクトは、時間を隔ててキャラクタオブジェクトに装着される。言い換えると、装着部位が共通する2種類の装着オブジェクトは、キャラクタオブジェクトに同時には装着されない。例えば、カチューシャを示す装着オブジェクト及び帽子を示す装着オブジェクトに関し、装着部位としていずれも「頭部」が設定されている場合、カチューシャを示す装着オブジェクトと帽子を示す装着オブジェクトとは同時には表示されない。   Two types of mounting objects having a common mounting part are displayed in a moving image at a time interval. That is, two types of mounting objects having a common mounting part are mounted on the character object at intervals. In other words, two types of mounting objects having a common mounting part are not simultaneously mounted on the character object. For example, with respect to the mounting object indicating the headband and the mounting object indicating the hat, when both the heads are set as the mounting parts, the mounting object indicating the headband and the mounting object indicating the hat are not displayed at the same time.

メッセージギフトを示すメッセージオブジェクトは、視聴ユーザからのメッセージを含む。メッセージオブジェクトは、後述するコメント表示領域35に表示されるコメントよりも目立つ態様で動画に表示されてもよい。メッセージオブジェクトは、コメント表示領域35に表示されるコメントよりも長時間にわたって動画に表示されてもよい。   The message object indicating the message gift includes a message from the viewing user. The message object may be displayed on the moving image in a manner more prominent than a comment displayed in a comment display area 35 described later. The message object may be displayed on the moving image for a longer time than the comment displayed in the comment display area 35.

ギフトオブジェクトの各々には、その種類に応じた表示時間が設定されていてもよい。一態様において、装着オブジェクトの表示時間は、エフェクトオブジェクトの表示時間及び通常オブジェクトの表示時間よりも長く設定されていてもよい。例えば、装着オブジェクトの表示時間は60秒間に設定され、エフェクトオブジェクトの表示時間は5秒間に設定され、通常オブジェクトの表示時間は10秒間に設定されてもよい。   A display time according to the type of each gift object may be set. In one aspect, the display time of the mounted object may be set longer than the display time of the effect object and the display time of the normal object. For example, the display time of the mounted object may be set to 60 seconds, the display time of the effect object may be set to 5 seconds, and the display time of the normal object may be set to 10 seconds.

次に、コンピュータプロセッサ21により実現される機能についてより具体的に説明する。コンピュータプロセッサ21は、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部21aとして機能する。コンピュータプロセッサ21により実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ21以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ21により実現される機能の少なくとも一部は、例えば、サーバ装置60に搭載されているコンピュータプロセッサ61により実現されてもよい。   Next, functions realized by the computer processor 21 will be described more specifically. The computer processor 21 functions as a face motion data generation unit 21a by executing computer-readable instructions included in the distribution program. At least a part of the functions realized by the computer processor 21 may be realized by a computer processor other than the computer processor 21 of the moving image distribution system 1. At least a part of the functions realized by the computer processor 21 may be realized by, for example, the computer processor 61 mounted on the server device 60.

フェイスモーションデータ生成部21aは、カメラ24の撮像データに基づいて、配信ユーザU1の顔の動きのデジタル表現であるフェイスモーションデータを生成する。フェイスモーションデータは、時間の経過に伴って随時生成される。フェイスモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、フェイスモーションデータは、配信ユーザU1の顔の動き(表情の変化)を時系列的にデジタル表現することができる。フェイスモーションデータ生成部21aにて生成されたフェイスモーションデータは、通信I/F22を介してサーバ装置60に送信される。   The face motion data generation unit 21a generates face motion data, which is a digital representation of the movement of the face of the distribution user U1, based on the imaging data of the camera 24. The face motion data is generated as needed with the passage of time. The face motion data may be generated at predetermined sampling time intervals. In this way, the face motion data can digitally express the movement of the face (change in facial expression) of the distribution user U1 in a time-series manner. The face motion data generated by the face motion data generation unit 21a is transmitted to the server device 60 via the communication I / F 22.

配信ユーザ装置20においては、フェイスモーションデータ生成部21aにて生成されるフェイスモーションデータに加えて、配信ユーザU1の体の顔以外の各部位の位置及び向きのデジタル表現であるボディモーションデータを生成してもよい。配信ユーザ装置20は、フェイスモーションデータに加えて、ボディモーションデータをサーバ装置60に送信してもよい。ボディモーションデータを生成するために、配信ユーザU1は、モーションセンサを装着してもよい。配信ユーザ装置20は、配信ユーザU1に装着されたモーションセンサの検出情報に基づいて、ボディモーションデータを生成することができるように構成されてもよい。ボディモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、ボディモーションデータは、配信ユーザU1の体の動きを時系列的にデジタルデータとして表現する。配信ユーザU1に装着されたモーションセンサの検出情報に基づくボディモーションデータの生成は、例えば、撮影スタジオで行われてもよい。撮影スタジオには、ベースステーションと、トラッキングセンサと、ディスプレイと、が備えられてもよい。ベースステーションは、多軸レーザーエミッターであってもよい。配信ユーザU1に装着されるモーションセンサは、例えば、HTC CORPORATIONから提供されているVive Trackerであってもよい。撮影スタジオに備えられるベースステーションは、例えば、HTC CORPORATIONから提供されているベースステーションであってもよい。また、撮影スタジオと別室には、サポーターコンピュータが設置されていてもよい。撮影スタジオのディスプレイは、サポートコンピュータから受信した情報を表示するように構成されてもよい。サーバ装置60は、サポーターコンピュータが設置されている部屋と同じ部屋に設置されてもよい。サポーターコンピュータが設置されている部屋と撮影スタジオとはガラス窓によって隔てられていてもよい。この場合、サポーターコンピュータのオペレータ(本明細書では「サポーター」ということがある。)は、配信ユーザU1を視認できる。サポーターコンピュータは、サポーターの操作に応じて、撮影スタジオに備えられた各種装置の設定を変更することができるように構成されてもよい。サポーターコンピュータは、例えば、ベースステーションによる走査インターバルの設定、トラッキングセンサの設定、及びこれら以外の各種機器の各種設定の変更を行うことができる。サポーターは、サポーターコンピュータにメッセージを入力し、当該入力されたメッセージを撮影スタジオのディスプレイに表示することができる。   In the delivery user device 20, in addition to the face motion data generated by the face motion data generation unit 21a, body motion data that is a digital representation of the position and orientation of each part other than the face of the body of the delivery user U1 is generated. May be. The distribution user device 20 may transmit the body motion data to the server device 60 in addition to the face motion data. To generate the body motion data, the distribution user U1 may wear a motion sensor. The distribution user device 20 may be configured to be able to generate body motion data based on detection information of a motion sensor mounted on the distribution user U1. The body motion data may be generated at predetermined sampling time intervals. As described above, the body motion data represents the movement of the body of the distribution user U1 as digital data in time series. The generation of the body motion data based on the detection information of the motion sensor mounted on the distribution user U1 may be performed, for example, in a shooting studio. The shooting studio may be provided with a base station, a tracking sensor, and a display. The base station may be a multi-axis laser emitter. The motion sensor attached to the distribution user U1 may be, for example, a Vive Tracker provided by HTC CORPORATION. The base station provided in the shooting studio may be, for example, a base station provided by HTC CORPORATION. A supporter computer may be installed in a room separate from the shooting studio. The display of the shooting studio may be configured to display information received from the support computer. The server device 60 may be installed in the same room where the supporter computer is installed. The room in which the supporter computer is installed may be separated from the photography studio by a glass window. In this case, the operator of the supporter computer (hereinafter, sometimes referred to as “supporter”) can visually recognize the distribution user U1. The supporter computer may be configured to be able to change settings of various devices provided in the shooting studio according to the operation of the supporter. The supporter computer can, for example, set a scan interval by the base station, set a tracking sensor, and change various settings of various other devices. The supporter can input a message to the supporter computer and display the input message on the display of the photography studio.

次に、コンピュータプロセッサ61により実現される機能についてより具体的に説明する。コンピュータプロセッサ61は、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、アニメーション生成部61a、動画生成部61b、動画配信部61c、ギフト要求処理部61d、及びギフト購入処理部61eとして機能する。コンピュータプロセッサ61により実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ61以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ61により実現される機能の少なくとも一部は、例えば、配信ユーザ装置20のコンピュータプロセッサ21により実現されてもよく、視聴ユーザ装置10のコンピュータプロセッサにより実現されてもよい。具体的には、アニメーション生成部61a及び動画生成部61bの機能の一部又は全部は、配信ユーザ装置20において実行されてもよい。例えば、配信ユーザ装置20において生成された動画がサーバ装置60に送信され、サーバ装置60から視聴ユーザ装置10に配信されてもよい。   Next, functions realized by the computer processor 61 will be described more specifically. The computer processor 61 executes computer-readable instructions included in the distribution program to function as an animation generation unit 61a, a video generation unit 61b, a video distribution unit 61c, a gift request processing unit 61d, and a gift purchase processing unit 61e. I do. At least a part of the functions realized by the computer processor 61 may be realized by a computer processor other than the computer processor 61 of the moving image distribution system 1. At least a part of the functions realized by the computer processor 61 may be realized by, for example, the computer processor 21 of the distribution user device 20 or may be realized by the computer processor of the viewing user device 10. Specifically, part or all of the functions of the animation generation unit 61a and the moving image generation unit 61b may be executed in the distribution user device 20. For example, the moving image generated in the distribution user device 20 may be transmitted to the server device 60 and distributed from the server device 60 to the viewing user device 10.

アニメーション生成部61aは、配信ユーザ装置20のフェイスモーションデータ生成部21aによって生成されたフェイスモーションデータを、モデルデータ63aに含まれる所定のモデルデータに適用することにより、キャラクタオブジェクトのアニメーションを生成するように構成される。アニメーション生成部61aは、キャラクタオブジェクトの表情が当該フェイスモーションデータに基づいて変化するように、当該キャラクタオブジェクトのアニメーションを生成することができる。具体的には、アニメーション生成部61aは、配信ユーザU1に関するフェイスモーションデータに基づいて、配信ユーザU1の表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。   The animation generation unit 61a generates an animation of the character object by applying the face motion data generated by the face motion data generation unit 21a of the distribution user device 20 to predetermined model data included in the model data 63a. It is composed of The animation generation unit 61a can generate an animation of the character object so that the expression of the character object changes based on the face motion data. Specifically, the animation generation unit 61a can generate an animation of a character object that moves in synchronization with the movement of the expression of the distribution user U1, based on the face motion data relating to the distribution user U1.

配信ユーザ装置20から配信ユーザU1に関するボディモーションデータが提供される場合には、アニメーション生成部61aは、配信ユーザU1に関するボディモーションデータ及びフェイスモーションデータに基づいて、配信ユーザU1の体及び表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。   When the distribution user device 20 provides the body motion data regarding the distribution user U1, the animation generation unit 61a performs the movement of the body and the facial expression of the distribution user U1 based on the body motion data and the face motion data regarding the distribution user U1. Animation of a character object that moves in synchronization with.

動画生成部61bは、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザU1に対応するキャラクタオブジェクトのアニメーションを、を含む動画を生成することができる。動画生成部61bによって生成される動画において、配信ユーザU1に対応するキャラクタオブジェクトは、背景画像に重畳して表示される。   The moving image generation unit 61b generates a background image indicating a background using the object data 63b, and can generate a moving image including the background image and an animation of a character object corresponding to the distribution user U1. In the moving image generated by the moving image generator 61b, the character object corresponding to the distribution user U1 is displayed so as to be superimposed on the background image.

動画生成部61bは、生成した動画に、配信ユーザ装置20から受信した音声データに基づいて生成される配信ユーザU1の音声を合成することができる。以上のようにして、動画生成部61bは、配信ユーザU1の表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成し、このアニメーションに配信ユーザU1の音声が合成された配信用の動画を生成することができる。   The moving image generation unit 61b can synthesize the generated moving image with the audio of the distribution user U1 generated based on the audio data received from the distribution user device 20. As described above, the moving image generation unit 61b generates an animation of the character object that moves in synchronization with the movement of the expression of the distribution user U1, and generates a distribution moving image in which the voice of the distribution user U1 is synthesized with the animation. can do.

動画配信部61cは、動画生成部61bにおいて生成された動画を配信する。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置に配信される。生成された動画は、配信ユーザ装置20にも配信される。受信された動画は、視聴ユーザ装置10及び配信ユーザ装置20において再生される。   The moving image distribution unit 61c distributes the moving image generated by the moving image generation unit 61b. This moving image is distributed to the viewing user device 10 and other viewing user devices via the network 50. The generated moving image is also distributed to the distribution user device 20. The received moving image is reproduced in the viewing user device 10 and the distribution user device 20.

動画配信部61cから配信され視聴ユーザ装置10において再生されている動画の表示例が図3aに示されており、動画配信部61cから配信され配信ユーザ装置20において再生されている動画の表示例が図3bに示されている。図3aに示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置20から配信された動画の表示画像30が表示される。この視聴ユーザ装置10に表示されている表示画像30には、アニメーション生成部61aにより生成された配信ユーザU1のキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。   FIG. 3A shows a display example of a moving image distributed from the moving image distribution unit 61c and reproduced in the viewing user device 10, and a display example of a moving image distributed from the moving image distribution unit 61c and reproduced in the distribution user device 20 is shown in FIG. This is shown in FIG. 3b. As shown in FIG. 3A, a display image 30 of the moving image distributed from the server device 20 is displayed on the display of the viewing user device 10. The display image 30 displayed on the viewing user device 10 includes a character object 31, a gift button 32, an evaluation button 33, a comment button 34, and a comment display generated by the animation generating unit 61a. Region 35 is included.

キャラクタオブジェクト31は、上記のように、配信ユーザU1のフェイスモーションデータをモデルデータ63aに含まれているモデルデータに適用することにより生成されているため、配信ユーザU1の表情の動きに同期してその表情が変化する。配信ユーザ装置20からボディモーションデータが提供される場合には、キャラクタオブジェクト31は、その顔以外の部位も、配信ユーザU1の体の動きに同期して変化するように制御され得る。   As described above, since the character object 31 is generated by applying the face motion data of the distribution user U1 to the model data included in the model data 63a, the character object 31 is synchronized with the movement of the facial expression of the distribution user U1. The expression changes. When body motion data is provided from the distribution user device 20, the character object 31 may be controlled so that parts other than its face change in synchronization with the movement of the body of the distribution user U1.

ギフトボタン32は、視聴ユーザ装置10への操作によって選択可能に表示画面30に表示されている。ギフトボタン32は、例えば、視聴ユーザ装置10のタッチパネルのうちギフトボタン32が表示されている領域へのタップ操作により選択され得る。一実施形態において、ギフトボタン32が選択されると、表示画面30に、視聴中の動画を配信している配信ユーザにギフティングするギフトを選択するためのウィンドウが表示される。当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを購入することができる。他の実施形態においては、ギフトボタン32が選択されたことに応じて、表示画面30に、購入済みのギフトの一覧を含むウィンドウが表示される。この場合、当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを選択することができる。ギフティング又は購入可能なギフトには、エフェクトギフト、通常ギフト、装着ギフト、メッセージギフト、及びこれら以外のギフトが含まれ得る。   The gift button 32 is displayed on the display screen 30 so as to be selectable by operating the viewing user device 10. The gift button 32 can be selected by, for example, a tap operation on an area on the touch panel of the viewing user device 10 where the gift button 32 is displayed. In one embodiment, when the gift button 32 is selected, a window is displayed on the display screen 30 for selecting a gift to be gifted to a distribution user who distributes the moving image being viewed. The viewing user can purchase a gift to be gifted from the gifts displayed in the window. In another embodiment, a window including a list of purchased gifts is displayed on the display screen 30 in response to the selection of the gift button 32. In this case, the viewing user can select a gift to be gifted from the gifts displayed in the window. Gifts that can be gifted or purchased can include effect gifts, regular gifts, wearing gifts, message gifts, and other gifts.

評価ボタン33は、視聴ユーザ装置10を使用する視聴ユーザによって選択可能に表示画面30に表示されている。評価ボタン33は、例えば、視聴ユーザ装置10のタッチパネルのうち評価ボタン33が表示されている領域へのタップ操作により選択され得る。動画を視聴中の視聴ユーザによって評価ボタン33が選択されると、当該動画への肯定的な評価がなされたことを示す評価情報がサーバ装置60に送信されてもよい。サーバ装置60は、視聴ユーザ装置10及びこれ以外の視聴ユーザ装置からの評価情報を集計することができる。   The evaluation button 33 is displayed on the display screen 30 so as to be selectable by a viewing user using the viewing user device 10. The evaluation button 33 can be selected by, for example, a tap operation on a region of the touch panel of the viewing user device 10 where the evaluation button 33 is displayed. When the evaluation button 33 is selected by the viewing user who is watching the moving image, evaluation information indicating that the moving image has been positively evaluated may be transmitted to the server device 60. The server device 60 can aggregate evaluation information from the viewing user device 10 and other viewing user devices.

コメントボタン34は、視聴ユーザによって選択可能に表示画面30に表示される。コメントボタン34が例えばタップ操作により選択されると、コメントを入力するためのコメント入力ウィンドウが表示画面30に表示される。視聴ユーザは、視聴ユーザ装置10の入力機構を介してコメントを入力することができる。入力されたコメントは、視聴ユーザ装置10からサーバ装置60に送信される。サーバ装置60は、視聴ユーザ装置10及びこれ以外の視聴ユーザ装置からのコメントを受け付け、当該コメントを表示画像30内のコメント表示領域35に表示する。コメント表示領域35には、視聴ユーザ装置10及びこれ以外の視聴ユーザ装置から投稿されたコメントが、例えば時系列に表示される。コメント表示領域35は、表示画面30の一部の領域を占める。コメント表示領域35に表示可能なコメント数には上限がある。図示の例では、コメント表示領域35には3つまでコメントが表示され得る。コメント表示領域35に設定されている上限を超えたコメントの投稿がなされた場合には、投稿時間が古いコメントから順にコメント表示領域35から削除される。このため、視聴ユーザから受け付けられるコメントの頻度が高くなるほどコメント領域35における各コメントの表示時間は短くなる。   The comment button 34 is displayed on the display screen 30 so as to be selectable by the viewing user. When the comment button 34 is selected by, for example, a tap operation, a comment input window for inputting a comment is displayed on the display screen 30. The viewing user can input a comment via the input mechanism of the viewing user device 10. The input comment is transmitted from the viewing user device 10 to the server device 60. The server device 60 accepts comments from the viewing user device 10 and other viewing user devices, and displays the comment in the comment display area 35 in the display image 30. In the comment display area 35, comments posted from the viewing user device 10 and other viewing user devices are displayed, for example, in chronological order. The comment display area 35 occupies a part of the display screen 30. There is an upper limit on the number of comments that can be displayed in the comment display area 35. In the illustrated example, up to three comments can be displayed in the comment display area 35. When a comment exceeding the upper limit set in the comment display area 35 is posted, the comment is deleted from the comment display area 35 in ascending order of post time. For this reason, the display time of each comment in the comment area 35 decreases as the frequency of comments received from the viewing user increases.

図3bに示されているように、配信ユーザ装置20のディスプレイには、サーバ装置20から配信された動画の表示画像40が表示される。この配信ユーザ装置20に表示される表示画像40には、配信ユーザU1に対応するキャラクタオブジェクト31と、視聴ユーザによって表示要求がなされた装着ギフトを表示するための表示指示ボタン42a〜42cと、コメント表示領域35と、が含まれている。配信ユーザ装置20に表示される表示画像40には、視聴ユーザ装置10に表示されている表示画像30と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像40は、ギフトボタン32、評価ボタン33、及びコメントボタン34を含んでおらず、表示指示ボタン42a〜42cを含んでいる点で表示画像30と異なっている。   As shown in FIG. 3B, the display image of the moving image distributed from the server device 20 is displayed on the display of the distribution user device 20. The display image 40 displayed on the distribution user device 20 includes a character object 31 corresponding to the distribution user U1, display instruction buttons 42a to 42c for displaying a wearing gift requested to be displayed by the viewing user, and comments And a display area 35. The display image 40 displayed on the distribution user device 20 includes the same background image, character object image, and comment as the display image 30 displayed on the viewing user device 10. On the other hand, the display image 40 is different from the display image 30 in that it does not include the gift button 32, the evaluation button 33, and the comment button 34, but includes the display instruction buttons 42a to 42c.

表示指示ボタン42a〜42cは、視聴ユーザから後述する装着ギフトを表示するための表示要求を受け付けたことに応じて表示画面40に表示される。図示の実施形態においては、表示画像40に3つの表示指示ボタン42a〜42cが表示されている。表示指示ボタン42a〜42cの各々は、配信ユーザによって選択可能に表示画面40に表示される。表示指示ボタン42a〜42cのいずれかが例えばタップ操作により選択されると、この選択された表示指示ボタンに対応する装着ギフトを表示するための操作が行われる。このように、表示指示ボタン42a〜42cは、装着ギフトを配信中の動画に表示させる指示を行うための表示指示オブジェクトである。このため、本明細書においては、表示指示ボタン42a〜42cを表示指示オブジェクト42a〜42cと呼ぶことがある。また、表示指示オブジェクト42a〜42cを互いに区別する必要がない場合には、単に表示指示オブジェクト42と呼ぶことがある。装着ギフトの表示の具体例については後述する。表示画面40は、上記のサポーターコンピュータに表示されてもよい。表示指示オブジェクト42a〜42cは、サポーターによる当該サポーターコンピュータの操作に応じて選択されてもよい。   The display instruction buttons 42a to 42c are displayed on the display screen 40 in response to receiving a display request for displaying a wearing gift described later from the viewing user. In the illustrated embodiment, three display instruction buttons 42a to 42c are displayed on the display image 40. Each of the display instruction buttons 42a to 42c is displayed on the display screen 40 so as to be selectable by the distribution user. When any one of the display instruction buttons 42a to 42c is selected by, for example, a tap operation, an operation for displaying a wearing gift corresponding to the selected display instruction button is performed. As described above, the display instruction buttons 42a to 42c are display instruction objects for giving an instruction to display the wearing gift on the moving image being distributed. For this reason, the display instruction buttons 42a to 42c may be referred to as display instruction objects 42a to 42c in this specification. When it is not necessary to distinguish the display instruction objects 42a to 42c from each other, they may be simply referred to as the display instruction objects 42. A specific example of the display of the attached gift will be described later. The display screen 40 may be displayed on the supporter computer. The display instruction objects 42a to 42c may be selected according to the operation of the supporter computer by the supporter.

装着ギフトの表示を要求する表示要求が受け付けられるたびに、当該表示要求に対応する表示指示オブジェクト42が表示画面40に追加される。表示画面40に表示可能な表示指示オブジェクト42の数には上限がある。図示の実施形態では、表示画面40に表示可能な表示指示オブジェクト42の上限数は3である。この場合、表示画面40には、表示指示オブジェクトを3つ表示できる表示領域を有している。装着ギフトの表示要求を4以上受け付けた場合には、4番目以降の表示要求に対応する表示指示オブジェクト42は表示画面40には表示されない。4番目に受け付けられた装着ギフトの表示要求に対応する表示指示オブジェクト42は、既に表示されている3つの表示指示オブジェクト42のうちのいずれかが選択されて、表示領域に空きができた場合に表示画面40に表示される。   Each time a display request for displaying the attached gift is received, a display instruction object 42 corresponding to the display request is added to the display screen 40. There is an upper limit on the number of display instruction objects 42 that can be displayed on the display screen 40. In the illustrated embodiment, the maximum number of display instruction objects 42 that can be displayed on the display screen 40 is three. In this case, the display screen 40 has a display area in which three display instruction objects can be displayed. When four or more display requests for the attached gift are received, the display instruction objects 42 corresponding to the fourth and subsequent display requests are not displayed on the display screen 40. The display instruction object 42 corresponding to the display request of the wearing gift accepted fourthly is selected when any of the three display instruction objects 42 already displayed is selected and the display area becomes empty. It is displayed on the display screen 40.

ギフト要求処理部61dは、視聴ユーザからギフトの表示要求を受け付け、当該表示要求に応じたギフトオブジェクトを表示するための処理を行う。各視聴ユーザは、自らの視聴ユーザ装置を操作することにより、ギフトの表示要求をサーバ装置60に送信することができる。ギフトの表示要求には、視聴ユーザのユーザIDと、表示を要求するギフトを特定するギフト識別情報(ギフトID)及び/又は表示を要求するギフトに対応するギフトオブジェクトを特定するギフトオブジェクト識別情報(ギフトオブジェクトID)と、が含まれてもよい。   The gift request processing unit 61d receives a display request for a gift from the viewing user and performs processing for displaying a gift object corresponding to the display request. Each viewing user can transmit a gift display request to the server device 60 by operating his or her viewing user device. The gift display request includes a user ID of the viewing user, gift identification information (gift ID) for specifying a gift for which display is requested, and / or gift object identification information for specifying a gift object corresponding to the gift for which display is requested ( Gift object ID).

上述のように、ギフトを示すギフトオブジェクトには、エフェクトギフトに対応するエフェクトオブジェクトと、通常ギフトに対応する通常オブジェクトと、装着ギフトに対応する装着オブジェクトと、が含まれ得る。装着ギフトは、第1ギフトの例である。装着オブジェクトを第1ギフトオブジェクトと呼ぶことがある。装着ギフト(または装着オブジェクト)の表示を要求する表示要求は、第1表示要求の例である。エフェクトギフト及び通常ギフトは、第2ギフトの例である。エフェクトオブジェクト及び通常オブジェクトを総称して第2ギフトオブジェクトと呼ぶことがある。エフェクトギフト(もしくはエフェクトオブジェクト)または通常ギフト(もしくは通常オブジェクト)の表示を要求する表示要求は、第2表示要求の例である。   As described above, the gift object indicating the gift may include an effect object corresponding to the effect gift, a normal object corresponding to the normal gift, and a wearing object corresponding to the wearing gift. The wearing gift is an example of the first gift. The wearing object may be called a first gift object. The display request requesting the display of the attached gift (or the attached object) is an example of the first display request. The effect gift and the normal gift are examples of the second gift. The effect object and the normal object may be collectively referred to as a second gift object. The display request for requesting the display of the effect gift (or the effect object) or the normal gift (or the normal object) is an example of the second display request.

一態様において、ギフト要求処理部61dは、視聴ユーザから特定の通常ギフトの表示要求を受け付けると、当該表示要求に基づいて、表示が要求された通常ギフトを示す通常オブジェクトを動画に表示させるための処理を行う。例えば、バッグを示す通常ギフトの表示要求がなされた場合には、図4に示すように、ギフト要求処理部61dにより当該表示要求に基づいてバッグを示す通常オブジェクト36が表示画像30に表示される。同様に、熊のぬいぐるみを示す通常ギフトの表示要求がなされた場合には、図4に示すように、ギフト要求処理部61dにより当該表示要求に基づいて熊のぬいぐるみを示す通常オブジェクト37が表示画像30に表示される。図示を省略しているが、配信ユーザ装置20における表示画像40にも、表示画像30と同様に、通常オブジェクト36及び通常オブジェクト37が表示される。   In one aspect, the gift request processing unit 61d, when receiving a display request for a specific normal gift from the viewing user, displays a normal object indicating the requested normal gift on the moving image based on the display request. Perform processing. For example, when a display request for a normal gift indicating a bag is made, a normal object 36 indicating a bag is displayed on the display image 30 by the gift request processing unit 61d based on the display request, as shown in FIG. . Similarly, when a display request for a normal gift indicating a stuffed bear is made, as shown in FIG. 4, the normal object 37 indicating the stuffed bear is displayed on the display image by the gift request processing unit 61d based on the display request. 30 is displayed. Although not shown, the normal object 36 and the normal object 37 are also displayed on the display image 40 of the distribution user device 20, similarly to the display image 30.

一態様において、ギフト要求処理部61dは、視聴ユーザから特定のエフェクトギフトの表示要求を受け付けると、当該表示要求に基づいて、表示が要求されたエフェクトギフトに対応するエフェクトオブジェクトを動画の表示画像に表示させるための処理を行う。例えば、紙吹雪や花火を示すエフェクトギフトの表示要求がなされた場合には、ギフト要求処理部61dは、図当該表示要求に基づいて紙吹雪や花火を示すエフェクトギフトに対応するエフェクトオブジェクト(不図示)が表示画像30及び表示画像40に表示される。   In one aspect, when a gift request processing unit 61d receives a display request for a specific effect gift from a viewing user, the gift object processing unit 61d converts the effect object corresponding to the requested effect gift into a display image of a moving image based on the display request. Perform processing for display. For example, when a display request for an effect gift indicating confetti or fireworks is made, the gift request processing unit 61d draws an effect object (not shown) corresponding to the effect gift indicating confetti or fireworks based on the display request. ) Are displayed on the display image 30 and the display image 40.

通常ギフトの表示要求には、当該通常ギフトを示す通常オブジェクトの表示位置を指定する表示位置指定パラメータが含まれてもよい。この場合、ギフト要求処理部61dは、表示位置指定パラメータによって指定された位置に通常オブジェクトを表示することができる。キャラクタオブジェクト31の表示位置及び表示範囲が定められている場合には、表示位置指定パラメータによって、当該キャラクタオブジェクト31に対する相対的な位置が通常オブジェクトの表示位置として指定され得る。   The display request of the normal gift may include a display position specifying parameter for specifying a display position of the normal object indicating the normal gift. In this case, the gift request processing unit 61d can display the normal object at the position specified by the display position specification parameter. When the display position and the display range of the character object 31 are determined, the relative position with respect to the character object 31 can be specified as the display position of the normal object by the display position specification parameter.

一態様において、ギフト要求処理部61dは、視聴ユーザから特定の装着オブジェクトの表示要求を受け付けると、当該表示要求に基づいて、図3bに示すように、配信ユーザ装置20における表示画面40に表示指示オブジェクト42a〜42cを表示する。この表示指示オブジェクト42a〜42cの各々は、表示要求がなされた装着ギフトと対応付けられている。表示指示オブジェクト42a〜42cのいずれかが選択されると、その選択された表示指示オブジェクトに対応付けられている装着ギフトが配信中の動画に表示される。例えば、表示指示オブジェクト42bに猫耳を模したカチューシャが対応付けられている場合に、表示指示オブジェクト42bが選択されると、ギフト要求処理部61dは、選択された表示指示オブジェクト42bに対応するカチューシャを示す装着オブジェクト38を配信中の動画に表示させる。カチューシャを示す装着オブジェクト38を含む動画の表示例が図5a及び図5bに示されている。また、図5bに示されているように、選択された表示指示オブジェクト42bは、表示画面40から削除される。   In one embodiment, when the gift request processing unit 61d receives a display request for a specific mounted object from a viewing user, based on the display request, as shown in FIG. The objects 42a to 42c are displayed. Each of the display instruction objects 42a to 42c is associated with a wearing gift for which a display request has been made. When any one of the display instruction objects 42a to 42c is selected, the wearing gift associated with the selected display instruction object is displayed on the moving image being distributed. For example, when a display instruction object 42b is selected when a headband imitating a cat's ear is associated with the display instruction object 42b, the gift request processing unit 61d sets the headband corresponding to the selected display instruction object 42b. Is displayed on the moving image being distributed. 5A and 5B show display examples of a moving image including the wearing object 38 indicating the headband. In addition, as shown in FIG. 5B, the selected display instruction object 42b is deleted from the display screen 40.

装着オブジェクトは、キャラクタオブジェクトの特定の部位(装着部位)と関連付けて、動画内に表示される。例えば、装着オブジェクトは、キャラクタオブジェクトの当該装着部位に接するように動画内に表示されてもよい。装着オブジェクト38は、キャラクタオブジェクトの当該装着部位に装着されるように動画内に表示されてもよい。一実施形態において、カチューシャを示す装着オブジェクト38は、キャラクタオブジェクトの頭部と対応付けられている。このため、図5a及び図5bに示されている表示例では、装着オブジェクト38がキャラクタオブジェクト31の頭部に装着されている。装着オブジェクトは、キャラクタオブジェクトの当該装着部位の動きに付随して動くように動画の表示画面内に表示されてもよい。例えば、カチューシャを示す装着オブジェクト38を装着したキャラクタオブジェクト31の頭部が動くと、あたかもカチューシャがキャラクタオブジェクト31の頭部に装着されているかのごとく、カチューシャを示す装着オブジェクト38もキャラクタオブジェクト31の頭部に付随して動く。   The wearing object is displayed in the moving image in association with a specific part (wearing part) of the character object. For example, the mounted object may be displayed in the moving image so as to be in contact with the mounting site of the character object. The mounting object 38 may be displayed in the moving image so as to be mounted on the mounting site of the character object. In one embodiment, the wearing object 38 indicating the headband is associated with the head of the character object. For this reason, in the display examples shown in FIGS. 5A and 5B, the mounting object 38 is mounted on the head of the character object 31. The mounting object may be displayed in the moving image display screen so as to move in association with the movement of the mounting part of the character object. For example, when the head of the character object 31 on which the wearing object 38 indicating the headband is mounted moves, the mounting object 38 indicating the headband also moves to the head of the character object 31 as if the headband were mounted on the head of the character object 31. It moves along with the part.

上述したように、オブジェクトデータ63bは、装着オブジェクトがキャラクタオブジェクトのどの部位に関連付けられるかを示す装着部位情報を含んでもよい。一態様において、ギフト要求処理部61dは、キャラクタオブジェクトに装着オブジェクトが装着されている場合には、当該装着オブジェクトの表示時間が経過するまでは、当該装着オブジェクトの装着部位情報が示す部位と同じ又は重複する部位に装着される他の装着オブジェクトの表示を禁止する。例えば、「頭部後方左側」及び「頭部後方右側」の両方に関連付けられたカチューシャと、「頭部後方左側」に関連付けられたヘアアクセサリとは、「頭部後方左側」が重複しているため、カチューシャが表示されている場合には、装着部位情報として「頭部後方左側」が設定されているヘアアクセサリの表示は禁止される。一方、「頭部後方左側」及び「頭部後方右側」に関連付けられたカチューシャと、「(頭部のうち)左耳」及び「(頭部のうち)右耳」に関連付けられたイヤリングは、キャラクタオブジェクトにおける装着部位が重複していないため、同時に装着することができる。   As described above, the object data 63b may include mounting part information indicating which part of the character object is associated with the mounting object. In one aspect, when the wearing object is attached to the character object, the gift request processing unit 61d is the same as or different from the part indicated by the wearing part information of the wearing object until the display time of the wearing object elapses. The display of other mounted objects mounted on the overlapping part is prohibited. For example, the headband associated with both the “head rear left” and “head rear right” and the hair accessory associated with “head rear left” have “head rear left” overlapping. Therefore, when the headband is displayed, the display of the hair accessory for which “head left side” is set as the attachment site information is prohibited. On the other hand, the headband associated with the “head rear left” and “head rear right”, and the earring associated with “the left ear (of the head)” and the “right ear (of the head)” Since the attachment parts in the character object do not overlap, they can be attached at the same time.

一実施形態においては、装着部位が同じ又は重複する複数の装着オブジェクトの表示を禁止するために、表示が禁止される装着オブジェクトを表示するための表示指示オブジェクト42がディアクティベートされてもよい。図5bに示されている実施形態において、表示指示オブジェクト42aが装着部位情報として「頭部後方左側」が設定されたヘアアクセサリであると想定する。この場合、このヘアアクセサリを示す装着オブジェクトは、キャラクタオブジェクト31がカチューシャを示す装着オブジェクト38を装着中であるため、装着オブジェクト38がキャラクタオブジェクト31に装着されている間は、動画への表示が禁止される。一実施形態においては、このヘアアクセサリを示す装着オブジェクトの動画への表示を禁止するために、当該ヘアアクセサリを示す装着オブジェクトに対応付けられている表示指示オブジェクト42aがディアクティベートされる。例えば、表示指示オブジェクト42aは、装着オブジェクト38がキャラクタオブジェクト31に装着されている間、操作されても選択不能とされる。別の実施形態において、装着オブジェクト38がキャラクタオブジェクト31に装着されている間、表示指示オブジェクト42aは、表示画面40から消去される。ディアクティベートされた表示指示オブジェクト42aは、カチューシャの表示時間が経過したことに応じて、再びアクティベートされる。表示指示オブジェクト42aを再びアクティベートするために、例えば、選択不能とされていた表示指示オブジェクト42aが再び選択可能とされてもよいし、非表示となっていた表示指示オブジェクト42aを再び表示画面40に表示させてもよい。   In one embodiment, in order to prohibit the display of a plurality of mounting objects having the same or overlapping mounting parts, the display instruction object 42 for displaying the mounting object whose display is prohibited may be deactivated. In the embodiment illustrated in FIG. 5B, it is assumed that the display instruction object 42a is a hair accessory in which “head left side” is set as the attachment site information. In this case, since the wearing object indicating the hair accessory is wearing the wearing object 38 indicating the headband by the character object 31, the display on the moving image is prohibited while the wearing object 38 is worn on the character object 31. Is done. In one embodiment, the display instruction object 42a associated with the mounting object indicating the hair accessory is deactivated in order to prohibit the display of the mounting object indicating the hair accessory on the moving image. For example, the display instruction object 42a cannot be selected even if operated while the mounting object 38 is mounted on the character object 31. In another embodiment, the display instruction object 42 a is deleted from the display screen 40 while the mounting object 38 is mounted on the character object 31. The deactivated display instruction object 42a is activated again when the display time of the headband has elapsed. In order to reactivate the display instruction object 42a, for example, the display instruction object 42a which has not been selected may be made selectable again, or the display instruction object 42a which has not been displayed may be displayed again on the display screen 40. It may be displayed.

一態様において、動画を視聴中の視聴ユーザは、特定のメッセージを含むメッセージギフトを当該動画に表示することを要求する表示要求をサーバ装置60に送信することができる。ギフト要求処理部61dは、視聴ユーザから特定のメッセージと関連付けられたメッセージギフトの表示要求を受け付けると、当該表示要求に基づいて、図6に示すように、配信ユーザ装置20における表示画面40にメッセージ確認画面43を表示する。メッセージ確認画面43には、表示要求を行った視聴ユーザによって入力されたメッセージ、当該メッセージの動画中への表示を許可するためのボタン、及び当該メッセージの動画中への表示を拒否するためのボタンが含まれる。配信ユーザU1は、このメッセージ確認画面43において、視聴ユーザからのメッセージを確認して、当該メッセージを含むメッセージギフトの動画への表示を許可する場合には「表示する」と表記されたボタンを選択することによりメッセージギフトの表示指示操作を行う。逆に、当該メッセージギフトの動画への表示を拒否する場合には、配信ユーザU1は、「表示しない」と表記されたボタンを選択することにより表示拒否操作を行う。   In one aspect, a viewing user who is watching a moving image can transmit a display request requesting that a message gift including a specific message be displayed on the moving image to the server device 60. Upon receiving a display request for a message gift associated with a specific message from the viewing user, the gift request processing unit 61d displays a message on the display screen 40 of the distribution user device 20, based on the display request, as shown in FIG. A confirmation screen 43 is displayed. The message confirmation screen 43 includes a message input by the viewing user who has made the display request, a button for permitting display of the message in a moving image, and a button for rejecting display of the message in a moving image. Is included. The distribution user U1 confirms the message from the viewing user on the message confirmation screen 43, and selects the button described as “display” when permitting the display of the message gift including the message on the moving image. By doing so, a message gift display instruction operation is performed. Conversely, when rejecting the display of the message gift on the moving image, the distribution user U1 performs a display rejection operation by selecting a button indicated as “not display”.

配信ユーザU1によって、メッセージギフトの表示が許可された場合には、図7a及び図7bに示されているように、視聴ユーザ装置10の表示画面30及び配信ユーザ装置20の表示画面にはメッセージギフトを示すメッセージオブジェクト39が表示される。メッセージオブジェクト39には、当該メッセージギフトに対応付けられているメッセージを示すテキストデータが含まれる。メッセージオブジェクト39には、当該メッセージギフトの表示要求を行った視聴ユーザを示す表示(例えば、当該視聴ユーザのユーザ名、ニックネームなど)が含まれてもよい。   When the display of the message gift is permitted by the distribution user U1, the message gift is displayed on the display screen 30 of the viewing user device 10 and the display screen of the distribution user device 20, as shown in FIGS. 7A and 7B. Is displayed. The message object 39 includes text data indicating a message associated with the message gift. The message object 39 may include a display indicating the viewing user who made the display request for the message gift (for example, the user name, nickname, or the like of the viewing user).

一態様において、動画を視聴中の視聴ユーザは、配信中の動画に合成されている配信ユーザU1の音声を変更するためのボイスチェンジギフトをサーバ装置60に送信することができる。ギフト要求処理部61dは、ボイスチェンジギフトを受け付けると、配信ユーザ装置20における表示画面40に確認画面(不図示)を表示する。この音声変更の可否を確認するための確認画面には、音声の変更内容を特定する情報が含まれてもよい。例えば、この確認画面には、男性の声を女性の声に変更すること、人間の声をロボットのような電子的な音に変更すること、などの音声の変更内容を特定する情報が含まれてもよい。また、当該確認画面には、ボイスチェンジギフトにおいて要求されている音声変更を許可するためのボタン、及び当該音声変更を拒否するためのボタンが含まれる。配信ユーザU1は、この確認画面において、音声の変更内容を確認して、当該変更の許可又は拒否をするための指示操作を行う。   In one aspect, the viewing user who is watching the moving image can transmit a voice change gift for changing the voice of the distribution user U1 combined with the moving image being distributed to the server device 60. Upon receiving the voice change gift, the gift request processing unit 61d displays a confirmation screen (not shown) on the display screen 40 of the distribution user device 20. The confirmation screen for confirming whether or not the voice can be changed may include information for specifying the content of the voice change. For example, this confirmation screen contains information that specifies the details of voice changes, such as changing a male voice to a female voice, changing a human voice to an electronic sound like a robot, etc. You may. In addition, the confirmation screen includes a button for permitting a voice change requested in the voice change gift and a button for rejecting the voice change. On this confirmation screen, the delivery user U1 confirms the content of the change in the voice, and performs an instruction operation for permitting or rejecting the change.

一態様において、動画を視聴中の視聴ユーザは、配信中の動画に含まれているキャラクタオブジェクト31の頭部以外の動きを指定するモーションギフトをサーバ装置60に送信することができる。ギフト要求処理部61dは、モーションギフトを受け付けると、当該モーションギフトにより指定された動きをキャラクタオブジェクト31が取るように、当該キャラクタオブジェクト31の動きを制御する。モーションギフトにより指定された動きのキャラクタオブジェクト31への反映の可否を確認するための確認画面(不図示)を配信ユーザ装置20における表示画面40に表示し、配信ユーザU1によって当該指定された動きを反映させることを許可する指示操作がなされた場合にのみ、モーションギフトにより指定された動きがキャラクタオブジェクト31に反映されてもよい。   In one aspect, a viewing user who is watching a moving image can transmit to the server device 60 a motion gift designating a movement other than the head of the character object 31 included in the moving image being distributed. When receiving the motion gift, the gift request processing unit 61d controls the movement of the character object 31 so that the character object 31 takes the movement specified by the motion gift. A confirmation screen (not shown) for confirming whether or not the movement specified by the motion gift is reflected on the character object 31 is displayed on the display screen 40 of the distribution user device 20, and the movement specified by the distribution user U1 is displayed. The movement specified by the motion gift may be reflected on the character object 31 only when an instruction operation for permitting the reflection is performed.

一態様において、ギフト購入処理部61eは、動画の視聴ユーザからの要求に応じて、当該動画に関連して購入可能な複数のギフトオブジェクトの各々の購入情報を当該視聴ユーザの視聴ユーザ装置(例えば、視聴ユーザ装置10)に送信する。各ギフトオブジェクトの購入情報には、当該ギフトオブジェクトの種類(エフェクトオブジェクト、通常オブジェクト、または装着オブジェクト)、当該ギフトオブジェクトの画像、当該ギフトオブジェクトの価格、及びこれら以外のギフトオブジェクトの購入に必要な情報が含まれ得る。視聴ユーザは、視聴ユーザ装置10に表示されているギフトオブジェクトの購入情報に基づいて、購入するギフトオブジェクトを選択することができる。購入対象のギフトオブジェクトの選択は、視聴ユーザ装置10の操作により行われてもよい。購入対象のギフトオブジェクトが視聴ユーザによって選択されると、当該ギフトオブジェクトの購入要求がサーバ装置60に送信される。ギフト購入処理部61eは、当該購入要求に基づいて、決済処理を行う。この決済処理が完了すると、当該購入されたギフトオブジェクトは、当該視聴ユーザによって保有される。ストレージ23に、ギフトを購入した視聴ユーザのユーザIDと対応づけて、購入されたギフトのギフトID(又は当該ギフトを示すギフトオブジェクトのギフトオブジェクトID)が記憶されてもよい。   In one embodiment, the gift purchase processing unit 61e, in response to a request from a user viewing a moving image, transmits purchase information of each of a plurality of gift objects that can be purchased in association with the moving image to the viewing user device of the viewing user (eg, To the viewing user device 10). The purchase information of each gift object includes the type of the gift object (effect object, normal object, or wearing object), the image of the gift object, the price of the gift object, and information necessary for purchasing other gift objects. May be included. The viewing user can select a gift object to be purchased based on the gift object purchase information displayed on the viewing user device 10. The selection of the gift object to be purchased may be performed by operating the viewing user device 10. When a gift object to be purchased is selected by the viewing user, a purchase request for the gift object is transmitted to the server device 60. The gift purchase processing unit 61e performs a payment process based on the purchase request. When the payment process is completed, the purchased gift object is held by the viewing user. The storage 23 may store the gift ID of the purchased gift (or the gift object ID of the gift object indicating the gift) in association with the user ID of the viewing user who purchased the gift.

購入可能なギフトオブジェクトは、動画ごとに異なっていてもよい。購入可能なギフトオブジェクトは、複数の動画において購入可能であってもよい。つまり、購入可能なギフトオブジェクトには、各動画に固有の固有ギフトオブジェクトと、複数の動画において購入可能な共通ギフトオブジェクトと、が含まれてもよい。例えば、紙吹雪を示すエフェクトオブジェクトは、複数の動画において購入可能な共通ギフトオブジェクトであってもよい。   The gift objects that can be purchased may be different for each moving image. The purchasable gift object may be purchasable in a plurality of videos. That is, the purchasable gift objects may include a unique gift object peculiar to each moving image and a common gift object purchasable in a plurality of moving images. For example, the effect object indicating confetti may be a common gift object that can be purchased in a plurality of moving images.

一態様においては、所定の動画を視聴中にエフェクトオブジェクトを購入した場合、当該エフェクトオブジェクトを購入するための決済処理が完了したことに応じて、当該購入対象のエフェクトオブジェクトが当該視聴中の動画に自動的に表示されてもよい。所定の動画を視聴中に通常オブジェクトを購入した場合、上記と同様に、当該通常オブジェクトを購入するための決済処理が完了したことに応じて、当該購入対象の通常ギフトオブジェクトが当該視聴中の動画に自動的に表示されてもよい。   In one aspect, when an effect object is purchased while viewing a predetermined moving image, the effect object to be purchased is added to the watching moving image in response to completion of the payment processing for purchasing the effect object. It may be displayed automatically. When a normal object is purchased while watching a predetermined moving image, similarly to the above, in response to completion of the payment processing for purchasing the normal object, the normal gift object to be purchased is changed to the moving image being viewed. May be displayed automatically.

他の態様においては、購入対象のエフェクトオブジェクトについてギフト購入処理部61eにおける決済処理が完了したことに応じて、決済完了通知が視聴ユーザ装置10に送信され、当該視聴ユーザ装置10において、購入されたエフェクトオブジェクトの表示要求を行うか否かを視聴ユーザに確認するための確認画面が表示されてもよい。視聴ユーザが、当該購入されたエフェクトオブジェクトについて表示要求を行うことを選択した場合には、当該購入されたエフェクトオブジェクトの表示を要求する表示要求が、当該視聴ユーザのクライアント装置からギフト要求処理部61dに送信され、ギフト要求処理部61dにおいて、当該購入対象のエフェクトオブジェクトを動画70に表示させる処理が行われてもよい。購入対象が通常オブジェクトの場合にも、上記と同様に、購入された通常オブジェクトの表示要求を行うか否かを視聴ユーザに確認するための確認画面が視聴ユーザ装置10に表示されてもよい。   In another aspect, in response to the completion of the payment processing in the gift purchase processing unit 61e for the effect object to be purchased, a payment completion notification is transmitted to the viewing user device 10, and the purchase is performed by the viewing user device 10. A confirmation screen for confirming with the viewing user whether to make a display request for the effect object may be displayed. When the viewing user selects to make a display request for the purchased effect object, a display request for displaying the purchased effect object is sent from the client device of the viewing user to the gift request processing unit 61d. And the gift request processing unit 61d may perform a process of displaying the effect object to be purchased on the moving image 70. Also in the case where the purchase target is a normal object, a confirmation screen for confirming with the viewing user whether or not to make a display request for the purchased normal object may be displayed on the viewing user device 10 in the same manner as described above.

次に、図8〜図11を参照して、一態様による動画配信処理について説明する。図8は、一実施形態における動画配信処理の流れを示すフロー図であり、図9は、一実施形態における通常オブジェクトを表示する処理の流れを示すフロー図であり、図10は、一実施形態における装着オブジェクトを表示する処理の流れを示すフロー図であり、図11は、一実施形態におけるメッセージオブジェクトを表示する処理の流れを示すフロー図である。これらの図を参照して説明される動画配信処理においては、配信ユーザU1が配信ユーザ装置20を用いて取得したフェイスモーションデータに基づく動画配信を行っていることが想定されている。   Next, a moving image distribution process according to one embodiment will be described with reference to FIGS. FIG. 8 is a flowchart showing a flow of a moving image distribution process in one embodiment, FIG. 9 is a flowchart showing a flow of a process of displaying a normal object in one embodiment, and FIG. FIG. 11 is a flowchart showing a flow of a process of displaying a mounted object in FIG. 11, and FIG. 11 is a flowchart showing a flow of a process of displaying a message object in one embodiment. In the moving image distribution processing described with reference to these drawings, it is assumed that the distribution user U1 performs the moving image distribution based on the face motion data acquired using the distribution user device 20.

まず、ステップS11では、配信ユーザU1の顔の動き(表情)のデジタル表現であるフェイスモーションデータが生成される。フェイスモーションデータの生成は、例えば、配信ユーザ装置20のフェイスモーションデータ生成部21aで行われる。配信ユーザ装置20においては、配信ユーザU1からの音声入力に基づいて音声データが生成されてもよい。生成されたフェイスモーションデータ及び音声データは、サーバ装置60に送信される。   First, in step S11, face motion data, which is a digital expression of the movement (expression) of the face of the distribution user U1, is generated. The generation of the face motion data is performed, for example, by the face motion data generation unit 21a of the distribution user device 20. In the distribution user device 20, audio data may be generated based on an audio input from the distribution user U1. The generated face motion data and voice data are transmitted to the server device 60.

次に、ステップS12において、配信ユーザ装置20からのフェイスモーションデータが、配信ユーザU1用のモデルデータに適用されることにより、配信ユーザU1の表情の動きに同期して動くキャラクタオブジェクトのアニメーションが生成される。このアニメーションの生成は、例えば、上記のアニメーション生成部61aで行われる。   Next, in step S12, the face motion data from the distribution user device 20 is applied to the model data for the distribution user U1, thereby generating an animation of the character object that moves in synchronization with the movement of the expression of the distribution user U1. Is done. The generation of the animation is performed, for example, by the above-described animation generation unit 61a.

次に、ステップS13において、配信ユーザU1に対応するキャラクタオブジェクトのアニメーションを含む動画が生成される。この動画には、配信ユーザU1の音声が合成されてもよい。キャラクタオブジェクトのアニメーションは、背景画像に重畳して表示される。この動画の生成は、例えば、上記の動画生成部61bで行われる。   Next, in step S13, a moving image including the animation of the character object corresponding to the distribution user U1 is generated. The voice of the distribution user U1 may be synthesized with this moving image. The animation of the character object is displayed so as to be superimposed on the background image. The generation of the moving image is performed by, for example, the moving image generation unit 61b.

次に、ステップS14に移行し、ステップS13にて生成された動画が配信される。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。動画は、所定の配信期間にわたって継続して配信される。動画の配信期間は、例えば、30秒間、1分間、5分間、10分、30分間、60分間、120分間、及びこれら以外の任意の時間に定め得る。   Next, the process proceeds to step S14, and the moving image generated in step S13 is distributed. The moving image is distributed to the viewing user device 10 and other viewing user devices and the distribution user device via the network 50. The moving image is continuously distributed over a predetermined distribution period. The distribution period of the moving image may be set to, for example, 30 seconds, 1 minute, 5 minutes, 10 minutes, 30 minutes, 60 minutes, 120 minutes, and any other time.

次に、ステップS15に進み、動画の配信を終了させるための終了条件が成就したか否かが判定される。終了条件は、例えば、配信の終了時刻に達したこと、配信ユーザU1が配信ユーザ装置20において配信を終了するための操作を行ったこと、またはこれら以外の条件である。終了条件が成就していなければステップS11〜S14の処理が繰り返し実行され、配信ユーザU1及び配信ユーザA2の動きに同期したアニメーションを含む動画の配信が継続される。動画について終了条件が成就していると判定された場合には、当該動画の配信処理を終了する。   Next, the process proceeds to step S15, and it is determined whether or not a termination condition for terminating the distribution of the moving image is satisfied. The end condition is, for example, that the end time of the distribution has been reached, that the distribution user U1 has performed an operation to end the distribution in the distribution user device 20, or other conditions. If the end condition is not satisfied, the processing of steps S11 to S14 is repeatedly executed, and the distribution of the moving image including the animation synchronized with the movement of the distribution user U1 and the distribution user A2 is continued. If it is determined that the end condition is satisfied for the moving image, the distribution process of the moving image ends.

次に、図9をさらに参照して、動画の配信中に行われる通常ギフトの表示処理について説明する。通常ギフトの表示処理は、図8に示した動画の配信処理と並行して行われる。   Next, the display processing of a normal gift performed during distribution of a moving image will be described with reference to FIG. 9. The normal gift display process is performed in parallel with the moving image distribution process shown in FIG.

動画の配信中に、ステップS21において、通常ギフトの表示要求がなされたか否かが判定される。例えば、視聴ユーザは、自らが保有する通常ギフトの中から一又は複数の特定の通常ギフトを選択し、この選択された通常ギフトの表示を要求する表示要求を視聴ユーザ装置10からサーバ装置60に対して送信することができる。上述したように、所定の通常ギフトの購入処理又は決済処理がなされたことに応じて、当該所定の通常ギフトの表示要求が生成されてもよい。   During the distribution of the moving image, it is determined in step S21 whether or not a display request for a normal gift has been made. For example, the viewing user selects one or a plurality of specific normal gifts from the normal gifts held by the user, and issues a display request for displaying the selected normal gift from the viewing user device 10 to the server device 60. Can be sent to As described above, a display request for the predetermined normal gift may be generated in response to the predetermined normal gift purchase processing or settlement processing being performed.

通常ギフトの表示要求がなされた場合には、当該表示処理はステップS22に進む。ステップS22においては、当該表示要求に基づいて、表示が要求された通常ギフトを配信中の動画に表示させるための処理が行われる。例えば、所定の動画の配信中に通常ギフトの表示要求がなされると、図4に示されているように、視聴ユーザ装置10の表示画面30内に表示要求がなされた通常ギフトに対応する通常オブジェクト36が表示される。図示を省略しているが、配信ユーザ装置20の表示画像40内にも通常オブジェクト36が表示されてもよい。   When a display request for a normal gift is made, the display processing proceeds to step S22. In step S22, based on the display request, a process for displaying the normal gift requested to be displayed on the moving image being distributed is performed. For example, when a display request for a normal gift is made during distribution of a predetermined moving image, as shown in FIG. 4, the normal gift corresponding to the normal gift requested to be displayed on the display screen 30 of the viewing user device 10 is displayed. The object 36 is displayed. Although not shown, the normal object 36 may also be displayed in the display image 40 of the distribution user device 20.

通常ギフトの表示要求がなされていない場合には、通常ギフトの表示処理は終了する。図9に示されている通常ギフトの表示処理は、動画の配信期間中に繰り返し行われる。エフェクトギフトの表示処理も、上述した通常ギフトの表示処理と同様の手順で行われ得る。   If the normal gift display request has not been made, the normal gift display processing ends. The display processing of the normal gift shown in FIG. 9 is repeatedly performed during the distribution period of the moving image. The display processing of the effect gift can be performed in the same procedure as the display processing of the normal gift described above.

次に、図10をさらに参照して、動画の配信中に行われる装着ギフトの表示処理について説明する。装着ギフトの表示処理は、図8に示した動画の配信処理と並行して行われる。また、装着ギフトの表示処理は、図9に示した通常ギフトの表示処理と並行して行われてもよい。   Next, with reference to FIG. 10, a display process of a wearing gift performed during distribution of a moving image will be described. The display processing of the attached gift is performed in parallel with the moving image distribution processing shown in FIG. The display processing of the wearing gift may be performed in parallel with the display processing of the normal gift shown in FIG.

動画の配信中に、ステップS31において、装着ギフトの表示要求がなされたか否かが判定される。例えば、第1視聴ユーザは、自らが保有する装着ギフトの表示を要求する表示要求を視聴ユーザ装置10からサーバ装置60に対して送信することができる。   During the distribution of the moving image, in step S31, it is determined whether a display request for the attached gift has been made. For example, the first viewing user can transmit a display request for displaying the wearing gift held by the first viewing user from the viewing user device 10 to the server device 60.

装着ギフトの表示要求がなされた場合には、当該表示処理はステップS32に進む。ステップS32においては、当該表示要求に基づいて、表示が要求された装着ギフトに関連付けられた表示指示オブジェクトが配信ユーザ装置20の表示画面40に表示される。例えば、カチューシャを示す装着ギフトの表示要求がなされた場合には、当該装着ギフトに関連付けられた表示指示オブジェクト42bが配信ユーザ装置20の表示画面40に表示される。   When a display request for the attached gift is made, the display processing proceeds to step S32. In step S32, based on the display request, a display instruction object associated with the wearing gift requested to be displayed is displayed on the display screen 40 of the distribution user device 20. For example, when a display request of the wearing gift indicating the headband is made, the display instruction object 42b associated with the wearing gift is displayed on the display screen 40 of the distribution user device 20.

次に、ステップS33において、配信ユーザ装置20における表示画面40に含まれている表示指示オブジェクトの中から、特定の表示指示オブジェクトが選択されたか否かが判定される。   Next, in step S33, it is determined whether or not a specific display instruction object has been selected from among the display instruction objects included in the display screen 40 of the distribution user device 20.

特定の表示指示オブジェクトが選択された場合には、ステップS34において、配信中の動画の表示画面に、当該選択された特定の表示指示オブジェクトに対応する装着ギフトを表示する処理が行われる。例えば、表示画面40に含まれている表示指示オブジェクト42bが選択された場合には、図5a及び図5bに示されているように、表示画像30及び表示画像40に、選択された表示指示オブジェクト42bに対応付けられている装着オブジェクト38が表示される。また、選択された表示指示オブジェクト42bは、表示画面40から削除される。   When the specific display instruction object is selected, in step S34, a process of displaying the wearing gift corresponding to the selected specific display instruction object on the display screen of the moving image being distributed is performed. For example, when the display instruction object 42b included in the display screen 40 is selected, as shown in FIGS. 5A and 5B, the selected display instruction object is displayed on the display images 30 and 40. The mounting object 38 associated with 42b is displayed. Further, the selected display instruction object 42b is deleted from the display screen 40.

ステップS33において、表示指示オブジェクトがいずれも選択されなかった場合、及び、ステップS34において装着ギフトの表示処理が完了した場合には、装着ギフトの表示処理は終了する。   If no display instruction object is selected in step S33, and if the display processing of the attached gift is completed in step S34, the display processing of the attached gift ends.

次に、図11をさらに参照して、動画の配信中に行われるメッセージギフトの表示処理について説明する。メッセージギフトの表示処理は、図8に示した動画の配信処理と並行して行われる。また、メッセージギフトの表示処理は、図9に示した通常ギフトの表示処理及び図10に示した装着ギフトの表示処理と並行して行われてもよい。   Next, a message gift display process performed during distribution of a moving image will be described with reference to FIG. 11. The message gift display process is performed in parallel with the moving image distribution process shown in FIG. The message gift display processing may be performed in parallel with the normal gift display processing shown in FIG. 9 and the attached gift display processing shown in FIG.

動画の配信中に、ステップS41において、メッセージギフトの表示要求がなされたか否かが判定される。例えば、第1視聴ユーザは、自らがテキスト入力したメッセージを含むメッセージギフトの表示を要求する表示要求を視聴ユーザ装置10からサーバ装置60に対して送信することができる。   During the distribution of the moving image, in step S41, it is determined whether a display request for a message gift has been made. For example, the first viewing user can transmit a display request for requesting display of a message gift including a message input by the user himself / herself from the viewing user device 10 to the server device 60.

メッセージギフトの表示要求がなされた場合には、当該表示処理はステップS42に進む。ステップS42においては、当該表示要求に基づいて、表示が要求されたメッセージギフトに関連付けられたメッセージ確認画面43が配信ユーザ装置20の表示画面40に表示される。   If a message gift display request has been made, the display processing proceeds to step S42. In step S42, based on the display request, a message confirmation screen 43 associated with the message gift requested to be displayed is displayed on the display screen 40 of the distribution user device 20.

次に、ステップS43において、当該メッセージギフトの動画中への表示が許可されたか否かが判定される。例えば、配信ユーザ装置20における表示画面40に含まれているメッセージ確認画面43に含まれているメッセージギフトの動画への表示の許可と関連付けられたボタンが選択されたか否かが判定される。   Next, in step S43, it is determined whether display of the message gift in the moving image is permitted. For example, it is determined whether or not a button associated with permission to display a message gift included in the message confirmation screen 43 included in the display screen 40 of the distribution user device 20 on the moving image is selected.

メッセージギフトの動画への表示の許可と関連付けられたボタンが選択された場合には、ステップS44において、配信中の動画の表示画面に、当該メッセージギフトを表示する処理が行われる。例えば、メッセージ確認画面43に含まれているメッセージギフトの動画への表示の許可と関連付けられたボタンが選択された場合には、図7a及び図7bに示されているように、表示画像30及び表示画像40に、表示要求がなされたメッセージギフト39が表示される。   If a button associated with permission to display the message gift on the moving image is selected, a process of displaying the message gift on the display screen of the moving image being distributed is performed in step S44. For example, when a button associated with permission to display a message gift on a moving image included in the message confirmation screen 43 is selected, the display image 30 and the display image 30 are displayed as shown in FIGS. 7A and 7B. The message gift 39 for which the display request has been made is displayed on the display image 40.

ステップS43において、メッセージ確認画面43に含まれているメッセージギフトの動画への表示の拒否と関連付けられたボタンが選択された場合、及び、ステップS44においてメッセージギフトの表示処理が完了した場合(例えば、当該メッセージギフトに設定されている表示時間が経過した場合)には、メッセージギフトの表示処理は終了する。   In step S43, when the button associated with the refusal of the display of the message gift on the moving image included in the message confirmation screen 43 is selected, and when the display processing of the message gift is completed in step S44 (for example, If the display time set for the message gift has elapsed), the message gift display process ends.

一実施形態においては、動画配信内に、ギフトオブジェクトの表示が禁止されるオブジェクト表示禁止区間が設けられてもよい。図12は、オブジェクト表示禁止区間を模式的に説明する図である。図12は、時刻t1から時刻t2の間に動画が配信されていることを示している。つまり、時刻t1が動画の配信開始時刻であり、時刻t2が動画の配信終了時刻である。動画の配信期間のうち、時刻t3と時刻t4との間がギフト表示禁止期間81である。このギフト表示禁止期間81にギフトの表示要求r1がなされても、ギフト表示禁止期間81においては、当該ギフトオブジェクトは、当該動画の表示画像には表示されない。具体的には、ギフト表示禁止期間81においてギフトのうちエフェクトギフト又は通常ギフトの表示要求がなされると、この表示が要求されたエフェクトギフト又は通常ギフトは当該ギフト表示禁止期間81においては配信中の動画には表示されず、当該ギフト表示禁止期間81の経過後(つまり、時刻t4よりも後)の時点において、当該動画に表示される。ギフト表示禁止期間81において装着ギフトの表示要求がなされた場合には、この表示要求がなされた装着ギフトの表示を指示するための表示指示ボタンは、配信ユーザ装置20の表示画面40に表示されず、当該ギフト表示禁止期間81の経過後の時点において表示画面40に表示される。ギフト表示禁止期間81においてメッセージギフトの表示要求がなされた場合には、この表示要求がなされたメッセージギフトの表示可否を確認するためのメッセージ確認画面43は、配信ユーザ装置20の表示画面40に表示されず、当該ギフト表示禁止期間81の経過後の時点において表示画面40に表示される。これにより、配信ユーザU1は、ギフト表示禁止期間81においては、エフェクトギフトや通常ギフトの表示による干渉を受けずに動画を配信することができる。また、配信ユーザU1は、ギフト表示禁止期間81においては、装着ギフトの確認のための表示指示ボタンの追加やギフトメッセージの表示可否の確認に気を取られることなく、配信中の動画におけるパフォーマンスに集中することができる。ギフト表示禁止期間81であっても、配信ユーザU1によって表示指示ボタン42a〜42cのいずれかが選択された場合には、その選択された表示指示ボタンに対応する装着ギフトの表示が行われてもよい。これにより、配信ユーザU1は、所望の装着ギフトを装着したキャラクタオブジェクトによりパフォーマンスを配信することができる。   In one embodiment, an object display prohibition section in which display of a gift object is prohibited may be provided in the moving image distribution. FIG. 12 is a diagram schematically illustrating an object display prohibited section. FIG. 12 shows that a moving image is distributed between time t1 and time t2. That is, the time t1 is the distribution start time of the moving image, and the time t2 is the distribution end time of the moving image. In the distribution period of the moving image, a period between time t3 and time t4 is a gift display prohibition period 81. Even if a gift display request r1 is made during the gift display prohibition period 81, the gift object is not displayed on the display image of the moving image during the gift display prohibition period 81. Specifically, when a display request for an effect gift or a normal gift is given in the gift display prohibition period 81, the effect gift or the normal gift requested to be displayed is not distributed during the gift display prohibition period 81. It is not displayed on the moving image, and is displayed on the moving image at the point in time after the gift display prohibition period 81 has elapsed (that is, after time t4). When the display request of the wearing gift is made in the gift display prohibition period 81, the display instruction button for instructing the display of the wearing gift for which the display request has been made is not displayed on the display screen 40 of the distribution user device 20. Is displayed on the display screen 40 at a point in time after the gift display prohibition period 81 has elapsed. When a message gift display request is made during the gift display prohibition period 81, a message confirmation screen 43 for confirming whether or not the message gift for which the display request has been made can be displayed is displayed on the display screen 40 of the distribution user device 20. Instead, it is displayed on the display screen 40 at the point in time after the gift display prohibition period 81 has elapsed. Accordingly, the distribution user U1 can distribute the moving image during the gift display prohibition period 81 without being interfered by the display of the effect gift or the normal gift. In addition, during the gift display prohibition period 81, the distribution user U1 does not pay attention to the addition of the display instruction button for confirming the wearing gift and the confirmation of whether or not the gift message can be displayed. You can concentrate. Even during the gift display prohibition period 81, if any one of the display instruction buttons 42a to 42c is selected by the distribution user U1, the display of the wearing gift corresponding to the selected display instruction button is performed. Good. Thus, the distribution user U1 can distribute the performance by the character object wearing the desired wearing gift.

上記の一実施形態によれば、動画に表示されるギフトのうち、キャラクタオブジェクトと関連付けて表示されるのは、装着オブジェクトのみである。キャラクタオブジェクトのアニメーションが表示される動画においては、当該キャラクタオブジェクトのアニメーションが視聴ユーザの注目を集める要素と考えられる。上記の一実施形態では、キャラクタオブジェクト31と関連付けて表示される装着ギフトの表示要求があっても、当該装着ギフトを表示するための表示指示ボタンが配信ユーザU1の配信ユーザ装置20に表示され、当該表示指示ボタンが選択されるまでは当該装着ギフトは動画に表示されないので、キャラクタオブジェクトの周辺またはキャラクタオブジェクトに重複して装着ギフトが乱雑に表示されることを防止できる。これにより、視聴ユーザの視聴体験の劣化を防止できる。   According to the embodiment, among the gifts displayed in the moving image, only the mounted object is displayed in association with the character object. In a moving image in which an animation of a character object is displayed, the animation of the character object is considered to be an element that attracts the attention of the viewing user. In the above embodiment, even if there is a display request for the attached gift displayed in association with the character object 31, a display instruction button for displaying the attached gift is displayed on the distribution user device 20 of the distribution user U1, Since the wearing gift is not displayed in the moving image until the display instruction button is selected, it is possible to prevent the wearing gift from being displayed around the character object or overlapping with the character object. This can prevent the viewing experience of the viewing user from deteriorating.

従来の動画配信システムにおいては、ギフトオブジェクトは、その種類を問わず、動画への表示要求がなされたことに応じて当該動画に表示されていた。よって、ギフトを動画に重複表示可能とすると、当該動画に大量のギフトが表示されてしまい、当該動画を視聴するユーザの視聴体験が劣化してしまう。上記実施形態においては、ギフトにキャラクタオブジェクトと関連付けて表示される装着ギフトというカテゴリを設けることにより、動画の主要部分であるキャラクタオブジェクトに関連付けて表示される装着ギフトについては、その表示タイミングを配信ユーザU1においてコントロールできるようにした。   In a conventional moving image distribution system, a gift object is displayed on a moving image in response to a display request for the moving image, regardless of its type. Therefore, if a gift can be overlapped with a moving image, a large amount of gifts will be displayed on the moving image, and the viewing experience of a user who views the moving image will be degraded. In the above embodiment, by providing a category of a wearing gift displayed in association with the character object in the gift, the display timing of the wearing gift displayed in association with the character object which is a main part of the moving image is determined by the distribution user. Control was made possible in U1.

通常ギフト36,37については、装着ギフト38に比べて表示時間を短く設定することができ、また、通常オブジェクト36,37は、キャラクタオブジェクト31と接しないようにまたはキャラクタオブジェクト31の前側ではなく背後に表示されてもよい。この場合、通常オブジェクト36,37は、配信中の動画においてキャラクタオブジェクト31の視認性に与える影響が小さい。よって、通常ギフトについては、視聴ユーザからの表示要求に応じて自動的に(配信ユーザU1の許可がなく)動画に表示してもキャラクタオブジェクト31の視認性の悪化によるユーザの視聴体験の劣化にはつながりにくい。   The display time of the normal gifts 36 and 37 can be set shorter than that of the wearing gift 38, and the normal objects 36 and 37 are not in contact with the character object 31 or behind the character object 31 instead of the front side. May be displayed. In this case, the effects of the normal objects 36 and 37 on the visibility of the character object 31 in the moving image being distributed are small. Therefore, even if the normal gift is automatically displayed on the moving image (without permission of the distribution user U1) in response to the display request from the viewing user, the user's viewing experience is deteriorated due to the deterioration of the visibility of the character object 31. Is difficult to connect.

上記実施形態による動画配信システム1においては、ユーザがキャラクタに対して装着オブジェクトを贈ることができる。これにより、かかる装着オブジェクトを贈ることができないシステムと比べて、独自性の高いシステムを提供することができ、当該システムにより独自性の高いサービスを提供することができる。これにより、動画配信システム1により多くのユーザを惹き付けることができるので、動画配信システム1における動画の視聴回数を多くすることができる。   In the moving image distribution system 1 according to the above embodiment, the user can give the wearing object to the character. This makes it possible to provide a system with high uniqueness as compared with a system that cannot give such a mounted object, and it is possible to provide a service with high uniqueness by the system. As a result, more users can be attracted to the moving image distribution system 1, so that the number of times of viewing the moving images in the moving image distribution system 1 can be increased.

上記実施形態による動画配信システム1においては、配信ユーザU1は、スマートフォンなどのカメラを備えた配信ユーザ装置20により自らの表情に応じて動くキャラクタオブジェクトを含む動画を配信することができる。このように、動画配信システム1においては、配信ユーザU1が動画を配信するための設備が簡略化されているので、配信ユーザU1が参加しやすいプラットフォームが実現されている。   In the moving image distribution system 1 according to the above-described embodiment, the distribution user U1 can distribute a moving image including a character object that moves according to his / her own expression by the distribution user device 20 including a camera such as a smartphone. As described above, in the moving image distribution system 1, facilities for distributing the moving image by the distribution user U1 are simplified, so that a platform in which the distribution user U1 can easily participate is realized.

以下、上記の実施形態が奏する作用効果についてさらに説明する。   Hereinafter, the operation and effect of the above embodiment will be further described.

本発明の一態様においては、視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、配信ユーザU1が使用する配信ユーザ装置20に表示指示オブジェクト42を表示させ、この表示指示オブジェクト42への操作に応じて、当該第1ギフトを配信中の動画に表示させる。上記の態様によれば、視聴ユーザから表示要求がなされた第1ギフトを動画に表示するタイミングが配信ユーザ装置20に表示される表示指示オブジェクト42への操作によって決定される。これにより、配信ユーザU1が望まないタイミングで第1ギフトが動画中に表示されることを防止できる。   In one aspect of the present invention, in response to receiving a first display request related to a first gift from a viewing user, the display instruction object 42 is displayed on the distribution user device 20 used by the distribution user U1, and the display instruction object In response to the operation on 42, the first gift is displayed on the moving image being distributed. According to the above aspect, the timing at which the first gift for which the display request has been made by the viewing user is displayed in the moving image is determined by operating the display instruction object 42 displayed on the distribution user device 20. This can prevent the first gift from being displayed in the moving image at a timing that the distribution user U1 does not want.

第1ギフトは、キャラクタオブジェクトの装着部位と関連付けられた装着ギフトであってもよい。装着ギフトは、配信ユーザ装置20に表示されている表示指示オブジェクト42への操作に応じて、配信中の動画において当該装着ギフトに設定されている装着部位と対応する位置に表示される。装着ギフトの一例は、キャラクタオブジェクトの頭部に関連付けられたカチューシャを表すギフトである。このカチューシャを表す装着ギフトは、当該装着ギフトに対応する表示指示オブジェクト42への操作に応じて、キャラクタオブジェクト31の頭部に装着されているように動画に表示される。キャラクタオブジェクトに重複して又はその周囲に表示される装着ギフトは、配信ユーザU1のキャラクタオブジェクト31を通じたパフォーマンスを妨害しやすく、また、視聴ユーザの視聴体験を劣化させやすい。上記の一実施形態によれば、キャラクタオブジェクト31の装着部位と関連付けられた装着ギフトの動画への表示タイミングが、配信ユーザ装置20に表示される表示指示オブジェクト42への操作に応じて決定される。これにより、配信ユーザU1によるキャラクタオブジェクト31を通じたパフォーマンスや視聴ユーザの視聴体験の劣化につながりやすい装着ギフトについて配信ユーザU1が望まないタイミングで動画に表示されることを防止できる。   The first gift may be a wearing gift associated with the wearing site of the character object. The mounted gift is displayed at a position corresponding to the mounted part set in the mounted gift in the moving image being distributed in response to an operation on the display instruction object 42 displayed on the distribution user device 20. One example of the wearing gift is a gift representing a headband associated with the head of the character object. The wearing gift representing the headband is displayed on the moving image as if it were worn on the head of the character object 31 in response to an operation on the display instruction object 42 corresponding to the wearing gift. The attached gift displayed on or around the character object is likely to obstruct the performance of the distribution user U1 through the character object 31, and tends to deteriorate the viewing experience of the viewing user. According to the above-described embodiment, the display timing of the wearing gift associated with the wearing site of the character object 31 on the moving image is determined according to the operation on the display instruction object 42 displayed on the distribution user device 20. . Thereby, it is possible to prevent the delivery user U1 from displaying the attached gift that is likely to deteriorate the performance of the delivery user U1 through the character object 31 and the viewing experience of the viewing user at an undesired timing.

装着ギフトの各々には、動画に表示される表示時間が設定されていてもよい。この表示時間は、装着ギフトの種類に応じて異なっていてもよく、一律に所定の表示時間が設定されてもよい。一態様において、装着ギフトのうち第1装着ギフトが動画に表示されている場合、当該第1装着ギフトに設定されている表示時間が経過するまでは、当該第1装着ギフトと同じ装着部位が設定されている他の装着ギフトの動画への表示が禁止される。具体的な一態様においては、第1装着ギフトが動画に表示されている場合、当該第1装着ギフトに設定されている表示時間が経過するまでは、当該第1装着ギフトと同じ装着部位が設定されている他の装着ギフトを表示するための表示指示オブジェクト42がディアクティベートされる。当該態様によれば、キャラクタオブジェクトの装着部位に複数の装着ギフトが重複して表示されることを防止できる。   The display time displayed in the moving image may be set for each of the wearing gifts. The display time may be different depending on the type of the attached gift, and a predetermined display time may be set uniformly. In one aspect, when the first wearing gift among the wearing gifts is displayed in the moving image, the same wearing part as the first wearing gift is set until the display time set in the first wearing gift elapses. Display of other wearing gifts being displayed on the video is prohibited. In one specific mode, when the first wearing gift is displayed in the moving image, the same wearing part as the first wearing gift is set until the display time set in the first wearing gift elapses. The display instruction object 42 for displaying another wearing gift that has been displayed is deactivated. According to this aspect, it is possible to prevent a plurality of wearing gifts from being displayed in an overlapping manner on the wearing site of the character object.

一態様において、視聴ユーザからメッセージと関連付けられたメッセージギフトを受け付けたことに応じて、配信ユーザ装置20に当該メッセージを確認するためのメッセージ確認画面43が表示される。配信ユーザU1は、メッセージを含むメッセージギフトの動画への表示を許可する場合には、配信ユーザ装置20を介してメッセージギフトの表示指示操作を行う。視聴ユーザからメッセージギフトを通じて投稿されるメッセージには、動画中に表示することが望ましくないものが含まれる可能性がある。上記の態様によれば、配信ユーザ装置20に表示されるメッセージ確認画面43に表示されるメッセージに基づいて、配信ユーザU1がメッセージギフトの表示可否を決定できる。これにより、動画中への表示が望ましくないメッセージギフトの表示を防止できる。   In one aspect, in response to receiving a message gift associated with a message from a viewing user, a message confirmation screen 43 for confirming the message is displayed on distribution user device 20. The distribution user U1 performs a display instruction operation of the message gift via the distribution user device 20 when permitting the display of the message gift including the message on the moving image. A message posted from a viewing user through a message gift may include a message that is not desired to be displayed in a moving image. According to the above aspect, based on the message displayed on the message confirmation screen 43 displayed on the distribution user device 20, the distribution user U1 can determine whether to display the message gift. This can prevent the display of a message gift that is not desirable to be displayed in the moving image.

一態様において、動画には、配信ユーザU1の音声が合成されており、視聴ユーザから配信ユーザU1の音声を変更するためのボイスチェンジギフトを受け付けたことに応じて、配信ユーザ装置20に音声変更指示オブジェクトを表示し、前記音声変更指示オブジェクトへの操作に応じて、前記配信ユーザの音声を当ギアボイスチェンジギフトにて指定された音声に変更する。当該態様によれば、配信ユーザU1が望まない音声への変更を防止できる。   In one aspect, the voice of the distribution user U1 is synthesized with the moving image, and the distribution user device 20 changes the voice in response to receiving a voice change gift for changing the voice of the distribution user U1 from the viewing user. An instruction object is displayed, and the voice of the distribution user is changed to the voice specified by the gear voice change gift according to an operation on the voice change instruction object. According to this aspect, it is possible to prevent a change to a sound that the distribution user U1 does not want.

一態様においては、視聴ユーザからキャラクタオブジェクト31の特定の部位と対応付けられずに当該動画に表示される第2ギフトに関する第2表示要求を受け付けたことに応じて、当該動画に当該第2ギフトが表示される。第2ギフトには、エフェクトギフト及び通常ギフトが含まれる。当該態様によれば、キャラクタオブジェクトの特定の部位と対応付けられずに動画に表示される第2ギフトを、視聴ユーザからの表示要求に応じて(配信ユーザによる操作や指示を要せず)動画中に表示することができる。第2ギフトは、キャラクタオブジェクトの特定の部位と対応付けて表示されないので、配信ユーザU1のキャラクタオブジェクト31を通じたパフォーマンスへの妨害や視聴ユーザの視聴体験の劣化につながる可能性が低い。このため、第2ギフトについては、配信ユーザU1による操作を要せずに動画に表示可能とすることにより、視聴ユーザとのインタラクションを活性化させやすくなる。   In one aspect, in response to receiving a second display request related to a second gift displayed in the moving image without being associated with a specific part of the character object 31 from the viewing user, the moving image includes the second gift. Is displayed. The second gift includes an effect gift and a normal gift. According to this aspect, the second gift, which is displayed in the moving image without being associated with the specific part of the character object, can be displayed on the moving image in response to a display request from the viewing user (without requiring an operation or instruction from the distribution user) Can be displayed inside. Since the second gift is not displayed in association with the specific part of the character object, it is unlikely that the distribution user U1 will interfere with the performance of the character object 31 through the character object 31 or deteriorate the viewing experience of the viewing user. For this reason, the second gift can be displayed in the moving image without requiring the operation by the distribution user U1, thereby easily activating the interaction with the viewing user.

一態様においては、動画の配信期間内にギフト表示禁止期間81が設定され、第2ギフトは、ギフト表示禁止期間81以外のタイミングで動画に表示される。当該態様によれば、ギフト表示禁止期間81においては、第2ギフトを含まない動画を視聴ユーザに配信することができる。例えば、配信ユーザU1がキャラクタオブジェクト31を通じてパフォーマンスを披露する時間帯をギフト表示禁止期間81とすることにより、視聴ユーザの注目がキャラクタオブジェクト31から散逸することを防止できる。   In one aspect, a gift display prohibition period 81 is set within the distribution period of the moving image, and the second gift is displayed on the moving image at a timing other than the gift display prohibition period 81. According to this aspect, in the gift display prohibition period 81, a moving image that does not include the second gift can be distributed to the viewing user. For example, by setting the time zone during which the distribution user U1 shows a performance through the character object 31 as the gift display prohibition period 81, the attention of the viewing user can be prevented from being dissipated from the character object 31.

本明細書において説明された処理手順、特にフロー図を用いて説明された処理手順においては、その処理手順を構成する工程(ステップ)の一部を省略すること、その処理手順を構成する工程として明示されていない工程を追加すること、及び/又は当該工程の順序を入れ替えることが可能であり、このような省略、追加、順序の変更がなされた処理手順も本発明の趣旨を逸脱しない限り本発明の範囲に含まれる。   In the processing procedure described in this specification, particularly in the processing procedure described using the flowchart, a part of the steps (steps) configuring the processing procedure is omitted, and the steps configuring the processing procedure are described below. Unspecified steps can be added, and / or the order of the steps can be changed. The processing procedures in which such omissions, additions, and changes in order are made do not depart from the spirit of the present invention. Included in the scope of the invention.

1 動画配信システム 1. Video distribution system

Claims (10)

配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システムであって、
一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
前記視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記配信ユーザが使用する配信ユーザ装置に表示指示オブジェクトを表示させ、
前記表示指示オブジェクトへの操作に応じて、前記第1ギフトを前記動画に表示させる、
動画配信システム。
A moving image distribution system for live distribution of a moving image including an animation of a character object generated based on a movement of a distribution user,
Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to receiving a first display request for a first gift from the viewing user, display a display instruction object on a distribution user device used by the distribution user,
Displaying the first gift in the video in response to an operation on the display instruction object;
Video distribution system.
前記第1ギフトは、前記キャラクタオブジェクトの装着部位と関連付けられた装着ギフトであり、
前記装着ギフトは、前記表示指示オブジェクトへの操作に応じて、前記動画において前記装着部位と対応する位置に表示される、
請求項1に記載の動画配信システム。
The first gift is a mounting gift associated with a mounting site of the character object,
The wearing gift is displayed at a position corresponding to the wearing part in the moving image in response to an operation on the display instruction object,
The moving image distribution system according to claim 1.
前記装着ギフトは、前記装着部位のうちの第1装着部位に対応付けられた第1装着ギフトを含み、
前記第1装着ギフトには、前記動画に表示される第1表示時間が設定されており、
前記一又は複数のコンピュータプロセッサは、前記動画に前記第1装着ギフトが表示されている場合、前記第1表示時間が経過するまでは、前記装着ギフトのうち前記第1装着部位に関連付けられている第2装着ギフトの前記動画への表示を禁止する、
請求項2に記載の動画配信システム。
The wearing gift includes a first wearing gift associated with a first wearing part of the wearing parts,
In the first wearing gift, a first display time displayed in the video is set,
When the first wearing gift is displayed in the moving image, the one or more computer processors are associated with the first wearing part of the wearing gift until the first display time elapses. Prohibit the display of the second wearing gift on the video,
The moving image distribution system according to claim 2.
前記一又は複数のコンピュータプロセッサは、前記動画に前記第1装着ギフトが表示されている場合、前記第1表示時間が経過するまでは、前記装着ギフトのうち前記第1装着部位に関連付けられている第2装着ギフトを表示するための前記表示指示オブジェクトをディアクティベートする、
請求項3に記載の動画配信システム。
When the first wearing gift is displayed in the moving image, the one or more computer processors are associated with the first wearing part of the wearing gift until the first display time elapses. Deactivating the display instruction object for displaying the second wearing gift;
The moving image distribution system according to claim 3.
前記視聴ユーザからメッセージと関連付けられたメッセージギフトを受け付けたことに応じて、前記配信ユーザ装置に前記メッセージを表示させ、
前記配信ユーザ装置への表示指示操作に応じて、前記動画に前記メッセージギフトを表示させる、
請求項1から請求項4のいずれか1項に記載の動画配信システム。
In response to receiving a message gift associated with a message from the viewing user, display the message on the delivery user device,
In response to a display instruction operation to the distribution user device, display the message gift on the moving image,
The moving image distribution system according to any one of claims 1 to 4.
前記動画には、前記配信ユーザの音声が合成されており、
前記視聴ユーザから前記配信ユーザの音声を変更するためのボイスチェンジギフトを受け付けたことに応じて、前記配信ユーザ装置に音声変更指示オブジェクトを表示し、
前記音声変更指示オブジェクトへの操作に応じて、前記配信ユーザの音声を、前記ボイスチェンジギフトにて指定された音声に変更する、
請求項1から請求項5のいずれか1項に記載の動画配信システム。
In the moving image, the voice of the distribution user is synthesized,
In response to receiving a voice change gift for changing the voice of the distribution user from the viewing user, displaying a voice change instruction object on the distribution user device,
In response to an operation on the voice change instruction object, change the voice of the distribution user to the voice specified by the voice change gift,
The moving image distribution system according to any one of claims 1 to 5.
前記視聴ユーザから前記キャラクタオブジェクトの特定の部位と対応付けられずに前記動画に表示される第2ギフトに関する第2表示要求を受け付けたことに応じて、前記動画に前記第2ギフトを表示させる、
請求項1から請求項6のいずれか1項に記載の動画配信システム。
In response to receiving a second display request for a second gift displayed in the moving image without being associated with a specific part of the character object from the viewing user, displaying the second gift in the moving image,
The moving image distribution system according to any one of claims 1 to 6.
前記動画の配信期間内にギフト表示禁止期間が設定され、
前記第2ギフトは、前記動画の配信期間における前記ギフト表示禁止期間以外のタイミングで前記動画に表示される、
請求項1から請求項7のいずれか1項に記載の動画配信システム。
A gift display prohibition period is set within the distribution period of the video,
The second gift is displayed on the video at a timing other than the gift display prohibition period in the distribution period of the video,
The moving image distribution system according to any one of claims 1 to 7.
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより、配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信方法であって、
前記視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記配信ユーザが使用する配信ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記表示指示オブジェクトへの操作に応じて、前記第1ギフトを前記動画に表示させる工程と、
を備える動画配信方法。
A video distribution method for live distribution of a video including an animation of a character object generated based on a motion of a distribution user by executing one or more computer processors executing computer-readable instructions,
Displaying a display instruction object on a distribution user device used by the distribution user in response to receiving a first display request for a first gift from the viewing user;
Displaying the first gift in the video in response to an operation on the display instruction object;
A video distribution method comprising:
配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信プログラムであって、
一又は複数のコンピュータプロセッサに、
前記視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記配信ユーザが使用する配信ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記表示指示オブジェクトへの操作に応じて、前記第1ギフトを前記動画に表示させる工程と、
を実行させる動画配信プログラム。
A moving image distribution program for live distribution of a moving image including an animation of a character object generated based on a movement of a distribution user,
To one or more computer processors,
Displaying a display instruction object on a distribution user device used by the distribution user in response to receiving a first display request for a first gift from the viewing user;
Displaying the first gift in the video in response to an operation on the display instruction object;
A video distribution program that runs
JP2018159802A 2018-08-28 2018-08-28 Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user Active JP6491388B1 (en)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP2018159802A JP6491388B1 (en) 2018-08-28 2018-08-28 Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
KR1020217003200A KR102490402B1 (en) 2018-08-28 2019-06-24 A moving image distribution system, a moving image distribution method, and a moving image distribution program for live distribution of a moving image including animation of a character object generated based on a distribution user's movement.
PCT/JP2019/024876 WO2020044749A1 (en) 2018-08-28 2019-06-24 Moving-image delivery system for delivering moving-image live that includes animation of character object generated on the basis of motion of delivering user, moving-image delivery method, and moving-image delivery program
CN201910728240.6A CN110866963B (en) 2018-08-28 2019-08-07 Moving image distribution system, moving image distribution method, and recording medium
US16/552,367 US11044535B2 (en) 2018-08-28 2019-08-27 Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
US17/157,176 US11336969B2 (en) 2018-08-28 2021-01-25 Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
US17/694,091 US11838603B2 (en) 2018-08-28 2022-03-14 Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
US18/493,392 US20240056653A1 (en) 2018-08-28 2023-10-24 Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018159802A JP6491388B1 (en) 2018-08-28 2018-08-28 Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019035044A Division JP6523586B1 (en) 2018-08-28 2019-02-28 Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user

Publications (2)

Publication Number Publication Date
JP6491388B1 JP6491388B1 (en) 2019-03-27
JP2020036134A true JP2020036134A (en) 2020-03-05

Family

ID=65895324

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018159802A Active JP6491388B1 (en) 2018-08-28 2018-08-28 Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user

Country Status (1)

Country Link
JP (1) JP6491388B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022078994A (en) * 2021-12-23 2022-05-25 グリー株式会社 Program, information processing method, and information processing device
JP7406847B1 (en) * 2022-10-13 2023-12-28 株式会社flaggs Information processing program, information processing method, and information processing device

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019216146A1 (en) 2018-05-08 2019-11-14 グリー株式会社 Moving picture delivery system for delivering moving picture including animation of character object generated based on motions of actor, moving picture delivery method, and moving picture delivery program
US11044535B2 (en) 2018-08-28 2021-06-22 Gree, Inc. Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
JP7398873B2 (en) 2019-03-29 2023-12-15 株式会社バンダイナムコエンターテインメント Server system and video distribution system
JP6776393B2 (en) * 2019-03-29 2020-10-28 株式会社コロプラ Viewing program, viewing method, and information terminal device
JP7344189B2 (en) * 2019-03-29 2023-09-13 株式会社コロプラ Viewing programs, viewing methods, and information terminal devices
JP6745377B1 (en) * 2019-04-10 2020-08-26 株式会社 ディー・エヌ・エー System, method and program for delivering live video
JP7337366B2 (en) * 2019-05-23 2023-09-04 株式会社ミラティブ Video distribution system, program, and computer-readable storage medium
JP6692481B1 (en) * 2019-06-19 2020-05-13 グリー株式会社 Computer program, information processing method, and information processing system
JP7001737B2 (en) * 2020-05-01 2022-01-20 グリー株式会社 Video data processing method, video data processing program, video data processing method, server
US11559740B2 (en) 2019-09-13 2023-01-24 Gree, Inc. Video modification and transmission using tokens
JP6691631B1 (en) * 2019-09-20 2020-04-28 グリー株式会社 Movie processing method, server device, and computer program
JP6942834B2 (en) * 2019-09-20 2021-09-29 グリー株式会社 Video processing method, server device and computer program
CN110730374B (en) * 2019-10-10 2022-06-17 北京字节跳动网络技术有限公司 Animation object display method and device, electronic equipment and storage medium
JP7165112B2 (en) * 2019-10-15 2022-11-02 グリー株式会社 Computer program, information processing method, and video distribution system
JP7296846B2 (en) * 2019-10-16 2023-06-23 株式会社Iriam Live communication system with characters
JP7046044B6 (en) 2019-11-08 2022-05-06 グリー株式会社 Computer programs, server devices and methods
JP6766246B1 (en) * 2019-12-19 2020-10-07 株式会社ドワンゴ Management server, user terminal, gift system and information processing method
CN111131850A (en) * 2019-12-27 2020-05-08 广州华多网络科技有限公司 Method and device for displaying special effect of virtual gift and electronic equipment
JP6798733B1 (en) * 2020-01-20 2020-12-09 合同会社Mdk Consideration-linked motion induction method and consideration-linked motion induction program
JP7066764B2 (en) 2020-01-22 2022-05-13 グリー株式会社 Computer programs, methods and server equipment
JP7118228B2 (en) * 2020-03-12 2022-08-15 グリー株式会社 Video processing method, server device and computer program
JP7220173B2 (en) * 2020-04-14 2023-02-09 グリー株式会社 Computer program, information processing method and information processing system
JP7263500B2 (en) * 2020-05-01 2023-04-24 グリー株式会社 MOVIE DATA PROCESSING METHOD, MOVIE DATA PROCESSING PROGRAM AND SERVER
JP7272993B2 (en) * 2020-05-15 2023-05-12 グリー株式会社 Video data processing program, video data processing method, information processing apparatus, and information processing method
US11633669B2 (en) 2020-06-22 2023-04-25 Gree, Inc. Video modification and transmission
JP6987933B1 (en) * 2020-07-14 2022-01-05 グリー株式会社 Computer programs, methods and server equipment
JP7271476B2 (en) * 2020-06-24 2023-05-11 グリー株式会社 Video application program, video display method, information processing device and information processing method
JP7229327B2 (en) * 2020-07-14 2023-02-27 グリー株式会社 Computer program, method and server device
JP7296530B2 (en) * 2020-07-14 2023-06-22 グリー株式会社 Computer program, method and server device
JP7079823B2 (en) * 2020-08-03 2022-06-02 株式会社 ディー・エヌ・エー Systems, methods, and programs for delivering live video
JP7313511B2 (en) * 2020-08-03 2023-07-24 株式会社 ディー・エヌ・エー System, method and program for distributing live video
JP7175299B2 (en) 2020-08-21 2022-11-18 株式会社コロプラ Program, method and computer
JP6841465B1 (en) * 2020-10-02 2021-03-10 合同会社Mdk Consideration-linked motion induction method and consideration-linked motion induction program
JP7373149B2 (en) * 2021-12-01 2023-11-02 グリー株式会社 Computer programs, methods and server devices
JP7125729B1 (en) 2022-02-25 2022-08-25 17Live株式会社 server

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6178941B1 (en) * 2017-03-21 2017-08-09 株式会社ドワンゴ Reaction selection device, reaction selection method, reaction selection program
WO2018142494A1 (en) * 2017-01-31 2018-08-09 株式会社 ニコン Display control system and display control method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018142494A1 (en) * 2017-01-31 2018-08-09 株式会社 ニコン Display control system and display control method
JP6178941B1 (en) * 2017-03-21 2017-08-09 株式会社ドワンゴ Reaction selection device, reaction selection method, reaction selection program

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
"バーチャルキャラになってライブ配信アプリ「SHOWROOM」に配信する!?", [ONLINE], JPN6018046325, 11 April 2018 (2018-04-11), ISSN: 0003972110 *
"星・種・スペシャルギフトの入手方法と使い方", [ONLINE], JPN6018046323, 18 April 2018 (2018-04-18), ISSN: 0003972109 *
"注目のバーチャル美少女「東雲めぐ」の可愛さの秘密とは?", [ONLINE], JPN6018046322, 16 March 2018 (2018-03-16), ISSN: 0003925563 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022078994A (en) * 2021-12-23 2022-05-25 グリー株式会社 Program, information processing method, and information processing device
JP7333528B2 (en) 2021-12-23 2023-08-25 グリー株式会社 Program, information processing method and information processing apparatus
JP7406847B1 (en) * 2022-10-13 2023-12-28 株式会社flaggs Information processing program, information processing method, and information processing device

Also Published As

Publication number Publication date
JP6491388B1 (en) 2019-03-27

Similar Documents

Publication Publication Date Title
JP6491388B1 (en) Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
JP6543403B1 (en) Video distribution system, video distribution method and video distribution program
JP6382468B1 (en) Movie distribution system, movie distribution method, and movie distribution program for distributing movie including animation of character object generated based on movement of actor
US11838603B2 (en) Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
JP6550549B1 (en) Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
JP6550546B1 (en) Video distribution system, video distribution method and video distribution program
JP7191883B2 (en) Video distribution system, video distribution method and video distribution program
JP6523586B1 (en) Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
WO2020044749A1 (en) Moving-image delivery system for delivering moving-image live that includes animation of character object generated on the basis of motion of delivering user, moving-image delivery method, and moving-image delivery program
JP6671528B1 (en) Video distribution system, video distribution method, and video distribution program
JP2024041749A (en) Video distribution system, video distribution method, and video distribution program
WO2020121909A1 (en) Video distribution system, video distribution method, and video distribution program
JP6713080B2 (en) Video distribution system, video distribution method, and video distribution program for live distribution of videos including animation of character objects generated based on movements of distribution users
JP7284329B2 (en) Video distribution system, video distribution method, and video distribution program for live distribution of video containing animation of character object generated based on movement of distribution user
JP2020043578A (en) Moving image distribution system, moving image distribution method, and moving image distribution program, for distributing moving image including animation of character object generated on the basis of movement of actor
JP7104097B2 (en) Distribution A video distribution system, video distribution method, and video distribution program that delivers live videos including animations of character objects generated based on user movements.
JP6828106B1 (en) Video distribution system, video distribution method and video distribution program
JP2023103424A (en) Moving image distribution system, moving image distribution method, and moving image distribution program for live distribution of moving image including animation of character object generated based on motion of distribution user
JP6937803B2 (en) Distribution A video distribution system, video distribution method, and video distribution program that delivers live video including animation of character objects generated based on the movement of the user.
JP2020005238A (en) Video distribution system, video distribution method and video distribution program for distributing a video including animation of character object generated based on motion of actor
JP2019198054A (en) Video distribution system for distributing video including animation of character object generated on the basis of actor movement and video distribution program
JP2019198057A (en) Moving image distribution system, moving image distribution method and moving image distribution program distributing moving image including animation of character object generated based on actor movement

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180829

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180903

A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20180927

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20181115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190228

R150 Certificate of patent or registration of utility model

Ref document number: 6491388

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250