JP7191883B2 - Video distribution system, video distribution method and video distribution program - Google Patents

Video distribution system, video distribution method and video distribution program Download PDF

Info

Publication number
JP7191883B2
JP7191883B2 JP2020035863A JP2020035863A JP7191883B2 JP 7191883 B2 JP7191883 B2 JP 7191883B2 JP 2020035863 A JP2020035863 A JP 2020035863A JP 2020035863 A JP2020035863 A JP 2020035863A JP 7191883 B2 JP7191883 B2 JP 7191883B2
Authority
JP
Japan
Prior art keywords
user
user device
gift
display
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020035863A
Other languages
Japanese (ja)
Other versions
JP2020099096A5 (en
JP2020099096A (en
Inventor
彩 倉淵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GREE Inc
Original Assignee
GREE Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GREE Inc filed Critical GREE Inc
Priority to JP2020035863A priority Critical patent/JP7191883B2/en
Publication of JP2020099096A publication Critical patent/JP2020099096A/en
Publication of JP2020099096A5 publication Critical patent/JP2020099096A5/ja
Priority to JP2022195349A priority patent/JP7462912B2/en
Application granted granted Critical
Publication of JP7191883B2 publication Critical patent/JP7191883B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本明細書における開示は、動画配信システム、動画配信方法及び動画配信プログラムに関する。本明細書における開示は、より具体的には、ユーザの動きに基づいて生成されるキャラクタオブジェクトを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラムに関する。 The disclosure in this specification relates to a video delivery system, a video delivery method, and a video delivery program. More specifically, the present specification relates to a moving image distribution system, a moving image distribution method, and a moving image distribution program for live distributing a moving image including a character object generated based on a user's motion.

従来から、配信ユーザの動きに基づいてキャラクタオブジェクトのアニメーションを生成し、かかるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システムが知られている。このような動画配信システムは、例えば、特開2015-184689号公報(特許文献1)及び「長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74-79」(非特許文献1)に開示されている。 2. Description of the Related Art Conventionally, there has been known a moving image distribution system that generates an animation of a character object based on movements of a distribution user and performs live distribution of a moving image including the animation of the character object. Such video distribution systems are disclosed, for example, in Japanese Unexamined Patent Application Publication No. 2015-184689 (Patent Document 1) and “Yusuke Hasegawa, Dawn of a New Era of Virtual Idols, PROJECT MariA, CG WORLD, Japan, Born Digital Co., Ltd., November 2017. 10, Vol. 231, pp. 74-79” (Non-Patent Document 1).

配信ユーザの動きに基づいて生成されたキャラクタオブジェクトを含む動画を配信する動画配信サービスが提供されている。このようなサービスとして、株式会社ドワンゴが提供する「バーチャルキャスト」が知られている。バーチャルキャストでは、ある配信ユーザが配信している動画に他のユーザのキャラクタオブジェクトが入り込み、二人の配信ユーザが各々のキャラクタオブジェクトを介して動画内で仮想的に共演することができる。 A moving image distribution service is provided that distributes moving images including character objects generated based on movements of distribution users. "Virtual Cast" provided by Dwango Co., Ltd. is known as such a service. In virtual cast, a character object of another user enters a moving image distributed by a certain distributing user, and two distributing users can virtually co-star in the moving image via each character object.

コンテンツを視聴する視聴ユーザからの要求に応じて、当該視聴ユーザが購入したギフトに対応するギフトオブジェクトを表示画面に表示させるコンテンツ配信システムも知られている。例えば、特開2012-120098号公報(特許文献2)に開示されている動画配信システムでは、視聴ユーザは、ギフトアイテムを購入し、この購入したギフトアイテムを配信ユーザに対してギフトとして提供することができる。ギフトは、視聴ユーザからの表示要求に応じて配信中の動画に表示される。ギフトの表示要求は、当該ギフトが視聴ユーザによって購入されたことに応じて自動的に生成されることもある。 There is also known a content distribution system that displays on a display screen a gift object corresponding to a gift purchased by a viewing user viewing content in response to a request from the viewing user. For example, in the video distribution system disclosed in Japanese Patent Laying-Open No. 2012-120098 (Patent Document 2), a viewing user purchases a gift item and provides the purchased gift item as a gift to the distribution user. can be done. The gift is displayed in the video being distributed in response to a display request from the viewing user. A gift display request may also be automatically generated in response to the gift being purchased by a viewing user.

特開2015-184689号公報JP 2015-184689 A 特開2012-120098号公報JP 2012-120098 A

長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74-79Yusuke Hasegawa, Dawn of a New Era of Virtual Idols PROJECT MariA, CG WORLD, Japan, Born Digital, Inc., November 10, 2017, Vol.231, pp. 74-79 株式会社ドワンゴ、 [バーチャルキャスト]凸について″、[online]、[平成30年11月25日検索]、インターネット〈URL:https://qa.nicovideo.jp/faq/show/10740?back=front%2Fcategory%3Ashow&category_id=718&page=1&site_domain=default&sort=sort_access&sort_order=desc〉Dwango Co., Ltd., [Virtual Cast] Convex ", [online], [Searched on November 25, 2018], Internet <URL: https://qa.nicovideo.jp/faq/show/10740?back=front %2Fcategory%3Ashow&category_id=718&page=1&site_domain=default&sort=sort_access&sort_order=desc>

従来の動画配信システムでは、視聴ユーザから配信ユーザに対してギフトが提供される。二人以上の配信ユーザが共演している共演動画において視聴ユーザから当該配信ユーザの各々へのギフトを受け付けると、各配信ユーザが単体で動画を配信する場合よりも受け付けられるギフトの数が多くなる。また、このため、共演動画において受け付けたギフトを表示すると、各配信ユーザに対して提供されたギフトによって配信動画が乱雑になってしまい、配信動画のクオリティが保てないという問題がある。 In a conventional video distribution system, a viewing user provides a gift to a distribution user. In a co-starring video in which two or more distribution users co-star, if gifts are received from viewing users for each of the distribution users, the number of gifts received is greater than when each distribution user distributes the video alone. . In addition, for this reason, if the received gifts are displayed in the co-starring video, the distributed video will be cluttered by the gifts provided to each distribution user, and there is a problem that the quality of the distributed video cannot be maintained.

本開示の目的は、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することである。本開示のより具体的な目的の一つは、共演動画に視聴ユーザからのギフトを整然と表示できる動画配信システム、動画配信方法及び動画配信プログラムを提供することである。 It is an object of the present disclosure to provide technical improvements that solve or mitigate at least some of the problems in the prior art discussed above. One of the more specific objects of the present disclosure is to provide a video distribution system, a video distribution method, and a video distribution program that can display gifts from viewing users in co-star videos in an orderly manner.

本発明の一態様による動画配信システムは、一又は複数のコンピュータプロセッサを備え、前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、第1ユーザの動きに基づいて生成される第1キャラクタオブジェクトを含む第1動画を配信し、前記第1動画を視聴する視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1動画を表示する前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる一方で、前記視聴ユーザが使用する視聴ユーザ装置及び前記第1動画を表示する第2ユーザが使用する第2ユーザ装置には前記表示指示オブジェクトを表示させず、前記第2ユーザからの共演申請に基づいて、前記第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む共演動画を配信し、前記共演動画を表示する前記第1ユーザ装置及び前記共演動画を表示する前記第2ユーザ装置に前記表示指示オブジェクトを表示させ、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの少なくとも一方と対応付けて前記第1ギフトを表示する。 A video distribution system according to an aspect of the present invention comprises one or more computer processors, the one or more computer processors executing computer readable instructions to generate a video generated based on a first user's movements. and displaying the first moving image in response to receiving a first display request regarding a first gift from a viewing user viewing the first moving image. While displaying the display instruction object on the first user device of the user, the display instruction object is displayed on the viewing user device used by the viewing user and the second user device used by the second user displaying the first moving image. Distributing a co-starring video containing the first character object and a second character object generated based on the movement of the second user based on a co-starring application from the second user without displaying the co-starring video, and distributing the co-starring video The display instruction object is displayed on the first user device to be displayed and the second user device to display the co-starring moving image, and in response to an operation on the display instruction object, the first character object and the The first gift is displayed in association with at least one of the second character objects.

本発明の一態様において、前記第1ユーザ装置において前記表示指示オブジェクトが操作された場合には前記第2ユーザ装置から前記表示指示オブジェクトを選択不能とし、前記第2ユーザ装置において前記表示指示オブジェクトが操作された場合には前記第1ユーザ装置から前記表示指示オブジェクトを選択不能とする。 In one aspect of the present invention, when the display instruction object is operated on the first user device, the display instruction object cannot be selected from the second user device, and the display instruction object is disabled on the second user device. When operated, the display instruction object cannot be selected from the first user device.

本発明の一態様において、前記第1ユーザ装置において前記表示指示オブジェクトを選択可能とする一方で前記第2ユーザ装置においては前記表示指示オブジェクトを選択不能とする。 In one aspect of the present invention, the display instruction object is selectable in the first user device, while the display instruction object is not selectable in the second user device.

本発明の一態様において、前記第前記第1ユーザ装置における前記表示指示オブジェクトの操作により、前記共演動画において前記第2キャラクタオブジェクトに対応付けて前記第1ギフトを表示する。 In one aspect of the present invention, by operating the display instruction object on the first user device, the first gift is displayed in association with the second character object in the co-starring moving image.

本発明の一態様において、前記第1ギフトは、前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの装着部位と関連付けられた装着ギフトであり、前記装着ギフトは、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記装着部位と対応する位置に表示される。 In one aspect of the present invention, the first gift is an equipable gift associated with an equipable part of the first character object and the second character object, and the equipable gift is provided in response to an operation on the display instruction object. is displayed at a position corresponding to the wearing part in the co-starring moving image.

本発明の一態様において、前記視聴ユーザから前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの特定の部位と対応付けられずに第2ギフトに関する第2表示要求を受け付けたことに応じて、前記共演動画に前記第2ギフトを表示させる。 In one aspect of the present invention, in response to receiving a second display request regarding a second gift without being associated with specific parts of the first character object and the second character object from the viewing user, the co-starring Display the second gift on the animation.

本発明の一態様において、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの一方のみと対応付けて前記第1ギフトを表示する。 In one aspect of the present invention, the first gift is displayed in association with only one of the first character object and the second character object in the co-starring moving image in response to an operation on the display instruction object.

本発明の一態様は、一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法に関する。当該動画配信方法は、第1ユーザの動きに基づいて生成される第1キャラクタオブジェクトを含む第1動画を配信する工程と、前記第1動画を視聴する視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1動画を表示する前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる一方で、前記視聴ユーザが使用する視聴ユーザ装置及び前記第1動画を表示する第2ユーザが使用する第2ユーザ装置には前記表示指示オブジェクトを表示させない工程と、前記第2ユーザからの共演申請に基づいて、前記第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む共演動画を配信する工程と、前記共演動画を表示する前記第1ユーザ装置及び前記共演動画を表示する前記第2ユーザ装置に表示指示オブジェクトを表示させる工程と、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの少なくとも一方と対応付けて前記第1ギフトを表示する工程と、を備える。 One aspect of the present invention relates to a video delivery method performed by one or more computer processors executing computer readable instructions. The method for distributing a moving image includes the steps of: distributing a first moving image including a first character object generated based on the movement of a first user; and receiving a first display request regarding a first gift from a viewing user viewing the first moving image. display instruction object on the first user device of the first user that displays the first moving image, while displaying the viewing user device used by the viewing user and the first moving image. a step of not displaying the display instruction object on the second user device used by the second user; distributing a co-starring moving image including the generated second character object; causing the first user device displaying the co-starring moving image and the second user device displaying the co-starring moving image to display a display instruction object; and displaying the first gift in association with at least one of the first character object and the second character object in the co-star moving image in response to an operation on the display instruction object.

本発明の一態様による動画配信プログラムは、一又は複数のコンピュータプロセッサに、第1ユーザの動きに基づいて生成される第1キャラクタオブジェクトを含む第1動画を配信する工程と、前記第1動画を視聴する視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1動画を表示する前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる一方で、前記視聴ユーザが使用する視聴ユーザ装置及び前記第1動画を表示する第2ユーザが使用する第2ユーザ装置には前記表示指示オブジェクトを表示させない工程と、前記第2ユーザからの共演申請に基づいて、前記第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む共演動画を配信する工程と、前記共演動画を表示する前記第1ユーザ装置及び前記共演動画を表示する前記第2ユーザ装置に表示指示オブジェクトを表示させる工程と、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの少なくとも一方と対応付けて前記第1ギフトを表示する工程と、を実行させる。 A moving image distribution program according to an aspect of the present invention includes the steps of: distributing a first moving image including a first character object generated based on a movement of a first user to one or more computer processors; A display instruction object is displayed on a first user device of the first user displaying the first moving image in response to receiving a first display request regarding the first gift from the viewing user who views the viewing user. and a step of not displaying the display instruction object in the viewing user device used by and the second user device used by the second user who displays the first moving image, and based on the co-starring application from the second user, the second a step of distributing a co-starring moving image including one character object and a second character object generated based on the movement of the second user; 2 displaying a display instruction object on a user device; and in response to an operation on the display instruction object, the first gift is associated with at least one of the first character object and the second character object in the co-star moving image. and causing to be executed.

本発明の実施形態によれば、共演動画に視聴ユーザからのギフトを整然と表示できる。 According to the embodiment of the present invention, gifts from viewing users can be displayed neatly in co-starring moving images.

一実施形態による動画配信システムを示すブロック図である。1 is a block diagram illustrating a video distribution system according to one embodiment; FIG. 図1の動画配信システムで配信される動画を配信する配信ユーザ及び当該配信ユーザが使用している配信ユーザ装置を模式的に示す模式図である。2 is a schematic diagram schematically showing distribution users who distribute moving images distributed by the moving image distribution system of FIG. 1 and distribution user devices used by the distribution users; FIG. 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。4 is a diagram showing an example of a display screen displayed on the viewing user device 10 in one embodiment. FIG. 一実施形態において配信ユーザ装置20aに表示される表示画面の例を示す図である。FIG. 4 is a diagram showing an example of a display screen displayed on a distribution user device 20a in one embodiment; 一実施形態において配信ユーザ装置20bに表示される表示画面の例を示す図である。FIG. 10 is a diagram showing an example of a display screen displayed on a distribution user device 20b in one embodiment; 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。図5の表示画面においては通常オブジェクトの例が表示されている。4 is a diagram showing an example of a display screen displayed on the viewing user device 10 in one embodiment. FIG. An example of a normal object is displayed on the display screen of FIG. 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。図6の表示画面においては装着オブジェクトの例が表示されている。4 is a diagram showing an example of a display screen displayed on the viewing user device 10 in one embodiment. FIG. An example of a wearable object is displayed on the display screen of FIG. 一実施形態において配信ユーザ装置20aに表示される表示画面の例を示す図である。図7aの表示画面においては装着オブジェクトの例が表示されている。FIG. 10 is a diagram showing an example of a display screen displayed on a distribution user device 20a in one embodiment; An example of a wearable object is displayed on the display screen of FIG. 7a. 一実施形態において配信ユーザ装置20bに表示される表示画面の例を示す図である。図7bの表示画面においては装着オブジェクトの例が表示されている。FIG. 10 is a diagram showing an example of a display screen displayed on a distribution user device 20b in one embodiment; An example of a wearable object is displayed in the display screen of FIG. 7b. 一実施形態において視聴ユーザ装置10に表示される共演動画の表示画面の例を示す図である。FIG. 4 is a diagram showing an example of a display screen of a co-starring moving image displayed on the viewing user device 10 in one embodiment. 一実施形態において配信ユーザ装置20aに表示される共演動画の表示画面の例を示す図である。FIG. 10 is a diagram showing an example of a display screen of a co-starring moving image displayed on the distribution user device 20a in one embodiment. 一実施形態において配信ユーザ装置20bに表示される共演動画の表示画面の例を示す図である。FIG. 10 is a diagram showing an example of a display screen of a co-starring moving image displayed on the distribution user device 20b in one embodiment. 一実施形態において視聴ユーザ装置10に表示される共演動画の表示画面の例を示す図である。図10の表示画面においては、装着オブジェクト138がキャラクタオブジェクト31に装着されている。FIG. 4 is a diagram showing an example of a display screen of a co-starring moving image displayed on the viewing user device 10 in one embodiment. In the display screen of FIG. 10, the wearable object 138 is worn on the character object 31 . 一実施形態において配信ユーザ装置20aに表示される共演動画の表示画面の例を示す図である。図11aの表示画面においては、装着オブジェクト138がキャラクタオブジェクト31に装着されている。FIG. 10 is a diagram showing an example of a display screen of a co-starring moving image displayed on the distribution user device 20a in one embodiment. In the display screen of FIG. 11a, the wearable object 138 is worn on the character object 31. As shown in FIG. 一実施形態において配信ユーザ装置20bに表示される共演動画の表示画面の例を示す図である。図11bの表示画面においては、装着オブジェクト138がキャラクタオブジェクト31に装着されている。FIG. 11 is a diagram showing an example of a display screen of a co-starring moving image displayed on the distribution user device 20b in one embodiment. 11b, the wearable object 138 is worn on the character object 31. In the display screen of FIG. 一実施形態において視聴ユーザ装置10に表示される共演動画の表示画面の例を示す図である。図12の表示画面においては、装着オブジェクト138がキャラクタオブジェクト131に装着されている。FIG. 4 is a diagram showing an example of a display screen of a co-starring moving image displayed on the viewing user device 10 in one embodiment. In the display screen of FIG. 12, the wearable object 138 is worn on the character object 131 . 一実施形態において配信ユーザ装置20aに表示される共演動画の表示画面の例を示す図である。図13aの表示画面においては、装着オブジェクト138がキャラクタオブジェクト131に装着されている。FIG. 10 is a diagram showing an example of a display screen of a co-starring moving image displayed on the distribution user device 20a in one embodiment. In the display screen of FIG. 13a, an attached object 138 is attached to the character object 131. In the display screen of FIG. 一実施形態において配信ユーザ装置20bに表示される共演動画の表示画面の例を示す図である。図13bの表示画面においては、装着オブジェクト138がキャラクタオブジェクト131に装着されている。FIG. 10 is a diagram showing an example of a display screen of a co-starring moving image displayed on the distribution user device 20b in one embodiment. In the display screen of FIG. 13B, the wearable object 138 is worn on the character object 131 . 一実施形態における動画配信処理の流れを示すフロー図である。FIG. 4 is a flow diagram showing the flow of video distribution processing in one embodiment. 一実施形態において通常ギフトを表示する処理の流れを示すフロー図である。FIG. 10 is a flow diagram showing the flow of processing for displaying normal gifts in one embodiment. 一実施形態において装着ギフトを表示する処理の流れを示すフロー図である。FIG. 10 is a flow diagram showing the flow of processing for displaying an attached gift in one embodiment;

以下、図面を適宜参照し、本発明の様々な実施形態を説明する。複数の図面において同一の又は類似する構成要素には同じ参照符号が付される。 Various embodiments of the present invention will now be described with appropriate reference to the drawings. Identical or similar components are provided with the same reference numerals in several drawings.

図1及び図2を参照して、一実施形態による動画配信システムについて説明する。図1は、一実施形態による動画配信システム1を示すブロック図であり、図2は、動画配信システム1で動画を配信するユーザUa,Ub及び当該ユーザUa,Ubが使用している配信ユーザ装置20a,20bを模式的に示す模式図である。配信装置20a及び配信装置20bは、動画配信システム1で配信される動画を視聴する機能を有していてもよい。 A video distribution system according to an embodiment will be described with reference to FIGS. 1 and 2. FIG. FIG. 1 is a block diagram showing a video distribution system 1 according to an embodiment, and FIG. 2 shows users Ua and Ub who distribute videos in the video distribution system 1 and distribution user devices used by the users Ua and Ub. It is a schematic diagram which shows typically 20a, 20b. The distribution device 20 a and the distribution device 20 b may have a function of viewing moving images distributed by the moving image distribution system 1 .

動画配信システム1は、視聴ユーザ装置10と、配信ユーザ装置20a,20bと、サーバ装置60と、ストレージ70と、を備える。視聴ユーザ装置10と、配信ユーザ装置20と、サーバ装置60と、ストレージ70とは、ネットワーク50を介して相互に通信可能に接続されている。サーバ装置60は、後述するように、配信ユーザUa及び配信ユーザUbのキャラクタのアニメーションを含む動画を配信するように構成される。 A moving image distribution system 1 includes a viewing user device 10 , distribution user devices 20 a and 20 b , a server device 60 and a storage 70 . The viewing user device 10, the distribution user device 20, the server device 60, and the storage 70 are connected via the network 50 so as to be able to communicate with each other. The server device 60 is configured to distribute moving images including animations of characters of distribution user Ua and distribution user Ub, as will be described later.

この動画は、サーバ装置60から視聴ユーザ装置10及び配信ユーザ装置20a,20bに配信される。配信された動画は、視聴ユーザ装置10のディスプレイに表示される。視聴ユーザ装置10のユーザである視聴ユーザは、配信された動画を視聴ユーザ装置10により視聴することができる。図面を簡潔するために図1には視聴ユーザ装置10が1台だけ示されているが、動画配信システム1は、複数の視聴ユーザ装置を備えていてもよい。配信ユーザUa,Ubは、配信された動画を視聴することにより、動画中の動画を確認しながらパフォーマンスを行うことができる。 This moving image is distributed from the server device 60 to the viewing user device 10 and the distribution user devices 20a and 20b. The distributed video is displayed on the display of the viewing user device 10 . A viewing user who is a user of the viewing user device 10 can view the distributed video using the viewing user device 10 . Although only one viewing user device 10 is shown in FIG. 1 to simplify the drawing, the video distribution system 1 may include a plurality of viewing user devices. By viewing the distributed video, the distribution users Ua and Ub can perform while checking the video in the video.

図示の実施形態において、配信ユーザ装置20aは、コンピュータプロセッサ21aと、通信I/F22aと、ディスプレイ23aと、カメラ24aと、マイク25aと、を備えている。同様に、配信ユーザ装置20bは、コンピュータプロセッサ21bと、通信I/F22bと、ディスプレイ23bと、カメラ24bと、マイク25bと、を備えている。配信ユーザ装置20aと配信ユーザ装置20bとは同様の構成及び機能を有しているため、両者を特に区別する必要がない場合には、両者をまとめて配信ユーザ装置20と呼ぶことがあり、その構成要素もコンピュータプロセッサ21などと呼ぶことがある。 In the illustrated embodiment, the Broadcast User Device 20a comprises a computer processor 21a, a communication I/F 22a, a display 23a, a camera 24a and a microphone 25a. Similarly, the distribution user device 20b includes a computer processor 21b, a communication I/F 22b, a display 23b, a camera 24b, and a microphone 25b. Since the distribution user device 20a and the distribution user device 20b have similar configurations and functions, they may be collectively referred to as the distribution user device 20 when there is no particular need to distinguish between them. A component may also be referred to as a computer processor 21 or the like.

コンピュータプロセッサ21は、ストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ21は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ21は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ21は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。 The computer processor 21 is an arithmetic device that loads an operating system and various programs that implement various functions from storage into a memory and executes instructions included in the loaded programs. The computer processor 21 is, for example, a CPU, MPU, DSP, GPU, various arithmetic units other than these, or a combination thereof. The computer processor 21 may be realized by an integrated circuit such as ASIC, PLD, FPGA, MCU. Although computer processor 21 is illustrated as a single component in FIG. 1, computer processor 21 may be a collection of a plurality of physically separate computer processors.

通信I/F22は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。配信ユーザ装置20は、通信I/F22を介して、他の装置とデータを送受信することができる。 The communication I/F 22 is implemented as hardware, firmware, communication software such as a TCP/IP driver or PPP driver, or a combination thereof. The distribution user device 20 can transmit and receive data to and from other devices via the communication I/F 22 .

ディスプレイ23は、表示パネルと、タッチパネルと、を有する。タッチパネルは、プレイヤのタッチ操作(接触操作)を検出することができるように構成されている。タッチパネルは、プレイヤのタップ、ダブルタップ、ドラッグ等の各種タッチ操作を検出することができる。タッチパネルは、静電容量式の近接センサを備え、プレイヤの非接触操作を検出可能に構成されてもよい。 The display 23 has a display panel and a touch panel. The touch panel is configured to be able to detect a player's touch operation (contact operation). The touch panel can detect various touch operations such as tapping, double tapping, and dragging by the player. The touch panel may include a capacitive proximity sensor and be configured to detect non-contact operations by the player.

カメラ24は、配信ユーザUa,Ubの顔を連続的に撮像し、配信ユーザUa,Ubの顔の撮像データを取得する。カメラ24により撮像された配信ユーザUa,Ubの顔の撮像データは、通信I/F22を介してサーバ装置60に送信される。カメラ24は、人物の顔の奥行きを検出可能な3Dカメラであってもよい。 The camera 24 continuously captures images of the faces of the distribution users Ua and Ub, and obtains image data of the faces of the distribution users Ua and Ub. Imaged data of the faces of distribution users Ua and Ub imaged by the camera 24 is transmitted to the server device 60 via the communication I/F 22 . The camera 24 may be a 3D camera capable of detecting the depth of a person's face.

マイク25は、入力された音声を音声データに変換するように構成された集音装置である。マイク25は、配信ユーザUa,Ubの音声入力を取得することができるように構成され。マイク25により取得された配信ユーザUa,Ubの音声入力は音声データに変換され、この音声データが通信I/F22を介してサーバ装置60に送信される。 The microphone 25 is a sound collecting device configured to convert input sound into sound data. The microphone 25 is configured to be able to acquire the voice input of the distribution users Ua and Ub. Voice input of distribution users Ua and Ub acquired by microphone 25 is converted into voice data, and this voice data is transmitted to server device 60 via communication I/F 22 .

視聴ユーザ装置10は、配信ユーザ装置20と同様の構成要素を備えてもよい。例えば、視聴ユーザ装置10は、コンピュータプロセッサ、通信I/F、ディスプレイ、及びカメラを備えてもよい。視聴ユーザ装置10は、所定のアプリケーションソフトウェアをダウンロード及びインストールすることにより、配信ユーザ装置20と同様の機能を奏してもよい。 The viewing user equipment 10 may comprise similar components to the broadcasting user equipment 20 . For example, viewing user device 10 may include a computer processor, communication I/F, display, and camera. The viewing user device 10 may have the same functions as the distribution user device 20 by downloading and installing predetermined application software.

視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォンなどの情報処理装置である。視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォン以外に、携帯電話機、タブレット端末、パーソナルコンピュータ、電子書籍リーダー、ウェアラブルコンピュータ、ゲーム用コンソール、及びこれら以外の動画を再生可能な各種情報処理装置であってもよい。視聴ユーザ装置10及び配信ユーザ装置20の各々は、上記の構成要素以外に、ジャイロセンサ等の各種センサを備えるセンサユニット、及び各種情報を記憶するストレージを備えてもよい。 The viewing user device 10 and the distribution user device 20 are information processing devices such as smart phones. The viewing user device 10 and the distribution user device 20 are mobile phones, tablet terminals, personal computers, electronic book readers, wearable computers, game consoles, and other various information processing devices capable of reproducing moving images, in addition to smartphones. may Each of the viewing user device 10 and the distribution user device 20 may include, in addition to the components described above, a sensor unit including various sensors such as a gyro sensor, and a storage for storing various information.

次に、サーバ装置60について説明する。図示の実施形態において、サーバ装置60は、コンピュータプロセッサ61と、通信I/F62と、ストレージ63と、を備えている。 Next, the server device 60 will be described. In the illustrated embodiment, the server device 60 comprises a computer processor 61 , a communication I/F 62 and a storage 63 .

コンピュータプロセッサ61は、ストレージ63又はその他のストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ61は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ61は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ61は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。 The computer processor 61 is an arithmetic device that loads an operating system and various programs that implement various functions from the storage 63 or other storage into its memory, and executes instructions included in the loaded programs. The computer processor 61 is, for example, a CPU, MPU, DSP, GPU, various arithmetic units other than these, or a combination thereof. The computer processor 61 may be realized by an integrated circuit such as ASIC, PLD, FPGA, MCU. Although computer processor 21 is illustrated as a single component in FIG. 1, computer processor 61 may be a collection of a plurality of physically separate computer processors.

通信I/F62は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。サーバ装置60は、通信I/F62を介して、他の装置とデータを送受信することができる。 The communication I/F 62 is implemented as hardware, firmware, communication software such as a TCP/IP driver or PPP driver, or a combination thereof. Server device 60 can transmit and receive data to and from other devices via communication I/F 62 .

ストレージ63は、コンピュータプロセッサ61によりアクセスされる記憶装置である。ストレージ63は、例えば、磁気ディスク、光ディスク、半導体メモリ、又はデータを記憶可能な前記以外の各種記憶装置である。ストレージ63には、様々なプログラムが記憶され得る。ストレージ63に記憶され得るプログラム及び各種データの少なくとも一部は、サーバ装置60とは物理的に別体のストレージ(例えば、ストレージ70)に格納されてもよい。 Storage 63 is a storage device accessed by computer processor 61 . The storage 63 is, for example, a magnetic disk, an optical disk, a semiconductor memory, or various other storage devices capable of storing data. Various programs can be stored in the storage 63 . At least part of the programs and various data that can be stored in the storage 63 may be stored in a storage that is physically separate from the server device 60 (for example, the storage 70).

本明細書において、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるとして説明されるプログラム又は当該プログラムに含まれる命令はそれぞれ、単一のコンピュータプロセッサで実行されてもよいし、複数のコンピュータプロセッサにより分散して実行されてもよい。また、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるプログラム又は当該プログラムに含まれる命令はそれぞれ、複数の仮想コンピュータプロセッサにより実行されてもよい。 Programs or instructions contained therein that are described herein as being executed by computer processor 21 or computer processor 61, respectively, may be executed by a single computer processor or may be distributed among multiple computer processors. may be executed as Also, programs executed by computer processor 21 or computer processor 61 or instructions included in the programs may each be executed by multiple virtual computer processors.

次に、ストレージ63に記憶されるデータについて説明する。図示の実施形態においては、ストレージ63には、モデルデータ63a、オブジェクトデータ63b、及び前記以外の配信動画の生成及び配信に必要な様々なデータが記憶される。 Next, data stored in the storage 63 will be described. In the illustrated embodiment, the storage 63 stores model data 63a, object data 63b, and various other data necessary for generating and distributing distribution moving images.

モデルデータ63aは、キャラクタのアニメーションを生成するためのモデルデータである。モデルデータ63aは、3次元のアニメーションを生成するための3次元モデルデータであってもよいし、2次元のモデルデータを生成するための2次元モデルデータであってもよい。モデルデータ63aは、例えば、キャラクタの顔及び顔以外の部分の骨格を示すリグデータ(「スケルトンデータ」と呼ばれることもある。)と、キャラクタの表面の形状や質感を示す表面データと、を含む。モデルデータ63aには、互いに異なる複数のモデルデータを含むことができる。この複数のモデルデータは、互いに異なるリグデータを有していてもよいし、同じリグデータを有していてもよい。この複数のモデルデータは、互いと異なる表面データを有していてもよいし、同じ表面データを有していてもよい。 The model data 63a is model data for generating character animation. The model data 63a may be three-dimensional model data for generating a three-dimensional animation, or two-dimensional model data for generating two-dimensional model data. The model data 63a includes, for example, rig data (also referred to as “skeleton data”) indicating the skeleton of the character's face and parts other than the face, and surface data indicating the surface shape and texture of the character. The model data 63a can include a plurality of different model data. The plurality of model data may have rig data different from each other, or may have the same rig data. The plurality of model data may have surface data different from each other, or may have the same surface data.

オブジェクトデータ63bは、動画を構成する仮想空間を構築するためのアセットデータを含む。オブジェクトデータ63bは、動画を構成する仮想空間の背景を描画するためのデータ、動画に表示される各種物体を描画するためのデータ、及びこれら以外の動画に表示される各種オブジェクトを描画するためのデータが含まれる。オブジェクトデータ63bには、仮想空間におけるオブジェクトの位置を示すオブジェクト位置情報を含んでもよい。 The object data 63b includes asset data for constructing a virtual space that constitutes a moving image. The object data 63b includes data for drawing the background of the virtual space that constitutes the moving image, data for drawing various objects displayed in the moving image, and data for drawing various objects displayed in the moving image. Contains data. The object data 63b may include object position information indicating the position of the object in the virtual space.

オブジェクトデータ63bには、上記以外にも、ギフトオブジェクトが含まれ得る。ギフトオブジェクトは、動画を視聴している視聴ユーザからのギフトの表示要求に基づいて動画に表示される。ギフトオブジェクトには、エフェクトギフトに対応するエフェクトオブジェクトと、通常ギフトに対応する通常オブジェクトと、装着ギフトに対応する装着オブジェクトと、メッセージギフトに対応するメッセージオブジェクトと、が含まれ得る。視聴ユーザは、所望のギフトを購入することができる。視聴ユーザと配信ユーザ(例えば、配信ユーザUa,Ub)との区別は、ユーザの行為に着目した区別である。例えば、動画配信システム1において、あるユーザが動画を視聴する場合には当該ユーザは視聴ユーザと呼ばれるが、そのユーザが動画を配信する場合には配信ユーザと呼ばれる。 The object data 63b may include gift objects other than the above. A gift object is displayed in a moving image based on a gift display request from a viewing user who is viewing the moving image. The gift objects can include effect objects corresponding to effect gifts, normal objects corresponding to normal gifts, attachment objects corresponding to attachment gifts, and message objects corresponding to message gifts. A viewing user can purchase a desired gift. The distinction between viewing users and distribution users (for example, distribution users Ua and Ub) is based on user behavior. For example, in the moving image distribution system 1, when a user views a moving image, the user is called a viewing user, and when the user distributes the moving image, the user is called a distribution user.

エフェクトギフトを示すエフェクトオブジェクトは、配信動画の視聴画面全体の印象に影響を与えるオブジェクトであり、例えば紙吹雪を模したオブジェクトである。紙吹雪を模したオブジェクトは、視聴画面全体に表示されてもよく、これにより表示の前後における視聴画面全体の印象を変えることができる。エフェクトオブジェクトは、キャラクタオブジェクトと重複するように表示されることもあるが、キャラクタオブジェクトの特定の部位と関連付けられずに表示される点で装着オブジェクトと異なっている。 The effect object indicating the effect gift is an object that affects the impression of the entire viewing screen of the distributed moving image, and is an object that imitates confetti, for example. Objects resembling confetti may be displayed on the entire viewing screen, thereby making it possible to change the overall impression of the viewing screen before and after display. Effect objects are sometimes displayed so as to overlap with character objects, but differ from wearing objects in that they are displayed without being associated with specific parts of the character object.

通常ギフトを示す通常オブジェクトは、視聴ユーザから配信ユーザ(例えば、配信ユーザUa,Ub)へのギフトを示すオブジェクトであり、例えばぬいぐるみ、花束、アクセサリ、又は前記以外のギフトやプレゼントに適した物品を模したオブジェクトである。一態様において、通常オブジェクトは、キャラクタオブジェクトと接しないように動画の表示画面に表示される。一態様において、通常オブジェクトは、キャラクタオブジェクトと重複しないように動画の表示画面に表示される。通常オブジェクトは、仮想空間においてキャラクタオブジェクト以外のオブジェクトと重複するように表示されてもよい。通常オブジェクトは、キャラクタオブジェクトと重複するように表示されることもあるが、キャラクタオブジェクトの特定の部位と関連付けられた表示はなされない点で装着オブジェクトと異なっている。一態様において、通常オブジェクトをキャラクタオブジェクトと重複して表示させる場合には、当該通常オブジェクトは、当該キャラクタオブジェクトの顔を含む頭部以外の部分と重複し、当該キャラクタオブジェクトの頭部とは重複しないように表示される。一態様において、通常オブジェクトをキャラクタオブジェクトと重複して表示させる場合には、当該通常オブジェクトは、当該キャラクタオブジェクトの顔を含む上半身以外の部分と重複し、当該キャラクタオブジェクトの上半身とは重複しないように表示される。 A normal object that indicates a normal gift is an object that indicates a gift from a viewing user to a distribution user (for example, distribution users Ua and Ub). It is an imitation object. In one aspect, the normal object is displayed on the moving image display screen so as not to come in contact with the character object. In one aspect, the normal object is displayed on the moving image display screen so as not to overlap with the character object. A normal object may be displayed so as to overlap an object other than the character object in the virtual space. A normal object may be displayed so as to overlap with a character object, but differs from a wearable object in that it is not displayed in association with a specific part of the character object. In one aspect, when the normal object is displayed so as to overlap with the character object, the normal object overlaps a portion of the character object other than the head including the face, and does not overlap the head of the character object. is displayed. In one aspect, when the normal object is displayed so as to overlap with the character object, the normal object overlaps the part of the character object other than the upper body including the face, and does not overlap the upper body of the character object. Is displayed.

装着ギフトを示す装着オブジェクトは、キャラクタオブジェクトの特定の部位(装着部位)と関連付けて表示画面に表示されるオブジェクトである。一態様において、キャラクタオブジェクトの特定の部位と関連付けて表示画面に表示される装着オブジェクトは、当該キャラクタオブジェクトの当該特定の部位に接するように表示画面に表示される。一態様において、キャラクタオブジェクトの特定の部位と関連付けて表示画面に表示される装着オブジェクトは、当該キャラクタオブジェクトの当該特定の部位の一部又は全部を覆うように表示画面に表示される。特定の部位は、3次元座標空間における位置を示す3次元位置情報で特定されてもよいし、3次元座標空間の位置情報に関連付けられていてもよい。例えばキャラクタの頭部において、特定の部位は、頭部の前方左側、前方右側、後方左側、後方右側、中央前側、中央後側、左目、右目、左耳、右耳、及び髪全体という単位で定められてもよい。 A wearable object indicating a wearable gift is an object displayed on the display screen in association with a specific part (wearing part) of the character object. In one aspect, the mountable object displayed on the display screen in association with a specific part of the character object is displayed on the display screen so as to be in contact with the specific part of the character object. In one aspect, the mountable object displayed on the display screen in association with a specific part of the character object is displayed on the display screen so as to cover part or all of the specific part of the character object. The specific part may be specified by three-dimensional position information indicating the position in the three-dimensional coordinate space, or may be associated with position information in the three-dimensional coordinate space. For example, in the character's head, the specific parts are the front left side, front right side, rear left side, rear right side, center front side, center rear side, left eye, right eye, left ear, right ear, and the entire hair. may be defined.

装着オブジェクトは、例えば、キャラクタオブジェクトに装着されるアクセサリ(カチューシャ、ネックレス、イヤリングなど)、衣服(Tシャツなど)、コスチューム、及びこれら以外のキャラクラオブジェクトに装着可能なオブジェクトである。装着オブジェクトに対応するオブジェクトデータ63bには、当該装着オブジェクトがキャラクタオブジェクトのどの部位に関連付けられるかを示す装着部位情報が含まれてもよい。ある装着オブジェクトの装着部位情報は、当該装着オブジェクトがキャラクタオブジェクトのどの部位に装着されるかを示すことができる。例えば、装着オブジェクトがカチューシャである場合には、当該装着オブジェクトの装着部位情報は、当該装着オブジェクトがキャラクタオブジェクトの「頭部」に装着されることを示してもよい。装着オブジェクトが装着される装着部位情報が3次元座標空間の位置として特定される場合には、当該装着部位情報は3次元座標空間における複数の位置と関連付けられてもよい。例えば「カチューシャ」を示す装着オブジェクトが装着される位置を示す装着部位情報は、キャラクタオブジェクトの「頭部後方左側」と「頭部後方右側」の2つの部位と関連付けられてもよい。つまり、「カチューシャ」を示す装着オブジェクトは、「頭部後方左側」及び「頭部後方右側」の両方に装着されてもよい。装着オブジェクトがTシャツである場合には、当該装着オブジェクトの装着部位情報は、当該装着オブジェクトがキャラクタオブジェクトの「胴部」に装着されることを示してもよい。 Wearable objects are, for example, accessories (headbands, necklaces, earrings, etc.), clothes (T-shirts, etc.), costumes, and other objects that can be worn on character objects. The object data 63b corresponding to the wearable object may include wearable part information indicating which part of the character object the wearable object is associated with. Mounting part information of a certain mountable object can indicate on which part of the character object the mountable object is to be mounted. For example, when the wearable object is a headband, the wearable part information of the wearable object may indicate that the wearable object is worn on the "head" of the character object. When the mounting site information on which the mounting object is mounted is specified as a position in the three-dimensional coordinate space, the mounting site information may be associated with a plurality of positions in the three-dimensional coordinate space. For example, wearing part information indicating a position where a wearable object representing a "headband" is worn may be associated with two parts of the character object, namely, "rear left side of head" and "rear right side of head". In other words, the wearable object representing the "headband" may be worn on both the "left rear side of the head" and the "right rear side of the head". When the wearable object is a T-shirt, the wearable part information of the wearable object may indicate that the wearable object is worn on the "torso" of the character object.

装着部位が共通する2種類の装着オブジェクトは、時間を隔てて動画に表示される。すなわち、装着部位が共通する2種類の装着オブジェクトは、時間を隔ててキャラクタオブジェクトに装着される。言い換えると、装着部位が共通する2種類の装着オブジェクトは、キャラクタオブジェクトに同時には装着されない。例えば、カチューシャを示す装着オブジェクト及び帽子を示す装着オブジェクトに関し、装着部位としていずれも「頭部」が設定されている場合、カチューシャを示す装着オブジェクトと帽子を示す装着オブジェクトとは同時には表示されない。 Two types of wearable objects having a common wearing part are displayed in the moving image at intervals of time. In other words, two types of wearable objects having the same wearing part are worn on the character object with a time interval between them. In other words, two types of wearable objects that share the same wearable part are not worn on the character object at the same time. For example, with regard to the wearing object representing the headband and the wearing object representing the hat, if "head" is set as the wearing part for both of them, the wearing object representing the headband and the wearing object representing the hat are not displayed at the same time.

ギフトオブジェクトの各々には、その種類に応じた表示時間が設定されていてもよい。一態様において、装着オブジェクトの表示時間は、エフェクトオブジェクトの表示時間及び通常オブジェクトの表示時間よりも長く設定されていてもよい。例えば、装着オブジェクトの表示時間は60秒間に設定され、エフェクトオブジェクトの表示時間は5秒間に設定され、通常オブジェクトの表示時間は10秒間に設定されてもよい。 A display time corresponding to the type of gift object may be set for each gift object. In one aspect, the display time of the wearable object may be set longer than the display time of the effect object and the display time of the normal object. For example, the display time of the wearable object may be set to 60 seconds, the display time of the effect object may be set to 5 seconds, and the display time of the normal object may be set to 10 seconds.

次に、コンピュータプロセッサ21a,21bにより実現される機能についてより具体的に説明する。コンピュータプロセッサ21aは、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部211aとして機能する。同様に、コンピュータプロセッサ21bは、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部211bとして機能する。コンピュータプロセッサ21a,21bにより実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ21a,21b以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ21a,21bにより実現される機能の少なくとも一部は、例えば、サーバ装置60に搭載されているコンピュータプロセッサ61により実現されてもよい。 Next, functions realized by the computer processors 21a and 21b will be described more specifically. The computer processor 21a functions as a face motion data generator 211a by executing computer-readable instructions included in the distribution program. Similarly, the computer processor 21b functions as a face motion data generator 211b by executing computer-readable instructions included in the distribution program. At least part of the functions implemented by the computer processors 21 a and 21 b may be implemented by computer processors other than the computer processors 21 a and 21 b of the video distribution system 1 . At least part of the functions implemented by the computer processors 21a and 21b may be implemented by the computer processor 61 installed in the server device 60, for example.

フェイスモーションデータ生成部211aは、カメラ24aの撮像データに基づいて、配信ユーザUaの顔の動きのデジタル表現であるフェイスモーションデータを生成する。同様に、フェイスモーションデータ生成部211bは、カメラ24bの撮像データに基づいて、配信ユーザUbの顔の動きのデジタル表現であるフェイスモーションデータを生成する。フェイスモーションデータは、時間の経過に伴って随時生成される。フェイスモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、フェイスモーションデータ生成部211aにて生成されるフェイスモーションデータは、配信ユーザUaの顔の動き(表情の変化)を時系列的にデジタル表現することができ、フェイスモーションデータ生成部211bにて生成されるフェイスモーションデータは、配信ユーザUbの顔の動き(表情の変化)を時系列的にデジタル表現することができる。フェイスモーションデータ生成部211a,211bにて生成されたフェイスモーションデータは、通信I/F22a,22bを介してサーバ装置60に送信される。 The face motion data generation unit 211a generates face motion data, which is a digital representation of the movement of the face of the distribution user Ua, based on the imaging data of the camera 24a. Similarly, the face motion data generation unit 211b generates face motion data, which is a digital representation of the movement of the distribution user Ub's face, based on the imaging data of the camera 24b. Face motion data is generated as needed over time. Face motion data may be generated at predetermined sampling time intervals. In this way, the face motion data generated by the face motion data generation unit 211a can digitally represent the facial movements (changes in facial expression) of the distribution user Ua in time series. The face motion data generated in can digitally represent the facial movements (changes in facial expression) of the distribution user Ub in time series. The face motion data generated by the face motion data generators 211a and 211b are transmitted to the server device 60 via the communication I/Fs 22a and 22b.

配信ユーザ装置20においては、フェイスモーションデータ生成部211aにて生成されるフェイスモーションデータに加えて、配信ユーザUa,Ubの体の顔以外の各部位の位置及び向きのデジタル表現であるボディモーションデータを生成してもよい。配信ユーザ装置20は、フェイスモーションデータに加えて、ボディモーションデータをサーバ装置60に送信してもよい。ボディモーションデータを生成するために、配信ユーザUa,Ubは、モーションセンサを装着してもよい。配信ユーザ装置20は、配信ユーザUa,Ubに装着されたモーションセンサの検出情報に基づいて、ボディモーションデータを生成することができるように構成されてもよい。ボディモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、ボディモーションデータは、配信ユーザUa,Ubの体の動きを時系列的にデジタルデータとして表現する。配信ユーザUa,Ubに装着されたモーションセンサの検出情報に基づくボディモーションデータの生成は、例えば、撮影スタジオで行われてもよい。撮影スタジオには、ベースステーションと、トラッキングセンサと、ディスプレイと、が備えられてもよい。ベースステーションは、多軸レーザーエミッターであってもよい。配信ユーザUa,Ubに装着されるモーションセンサは、例えば、HTC CORPORATIONから提供されているVive Trackerであってもよい。撮影スタジオに備えられるベースステーションは、例えば、HTC CORPORATIONから提供されているベースステーションであってもよい。また、撮影スタジオと別室には、サポーターコンピュータが設置されていてもよい。撮影スタジオのディスプレイは、サポートコンピュータから受信した情報を表示するように構成されてもよい。サーバ装置60は、サポーターコンピュータが設置されている部屋と同じ部屋に設置されてもよい。サポーターコンピュータが設置されている部屋と撮影スタジオとはガラス窓によって隔てられていてもよい。この場合、サポーターコンピュータのオペレータ(本明細書では「サポーター」ということがある。)は、配信ユーザUa,Ubを視認できる。サポーターコンピュータは、サポーターの操作に応じて、撮影スタジオに備えられた各種装置の設定を変更することができるように構成されてもよい。サポーターコンピュータは、例えば、ベースステーションによる走査インターバルの設定、トラッキングセンサの設定、及びこれら以外の各種機器の各種設定の変更を行うことができる。サポーターは、サポーターコンピュータにメッセージを入力し、当該入力されたメッセージを撮影スタジオのディスプレイに表示することができる。 In the distribution user device 20, in addition to the face motion data generated by the face motion data generation unit 211a, body motion data that is a digital representation of the position and orientation of each part of the body of the distribution users Ua and Ub other than the face. may be generated. The distribution user device 20 may transmit body motion data to the server device 60 in addition to face motion data. To generate body motion data, broadcast users Ua and Ub may wear motion sensors. The broadcast user device 20 may be configured to be able to generate body motion data based on detection information from motion sensors attached to broadcast users Ua and Ub. Body motion data may be generated at predetermined sampling time intervals. In this way, the body motion data represents the body motions of distribution users Ua and Ub in time series as digital data. The generation of body motion data based on the detection information of the motion sensors worn by distribution users Ua and Ub may be performed, for example, in a photography studio. A photography studio may be equipped with a base station, a tracking sensor, and a display. The base station may be a multi-axis laser emitter. The motion sensors worn by broadcast users Ua and Ub may be, for example, Vive Trackers provided by HTC CORPORATION. The base station provided in the photography studio may be, for example, a base station provided by HTC CORPORATION. Also, a supporter computer may be installed in the photography studio and the separate room. A display in the photography studio may be configured to display information received from the support computer. The server device 60 may be installed in the same room as the room where the supporter computer is installed. The room in which the supporter computer is installed and the photography studio may be separated by a glass window. In this case, the operator of the supporter computer (also referred to as "supporter" in this specification) can visually recognize the distribution users Ua and Ub. The supporter computer may be configured to be able to change the settings of various devices provided in the photography studio according to the operation of the supporter. The supporter computer can, for example, set the scanning interval by the base station, set the tracking sensor, and change various settings of various devices other than these. A supporter can input a message to the supporter computer and display the input message on the display of the photography studio.

配信ユーザ装置20は、配信プログラム及び/又はそれ以外のプログラムをコンピュータプロセッサで実行することにより、フェイスモーションデータ生成部211a以外の機能を実現してもよい。例えば、配信ユーザ装置20は、動画視聴用の視聴プログラムを実行することにより受信した動画を再生する機能を実現してもよい。配信プログラムと視聴プログラムとは、一つのアプリケーションソフトウェアにパッケージングされていてもよいし、別個のアプリケーションソフトウェアとして提供されてもよい。 The distribution user device 20 may implement functions other than the face motion data generation unit 211a by executing a distribution program and/or other programs on a computer processor. For example, the distribution user device 20 may implement a function of playing back the received moving image by executing a viewing program for viewing moving images. The distribution program and viewing program may be packaged in one piece of application software, or may be provided as separate application software.

視聴ユーザ装置10は、配信ユーザ装置20と同様の機能を提供するように構成されてもよい。例えば、視聴ユーザ装置10は、動画視聴用の視聴プログラムを実行することにより受信した動画を再生する機能を実現してもよく、配信プログラムを実行することによりフェイスモーションデータ生成部211aの機能と同様の機能を実現してもよい The viewing user equipment 10 may be configured to provide similar functionality as the broadcasting user equipment 20 . For example, the viewing user device 10 may realize the function of playing back the received moving image by executing a viewing program for viewing a moving image, and by executing the distribution program, the function of the face motion data generation unit 211a is similar to that of the face motion data generation unit 211a. may implement the function of

次に、コンピュータプロセッサ61により実現される機能についてより具体的に説明する。コンピュータプロセッサ61は、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、アニメーション生成部61a、動画生成部61b、動画配信部61c、ギフト要求処理部61d、ギフト購入処理部61e、及び共演申請処理部61fとして機能する。 Next, functions realized by the computer processor 61 will be described more specifically. By executing computer-readable instructions included in the distribution program, the computer processor 61 generates an animation generation unit 61a, a video generation unit 61b, a video distribution unit 61c, a gift request processing unit 61d, a gift purchase processing unit 61e, and a co-production unit 61e. It functions as the application processing unit 61f.

アニメーション生成部61aは、配信ユーザ装置20のフェイスモーションデータ生成部211aによって生成されたフェイスモーションデータを、モデルデータ63aに含まれる所定のモデルデータに適用することにより、キャラクタオブジェクトのアニメーションを生成するように構成される。アニメーション生成部61aは、キャラクタオブジェクトの表情が当該フェイスモーションデータに基づいて変化するように、当該キャラクタオブジェクトのアニメーションを生成することができる。具体的には、アニメーション生成部61aは、配信ユーザUaに関するフェイスモーションデータに基づいて、配信ユーザUaの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。同様に、アニメーション生成部61aは、配信ユーザUbに関するフェイスモーションデータに基づいて、配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。 The animation generation unit 61a applies the face motion data generated by the face motion data generation unit 211a of the distribution user device 20 to predetermined model data included in the model data 63a to generate animation of the character object. configured to The animation generator 61a can generate animation of the character object such that the expression of the character object changes based on the face motion data. Specifically, the animation generation unit 61a can generate an animation of a character object that moves in synchronization with the movement of the facial expression of the distribution user Ua, based on the face motion data regarding the distribution user Ua. Similarly, the animation generation unit 61a can generate an animation of a character object that moves in synchronization with the movement of the facial expression of the distribution user Ub, based on the face motion data regarding the distribution user Ub.

配信ユーザ装置20から配信ユーザUa,Ubに関するボディモーションデータが提供される場合には、アニメーション生成部61aは、配信ユーザUa,Ubに関するボディモーションデータ及びフェイスモーションデータに基づいて、配信ユーザUa,Ubの体及び表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。 When the body motion data regarding the distribution users Ua and Ub is provided from the distribution user device 20, the animation generation unit 61a generates the body motion data for the distribution users Ua and Ub based on the body motion data and the face motion data regarding the distribution users Ua and Ub. It is possible to generate an animation of a character object that moves in synchronization with the movement of the body and facial expression of the character.

動画生成部61bは、配信ユーザUaの動画を配信する場合には、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザUaに対応するキャラクタオブジェクトのアニメーションと、を含む動画を生成することができる。動画生成部61bは、生成した動画に、配信ユーザ装置20aから受信した音声データに基づいて生成される配信ユーザUaの音声を合成することができる。同様に、動画生成部61bは、配信ユーザUbの動画を配信する場合には、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザUbに対応するキャラクタオブジェクトのアニメーションと、を含む動画を生成することができる。動画生成部61bは、生成した動画に、配信ユーザ装置20bから受信した音声データに基づいて生成される配信ユーザUbの音声を合成することができる。動画生成部61bによって生成される動画において、配信ユーザUa,Ubに対応するキャラクタオブジェクトは、背景画像に重畳して表示される。以上のようにして、動画生成部61bは、配信ユーザUa又は配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成し、このアニメーションに配信ユーザUa又は配信ユーザUbの音声が合成された配信用の動画を生成することができる。配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクトを両方とも含む共演動画については後述する。 When distributing the moving image of the distribution user Ua, the moving image generation unit 61b generates a background image showing the background using the object data 63b, and the background image, the animation of the character object corresponding to the distribution user Ua, You can generate a video containing The moving picture generation unit 61b can synthesize the generated moving picture with the voice of the distribution user Ua generated based on the voice data received from the distribution user device 20a. Similarly, when distributing a moving image of distribution user Ub, the moving image generation unit 61b generates a background image showing a background using the object data 63b, and creates a background image and a character object corresponding to the distribution user Ub. You can generate videos that include animations and The moving image generation unit 61b can synthesize the generated moving image with the voice of the distribution user Ub generated based on the audio data received from the distribution user device 20b. In the moving image generated by the moving image generation unit 61b, the character objects corresponding to the distribution users Ua and Ub are displayed superimposed on the background image. As described above, the moving image generation unit 61b generates an animation of a character object that moves in synchronization with the movement of the facial expression of the distribution user Ua or Ub, and synthesizes the voice of the distribution user Ua or Ub with this animation. It is possible to generate a video for distribution that has been done. A co-star moving image including both the character object of distribution user Ua and the character object of distribution user Ub will be described later.

動画配信部61cは、動画生成部61bにおいて生成された動画を配信する。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置に配信される。生成された動画は、配信ユーザ装置20a,20bにも配信される。受信された動画は、視聴ユーザ装置10及び配信ユーザ装置20a,20bにおいて再生される。 The moving image distribution unit 61c distributes the moving image generated by the moving image generation unit 61b. This moving image is distributed to the viewing user device 10 and other viewing user devices via the network 50 . The generated moving image is also distributed to the distribution user devices 20a and 20b. The received moving images are reproduced on the viewing user device 10 and the distribution user devices 20a and 20b.

動画配信部61cから配信された動画の表示例を図3及び図4a~図4bに示す。これらの図では、配信ユーザUbが配信ユーザ装置20bを用いて、自らのキャラクタオブジェクトを含む動画を配信し、当該動画が視聴ユーザ装置10及び配信ユーザ装置20a,20bにおいて再生されていると想定している。図4aにおいては、配信ユーザUaは、動画配信を行っておらず、別の配信ユーザである配信ユーザUbによって配信されている動画を視聴していると想定している。後述する図6、図7a、及び図7bについても同様の想定を行う。このため、図3、図4a~図4b、図6、及び図7a~図7bに関する説明においては、配信ユーザUaのことも視聴ユーザと呼ぶことがある。図3は、視聴ユーザ装置10において再生されている動画の表示例を示し、図4aは、配信ユーザ装置20aにおいて再生されている動画の表示例を示し、図4bは、配信ユーザ装置20bにおいて再生されている動画の表示例を示す。 Display examples of moving images distributed from the moving image distribution unit 61c are shown in FIGS. 3 and 4a to 4b. In these figures, it is assumed that distribution user Ub uses distribution user device 20b to distribute a moving image including his own character object, and that the moving image is reproduced on viewing user device 10 and distribution user devices 20a and 20b. ing. In FIG. 4a, it is assumed that distribution user Ua is not performing video distribution, and is viewing a video distributed by distribution user Ub, who is another distribution user. Similar assumptions are made for FIGS. 6, 7a, and 7b, which will be described later. Therefore, in the explanations of FIGS. 3, 4a to 4b, 6, and 7a to 7b, the distribution user Ua may also be referred to as a viewing user. 3 shows a display example of a moving image being reproduced on the viewing user device 10, FIG. 4a shows a display example of a moving image being reproduced on the distribution user device 20a, and FIG. 4b is a display example of the moving image being reproduced on the distribution user device 20b A display example of a moving image is shown.

図3に示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置60から配信された動画の表示画像30が表示される。この視聴ユーザ装置10に表示されている表示画像30には、アニメーション生成部61aにより生成された配信ユーザUbのキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。 As shown in FIG. 3 , the display of the viewing user device 10 displays the display image 30 of the moving image distributed from the server device 60 . The display image 30 displayed on the viewing user device 10 includes a character object 31 of the distribution user Ub generated by the animation generation unit 61a, a gift button 32, an evaluation button 33, a comment button 34, and a comment display. area 35 and .

図4aに示されているように、配信ユーザ装置20aのディスプレイには、サーバ装置60から配信された動画の表示画像130が表示される。この表示画像130には、表示画像30と同様に、配信ユーザUbのキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。これに加えて、表示画像130には、配信ユーザUbが配信している動画において配信ユーザUbとの共演を申請するための共演申請ボタン36が含まれる。配信ユーザ装置20aは、例えば、視聴プログラムを含むアプリケーションソフトウェアを実行することにより、配信された動画の表示画像130を表示することができる。 As shown in FIG. 4a, the display image 130 of the moving image distributed from the server device 60 is displayed on the display of the distribution user device 20a. Similar to the display image 30, the display image 130 includes a character object 31 of the distribution user Ub, a gift button 32, an evaluation button 33, a comment button 34, and a comment display area 35. In addition, the display image 130 includes a co-starring application button 36 for applying for co-starring with the distributor Ub in the video distributed by the distributor Ub. The distribution user device 20a can display the display image 130 of the distributed moving image, for example, by executing application software including a viewing program.

図3に示されているように、一実施形態において、視聴ユーザ装置10の表示画像30には共演申請ボタン36が含まれない。例えば、視聴ユーザ装置10に配信プログラムを含むアプリケーションソフトウェアがダウンロードもしくはインストールされていない場合、及びは、視聴ユーザ装置10において配信プログラムを含むアプリケーションソフトウェアが起動されていない場合に、共演申請ボタン36が含まれないように視聴ユーザ装置10の表示画像30が生成される。他の実施形態では、視聴ユーザ装置10の表示画像30にも共演申請ボタン36を表示してもよい。例えば、視聴ユーザ装置10に配信プログラムを含むアプリケーションソフトウェアがダウンロードもしくはインストールされている場合、または、視聴ユーザ装置10において配信プログラムを含むアプリケーションソフトウェアが起動されている場合に、共演申請ボタン36が含まれるように視聴ユーザ装置10の表示画像30が生成される。 As shown in FIG. 3, in one embodiment, display image 30 of viewing user device 10 does not include co-starring request button 36 . For example, when the application software including the distribution program is not downloaded or installed in the viewing user device 10, or when the application software including the distribution program is not activated in the viewing user device 10, the co-starring application button 36 is included. The display image 30 of the viewing user device 10 is generated so that it is not displayed. In another embodiment, the co-star application button 36 may also be displayed on the display image 30 of the viewing user device 10 . For example, the co-star application button 36 is included when application software including the distribution program is downloaded or installed in the viewing user device 10, or when application software including the distribution program is activated in the viewing user device 10. The display image 30 of the viewing user device 10 is generated as follows.

キャラクタオブジェクト31は、上記のように、配信ユーザUbのフェイスモーションデータをモデルデータ63aに含まれているモデルデータに適用することにより生成されているため、配信ユーザUbの表情の動きに同期してその表情が変化する。配信ユーザ装置20からボディモーションデータが提供される場合には、キャラクタオブジェクト31は、その顔以外の部位も、配信ユーザUbの体の動きに同期して変化するように制御され得る。 As described above, the character object 31 is generated by applying the face motion data of the distribution user Ub to the model data included in the model data 63a. Its expression changes. When body motion data is provided from the distribution user device 20, the character object 31 can be controlled so that parts other than the face also change in synchronization with the movement of the body of the distribution user Ub.

ギフトボタン32は、視聴ユーザ装置10への操作によって選択可能に表示画面30に表示されている。ギフトボタン32は、例えば、視聴ユーザ装置10のタッチパネルのうちギフトボタン32が表示されている領域へのタップ操作により選択され得る。一実施形態において、ギフトボタン32が選択されると、表示画面30に、視聴中の動画を配信している配信ユーザ(ここでは、配信ユーザUbである。)にギフティングするギフトを選択するためのウィンドウが表示される。当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを購入することができる。他の実施形態においては、ギフトボタン32が選択されたことに応じて、表示画面30に、購入済みのギフトの一覧を含むウィンドウが表示される。この場合、当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを選択することができる。ギフティング又は購入可能なギフトには、エフェクトギフト、通常ギフト、装着ギフト、及びこれら以外のギフトが含まれ得る。 The gift button 32 is displayed on the display screen 30 so as to be selectable by operating the viewing user device 10 . The gift button 32 can be selected, for example, by tapping an area of the touch panel of the viewing user device 10 where the gift button 32 is displayed. In one embodiment, when the gift button 32 is selected, the display screen 30 displays a message for selecting a gift to be gifted to the distribution user (distribution user Ub in this case) who is distributing the video being viewed. window is displayed. The viewing user can purchase a gift to be gifted from among the gifts displayed in the window. In another embodiment, a window containing a list of purchased gifts is displayed on display screen 30 in response to selection of gift button 32 . In this case, the viewing user can select a gift to be gifted from the gifts displayed in the window. Gifting or purchasable gifts may include effect gifts, regular gifts, wearing gifts, and other gifts.

評価ボタン33は、視聴ユーザ装置10を使用する視聴ユーザによって選択可能に表示画面30に表示されている。評価ボタン33は、例えば、視聴ユーザ装置10のタッチパネルのうち評価ボタン33が表示されている領域へのタップ操作により選択され得る。動画を視聴中の視聴ユーザによって評価ボタン33が選択されると、当該動画への肯定的な評価がなされたことを示す評価情報がサーバ装置60に送信されてもよい。サーバ装置60は、視聴ユーザ装置10及びこれ以外の視聴ユーザ装置からの評価情報を集計することができる。評価ボタン33の選択により、当該動画への否定的な評価がなされたことを示す評価情報がサーバ装置60に送信されてもよい。動画への肯定的な評価を示す評価情報をポジティブ評価情報と呼び、動画への否定的な評価がなされたことを示す評価情報をネガティブ評価情報と呼んでもよい。 The evaluation button 33 is displayed on the display screen 30 so as to be selectable by the viewing user using the viewing user device 10 . The evaluation button 33 can be selected, for example, by tapping an area of the touch panel of the viewing user device 10 where the evaluation button 33 is displayed. When the evaluation button 33 is selected by the viewing user who is viewing the moving image, evaluation information indicating that the moving image has been positively evaluated may be transmitted to the server device 60 . The server device 60 can aggregate evaluation information from the viewing user device 10 and other viewing user devices. Selection of the evaluation button 33 may transmit evaluation information indicating that the moving image has been negatively evaluated to the server device 60 . Evaluation information indicating a positive evaluation of a moving image may be referred to as positive evaluation information, and evaluation information indicating that a moving image has been negatively evaluated may be referred to as negative evaluation information.

コメントボタン34は、ユーザによって選択可能に表示画面30に表示される。コメントボタン34が例えばタップ操作により選択されると、コメントを入力するためのコメント入力ウィンドウが表示画面30に表示される。視聴ユーザは、視聴ユーザ装置10又は配信ユーザ装置20aの入力機構を介してコメントを入力することができる。入力されたコメントは、視聴ユーザ装置10及び配信ユーザ装置20aからサーバ装置60に送信される。サーバ装置60は、視聴ユーザ装置10、配信ユーザ装置20a、及びこれら以外のユーザ装置からのコメントを受け付け、当該コメントを表示画像30内のコメント表示領域35に表示する。コメント表示領域35には、各ユーザから投稿されたコメントが、例えば時系列に表示される。コメント表示領域35は、表示画面30の一部の領域を占める。コメント表示領域35に表示可能なコメント数には上限がある。図示の例では、コメント表示領域35には3つまでコメントが表示され得る。コメント表示領域35に設定されている上限を超えたコメントの投稿がなされた場合には、投稿時間が古いコメントから順にコメント表示領域35から削除される。このため、受け付けるコメントの頻度が高くなるほどコメント領域35における各コメントの表示時間は短くなる。 A comment button 34 is displayed on the display screen 30 so as to be selectable by the user. When the comment button 34 is selected by tapping, for example, a comment input window for inputting a comment is displayed on the display screen 30 . The viewing user can input comments via the input mechanism of the viewing user device 10 or the broadcasting user device 20a. The input comment is transmitted to the server device 60 from the viewing user device 10 and the distribution user device 20a. The server device 60 receives comments from the viewing user device 10 , the distribution user device 20 a , and other user devices, and displays the comments in the comment display area 35 within the display image 30 . In the comment display area 35, comments posted by each user are displayed, for example, in chronological order. The comment display area 35 occupies part of the display screen 30 . The number of comments that can be displayed in the comment display area 35 has an upper limit. In the illustrated example, up to three comments can be displayed in the comment display area 35 . When comments exceeding the upper limit set in the comment display area 35 are posted, the comments are deleted from the comment display area 35 in order of posting time. Therefore, the display time of each comment in the comment area 35 becomes shorter as the frequency of received comments increases.

図4bに示されているように、配信ユーザ装置20bのディスプレイには、サーバ装置60から配信された動画の表示画像40が表示される。この配信ユーザ装置20bに表示される表示画像40には、配信ユーザUbに対応するキャラクタオブジェクト31と、視聴ユーザによって表示要求がなされた装着ギフトを表示するための表示指示ボタン42a~42cと、コメント表示領域35と、が含まれている。配信ユーザ装置20bに表示される表示画像40には、表示画像30及び表示画像130と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像40は、ギフトボタン32、評価ボタン33、コメントボタン34、及び共演申請ボタン36を含んでおらず、表示指示ボタン42a~42cを含んでいる点で表示画像30及び表示画像130と異なっている。 As shown in FIG. 4b, the display image 40 of the moving image distributed from the server device 60 is displayed on the display of the distribution user device 20b. The display image 40 displayed on the distribution user device 20b includes a character object 31 corresponding to the distribution user Ub, display instruction buttons 42a to 42c for displaying the attached gift requested by the viewing user, and a comment. A display area 35 is included. The display image 40 displayed on the distribution user device 20b includes the same background image, character object image, and comment as the display images 30 and 130. FIG. On the other hand, the display image 40 does not include the gift button 32, the evaluation button 33, the comment button 34, and the co-star application button 36, but includes the display instruction buttons 42a to 42c. different.

表示指示ボタン42a~42cは、視聴ユーザから後述する装着ギフトを表示するための表示要求を受け付けたことに応じて表示画面40に表示される。図示の実施形態においては、表示画像40に3つの表示指示ボタン42a~42cが表示されている。表示指示ボタン42a~42cの各々は、配信ユーザによって選択可能に表示画面40に表示される。表示指示ボタン42a~42cのいずれかが例えばタップ操作により選択されると、この選択された表示指示ボタンに対応する装着ギフトを表示するための操作が行われる。このように、表示指示ボタン42a~42cは、装着ギフトを配信中の動画に表示させる指示を行うための表示指示オブジェクトである。このため、本明細書においては、表示指示ボタン42a~42cを表示指示オブジェクト42a~42cと呼ぶことがある。また、表示指示オブジェクト42a~42cを互いに区別する必要がない場合には、単に表示指示オブジェクト42と呼ぶことがある。装着ギフトの表示の具体例については後述する。表示画面40は、上記のサポーターコンピュータに表示されてもよい。表示指示オブジェクト42a~42cは、サポーターによる当該サポーターコンピュータの操作に応じて選択されてもよい。 The display instruction buttons 42a to 42c are displayed on the display screen 40 in response to receiving a display request from the viewing user for displaying the attached gift, which will be described later. In the illustrated embodiment, the display image 40 displays three display instruction buttons 42a-42c. Each of the display instruction buttons 42a to 42c is displayed on the display screen 40 so as to be selectable by the distribution user. When one of the display instruction buttons 42a to 42c is selected by tapping, for example, an operation is performed to display the attached gift corresponding to the selected display instruction button. As described above, the display instruction buttons 42a to 42c are display instruction objects for instructing display of the attached gift in the moving image being distributed. Therefore, in this specification, the display instruction buttons 42a to 42c are sometimes referred to as display instruction objects 42a to 42c. In addition, the display instruction objects 42a to 42c may be simply referred to as the display instruction object 42 when it is not necessary to distinguish them from each other. A specific example of display of the attached gift will be described later. The display screen 40 may be displayed on the supporter computer described above. The display instruction objects 42a to 42c may be selected according to the operation of the supporter's computer by the supporter.

装着ギフトの表示を要求する表示要求が受け付けられるたびに、当該表示要求に対応する表示指示オブジェクト42が表示画面40に追加される。表示画面40に表示可能な表示指示オブジェクト42の数には上限がある。図示の実施形態では、表示画面40に表示可能な表示指示オブジェクト42の上限数は3である。この場合、表示画面40には、表示指示オブジェクトを3つ表示できる表示領域を有している。装着ギフトの表示要求を4以上受け付けた場合には、4番目以降の表示要求に対応する表示指示オブジェクト42は表示画面40には表示されない。4番目に受け付けられた装着ギフトの表示要求に対応する表示指示オブジェクト42は、既に表示されている3つの表示指示オブジェクト42のうちのいずれかが選択されて、表示領域に空きができた場合に表示画面40に表示される。 A display instruction object 42 corresponding to the display request is added to the display screen 40 each time a display request requesting display of an attached gift is received. There is an upper limit to the number of display instruction objects 42 that can be displayed on the display screen 40 . In the illustrated embodiment, the maximum number of display instruction objects 42 that can be displayed on the display screen 40 is three. In this case, the display screen 40 has a display area capable of displaying three display instruction objects. When four or more display requests for the attached gift are received, the display instruction objects 42 corresponding to the fourth and subsequent display requests are not displayed on the display screen 40 . The display instruction object 42 corresponding to the display request for the attached gift received fourth is displayed when one of the three display instruction objects 42 already displayed is selected and an empty space is created in the display area. It is displayed on the display screen 40 .

ギフト要求処理部61dは、視聴ユーザからギフトの表示要求を受け付け、当該表示要求に応じたギフトオブジェクトを表示するための処理を行う。各視聴ユーザは、自らの視聴ユーザ装置を操作することにより、ギフトの表示要求をサーバ装置60に送信することができる。ギフトの表示要求には、視聴ユーザのユーザIDと、表示を要求するギフトを特定するギフト識別情報(ギフトID)及び/又は表示を要求するギフトに対応するギフトオブジェクトを特定するギフトオブジェクト識別情報(ギフトオブジェクトID)と、が含まれてもよい。 The gift request processing unit 61d receives a gift display request from the viewing user, and performs processing for displaying the gift object corresponding to the display request. Each viewing user can transmit a gift display request to the server device 60 by operating his own viewing user device. The gift display request includes the user ID of the viewing user, gift identification information (gift ID) identifying the gift requested to be displayed, and/or gift object identification information identifying the gift object corresponding to the gift requested to be displayed ( gift object ID) and may be included.

上述のように、ギフトを示すギフトオブジェクトには、エフェクトギフトに対応するエフェクトオブジェクトと、通常ギフトに対応する通常オブジェクトと、装着ギフトに対応する装着オブジェクトと、が含まれ得る。装着ギフトは、第1ギフトの例である。装着オブジェクトを第1ギフトオブジェクトと呼ぶことがある。装着ギフト(または装着オブジェクト)の表示を要求する表示要求は、第1表示要求の例である。エフェクトギフト及び通常ギフトは、第2ギフトの例である。エフェクトオブジェクト及び通常オブジェクトを総称して第2ギフトオブジェクトと呼ぶことがある。エフェクトギフト(もしくはエフェクトオブジェクト)または通常ギフト(もしくは通常オブジェクト)の表示を要求する表示要求は、第2表示要求の例である。 As described above, gift objects representing gifts can include effect objects corresponding to effect gifts, normal objects corresponding to normal gifts, and wearable objects corresponding to wearable gifts. A wearable gift is an example of a first gift. The wearing object may be called a first gift object. A display request requesting display of a wearable gift (or wearable object) is an example of a first display request. Effect gifts and normal gifts are examples of second gifts. Effect objects and normal objects are sometimes collectively referred to as second gift objects. A display request requesting display of an effect gift (or effect object) or a normal gift (or normal object) is an example of a second display request.

一態様において、ギフト要求処理部61dは、視聴ユーザから特定の通常ギフトの表示要求を受け付けると、当該表示要求に基づいて、表示が要求された通常ギフトを示す通常オブジェクトを動画に表示させるための処理を行う。例えば、バッグを示す通常ギフトの表示要求がなされた場合には、図5に示すように、ギフト要求処理部61dにより当該表示要求に基づいてバッグを示す通常オブジェクト37aが表示画像30に表示される。同様に、熊のぬいぐるみを示す通常ギフトの表示要求がなされた場合には、図5に示すように、ギフト要求処理部61dにより当該表示要求に基づいて熊のぬいぐるみを示す通常オブジェクト37bが表示画像30に表示される。図示を省略しているが、配信ユーザ装置20aにおける表示画像130及び配信ユーザ装置20bにおける表示画像40にも、表示画像30と同様に、通常オブジェクト37a,37bが表示される。 In one aspect, when the gift request processing unit 61d receives a display request for a specific normal gift from the viewing user, the gift request processing unit 61d performs processing for displaying a normal object representing the normal gift requested to be displayed in the moving image based on the display request. process. For example, when a display request for a normal gift representing a bag is made, the normal object 37a representing a bag is displayed on the display image 30 by the gift request processing unit 61d based on the display request, as shown in FIG. . Similarly, when a display request for a normal gift representing a stuffed bear is made, as shown in FIG. 30. Although not shown, the normal objects 37a and 37b are also displayed on the display image 130 on the distribution user device 20a and the display image 40 on the distribution user device 20b, similarly to the display image 30. FIG.

一態様において、ギフト要求処理部61dは、視聴ユーザから特定のエフェクトギフトの表示要求を受け付けると、当該表示要求に基づいて、表示が要求されたエフェクトギフトに対応するエフェクトオブジェクトを動画の表示画像に表示させるための処理を行う。例えば、紙吹雪や花火を示すエフェクトギフトの表示要求がなされた場合には、ギフト要求処理部61dは、図当該表示要求に基づいて紙吹雪や花火を示すエフェクトギフトに対応するエフェクトオブジェクト(不図示)が表示画像30、表示画像130、及び表示画像40に表示される。 In one aspect, when the gift request processing unit 61d receives a display request for a specific effect gift from the viewing user, the effect object corresponding to the effect gift requested to be displayed is displayed in the display image of the moving image based on the display request. Perform processing to display. For example, when a request is made to display an effect gift showing confetti or fireworks, the gift request processing unit 61d generates an effect object (not shown) corresponding to the effect gift showing confetti or fireworks based on the display request. ) is displayed in display image 30 , display image 130 , and display image 40 .

通常ギフトの表示要求には、当該通常ギフトを示す通常オブジェクトの表示位置を指定する表示位置指定パラメータが含まれてもよい。この場合、ギフト要求処理部61dは、表示位置指定パラメータによって指定された位置に通常オブジェクトを表示することができる。キャラクタオブジェクト31の表示位置及び表示範囲が定められている場合には、表示位置指定パラメータによって、当該キャラクタオブジェクト31に対する相対的な位置が通常オブジェクトの表示位置として指定され得る。 The normal gift display request may include a display position designation parameter that designates the display position of the normal object representing the normal gift. In this case, the gift request processing section 61d can display the normal object at the position designated by the display position designation parameter. When the display position and display range of the character object 31 are defined, a position relative to the character object 31 can be designated as the display position of the normal object by the display position designation parameter.

一態様において、通常オブジェクトは、動画の表示画像30内で移動するように表示されてもよい。例えば、通常オブジェクト37a,37bは、画面の上から下に向かって落下するように表示されてもよい。この場合、通常オブジェクト37a,37bは、落下開始から表示画像30の下端まで落下する間当該表示画像30内に表示され、表示画像30の下端に落下した後に当該表示画像30から消滅してもよい。通常オブジェクト37a,37bの画面内での移動方向は任意に設定され得る。例えば、通常オブジェクト37a,37bは、表示画像30において、左から右へ、右から左へ、左上から左下へ、またはこれら以外の方向に移動してもよい。通常オブジェクト37a,37bは、様々な軌道上を移動することができる。例えば、通常オブジェクト37a,37bは、直線軌道上、円軌道上、楕円軌道上、螺旋軌道上、またはこれら以外の軌道上を移動することができる。視聴ユーザは、通常オブジェクトの表示要求に、表示位置指定パラメータに加えてまたは表示位置指定パラメータに代えて、通常オブジェクト37a,37bの移動方向を指定する移動方向パラメータ及び通常オブジェクト37a,37bが移動する軌道を指定する軌道パラメータの少なくとも一方を含めることができる。一実施形態において、エフェクトオブジェクト及び通常オブジェクトのうち、仮想空間における大きさが基準となる大きさより小さいものは、キャラクタオブジェクト31に、その一部又は全部を重複させて表示してもよい。一実施形態において、エフェクトオブジェクト及び通常オブジェクトのうち、表示画像30における大きさが基準となる大きさより大きいものは、キャラクタオブジェクト31と重複しない位置に表示される。別の一実施形態において、エフェクトオブジェクト及び通常オブジェクトのうち、仮想空間における大きさが基準となる大きさより大きいものは、キャラクタオブジェクト31の後ろに表示されてもよい。通常オブジェクト37a,37bは、表示画像130及び表示画像40においても上記のように移動するように表示されてもよい。 In one aspect, the normal object may be displayed as moving within the animated display image 30 . For example, the normal objects 37a and 37b may be displayed so as to fall from the top to the bottom of the screen. In this case, the normal objects 37a and 37b may be displayed in the display image 30 from the start of falling to the lower end of the display image 30, and disappear from the display image 30 after falling to the lower end of the display image 30. . The moving direction of the normal objects 37a and 37b within the screen can be set arbitrarily. For example, the normal objects 37a, 37b may move in the displayed image 30 from left to right, from right to left, from top left to bottom left, or in other directions. The normal objects 37a, 37b can move on various trajectories. For example, the normal objects 37a, 37b can move on straight, circular, elliptical, spiral, or other trajectories. In response to the display request for the normal objects, the viewing user provides a movement direction parameter for designating the movement direction of the normal objects 37a and 37b in addition to the display position designation parameter or instead of the display position designation parameter, and the normal objects 37a and 37b move. At least one of the trajectory parameters specifying the trajectory may be included. In one embodiment, an effect object and a normal object whose size in the virtual space is smaller than the reference size may be displayed by partially or entirely overlapping the character object 31 . In one embodiment, an effect object and a normal object whose size in the display image 30 is larger than the reference size is displayed at a position that does not overlap with the character object 31 . In another embodiment, an effect object and a normal object whose size in the virtual space is larger than the reference size may be displayed behind the character object 31 . The normal objects 37a and 37b may also be displayed in the display image 130 and the display image 40 so as to move as described above.

一態様において、ギフト要求処理部61dは、視聴ユーザから特定の装着オブジェクトの表示要求を受け付けると、当該表示要求に基づいて、図4bに示すように、配信ユーザ装置20における表示画面40に表示指示オブジェクト42a~42cを表示する。この表示指示オブジェクト42a~42cの各々は、表示要求がなされた装着ギフトと対応付けられている。表示指示オブジェクト42a~42cのいずれかが選択されると、その選択された表示指示オブジェクトに対応付けられている装着ギフトが配信中の動画に表示される。例えば、表示指示オブジェクト42bに猫耳を模したカチューシャが対応付けられている場合に、表示指示オブジェクト42bが選択されると、ギフト要求処理部61dは、選択された表示指示オブジェクト42bに対応するカチューシャを示す装着オブジェクト38を配信中の動画に表示させる。カチューシャを示す装着オブジェクト38を含む動画の表示例が図6及び図7a~図7bに示されている。また、図7bに示されているように、選択された表示指示オブジェクト42bは、表示画面40から削除される。 In one aspect, when the gift request processing unit 61d receives a display request for a specific wearable object from the viewing user, based on the display request, the gift request processing unit 61d instructs the display screen 40 of the distribution user device 20 to display the display as shown in FIG. 4B. Objects 42a-42c are displayed. Each of the display instruction objects 42a to 42c is associated with the attached gift requested to be displayed. When one of the display instruction objects 42a to 42c is selected, the attached gift associated with the selected display instruction object is displayed in the moving image being distributed. For example, when the display instruction object 42b is associated with a headband imitating cat ears and the display instruction object 42b is selected, the gift request processing unit 61d selects the headband corresponding to the selected display instruction object 42b. is displayed in the moving image being distributed. A display example of a moving image including a wearable object 38 showing a headband is shown in FIGS. 6 and 7a-7b. Also, the selected display instruction object 42b is deleted from the display screen 40, as shown in FIG. 7b.

装着オブジェクトは、キャラクタオブジェクトの特定の部位(装着部位)と関連付けて動画内に表示される。例えば、装着オブジェクトは、キャラクタオブジェクトの当該装着部位に接するように動画内に表示されてもよい。装着オブジェクト38は、キャラクタオブジェクトの当該装着部位に装着されるように動画内に表示されてもよい。一実施形態において、カチューシャを示す装着オブジェクト38は、キャラクタオブジェクトの頭部と対応付けられている。このため、図6及び図7a~図7bに示されている表示例では、装着オブジェクト38がキャラクタオブジェクト31の頭部に装着されている。装着オブジェクトは、キャラクタオブジェクトの当該装着部位の動きに付随して動くように動画の表示画面内に表示されてもよい。例えば、カチューシャを示す装着オブジェクト38を装着したキャラクタオブジェクト31の頭部が動くと、あたかもカチューシャがキャラクタオブジェクト31の頭部に装着されているかのごとく、カチューシャを示す装着オブジェクト38もキャラクタオブジェクト31の頭部に付随して動く。 The wearable object is displayed in the moving image in association with a specific part (wearing part) of the character object. For example, the wearable object may be displayed in the moving image so as to be in contact with the wearable part of the character object. The wearable object 38 may be displayed in the moving image so as to be worn on the corresponding wearable part of the character object. In one embodiment, the wearable object 38 representing a headband is associated with the character object's head. Therefore, in the display examples shown in FIGS. 6 and 7a to 7b, the wearable object 38 is worn on the head of the character object 31. FIG. The wearable object may be displayed in the moving image display screen so as to move along with the movement of the wearable part of the character object. For example, when the head of the character object 31 wearing the wearable object 38 representing the headband moves, the wearable object 38 representing the headband also moves to the head of the character object 31 as if the headband was worn on the head of the character object 31 . Move along with the department.

上述したように、オブジェクトデータ63bは、装着オブジェクトがキャラクタオブジェクトのどの部位に関連付けられるかを示す装着部位情報を含んでもよい。一態様において、ギフト要求処理部61dは、キャラクタオブジェクトに装着オブジェクトが装着されている場合には、当該装着オブジェクトの表示時間が経過するまでは、当該装着オブジェクトの装着部位情報が示す部位と同じ又は重複する部位に装着される他の装着オブジェクトの表示を禁止する。例えば、「頭部後方左側」及び「頭部後方右側」の両方に関連付けられたカチューシャと、「頭部後方左側」に関連付けられたヘアアクセサリとは、「頭部後方左側」が重複しているため、カチューシャが表示されている場合には、装着部位情報として「頭部後方左側」が設定されているヘアアクセサリの表示は禁止される。一方、「頭部後方左側」及び「頭部後方右側」に関連付けられたカチューシャと、「(頭部のうち)左耳」及び「(頭部のうち)右耳」に関連付けられたイヤリングは、キャラクタオブジェクトにおける装着部位が重複していないため、同時に装着することができる。 As described above, the object data 63b may include attachment site information indicating which part of the character object the attachment object is associated with. In one aspect, when the character object is equipped with the mountable object, the gift request processing unit 61d sets the display time of the mountable object until the display time of the mountable object elapses. Prohibits the display of other wearable objects that are worn on overlapping parts. For example, the headband associated with both the “rear left side of the head” and the “rear right side of the head” and the hair accessory associated with the “rear left side of the head” overlap the “rear left side of the head”. Therefore, when the headband is displayed, display of the hair accessory for which "rear left side of the head" is set as the wearing part information is prohibited. On the other hand, the headband associated with the "left side of the back of the head" and the "right side of the back of the head" and the earrings associated with the "left ear (of the head)" and "right ear (of the head)" are Since the parts to be worn in the character object do not overlap, they can be worn at the same time.

一実施形態においては、装着部位が同じ又は重複する複数の装着オブジェクトの表示を禁止するために、表示が禁止される装着オブジェクトを表示するための表示指示オブジェクト42がディアクティベートされてもよい。図4bに示されている実施形態において、表示指示オブジェクト42aは、装着部位情報として「頭部後方左側」が設定されたヘアアクセサリの表示を指示するためのオブジェクト(ボタン)であると想定する。この場合、このヘアアクセサリを示す装着オブジェクトは、キャラクタオブジェクト31がカチューシャを示す装着オブジェクト38を装着中であるため、装着オブジェクト38がキャラクタオブジェクト31に装着されている間は、動画への表示が禁止される。一実施形態においては、このヘアアクセサリを示す装着オブジェクトの動画への表示を禁止するために、当該ヘアアクセサリを示す装着オブジェクトに対応付けられている表示指示オブジェクト42aがディアクティベートされる。例えば、表示指示オブジェクト42aは、装着オブジェクト38がキャラクタオブジェクト31に装着されている間、操作されても選択不能とされる。別の実施形態において、装着オブジェクト38がキャラクタオブジェクト31に装着されている間、表示指示オブジェクト42aは、表示画面40から消去される。ディアクティベートされた表示指示オブジェクト42aは、カチューシャの表示時間が経過したことに応じて、再びアクティベートされる。表示指示オブジェクト42aを再びアクティベートするために、例えば、選択不能とされていた表示指示オブジェクト42aが再び選択可能とされてもよいし、非表示となっていた表示指示オブジェクト42aを再び表示画面40に表示させてもよい。 In one embodiment, the display instruction object 42 for displaying the mountable object whose display is prohibited may be deactivated in order to prohibit display of a plurality of mountable objects having the same or overlapping mounting sites. In the embodiment shown in FIG. 4B, it is assumed that the display instruction object 42a is an object (button) for instructing display of a hair accessory for which "rear left side of head" is set as attachment site information. In this case, since the character object 31 is wearing the wearable object 38 representing the headband, the wearable object representing the hair accessory is prohibited from being displayed in the moving image while the wearable object 38 is worn on the character object 31. be done. In one embodiment, the display instruction object 42a associated with the wearable object representing the hair accessory is deactivated in order to prohibit display of the wearable object representing the hair accessory in the moving image. For example, the display instruction object 42 a cannot be selected even if it is operated while the wearable object 38 is worn on the character object 31 . In another embodiment, the display instruction object 42 a is erased from the display screen 40 while the wearable object 38 is being worn by the character object 31 . The deactivated display instruction object 42a is activated again when the headband display time elapses. In order to reactivate the display instruction object 42a, for example, the display instruction object 42a that has been disabled may be made selectable again, or the display instruction object 42a that has been hidden may be displayed on the display screen 40 again. may be displayed.

一態様において、ギフト購入処理部61eは、動画の視聴ユーザからの要求に応じて、当該動画に関連して購入可能な複数のギフトオブジェクトの各々の購入情報を当該視聴ユーザの視聴ユーザ装置(例えば、視聴ユーザ装置10及び配信ユーザ装置20a)に送信する。各ギフトオブジェクトの購入情報には、当該ギフトオブジェクトの種類(エフェクトオブジェクト、通常オブジェクト、または装着オブジェクト)、当該ギフトオブジェクトの画像、当該ギフトオブジェクトの価格、及びこれら以外のギフトオブジェクトの購入に必要な情報が含まれ得る。視聴ユーザは、視聴ユーザ装置10又は配信ユーザ装置20aに表示されているギフトオブジェクトの購入情報に基づいて、購入するギフトオブジェクトを選択することができる。購入対象のギフトオブジェクトの選択は、視聴ユーザ装置10又は配信ユーザ装置20aの操作により行われてもよい。購入対象のギフトオブジェクトが視聴ユーザによって選択されると、当該ギフトオブジェクトの購入要求がサーバ装置60に送信される。ギフト購入処理部61eは、当該購入要求に基づいて、決済処理を行う。この決済処理が完了すると、当該購入されたギフトオブジェクトは、当該視聴ユーザによって保有される。ストレージ23に、ギフトを購入した視聴ユーザのユーザIDと対応づけて、購入されたギフトのギフトID(又は当該ギフトを示すギフトオブジェクトのギフトオブジェクトID)が記憶されてもよい。 In one aspect, the gift purchase processing unit 61e sends purchase information for each of a plurality of gift objects that can be purchased in relation to the moving image to the viewing user's device (for example, the , to the viewing user equipment 10 and the broadcasting user equipment 20a). The purchase information of each gift object includes the type of the gift object (effect object, normal object, or wearing object), the image of the gift object, the price of the gift object, and other information necessary for purchasing the gift object. can be included. The viewing user can select a gift object to purchase based on the gift object purchase information displayed on the viewing user device 10 or the distribution user device 20a. A gift object to be purchased may be selected by operating the viewing user device 10 or the broadcasting user device 20a. When the viewing user selects a gift object to be purchased, a purchase request for the gift object is transmitted to the server device 60 . The gift purchase processing unit 61e performs settlement processing based on the purchase request. When this payment processing is completed, the purchased gift object is owned by the viewing user. The storage 23 may store the gift ID of the purchased gift (or the gift object ID of the gift object indicating the gift) in association with the user ID of the viewing user who purchased the gift.

購入可能なギフトオブジェクトは、動画ごとに異なっていてもよい。購入可能なギフトオブジェクトは、複数の動画において購入可能であってもよい。つまり、購入可能なギフトオブジェクトには、各動画に固有の固有ギフトオブジェクトと、複数の動画において購入可能な共通ギフトオブジェクトと、が含まれてもよい。例えば、紙吹雪を示すエフェクトオブジェクトは、複数の動画において購入可能な共通ギフトオブジェクトであってもよい。 The purchasable gift object may differ from movie to movie. A purchasable gift object may be purchasable in multiple videos. That is, the purchasable gift objects may include unique gift objects specific to each animation and common gift objects purchasable in multiple animations. For example, an effect object showing confetti may be a common gift object that can be purchased in multiple videos.

一態様においては、所定の動画を視聴中にエフェクトオブジェクトを購入した場合、当該エフェクトオブジェクトを購入するための決済処理が完了したことに応じて、当該購入対象のエフェクトオブジェクトが当該視聴中の動画に自動的に表示されてもよい。所定の動画を視聴中に通常オブジェクトを購入した場合、上記と同様に、当該通常オブジェクトを購入するための決済処理が完了したことに応じて、当該購入対象の通常ギフトオブジェクトが当該視聴中の動画に自動的に表示されてもよい。 In one aspect, when an effect object is purchased while watching a predetermined video, the effect object to be purchased is added to the video being watched in response to completion of payment processing for purchasing the effect object. May be displayed automatically. If a normal object is purchased while watching a predetermined video, the normal gift object to be purchased will be transferred to the video being watched in response to the completion of the payment process for purchasing the normal object in the same manner as above. may be automatically displayed in

他の態様においては、購入対象のエフェクトオブジェクトについてギフト購入処理部61eにおける決済処理が完了したことに応じて、決済完了通知が視聴ユーザ装置10に送信され、当該視聴ユーザ装置10において、購入されたエフェクトオブジェクトの表示要求を行うか否かを視聴ユーザに確認するための確認画面が表示されてもよい。視聴ユーザが、当該購入されたエフェクトオブジェクトについて表示要求を行うことを選択した場合には、当該購入されたエフェクトオブジェクトの表示を要求する表示要求が、当該視聴ユーザのクライアント装置からギフト要求処理部61dに送信され、ギフト要求処理部61dにおいて、当該購入対象のエフェクトオブジェクトを動画70に表示させる処理が行われてもよい。購入対象が通常オブジェクトの場合にも、上記と同様に、購入された通常オブジェクトの表示要求を行うか否かを視聴ユーザに確認するための確認画面が視聴ユーザ装置10に表示されてもよい。 In another aspect, in response to the completion of the payment processing in the gift purchase processing unit 61e for the effect object to be purchased, a payment completion notification is transmitted to the viewing user device 10, and the viewing user device 10 receives the purchased effect object. A confirmation screen may be displayed for asking the viewing user whether or not to request the display of the effect object. When the viewing user selects to make a display request for the purchased effect object, a display request for displaying the purchased effect object is transmitted from the viewing user's client device to the gift request processing unit 61d. , and the gift request processing unit 61 d may perform processing for displaying the effect object to be purchased on the moving image 70 . When the purchase target is a normal object, similarly to the above, a confirmation screen may be displayed on the viewing user device 10 for asking the viewing user whether or not to request display of the purchased normal object.

共演申請処理部61fは、一の配信ユーザに対して他の配信ユーザから共演申請があった場合に、当該共演申請に基づいて、当該一の配信ユーザと当該他の配信ユーザとが仮想的に共演する共演動画を生成する。以下では、配信ユーザUbのキャラクタオブジェクト31を含む動画を視聴している配信ユーザUaから配信ユーザUbとの共演申請がなされるケースを想定して説明を行う。共演申請処理部61fは、配信ユーザUaからの共演申請だけでなく、様々な配信ユーザからの共演申請に基づいて共演動画を生成することができる。 The co-starring application processing unit 61f, when there is a co-starring application for one distributing user from another distributing user, virtualizes the one distributing user and the other distributing user based on the co-starring application. Generate a co-starring video. In the following description, it is assumed that a distribution user Ua, who is viewing a moving image including the character object 31 of the distribution user Ub, requests to co-star with the distribution user Ub. The co-starring application processing unit 61f can generate a co-starring moving image based not only on the co-starring application from the distribution user Ua, but also on the basis of co-starring applications from various distribution users.

一実施形態において、共演申請処理部61fは、配信ユーザUaからの共演申請を受け付け、当該共演申請に応じて共演動画を生成する。配信ユーザUaは、配信ユーザ装置20aを操作することにより、共演申請をサーバ装置60に送信することができる。具体的には、配信ユーザ装置20aに表示されている共演申請ボタン36が選択されると、配信ユーザ装置20aからサーバ装置60に対して共演申請が送信される。共演申請ボタン36は、例えば、配信ユーザ装置20aのタッチパネルのうち共演申請ボタン36が表示されている領域へのタップ操作により選択され得る。共演申請ボタン36が選択されたことに応じて、配信ユーザ装置20aにおいて配信プログラムを含むアプリケーションソフトウェアが起動されてもよい。配信ユーザ装置20aから送信される共演申請には、配信ユーザUaを識別するユーザIDが含まれてもよい。 In one embodiment, the co-starring application processing unit 61f receives a co-starring application from the distribution user Ua, and generates a co-starring video in response to the co-starring application. The distribution user Ua can transmit a co-starring application to the server device 60 by operating the distribution user device 20a. Specifically, when the co-starring application button 36 displayed on the distribution user device 20 a is selected, a co-starring application is transmitted from the distribution user device 20 a to the server device 60 . The co-starring application button 36 can be selected, for example, by tapping an area where the co-starring application button 36 is displayed on the touch panel of the distribution user device 20a. In response to selection of the co-starring application button 36, application software including a distribution program may be activated on the distribution user device 20a. A co-starring application transmitted from the distribution user device 20a may include a user ID that identifies the distribution user Ua.

配信ユーザ装置20aから共演申請を受け付けたことに応じて、共演申請処理部61fは、当該共演申請を許可するか否かを決定する。共演申請処理部61fは、共演申請を行った配信ユーザUaに関する様々な情報に基づいて共演可否を決定することができる。例えば、配信ユーザUaに対する他のユーザからの評価が所定の基準より高い場合に配信ユーザUaからの共演申請を許可することができ、逆に、配信ユーザUaに対する他のユーザからの評価が所定の基準よりも低い場合には配信ユーザUaからの共演申請を拒否することができる。また、配信ユーザUaからの共演申請を許可するか否かを配信ユーザUbに問い合わせ、その回答に応じて共演の可否を決定してもよい。 In response to receiving the co-starring application from the distribution user device 20a, the co-starring application processing unit 61f determines whether or not to permit the co-starring application. The co-starring application processing unit 61f can decide whether to co-starring based on various information about the distribution user Ua who has applied for co-starring. For example, when the evaluation of distribution user Ua by other users is higher than a predetermined standard, the application for co-starring from distribution user Ua can be permitted. If it is lower than the standard, it is possible to reject the co-starring application from the distribution user Ua. Further, it is also possible to inquire of the distribution user Ub whether or not to permit the co-starring application from the distribution user Ua, and to decide whether or not to co-star according to the answer.

一実施形態において、配信ユーザUaからの共演申請が許可された場合には、共演申請処理部61fは、配信ユーザUaと配信ユーザUbとが共演する共演動画を生成する。共演動画の生成のために、共演申請処理部61fは、配信ユーザUaから、当該配信ユーザUaのフェイスモーションデータ及び音声データを取得する。配信ユーザUaのフェイスモーションデータは、共演申請とともに配信ユーザ装置20aからサーバ装置60に送信されてもよいし、共演申請が許可された後にサーバ装置60からの要求に応じて配信ユーザ装置20aからサーバ装置60に送信されてもよい。配信ユーザUaの体の動きもアニメーションとして表現される場合には、配信ユーザUaのフェイスモーションデータとともにボディモーションデータがサーバ装置60に提供されてもよい。共演申請処理部61fは、配信ユーザUaからフェイスモーションデータが取得できない場合には、配信ユーザUaから音声データのみを取得してもよい。例えば、配信ユーザUaが使用する配信ユーザ装置20aがフェイスモーションデータ生成部211aの機能またはこれ以外の動画配信のための機能を備えていない場合、当該機能がディスエーブルされている場合、及びこれら以外の場合には、共演申請処理部61fは、配信ユーザUaからフェイスモーションデータ(及びボディモーションデータ)を取得せず音声データを取得してもよい。 In one embodiment, when the co-starring application from the broadcast user Ua is permitted, the co-starring application processing unit 61f generates a co-starring video in which the broadcast user Ua and the broadcast user Ub co-star. In order to generate a co-starring video, the co-starring application processing unit 61f acquires the face motion data and voice data of the delivery user Ua from the delivery user Ua. The face motion data of the distribution user Ua may be transmitted from the distribution user device 20a to the server device 60 together with the co-starring application, or may be transmitted from the distribution user device 20a to the server device 60 in response to a request from the server device 60 after the co-starring application is permitted. It may be sent to device 60 . If the movement of the distribution user Ua's body is also expressed as an animation, the server device 60 may be provided with the body motion data together with the distribution user Ua's face motion data. If face motion data cannot be obtained from the distribution user Ua, the co-starring application processing unit 61f may obtain only voice data from the distribution user Ua. For example, when the distribution user device 20a used by the distribution user Ua does not have the function of the face motion data generation unit 211a or other functions for video distribution, when the function is disabled, or when other than these In this case, the co-starring application processing unit 61f may acquire voice data without acquiring face motion data (and body motion data) from distribution user Ua.

一実施形態において、共演申請処理部61fは、配信ユーザUaのフェイスモーションデータに基づいて、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaのキャラクタオブジェクトのアニメーションを追加することで、共演画像を生成する。配信ユーザUaのキャラクタオブジェクトのアニメーションは、アニメーション生成部61aにおいて、配信ユーザUaのフェイスモーションデータに基づいて生成されてもよい。配信ユーザUaのキャラクタオブジェクトのアニメーションは、配信ユーザUaのフェイスモーションデータをモデルデータ63aに含まれている配信ユーザUa用のモデルデータに適用することにより生成されてもよい。例えば、共演申請処理部61fは、配信ユーザUaのキャラクタオブジェクトのアニメーションを含むレイヤーを生成し、このレイヤーを配信ユーザUbのキャラクタオブジェクト31を含む動画に重畳することで、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することができる。共演申請処理部61fは、配信ユーザUaからフェイスモーションデータ(及びボディモーションデータ)を取得せず音声データを取得した場合には、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaから取得した音声データに基づいて生成される音声を重畳することで、配信ユーザUbのキャラクタオブジェクト31と配信ユーザUaの音声とを含む共演動画を生成することができる。共演申請処理部61fは、モデルデータ63aとして配信ユーザUa用のモデルデータが設定されていない場合にも、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaから取得した音声データに基づいて生成される音声を重畳することで、配信ユーザUbのキャラクタオブジェクト31と配信ユーザUaの音声とを含む共演動画を生成することができる。このように、配信ユーザUaは、自らの音声により配信ユーザUbと共演することができる。 In one embodiment, the co-starring application processing unit 61f adds an animation of the character object of the distributing user Ua to a moving image including the character object 31 of the distributing user Ub based on the face motion data of the distributing user Ua. Generate an image. The animation of the distribution user Ua's character object may be generated by the animation generating unit 61a based on the distribution user Ua's face motion data. The animation of the character object of the distribution user Ua may be generated by applying the face motion data of the distribution user Ua to the model data for the distribution user Ua included in the model data 63a. For example, the co-starring application processing unit 61f generates a layer including an animation of the character object of the distribution user Ua, and superimposes this layer on a moving image including the character object 31 of the distribution user Ub. A co-starring moving image including the character object 31 of distribution user Ub can be generated. When voice data is acquired without acquiring face motion data (and body motion data) from distribution user Ua, co-starring application processing unit 61f adds voice data obtained from distribution user Ua to a moving image including character object 31 of distribution user Ub. By superimposing the sound generated based on the obtained sound data, it is possible to generate a co-starring moving image including the character object 31 of the distribution user Ub and the sound of the distribution user Ua. Even when model data for distribution user Ua is not set as model data 63a, co-starring application processing unit 61f creates a moving image including character object 31 of distribution user Ub based on audio data obtained from distribution user Ua. By superimposing the generated audio, it is possible to generate a co-starring video including the character object 31 of the distribution user Ub and the audio of the distribution user Ua. In this way, distribution user Ua can perform with distribution user Ub by using his/her own voice.

共演申請処理部61fは、配信ユーザUaからフェイスモーションデータを取得できない場合に配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画を配信し、その後配信ユーザUaからフェイスモーションデータを取得したタイミングで、配信ユーザUaのフェイスモーションデータに基づいて配信ユーザUaのキャラクタオブジェクトを生成することで、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することができる。このように、共演申請処理部61fは、配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画を、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画に切り替えることができる。これとは逆に、共演申請処理部61fは、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を、配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画に切り替えることができる。このように、音声による共演が行われている共演動画(「音声共演動画」と呼ぶことがある。)とキャラクタオブジェクトによる共演が行われている共演動画(「キャラクタ共演動画」と呼ぶことがある。)とは、交互に切り替え可能とされてもよい。 When the face motion data cannot be obtained from the distribution user Ua, the co-starring application processing unit 61f distributes the co-starring moving image including the voice of the distribution user Ua and the character object 31 of the distribution user Ub, and then obtains the face motion data from the distribution user Ua. By generating the character object of the distribution user Ua based on the face motion data of the distribution user Ua at this timing, it is possible to generate a co-starring moving image including the character object 31 of the distribution user Ua and the character object 31 of the distribution user Ub. . In this way, the co-starring application processing unit 61f switches the co-starring moving image including the voice of the distribution user Ua and the character object 31 of the distributing user Ub to the co-starring moving image including the character object of the distributing user Ua and the character object 31 of the distributing user Ub. be able to. Conversely, the co-starring application processing unit 61f converts a co-starring video containing the character object 31 of the distribution user Ua and the character object 31 of the distribution user Ub into a co-starring video containing the voice of the distribution user Ua and the character object 31 of the distribution user Ub. can be switched to In this way, a co-starring video in which voice co-starring is performed (sometimes referred to as "audio co-starring video") and a co-starring video in which character objects are co-starring (sometimes referred to as "character co-starring video") ) may be alternately switchable.

生成された共演動画は、動画配信部61cにより配信される。共演動画は、配信ユーザ装置20aで作成されてもよい。共演動画が配信ユーザ装置20aで生成される場合には、当該共演動画が配信ユーザ装置20aからサーバ装置60に送信され、サーバ装置60の動画配信部61cにより配信される。 The generated co-starring moving image is distributed by the moving image distribution unit 61c. The co-starring moving image may be created by the distribution user device 20a. When a co-starring moving image is generated by the distribution user device 20a, the co-starring moving image is transmitted from the distribution user device 20a to the server device 60 and distributed by the moving image distribution section 61c of the server device 60. FIG.

動画配信部61cから配信された共演動画の表示例を図8及び図9a~図9bに示す。これらの図では、配信ユーザUbが配信している動画に対して配信ユーザUaが共演申請をして、その結果、配信ユーザUaのキャラクタオブジェクト及び配信ユーザのキャラクタオブジェクトを含む共演動画が配信されており、配信ユーザUaは、図7aに示されている画像を視聴中に共演申請ボタン36を選択したと想定されている。 8 and 9a to 9b show display examples of co-starring moving images distributed from the moving image distribution unit 61c. In these figures, a distribution user Ua applies for co-starring with a video distributed by a distribution user Ub, and as a result, a co-starring video including a character object of the distribution user Ua and a character object of the distribution user is distributed. It is assumed that the distribution user Ua has selected the co-starring application button 36 while viewing the image shown in FIG. 7a.

図8に示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置60から配信された共演動画の表示画像230が表示される。この視聴ユーザ装置10に表示されている共演動画の表示画像230には、配信ユーザUbのキャラクタオブジェクト31に加えて、配信ユーザUaのキャラクタオブジェクト131が含まれている。配信ユーザUaのキャラクタオブジェクト131は、上記のように、アニメーション生成部61a又は共演申請処理部61fにおいて生成される。共演動画の表示画像230は、図3に示されている元の配信画像と同様に、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、を含んでいる。 As shown in FIG. 8 , a display image 230 of the co-starring moving image distributed from the server device 60 is displayed on the display of the viewing user device 10 . The display image 230 of the co-starring moving image displayed on the viewing user device 10 includes the character object 131 of the distribution user Ua in addition to the character object 31 of the distribution user Ub. The character object 131 of the distribution user Ua is generated in the animation generation unit 61a or the co-starring application processing unit 61f as described above. The display image 230 of the co-starring moving image includes the gift button 32, the evaluation button 33, the comment button 34, and the comment display area 35, like the original distribution image shown in FIG.

共演動画の配信画像230は、図示のとおり、横長の画像である。共演申請処理部61f又は動画配信部61cは、共演画像を配信する場合、横長の画像として配信する。これにより、視聴ユーザ装置10には、共演動画の配信画像230が横長の画像として表示される。一実施形態においては、図3に示されているように、元の動画(画像)が縦長だとしても、共演画像は横長に変換されて配信される。共演画像は、二人の配信ユーザのキャラクタオブジェクトを含むため、横長の画像とすることにより、二人分のキャラクタオブジェクトを重複なく表示しやすくなる。例えば、共演画像においては、視聴ユーザの視点で向かって左半分を元の配信ユーザのキャラクタオブジェクトに割り当てられる領域とし、右半分を共演申請を行った配信ユーザのキャラクタオブジェクトに割り当てられる領域としてもよい。各配信ユーザへの領域の割り当ては、キャラクタオブジェクト同士が重複しないように任意に定められてもよい。 The distribution image 230 of the co-starring moving image is a horizontally long image as illustrated. When the co-starring application processing unit 61f or the moving image distribution unit 61c distributes a co-starring image, the co-starring image is distributed as a horizontally long image. As a result, the distribution image 230 of the co-starring moving image is displayed on the viewing user device 10 as a horizontally long image. In one embodiment, as shown in FIG. 3, even if the original video (image) is portrait, the co-star image is converted to landscape and delivered. Since the co-starring image includes the character objects of the two delivery users, it is easier to display the character objects for the two characters without duplication by using a landscape image. For example, in a co-starring image, the left half may be assigned to the original distribution user's character object, and the right half may be assigned to the character object of the distribution user who applied for co-starring. . The allocation of areas to each distribution user may be determined arbitrarily so that character objects do not overlap each other.

図9a及び図9bに示されているように、配信ユーザ装置20a及び配信ユーザ装置20bのディスプレイには、サーバ装置60から配信された共演動画の表示画像330が表示される。この表示画像330には、表示画像230と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像330は、ギフトボタン32、評価ボタン33、及びコメントボタン34を含んでおらず、表示指示ボタン42a,42c,42dを含んでいる点で表示画像230と異なっている。配信ユーザUa及び配信ユーザUbは、同じ共演画像の配信者となっているため、配信ユーザUaの配信ユーザ装置20aと配信ユーザUbの配信ユーザ装置20bには同じ表示画像330が表示されている。表示画像330も表示画像230と同様に、複数のキャラクタオブジェクトを重複なく配置するという観点から横長に表示されている。図8及び図9a~図9bに示されている例では、図8に示されている共演画像を視聴している視聴ユーザからイヤリングを示す装着ギフトの表示要求(第1表示要求)がなされ、その結果、当該表示要求に応じて配信ユーザ装置20a及び配信ユーザ装置20bの表示画像には、表示指示オブジェクト42dが追加されていると想定する。表示指示オブジェクト42dは、装着部位情報として「耳」が設定されたイヤリングの表示を指示するためのオブジェクト(ボタン)である。 As shown in FIGS. 9a and 9b, a display image 330 of the co-starring moving image delivered from the server device 60 is displayed on the displays of the delivery user device 20a and the delivery user device 20b. This display image 330 includes the same background image, character object image, and comment as the display image 230 . On the other hand, the display image 330 differs from the display image 230 in that it does not include the gift button 32, the evaluation button 33, and the comment button 34, but includes display instruction buttons 42a, 42c, and 42d. Since distribution user Ua and distribution user Ub are distributors of the same co-starring image, the same display image 330 is displayed on distribution user device 20a of distribution user Ua and distribution user device 20b of distribution user Ub. As with the display image 230, the display image 330 is also displayed horizontally from the viewpoint of arranging a plurality of character objects without overlapping. In the example shown in FIGS. 8 and 9a to 9b, the viewing user viewing the co-starring image shown in FIG. As a result, it is assumed that the display instruction object 42d is added to the display images of the distribution user device 20a and the distribution user device 20b in response to the display request. The display instruction object 42d is an object (button) for instructing display of an earring for which "ear" is set as wearing part information.

図9a及び図9bに示されている共演動画において配信ユーザUaと配信ユーザUbとが共演している場合、配信ユーザUaは配信ユーザ装置20aに表示されている表示指示オブジェクト42dを選択することにより、表示指示オブジェクト42dに対応する装着ギフトを自らのキャラクタオブジェクト131に装着することができる。同様に、配信ユーザUbは配信ユーザ装置20bに表示されている表示指示オブジェクト42dを選択することにより、表示指示オブジェクト42dに対応する装着ギフトを自らのキャラクタオブジェクト31に装着することができる。表示指示オブジェクト42dに対応する装着ギフトは、配信ユーザUaのキャラクタオブジェクト131及び配信ユーザUbのキャラクタオブジェクト31の一方又は両方に装着される。 When distribution user Ua and distribution user Ub are co-starring in the co-starring video shown in FIGS. 9a and 9b, distribution user Ua selects display instruction object 42d displayed on distribution user device 20a to , the wearable gift corresponding to the display instruction object 42d can be worn on the character object 131 of the user. Similarly, by selecting the display instruction object 42d displayed on the distribution user device 20b, the distribution user Ub can equip his or her own character object 31 with the wearing gift corresponding to the display instruction object 42d. The attached gift corresponding to the display instruction object 42d is attached to one or both of the character object 131 of the distribution user Ua and the character object 31 of the distribution user Ub.

配信ユーザUbによって表示指示オブジェクト42dが選択された場合には、配信ユーザ装置20bからサーバ装置60に対して表示指示オブジェクト42dが選択されたことを示す選択通知が送信される。サーバ装置60では、ギフト要求処理部61dにより、表示指示オブジェクト42dに対応するイヤリングを示す装着オブジェクト138を配信中の共演動画に表示させる。イヤリングを示す装着オブジェクト138には、装着部位として「耳」が設定されているので、装着オブジェクト138はキャラクタオブジェクト31の耳に装着される。イヤリングを示す装着オブジェクト138を装着したキャラクタオブジェクト31を含む動画の表示例が図10及び図11a~図11bに示されている。また、図11a及び図11bに示されているように、選択された表示指示オブジェクト42dは、表示画面330から削除されてもよい。配信ユーザUbによって表示指示オブジェクト42dが選択された場合にその表示指示オブジェクト42dを表示画面330から削除しなくともよい。この場合、共演相手の配信ユーザUaも表示指示オブジェクト42dを選択することができる。配信ユーザUaによって表示指示オブジェクト42dが選択されると、装着オブジェクト138が配信ユーザUaのキャラクタ131に装着される。共演している配信ユーザUaと配信ユーザUbのうちの一方により表示指示オブジェクト42dが選択された場合、その選択を行った配信ユーザの配信ユーザ装置に表示される表示画面から表示指示オブジェクト42dを削除し、選択を行っていない配信ユーザの配信ユーザ装置の表示画面には表示指示オブジェクト42dを継続して表示してもよい。例えば、配信ユーザUbが表示指示オブジェクト42dを選択し配信ユーザUaは表示指示オブジェクト42dを選択していない場合には、配信ユーザUbの配信ユーザ装置20bの表示画面330からは表示指示オブジェクト42dを削除し、配信ユーザUaの配信ユーザ装置20aの表示画面330には表示指示オブジェクト42dをそのまま表示しておいてもよい。これにより、配信ユーザUaは、配信ユーザUbよりも後のタイミングで表示指示オブジェクト42dを選択し、自らのキャラクタオブジェクト131に装着オブジェクト138を装着させることができる。 When the display instruction object 42d is selected by the distribution user Ub, a selection notification indicating that the display instruction object 42d has been selected is transmitted from the distribution user device 20b to the server device 60. FIG. In the server device 60, the gift request processing unit 61d causes the wearing object 138 indicating the earring corresponding to the display instruction object 42d to be displayed in the co-starring moving image being distributed. Since the wearable object 138 representing an earring has an “ear” set as the wearable part, the wearable object 138 is worn on the ear of the character object 31 . A display example of a moving image including a character object 31 wearing an wearing object 138 representing an earring is shown in FIGS. 10 and 11a to 11b. The selected display instruction object 42d may also be deleted from the display screen 330, as shown in FIGS. 11a and 11b. It is not necessary to delete the display instruction object 42d from the display screen 330 when the display instruction object 42d is selected by the distribution user Ub. In this case, the co-star distribution user Ua can also select the display instruction object 42d. When the display instruction object 42d is selected by the distribution user Ua, the wearing object 138 is attached to the character 131 of the distribution user Ua. When the display instruction object 42d is selected by one of the co-starring broadcast users Ua and Ub, the display instruction object 42d is deleted from the display screen displayed on the broadcast user device of the broadcast user who made the selection. However, the display instruction object 42d may be continuously displayed on the display screen of the broadcast user device of the broadcast user who has not made the selection. For example, when the distribution user Ub selects the display instruction object 42d and the distribution user Ua does not select the display instruction object 42d, the display instruction object 42d is deleted from the display screen 330 of the distribution user device 20b of the distribution user Ub. However, the display instruction object 42d may be displayed as it is on the display screen 330 of the broadcast user device 20a of the broadcast user Ua. Thereby, the distribution user Ua can select the display instruction object 42d at a later timing than the distribution user Ub and have the wearable object 138 mounted on the own character object 131 .

配信ユーザUaによって表示指示オブジェクト42dが選択された場合には、配信ユーザ装置20aからサーバ装置60に対して表示指示オブジェクト42dが選択された旨が通知される。サーバ装置60では、ギフト要求処理部61dにより、表示指示オブジェクト42dに対応するイヤリングを示す装着オブジェクト138が配信ユーザUaのキャラクタ131に装着された共演動画が生成される。イヤリングを示す装着オブジェクト138を装着したキャラクタオブジェクト31を含む動画の表示例が図12及び図13a~図13bに示されている。 When the display instruction object 42d is selected by the distribution user Ua, the distribution user device 20a notifies the server device 60 of the selection of the display instruction object 42d. In the server device 60, the gift request processing unit 61d generates a co-starring moving image in which the character 131 of the distribution user Ua is equipped with the wearing object 138 representing the earring corresponding to the display instruction object 42d. A display example of a moving image including a character object 31 wearing an wearing object 138 representing an earring is shown in FIGS. 12 and 13a to 13b.

配信ユーザUaと配信ユーザUbとが共演動画において共演している場合、装着ギフトを表示するための表示指示オブジェクト(例えば、表示指示オブジェクト42a~42d)は、配信ユーザUaの配信ユーザ装置20aと配信ユーザUbの配信ユーザ装置20bの少なくとも一方に表示される。図9a及び図9bに示されている実施形態では、表示指示オブジェクト42a,42c,42dが配信ユーザ装置20a及び配信ユーザ装置20bの両方に表示されている。この場合、配信ユーザUa及び配信ユーザUbのいずれもが表示指示オブジェクト42a,42c,42dを選択することができる。一実施形態において、配信ユーザUa及び配信ユーザUbのうちの一方が表示されている表示指示オブジェクトを選択すると、他方のユーザはその選択された表示指示オブジェクトを選択できなくなる。例えば、図11a及び図11bに示されているように、配信ユーザUbによって表示指示オブジェクト42dが選択された場合、配信ユーザUbの配信ユーザ装置20bに表示されている表示画像330から表示指示オブジェクト42dが削除されるとともに、配信ユーザUaの配信ユーザ装置20aに表示されている表示画像330からも表示指示オブジェクト42dが削除される。これにより、配信ユーザUbによって表示指示オブジェクト42dが選択された後は、共演相手である配信ユーザUaによる当該表示指示オブジェクト42dの選択はできなくなる。これとは逆に、配信ユーザUaによって表示指示オブジェクト42dが選択された後は、共演相手である配信ユーザUbによる当該表示指示オブジェクト42dの選択はできなくなる。 When distribution user Ua and distribution user Ub are co-starring in a co-starring video, display instruction objects (for example, display instruction objects 42a to 42d) for displaying attached gifts are distributed with distribution user device 20a of distribution user Ua. Displayed on at least one of the distribution user devices 20b of user Ub. In the embodiment shown in Figures 9a and 9b, the display indication objects 42a, 42c, 42d are displayed on both the Broadcast User Equipment 20a and the Broadcast User Equipment 20b. In this case, both broadcast user Ua and broadcast user Ub can select display instruction objects 42a, 42c, and 42d. In one embodiment, when one of broadcast user Ua and broadcast user Ub selects a displayed display instruction object, the other user cannot select the selected display instruction object. For example, as shown in FIGS. 11a and 11b, when the display instruction object 42d is selected by the broadcast user Ub, the display instruction object 42d is displayed from the display image 330 displayed on the broadcast user device 20b of the broadcast user Ub. is deleted, and the display instruction object 42d is also deleted from the display image 330 displayed on the broadcast user device 20a of the broadcast user Ua. Accordingly, after the display instruction object 42d is selected by the distribution user Ub, the display instruction object 42d cannot be selected by the distribution user Ua who is the co-starring partner. Conversely, after the display instruction object 42d is selected by the distribution user Ua, the display instruction object 42d cannot be selected by the distribution user Ub who is the co-starring partner.

他の実施形態においては、視聴ユーザが装着ギフトをギフティングするときに、共演動画で共演している配信ユーザのいずれに対してギフティングを行うかを指定することができる。より具体的には、視聴ユーザは、装着ギフトの表示を要求する第1表示要求に、共演動画において共演している配信ユーザのうちのどのユーザに対して当該装着ギフトをギフティングするのか指定することができる。例えば、図8及び図9a~図9bに示されている実施形態においては、図8に示されている共演画像を視聴しているユーザは、ギフトボタン32を選択することにより、ギフティング対象として装着ギフトを選択し、さらに選択した装着ギフトのギフティング先として配信ユーザUa又は配信ユーザUbを選択することができる。配信ユーザUa又は配信ユーザUbの選択は、それぞれのキャラクタオブジェクト131又はキャラクタオブジェクト31の選択を通じて行われてもよい。上述したイヤリングを示す装着ギフトの表示要求において配信ユーザUb(キャラクタオブジェクト31)が指定してされている場合には、当該装着ギフトに対応する表示指示オブジェクト42dは、配信ユーザUbの配信ユーザ装置20bに表示され、指定されていない配信ユーザUaの配信ユーザ装置20aには表示されなくともよい。他の態様において、イヤリングを示す装着ギフトの表示要求において配信ユーザUb(キャラクタオブジェクト31)が指定してされている場合には、当該装着ギフトに対応する表示指示オブジェクト42dは、配信ユーザUaの配信ユーザ装置20a及び配信ユーザUbの配信ユーザ装置20bの両方に表示されるが、指定されていない配信ユーザUaの配信ユーザ装置20aからは当該表示指示オブジェクト42dが選択できなくされてもよい。このように、装着ギフトの表示要求においてギフティング先が指定されている場合には、指定された配信ユーザの配信ユーザ装置においては当該装着ギフトに対する表示指示オブジェクトが選択可能とされ、指定された配信ユーザ以外の配信ユーザの配信ユーザ装置においては当該装着ギフトに対する表示指示オブジェクトが選択不能とされる。 In another embodiment, when the viewing user gives the attached gift, it is possible to specify which of the distribution users co-starring in the co-starring video should be given the gift. More specifically, the viewing user designates which of the delivery users co-starring in the co-starring video is to be gifted the gift-attached to the first display request requesting display of the gift-attached. be able to. For example, in the embodiment shown in FIGS. 8 and 9a-9b, the user viewing the co-starring image shown in FIG. It is possible to select an attached gift, and further select distribution user Ua or distribution user Ub as a recipient of the selected attached gift. Selection of distribution user Ua or distribution user Ub may be performed through selection of character object 131 or character object 31, respectively. When the distribution user Ub (character object 31) is specified in the display request for the attached gift indicating the earring described above, the display instruction object 42d corresponding to the attached gift is displayed on the distribution user device 20b of the distribution user Ub. , and may not be displayed on the broadcast user device 20a of the undesignated broadcast user Ua. In another aspect, when the delivery user Ub (character object 31) is specified in the request to display an attached gift showing an earring, the display instruction object 42d corresponding to the attached gift is displayed by the delivery user Ua. Although displayed on both the user device 20a and the broadcast user device 20b of the broadcast user Ub, the display instruction object 42d may not be selectable from the broadcast user device 20a of the undesignated broadcast user Ua. In this way, when the gifting destination is designated in the display request for the attached gift, the display instruction object for the attached gift can be selected on the distribution user device of the designated distribution user, and the designated distribution is performed. The display instruction object for the attached gift cannot be selected on the distribution user device of the distribution user other than the user.

他の実施形態においては、表示指示オブジェクトは、共演動画の元となる動画を配信していた配信ユーザの配信ユーザ装置においてのみ選択可能とされてもよい。図8及び図9a~図9bに表示されている例では、元々は配信ユーザUbが配信していた動画に配信ユーザUaが共演申請を行ったため、表示指示オブジェクト42a,42c,42dは、配信ユーザUbの配信ユーザ装置20bにおいて選択可能とされる一方で、配信ユーザUaの配信ユーザ装置20aでは選択不能としてもよい。例えば、表示指示オブジェクト42a,42c,42dは、配信ユーザ装置20bにおいて表示される一方で、配信ユーザUaの配信ユーザ装置20aには表示されなくともよい。 In another embodiment, the display instruction object may be selectable only on the distribution user device of the distribution user who distributed the video on which the co-starring video is based. In the examples shown in FIGS. 8 and 9a to 9b, since the distribution user Ua applied for co-starring with the video originally distributed by the distribution user Ub, the display instruction objects 42a, 42c, and 42d While it is selectable in the distribution user device 20b of Ub, it may be disabled in the distribution user device 20a of distribution user Ua. For example, the display instruction objects 42a, 42c, and 42d may be displayed on the broadcast user device 20b but not displayed on the broadcast user device 20a of the broadcast user Ua.

共演している配信ユーザが表示指示オブジェクトを選択して装着ギフトの表示を行う場合には、その選択された装着ギフトが装着されるキャラクタオブジェクトを指定してもよい。例えば、配信ユーザUbが表示指示オブジェクト42dを選択して装着ギフト138を共演動画において表示させる場合、自らのキャラクタオブジェクト31に装着させてもよいし、共演相手である配信ユーザUaのキャラクタ131に装着させてもよい。例えば、配信ユーザ装置20bにおいて表示指示オブジェクト42dが選択された場合には、当該配信ユーザ装置20bにキャラクタオブジェクトの選択肢が表示されてもよい。 When a co-starring distribution user selects a display instruction object to display an attached gift, the character object to which the selected attached gift is attached may be specified. For example, when the delivery user Ub selects the display instruction object 42d to display the gift 138 in the co-starring video, it may be attached to the own character object 31 or to the character 131 of the co-starring delivery user Ua. You may let For example, when the display instruction object 42d is selected on the distribution user device 20b, character object options may be displayed on the distribution user device 20b.

次に、図14~図16を参照して、一態様による動画配信処理について説明する。図14は、一実施形態における動画配信処理の流れを示すフロー図であり、図15は、一実施形態における通常オブジェクトを表示する処理の流れを示すフロー図であり、図16は、一実施形態における装着オブジェクトを表示する処理の流れを示すフロー図である。これらの図を参照して説明される動画配信処理においては、配信ユーザUbが配信ユーザ装置20bを用いて取得したフェイスモーションデータに基づいて生成された動画が配信されており、この動画を視聴している配信ユーザUaから共演申請がなされることが想定されている。 Next, with reference to FIGS. 14 to 16, a video distribution process according to one aspect will be described. FIG. 14 is a flow chart showing the flow of video distribution processing in one embodiment, FIG. 15 is a flow chart showing the flow of processing for displaying normal objects in one embodiment, and FIG. is a flow diagram showing the flow of processing for displaying a wearable object in . In the moving image distribution process described with reference to these drawings, a moving image generated based on face motion data acquired by the distribution user Ub using the distribution user device 20b is distributed. It is assumed that an application for co-starring will be made from a distribution user Ua who has

まず、ステップS11では、配信ユーザUbの顔の動き(表情)のデジタル表現であるフェイスモーションデータが生成される。フェイスモーションデータの生成は、例えば、配信ユーザ装置20のフェイスモーションデータ生成部211aで行われる。配信ユーザ装置20においては、配信ユーザUbからの音声入力に基づいて音声データが生成されてもよい。生成されたフェイスモーションデータ及び音声データは、サーバ装置60に送信される。 First, in step S11, face motion data, which is a digital representation of facial movements (expressions) of distribution user Ub, is generated. Generation of face motion data is performed by the face motion data generation unit 211a of the distribution user device 20, for example. In the distribution user device 20, voice data may be generated based on the voice input from the distribution user Ub. The generated face motion data and voice data are transmitted to the server device 60 .

次に、ステップS12において、配信ユーザ装置20からのフェイスモーションデータが、配信ユーザUb用のモデルデータに適用されることにより、配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションが生成される。このアニメーションの生成は、例えば、上記のアニメーション生成部61aで行われる。 Next, in step S12, the face motion data from the distribution user device 20 is applied to the model data for the distribution user Ub, thereby generating an animation of the character object that moves in synchronization with the movement of the facial expression of the distribution user Ub. be done. This animation is generated by, for example, the animation generation unit 61a.

次に、ステップS13において、配信ユーザUbに対応するキャラクタオブジェクトのアニメーションを含む動画が生成される。この動画には、配信ユーザUbの音声が合成されてもよい。キャラクタオブジェクトのアニメーションは、背景画像に重畳して表示される。この動画の生成は、例えば、上記の動画生成部61bで行われる。 Next, in step S13, a moving image including animation of the character object corresponding to distribution user Ub is generated. The video may be synthesized with the voice of the distribution user Ub. The animation of the character object is superimposed on the background image and displayed. This moving image is generated by, for example, the moving image generation unit 61b.

次に、ステップS14に移行し、ステップS13にて生成された動画が配信される。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。動画は、所定の配信期間にわたって継続して配信される。動画の配信期間は、例えば、30秒間、1分間、5分間、10分、30分間、60分間、120分間、及びこれら以外の任意の時間に定め得る。 Next, the process proceeds to step S14, and the moving image generated in step S13 is distributed. This moving image is distributed to the viewing user device 10 and other viewing user devices and distribution user devices via the network 50 . The moving images are distributed continuously over a predetermined distribution period. The video distribution period can be set to, for example, 30 seconds, 1 minute, 5 minutes, 10 minutes, 30 minutes, 60 minutes, 120 minutes, and any time other than these.

次に、ステップS15に進み、配信ユーザUb以外のユーザから共演申請がなされたか否かが判定される。共演申請は、例えば、配信ユーザUaからなされる。配信ユーザUaによって共演申請がなされた場合には、処理はステップS16に進む。ステップS16では、配信ユーザUaのフェイスモーションデータに基づいて、配信ユーザUaのキャラクタオブジェクト131のアニメーションが生成される。そして、配信中の動画(配信ユーザUbのキャラクタオブジェクト31を含む動画)に、配信ユーザUaのキャラクタオブジェクト131のアニメーションを追加することで、共演画像を生成する。ステップS16における処理は、例えば、上記の共演申請処理部61fで行われる。 Next, in step S15, it is determined whether or not a co-starring application has been made by a user other than the distribution user Ub. A co-starring application is made by, for example, the distribution user Ua. If the distribution user Ua has applied for co-starring, the process proceeds to step S16. In step S16, an animation of the character object 131 of the distribution user Ua is generated based on the distribution user Ua's face motion data. Then, by adding an animation of the character object 131 of the distribution user Ua to the moving image being distributed (moving image including the character object 31 of the distribution user Ub), a co-starring image is generated. The processing in step S16 is performed, for example, by the co-starring application processing section 61f.

次に、ステップS17に移行し、ステップS16にて生成された共演動画が配信される。この共演動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。共演動画には、例えば、図8、図9a及び図9bに示されているように、配信ユーザUaのキャラクタオブジェクト131のアニメーション及び配信ユーザUbのキャラクタオブジェクト31のアニメーションが含まれる。 Next, the process proceeds to step S17, and the co-starring moving image generated in step S16 is distributed. This co-starring moving image is distributed to the viewing user device 10 and other viewing user devices and distribution user devices via the network 50 . The co-starring moving image includes, for example, animation of the character object 131 of the distribution user Ua and animation of the character object 31 of the distribution user Ub, as shown in FIGS. 8, 9a, and 9b.

次に、ステップS18に進み、動画の配信を終了させるための終了条件が成就したか否かが判定される。終了条件は、例えば、配信の終了時刻に達したこと、配信ユーザUbが配信ユーザ装置20bにおいて配信を終了するための操作を行ったこと、またはこれら以外の条件である。終了条件が成就していなければステップS11~S17の処理が繰り返し実行され、配信ユーザUbの動きに同期したアニメーションを含む動画、又は、配信ユーザUaとの共演が継続している場合には共演動画の配信が継続される。動画について終了条件が成就していると判定された場合には、当該動画の配信処理を終了する。 Next, proceeding to step S18, it is determined whether or not the end condition for ending the distribution of the moving image is satisfied. The termination condition is, for example, that the delivery end time has been reached, that the delivery user Ub has performed an operation to end the delivery on the delivery user device 20b, or other conditions. If the termination condition is not satisfied, the processes of steps S11 to S17 are repeatedly executed, and a moving image including animation synchronized with the movement of the distribution user Ub, or a co-starring moving image if the co-starring with the distribution user Ua continues. continues to be delivered. When it is determined that the termination condition is satisfied for the moving image, the distribution processing for the moving image is terminated.

次に、図15をさらに参照して、動画の配信中に行われる通常ギフトの表示処理について説明する。通常ギフトの表示処理は、図14に示した動画の配信処理と並行して行われる。 Next, with reference to FIG. 15, normal gift display processing performed during distribution of moving images will be described. The normal gift display processing is performed in parallel with the moving image distribution processing shown in FIG.

動画の配信中に、ステップS21において、通常ギフトの表示要求がなされたか否かが判定される。例えば、視聴ユーザは、自らが保有する通常ギフトの中から一又は複数の特定の通常ギフトを選択し、この選択された通常ギフトの表示を要求する表示要求を視聴ユーザ装置10からサーバ装置60に対して送信することができる。上述したように、所定の通常ギフトの購入処理又は決済処理がなされたことに応じて、当該所定の通常ギフトの表示要求が生成されてもよい。 During distribution of moving images, it is determined in step S21 whether or not a display request for a normal gift has been made. For example, the viewing user selects one or more specific normal gifts from the normal gifts owned by the viewing user, and sends a display request from the viewing user device 10 to the server device 60 to request the display of the selected normal gifts. can be sent to As described above, a display request for a predetermined normal gift may be generated in response to purchase processing or settlement processing for a predetermined normal gift.

通常ギフトの表示要求がなされた場合には、当該表示処理はステップS22に進む。ステップS22においては、当該表示要求に基づいて、表示が要求された通常ギフトを配信中の動画に表示させるための処理が行われる。例えば、所定の動画の配信中に通常ギフトの表示要求がなされると、図5に示されているように、視聴ユーザ装置10の表示画面30内に表示要求がなされた通常ギフトに対応する通常オブジェクト37a,37bが表示される。 When the display request for the normal gift is made, the display process proceeds to step S22. In step S22, based on the display request, a process for displaying the normal gift requested to be displayed on the moving image being distributed is performed. For example, when a request for displaying a normal gift is made during distribution of a predetermined moving image, as shown in FIG. Objects 37a and 37b are displayed.

通常ギフトの表示要求がなされていない場合には、通常ギフトの表示処理は終了する。図15に示されている通常ギフトの表示処理は、動画の配信期間中に繰り返し行われる。エフェクトギフトの表示処理も、上述した通常ギフトの表示処理と同様の手順で行われ得る。 If the normal gift display request has not been made, the normal gift display processing ends. The normal gift display processing shown in FIG. 15 is repeatedly performed during the distribution period of the moving image. The effect gift display process can also be performed in the same procedure as the normal gift display process described above.

次に、図16をさらに参照して、動画の配信中に行われる装着ギフトの表示処理について説明する。装着ギフトの表示処理は、図14に示した動画の配信処理と並行して行われる。また、装着ギフトの表示処理は、図15に示した通常ギフトの表示処理と並行して行われてもよい。 Next, with further reference to FIG. 16, display processing of the attached gift performed during distribution of moving images will be described. The process of displaying the attached gift is performed in parallel with the process of distributing the moving image shown in FIG. Further, the process of displaying the attached gift may be performed in parallel with the process of displaying the normal gift shown in FIG.

動画の配信中に、ステップS31において、装着ギフトの表示要求がなされたか否かが判定される。例えば、第1視聴ユーザは、自らが保有する装着ギフトの表示を要求する表示要求を視聴ユーザ装置10からサーバ装置60に対して送信することができる。 During distribution of the moving image, in step S31, it is determined whether or not a display request for an attached gift has been made. For example, the first viewing user can transmit, from the viewing user device 10 to the server device 60, a display request requesting display of an attached gift held by the first viewing user.

装着ギフトの表示要求がなされた場合には、当該表示処理はステップS32に進む。ステップS32においては、当該表示要求に基づいて、表示が要求された装着ギフトに関連付けられた表示指示オブジェクトが配信ユーザ装置20の表示画面40に表示される。例えば、カチューシャを示す装着ギフトの表示要求がなされた場合には、当該装着ギフトに関連付けられた表示指示オブジェクト42bが配信ユーザ装置20の表示画面40に表示される。 When the display request for the attached gift is made, the display process proceeds to step S32. In step S<b>32 , the display instruction object associated with the attached gift requested to be displayed is displayed on the display screen 40 of the delivery user device 20 based on the display request. For example, when a display request for an attached gift indicating a headband is made, a display instruction object 42 b associated with the attached gift is displayed on the display screen 40 of the distribution user device 20 .

次に、ステップS33において、配信ユーザ装置20における表示画面40に含まれている表示指示オブジェクトの中から、特定の表示指示オブジェクトが選択されたか否かが判定される。 Next, in step S33, it is determined whether or not a specific display instruction object has been selected from the display instruction objects included in the display screen 40 of the distribution user device 20. FIG.

特定の表示指示オブジェクトが選択された場合には、ステップS34において、配信中の動画の表示画面に、当該選択された特定の表示指示オブジェクトに対応する装着ギフトを表示する処理が行われる。例えば、表示画面40に含まれている表示指示オブジェクト42bが選択された場合には、図6、図7a及び図7bに示されているように、表示画像30及び表示画像40に、選択された表示指示オブジェクト42bに対応付けられている装着オブジェクト38が表示される。また、選択された表示指示オブジェクト42bは、表示画面40から削除される。 When a specific display instruction object is selected, in step S34, processing is performed to display an attached gift corresponding to the selected specific display instruction object on the display screen of the moving image being distributed. For example, when the display instruction object 42b included in the display screen 40 is selected, the selected display image 30 and the display image 40 are displayed as shown in FIGS. 6, 7a, and 7b. The mounted object 38 associated with the display instruction object 42b is displayed. Also, the selected display instruction object 42 b is deleted from the display screen 40 .

ステップS33において、表示指示オブジェクトがいずれも選択されなかった場合、及び、ステップS34において装着ギフトの表示処理が完了した場合には、装着ギフトの表示処理は終了する。 If none of the display instruction objects is selected in step S33, and if the attached gift display process is completed in step S34, the attached gift display process ends.

上記の一実施形態によれば、共演動画の視聴ユーザから装着ギフトの表示を要求する第1表示要求がなされた場合に、当該装着ギフトをただちに共演動画内に表示するのではなく、配信ユーザUa又は配信ユーザUbによる表示指示オブジェクト42a~42dの選択に応じて当該装着ギフトを表示している。これにより、共演動画の視聴ユーザから装着ギフトのギフティングが大量になされても、共演動画内に装着オブジェクトを整然と表示することができる。これにより、視聴ユーザの視聴体験の劣化を防止することができる。上記の一実施形態によれば、装着ギフトは、共演している配信ユーザUaのキャラクタオブジェクトと配信ユーザUbのキャラクタオブジェクトの一方のみに装着される。この場合、共演動画内に表示される装着オブジェクトの数を抑制することができるので、共演動画に装着オブジェクトをより整然と表示することができる。 According to the above-described embodiment, when the viewing user of the co-starring video makes the first display request for displaying the attached gift, the attached gift is not immediately displayed in the co-starred video. Alternatively, the attached gift is displayed according to the selection of the display instruction objects 42a to 42d by the delivery user Ub. As a result, even if a large number of wearing gifts are given by users viewing the co-starring moving image, the wearing objects can be displayed in order in the co-starring moving image. This makes it possible to prevent deterioration of the viewing experience of the viewing user. According to the above embodiment, the gift to be attached is attached to only one of the character object of the co-starring broadcast user Ua and the character object of broadcast user Ub. In this case, since the number of wearable objects displayed in the co-starring moving image can be suppressed, the wearable objects can be displayed more orderly in the co-starring moving image.

上記の一実施形態によれば、配信ユーザUaの配信ユーザ装置20aと配信ユーザUbの配信ユーザ装置20bの両方に表示指示オブジェクトが表示される。これにより、共演申請を行った配信ユーザUaにも、共演動画においてギフティングされた装着ギフトを装着する機会が与えられる。配信ユーザUaは、ギフティングを多く集めている配信ユーザUbに共演申請をすることで、多くの装着ギフトを装着する機会を得ることができる。配信ユーザは、自らのキャラクタオブジェクトに魅力的なデコレーションを行うことを望むものである。このように、上記の実施形態によれば、配信ユーザUaに対して共演申請を行う誘因を付与することができる。 According to the above embodiment, the display instruction object is displayed on both the broadcast user device 20a of broadcast user Ua and the broadcast user device 20b of broadcast user Ub. As a result, the distribution user Ua who has applied for co-starring is also given an opportunity to wear the attached gift gifted in the co-starring video. By applying for co-starring with a broadcast user Ub who has collected many gifts, the broadcast user Ua can obtain an opportunity to wear many wearing gifts. Broadcast users desire to decorate their own character objects attractively. As described above, according to the above-described embodiment, it is possible to give the distribution user Ua an incentive to apply for co-starring.

上記の一実施形態によれば、視聴ユーザによる装着オブジェクトのギフティング先の指定が可能となる。これにより、共演している配信ユーザに横取りされることなく、意図した配信ユーザに対して装着ギフトをギフティングすることができる。 According to the above embodiment, it is possible for the viewing user to specify the gift recipient of the wearable object. As a result, the wearable gift can be gifted to the intended distribution user without being intercepted by the distribution user co-starring.

上記の一実施形態によれば、元の動画を配信していた配信ユーザ(例えば、配信ユーザUb)の配信ユーザ装置20bにのみ表示指示オブジェクトが表示される。共演動画においては二人以上の配信ユーザが共演しているが、元の動画を配信していた配信ユーザに当該動画の管理を行わせることが望ましい。上記の実施形態によれば、装着ギフトを表示するか否かについて、共演申請を行った共演者ではなく、元の動画を配信していた配信ユーザに決定を委ねることができる。 According to the above embodiment, the display instruction object is displayed only on the distribution user device 20b of the distribution user (for example, distribution user Ub) who distributed the original moving image. Although two or more delivery users co-star in a co-starring video, it is desirable to allow the delivery user who delivered the original video to manage the video. According to the above embodiment, whether or not to display the attached gift can be left to the distribution user who distributed the original moving image, not the co-star who applied for co-starring.

通常ギフト37a,37bについては、装着ギフト38に比べて表示時間を短く設定することができ、また、通常オブジェクト37a,37bは、キャラクタオブジェクト31と接しないようにまたはキャラクタオブジェクト31の前側ではなく背後に表示されてもよい。この場合、通常オブジェクト37a,37bは、配信中の動画においてキャラクタオブジェクト31の視認性に与える影響が小さい。よって、通常ギフトについては、視聴ユーザからの表示要求に応じて自動的に(配信ユーザUa,Ubの許可がなく)動画に表示してもキャラクタオブジェクト31の視認性の悪化によるユーザの視聴体験の劣化にはつながりにくい。 The display time of the normal gifts 37a and 37b can be set shorter than that of the attached gift 38, and the normal objects 37a and 37b are arranged so as not to come in contact with the character object 31 or behind the character object 31 rather than in front of it. may be displayed in In this case, the normal objects 37a and 37b have little effect on the visibility of the character object 31 in the moving image being distributed. Therefore, even if the normal gift is automatically displayed in the moving image (without the permission of the distribution users Ua and Ub) in response to the display request from the viewing user, the visibility of the character object 31 deteriorates, resulting in a deterioration of the user's viewing experience. Not prone to deterioration.

上記実施形態によれば、キャラクタオブジェクト31などのキャラクタオブジェクトを含む動画を視聴する視聴ユーザは、当該キャラクタオブジェクトに愛着があると考えられる。よって、エフェクトギフトや通常ギフトよりも、キャラクタオブジェクトに装着ギフトを装着させることで当該キャラクタオブジェクトの見栄えをよくすることができるので、当該装着ギフトを提供した視聴ユーザの満足度を高めることができる。このように、キャラクタオブジェクトが装着可能な装着オブジェクトにより、当該キャラクタオブジェクトが含まれる動画を繰り返し視聴する誘因をユーザに提供することができる。 According to the above embodiment, it is considered that a viewing user viewing a moving image including a character object such as the character object 31 is attached to the character object. Therefore, the appearance of the character object can be improved by equipping the character object with the equipping gift rather than the effect gift or the normal gift, so that the satisfaction of the viewing user who is provided with the equipping gift can be enhanced. In this way, the wearable object that can be worn by a character object can provide the user with an incentive to repeatedly watch a moving image including the character object.

上記実施形態による動画配信システム1においては、ユーザがキャラクタに対して装着オブジェクトを贈ることができる。これにより、かかる装着オブジェクトを贈ることができないシステムと比べて、独自性の高いシステムを提供することができ、当該システムにより独自性の高いサービスを提供することができる。これにより、動画配信システム1により多くのユーザを惹き付けることができるので、動画配信システム1における動画の視聴回数を多くすることができる。 In the moving image distribution system 1 according to the above-described embodiment, the user can give the wearable object to the character. As a result, it is possible to provide a highly unique system compared to a system in which such a wearable object cannot be given, and to provide a highly unique service by the system. As a result, more users can be attracted to the moving image distribution system 1, so that the number of views of moving images in the moving image distribution system 1 can be increased.

上記実施形態による動画配信システム1においては、配信ユーザUa,Ubは、スマートフォンなどのカメラを備えた配信ユーザ装置20により自らの表情に応じて動くキャラクタオブジェクトを含む動画を配信することができる。このように、動画配信システム1においては、配信ユーザUa,Ubが動画を配信するための設備が簡略化されているので、配信ユーザUa,Ubが参加しやすいプラットフォームが実現されている。 In the moving image distribution system 1 according to the above embodiment, the distribution users Ua and Ub can distribute moving images including character objects that move according to their facial expressions using the distribution user device 20 such as a smartphone equipped with a camera. In this way, in the moving image distribution system 1, facilities for distributing users Ua and Ub to distribute moving images are simplified, so a platform in which distribution users Ua and Ub can easily participate is realized.

本明細書において説明された処理手順、特にフロー図を用いて説明された処理手順においては、その処理手順を構成する工程(ステップ)の一部を省略すること、その処理手順を構成する工程として明示されていない工程を追加すること、及び/又は当該工程の順序を入れ替えることが可能であり、このような省略、追加、順序の変更がなされた処理手順も本発明の趣旨を逸脱しない限り本発明の範囲に含まれる。 In the processing procedures described in this specification, especially in the processing procedures described using flow diagrams, some of the steps that make up the processing procedure are omitted, and as a step that makes up the processing procedure It is possible to add unspecified steps and/or change the order of the steps, and the processing procedures in which such omissions, additions, and order changes do not deviate from the spirit of the present invention. Included within the scope of the invention.

コンピュータプロセッサ61により実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ61以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ61により実現される機能の少なくとも一部は、例えば、配信ユーザ装置20のコンピュータプロセッサ21により実現されてもよく、視聴ユーザ装置10のコンピュータプロセッサにより実現されてもよい。具体的には、アニメーション生成部61a及び動画生成部61bの機能の一部又は全部は、配信ユーザ装置20において実行されてもよい。例えば、配信ユーザ装置20において生成された動画がサーバ装置60に送信され、サーバ装置60から視聴ユーザ装置10に配信されてもよい。 At least part of the functions implemented by the computer processor 61 may be implemented by a computer processor other than the computer processor 61 of the video distribution system 1 . At least part of the functions implemented by the computer processor 61 may be implemented by the computer processor 21 of the distribution user device 20 or by the computer processor of the viewing user device 10, for example. Specifically, some or all of the functions of the animation generation unit 61 a and the moving image generation unit 61 b may be executed in the distribution user device 20 . For example, a video generated by the distribution user device 20 may be transmitted to the server device 60 and distributed from the server device 60 to the viewing user device 10 .

配信ユーザUbのキャラクタオブジェクト31を含む動画を視聴している配信ユーザUaから配信ユーザUbとの共演申請がなされる場合には、共演申請を行った配信ユーザUaのキャラクタオブジェクト131のアニメーションは、サーバ装置60、配信ユーザUaの配信ユーザ装置20a、配信ユーザUbの配信ユーザ装置20b、視聴ユーザ装置10、又はこれら以外の装置で生成されてもよい。一つの例において、配信ユーザUaのキャラクタオブジェクト131のアニメーションが配信ユーザUbの配信ユーザ装置20bで生成される場合には、配信ユーザUaの配信ユーザ装置20aから配信ユーザUbの配信ユーザ装置20bに対して、配信ユーザUaのフェイスモーションデータ及び音声データが送信される。配信ユーザ装置20bでは、配信ユーザ装置20aから受信した配信ユーザUaのフェイスモーションデータ及び音声データを配信ユーザUa用のモデルデータに適用することでキャラクタオブジェクト131のアニメーションが生成される。この配信ユーザUa用のモデルデータは、サーバ装置60から配信ユーザ装置20aへ送信されてもよい。他の例において、配信ユーザUaのキャラクタオブジェクト131のアニメーションが視聴ユーザ装置10で生成される場合には、配信ユーザUaの配信ユーザ装置20aから視聴ユーザ装置10に対して配信ユーザUaのフェイスモーションデータ及び音声データが送信され、配信ユーザUbの配信ユーザ装置20bから視聴ユーザ装置10に対して配信ユーザUbのフェイスモーションデータ及び音声データが送信される。視聴ユーザ装置10では、配信ユーザ装置20aから受信した配信ユーザUaのフェイスモーションデータ及び音声データを配信ユーザUa用のモデルデータに適用することでキャラクタオブジェクト131のアニメーションが生成され、配信ユーザ装置20bから受信した配信ユーザUbのフェイスモーションデータ及び音声データを配信ユーザUb用のモデルデータに適用することでキャラクタオブジェクト31のアニメーションが生成されてもよい。このを配信ユーザUa用のモデルデータ及び配信ユーザUb用のモデルデータは、サーバ装置60から視聴ユーザ装置10へ送信されてもよい。このように、配信ユーザのキャラクタオブジェクトのアニメーションは、動画配信システム1に含まれる任意の装置で生成され得る。キャラクタオブジェクトのアニメーションは、図1に明示的に示されていない装置で生成されてもよい。キャラクタオブジェクトのアニメーションを生成する装置には、配信ユーザUaの配信ユーザ装置20aから配信ユーザUaのフェイスモーションデータ及び音声データが送信され、配信ユーザUbの配信ユーザ装置20bから配信ユーザUbのフェイスモーションデータ及び音声データが送信される。フェイスモーションに加えてボディモーションが送信されてもよい。 When a distribution user Ua who is watching a video including a character object 31 of a distribution user Ub applies for co-starring with the distribution user Ub, the animation of the character object 131 of the distribution user Ua who applied for co-starring is performed by the server. It may be generated by the device 60, the broadcast user device 20a of the broadcast user Ua, the broadcast user device 20b of the broadcast user Ub, the viewing user device 10, or other devices. In one example, when the animation of the character object 131 of the broadcast user Ua is generated by the broadcast user device 20b of the broadcast user Ub, the animation from the broadcast user device 20a of the broadcast user Ua to the broadcast user device 20b of the broadcast user Ub Then, the face motion data and voice data of distribution user Ua are transmitted. The distribution user device 20b generates an animation of the character object 131 by applying the face motion data and voice data of the distribution user Ua received from the distribution user device 20a to the model data for the distribution user Ua. This model data for the distribution user Ua may be transmitted from the server device 60 to the distribution user device 20a. In another example, when the animation of the character object 131 of the distribution user Ua is generated by the viewing user device 10, the face motion data of the distribution user Ua is transmitted from the distribution user device 20a of the distribution user Ua to the viewing user device 10. and voice data are transmitted, and the face motion data and voice data of the broadcast user Ub are transmitted from the broadcast user device 20 b of the broadcast user Ub to the viewing user device 10 . The viewing user device 10 generates an animation of the character object 131 by applying the face motion data and voice data of the distribution user Ua received from the distribution user device 20a to the model data for the distribution user Ua. An animation of the character object 31 may be generated by applying the received face motion data and voice data of the distribution user Ub to the model data for the distribution user Ub. The model data for the distribution user Ua and the model data for the distribution user Ub may be transmitted from the server device 60 to the viewing user device 10 . In this way, the animation of the distribution user's character object can be generated by any device included in the moving image distribution system 1 . Animation of character objects may be generated by devices not explicitly shown in FIG. The device that generates the animation of the character object receives the face motion data and voice data of the broadcast user Ua from the broadcast user device 20a of the broadcast user Ua, and the face motion data of the broadcast user Ub from the broadcast user device 20b of the broadcast user Ub. and voice data are transmitted. Body motion may be transmitted in addition to face motion.

また、生成された配信ユーザUaのキャラクタオブジェクト131と配信ユーザUbの配信動画とキャラクタオブジェクト31とを含む共演動画の生成は、サーバ装置60、配信ユーザUaの配信ユーザ装置20a、配信ユーザUbの配信ユーザ装置20b、又は視聴ユーザ装置10のいずれで行われてもよい。 In addition, the generation of the co-starring moving image including the generated character object 131 of the distribution user Ua, the distribution moving image of the distribution user Ub, and the character object 31 is performed by the server device 60, the distribution user device 20a of the distribution user Ua, and the distribution of the distribution user Ub. It may be performed by either the user device 20b or the viewing user device 10. FIG.

共演動画は、三人以上の配信ユーザのキャラクタオブジェクトを含んでもよい。つまり、三人以上の配信ユーザが、各々のキャラクタオブジェクトを利用して動画内で仮想的に共演してもよい。 A co-starring moving image may include character objects of three or more delivery users. In other words, three or more distribution users may virtually co-star in a moving image using each character object.

以下に、本願の原出願の出願時の特許請求の範囲に記載された発明を付記する。
[1]
一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクトを含む第1動画を配信し、
前記第1動画を視聴する第2ユーザからの共演申請に基づいて、前記第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む共演動画を配信し、
前記共演動画を視聴する視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる一方で、前記第2ユーザが使用する第2ユーザ装置には前記表示指示オブジェクトを表示させず、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの少なくとも一方と対応付けて前記第1ギフトを表示する、
動画配信システム。
[2]
前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの一方のみと対応付けて前記第1ギフトを表示する、
[1]に記載の動画配信システム。
[3]
前記第1ユーザ装置における前記表示指示オブジェクトの操作により、前記共演動画において前記第2キャラクタオブジェクトに対応付けて前記第1ギフトを表示する、
[1]又は[2]に記載の動画配信システム。
[4]
前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの両方と対応付けて前記第1ギフトを表示する、
[1]に記載の動画配信システム。
[5]
前記第1ギフトは、前記第1キャラクタオブジェクト又は前記第2キャラクタオブジェクトの装着部位と関連付けられた装着ギフトであり、
前記装着ギフトは、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記装着部位と対応する位置に表示される、
[1]から[4]のいずれか1項に記載の動画配信システム。
[6]
前記視聴ユーザから前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの特定の部位と対応付けられずに第2ギフトに関する第2表示要求を受け付けたことに応じて、前記共演動画に前記第2ギフトを表示させる、
[1]から[5]のいずれか1項に記載の動画配信システム。
[7]
前記第2ギフトは、前記共演動画において移動するように表示される、
[6]に記載の動画配信システム。
[8]
前記表示指示オブジェクトは、操作によって選択可能なアクティベート状態と操作しても選択されないディアクティベート状態との間で切り替えられる、
[1]から[7]のいずれか1項に記載の動画配信システム。
[9]
前記第1動画は縦長の画像であり、前記共演動画は横長の画像である、
請求項1から9のいずれか1項に記載の動画配信システム。
[10]
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法であって、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクトを含む第1動画を配信する工程と、
前記第1動画を視聴する第2ユーザからの共演申請に基づいて、前記第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む共演動画を配信する工程と、
前記共演動画を視聴する視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる一方で、前記第2ユーザが使用する第2ユーザ装置には前記表示指示オブジェクトを表示させない工程と、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの少なくとも一方と対応付けて前記第1ギフトを表示する工程と、
を備える動画配信方法。
[11]
一又は複数のコンピュータプロセッサに、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクトを含む第1動画を配信する工程と、
前記第1動画を視聴する第2ユーザからの共演申請に基づいて、前記第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む共演動画を配信する工程と、
前記共演動画を視聴する視聴ユーザから第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる一方で、前記第2ユーザが使用する第2ユーザ装置には前記表示指示オブジェクトを表示させない工程と、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの少なくとも一方と対応付けて前記第1ギフトを表示する工程と、
を実行させる動画配信プログラム。
The invention described in the scope of claims as of the filing of the original application of the present application is additionally described below.
[1]
comprising one or more computer processors,
The one or more computer processors, by executing computer readable instructions,
distributing a first moving image including a first character object generated based on the movement of the first user;
distributing a co-starring video including a second character object generated based on the movement of the first character object and the second user, based on a co-starring application from a second user viewing the first video;
A display instruction object is displayed on the first user device of the first user in response to receiving a first display request regarding the first gift from the viewing user who watches the co-starring video, while the second user uses the display instruction object. do not display the display instruction object on the second user device,
displaying the first gift in association with at least one of the first character object and the second character object in the co-starring moving image in response to an operation on the display instruction object on the first user device;
video distribution system.
[2]
displaying the first gift in association with only one of the first character object and the second character object in the co-starring moving image in response to an operation on the display instruction object;
The moving image distribution system according to [1].
[3]
Displaying the first gift in association with the second character object in the co-starring moving image by operating the display instruction object on the first user device;
The moving image distribution system according to [1] or [2].
[4]
displaying the first gift in association with both the first character object and the second character object in the co-starring moving image in response to an operation on the display instruction object;
The moving image distribution system according to [1].
[5]
The first gift is an equipable gift associated with an equipable part of the first character object or the second character object,
The wearable gift is displayed at a position corresponding to the wearable part in the co-starring video in response to an operation on the display instruction object.
The moving image delivery system according to any one of [1] to [4].
[6]
adding the second gift to the co-starring moving image in response to receiving from the viewing user a second display request regarding the second gift without being associated with the specific parts of the first character object and the second character object; to display
The moving picture distribution system according to any one of [1] to [5].
[7]
the second gift is displayed to move in the co-starring video;
The moving image distribution system according to [6].
[8]
The display instruction object is switched between an activated state that can be selected by an operation and a deactivated state that is not selected by an operation.
The moving image distribution system according to any one of [1] to [7].
[9]
The first moving image is a vertically long image, and the co-starring moving image is a horizontally long image,
The moving image distribution system according to any one of claims 1 to 9.
[10]
A video distribution method performed by one or more computer processors executing computer readable instructions, comprising:
delivering a first moving image including a first character object generated based on the movement of the first user;
distributing a co-starring video including a second character object generated based on the movement of the first character object and the second user based on a co-starring application from a second user who watches the first video;
A display instruction object is displayed on the first user device of the first user in response to receiving a first display request regarding the first gift from the viewing user who watches the co-starring video, while the second user uses the display instruction object. a step of not causing the second user device to display the display instruction object;
displaying the first gift in association with at least one of the first character object and the second character object in the co-star moving image in response to an operation on the display instruction object on the first user device;
A video distribution method comprising:
[11]
to one or more computer processors;
delivering a first moving image including a first character object generated based on the movement of the first user;
distributing a co-starring video including a second character object generated based on the movement of the first character object and the second user based on a co-starring application from a second user who watches the first video;
A display instruction object is displayed on the first user device of the first user in response to receiving a first display request regarding the first gift from the viewing user who watches the co-starring video, while the second user uses the display instruction object. a step of not causing the second user device to display the display instruction object;
displaying the first gift in association with at least one of the first character object and the second character object in the co-star moving image in response to an operation on the display instruction object on the first user device;
A video distribution program that runs

1 動画配信システム 1 Video distribution system

Claims (21)

一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させ、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置及び前記第2ユーザが使用する第2ユーザ装置に表示指示オブジェクトを表示させ、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第1ユーザ装置の画面から前記表示指示オブジェクトを削除する一方で前記第2ユーザ装置の画面からは前記表示指示オブジェクトを削除しない、
動画配信システム。
comprising one or more computer processors,
The one or more computer processors, by executing computer readable instructions,
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. let
causing the first user device of the first user and the second user device used by the second user to display a display instruction object in response to receiving a first display request regarding the first gift from the viewing user device;
displaying the first gift in association with the first character object in the co-star moving image and displaying the display instruction object from the screen of the first user device in response to an operation on the display instruction object in the first user device; while not deleting the display instruction object from the screen of the second user device;
video distribution system.
前記一又は複数のコンピュータプロセッサは、前記第1ユーザ装置において前記表示指示オブジェクトが操作された後に前記第2ユーザ装置において前記表示指示オブジェクトが操作された場合に、前記共演動画において前記第2キャラクタオブジェクトに対応付けて前記第1ギフトを表示する、
請求項1に記載の動画配信システム。
The one or more computer processors, when the display instruction object is operated in the second user device after the display instruction object is operated in the first user device, is configured to generate the second character object in the co-starring moving image. displaying the first gift in association with
The moving picture delivery system according to claim 1.
前記共演動画において、前記第1ギフトが前記第1キャラクタオブジェクト及び前記第2キャラクタオブジェクトの両方に対応付けて表示される、
請求項2に記載の動画配信システム。
In the co-starring video, the first gift is displayed in association with both the first character object and the second character object.
The moving image distribution system according to claim 2.
一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させ、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させ、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記第1ユーザ装置において前記複数のキャラクタオブジェクトの中から指定キャラクタオブジェクトの指定を受け付け、
前記共演動画において前記指定キャラクタオブジェクトに対応付けて前記第1ギフトを表示する、
動画配信システム。
comprising one or more computer processors,
The one or more computer processors, by executing computer readable instructions,
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. let
displaying a display instruction object on the first user device of the first user in response to receiving a first display request regarding the first gift from the viewing user device;
receiving designation of a designated character object from among the plurality of character objects in the first user device in response to an operation on the display instruction object in the first user device;
displaying the first gift in association with the designated character object in the co-starring video;
video distribution system.
前記複数のキャラクタオブジェクトは、第3ユーザの動きに基づいて生成される第3キャラクタオブジェクトを含む、
請求項4に記載の動画配信システム。
the plurality of character objects include a third character object generated based on the movement of a third user;
The moving image distribution system according to claim 4.
前記一又は複数のコンピュータプロセッサは、前記表示指示オブジェクトが選択された場合に、前記複数のキャラクタオブジェクトのうちのいずれかを選択するための選択肢を前記第1ユーザ装置に表示する、
請求項4又は5に記載の動画配信システム。
The one or more computer processors display options for selecting one of the plurality of character objects on the first user device when the display instruction object is selected.
6. The moving picture distribution system according to claim 4 or 5.
一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させ、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置及び前記第2ユーザが使用する第2ユーザ装置に表示指示オブジェクトを表示させ、
前記第1ユーザ装置において前記表示指示オブジェクトが操作された場合には前記共演動画において前記第1キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第2ユーザ装置において前記表示指示オブジェクトを選択不能とし、前記第2ユーザ装置において前記表示指示オブジェクトが操作された場合には前記共演動画において前記第2キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第1ユーザ装置において前記表示指示オブジェクトを選択不能とする、
動画配信システム。
comprising one or more computer processors,
The one or more computer processors, by executing computer readable instructions,
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. let
a first user of the first user in response to receiving a first display request regarding a first gift from the viewing user device, in response to receiving a first display request regarding the first gift from the viewing user device causing the device and the second user device used by the second user to display a display instruction object;
When the display instruction object is operated on the first user device, the first gift is displayed in association with the first character object in the co-star moving image, and the display instruction object is selected on the second user device. When the display instruction object is operated on the second user device, the first gift is displayed in association with the second character object in the co-star moving image, and the display instruction is performed on the first user device. make the object unselectable,
video distribution system.
前記第1ギフトは、装着部位と関連付けられた装着ギフトであり、
前記装着ギフトは、前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記複数のキャラクタオブジェクトのいずれかの前記装着部位と対応する位置に表示される、
請求項1から7のいずれか1項に記載の動画配信システム。
the first gift is an attachment gift associated with an attachment site;
The wearable gift is displayed at a position corresponding to the wearable part of any one of the plurality of character objects in the co-starring moving image in response to an operation on the display instruction object.
The moving image delivery system according to any one of claims 1 to 7.
前記視聴ユーザから前記第1ギフトとは異なる第2ギフトに関する第2表示要求を受け付けたことに応じて、前記共演動画に前記第2ギフトを表示させる、
請求項1から8のいずれか1項に記載の動画配信システム。
displaying the second gift in the co-starring video in response to receiving a second display request regarding a second gift different from the first gift from the viewing user;
The moving image distribution system according to any one of claims 1 to 8.
前記第2ギフトは、前記複数のキャラクタオブジェクトの特定の部位と対応付けられずに前記共演動画に表示される、
請求項9に記載の動画配信システム。
the second gift is displayed in the co-starring video without being associated with specific parts of the plurality of character objects;
The moving picture delivery system according to claim 9.
前記第2ギフトは、前記共演動画において移動するように表示される、
請求項9又は10に記載の動画配信システム。
the second gift is displayed to move in the co-starring video;
The moving image distribution system according to claim 9 or 10.
前記第2ギフトは、前記視聴ユーザが前記第2ギフトを購入したことに応じて、前記共演動画に表示される、
請求項9から11のいずれか1項に記載の動画配信システム。
The second gift is displayed in the co-starring video in response to the viewing user purchasing the second gift,
The moving image distribution system according to any one of claims 9 to 11.
前記表示指示オブジェクトは、操作によって選択可能なアクティベート状態と操作しても選択されないディアクティベート状態との間で切り替えられる、
請求項1から12のいずれか1項に記載の動画配信システム。
The display instruction object is switched between an activated state that can be selected by an operation and a deactivated state that is not selected by an operation.
The moving image delivery system according to any one of claims 1 to 12.
前記共演動画は、前記視聴ユーザ装置により生成される、
請求項1から13のいずれか1項に記載の動画配信システム。
The co-starring video is generated by the viewing user device,
The moving image distribution system according to any one of claims 1 to 13.
前記共演動画は、前記第1ユーザ装置から受信した前記第1ユーザの動きを示す第1モーションデータ及び前記第2ユーザが使用する第2ユーザ装置から受信した前記第2ユーザの動きを示す第2モーションデータに基づいて生成される、
請求項14に記載の動画配信システム。
The co-starring video includes first motion data indicating the motion of the first user received from the first user device and second motion data indicating the motion of the second user received from the second user device used by the second user. generated based on motion data,
The moving image distribution system according to claim 14.
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法であって、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させる工程と、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置及び前記第2ユーザが使用する第2ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第1ユーザ装置の画面から前記表示指示オブジェクトを削除する一方で前記第2ユーザ装置の画面からは前記表示指示オブジェクトを削除しない工程と、
を備える動画配信方法。
A video distribution method performed by one or more computer processors executing computer readable instructions, comprising:
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. and
a step of displaying a display instruction object on the first user device of the first user and the second user device used by the second user in response to receiving a first display request regarding the first gift from the viewing user device; When,
displaying the first gift in association with the first character object in the co-star moving image and displaying the display instruction object from the screen of the first user device in response to an operation on the display instruction object in the first user device; while not deleting the display instruction object from the screen of the second user device;
A video distribution method comprising:
一又は複数のコンピュータプロセッサに、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させる工程と、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置及び前記第2ユーザが使用する第2ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記共演動画において前記第1キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第1ユーザ装置の画面から前記表示指示オブジェクトを削除する一方で前記第2ユーザ装置の画面からは前記表示指示オブジェクトを削除しない工程と、
を実行させる動画配信プログラム。
to one or more computer processors;
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. and
a step of displaying a display instruction object on the first user device of the first user and the second user device used by the second user in response to receiving a first display request regarding the first gift from the viewing user device; When,
displaying the first gift in association with the first character object in the co-star moving image and displaying the display instruction object from the screen of the first user device in response to an operation on the display instruction object in the first user device; while not deleting the display instruction object from the screen of the second user device;
A video distribution program that runs
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法であって、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させる工程と、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記第1ユーザ装置において前記複数のキャラクタオブジェクトの中から指定キャラクタオブジェクトの指定を受け付ける工程と、
前記共演動画において前記指定キャラクタオブジェクトに対応付けて前記第1ギフトを表示する工程と、
を備える動画配信方法。
A video distribution method performed by one or more computer processors executing computer readable instructions, comprising:
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. and
a step of displaying a display instruction object on the first user device of the first user in response to receiving a first display request regarding the first gift from the viewing user device;
a step of receiving designation of a designated character object from among the plurality of character objects on the first user device in response to an operation on the display instruction object on the first user device;
displaying the first gift in association with the designated character object in the co-starring video;
A video distribution method comprising:
一又は複数のコンピュータプロセッサに、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させる工程と、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記第1ユーザ装置における前記表示指示オブジェクトへの操作に応じて、前記第1ユーザ装置において前記複数のキャラクタオブジェクトの中から指定キャラクタオブジェクトの指定を受け付ける工程と、
前記共演動画において前記指定キャラクタオブジェクトに対応付けて前記第1ギフトを表示する工程と、
を実行させる動画配信プログラム。
to one or more computer processors;
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. and
a step of displaying a display instruction object on the first user device of the first user in response to receiving a first display request regarding the first gift from the viewing user device;
a step of receiving designation of a designated character object from among the plurality of character objects on the first user device in response to an operation on the display instruction object on the first user device;
displaying the first gift in association with the designated character object in the co-starring video;
A video distribution program that runs
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法であって、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させる工程と、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置及び前記第2ユーザが使用する第2ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記第1ユーザ装置において前記表示指示オブジェクトが操作された場合には前記共演動画において前記第1キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第2ユーザ装置において前記表示指示オブジェクトを選択不能とし、前記第2ユーザ装置において前記表示指示オブジェクトが操作された場合には前記共演動画において前記第2キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第1ユーザ装置において前記表示指示オブジェクトを選択不能とする工程と、
を備える動画配信方法。
A video distribution method performed by one or more computer processors executing computer readable instructions, comprising:
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. and
a first user of the first user in response to receiving a first display request regarding a first gift from the viewing user device, in response to receiving a first display request regarding the first gift from the viewing user device causing a device and a second user device used by the second user to display a display instruction object;
When the display instruction object is operated on the first user device, the first gift is displayed in association with the first character object in the co-star moving image, and the display instruction object is selected on the second user device. When the display instruction object is operated on the second user device, the first gift is displayed in association with the second character object in the co-star moving image, and the display instruction is performed on the first user device. making the object unselectable;
A video distribution method comprising:
一又は複数のコンピュータプロセッサに、
第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含む複数のキャラクタオブジェクトを含む共演動画を視聴ユーザの視聴ユーザ装置において再生させる工程と、
前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記視聴ユーザ装置から第1ギフトに関する第1表示要求を受け付けたことに応じて、前記第1ユーザの第1ユーザ装置及び前記第2ユーザが使用する第2ユーザ装置に表示指示オブジェクトを表示させる工程と、
前記第1ユーザ装置において前記表示指示オブジェクトが操作された場合には前記共演動画において前記第1キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第2ユーザ装置において前記表示指示オブジェクトを選択不能とし、前記第2ユーザ装置において前記表示指示オブジェクトが操作された場合には前記共演動画において前記第2キャラクタオブジェクトに対応付けて前記第1ギフトを表示するとともに前記第1ユーザ装置において前記表示指示オブジェクトを選択不能とする工程と、
を実行させる動画配信プログラム。
to one or more computer processors;
A co-star moving image including a plurality of character objects including a first character object generated based on the motion of the first user and a second character object generated based on the motion of the second user is reproduced on the viewing user device of the viewing user. and
a first user of the first user in response to receiving a first display request regarding a first gift from the viewing user device, in response to receiving a first display request regarding the first gift from the viewing user device causing a device and a second user device used by the second user to display a display instruction object;
When the display instruction object is operated on the first user device, the first gift is displayed in association with the first character object in the co-star moving image, and the display instruction object is selected on the second user device. When the display instruction object is operated on the second user device, the first gift is displayed in association with the second character object in the co-star moving image, and the display instruction is performed on the first user device. making the object unselectable;
A video distribution program that runs
JP2020035863A 2020-03-03 2020-03-03 Video distribution system, video distribution method and video distribution program Active JP7191883B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020035863A JP7191883B2 (en) 2020-03-03 2020-03-03 Video distribution system, video distribution method and video distribution program
JP2022195349A JP7462912B2 (en) 2020-03-03 2022-12-07 Video distribution system, video distribution method, and video distribution program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020035863A JP7191883B2 (en) 2020-03-03 2020-03-03 Video distribution system, video distribution method and video distribution program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019122907A Division JP6671528B1 (en) 2018-12-12 2019-07-01 Video distribution system, video distribution method, and video distribution program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022195349A Division JP7462912B2 (en) 2020-03-03 2022-12-07 Video distribution system, video distribution method, and video distribution program

Publications (3)

Publication Number Publication Date
JP2020099096A JP2020099096A (en) 2020-06-25
JP2020099096A5 JP2020099096A5 (en) 2021-12-02
JP7191883B2 true JP7191883B2 (en) 2022-12-19

Family

ID=71106114

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020035863A Active JP7191883B2 (en) 2020-03-03 2020-03-03 Video distribution system, video distribution method and video distribution program
JP2022195349A Active JP7462912B2 (en) 2020-03-03 2022-12-07 Video distribution system, video distribution method, and video distribution program

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022195349A Active JP7462912B2 (en) 2020-03-03 2022-12-07 Video distribution system, video distribution method, and video distribution program

Country Status (1)

Country Link
JP (2) JP7191883B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022028216A (en) * 2020-08-03 2022-02-16 株式会社セガ Program and information processing device
JP7194239B2 (en) * 2020-11-05 2022-12-21 グリー株式会社 Video distribution system, video distribution method and video distribution program
JP6923735B1 (en) * 2020-11-05 2021-08-25 グリー株式会社 Video distribution system, video distribution method and video distribution program
JP7288990B2 (en) * 2021-07-29 2023-06-08 グリー株式会社 Video distribution system, video distribution method and video distribution program

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6420930B1 (en) 2018-08-01 2018-11-07 グリー株式会社 Movie distribution system, movie distribution method, and movie distribution program for distributing movie including animation of character object generated based on movement of actor

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7355483B2 (en) 2016-12-15 2023-10-03 株式会社バンダイナムコエンターテインメント Game systems and programs

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6420930B1 (en) 2018-08-01 2018-11-07 グリー株式会社 Movie distribution system, movie distribution method, and movie distribution program for distributing movie including animation of character object generated based on movement of actor

Also Published As

Publication number Publication date
JP7462912B2 (en) 2024-04-08
JP2023027186A (en) 2023-03-01
JP2020099096A (en) 2020-06-25

Similar Documents

Publication Publication Date Title
JP6543403B1 (en) Video distribution system, video distribution method and video distribution program
JP6491388B1 (en) Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
JP6382468B1 (en) Movie distribution system, movie distribution method, and movie distribution program for distributing movie including animation of character object generated based on movement of actor
JP6420930B1 (en) Movie distribution system, movie distribution method, and movie distribution program for distributing movie including animation of character object generated based on movement of actor
US20240056653A1 (en) Video distribution system for live distributing video containing animation of character object generated based on motion of distributor user, distribution method, and storage medium storing video distribution program
JP7191883B2 (en) Video distribution system, video distribution method and video distribution program
CN110460892B (en) Moving image distribution system, moving image distribution method, and recording medium
JP6550546B1 (en) Video distribution system, video distribution method and video distribution program
JP2022130508A (en) Video distribution system for live-distributing video including animation of character object generated on the basis of motions of distributing user, method for distributing video, and video distribution program
JP6550549B1 (en) Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
JP6523586B1 (en) Video distribution system, video distribution method, and video distribution program for live distribution of a video including animation of a character object generated based on the movement of a distribution user
JP2024041749A (en) Moving image distribution system, moving image distribution method, and moving image distribution program
JP6671528B1 (en) Video distribution system, video distribution method, and video distribution program
WO2020121909A1 (en) Video distribution system, video distribution method, and video distribution program
KR102490402B1 (en) A moving image distribution system, a moving image distribution method, and a moving image distribution program for live distribution of a moving image including animation of a character object generated based on a distribution user&#39;s movement.
JP6713080B2 (en) Video distribution system, video distribution method, and video distribution program for live distribution of videos including animation of character objects generated based on movements of distribution users
JP7284329B2 (en) Video distribution system, video distribution method, and video distribution program for live distribution of video containing animation of character object generated based on movement of distribution user
JP2020043578A (en) Moving image distribution system, moving image distribution method, and moving image distribution program, for distributing moving image including animation of character object generated on the basis of movement of actor
JP7104097B2 (en) Distribution A video distribution system, video distribution method, and video distribution program that delivers live videos including animations of character objects generated based on user movements.
JP6828106B1 (en) Video distribution system, video distribution method and video distribution program
JP2023103424A (en) Moving image distribution system, moving image distribution method, and moving image distribution program for live distribution of moving image including animation of character object generated based on motion of distribution user
JP2020005238A (en) Video distribution system, video distribution method and video distribution program for distributing a video including animation of character object generated based on motion of actor
JP2019198057A (en) Moving image distribution system, moving image distribution method and moving image distribution program distributing moving image including animation of character object generated based on actor movement
JP2019198054A (en) Video distribution system for distributing video including animation of character object generated on the basis of actor movement and video distribution program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210622

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210622

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220517

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220707

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221207

R150 Certificate of patent or registration of utility model

Ref document number: 7191883

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150