JP6664534B1 - Video distribution system, video distribution method and video distribution program - Google Patents
Video distribution system, video distribution method and video distribution program Download PDFInfo
- Publication number
- JP6664534B1 JP6664534B1 JP2019122862A JP2019122862A JP6664534B1 JP 6664534 B1 JP6664534 B1 JP 6664534B1 JP 2019122862 A JP2019122862 A JP 2019122862A JP 2019122862 A JP2019122862 A JP 2019122862A JP 6664534 B1 JP6664534 B1 JP 6664534B1
- Authority
- JP
- Japan
- Prior art keywords
- user
- star
- distribution
- video
- starring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000009826 distribution Methods 0.000 title claims abstract description 629
- 238000000034 method Methods 0.000 title claims description 47
- 238000011156 evaluation Methods 0.000 claims description 156
- 230000004044 response Effects 0.000 claims description 28
- 238000010586 diagram Methods 0.000 abstract description 9
- 238000012545 processing Methods 0.000 description 38
- 230000006870 function Effects 0.000 description 26
- 230000008569 process Effects 0.000 description 26
- 238000004891 communication Methods 0.000 description 11
- 230000009471 action Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 230000008921 facial expression Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 230000006855 networking Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Abstract
【課題】動画内で仮想的に共演する共演相手を選抜できる動画配信システムを提供する。【解決手段】動画配信システム1におけるサーバ装置60は、一又は複数のコンピュータプロセッサ61を備え、コンピュータ読み取り可能な命令を実行し、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、第2ユーザに関する共演申請者情報に基づいて第2ユーザの共演可否を判定する。判定結果が、第2ユーザの共演が許可された場合に、第1ユーザと第2ユーザとが共演する共演動画を生成し、共演動画を一又は複数の視聴ユーザに配信する。【選択図】図1PROBLEM TO BE SOLVED: To provide a video distribution system capable of selecting a co-star to virtually co-star in a video. A server device 60 in a moving image distribution system 1 includes one or a plurality of computer processors 61, executes computer-readable instructions, and accepts a co-starring application for co-starring a first user from a second user. According to the fact, it is determined whether or not the second user can co-star based on the co-star applicant information regarding the second user. If the determination result indicates that the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-starred is generated, and the co-starring video is distributed to one or more viewing users. [Selection diagram] Fig. 1
Description
本明細書における開示は、動画配信システム、動画配信方法及び動画配信プログラムに関する。本明細書における開示は、より具体的には、ユーザの動きに基づいて生成されるキャラクタオブジェクトを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラムに関する。 The disclosure herein relates to a moving image distribution system, a moving image distribution method, and a moving image distribution program. More specifically, the disclosure in this specification relates to a moving image distribution system, a moving image distribution method, and a moving image distribution program for live distribution of a moving image including a character object generated based on a user's movement.
従来から、配信ユーザの動きに基づいてキャラクタオブジェクトのアニメーションを生成し、かかるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システムが知られている。このような動画配信システムは、例えば、特開2015−184689号公報(特許文献1)及び「長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74−79」(非特許文献1)に開示されている。 2. Description of the Related Art A moving image distribution system that generates an animation of a character object based on a motion of a distribution user and that performs live distribution of a moving image including the animation of the character object has been known. Such a moving image distribution system is disclosed in, for example, Japanese Patent Application Laid-Open No. 2015-184689 (Patent Document 1) and "Yusuke Hasegawa, The Beginning of a New Era of Virtual Idol PROJECT MariA, CG World, Japan, Born Digital, November 2017 10, Vol. 231 pp. 74-79 ”(Non-Patent Document 1).
配信ユーザの動きに基づいて生成されたキャラクタオブジェクトを含む動画を配信する動画配信サービスが提供されている。このようなサービスとして、株式会社ドワンゴが提供する「バーチャルキャスト」が知られている。バーチャルキャストでは、ある配信ユーザが配信している動画に他のユーザのキャラクタオブジェクトが入り込み、二人の配信ユーザが各々のキャラクタオブジェクトを介して動画内で仮想的に共演することができる。 A moving image distribution service that distributes a moving image including a character object generated based on a movement of a distribution user has been provided. As such a service, “Virtual Cast” provided by Dwango Co., Ltd. is known. In the virtual cast, a character object of another user enters a moving image distributed by a certain distribution user, and two distribution users can virtually co-star in the moving image via each character object.
配信動画のクオリティを保つために、どのような配信ユーザが共演相手であるかは、配信ユーザにとって重大な関心事である。しかしながら、現実世界で出演者がスタジオに集まって共演する場合と異なり、キャラクタオブジェクトを介して仮想的に共演する場合には、共演相手の配信ユーザのことを把握することが困難である。他のユーザから共演の申請があった場合に、その申請を自動的に受け入れたり、配信ユーザの決定に委ねたりすると、配信動画内で望ましくない振る舞いを行う共演相手が現れるおそれがある。動画内での共演がキャラクタオブジェクトを介して行われる場合には、共演相手に匿名性があるため、望ましくない行動を取ることに歯止めがかかりにくい。 In order to maintain the quality of a distribution moving image, what distribution user is a co-star is a serious concern for the distribution user. However, unlike the case where performers gather in a studio and co-star in the real world, it is difficult to grasp the distribution user of the co-star in the case of performing virtually together via a character object. If a request for a co-star is received from another user, if the request is automatically accepted or left to the decision of the distribution user, a co-star who performs an undesired behavior in the distribution moving image may appear. When a co-star in a moving image is performed via a character object, the co-stars have anonymity, so that it is difficult to stop taking undesired actions.
このように、キャラクタオブジェクトを介して動画内で複数の配信ユーザが仮想的に共演する場合、配信動画のクオリティを確保するために、共演相手の選択を適切に行うことが望まれる。しかしながら、上記のように、現実世界での共演とは異なり、動画の配信前に共演相手が望ましい行動を取るか予測することが困難である。 As described above, when a plurality of distribution users virtually co-star in a moving image via a character object, it is desired to appropriately select a co-star in order to ensure the quality of the distribution moving image. However, as described above, unlike co-starring in the real world, it is difficult to predict whether a co-starring partner will take a desired action before distribution of a moving image.
本開示の目的は、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することである。本開示のより具体的な目的の一つは、動画内で仮想的に共演する共演相手を選抜できる動画配信システム、動画配信方法及び動画配信プログラムを提供することである。 It is an object of the present disclosure to provide a technical improvement that solves or alleviates at least some of the problems of the prior art described above. One of more specific objects of the present disclosure is to provide a moving image distribution system, a moving image distribution method, and a moving image distribution program capable of selecting a co-star who virtually co-stars in a moving image.
本発明の一態様による動画配信システムは、一又は複数のコンピュータプロセッサを備えている。一態様において、当該一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、前記共演動画を一又は複数の視聴ユーザに配信する。共演可否の判定は、前記第1ユーザに関する共演申請者情報に基づいて行われてもよい。 A moving image distribution system according to one aspect of the present invention includes one or more computer processors. In one aspect, the one or more computer processors execute a computer-readable command to execute the second user in response to receiving, from a second user, a co-star application requesting a co-star with the first user. Determining whether or not the second user can co-star based on the co-star applicant information, and generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted. And distributing the co-star movie to one or more viewing users. The determination as to whether or not to perform together may be made based on co-star applicant information regarding the first user.
本発明の一態様においては、前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含むキャラクタ共演動画である。本発明の他の態様において、前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの音声を含む音声共演動画である。前記キャラクタ共演動画と前記音声共演動画とは交互に切り替え可能であってもよい。 In one aspect of the present invention, the co-starring moving image is a character co-star including a first character object generated based on the movement of the first user and a second character object generated based on the movement of the second user. It is a movie. In another aspect of the present invention, the co-star movie is a voice co-star movie including a first character object generated based on a motion of the first user and a voice of the second user. The character co-star movie and the audio co-star movie may be alternately switchable.
本発明の一態様において、共演申請者情報は、前記第2ユーザに対する評価を示すユーザ評価情報を含む。 In one embodiment of the present invention, the co-star applicant information includes user evaluation information indicating an evaluation for the second user.
本発明の一態様において、共演申請者情報は、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む。 In one aspect of the present invention, the co-star applicant information includes moving image evaluation information indicating an evaluation of the moving image distributed by the second user.
本発明の一態様において、共演申請者情報は、前記第2ユーザの動画配信時間又は動画配信回数を含む。 In one embodiment of the present invention, the co-star applicant information includes a moving image distribution time or a moving image distribution number of the second user.
本発明の一態様において、共演申請者情報は、前記第2ユーザが共演を禁止されているユーザを特定する共演禁止情報を含む。 In one embodiment of the present invention, the co-star applicant information includes co-star prohibition information for specifying a user whose co-star is prohibited by the second user.
本発明の一態様における動画配信システムは、前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する。 The moving image distribution system according to an aspect of the present invention includes the step of, when it is determined that the second character object is in a non-active state in the co-starred moving image based on motion data indicating the movement of the second user, The second character object is excluded.
本発明の一態様における動画配信システムは、前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する。 The moving image distribution system according to an aspect of the present invention excludes the second character object from the co-starred moving image based on co-star evaluation information indicating evaluation of the second user from the viewing user during distribution of the co-starring moving image.
本発明の一態様における動画配信システムは、前記第1ユーザからの要求に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する。 The moving image distribution system according to one aspect of the present invention excludes the second character object from the co-starring moving image based on a request from the first user.
本発明の一態様は、一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法に関する。当該動画配信方法は、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、前記共演動画を一又は複数の視聴ユーザに配信する工程と、を備える。 One embodiment of the present invention relates to a moving image distribution method executed by one or more computer processors executing computer-readable instructions. The moving image distribution method includes, in response to receiving, from a second user, a co-star application for applying for a co-star with a first user, based on co-star applicant information relating to the first user or the second user, A step of determining whether or not the co-starring is possible; a step of generating a co-starring video in which the first user and the second user co-star when the co-starring of the second user is permitted; Delivering to the viewing user.
本発明の一態様は、動画配信プログラムに関する。当該動画配信プログラムは、一又は複数のコンピュータプロセッサに、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、前記共演動画を一又は複数の視聴ユーザに配信する工程と、を実行させる。 One embodiment of the present invention relates to a moving image distribution program. The moving image distribution program, in response to receiving, from a second user, a co-star application for co-starring with a first user to one or more computer processors, co-star applicant information about the first user or the second user Judging whether or not the second user can co-star, and generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted; Distributing the co-star movie to one or more viewing users.
本発明の実施形態によれば、動画内で仮想的に共演する共演相手を選抜することができる。 According to the embodiment of the present invention, it is possible to select a co-star who virtually co-stars in a moving image.
以下、図面を適宜参照し、本発明の様々な実施形態を説明する。複数の図面において同一の又は類似する構成要素には同じ参照符号が付される。 Hereinafter, various embodiments of the present invention will be described with reference to the drawings as appropriate. The same reference numerals are given to the same or similar components in a plurality of drawings.
図1及び図2を参照して、一実施形態による動画配信システムについて説明する。図1は、一実施形態による動画配信システム1を示すブロック図であり、図2は、動画配信システム1で動画を配信するユーザUa,Ub及び当該ユーザUa,Ubが使用している配信ユーザ装置20a,20bを模式的に示す模式図である。配信ユーザ装置20aは、動画配信システム1において、ユーザUaの動きに基づいて生成されるキャラクタオブジェクトを含む動画を配信するための機能を有し、配信ユーザ装置20bは、動画配信システム1において、ユーザUbの動きに基づいて生成されるキャラクタオブジェクトを含む動画を配信するための機能を有する。詳しくは後述するように、動画配信システム1は、二人以上の配信ユーザのキャラクタオブジェクトを含む動画を生成し、当該動画を配信することができる。言い換えると、動画配信システム1においては、二人以上の配信ユーザが動画内で各々のキャラクタオブジェクトを介して仮想的に共演することができる。このように、二人以上の配信ユーザが各々のキャラクタオブジェクトを介して動画内で仮想的に共演している場合、その動画を共演動画と呼ぶ。例えば、ユーザUbの動きに基づいて生成されるキャラクタオブジェクトを含む動画が配信されているときに、ユーザUaがユーザUbとの共演を申請することができる。この共演申請が許可されると、ユーザUbのキャラクタオブジェクトとユーザUaのキャラクタオブジェクトとを含む共演動画が生成され、当該共演動画が配信される。配信ユーザ装置20a,20bは、動画配信システム1において配信される動画を視聴する機能を有していてもよい。
A moving image distribution system according to an embodiment will be described with reference to FIGS. FIG. 1 is a block diagram illustrating a moving
動画配信システム1は、視聴ユーザ装置10と、配信ユーザ装置20a,20bと、サーバ装置60と、ストレージ70と、を備える。視聴ユーザ装置10と、配信ユーザ装置20と、サーバ装置60と、ストレージ70とは、ネットワーク50を介して相互に通信可能に接続されている。サーバ装置60は、後述するように、配信ユーザUa及び配信ユーザUbのキャラクタオブジェクトのアニメーションを含む動画を配信するように構成される。サーバ装置60は、動画配信サービス以外にも、ユーザ同士が交流するためのソーシャルネットワーキングサービスまたは当該サービス用のプラットフォーム機能を提供してもよい。
The moving
動画配信システム1において、動画は、サーバ装置60から視聴ユーザ装置10及び配信ユーザ装置20a,20bに配信される。配信された動画は、視聴ユーザ装置10のディスプレイに表示される。視聴ユーザ装置10のユーザである視聴ユーザは、配信された動画を視聴ユーザ装置10により視聴することができる。図面を簡潔するために図1には視聴ユーザ装置10が1台だけ示されているが、動画配信システム1は、複数の視聴ユーザ装置を備えていてもよい。配信ユーザUa,Ubは、配信された動画を視聴することにより、動画中の動画を確認しながらパフォーマンスを行うことができる。また、配信ユーザUa,Ubは、他のユーザのキャラクタオブジェクトを含む動画を配信ユーザ装置20a,20bにより視聴することができる。
In the moving
図示の実施形態において、配信ユーザ装置20aは、コンピュータプロセッサ21aと、通信I/F22aと、ディスプレイ23aと、カメラ24aと、マイク25aと、を備えている。同様に、配信ユーザ装置20bは、コンピュータプロセッサ21bと、通信I/F22bと、ディスプレイ23bと、カメラ24bと、マイク25bと、を備えている。配信ユーザ装置20aと配信ユーザ装置20bとは同様の構成及び機能を有しているため、両者を特に区別する必要がない場合には、両者をまとめて配信ユーザ装置20と呼ぶことがあり、その構成要素もコンピュータプロセッサ21などと呼ぶことがある。
In the illustrated embodiment, the
コンピュータプロセッサ21は、ストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ21は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ21は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ21は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。 The computer processor 21 is an arithmetic unit that loads an operating system and various programs for realizing various functions from a storage into a memory, and executes instructions included in the loaded programs. The computer processor 21 is, for example, a CPU, an MPU, a DSP, a GPU, various arithmetic devices other than these, or a combination thereof. The computer processor 21 may be realized by an integrated circuit such as an ASIC, a PLD, an FPGA, and an MCU. Although the computer processor 21 is illustrated as a single component in FIG. 1, the computer processor 21 may be a set of a plurality of physically separate computer processors.
通信I/F22は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。配信ユーザ装置20は、通信I/F22を介して、他の装置とデータを送受信することができる。 The communication I / F 22 is implemented as hardware, firmware, communication software such as a TCP / IP driver or a PPP driver, or a combination thereof. The distribution user device 20 can transmit and receive data to and from another device via the communication I / F 22.
ディスプレイ23は、表示パネルと、タッチパネルと、を有する。タッチパネルは、プレイヤのタッチ操作(接触操作)を検出することができるように構成されている。タッチパネルは、プレイヤのタップ、ダブルタップ、ドラッグ等の各種タッチ操作を検出することができる。タッチパネルは、静電容量式の近接センサを備え、プレイヤの非接触操作を検出可能に構成されてもよい。 The display 23 has a display panel and a touch panel. The touch panel is configured to detect a player's touch operation (contact operation). The touch panel can detect various touch operations such as tap, double tap, and drag of the player. The touch panel may include a proximity sensor of a capacitance type, and may be configured to be able to detect a non-contact operation of the player.
カメラ24は、配信ユーザUa,Ubの顔を連続的に撮像し、配信ユーザUa,Ubの顔の撮像データを取得する。カメラ24により撮像された配信ユーザUa,Ubの顔の撮像データは、通信I/F22を介してサーバ装置60に送信される。カメラ24は、人物の顔の奥行きを検出可能な3Dカメラであってもよい。 The camera 24 continuously captures images of the faces of the distribution users Ua and Ub, and acquires image data of the faces of the distribution users Ua and Ub. Image data of the faces of the distribution users Ua and Ub captured by the camera 24 are transmitted to the server device 60 via the communication I / F 22. The camera 24 may be a 3D camera that can detect the depth of a person's face.
マイク25は、入力された音声を音声データに変換するように構成された集音装置である。マイク25は、配信ユーザUa,Ubの音声入力を取得することができるように構成され。マイク25により取得された配信ユーザUa,Ubの音声入力は音声データに変換され、この音声データが通信I/F22を介してサーバ装置60に送信される。 The microphone 25 is a sound collection device configured to convert input sound into sound data. The microphone 25 is configured to be able to acquire the voice input of the distribution users Ua and Ub. The voice input of the distribution users Ua and Ub acquired by the microphone 25 is converted into voice data, and the voice data is transmitted to the server device 60 via the communication I / F 22.
視聴ユーザ装置10は、配信ユーザ装置20と同様の構成要素を備えてもよい。例えば、視聴ユーザ装置10は、コンピュータプロセッサ、通信I/F、ディスプレイ、及びカメラを備えてもよい。視聴ユーザ装置10は、所定のアプリケーションソフトウェアをダウンロード及びインストールすることにより、配信ユーザ装置20と同様の機能を奏してもよい。
The
視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォンなどの情報処理装置である。視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォン以外に、携帯電話機、タブレット端末、パーソナルコンピュータ、電子書籍リーダー、ウェアラブルコンピュータ、ゲーム用コンソール、及びこれら以外の動画を再生可能な各種情報処理装置であってもよい。視聴ユーザ装置10及び配信ユーザ装置20の各々は、上記の構成要素以外に、ジャイロセンサ等の各種センサを備えるセンサユニット、及び各種情報を記憶するストレージを備えてもよい。
The
次に、サーバ装置60について説明する。図示の実施形態において、サーバ装置60は、コンピュータプロセッサ61と、通信I/F62と、ストレージ63と、を備えている。
Next, the server device 60 will be described. In the illustrated embodiment, the server device 60 includes a computer processor 61, a communication I / F 62, and a
コンピュータプロセッサ61は、ストレージ63又はその他のストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ61は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ61は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ61が単一の構成要素として図示されているが、コンピュータプロセッサ61は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。
The computer processor 61 is an arithmetic unit that loads an operating system and various programs for realizing various functions from the
通信I/F62は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。サーバ装置60は、通信I/F62を介して、他の装置とデータを送受信することができる。 The communication I / F 62 is implemented as hardware, firmware, communication software such as a TCP / IP driver or a PPP driver, or a combination thereof. The server device 60 can transmit and receive data to and from another device via the communication I / F 62.
ストレージ63は、コンピュータプロセッサ61によりアクセスされる記憶装置である。ストレージ63は、例えば、磁気ディスク、光ディスク、半導体メモリ、又はデータを記憶可能な前記以外の各種記憶装置である。ストレージ63には、様々なプログラムが記憶され得る。ストレージ63に記憶され得るプログラム及び各種データの少なくとも一部は、サーバ装置60とは物理的に別体のストレージ(例えば、ストレージ70)に格納されてもよい。
The
本明細書において、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるとして説明されるプログラム又は当該プログラムに含まれる命令はそれぞれ、単一のコンピュータプロセッサで実行されてもよいし、複数のコンピュータプロセッサにより分散して実行されてもよい。また、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるプログラム又は当該プログラムに含まれる命令はそれぞれ、複数の仮想コンピュータプロセッサにより実行されてもよい。 In the present specification, a program described as being executed by the computer processor 21 or the computer processor 61 or instructions included in the program may be executed by a single computer processor or distributed by a plurality of computer processors. May be executed. Further, a program executed by the computer processor 21 or 61 or instructions included in the program may be executed by a plurality of virtual computer processors.
次に、ストレージ63に記憶されるデータについて説明する。図示の実施形態においては、ストレージ63には、モデルデータ63a、オブジェクトデータ63b、共演申請者情報63c、共演動画情報63d、及び前記以外の配信動画の生成及び配信に必要な様々なデータが記憶される。
Next, data stored in the
モデルデータ63aは、キャラクタのアニメーションを生成するためのモデルデータである。モデルデータ63aは、3次元のアニメーションを生成するための3次元モデルデータであってもよいし、2次元のモデルデータを生成するための2次元モデルデータであってもよい。モデルデータ63aは、例えば、キャラクタの顔及び顔以外の部分の骨格を示すリグデータ(「スケルトンデータ」と呼ばれることもある。)と、キャラクタの表面の形状や質感を示す表面データと、を含む。モデルデータ63aには、互いに異なる複数のモデルデータを含むことができる。この複数のモデルデータは、互いに異なるリグデータを有していてもよいし、同じリグデータを有していてもよい。この複数のモデルデータは、互いと異なる表面データを有していてもよいし、同じ表面データを有していてもよい。 The model data 63a is model data for generating a character animation. The model data 63a may be three-dimensional model data for generating a three-dimensional animation, or two-dimensional model data for generating two-dimensional model data. The model data 63a includes, for example, rig data (sometimes called “skeleton data”) indicating the skeleton of the character's face and parts other than the face, and surface data indicating the shape and texture of the character's surface. The model data 63a can include a plurality of different model data. The plurality of model data may have different rig data, or may have the same rig data. The plurality of model data may have different surface data from each other, or may have the same surface data.
オブジェクトデータ63bは、動画を構成する仮想空間を構築するためのアセットデータを含む。オブジェクトデータ63bは、動画を構成する仮想空間の背景を描画するためのデータ、動画に表示される各種物体を描画するためのデータ、及びこれら以外の動画に表示される各種オブジェクトを描画するためのデータが含まれる。オブジェクトデータ63bには、仮想空間におけるオブジェクトの位置を示すオブジェクト位置情報を含んでもよい。 The object data 63b includes asset data for constructing a virtual space forming a moving image. The object data 63b includes data for drawing the background of the virtual space forming the moving image, data for drawing various objects displayed in the moving image, and data for drawing various objects displayed in the moving image other than these. Contains data. The object data 63b may include object position information indicating the position of the object in the virtual space.
共演申請者情報63cの例が図3に示されている。図示のように、共演申請者情報63cとして、動画配信システム1を利用するユーザのアカウント情報と対応付けて、当該ユーザに関する様々なデータが記憶される。後述するように、共演申請者情報63cは、ユーザが他のユーザとの共演申請を行った場合に、当該申請を許可するか否かを判定するために参照され得る。あるユーザの共演申請者情報63cには、当該ユーザに対する評価を示すユーザ評価情報、当該ユーザが配信した動画した動画に対する評価示す動画評価情報、当該ユーザが配信した動画の配信時間を示す配信時間、当該ユーザが配信した動画の配信回数、及び当該ユーザとの共演が禁止されている共演禁止情報が含まれてもよい。共演申請者情報63cには、上記以外の情報が含まれてもよい。
FIG. 3 shows an example of the co-star applicant information 63c. As illustrated, various data regarding the user is stored as the co-applicant applicant information 63c in association with the account information of the user using the
ユーザのアカウント情報は、例えば、当該ユーザを識別するユーザ識別情報(ユーザID)である。ユーザIDは、ユーザが最初に動画配信システム1にサービスの利用登録をするときに、当該ユーザに対して割り当てられる。
The user account information is, for example, user identification information (user ID) for identifying the user. The user ID is assigned to the user when the user first registers the use of the service in the moving
ユーザのアカウント情報に対応付けられているユーザ評価情報は、当該ユーザに対する他のユーザからの評価を示す情報である。ユーザ評価情報は、例えば、自然数で表されるユーザ評価ポイントである。動画配信システム1のユーザは、自らのキャラクタオブジェクトを含む動画をサーバ装置60を介して配信することができる。あるユーザのユーザ評価ポイントは、当該ユーザが配信した動画に対する視聴ユーザからのフィードバックに基づいて更新されてもよい。例えば、視聴ユーザからのフィードバックには、視聴画面に表示される「いいね」ボタンの選択、否定的な評価を表す「ブー」ボタンの選択、視聴画面に表示されるアイテムのギフトのギフティング(ギフトを贈ること)、視聴画面からのコメントの送信、及びこれら以外の様々なフィードバックが含まれる。「いいね」ボタンは、視聴者が視聴動画や視聴動画を配信している配信ユーザに対して好感を持ったときに選択されることが想定されている。「いいね」ボタンは、視聴画面において、「いいね」や「Like」という好感を示す文字を含むアイコンとして示されてもよい。「ブー」ボタンは、視聴者が視聴動画や視聴動画を配信している配信ユーザに対して反感などのネガティブな印象を持ったときに選択されることが想定されている。「ブー」ボタンは、視聴画面において、「よくないね」や「disike」という反感を示す文字を含むアイコンとして示されてもよい。本明細書では、好感を示すためのボタン及びアイコンをそれぞれ「好感ボタン」及び「好感アイコン」と呼び、反感を示すためのボタン及びアイコンをそれぞれ「反感ボタン」及び「反感アイコン」と呼ぶことがある。評価ポイントには、好感ボタンの選択数、反感ボタンの選択数、ギフトのギフティング数(もしくはギフティング金額)、コメント数、又はこれら以外の視聴ユーザからのフィードバックに関連するパラメータが含まれ得る。例えば、視聴ユーザから肯定的なフィードバック又は否定的なフィードバックがなされた場合に、ユーザ評価ポイントを増加させてもよい。ユーザ評価ポイントは、視聴ユーザからの肯定的なフィードバックの数又は量をポイント数として評価するものであってもよいし、視聴ユーザからの否定的なフィードバックの数又は量をポイント数として評価するものであってもよい。さらに肯定的なフィードバックと否定的なフィードバックのそれぞれの数により、ユーザ評価ポイントが増減するようになっていてもよい。より具体的には、肯定的なフィードバックがなされた場合にユーザ評価ポイントを増加させ、否定的なフィードバックがなされた場合に減らす、もしくはその逆であってもよい。。あるユーザのユーザ評価ポイントは、当該ユーザが配信した動画に対するフィードバック以外の契機で更新されてもよい。たとえば、あるユーザが他のユーザとサーバ装置60が提供するソーシャルネットワーキングサービスを利用して交流する際に、当該ソーシャルネットワーキングサービスを利用した活動に基づいてユーザ評価ポイントが更新されてもよい。
The user evaluation information associated with the user account information is information indicating an evaluation of the user by another user. The user evaluation information is, for example, a user evaluation point represented by a natural number. The user of the moving
ユーザのアカウント情報に対応付けられている動画評価情報は、当該ユーザが配信した動画に対する他のユーザからの評価を示す情報である。動画評価情報は、例えば、自然数で表される動画評価ポイントである。あるユーザの動画評価ポイントは、当該ユーザが配信した動画に対する視聴ユーザからのフィードバックに基づいて更新されてもよい。あるユーザが配信した動画に対して、当該動画を視聴した視聴ユーザから肯定的なフィードバックがなされた場合又は否定的なフィードバックがなされた場合に、当該ユーザの動画評価ポイントを増加させてもよい。あるユーザが配信した動画に対してフィードバックがなされた場合には、ユーザ評価ポイント及び動画評価ポイントを両方とも更新してもよい。 The moving image evaluation information associated with the user's account information is information indicating evaluation of the moving image distributed by the user from another user. The moving image evaluation information is, for example, moving image evaluation points represented by natural numbers. A video evaluation point of a certain user may be updated based on feedback from a viewing user to a video distributed by the user. When a positive feedback or a negative feedback is given to a moving image distributed by a user from a viewing user who has viewed the moving image, the moving image evaluation points of the user may be increased. When feedback is provided for a moving image distributed by a certain user, both the user evaluation points and the moving image evaluation points may be updated.
ユーザのアカウント情報に対応付けられている配信時間は、当該ユーザが配信した動画の配信時間である。この配信時間は、動画配信システム1の利用開始からの総配信時間であってもよいし、ある一定の期間における配信時間であってもよい。ユーザのアカウント情報に対応付けられている配信回数は、当該ユーザが配信した動画の配信回数である。この配信回数は、動画配信システム1の利用開始からの総配信時間であってもよいし、ある一定の期間における配信回数であってもよい。
The distribution time associated with the user's account information is the distribution time of the moving image distributed by the user. This distribution time may be a total distribution time from the start of use of the moving
ユーザのアカウント情報に対応付けられている共演禁止情報は、当該ユーザを共演禁止ユーザとして指定している他のユーザのユーザIDである。動画配信システム1において、あるユーザは、共演を行わない他のユーザを指定することができる。例えば、ユーザAは、自らが配信する動画において望ましくない行動をとると思われるユーザBを共演禁止ユーザとして指定することができる。この場合、ユーザBのユーザIDと対応付けて、ユーザAのユーザIDが共演禁止情報として記憶される。ユーザAがユーザBを共演禁止ユーザとして指定する場合、ユーザAのユーザIDと対応付けてユーザBのユーザIDを共演禁止情報として記憶してもよい。
The co-starring prohibition information associated with the user's account information is the user ID of another user who has designated the user as a co-starring prohibiting user. In the
共演動画情報の例が図4に示されている。図示のように、共演動画情報63dとして、共演動画を識別する共演動画識別情報と対応付けて、当該共演動画に関する様々なデータが記憶される。ある共演動画の共演動画情報63dには、当該共演動画における共演ユーザに対する評価を示す共演ユーザ評価情報、及び当該共演動画の共演開始からの経過時間を示す共演時間情報が含まれてもよい。 FIG. 4 shows an example of the co-moving image information. As illustrated, various data related to the co-star moving image is stored as the co-star moving image information 63d in association with the co-star moving image identification information for identifying the co-star moving image. The co-starring video information 63d of a certain co-starring video may include co-starring user evaluation information indicating the evaluation of the co-starring user in the co-starring video, and co-starring time information indicating the elapsed time from the start of the co-starring video.
あるユーザが他のユーザとの共演申請を行い当該共演申請が許可されて共演動画が配信される場合、その共演申請を行ったユーザを「共演ユーザ」と呼ぶことがある。また、元々動画の配信を行っており、共演申請を受けたユーザを「ホストユーザ」と呼ぶことがある。共演ユーザ情報は、ホストユーザではなく共演ユーザに対する評価を示す。ある共演ユーザの共演ユーザ評価情報は、例えば、自然数で表される共演ユーザ評価ポイントである。 When a certain user makes a co-star application with another user and the co-star application is permitted and a co-star video is distributed, the user who has performed the co-star application may be referred to as a "co-star user". In addition, a user who originally distributes a moving image and has received a co-star application may be referred to as a “host user”. The co-star user information indicates an evaluation for the co-star user, not the host user. The co-star user evaluation information of a certain co-star user is, for example, a co-star user evaluation point represented by a natural number.
共演時間情報は、共演ユーザとホストユーザとの共演が始まってからの経過時間を示す。 The co-star time information indicates the elapsed time from the start of the co-star between the co-star user and the host user.
配信ユーザ装置20は、配信プログラム及び/又はそれ以外のプログラムをコンピュータプロセッサで実行することにより、フェイスモーションデータ生成部211a以外の機能を実現してもよい。例えば、配信ユーザ装置20は、動画視聴用の視聴プログラムを実行することにより受信した動画を再生する機能を実現してもよい。配信プログラムと視聴プログラムとは、一つのアプリケーションソフトウェアにパッケージングされていてもよいし、別個のアプリケーションソフトウェアとして提供されてもよい。 The distribution user device 20 may realize functions other than the face motion data generation unit 211a by executing a distribution program and / or other programs on a computer processor. For example, the distribution user device 20 may realize a function of reproducing a received moving image by executing a viewing program for viewing a moving image. The distribution program and the viewing program may be packaged in one application software, or may be provided as separate application software.
視聴ユーザ装置10は、配信ユーザ装置20と同様の機能を提供するように構成されてもよい。例えば、視聴ユーザ装置10は、動画視聴用の視聴プログラムを実行することにより受信した動画を再生する機能を実現してもよく、配信プログラムを実行することによりフェイスモーションデータ生成部211aの機能と同様の機能を実現してもよい。
The
次に、コンピュータプロセッサ21a,21bにより実現される機能についてより具体的に説明する。コンピュータプロセッサ21aは、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部211aとして機能する。同様に、コンピュータプロセッサ21bは、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部211bとして機能する。コンピュータプロセッサ21a,21bにより実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ21a,21b以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ21a,21bにより実現される機能の少なくとも一部は、例えば、サーバ装置60に搭載されているコンピュータプロセッサ61により実現されてもよい。
Next, functions realized by the computer processors 21a and 21b will be described more specifically. The computer processor 21a functions as the face motion data generation unit 211a by executing computer-readable instructions included in the distribution program. Similarly, the computer processor 21b functions as the face motion data generation unit 211b by executing computer-readable instructions included in the distribution program. At least a part of the functions realized by the computer processors 21a and 21b may be realized by a computer processor other than the computer processors 21a and 21b of the moving
フェイスモーションデータ生成部211aは、カメラ24aの撮像データに基づいて、配信ユーザUaの顔の動きのデジタル表現であるフェイスモーションデータを生成する。同様に、フェイスモーションデータ生成部211bは、カメラ24bの撮像データに基づいて、配信ユーザUbの顔の動きのデジタル表現であるフェイスモーションデータを生成する。フェイスモーションデータは、時間の経過に伴って随時生成される。フェイスモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、フェイスモーションデータ生成部211aにて生成されるフェイスモーションデータは、配信ユーザUaの顔の動き(表情の変化)を時系列的にデジタル表現することができ、フェイスモーションデータ生成部211bにて生成されるフェイスモーションデータは、配信ユーザUbの顔の動き(表情の変化)を時系列的にデジタル表現することができる。フェイスモーションデータ生成部211a,211bにて生成されたフェイスモーションデータは、通信I/F22a,22bを介してサーバ装置60に送信される。
The face motion data generation unit 211a generates face motion data, which is a digital representation of the movement of the face of the distribution user Ua, based on the imaging data of the
配信ユーザ装置20においては、フェイスモーションデータ生成部211aにて生成されるフェイスモーションデータに加えて、配信ユーザUa,Ubの体の顔以外の各部位の位置及び向きのデジタル表現であるボディモーションデータを生成してもよい。配信ユーザ装置20は、フェイスモーションデータに加えて、ボディモーションデータをサーバ装置60に送信してもよい。ボディモーションデータを生成するために、配信ユーザUa,Ubは、モーションセンサを装着してもよい。配信ユーザ装置20は、配信ユーザUa,Ubに装着されたモーションセンサの検出情報に基づいて、ボディモーションデータを生成することができるように構成されてもよい。ボディモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、ボディモーションデータは、配信ユーザUa,Ubの体の動きを時系列的にデジタルデータとして表現する。配信ユーザUa,Ubに装着されたモーションセンサの検出情報に基づくボディモーションデータの生成は、例えば、撮影スタジオで行われてもよい。撮影スタジオには、ベースステーションと、トラッキングセンサと、ディスプレイと、が備えられてもよい。ベースステーションは、多軸レーザーエミッターであってもよい。配信ユーザUa,Ubに装着されるモーションセンサは、例えば、HTC CORPORATIONから提供されているVive Trackerであってもよい。撮影スタジオに備えられるベースステーションは、例えば、HTC CORPORATIONから提供されているベースステーションであってもよい。また、撮影スタジオと別室には、サポーターコンピュータが設置されていてもよい。撮影スタジオのディスプレイは、サポートコンピュータから受信した情報を表示するように構成されてもよい。サーバ装置60は、サポーターコンピュータが設置されている部屋と同じ部屋に設置されてもよい。サポーターコンピュータが設置されている部屋と撮影スタジオとはガラス窓によって隔てられていてもよい。この場合、サポーターコンピュータのオペレータ(本明細書では「サポーター」ということがある。)は、配信ユーザUa,Ubを視認できる。サポーターコンピュータは、サポーターの操作に応じて、撮影スタジオに備えられた各種装置の設定を変更することができるように構成されてもよい。サポーターコンピュータは、例えば、ベースステーションによる走査インターバルの設定、トラッキングセンサの設定、及びこれら以外の各種機器の各種設定の変更を行うことができる。サポーターは、サポーターコンピュータにメッセージを入力し、当該入力されたメッセージを撮影スタジオのディスプレイに表示することができる。 In the distribution user device 20, in addition to the face motion data generated by the face motion data generation unit 211a, body motion data that is a digital expression of the position and orientation of each part other than the face of the body of the distribution users Ua and Ub. May be generated. The distribution user device 20 may transmit the body motion data to the server device 60 in addition to the face motion data. To generate body motion data, the distribution users Ua, Ub may wear a motion sensor. The distribution user device 20 may be configured to be able to generate body motion data based on detection information of a motion sensor attached to the distribution users Ua and Ub. The body motion data may be generated at predetermined sampling time intervals. As described above, the body motion data expresses the body movements of the distribution users Ua and Ub in time series as digital data. The generation of the body motion data based on the detection information of the motion sensors attached to the distribution users Ua and Ub may be performed, for example, in a shooting studio. The shooting studio may be provided with a base station, a tracking sensor, and a display. The base station may be a multi-axis laser emitter. The motion sensor attached to the distribution users Ua and Ub may be, for example, a Vive Tracker provided by HTC CORPORATION. The base station provided in the shooting studio may be, for example, a base station provided by HTC CORPORATION. A supporter computer may be installed in a room separate from the shooting studio. The display of the shooting studio may be configured to display information received from the support computer. The server device 60 may be installed in the same room where the supporter computer is installed. The room in which the supporter computer is installed may be separated from the photography studio by a glass window. In this case, the operator of the supporter computer (hereinafter, sometimes referred to as “supporter”) can visually recognize the distribution users Ua and Ub. The supporter computer may be configured to be able to change settings of various devices provided in the shooting studio according to the operation of the supporter. The supporter computer can, for example, set a scan interval by the base station, set a tracking sensor, and change various settings of various other devices. The supporter can input a message to the supporter computer and display the input message on the display of the photography studio.
次に、コンピュータプロセッサ61により実現される機能についてより具体的に説明する。コンピュータプロセッサ61は、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、アニメーション生成部61a、動画生成部61b、動画配信部61c、共演申請判定部61d、共演申請処理部61e、及び共演終了処理部61fとして機能する。 Next, functions realized by the computer processor 61 will be described more specifically. The computer processor 61 executes a computer-readable instruction included in the distribution program to execute the animation generation unit 61a, the video generation unit 61b, the video distribution unit 61c, the co-star application determination unit 61d, the co-star application processing unit 61e, and the co-star. It functions as the termination processing unit 61f.
アニメーション生成部61aは、配信ユーザ装置20のフェイスモーションデータ生成部21aによって生成されたフェイスモーションデータを、モデルデータ63aに含まれる所定のモデルデータに適用することにより、キャラクタオブジェクトのアニメーションを生成するように構成される。アニメーション生成部61aは、キャラクタオブジェクトの表情が当該フェイスモーションデータに基づいて変化するように、当該キャラクタオブジェクトのアニメーションを生成することができる。具体的には、アニメーション生成部61aは、配信ユーザUaに関するフェイスモーションデータに基づいて、配信ユーザUaの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。同様に、アニメーション生成部61aは、配信ユーザUbに関するフェイスモーションデータに基づいて、配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。 The animation generation unit 61a generates an animation of the character object by applying the face motion data generated by the face motion data generation unit 21a of the distribution user device 20 to predetermined model data included in the model data 63a. It is composed of The animation generation unit 61a can generate an animation of the character object so that the expression of the character object changes based on the face motion data. Specifically, the animation generation unit 61a can generate an animation of a character object that moves in synchronization with the movement of the expression of the distribution user Ua based on the face motion data related to the distribution user Ua. Similarly, the animation generation unit 61a can generate an animation of a character object that moves in synchronization with the movement of the expression of the distribution user Ub based on the face motion data relating to the distribution user Ub.
配信ユーザ装置20から配信ユーザUa,Ubに関するボディモーションデータが提供される場合には、アニメーション生成部61aは、配信ユーザUa,Ubに関するボディモーションデータ及びフェイスモーションデータに基づいて、配信ユーザUa,Ubの体及び表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。 When the distribution user device 20 provides the body motion data regarding the distribution users Ua and Ub, the animation generation unit 61a determines the distribution users Ua and Ub based on the body motion data and the face motion data regarding the distribution users Ua and Ub. Animation of a character object that moves in synchronization with the movement of the body and facial expression of the character.
動画生成部61bは、配信ユーザUaの動画を配信する場合には、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザUaに対応するキャラクタオブジェクトのアニメーションと、を含む動画を生成することができる。動画生成部61bは、生成した動画に、配信ユーザ装置20aから受信した音声データに基づいて生成される配信ユーザUaの音声を合成することができる。同様に、動画生成部61bは、配信ユーザUbの動画を配信する場合には、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザUbに対応するキャラクタオブジェクトのアニメーションと、を含む動画を生成することができる。動画生成部61bは、生成した動画に、配信ユーザ装置20bから受信した音声データに基づいて生成される配信ユーザUbの音声を合成することができる。動画生成部61bによって生成される動画において、配信ユーザUa,Ubに対応するキャラクタオブジェクトは、背景画像に重畳して表示される。以上のようにして、動画生成部61bは、配信ユーザUa又は配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成し、このアニメーションに配信ユーザUa又は配信ユーザUbの音声が合成された配信用の動画を生成することができる。
When distributing the moving image of the distribution user Ua, the moving image generation unit 61b generates a background image indicating the background using the object data 63b, and generates the background image and the animation of the character object corresponding to the distribution user Ua. Can be generated. The moving image generation unit 61b can synthesize the generated moving image with the sound of the distribution user Ua generated based on the audio data received from the
動画配信部61cは、動画生成部61bにおいて生成された動画を配信する。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置に配信される。生成された動画は、配信ユーザ装置20a,20bにも配信される。受信された動画は、視聴ユーザ装置10及び配信ユーザ装置20a,20bにおいて再生される。動画配信部61cは、配信ユーザごとに、動画の配信時間及び配信回数の少なくとも一方をモニターしてもよい。動画配信部61cは、モニター結果に基づいて、共演申請者情報の配信時間及び配信回数を更新してもよい。
The moving image distribution unit 61c distributes the moving image generated by the moving image generation unit 61b. This moving image is distributed to the
動画配信部61cから配信された動画の表示例を図5及び図6a〜図6bに示す。これらの図では、配信ユーザUbが配信ユーザ装置20bを用いて、自らのキャラクタオブジェクトを含む動画を配信し、当該動画が視聴ユーザ装置10及び配信ユーザ装置20a,20bにおいて再生されていると想定している。図6aにおいては、配信ユーザUaは、動画配信を行っておらず、別の配信ユーザである配信ユーザUbによって配信されている動画を視聴している。このため、図5及び図6a〜図6bに関する説明においては、配信ユーザUaのことも視聴ユーザと呼ぶことがある。図5は、視聴ユーザ装置10において再生されている動画の表示例を示し、図6aは、配信ユーザ装置20aにおいて再生されている動画の表示例を示し、図6bは、配信ユーザ装置20bにおいて再生されている動画の表示例を示す。
5 and FIGS. 6A to 6B show display examples of a moving image distributed from the moving image distribution unit 61c. In these figures, it is assumed that the distribution user Ub distributes a moving image including its own character object using the
図5に示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置60から配信された動画の表示画像30が表示される。この視聴ユーザ装置10に表示されている表示画像30には、アニメーション生成部61aにより生成された配信ユーザUbのキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。
As shown in FIG. 5, a
図6aに示されているように、配信ユーザ装置20aのディスプレイには、サーバ装置60から配信された動画の表示画像130が表示される。この表示画像130には、表示画像30と同様に、配信ユーザUbのキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。これに加えて、表示画像130には、配信ユーザUbが配信している動画において配信ユーザUbとの共演を申請するための共演申請ボタン36が含まれる。配信ユーザ装置20aは、例えば、視聴プログラムを含むアプリケーションソフトウェアを実行することにより、配信された動画の表示画像130を表示することができる。
As shown in FIG. 6A, the
図3に示されているように、一実施形態において、視聴ユーザ装置10の表示画像30には共演申請ボタン36が含まれない。例えば、視聴ユーザ装置10に配信プログラムを含むアプリケーションソフトウェアがダウンロードもしくはインストールされていない場合、及び、視聴ユーザ装置10において配信プログラムを含むアプリケーションソフトウェアが起動されていない場合に、共演申請ボタン36が含まれないように視聴ユーザ装置10の表示画像30が生成される。他の実施形態では、視聴ユーザ装置10の表示画像30にも共演申請ボタン36を表示してもよい。例えば、視聴ユーザ装置10に配信プログラムを含むアプリケーションソフトウェアがダウンロードもしくはインストールされている場合、または、視聴ユーザ装置10において配信プログラムを含むアプリケーションソフトウェアが起動されている場合に、共演申請ボタン36が含まれるように視聴ユーザ装置10の表示画像30が生成される。
As shown in FIG. 3, in one embodiment, the
キャラクタオブジェクト31は、上記のように、配信ユーザUbのフェイスモーションデータをモデルデータ63aに含まれているモデルデータに適用することにより生成されているため、配信ユーザUbの表情の動きに同期してその表情が変化する。配信ユーザ装置20からボディモーションデータが提供される場合には、キャラクタオブジェクト31は、その顔以外の部位も、配信ユーザUbの体の動きに同期して変化するように制御され得る。
As described above, since the
ギフトボタン32は、視聴ユーザ装置10への操作によって選択可能に表示画面30に表示されている。ギフトボタン32は、例えば、視聴ユーザ装置10のタッチパネルのうちギフトボタン32が表示されている領域へのタップ操作により選択され得る。一実施形態において、ギフトボタン32が選択されると、表示画面30に、視聴中の動画を配信している配信ユーザ(ここでは、配信ユーザUbである。)にギフティングするギフトを選択するためのウィンドウが表示される。当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを購入することができる。他の実施形態においては、ギフトボタン32が選択されたことに応じて、表示画面30に、購入済みのギフトの一覧を含むウィンドウが表示される。この場合、当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを選択することができる。視聴ユーザ装置10においてギフトボタン32が選択されると、ギフティング情報がサーバ装置60に送信されてもよい。このギフティング情報には、ギフティングするギフトを特定するギフト識別情報(ギフトID)が含まれてもよい。このように、動画を視聴している視聴ユーザは、ギフトボタン32の選択により、当該動画を配信している配信ユーザに対して所望のギフトを提供(ギフティング)することができる。
The
評価ボタン33は、視聴ユーザ装置10を使用する視聴ユーザによって選択可能に表示画面30に表示されている。評価ボタン33は、例えば、視聴ユーザ装置10のタッチパネルのうち評価ボタン33が表示されている領域へのタップ操作により選択され得る。動画を視聴中の視聴ユーザによって評価ボタン33が選択されると、当該動画を配信する配信ユーザ(図示の例においては、配信ユーザUb)への肯定的な評価又は配信されている動画への肯定的な評価がなされたことを示す評価更新情報がサーバ装置60に送信されてもよい。サーバ装置60では、視聴ユーザからの評価更新情報に基づいて、共演申請者情報を更新することができる。例えば、視聴ユーザからの評価更新情報に基づいて、共演申請者情報に含まれるユーザ評価情報及び動画評価情報のうちの少なくとも一方が更新されてもよい。例えば、図5に示されている表示画像30に含まれる評価ボタン33が視聴ユーザによって選択された場合、視聴ユーザ装置10に表示されている動画を配信している配信ユーザUbのユーザ評価情報及び動画評価情報の少なくとも一方が更新されてもよい。評価ボタン33の選択により、当該動画への否定的な評価がなされたことを示す評価情報がサーバ装置60に送信されてもよい。動画への肯定的な評価を示す評価情報をポジティブ評価情報と呼び、動画への否定的な評価がなされたことを示す評価情報をネガティブ評価情報と呼んでもよい。サーバ装置60は、ポジティブ評価情報を受信した場合、ユーザ評価情報及び動画評価情報の少なくとも一方を増加させてもよい。サーバ装置60は、ネガティブ評価情報を受信した場合、ユーザ評価情報及び動画評価情報の少なくとも一方を減少させてもよい。
The
コメントボタン34は、ユーザによって選択可能に表示画面30に表示される。コメントボタン34が例えばタップ操作により選択されると、コメントを入力するためのコメント入力ウィンドウが表示画面30に表示される。視聴ユーザは、視聴ユーザ装置10又は配信ユーザ装置20aの入力機構を介してコメントを入力することができる。入力されたコメントは、視聴ユーザ装置10及び配信ユーザ装置20aからサーバ装置60に送信される。サーバ装置60は、視聴ユーザ装置10、配信ユーザ装置20a、及びこれら以外のユーザ装置からのコメントを受け付け、当該コメントを表示画像30内のコメント表示領域35に表示する。コメント表示領域35には、各ユーザから投稿されたコメントが、例えば時系列に表示される。コメント表示領域35は、表示画面30の一部の領域を占める。コメント表示領域35に表示可能なコメント数には上限がある。図示の例では、コメント表示領域35には3つまでコメントが表示され得る。コメント表示領域35に設定されている上限を超えたコメントの投稿がなされた場合には、投稿時間が古いコメントから順にコメント表示領域35から削除される。このため、受け付けるコメントの頻度が高くなるほどコメント領域35における各コメントの表示時間は短くなる。
The
図6bに示されているように、配信ユーザ装置20bのディスプレイには、サーバ装置60から配信された動画の表示画像40が表示される。この配信ユーザ装置20bに表示される表示画像40には、配信ユーザUbに対応するキャラクタオブジェクト31と、視聴ユーザから受け取ったギフトを動画中に表示するための表示指示ボタン42a〜42cと、コメント表示領域35と、が含まれている。配信ユーザ装置20bに表示される表示画像40には、表示画像30及び表示画像130と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像40は、ギフトボタン32、評価ボタン33、コメントボタン34、及び共演申請ボタン36を含んでおらず、表示指示ボタン42a〜42cを含んでいる点で表示画像30及び表示画像130と異なっている。
As shown in FIG. 6B, a
共演申請判定部61dは、あるユーザからの共演申請を受け付けた場合に、当該ユーザの共演申請を許可するか否かを判定する。共演申請は、例えば、配信された動画の視聴中に共演申請ボタン36を選択することによりサーバ装置60に送信され、この送信された共演申請がサーバ装置60にて受け付けられる。共演申請を行うユーザを共演申請ユーザと呼び、共演申請を受けたユーザをオリジナルユーザと呼ぶことがある。例えば、画像を配信しているユーザAに対してユーザBが共演申請を行う場合には、ユーザAがオリジナルユーザであり、ユーザBが共演申請ユーザである。以下では、配信ユーザUbのキャラクタオブジェクト31を含む動画を視聴している配信ユーザUaから配信ユーザUbとの共演申請がなされたと想定して説明を行う。配信ユーザUaは、配信ユーザ装置20aにおいて共演申請ボタン36を選択することにより配信ユーザUbとの共演を申請するための共演申請を配信ユーザ装置20aからサーバ装置60に送信することができる。この例においては、配信ユーザUaが共演申請ユーザである。共演申請ボタン36が選択されたことに応じて、配信ユーザ装置20aにおいて配信プログラムを含むアプリケーションソフトウェアが起動されてもよい。サーバ装置は、配信ユーザUaからの共演申請だけでなく、様々な配信ユーザからの共演申請を受け付けることができる。
When receiving a co-star application from a certain user, the co-star application determining unit 61d determines whether to permit the user's co-star application. The co-star application is transmitted to the server device 60 by, for example, selecting the
一実施形態において、配信ユーザUaから配信ユーザUbとの共演を申請する共演申請を受け付けると、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報の少なくとも一部に基づいて、配信ユーザUaと配信ユーザUbとの共演を許可するか否かを判定する。一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうちユーザ評価情報に基づいて、配信ユーザUaの共演可否を判定する。ユーザ評価情報がユーザ評価ポイントである場合には、ユーザ評価ポイントが所定の閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演が許可され、当該閾値以下の場合には配信ユーザUaの配信ユーザUbとの共演は拒否される。既述のとおり、ユーザ評価ポイントは、他のユーザからのフィードバックにより更新され得る。ユーザ評価情報は、ユーザ評価ポイント以外であってもよい。例えば、あるユーザのユーザ評価情報は、当該ユーザが受け取ったギフトの数量であってもよい。ギフトは、視聴ユーザから配信ユーザに対して贈られるものであるから、あるユーザに対して贈られたギフトの数量は、当該ユーザに対する評価を表すと考えられる。本発明に適用可能なユーザ評価情報は、本明細書に明示的に説明されたものには限定されない。配信ユーザUaのユーザ評価情報に基づいて当該配信ユーザUaの共演可否を判定することにより、他のユーザからの評価が高いユーザについてのみ共演を許可することができる。 In one embodiment, when receiving a co-star application for applying for co-starring with the distribution user Ub from the distribution user Ua, the co-star application determination unit 61d determines based on at least a part of the co-star applicant information of the distribution user Ua who is the co-star application user. Then, it is determined whether or not the joint performance of the distribution user Ua and the distribution user Ub is permitted. In one embodiment, the co-star application determination unit 61d determines whether or not the distribution user Ua can co-star based on the user evaluation information in the co-star applicant information of the distribution user Ua who is the co-star application user. When the user evaluation information is the user evaluation point, the co-star with the distribution user Ub of the distribution user Ua is permitted when the user evaluation point is larger than the predetermined threshold, and when the user evaluation information is equal to or smaller than the threshold, the distribution user Ua Co-starring with the distribution user Ub is rejected. As described above, the user evaluation points can be updated by feedback from other users. The user evaluation information may be other than the user evaluation points. For example, the user evaluation information of a certain user may be the number of gifts received by the user. Since a gift is given from a viewing user to a distribution user, it is considered that the number of gifts given to a certain user indicates an evaluation for the user. The user evaluation information applicable to the present invention is not limited to the information explicitly described in this specification. By judging whether or not the distribution user Ua can perform together based on the user evaluation information of the distribution user Ua, it is possible to permit only the users who have high evaluations from other users to perform together.
一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうち動画評価情報に基づいて、配信ユーザUaの共演可否を判定する。動画評価情報が動画評価ポイントである場合、共演申請判定部61dは、動画評価ポイントが所定の閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演を許可し、当該閾値以下の場合に配信ユーザUaの配信ユーザUbとの共演を拒否してもよい。本発明に適用可能な動画評価情報は、本明細書に明示的に説明されたものには限定されない。配信ユーザUaが配信した動画に対する評価を示す動画評価情報に基づいて当該配信ユーザUaの共演可否を判定することにより、他のユーザからの評価が高い動画を配信したユーザについてのみ共演を許可することができる。 In one embodiment, the co-star application determination unit 61d determines whether or not the distribution user Ua can co-star based on the video evaluation information among the co-star applicant information of the distribution user Ua who is the co-star application user. If the moving image evaluation information is a moving image evaluation point, the co-star application determination unit 61d allows the distribution user Ua to co-act with the distribution user Ub when the moving image evaluation point is larger than a predetermined threshold, and The co-star of the distribution user Ua with the distribution user Ub may be rejected. The moving image evaluation information applicable to the present invention is not limited to the information explicitly described in this specification. By judging whether or not the distribution user Ua can perform a co-star based on the video evaluation information indicating the evaluation of the video distributed by the distribution user Ua, co-starring is permitted only to a user who has distributed a video with a high evaluation from another user. Can be.
一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうち配信時間及び配信回数の一方又は両方に基づいて、配信ユーザUaの共演可否を判定する。共演申請判定部61dは、配信時間及び配信回数の少なくとも一方がそれぞれについて定められた閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演を許可してもよい。共演申請判定部61dは、配信時間及び配信回数の両方がそれぞれについて定められた閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演を許可してもよい。配信ユーザUaが配信した動画の配信時間及び/又は配信回数に基づいて当該配信ユーザUaの共演可否を判定することにより、動画の配信に積極的なユーザについてのみ共演を許可することができる。 In one embodiment, the co-star application determination unit 61d determines whether or not the distribution user Ua can co-star based on one or both of the distribution time and the number of distributions among the co-star applicant information of the distribution user Ua who is the co-star application user. The co-star application determination unit 61d may permit the co-star of the distribution user Ua with the distribution user Ub when at least one of the distribution time and the number of distributions is larger than a threshold determined for each. The co-star application determination unit 61d may permit the co-star of the distribution user Ua with the distribution user Ub when both the distribution time and the number of distributions are larger than the thresholds determined for each. By determining whether or not the distribution user Ua can co-star based on the distribution time and / or the number of distributions of the moving image distributed by the distribution user Ua, it is possible to permit only the users who are active in distributing the moving image to perform the co-starring.
一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうち共演禁止情報に基づいて配信ユーザUaの共演可否を判定する。例えば、共演申請判定部61dは、配信ユーザUbのユーザIDが出演禁止情報に含まれている場合に配信ユーザUaの配信ユーザUbとの共演を拒否し、配信ユーザUbのユーザIDが出演禁止情報に含まれていない場合に配信ユーザUaの配信ユーザUbとの共演を許可する。共演禁止情報を参照することにより、共演の禁止が設定されているユーザとの共演を回避することができる。 In one embodiment, the co-star application determination unit 61d determines whether or not the distribution user Ua can co-star based on the co-star prohibition information among the co-star applicant information of the distribution user Ua who is the co-star application user. For example, when the user ID of the distribution user Ub is included in the appearance prohibition information, the co-star application determination unit 61d rejects the co-starring with the distribution user Ub of the distribution user Ua, and the user ID of the distribution user Ub becomes the appearance prohibition information. Is not included, the distribution user Ua is permitted to perform with the distribution user Ub. By referring to the co-starring prohibition information, it is possible to avoid co-starring with a user for whom co-starring prohibition is set.
一実施形態において、配信ユーザUaから配信ユーザUbとの共演を申請する共演申請を受け付けると、共演申請判定部61dは、オリジナルユーザである配信ユーザUbの共演申請者情報の少なくとも一部に基づいて、配信ユーザUaと配信ユーザUbとの共演を許可するか否かを判定する。例えば、共演申請判定部61dは、配信ユーザUbの共演申請者情報においてユーザUaのユーザIDが出演禁止情報に含まれている場合に配信ユーザUaの配信ユーザUbとの共演を拒否し、配信ユーザUaのユーザIDが出演禁止情報に含まれていない場合に配信ユーザUaの配信ユーザUbとの共演を許可する。このように、オリジナルユーザの共演申請者情報に含まれる共演禁止情報を参照することによっても、共演の禁止が設定されているユーザとの共演を回避することができる。一実施形態において、共演申請判定部61dは、オリジナルユーザの共演申請者情報に代えて、またはこれに加えて、オリジナルユーザ以外の共演申請者情報に含まれる共演禁止情報を参照して共演申請ユーザとオリジナルユーザとの共演を許可するか否かを判定してもよい。例えば、配信ユーザUaから配信ユーザUbとの共演申請がなされた場合に、共演申請判定部61dは、配信ユーザUa及び配信ユーザUbのいずれとも異なる配信ユーザUcの共演申請者情報において配信ユーザUaのユーザIDが出演禁止情報に含まれている場合に、配信ユーザUaの配信ユーザUbとの共演を拒否してもよい。共演申請判定部61dは、共演申請ユーザ及びオリジナルユーザ以外の複数のユーザの共演申請者情報において、当該共演申請ユーザのユーザIDが出演禁止情報に含まれている場合に、当該共演申請ユーザとオリジナルユーザとの共演を拒否してもよい。 In one embodiment, when accepting a co-star application requesting a co-star with the distribution user Ub from the distribution user Ua, the co-star application determination unit 61d determines based on at least a part of the co-star applicant information of the distribution user Ub who is the original user. Then, it is determined whether or not co-starring between the distribution user Ua and the distribution user Ub is permitted. For example, if the user ID of the user Ua is included in the performance prohibition information in the co-star applicant information of the distribution user Ub, the co-star application determination unit 61d rejects the co-star with the distribution user Ub of the distribution user Ua, If the user ID of Ua is not included in the appearance prohibition information, the co-star of the distribution user Ua with the distribution user Ub is permitted. In this way, by referring to the co-starring prohibition information included in the co-starring applicant information of the original user, it is possible to avoid co-starring with a user for whom co-starring is prohibited. In one embodiment, the co-starring application determination unit 61d refers to the co-starring prohibition information included in the co-starring applicant information other than the original user instead of or in addition to the co-starring applicant information of the original user. It may be determined whether or not to allow co-starring with the original user. For example, when the distribution user Ua makes a co-star application with the distribution user Ub, the co-star application determination unit 61d determines the distribution user Ua in the co-star application information of the distribution user Uc different from both the distribution user Ua and the distribution user Ub. When the user ID is included in the appearance prohibition information, the co-star of the distribution user Ua with the distribution user Ub may be rejected. If the user ID of the co-star application user is included in the performance prohibition information in the co-star application information of a plurality of users other than the co-star application user and the original user, the co-star application user and the original Co-starring with the user may be refused.
共演申請判定部61dは、上記の判定条件を組み合わせて共演可否を判定してもよい。例えば、ユーザ評価情報に関する条件と配信時間に関する条件とを組み合わせることにより、他のユーザからの評価が高く且つ動画配信に積極的なユーザについてのみ共演を許可することができる。配信ユーザの人気が高まると、他のユーザからの共演申請が殺到する可能性がある。このような場合には、共演申請判定部61dでの判定に用いられる共演を許可するための許可条件を厳しくすることにより、多数の共演申請ユーザから望ましい共演相手を選抜することができる。共演申請判定部61dにおいて用いられる許可条件は、共演の申請を受けたユーザ(上記の例では、配信ユーザUb)の人気度に応じて変更されてもよい。例えば、共演の申請を受けたユーザの人気度に応じて、ユーザ評価ポイント、動画評価ポイント、配信時間、配信回数、及びこれら以外の共演申請者情報について設定される閾値を高くしてもよい。共演の申請を受けたユーザの人気度は、例えば、当該ユーザが配信している動画の視聴ユーザ数に基づいて定めることができる。 The co-star application determination unit 61d may determine whether or not the co-star is possible by combining the above determination conditions. For example, by combining the condition regarding the user evaluation information and the condition regarding the distribution time, it is possible to permit the co-star only for a user who is highly evaluated by other users and is active in distributing the moving image. When the popularity of the distribution user increases, there is a possibility that co-star applications from other users will be flooded. In such a case, it is possible to select a desirable co-star from a large number of co-star application users by setting strict permission conditions for permitting the co-star used in the judgment by the co-star application judging unit 61d. The permission condition used in the co-star application determination unit 61d may be changed according to the popularity of the user who has applied for the co-star (in the above example, the distribution user Ub). For example, the thresholds set for the user evaluation points, the video evaluation points, the distribution time, the number of distributions, and other co-star applicant information may be increased according to the popularity of the user who has applied for the co-star. The popularity of the user who has applied for the co-star can be determined, for example, based on the number of viewing users of the moving image distributed by the user.
一実施形態において、共演申請処理部61eは、共演申請判定部61dにおいて、共演申請が許可された場合に、当該共演申請に基づいて配信ユーザUaと配信ユーザUbとが共演する共演動画を生成する。共演動画の生成のために、共演申請処理部61eは、配信ユーザUaから、当該配信ユーザUaのフェイスモーションデータ及び音声データを取得する。配信ユーザUaのフェイスモーションデータは、共演申請とともに配信ユーザ装置20aからサーバ装置60に送信されてもよいし、共演申請が許可された後にサーバ装置60からの要求に応じて配信ユーザ装置20aからサーバ装置60に送信されてもよい。配信ユーザUaの体の動きもアニメーションとして表現される場合には、配信ユーザUaのフェイスモーションデータとともにボディモーションデータがサーバ装置60に提供されてもよい。共演申請処理部61eは、配信ユーザUaからフェイスモーションデータが取得できない場合には、配信ユーザUaから音声データのみを取得してもよい。例えば、配信ユーザUaが使用する配信ユーザ装置20aがフェイスモーションデータ生成部211aの機能またはこれ以外の動画配信のための機能を備えていない場合、当該機能がディスエーブルされている場合、及びこれら以外の場合には、共演申請処理部61eは、配信ユーザUaからフェイスモーションデータ(及びボディモーションデータ)を取得せず音声データを取得してもよい。また、共演申請処理部61eは、共演申請判定部61dにおいて共演申請が許可された場合に、各配信ユーザの配信ユーザ装置に表示される表示画像に共演申請ボタン36を表示させない(共演申請ボタン36をディスエーブルする)ための処理を行ってもよい。これにより、共演が許可されたときに余分な共演申請がなされることを防止できる。
In one embodiment, when the co-star application is permitted by the co-star application determining unit 61d, the co-star application processing unit 61e generates a co-star movie in which the distribution user Ua and the distribution user Ub co-star based on the co-star application. . In order to generate the co-starring moving image, the co-starring application processing unit 61e acquires, from the distribution user Ua, face motion data and audio data of the distribution user Ua. The face motion data of the distribution user Ua may be transmitted from the
一実施形態において、共演申請処理部61eは、配信ユーザUaのフェイスモーションデータに基づいて、配信ユーザUbのキャラクタオブジェクト31を含む配信中の動画に、配信ユーザUaのキャラクタオブジェクトのアニメーションを追加することで、共演動画を生成する。配信ユーザUaのキャラクタオブジェクトのアニメーションは、アニメーション生成部61aにおいて、配信ユーザUaのフェイスモーションデータに基づいて生成されてもよい。配信ユーザUaのキャラクタオブジェクトのアニメーションは、配信ユーザUaのフェイスモーションデータをモデルデータ63aに含まれている配信ユーザUa用のモデルデータに適用することにより生成されてもよい。例えば、共演申請処理部61eは、配信ユーザUaのキャラクタオブジェクトのアニメーションを含むレイヤーを生成し、このレイヤーを配信ユーザUbのキャラクタオブジェクト31を含む動画に重畳することで、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することができる。配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することで、配信ユーザUaと配信ユーザUbとは互いに離れた地点から動画配信システム1を利用している場合であっても、当該共演動画内で仮想的に共演することができる。共演申請処理部61eは、配信ユーザUaからフェイスモーションデータ(及びボディモーションデータ)を取得せず音声データを取得した場合には、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaから取得した音声データに基づいて生成される音声を重畳することで、配信ユーザUbのキャラクタオブジェクト31と配信ユーザUaの音声とを含む共演動画を生成することができる。共演申請処理部61eは、モデルデータ63aとして配信ユーザUa用のモデルデータが設定されていない場合にも、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaから取得した音声データに基づいて生成される音声を重畳することで、配信ユーザUbのキャラクタオブジェクト31と配信ユーザUaの音声とを含む共演動画を生成することができる。このように、配信ユーザUaは、自らの音声により配信ユーザUbと共演することができる。
In one embodiment, the co-star application processing unit 61e adds animation of the character object of the distribution user Ua to a moving image being distributed including the
共演申請処理部61eは、配信ユーザUaからフェイスモーションデータを取得できない場合に配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画を配信し、その後配信ユーザUaからフェイスモーションデータを取得したタイミングで、配信ユーザUaのフェイスモーションデータに基づいて配信ユーザUaのキャラクタオブジェクトを生成することで、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することができる。このように、共演申請処理部61eは、配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画を、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画に切り替えることができる。これとは逆に、共演申請処理部61eは、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を、配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画に切り替えることができる。このように、音声による共演が行われている共演動画(「音声共演動画」と呼ぶことがある。)とキャラクタオブジェクトによる共演が行われている共演動画(「キャラクタ共演動画」と呼ぶことがある。)とは、交互に切り替え可能とされてもよい。
If the face motion data cannot be obtained from the distribution user Ua, the co-star application processing unit 61e distributes the co-star movie including the voice of the distribution user Ua and the
生成された共演動画は、動画配信部61cにより配信される。共演動画は、配信ユーザ装置20aで作成されてもよい。共演動画が配信ユーザ装置20aで生成される場合には、当該共演動画が配信ユーザ装置20aからサーバ装置60に送信され、サーバ装置60の動画配信部61cにより配信される。
The generated co-star moving image is distributed by the moving image distribution unit 61c. The co-star movie may be created by the
動画配信部61cから配信された共演動画の表示例を図7及び図8a〜図8bに示す。これらの図では、配信ユーザUaから配信ユーザUbに対するが共演申請が許可されたため、配信ユーザUaのキャラクタオブジェクト131及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画が配信されていることを想定している。
FIGS. 7 and 8a to 8b show display examples of the co-starred moving image distributed from the moving image distributor 61c. In these figures, it is assumed that since the co-star application has been permitted from the distribution user Ua to the distribution user Ub, a co-star movie including the
図7に示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置60から配信された共演動画の表示画像230が表示される。この視聴ユーザ装置10に表示されている共演動画の表示画像230には、配信ユーザUbのキャラクタオブジェクト31に加えて、配信ユーザUaのキャラクタオブジェクト131が含まれている。配信ユーザUaのキャラクタオブジェクト131は、上記のように、アニメーション生成部61a又は共演申請処理部61eにおいて生成される。共演動画の表示画像230は、図5に示されている元の配信画像と同様に、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、を含んでいる。共演動画の表示画像230は、これらに加えて、ゲスト評価ボタン133a,133bを含んでいる。ゲスト評価ボタン133aは、ゲストユーザ(図示の例では、配信ユーザUaがゲストユーザである。)への肯定的な評価を示すポジティブ評価情報をサーバ装置60へ送信するためのボタンであり、ゲスト評価ボタン133bは、共演動画への否定的な評価を示すネガティブ評価情報をサーバ装置60へ送信するためのボタンである。
As shown in FIG. 7, a
共演動画の配信画像230は、図示のとおり、横長の画像である。共演申請処理部61e又は動画配信部61cは、共演動画を横長の動画として配信する。これにより、視聴ユーザ装置10には、共演動画の配信画像230が横長の画像として表示される。一実施形態においては、元の動画(画像)が図4に示されているように縦長だとしても、共演動画は横長に変換されて配信される。共演動画は、二人の配信ユーザのキャラクタオブジェクトを含むため、横長の画像とすることにより、二人分のキャラクタオブジェクトを重複なく表示しやすくなる。例えば、共演動画においては、視聴ユーザの視点で向かって左半分を元の配信ユーザのキャラクタオブジェクトに割り当てられる領域とし、右半分を共演申請を行った配信ユーザのキャラクタオブジェクトに割り当てられる領域としてもよい。各配信ユーザへの領域の割り当ては、キャラクタオブジェクト同士が重複しないように任意に定められてもよい。
The
図8aに示されているように、配信ユーザUaの配信ユーザ装置20aのディスプレイには、サーバ装置60から配信された共演動画の表示画像330が表示される。この表示画像330には、表示画像230と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像330は、ギフトボタン32、評価ボタン33、コメントボタン34、及び共演申請ボタン36を含んでおらず、表示指示ボタン42a〜42cを含んでいる点で表示画像230と異なっている。
As shown in FIG. 8A, the
図8bに示されているように、配信ユーザ装置20bのディスプレイには、サーバ装置60から配信された共演動画の表示画像430が表示される。表示画像430には、共演相手の配信ユーザUaの配信ユーザ装置20aに表示されている画像330と同じ背景画像、キャラクタオブジェクト31,131、コメント35、及び表示指示ボタン42a〜42cが含まれている。他方、表示画像430には、共演を終了させるための共演終了ボタン45が表示されている。共演終了ボタン45は、共演申請を受けた配信ユーザUbの画面430には表示されるが、共演申請を行った配信ユーザUaの画面には表示されない。配信ユーザUb(ホストユーザ)の配信ユーザ装置20bにおいて共演終了ボタン45が選択されると、共演動画において配信ユーザUaとの共演を終了するための処理が行われる。例えば、共演終了ボタン45が選択されたことに応じて、配信ユーザ装置20bからサーバ装置60に対して共演終了指示が送信される。配信ユーザUbは、共演動画を再生している間に、共演者である配信ユーザUaを共演禁止ユーザとして設定することができる。例えば、共演動画内で配信ユーザUaが望ましくない行動や言動を行ったときに、配信ユーザUaを共演禁止ユーザとして設定することができる。配信ユーザUaの共演禁止ユーザとしての設定は、配信ユーザUaの共演申請者情報の出演禁止情報に配信ユーザUbのユーザIDを記録することにより行われてもよい。サーバ装置60は、例えば、配信ユーザ装置20bから共演終了指示を受け付けると、配信ユーザUbの共演申請者情報において配信ユーザUaを共演禁止ユーザとして自動的に登録することができる。配信ユーザUbは、共演動画の再生時以外に、配信ユーザUaを出願禁止ユーザとして設定してもよい。例えば、動画配信システム1が提供するメッセージングサービスにおいて配信ユーザUaによる望ましくないメッセージの投稿を確認したことに応じて、配信ユーザUaを出願禁止ユーザとして設定してもよい。
As shown in FIG. 8B, a
ホストユーザである配信ユーザUbの表示画像430には、ゲストユーザに警告を与えるための警告ボタン(不図示)が表示されてもよい。この警告ボタンは、ホストユーザの表示画像430には表示されるが、ゲストユーザの表示画像には表示されない。警告ボタンは、共演終了ボタン45とは異なり、ただちに共演を終了させる程度には至らないが、ゲストユーザがホストユーザにとって望ましくない行動をとった場合にホストユーザによって選択されることが想定される。ホストユーザの配信ユーザ装置(例えば、配信ユーザUbの配信ユーザ装置20b)において警告ボタンが選択されると、配信ユーザ装置20bからサーバ装置60に対して警告指示が送信される。ホストユーザの配信ユーザ装置において警告ボタンが選択されると、ゲストユーザの配信ユーザ装置(例えば、配信ユーザUaの配信ユーザ装置20a)に表示される共演動画の表示画像330においてホストユーザから警告がなされたことを示す警告情報が表示されてもよい。警告情報を視聴ユーザの表示画像230に表示することにより、視聴ユーザに対してゲストユーザの望ましくない行動に対してホストユーザが対応していることを示すことができる。警告情報は、表示画像330に代えて又は表示画像330に加えて、視聴ユーザ装置10における表示画像230に表示されてもよい。警告情報を含む共演動画は、サーバ装置60において生成されてもよい。サーバ装置60は、あるホストユーザからあるゲストユーザに対して警告指示がなされた回数をカウントし、警告指示の回数が所定回数(例えば、3回)になったときに当該ホストユーザと当該ゲストユーザとの共演を終了するための処理を行ってもよい。この所定回数以上の警告指示に基づいて共演を終了させるための処理は、上述した共演終了指示に基づいて共演を終了させるための処理と同じ処理であってもよい。
A warning button (not shown) for giving a warning to the guest user may be displayed on the
共演申請処理部61eは、作成した共演動画を識別する動画IDを発行してもよい。この動画IDと対応付けて、当該共演動画に関する共演動画情報をストレージ63に記憶することができる。既述のように、配信されている共演動画の動画IDと対応付けて、当該共演動画の共演時間情報を更新してもよい。共演時間情報は、動画配信部61cにおいて共演動画の配信時間をモニターし、このモニター結果に基づいて更新されてもよい。
The co-star application processing unit 61e may issue a video ID for identifying the created co-star video. In association with this moving image ID, co-star moving image information relating to the co-star moving image can be stored in the
共演動画情報のうち共演ユーザ評価情報は、視聴ユーザ装置10からのゲストユーザである配信ユーザUaへの肯定的な評価示すポジティブ評価情報及び当該配信ユーザUaへの否定的な評価を示すネガティブ評価情報に基づいて更新されてもよい。例えば、サーバ装置60は、視聴ユーザ装置10から配信ユーザUaへの肯定的な評価示すポジティブ評価情報を受信した場合には共演ユーザ評価ポイントを増加させてもよく、配信ユーザUaへの否定的な評価示すネガティブ評価情報を受信した場合には共演ユーザ評価ポイントを減少させてもよい。視聴ユーザが共演動画の視聴を途中で止めた場合には、当該視聴ユーザが当該共演動画に満足していない可能性がある。よって、視聴ユーザが共演動画の視聴を途中で止めた場合に、ゲストユーザへのネガティブな評価があったものとして、当該ゲストユーザの共演ユーザ評価ポイントを減少させてもよい。ポジティブ評価情報及びネガティブ評価情報の少なくとも一方は、時間の経過とともに減少するように更新されてもよい。例えば、配信ユーザUaがある時刻において100ポイントのポジティブ評価情報を有していても、時間の経過に伴って当該ポジティブ評価情報はゼロに近づくように更新されてもよい。あるユーザについてのネガティブ評価情報が所定の値を超えると、当該ユーザについては他のユーザとの共演を禁止してもよい。例えば、ネガティブ評価情報が所定値を超えたユーザの配信ユーザ装置に表示される表示画像においては、共演申請ボタンを表示させない処理がなされてもよい。
Among the co-starring moving image information, the co-starring user evaluation information is positive evaluation information indicating a positive evaluation to the distribution user Ua who is a guest user from the
共演終了処理部61fは、ゲストユーザである配信ユーザUaとホストユーザである配信ユーザUbとの共演を終了させるための共演終了条件が満たされるとゲストユーザである配信ユーザUaとホストユーザである配信ユーザUbとの共演を終了するための処理を行う。一実施形態において、共演終了処理部61fは、ホストユーザである配信ユーザUbの配信ユーザ装置20bから共演終了指示を受け付けると、共演終了条件が満たされたと判定し、共演動画の配信を終了するための処理を行う。例えば、共演終了処理部61fは、共演終了指示が受け付けられると、配信ユーザUaのキャラクタオブジェクト131のアニメーションの生成を中止し、配信ユーザUaのキャラクタオブジェクト131を含まず配信ユーザUbのキャラクタオブジェクト31を含む動画を生成する。言い換えると、配信する動画からゲストユーザである配信ユーザUaのキャラクタオブジェクト131を排除する。ゲストユーザである配信ユーザUaのキャラクタオブジェクト131が排除されることにより、配信ユーザUaと配信ユーザUbとの共演は終了する。共演が終了した後は、キャラクタオブジェクト131を含まずにキャラクタオブジェクト31を含む動画の配信が継続されてもよい。この共演終了後に配信される動画は、図4に示されているように、縦長の動画として生成されてもよい。つまり、共演が終了したことに応じて、動画の向きが変更されてもよい。一実施形態においては、共演が終了したことに応じて、動画の向きが横向きから縦向きに変更されてもよい。他の実施形態においては、共演が終了したことに応じて、ホストユーザである配信ユーザUbによる動画の配信を終了してもよい。一実施形態において、配信ユーザUbとの共演が終了したときに他のユーザからの共演申請を既に受信している場合、共演申請判定部61dは、当該共演申請に基づいて当該他のユーザの共演可否を判定してもよい。別の一実施形態において、共演終了処理部61fは、配信ユーザUbとの共演が終了したことに応じて、別のユーザからの共演申請を受け付けてもよい。例えば、各配信ユーザの配信ユーザ装置における表示画像において共演申請ボタン36を再度表示させる(共演申請ボタン36のディスエーブル状態を解除する)ための処理が行われてもよい。
The co-star end processing unit 61f outputs the guest user distribution user Ua and the host user distribution user Ua when a co-star end condition for ending the co-star between the guest user distribution user Ua and the host user distribution user Ub is satisfied. A process for ending the co-starring with the user Ub is performed. In one embodiment, when receiving the co-performance end instruction from the
一実施形態において、共演終了処理部61fは、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあるか否かを判定し、ノンアクティブ状態にあると判定された場合に、共演終了条件が満たされたと判定する。一実施形態において、配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあるか否かは、配信ユーザUaの配信ユーザ装置20aから受け取るフェイスモーションデータ、ボディモーションデータ、及び音声データのうちの少なくとも一つに基づいて判定される。フェイスモーションデータ、ボディモーションデータ、及び音声データはいずれも配信ユーザの動きを示すデータであるため、本明細書では、これらを総称して「モーションデータ」と呼ぶことがある。配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあるか否かは、モーションデータに基づいて、すなわちフェイスモーションデータ、ボディモーションデータ、及び音声データのうちの少なくとも一つに基づいて判定される。例えば、配信ユーザUaの配信ユーザ装置20aからフェイスモーションデータの入力が一定期間ない場合には、共演動画において配信ユーザUaのキャラクタオブジェクト131の表情が当該一定期間動かなくなるため、キャラクタオブジェクト131がノンアクティブ状態にあると判定されてもよい。配信ユーザUaの配信ユーザ装置20aからボディモーションデータの入力が一定期間ない場合には、共演動画において配信ユーザUaのキャラクタオブジェクト131の体の動きが当該一定期間動なくなるため、キャラクタオブジェクト131がノンアクティブ状態にあると判定されてもよい。配信ユーザUaの配信ユーザ装置20aから音声データの入力が一定期間ない場合には、共演動画において配信ユーザUaのキャラクタオブジェクト131が当該一定期間無言となるため、キャラクタオブジェクト131がノンアクティブ状態にあると判定されてもよい。
In one embodiment, the co-star end processing unit 61f determines whether or not the
一実施形態において、共演終了処理部61fは、配信されている共演動画の共演動画情報に応じて、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131を動画から排除することで共演を終了させる。例えば、共演終了処理部61fは、共演ユーザ評価情報が共演ユーザ評価ポイントである場合には、共演ユーザ評価ポイントが所定の閾値よりも小さくなった場合に配信ユーザUaのキャラクタオブジェクト131を動画から排除することで当該配信ユーザUaとの共演を終了させることができる。視聴ユーザからゲストユーザである配信ユーザUaに対するネガティブ評価情報を受けるほど共演ユーザ評価ポイントは小さくなる。よって、共演ユーザ評価ポイントに基づいて配信ユーザUaとの共演を終了するか否かを判定することにより、視聴ユーザからの評価が低いユーザと長期間共演することを回避できる。
In one embodiment, the co-star end processing unit 61f ends the co-star by excluding the
次に、図9を参照して、一態様による動画配信処理について説明する。図9は、一実施形態における動画配信処理の流れを示すフロー図である。図9を参照して説明される動画配信処理においては、配信ユーザUbが配信ユーザ装置20bを用いて取得したフェイスモーションデータに基づいて生成された動画が配信されることが想定されている。
Next, a moving image distribution process according to one embodiment will be described with reference to FIG. FIG. 9 is a flowchart illustrating a flow of the moving image distribution process according to the embodiment. In the moving image distribution processing described with reference to FIG. 9, it is assumed that a moving image generated based on face motion data acquired by the distribution user Ub using the
まず、ステップS11では、配信ユーザUbの顔の動き(表情)のデジタル表現であるフェイスモーションデータが生成される。フェイスモーションデータの生成は、例えば、配信ユーザ装置20bのフェイスモーションデータ生成部121bで行われる。配信ユーザ装置20bにおいては、配信ユーザUa,Ubからの音声入力に基づいて音声データが生成されてもよい。生成されたフェイスモーションデータ及び音声データは、サーバ装置60に送信される。
First, in step S11, face motion data, which is a digital expression of the movement (expression) of the face of the distribution user Ub, is generated. The generation of the face motion data is performed, for example, by the face motion data generation unit 121b of the
次に、ステップS12において、配信ユーザ装置20bからのフェイスモーションデータが、配信ユーザUb用のモデルデータに適用されることにより、配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクト31のアニメーションが生成される。このアニメーションの生成は、例えば、上記のアニメーション生成部61aで行われる。
Next, in step S12, the face motion data from the
次に、ステップS13において、配信ユーザUbのキャラクタオブジェクト31のアニメーションを含む動画が生成される。この動画には、配信ユーザUbの音声が合成されてもよい。キャラクタオブジェクト31のアニメーションは、背景画像に重畳して表示される。この動画の生成は、例えば、上記の動画生成部61bで行われる。
Next, in step S13, a moving image including an animation of the
次に、ステップS14に移行し、ステップS13にて生成された動画が配信される。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。配信された動画が視聴ユーザ装置10において再生される場合には、例えば、図4に示すような表示画面が視聴ユーザ装置10に表示される。動画は、所定の配信期間にわたって継続して配信される。動画の配信期間は、例えば、30秒間、1分間、5分間、10分、30分間、60分間、120分間、及びこれら以外の任意の時間に定め得る。この動画の配信は、例えば、上記の動画配信部61cで行われる。
Next, the process proceeds to step S14, and the moving image generated in step S13 is distributed. The moving image is distributed to the
次に、ステップS15に進み、動画の配信を終了させるための終了条件が成就したか否かが判定される。終了条件は、例えば、配信の終了時刻に達したこと、配信ユーザUbが配信ユーザ装置20bにおいて配信を終了するための操作を行ったこと、またはこれら以外の条件である。終了条件が成就していなければステップS11〜S14の処理が繰り返し実行され、配信ユーザUbの動きに同期したアニメーションを含む動画、又は、配信ユーザUaとの共演が継続している場合には共演動画の配信が継続される。動画について終了条件が成就していると判定された場合には、当該動画の配信処理を終了する。
Next, the process proceeds to step S15, and it is determined whether or not a termination condition for terminating the distribution of the moving image is satisfied. The end condition is, for example, that the end time of the distribution has been reached, that the distribution user Ub has performed an operation for ending the distribution in the
次に、図10を参照して、一実施形態における共演動画の配信処理について説明する。図10は、一実施形態において共演動画を配信する処理の流れを示すフロー図である。図10を参照して説明される共演動画の配信処理においては、配信ユーザUbのキャラクタオブジェクトを含む動画を視聴している配信ユーザUaから配信ユーザUbに対して共演申請がなされることが想定されている。共演動画の配信処理は、図9に示されている動画の配信処理と並行して行われる。 Next, with reference to FIG. 10, a distribution process of a co-star moving image in one embodiment will be described. FIG. 10 is a flowchart showing a flow of a process of distributing a co-star moving image in one embodiment. In the co-star moving image distribution process described with reference to FIG. 10, it is assumed that a co-star application is made to distribution user Ub from distribution user Ua who is watching a moving image including the character object of distribution user Ub. ing. The co-star moving image distribution process is performed in parallel with the moving image distribution process shown in FIG.
まず、配信ユーザUbのキャラクタオブジェクトを含む動画の配信中に、ステップS21において、配信ユーザUb以外のユーザから共演申請がなされたか否かが判定される。共演申請は、例えば、配信ユーザUaからなされる。配信ユーザUaによって共演申請がなされた場合には、処理はステップS22に進む。 First, during the distribution of the moving image including the character object of the distribution user Ub, it is determined in step S21 whether a user other than the distribution user Ub has applied for a co-star. The co-star application is made, for example, by the distribution user Ua. If a co-star application has been made by the distribution user Ua, the process proceeds to step S22.
ステップS22では、共演を申請した配信ユーザUaの共演申請を許可するか否かが判定される。共演申請を許可するか否かは、配信ユーザUaの共演申請者情報の少なくとも一部に基づいて判定される。例えば、配信ユーザUaの共演申請者情報のうちユーザ評価ポイントが所定の閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演が許可され、当該閾値以下の場合には配信ユーザUaの配信ユーザUbとの共演は拒否される。この共演申請を許可するか否かの判定は、例えば、共演申請判定部61dにより行われる。 In step S22, it is determined whether or not to permit the distribution user Ua who has applied for the co-starring to apply for the co-starring. Whether to permit the co-star application is determined based on at least a part of the co-star applicant information of the distribution user Ua. For example, if the user evaluation point of the co-star applicant information of the distribution user Ua is larger than a predetermined threshold, the co-star with the distribution user Ub of the distribution user Ua is permitted. Co-starring with user Ub is rejected. The determination as to whether to permit the co-star application is made by, for example, the co-star application determining unit 61d.
ステップS22において、共演申請を許可すると判定された場合には、処理はステップS23に進む。ステップS23では、配信ユーザUaのフェイスモーションデータに基づいて、配信ユーザUaのキャラクタオブジェクト131のアニメーションが生成される。そして、配信中の動画(配信ユーザUbのキャラクタオブジェクト31を含む動画)に、配信ユーザUaのキャラクタオブジェクト131のアニメーションを追加することで、共演動画を生成する。ステップS16における処理は、例えば、上記の共演申請処理部61eで行われる。
If it is determined in step S22 that the co-star application is permitted, the process proceeds to step S23. In step S23, an animation of the
次に、処理は、ステップS24に移行する。ステップS24では、ステップS23にて生成された共演動画が配信される。この共演動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。共演動画には、例えば、図7及び図8a〜図8bに示されているように、配信ユーザUaのキャラクタオブジェクト131のアニメーション及び配信ユーザUbのキャラクタオブジェクト31のアニメーションが含まれる。
Next, the process proceeds to step S24. In step S24, the co-star moving image generated in step S23 is distributed. The co-star moving image is distributed to the
次に、処理は、ステップS25に移行する。ステップS25では、共演終了条件が満たされたか否かが判定される。例えば、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にある場合、共演ユーザ評価ポイントが所定の閾値以下になった場合、ホストユーザである配信ユーザUbから共演終了指示を受け付けた場合、又は共演動画の配信開始から所定時間以上が経過したことのいずれかの条件が満たされた場合に、共演終了条件が満たされたと判定される。共演終了条件が満たされた場合には、処理はステップS26に進む。
Next, the process proceeds to step S25. In step S25, it is determined whether or not the co-performance end condition is satisfied. For example, when the
ステップS26では、共演動画の配信を終了させるための処理が行われる。例えば、共演動画から、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131が排除されることで、配信ユーザUaと配信ユーザUbとの共演を終了させる。共演が終了した場合でも、動画は継続して配信されてもよい。共演が終了した後に配信される動画には、配信ユーザUaのキャラクタオブジェクト131が含まれない。上記の共演終了条件の判定及び共演の終了処理は、例えば、共演終了処理部61fにより行われる。
In step S26, processing for terminating the distribution of the co-star moving image is performed. For example, by eliminating the
上記の一実施形態によれば、配信ユーザUbとの共演を申請する共演申請を配信ユーザUaから受け付けたことに応じて、配信ユーザUbに関する共演申請者情報に基づいて配信ユーザUaの配信ユーザUbとの共演可否が判定される。この判定により、共演が許可された場合に共演動画が生成され、生成された共演動画が配信される。これにより、共演申請者情報に基づいて共演者を選抜することができる。 According to the above-described embodiment, in response to receiving a co-star application from distribution user Ua for applying for co-starring with distribution user Ub, distribution user Ub of distribution user Ua based on co-star applicant information about distribution user Ub Is determined. With this determination, when the co-starring is permitted, a co-starring moving image is generated, and the generated co-starring moving image is distributed. Thereby, co-stars can be selected based on the co-star applicant information.
上記の一実施形態において、共演申請者情報は、共演を申請した配信ユーザUaに対する評価を示すユーザ評価情報を含む。これにより、共演を申請するユーザに対する評価に基づいて共演者を選抜することができる。したがって、配信ユーザUaに対する他のユーザからの評価が高い場合にのみ共演を許可することが可能となる。 In the above embodiment, the co-star applicant information includes user evaluation information indicating an evaluation of the distribution user Ua who has applied for the co-star. Thus, co-stars can be selected based on the evaluation of the user who applies for the co-star. Therefore, it is possible to permit the co-star only when the evaluation of the distribution user Ua by other users is high.
上記の一実施形態において、共演申請者情報は、配信ユーザUaが配信した動画に対する動画評価情報を含む。これにより、共演を申請するユーザが配信した動画に対する評価に基づいて共演者を選抜することができる。したがって、配信ユーザUaが配信した動画について他のユーザからの評価が高い場合にのみ共演を許可することが可能となる。 In the above embodiment, the co-star applicant information includes moving image evaluation information for the moving image distributed by the distribution user Ua. Thereby, a co-star can be selected based on the evaluation of the moving image distributed by the user who applies for the co-star. Therefore, it is possible to permit the co-star only when the moving image distributed by the distribution user Ua is highly evaluated by other users.
上記の一実施形態において、共演申請者情報は、配信ユーザUaの動画配信時間又は動画配信回数を含む。これにより、共演を申請するユーザが配信した動画の配信時間又は配信回数に基づいて共演者を選抜することができる。したがって、配信ユーザUaが動画の配信に積極的な場合にのみ共演を許可することが可能となる。 In the above embodiment, the co-star applicant information includes the video distribution time or the video distribution count of the distribution user Ua. Thereby, the co-star can be selected based on the distribution time or the number of distributions of the moving image distributed by the user who applies for the co-star. Therefore, it is possible to permit the co-star only when the distribution user Ua is active in distributing the moving image.
上記の一実施形態において、共演申請者情報は、配信ユーザUaが共演を禁止されているユーザを特定する共演禁止情報を含む。これにより、配信ユーザUaが共演禁止ユーザとして登録されている場合には、配信ユーザUaとの共演を回避することができる。 In the above-described embodiment, the co-star applicant information includes co-star prohibition information that specifies a user for whom the distribution user Ua is prohibited from co-starring. Thus, when the distribution user Ua is registered as a co-starred user, co-starring with the distribution user Ua can be avoided.
上記の一実施形態において、配信ユーザUaの動きを示すモーションデータに基づいて配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあると判定された場合に、共演動画からキャラクタオブジェクト131を排除することができる。これにより、ホストユーザである配信ユーザUbの動画から、動画のエンターティンメント性の向上に貢献しない共演者を排除することができる。
In the above embodiment, when it is determined that the
上記の一実施形態において、視聴ユーザから配信ユーザUaに対する評価を示す共演者評価情報に基づいて共演動画から配信ユーザUaのキャラクタオブジェクト131を排除する。これにより、ホストユーザである配信ユーザUbの動画から、視聴者からの評価が悪い共演者を排除することができる。
In the above embodiment, the
上記の一実施形態において、ホストユーザである配信ユーザUbからの要求に基づいて、配信ユーザUbの動画から配信ユーザUaのキャラクタオブジェクト131を排除することができる。これにより、ホストユーザである配信ユーザUbの判断に応じて、共演者を動画から排除することができる。
In the above embodiment, the
上記実施形態による動画配信システム1においては、配信ユーザUa,Ubは、スマートフォンなどのカメラを備えた配信ユーザ装置20により自らの表情に応じて動くキャラクタオブジェクトを含む動画を配信することができる。このように、動画配信システム1においては、配信ユーザUa,Ubが動画を配信するための設備が簡略化されているので、配信ユーザUa,Ubが参加しやすいプラットフォームが実現されている。
In the moving
本明細書において説明された処理手順、特にフロー図を用いて説明された処理手順においては、その処理手順を構成する工程(ステップ)の一部を省略すること、その処理手順を構成する工程として明示されていない工程を追加すること、及び/又は当該工程の順序を入れ替えることが可能であり、このような省略、追加、順序の変更がなされた処理手順も本発明の趣旨を逸脱しない限り本発明の範囲に含まれる。 In the processing procedure described in this specification, in particular, in the processing procedure described using a flowchart, some of the steps (steps) configuring the processing procedure are omitted, and the steps configuring the processing procedure are omitted. Unspecified steps can be added and / or the order of the steps can be changed. The processing procedures in which such omissions, additions, and changes in order are made do not depart from the spirit of the present invention. Included in the scope of the invention.
コンピュータプロセッサ61により実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ61以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ61により実現される機能の少なくとも一部は、例えば、配信ユーザ装置20のコンピュータプロセッサ21により実現されてもよく、視聴ユーザ装置10のコンピュータプロセッサにより実現されてもよい。具体的には、アニメーション生成部61a及び動画生成部61bの機能の一部又は全部は、配信ユーザ装置20において実行されてもよい。例えば、配信ユーザ装置20において生成された動画がサーバ装置60に送信され、サーバ装置60から視聴ユーザ装置10に配信されてもよい。
At least a part of the functions realized by the computer processor 61 may be realized by a computer processor other than the computer processor 61 of the moving
配信ユーザUbのキャラクタオブジェクト31を含む動画を視聴している配信ユーザUaから配信ユーザUbとの共演申請がなされる場合には、共演申請を行った配信ユーザUaのキャラクタオブジェクト131のアニメーションは、サーバ装置60、配信ユーザUaの配信ユーザ装置20a、配信ユーザUbの配信ユーザ装置20b、又は視聴ユーザ装置10のいずれで生成されてもよい。また、生成された配信ユーザUaのキャラクタオブジェクト131と配信ユーザUbの配信動画とキャラクタオブジェクト31とを含む共演動画の生成は、サーバ装置60、配信ユーザUaの配信ユーザ装置20a、配信ユーザUbの配信ユーザ装置20b、又は視聴ユーザ装置10のいずれで行われてもよい。一つの例において、配信ユーザUaのキャラクタオブジェクト131のアニメーションが配信ユーザUbの配信ユーザ装置20bで生成される場合には、配信ユーザUaの配信ユーザ装置20aから配信ユーザUbの配信ユーザ装置20bに対して、配信ユーザUaのフェイスモーションデータ及び音声データが送信される。配信ユーザ装置20bでは、配信ユーザ装置20aから受信した配信ユーザUaのフェイスモーションデータ及び音声データを配信ユーザUa用のモデルデータに適用することでキャラクタオブジェクト131のアニメーションが生成される。この配信ユーザUa用のモデルデータは、サーバ装置60から配信ユーザ装置20aへ送信されてもよい。他の例において、配信ユーザUaのキャラクタオブジェクト131のアニメーションが視聴ユーザ装置10で生成される場合には、配信ユーザUaの配信ユーザ装置20aから視聴ユーザ装置10に対して配信ユーザUaのフェイスモーションデータ及び音声データが送信され、配信ユーザUbの配信ユーザ装置20bから視聴ユーザ装置10に対して配信ユーザUbのフェイスモーションデータ及び音声データが送信される。視聴ユーザ装置10では、配信ユーザ装置20aから受信した配信ユーザUaのフェイスモーションデータ及び音声データを配信ユーザUa用のモデルデータに適用することでキャラクタオブジェクト131のアニメーションが生成され、配信ユーザ装置20bから受信した配信ユーザUbのフェイスモーションデータ及び音声データを配信ユーザUb用のモデルデータに適用することでキャラクタオブジェクト31のアニメーションが生成されてもよい。このを配信ユーザUa用のモデルデータ及び配信ユーザUb用のモデルデータは、サーバ装置60から視聴ユーザ装置10へ送信されてもよい。このように、配信ユーザのキャラクタオブジェクトのアニメーションは、動画配信システム1に含まれる任意の装置で生成され得る。キャラクタオブジェクトのアニメーションは、図1に明示的に示されていない装置で生成されてもよい。キャラクタオブジェクトのアニメーションを生成する装置には、配信ユーザUaの配信ユーザ装置20aから配信ユーザUaのフェイスモーションデータ及び音声データが送信され、配信ユーザUbの配信ユーザ装置20bから配信ユーザUbのフェイスモーションデータ及び音声データが送信される。フェイスモーションに加えてボディモーションが送信されてもよい。
When the distribution user Ua who is watching the moving image including the
共演動画は、三人以上の配信ユーザのキャラクタオブジェクトを含んでもよい。つまり、三人以上の配信ユーザが、各々のキャラクタオブジェクトを利用して動画内で仮想的に共演してもよい。共演できる配信ユーザの数には上限が設定されていてもよい。共演できる配信ユーザの数が上限に達すると、配信ユーザが視聴している動画の表示画像(例えば、表示画像130)に共演申請ボタン36を表示させない処理、又は、配信ユーザが視聴している動画の表示画像において共演申請ボタン36を選択不能とする処理(ディスエーブル処理)がなされてもよい。
The co-star movie may include character objects of three or more distribution users. That is, three or more distribution users may virtually perform together in a moving image using each character object. An upper limit may be set for the number of distribution users who can perform together. When the number of distribution users who can co-star reaches the upper limit, a process of not displaying the
以下に、本願の原出願の出願当初の特許請求の範囲に記載された発明を付記する。
[1]
一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
前記共演動画を一又は複数の視聴ユーザに配信する、
動画配信システム。
[2]
前記共演申請者情報は、前記第2ユーザに対する評価を示すユーザ評価情報を含む、
[1]に記載の動画配信システム。
[3]
前記共演申請者情報は、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む、
[1]又は[2]に記載の動画配信システム。
[4]
前記共演申請者情報は、前記第2ユーザの動画配信時間又は動画配信回数を含む、
[1]から[3]のいずれか1項に記載の動画配信システム。
[5]
前記共演申請者情報は、前記第2ユーザが共演を禁止されているユーザを特定する共演禁止情報を含む、
[1]から[4]のいずれか1項に記載の動画配信システム。
[6]
一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
前記共演動画を一又は複数の視聴ユーザに配信する、
動画配信システム。
[7]
前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含むキャラクタ共演動画である、
[1]から[6]のいずれか1項に記載の動画配信システム。
[8]
前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの音声を含む音声共演動画である、
[1]から[6]のいずれか1項に記載の動画配信システム。
[9]
前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含むキャラクタ共演動画又は前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの音声を含む音声共演動画であり、
前記キャラクタ共演動画と前記音声共演動画とは交互に切り替え可能である、 [1]から[6]のいずれか1項に記載の動画配信システム。
[10]
前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する、
[1]から[9]のいずれか1項に記載の動画配信システム。
[11]
前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する、
[1]から[10]のいずれか1項に記載の動画配信システム。
[12]
前記第1ユーザからの要求に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する、
[1]から[11]のいずれか1項に記載の動画配信システム。
[13]
一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法であって、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
を備える動画配信方法。
[14]
一又は複数のコンピュータプロセッサに、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
を実行させる動画配信プログラム。
Hereinafter, the inventions described in the claims at the time of filing the original application of the present application are additionally described.
[1]
Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to accepting a co-star application from the second user for co-starring with the first user, determining whether or not the second user can co-star based on co-star applicant information about the second user;
When the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-star is generated,
Distributing the co-star video to one or more viewing users,
Video distribution system.
[2]
The co-star applicant information includes user evaluation information indicating an evaluation for the second user,
The moving image distribution system according to [1].
[3]
The co-star applicant information includes video evaluation information indicating an evaluation of the video distributed by the second user,
The moving image distribution system according to [1] or [2].
[4]
The co-star applicant information includes a video distribution time or a video distribution count of the second user,
The moving image distribution system according to any one of [1] to [3].
[5]
The co-star applicant information includes co-star prohibition information that specifies a user for whom the second user is prohibited from co-starring,
The moving image distribution system according to any one of [1] to [4].
[6]
Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to receiving a co-star application from the second user for co-starring with the first user, determining whether or not the second user can co-star based on co-star applicant information about the first user;
When the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-star is generated,
Distributing the co-star video to one or more viewing users,
Video distribution system.
[7]
The co-star movie is a character co-star movie including a first character object generated based on the first user's motion and a second character object generated based on the second user's motion,
The moving image distribution system according to any one of [1] to [6].
[8]
The co-star movie is a voice co-star movie including a first character object generated based on the movement of the first user and a voice of the second user.
The moving image distribution system according to any one of [1] to [6].
[9]
The co-starring moving image is a character co-starring moving image including a first character object generated based on the movement of the first user and a second character object generated based on the movement of the second user, or the movement of the first user. A voice co-starring moving image including a first character object and a voice of the second user generated based on
The moving image distribution system according to any one of [1] to [6], wherein the character co-starring moving image and the audio co-starring moving image are alternately switchable.
[10]
Excluding the second character object from the co-star movie when it is determined that the second character object is in the non-active state in the co-star movie based on motion data indicating the movement of the second user;
The moving image distribution system according to any one of [1] to [9].
[11]
Removing the second character object from the co-starred video based on co-star evaluation information indicating an evaluation of the second user from the viewing user during distribution of the co-starred video;
The moving image distribution system according to any one of [1] to [10].
[12]
Removing the second character object from the co-star movie based on a request from the first user;
The moving image distribution system according to any one of [1] to [11].
[13]
A moving image distribution method executed by one or more computer processors executing computer-readable instructions,
A step of determining whether or not the second user can co-star based on the co-star applicant information relating to the first user or the second user in response to receiving a co-star application from the second user for requesting a co-star with the first user When,
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
A video distribution method comprising:
[14]
To one or more computer processors,
A step of determining whether or not the second user can co-star based on the co-star applicant information relating to the first user or the second user in response to receiving a co-star application from the second user for requesting a co-star with the first user When,
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
A video distribution program that executes
1 動画配信システム 1. Video distribution system
Claims (17)
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
前記共演動画を一又は複数の視聴ユーザに配信する、
動画配信システム。 Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to receiving a co-star application from the second user to apply for a co-star with the first user, based on co-star applicant information on the second user, including video evaluation information indicating evaluation of the video distributed by the second user. To determine whether the second user can co-star,
When the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-star is generated,
Distributing the co-star video to one or more viewing users,
Video distribution system.
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザの動画配信時間又は動画配信回数を含む前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
前記共演動画を一又は複数の視聴ユーザに配信する、
動画配信システム。 Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to receiving a co-star application from the second user for co-starring with the first user, based on the co-star applicant information about the second user including the video distribution time or the number of video distributions of the second user, Determine whether the two users can co-star,
When the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-star is generated,
Distributing the co-star video to one or more viewing users,
Video distribution system.
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
前記共演動画を一又は複数の視聴ユーザに配信し、
前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する、
動画配信システム。 Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to accepting a co-star application from the second user for co-starring with the first user, determining whether or not the second user can co-star based on co-star applicant information about the second user;
When the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-star is generated,
Distributing the co-star video to one or more viewing users,
When it is determined that the second character object generated based on the movement of the second user in the co-moving video based on the motion data indicating the motion of the second user is in a non-active state, Excluding the second character object;
Video distribution system.
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
前記共演動画を一又は複数の視聴ユーザに配信し、
前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを排除する、
動画配信システム。 Comprising one or more computer processors,
The one or more computer processors execute computer-readable instructions,
In response to accepting a co-star application from the second user for co-starring with the first user, determining whether or not the second user can co-star based on co-star applicant information about the second user;
When the co-starring of the second user is permitted, a co-starring video in which the first user and the second user co-star is generated,
Distributing the co-star video to one or more viewing users,
Excluding a second character object generated from the co-starring video based on the movement of the second user based on co-star evaluation information indicating an evaluation of the second user from the viewing user during distribution of the co-starring video,
Video distribution system.
請求項1から請求項4のいずれか1項に記載の動画配信システム。 The co-star applicant information includes co-star prohibition information that specifies a user for whom the second user is prohibited from co-starring,
The moving image distribution system according to any one of claims 1 to 4.
請求項1から請求項5のいずれか1項に記載の動画配信システム。 The co-star movie is a character co-star movie including a first character object generated based on the first user's motion and a second character object generated based on the second user's motion,
The moving image distribution system according to any one of claims 1 to 5 .
請求項1から請求項6のいずれか1項に記載の動画配信システム。 The co-star movie is a voice co-star movie including a first character object generated based on the movement of the first user and a voice of the second user.
The moving image distribution system according to any one of claims 1 to 6.
前記キャラクタ共演動画と前記音声共演動画とは交互に切り替え可能である、
請求項1から請求項6のいずれか1項に記載の動画配信システム。 The co-starring moving image is a character co-starring moving image including a first character object generated based on the movement of the first user and a second character object generated based on the movement of the second user, or the movement of the first user. A voice co-starring moving image including a first character object and a voice of the second user generated based on
The character co-star movie and the voice co-star movie can be alternately switched,
The moving image distribution system according to any one of claims 1 to 6.
請求項1から請求項8のいずれか1項に記載の動画配信システム。 Removing a second character object generated based on a movement of the second user from the co-starring video based on a request from the first user;
The moving image distribution system according to any one of claims 1 to 8 .
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
を備える動画配信方法。 A moving image distribution method executed by one or more computer processors executing computer-readable instructions,
In response to receiving a co-star application from the second user to apply for a co-star with the first user, based on co-star applicant information on the second user, including video evaluation information indicating evaluation of the video distributed by the second user. Determining whether or not the second user can co-star, and
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
A video distribution method comprising:
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザの動画配信時間又は動画配信回数を含む前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
を備える動画配信方法。 A moving image distribution method executed by one or more computer processors executing computer-readable instructions,
In response to receiving a co-star application from the second user for co-starring with the first user, based on the co-star applicant information about the second user including the video distribution time or the number of video distributions of the second user, Determining whether the two users can co-star;
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
A video distribution method comprising:
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する工程と、
を備える動画配信方法。 A moving image distribution method executed by one or more computer processors executing computer-readable instructions,
Determining, in response to receiving a co-star application from the second user for co-starring with the first user, whether or not the second user can co-star based on co-star applicant information about the second user;
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
When it is determined that the second character object generated based on the movement of the second user in the co-moving video based on the motion data indicating the motion of the second user is in a non-active state, Removing the second character object;
A video distribution method comprising:
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを排除する工程と、
を備える動画配信方法。 A moving image distribution method executed by one or more computer processors executing computer-readable instructions,
Determining, in response to receiving a co-star application from the second user for co-starring with the first user, whether or not the second user can co-star based on co-star applicant information about the second user;
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
Removing the second character object generated based on the movement of the second user from the co-starring video based on the co-star evaluation information indicating the evaluation of the second user from the viewing user during distribution of the co-starring video When,
A video distribution method comprising:
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
を実行させる動画配信プログラム。 To one or more computer processors,
In response to receiving a co-star application from the second user to apply for a co-star with the first user, based on co-star applicant information on the second user, including video evaluation information indicating evaluation of the video distributed by the second user. Determining whether or not the second user can co-star, and
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
A video distribution program that executes
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザの動画配信時間又は動画配信回数を含む前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
を実行させる動画配信プログラム。 To one or more computer processors,
In response to receiving a co-star application from the second user for co-starring with the first user, based on the co-star applicant information about the second user including the video distribution time or the number of video distributions of the second user, Determining whether the two users can co-star;
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
A video distribution program that executes
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する工程と、
を実行させる動画配信プログラム。 To one or more computer processors,
Determining, in response to receiving a co-star application from the second user for co-starring with the first user, whether or not the second user can co-star based on co-star applicant information about the second user;
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
When it is determined that the second character object generated based on the movement of the second user in the co-moving video based on the motion data indicating the motion of the second user is in a non-active state, Removing the second character object;
A video distribution program that executes
第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
前記共演動画を一又は複数の視聴ユーザに配信する工程と、
前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを排除する工程と、
を実行させる動画配信プログラム。
To one or more computer processors,
Determining, in response to receiving a co-star application from the second user for co-starring with the first user, whether or not the second user can co-star based on co-star applicant information about the second user;
Generating a co-star movie in which the first user and the second user co-star when the co-star of the second user is permitted;
Delivering the co-starring video to one or more viewing users;
Removing the second character object generated based on the movement of the second user from the co-starring video based on the co-star evaluation information indicating the evaluation of the second user from the viewing user during distribution of the co-starring video When,
A video distribution program that executes
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019122862A JP6664534B1 (en) | 2019-07-01 | 2019-07-01 | Video distribution system, video distribution method and video distribution program |
PCT/JP2019/043639 WO2020129448A1 (en) | 2018-12-18 | 2019-11-07 | Dynamic image distribution system, dynamic image distribution method, and dynamic image distribution program |
US17/414,254 US20220053227A1 (en) | 2018-12-18 | 2019-11-07 | Video distribution system, video distribution method, and video distribution program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019122862A JP6664534B1 (en) | 2019-07-01 | 2019-07-01 | Video distribution system, video distribution method and video distribution program |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018236152A Division JP6550522B1 (en) | 2018-12-18 | 2018-12-18 | Video distribution system, video distribution method and video distribution program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020025429A Division JP6883678B2 (en) | 2020-02-18 | 2020-02-18 | Video distribution system, video distribution method and video distribution program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6664534B1 true JP6664534B1 (en) | 2020-03-13 |
JP2020099036A JP2020099036A (en) | 2020-06-25 |
Family
ID=70000351
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019122862A Active JP6664534B1 (en) | 2018-12-18 | 2019-07-01 | Video distribution system, video distribution method and video distribution program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6664534B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7442091B2 (en) | 2020-04-30 | 2024-03-04 | グリー株式会社 | Video distribution device, video distribution method, and video distribution program |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6420930B1 (en) * | 2018-08-01 | 2018-11-07 | グリー株式会社 | Movie distribution system, movie distribution method, and movie distribution program for distributing movie including animation of character object generated based on movement of actor |
-
2019
- 2019-07-01 JP JP2019122862A patent/JP6664534B1/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7442091B2 (en) | 2020-04-30 | 2024-03-04 | グリー株式会社 | Video distribution device, video distribution method, and video distribution program |
Also Published As
Publication number | Publication date |
---|---|
JP2020099036A (en) | 2020-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6550522B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP6543403B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP7134298B2 (en) | Video distribution system, video distribution method and video distribution program | |
JP6550546B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP7462912B2 (en) | Video distribution system, video distribution method, and video distribution program | |
US20210065421A1 (en) | Moving image distribution system, moving image distribution method, and moving image distribution program | |
JP6832997B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP6664534B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP2024041749A (en) | Video distribution system, video distribution method, and video distribution program | |
JP6671528B1 (en) | Video distribution system, video distribution method, and video distribution program | |
WO2020121909A1 (en) | Video distribution system, video distribution method, and video distribution program | |
KR102490402B1 (en) | A moving image distribution system, a moving image distribution method, and a moving image distribution program for live distribution of a moving image including animation of a character object generated based on a distribution user's movement. | |
WO2020129448A1 (en) | Dynamic image distribution system, dynamic image distribution method, and dynamic image distribution program | |
JP7044923B6 (en) | Video distribution system, video distribution method and video distribution program | |
JP6713080B2 (en) | Video distribution system, video distribution method, and video distribution program for live distribution of videos including animation of character objects generated based on movements of distribution users | |
JP7442097B2 (en) | Video distribution system, video distribution method, and video distribution program | |
JP6828106B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP6923735B1 (en) | Video distribution system, video distribution method and video distribution program | |
JP7288990B2 (en) | Video distribution system, video distribution method and video distribution program | |
JP7194239B2 (en) | Video distribution system, video distribution method and video distribution program | |
JP2024056816A (en) | Video distribution system, video distribution method, and video distribution program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191127 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191127 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20191127 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20191204 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191211 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200218 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6664534 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |