WO2020129448A1 - 動画配信システム、動画配信方法及び動画配信プログラム - Google Patents

動画配信システム、動画配信方法及び動画配信プログラム Download PDF

Info

Publication number
WO2020129448A1
WO2020129448A1 PCT/JP2019/043639 JP2019043639W WO2020129448A1 WO 2020129448 A1 WO2020129448 A1 WO 2020129448A1 JP 2019043639 W JP2019043639 W JP 2019043639W WO 2020129448 A1 WO2020129448 A1 WO 2020129448A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
star
distribution
starring
video
Prior art date
Application number
PCT/JP2019/043639
Other languages
English (en)
French (fr)
Inventor
彩 倉淵
Original Assignee
グリー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2018236152A external-priority patent/JP6550522B1/ja
Priority claimed from JP2019122862A external-priority patent/JP6664534B1/ja
Application filed by グリー株式会社 filed Critical グリー株式会社
Priority to US17/414,254 priority Critical patent/US20220053227A1/en
Publication of WO2020129448A1 publication Critical patent/WO2020129448A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/101Collaborative creation, e.g. joint development of products or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0282Rating or review of business operators or products
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics

Definitions

  • the disclosure in this specification relates to a moving image distribution system, a moving image distribution method, and a moving image distribution program. More specifically, the disclosure in the present specification relates to a moving image distribution system, a moving image distribution method, and a moving image distribution program that perform live distribution of a moving image including a character object generated based on a movement of a user.
  • a video distribution service is provided that distributes a video containing a character object generated based on the movement of the distribution user.
  • "virtual cast” provided by Dwango Co., Ltd. is known.
  • a character object of another user enters a moving image distributed by a certain distribution user, and two distribution users can virtually co-star in the moving image via each character object.
  • the purpose of the present disclosure is to provide technical improvements that solve or mitigate at least some of the problems of the prior art described above.
  • One of the more specific objects of the present disclosure is to provide a moving image distribution system, a moving image distribution method, and a moving image distribution program that can select a co-star who virtually co-stars in a moving image.
  • the moving image distribution system includes one or more computer processors.
  • the one or more computer processors execute the computer-readable instructions to accept the co-star application requesting co-star with the first user from the second user, and in response to the second user. Determines whether or not the second user can co-star based on the co-star applicant information regarding the co-star, and generates a co-star video in which the first user and the second user co-star when the second user is allowed to co-star. , Delivering the co-star video to one or more viewing users.
  • the determination as to whether or not the co-star can be performed may be performed based on co-star applicant information regarding the first user.
  • the co-starring movie includes a character co-starring that includes a first character object generated based on the movement of the first user and a second character object generated based on the movement of the second user. It is a video.
  • the co-starring moving image is a voice co-starring moving image including a first character object generated based on the movement of the first user and a voice of the second user. The character co-starring video and the voice co-starring video may be alternately switchable.
  • the co-star applicant information includes user evaluation information indicating an evaluation of the second user.
  • the co-star applicant information includes video evaluation information indicating an evaluation of the video distributed by the second user.
  • the co-applicant applicant information includes the video delivery time or the video delivery frequency of the second user.
  • the co-star applicant information includes co-starring prohibition information that identifies users who are prohibited from co-starring the second user.
  • the moving image distribution system excludes the second character object from the co-starring movie based on co-star rating information indicating an evaluation of the second user by the viewing user during the distribution of the co-starring movie.
  • the moving image distribution system excludes the second character object from the co-starring moving image based on a request from the first user.
  • One aspect of the present invention relates to a moving image distribution method that is executed by one or more computer processors executing computer-readable instructions.
  • the moving image distribution method is based on the co-star application information regarding the first user or the second user, in response to receiving a co-star application for co-star with the first user from the second user.
  • a step of determining whether or not co-starring is possible; a step of generating a co-starring video co-starring the first user and the second user when the co-starring of the second user is permitted; Delivering to the viewing user.
  • the moving image distribution program is, in response to receiving a co-star application requesting co-star with the first user from one or more computer processors from the second user, co-star applicant information regarding the first user or the second user. Determining whether or not the second user can co-star, and generating a co-star video in which the first user and the second user co-star when the second user is allowed to co-star. Delivering the co-starring video to one or more viewing users.
  • FIG. 1 is a block diagram showing a moving image distribution system according to an embodiment. It is a schematic diagram which shows typically the delivery user who delivers the animation delivered by the animation delivery system of FIG. 1, and the delivery user apparatus which the said delivery user is using. It is a figure explaining the co-applicant applicant information memorize
  • FIG. 1 is a block diagram showing a moving image delivery system 1 according to one embodiment
  • FIG. 2 is a user Ua, Ub who delivers a moving image in the moving image delivery system 1 and a delivery user device used by the user Ua, Ub.
  • It is a schematic diagram which shows 20a, 20b typically.
  • the distribution user device 20a has a function of distributing a moving image including a character object generated based on the movement of the user Ua in the moving image distribution system 1
  • the distribution user device 20b is a user in the moving image distribution system 1. It has a function of delivering a moving image including a character object generated based on the movement of Ub.
  • the moving image distribution system 1 can generate a moving image including character objects of two or more distribution users and distribute the moving image.
  • two or more distribution users can virtually co-star through each character object in the moving image.
  • the video is called a co-star video.
  • the user Ua can apply for co-starring with the user Ub.
  • a co-starring movie including a character object of the user Ub and a character object of the user Ua is generated, and the co-starring movie is distributed.
  • the distribution user devices 20a and 20b may have a function of viewing a moving image distributed in the moving image distribution system 1.
  • the moving image distribution system 1 includes a viewing user device 10, distribution user devices 20a and 20b, a server device 60, and a storage 70.
  • the viewing user device 10, the distribution user device 20, the server device 60, and the storage 70 are communicably connected to each other via a network 50.
  • the server device 60 is configured to deliver a moving image including animations of character objects of the delivery user Ua and the delivery user Ub, as described later.
  • the server device 60 may provide a social networking service for users to interact with each other or a platform function for the service, in addition to the video distribution service.
  • the video is distributed from the server device 60 to the viewing user device 10 and the distribution user devices 20a and 20b.
  • the delivered moving image is displayed on the display of the viewing user apparatus 10.
  • the viewing user who is the user of the viewing user device 10 can view the distributed moving image by the viewing user device 10.
  • the moving image distribution system 1 may include a plurality of viewing user devices.
  • the distribution users Ua and Ub can perform a performance while checking the moving images in the moving images by viewing the distributed moving images. Further, the distribution users Ua and Ub can view the moving images including the character objects of other users by the distribution user devices 20a and 20b.
  • the distribution user device 20a includes a computer processor 21a, a communication I/F 22a, a display 23a, a camera 24a, and a microphone 25a.
  • the distribution user device 20b includes a computer processor 21b, a communication I/F 22b, a display 23b, a camera 24b, and a microphone 25b. Since the distribution user device 20a and the distribution user device 20b have the same configuration and function, both of them may be collectively referred to as the distribution user device 20 unless it is necessary to distinguish between them.
  • the components may also be called the computer processor 21 and the like.
  • the computer processor 21 is an arithmetic unit that loads various programs that realize an operating system and various functions from a storage into a memory, and executes instructions included in the loaded programs.
  • the computer processor 21 is, for example, a CPU, MPU, DSP, GPU, various arithmetic devices other than these, or a combination thereof.
  • the computer processor 21 may be realized by an integrated circuit such as an ASIC, PLD, FPGA, MCU or the like. Although the computer processor 21 is shown as a single component in FIG. 1, the computer processor 21 may be a collection of a plurality of physically separate computer processors.
  • the communication I/F 22 is implemented as hardware, firmware, communication software such as TCP/IP driver or PPP driver, or a combination thereof.
  • the distribution user device 20 can send and receive data to and from other devices via the communication I/F 22.
  • the display 23 has a display panel and a touch panel.
  • the touch panel is configured to be able to detect a touch operation (contact operation) by the player.
  • the touch panel can detect various touch operations such as tapping, double tapping, and dragging by the player.
  • the touch panel may include a capacitance type proximity sensor and may be configured to detect a non-contact operation by the player.
  • the camera 24 continuously images the faces of the distribution users Ua and Ub, and acquires the imaged data of the faces of the distribution users Ua and Ub.
  • the imaged data of the faces of the distribution users Ua and Ub captured by the camera 24 are transmitted to the server device 60 via the communication I/F 22.
  • the camera 24 may be a 3D camera capable of detecting the depth of the face of a person.
  • the microphone 25 is a sound collecting device configured to convert input voice into voice data.
  • the microphone 25 is configured to be able to acquire the voice input of the distribution users Ua and Ub.
  • the voice input of the distribution users Ua and Ub acquired by the microphone 25 is converted into voice data, and this voice data is transmitted to the server device 60 via the communication I/F 22.
  • the viewing user device 10 may include the same components as the distribution user device 20.
  • the viewing user device 10 may include a computer processor, a communication I/F, a display, and a camera.
  • the viewing user device 10 may have the same function as the distribution user device 20 by downloading and installing predetermined application software.
  • the viewing user device 10 and the distribution user device 20 are information processing devices such as smartphones.
  • the viewing user device 10 and the distribution user device 20 are mobile phones, tablet terminals, personal computers, electronic book readers, wearable computers, game consoles, and various information processing devices other than these smartphones that can reproduce moving images. May be.
  • Each of the viewing user device 10 and the distribution user device 20 may include a sensor unit including various sensors such as a gyro sensor and a storage that stores various information, in addition to the above-described constituent elements.
  • the server device 60 includes a computer processor 61, a communication I/F 62, and a storage 63. ..
  • the computer processor 61 is an arithmetic unit that loads an operating system and various programs that realize various functions from a storage 63 or other storage into a memory and executes instructions included in the loaded programs.
  • the computer processor 61 is, for example, a CPU, MPU, DSP, GPU, various arithmetic devices other than these, or a combination thereof.
  • the computer processor 61 may be realized by an integrated circuit such as an ASIC, PLD, FPGA, MCU or the like. Although the computer processor 61 is illustrated as a single component in FIG. 1, the computer processor 61 may be a collection of a plurality of physically separate computer processors.
  • the communication I/F 62 is implemented as hardware, firmware, communication software such as a TCP/IP driver or a PPP driver, or a combination thereof.
  • the server device 60 can send and receive data to and from other devices via the communication I/F 62.
  • the storage 63 is a storage device accessed by the computer processor 61.
  • the storage 63 is, for example, a magnetic disk, an optical disk, a semiconductor memory, or various storage devices other than the above that can store data.
  • Various programs may be stored in the storage 63. At least a part of the programs and various data that can be stored in the storage 63 may be stored in a storage physically separate from the server device 60 (for example, the storage 70).
  • the program described as being executed by the computer processor 21 or the computer processor 61 or the instructions included in the program may be executed by a single computer processor or may be distributed by a plurality of computer processors. May be executed. Further, the program executed by the computer processor 21 or the computer processor 61 or the instructions included in the program may be executed by a plurality of virtual computer processors.
  • the storage 63 stores model data 63a, object data 63b, co-star applicant information 63c, co-star video information 63d, and various data necessary for generating and delivering a delivery video other than the above. It
  • the model data 63a is model data for generating a character animation.
  • the model data 63a may be three-dimensional model data for generating a three-dimensional animation, or may be two-dimensional model data for generating a two-dimensional model data.
  • the model data 63a includes, for example, rig data (also referred to as “skeleton data”) indicating the skeleton of the character's face and parts other than the face, and surface data indicating the shape and texture of the character's surface.
  • the model data 63a can include a plurality of different model data.
  • the plurality of model data may have different rig data, or may have the same rig data.
  • the plurality of model data may have surface data different from each other, or may have the same surface data.
  • the object data 63b includes asset data for constructing a virtual space that constitutes a moving image.
  • the object data 63b is data for drawing the background of the virtual space forming the moving image, data for drawing various objects displayed in the moving image, and for drawing various objects displayed in the moving image other than these. Contains data.
  • the object data 63b may include object position information indicating the position of the object in the virtual space.
  • co-star applicant information 63c An example of co-star applicant information 63c is shown in FIG. As shown in the figure, as the co-star applicant information 63c, various data regarding the user is stored in association with the account information of the user who uses the video distribution system 1. As will be described later, when the user makes a co-star application with another user, the co-star applicant information 63c can be referred to for determining whether or not the application is permitted.
  • the co-star applicant information 63c of a certain user includes user evaluation information indicating an evaluation of the user, moving image evaluation information indicating an evaluation of a moving image distributed by the user, a distribution time indicating a distribution time of the moving image distributed by the user, The number of times of distribution of the moving image distributed by the user, and co-starring prohibition information that prohibits co-starring with the user may be included.
  • the co-star applicant information 63c may include information other than the above. ..
  • the user account information is, for example, user identification information (user ID) that identifies the user.
  • the user ID is assigned to the user when the user first registers for using the service in the moving image distribution system 1.
  • the user evaluation information associated with the user's account information is information indicating the evaluation of the user by other users.
  • the user evaluation information is, for example, a user evaluation point represented by a natural number.
  • the user of the moving image distribution system 1 can distribute a moving image including the character object of the user through the server device 60.
  • the user evaluation point of a certain user may be updated based on the feedback from the viewing user for the video distributed by the user. For example, as feedback from the viewing user, selection of a “like” button displayed on the viewing screen, selection of a “boo” button indicating a negative rating, gift gifting of items displayed on the viewing screen ( Give gifts), send comments from the viewing screen, and various other feedback.
  • the "Like” button is selected when the viewer has a favorable impression on the viewed video or the distribution user who distributes the viewed video.
  • the “Like” button may be displayed as an icon including characters such as “Like” and “Like” indicating a favorable feeling on the viewing screen.
  • the "boo” button is selected when the viewer has a negative impression such as a feeling of disagreement with the viewed video or the distribution user who distributes the viewed video.
  • the “boo” button may be shown as an icon including characters that indicate an unpleasant feeling such as “not good” or “disike” on the viewing screen.
  • a button and an icon for indicating a favorable feeling may be referred to as a “favorable button” and a “favorable icon”, respectively, and a button and an icon for indicating a negative feeling may be referred to as an “antisense button” and an “antisense icon”, respectively.
  • the evaluation points may include the number of favorable button selections, the number of negative button selections, the number of gifting gifts (or the amount of gifting money), the number of comments, or other parameters related to feedback from the viewing user. For example, the user evaluation points may be increased when the viewing user gives positive feedback or negative feedback.
  • the user evaluation point may be one that evaluates the number or amount of positive feedback from the viewing user as the number of points, or one that evaluates the number or amount of negative feedback from the viewing user as the number of points. May be Further, the number of positive feedbacks and the number of negative feedbacks may increase or decrease the user evaluation points. More specifically, the user evaluation points may be increased when positive feedback is given and decreased when negative feedback is given, or vice versa.
  • the user evaluation point of a certain user may be updated at a trigger other than the feedback to the video distributed by the user. For example, when a user interacts with another user using the social networking service provided by the server device 60, the user evaluation points may be updated based on the activity using the social networking service.
  • the video evaluation information associated with the user's account information is information indicating the evaluation of the video distributed by the user from other users.
  • the moving image evaluation information is, for example, a moving image evaluation point represented by a natural number.
  • the video evaluation point of a certain user may be updated based on feedback from the viewing user for the video distributed by the user.
  • the moving image evaluation point of the user may be increased when the viewing user who views the moving image gives a positive feedback or a negative feedback to the moving image distributed by the certain user.
  • both the user evaluation point and the video evaluation point may be updated.
  • the delivery time associated with the user's account information is the delivery time of the video delivered by the user.
  • This distribution time may be a total distribution time from the start of using the moving image distribution system 1 or a distribution time in a certain fixed period.
  • the distribution count associated with the user's account information is the distribution count of the video distributed by the user.
  • the number of distributions may be the total distribution time from the start of use of the moving image distribution system 1 or the number of distributions in a certain period.
  • the co-starring prohibition information associated with the user's account information is the user ID of another user who has designated the user as a co-starring prohibition user.
  • one user can specify another user who does not perform co-starring.
  • the user A can specify the user B who seems to behave in an undesired manner in the video distributed by the user A as a co-starring user.
  • the user ID of the user A is stored as the co-starring prohibition information in association with the user ID of the user B.
  • the user ID of the user B may be stored as the co-starring prohibition information in association with the user ID of the user A.
  • co-star video information is shown in Fig. 4.
  • various data relating to the co-star moving image is stored in association with the co-star moving image identifying information for identifying the co-star moving image.
  • the co-star video information 63d of a certain co-star video may include co-star user evaluation information indicating an evaluation of the co-star user in the co-star video, and co-star time information indicating an elapsed time from the start of the co-star video.
  • co-star user When a user makes a co-star application with another user and the co-star video is distributed with the co-star application permitted, the user who has made the co-star application may be called a "co-star user".
  • a user who originally distributed a moving image and received a co-star application may be called a “host user”.
  • the co-star user information indicates an evaluation for the co-star user rather than the host user.
  • the co-star user evaluation information of a certain co-star user is, for example, a co-star user evaluation point represented by a natural number.
  • the co-starring time information indicates the elapsed time since the co-starring of the co-star user and the host user started.
  • the distribution user device 20 may realize a function other than the face motion data generation unit 211a by executing a distribution program and/or a program other than the distribution program with a computer processor.
  • the distribution user device 20 may realize a function of playing the received video by executing a viewing program for viewing the video.
  • the distribution program and the viewing program may be packaged in one application software, or may be provided as separate application software.
  • the viewing user device 10 may be configured to provide the same function as the distribution user device 20.
  • the viewing user apparatus 10 may realize a function of playing a received moving image by executing a viewing program for viewing a moving image, and by executing a distribution program, the same function as that of the face motion data generation unit 211a.
  • the function of may be realized.
  • the computer processor 21a functions as the face motion data generation unit 211a by executing computer-readable instructions included in the distribution program.
  • the computer processor 21b functions as the face motion data generation unit 211b by executing a computer-readable instruction included in the distribution program.
  • At least some of the functions implemented by the computer processors 21a and 21b may be implemented by computer processors other than the computer processors 21a and 21b of the moving image distribution system 1.
  • At least a part of the functions implemented by the computer processors 21a and 21b may be implemented by the computer processor 61 mounted in the server device 60, for example.
  • the face motion data generation unit 211a generates face motion data, which is a digital expression of the movement of the face of the distribution user Ua, based on the imaged data of the camera 24a.
  • the face motion data generation unit 211b generates face motion data, which is a digital expression of the movement of the face of the distribution user Ub, based on the imaged data of the camera 24b.
  • Face motion data is generated as needed over time.
  • the face motion data may be generated at predetermined sampling time intervals. In this way, the face motion data generated by the face motion data generation unit 211a can digitally represent the movement (change of facial expression) of the face of the distribution user Ua in time series.
  • the face motion data generated in (1) can digitally represent the facial movement (change in facial expression) of the distribution user Ub in time series.
  • the face motion data generated by the face motion data generation units 211a and 211b is transmitted to the server device 60 via the communication I/Fs 22a and 22b.
  • body motion data that is a digital representation of the position and orientation of each part of the distribution users Ua and Ub other than the body face. May be generated.
  • the distribution user device 20 may transmit the body motion data to the server device 60 in addition to the face motion data.
  • the distribution users Ua and Ub may wear motion sensors.
  • the distribution user device 20 may be configured to be able to generate body motion data based on the detection information of the motion sensors attached to the distribution users Ua and Ub.
  • the body motion data may be generated at every predetermined sampling time interval. As described above, the body motion data represents the body movements of the distribution users Ua and Ub in time series as digital data.
  • the body motion data may be generated based on the detection information of the motion sensors attached to the distribution users Ua and Ub, for example, in a shooting studio.
  • the photography studio may include a base station, a tracking sensor, and a display.
  • the base station may be a multi-axis laser emitter.
  • the motion sensor attached to the distribution users Ua and Ub may be, for example, a Vive Tracker provided by HTC CORPORATION.
  • the base station provided in the shooting studio may be, for example, a base station provided by HTC CORPORATION.
  • a supporter computer may be installed in a room separate from the shooting studio.
  • the display of the photography studio may be configured to display the information received from the support computer.
  • the server device 60 may be installed in the same room where the supporter computer is installed.
  • the room in which the supporter computer is installed and the shooting studio may be separated by a glass window.
  • the operator of the supporter computer (may be referred to as “supporter” in this specification) can visually recognize the distribution users Ua and Ub.
  • the supporter computer may be configured to be able to change the settings of various devices provided in the shooting studio in accordance with the operation of the supporter.
  • the supporter computer can, for example, set a scanning interval by the base station, set a tracking sensor, and change various settings of various devices other than these.
  • the supporter can input a message to the supporter computer and display the input message on the display of the shooting studio.
  • the computer processor 61 executes computer-readable instructions included in the distribution program to generate an animation generation unit 61a, a moving image generation unit 61b, a moving image distribution unit 61c, a co-star application determination unit 61d, a co-star application processing unit 61e, and a co-star. It functions as the end processing unit 61f.
  • the animation generation unit 61a applies the face motion data generated by the face motion data generation unit 21a of the distribution user device 20 to predetermined model data included in the model data 63a to generate the animation of the character object. Is composed of.
  • the animation generation unit 61a can generate the animation of the character object so that the facial expression of the character object changes based on the face motion data.
  • the animation generation unit 61a can generate an animation of a character object that moves in synchronization with the movement of the facial expression of the distribution user Ua, based on the face motion data regarding the distribution user Ua.
  • the animation generation unit 61a can generate the animation of the character object that moves in synchronization with the movement of the facial expression of the distribution user Ub, based on the face motion data regarding the distribution user Ub.
  • the animation generation unit 61a determines the distribution users Ua and Ub based on the body motion data and the face motion data regarding the distribution users Ua and Ub. It is possible to generate an animation of a character object that moves in synchronization with the movements of the body and facial expressions. ..
  • the moving image generation unit 61b When distributing the moving image of the distribution user Ua, the moving image generation unit 61b generates a background image indicating the background using the object data 63b, and the background image and the animation of the character object corresponding to the distribution user Ua. It is possible to generate a moving image including.
  • the moving image generation unit 61b can synthesize the generated moving image with the voice of the distribution user Ua generated based on the sound data received from the distribution user device 20a.
  • the moving image generation unit 61b when the moving image of the distribution user Ub is distributed, the moving image generation unit 61b generates a background image indicating a background using the object data 63b, and the background image and the character object corresponding to the distribution user Ub.
  • An animation can be generated and a moving image including the animation can be generated.
  • the moving image generation unit 61b can synthesize the generated moving image with the voice of the distribution user Ub generated based on the voice data received from the distribution user device 20b.
  • the character objects corresponding to the distribution users Ua and Ub are displayed by being superimposed on the background image.
  • the moving image generation unit 61b generates an animation of a character object that moves in synchronization with the facial expression of the delivery user Ua or the delivery user Ub, and the animation of the delivery user Ua or the delivery user Ub is combined with this animation. It is possible to generate a distributed video for distribution.
  • the moving image distribution unit 61c distributes the moving image generated by the moving image generation unit 61b. This moving image is distributed to the viewing user device 10 and other viewing user devices via the network 50. The generated moving image is also distributed to the distribution user devices 20a and 20b. The received moving image is reproduced on the viewing user device 10 and the distribution user devices 20a and 20b.
  • the moving image distribution unit 61c may monitor at least one of the distribution time and the distribution count of the moving image for each distribution user.
  • the video distribution unit 61c may update the distribution time and the distribution count of the co-star applicant information based on the monitor result.
  • 5 and 6a to 6b show display examples of moving images distributed from the moving image distribution unit 61c.
  • the distribution user Ub uses the distribution user device 20b to distribute a moving image including its own character object, and the moving image is reproduced on the viewing user device 10 and the distribution user devices 20a and 20b. ing.
  • the distribution user Ua does not distribute the moving image, but views the moving image distributed by the distribution user Ub which is another distribution user. Therefore, in the description regarding FIGS. 5 and 6a to 6b, the distribution user Ua may also be referred to as a viewing user.
  • 5 shows a display example of a moving image reproduced on the viewing user apparatus 10
  • FIG. 6a shows a display example of a moving image reproduced on the distribution user apparatus 20a
  • FIG. 6b shows a reproduction example on the distribution user apparatus 20b.
  • the display example of the moving image shown is shown.
  • the display image 30 of the moving image distributed from the server device 60 is displayed on the display of the viewing user device 10.
  • the character object 31 of the distribution user Ub generated by the animation generation unit 61a the gift button 32, the evaluation button 33, the comment button 34, and the comment display.
  • a region 35 is included.
  • the display image 130 of the moving image distributed from the server device 60 is displayed on the display of the distribution user device 20a. Similar to the display image 30, the display image 130 includes a character object 31 of the delivery user Ub, a gift button 32, an evaluation button 33, a comment button 34, and a comment display area 35. In addition to this, the display image 130 includes a co-starring request button 36 for requesting a co-starring with the distribution user Ub in the video distributed by the distribution user Ub.
  • the distribution user device 20a can display the distributed display image 130 of the moving image by executing application software including a viewing program, for example.
  • the display image 30 of the viewing user device 10 does not include the co-star application button 36.
  • the co-star application button 36 is included when the application software including the distribution program is not downloaded or installed in the viewing user apparatus 10 and when the application software including the distribution program is not activated in the viewing user apparatus 10.
  • the display image 30 of the viewing user apparatus 10 is generated so as not to exist.
  • the co-star application button 36 may be displayed on the display image 30 of the viewing user device 10.
  • the co-star application button 36 is included when the application software including the distribution program is downloaded or installed in the viewing user apparatus 10, or when the application software including the distribution program is activated in the viewing user apparatus 10.
  • the display image 30 of the viewing user device 10 is generated.
  • the character object 31 Since the character object 31 is generated by applying the face motion data of the distribution user Ub to the model data included in the model data 63a as described above, it is synchronized with the movement of the facial expression of the distribution user Ub. The expression changes.
  • the character object 31 can be controlled so that the parts other than the face thereof also change in synchronization with the body movement of the distribution user Ub.
  • the gift button 32 is displayed on the display screen 30 in a selectable manner by operating the viewing user device 10.
  • the gift button 32 can be selected by, for example, a tap operation on the area where the gift button 32 is displayed on the touch panel of the viewing user apparatus 10.
  • a gift to be gifted to the distribution user here, the distribution user Ub
  • Window is displayed.
  • the viewing user can purchase a gift to be gifted from the gifts displayed in the window.
  • the display screen 30 displays a window containing a list of purchased gifts in response to the selection of the gift button 32. In this case, the viewing user can select a gift to be gifted from the gifts displayed in the window.
  • the gifting information may be transmitted to the server device 60.
  • This gifting information may include gift identification information (gift ID) that specifies a gift to be gifted.
  • gift ID gift identification information
  • the viewing user who is watching the video can provide (gift) a desired gift to the distribution user who is distributing the video by selecting the gift button 32.
  • the evaluation button 33 is displayed on the display screen 30 so that it can be selected by the viewing user who uses the viewing user device 10.
  • the evaluation button 33 can be selected by, for example, a tap operation on the area where the evaluation button 33 is displayed on the touch panel of the viewing user apparatus 10.
  • the distribution user (the distribution user Ub in the illustrated example) who distributes the video is positively evaluated or the distribution video is affirmed.
  • the evaluation update information indicating that the objective evaluation has been performed may be transmitted to the server device 60.
  • the server device 60 can update the co-star applicant information based on the evaluation update information from the viewing user.
  • At least one of the user evaluation information and the video evaluation information included in the co-star applicant information may be updated based on the evaluation update information from the viewing user.
  • the rating button 33 included in the display image 30 shown in FIG. 5 is selected by the viewing user, the user rating information of the distribution user Ub distributing the video displayed on the viewing user device 10 and At least one of the moving image evaluation information may be updated.
  • evaluation information indicating that a negative evaluation is made on the moving image may be transmitted to the server device 60.
  • the evaluation information indicating a positive evaluation of the moving image may be referred to as positive evaluation information, and the evaluation information indicating that the moving image is negatively evaluated may be referred to as negative evaluation information.
  • the server device 60 may increase at least one of the user evaluation information and the moving image evaluation information.
  • the server device 60 may decrease at least one of the user evaluation information and the moving image evaluation information.
  • the comment button 34 is displayed on the display screen 30 so that the user can select it.
  • a comment input window for inputting a comment is displayed on the display screen 30.
  • the viewing user can input a comment via the input mechanism of the viewing user device 10 or the distribution user device 20a.
  • the input comment is transmitted from the viewing user device 10 and the distribution user device 20a to the server device 60.
  • the server device 60 receives comments from the viewing user device 10, the distribution user device 20a, and user devices other than these, and displays the comments in the comment display area 35 in the display image 30.
  • comments posted by each user are displayed in chronological order, for example.
  • the comment display area 35 occupies a part of the display screen 30.
  • up to three comments can be displayed in the comment display area 35.
  • the comments are deleted from the comment display area 35 in order from the oldest posted time. Therefore, the display time of each comment in the comment area 35 becomes shorter as the frequency of received comments becomes higher.
  • the display image 40 of the moving image distributed from the server device 60 is displayed on the display of the distribution user device 20b.
  • the character object 31 corresponding to the distribution user Ub the display instruction buttons 42a to 42c for displaying the gift received from the viewing user in the moving image
  • the comment display Region 35 and are included.
  • the display image 40 displayed on the distribution user device 20b includes the same background image, the character object image, and the comment as the display images 30 and 130.
  • the display image 40 does not include the gift button 32, the evaluation button 33, the comment button 34, and the co-star application button 36, but includes the display instruction buttons 42a to 42c. Different.
  • the co-star application determination unit 61d when accepting a co-star application from a certain user, determines whether to permit the co-star application of the user.
  • the co-star application is transmitted to the server device 60 by, for example, selecting the co-star application button 36 while viewing the distributed video, and the server device 60 accepts the transmitted co-star application.
  • a user who makes a co-star application may be called a co-star application user, and a user who has received a co-star application may be called an original user.
  • the user B makes a co-star application to the user A who is delivering the image
  • the user A is the original user and the user B is the co-star application user.
  • the distribution user Ua who is watching a moving image including the character object 31 of the distribution user Ub has made a request for co-starring with the distribution user Ub.
  • the distribution user Ua can transmit a co-starring application for requesting a co-starring with the distribution user Ub to the server device 60 by selecting the co-starring application button 36 on the distribution user device 20a.
  • the distribution user Ua is a co-star application user.
  • the application software including the distribution program may be activated in the distribution user device 20a.
  • the server device can accept not only the co-star application from the distribution user Ua but also co-star applications from various distribution users. ..
  • the co-star application determination unit 61d is based on at least a part of co-star applicant information of the co-star user Ua who is the co-star user. Then, it is determined whether the co-starring between the distribution user Ua and the distribution user Ub is permitted. In one embodiment, the co-star application determination unit 61d determines whether or not the co-star performance of the distribution user Ua is possible based on the user evaluation information in the co-star applicant information of the distribution user Ua who is the co-star application user.
  • the user evaluation information is the user evaluation point
  • the distribution user Ua when the user evaluation point is larger than a predetermined threshold value, the distribution user Ua is allowed to perform together with the distribution user Ub. Co-starring with the distribution user Ub is rejected.
  • the user evaluation points can be updated by feedback from other users.
  • the user evaluation information may be information other than the user evaluation points.
  • the user evaluation information of a user may be the number of gifts received by the user. Since the gift is given by the viewing user to the distribution user, the number of gifts given to a certain user is considered to represent the evaluation of the user.
  • the user evaluation information applicable to the present invention is not limited to that explicitly described in this specification. By determining whether or not the distribution user Ua can co-star based on the user evaluation information of the distribution user Ua, it is possible to permit co-starring only for a user who is highly evaluated by other users.
  • the co-star application determination unit 61d determines whether or not the co-star performance of the distribution user Ua can be performed based on the video evaluation information in the co-star applicant information of the distribution user Ua who is the co-star application user.
  • the co-star application determination unit 61d permits the co-star of the distribution user Ua with the distribution user Ub when the video evaluation point is larger than a predetermined threshold value, and when the video evaluation point is equal to or less than the threshold value.
  • the distribution user Ua may refuse to perform together with the distribution user Ub.
  • the moving image evaluation information applicable to the present invention is not limited to the one explicitly described in this specification.
  • the co-star application determination unit 61d determines whether or not the co-star performance of the distribution user Ua is possible based on one or both of the distribution time and the number of times of distribution of the co-star applicant information of the distribution user Ua who is the co-star application user.
  • the co-star application determination unit 61d may permit the co-star of the distribution user Ua and the distribution user Ub when at least one of the distribution time and the distribution count is larger than a threshold value set for each.
  • the co-star application determination unit 61d may allow the co-star of the distribution user Ua and the distribution user Ub when both the distribution time and the distribution count are larger than the thresholds set for each.
  • the co-star application determination unit 61d determines whether co-starring of the distribution user Ua is possible based on co-starring prohibition information of the co-star applicant information of the distribution user Ua who is the co-star application user. For example, when the user ID of the distribution user Ub is included in the appearance prohibition information, the co-star application determination unit 61d rejects the co-starring of the distribution user Ua with the distribution user Ub, and the user ID of the distribution user Ub is the appearance prohibition information. If not included, the distribution user Ua is allowed to perform with the distribution user Ub. By referring to the co-starring prohibition information, co-starring with a user for whom co-starring is prohibited can be avoided.
  • the co-star application determination unit 61d determines based on at least a part of the co-star applicant information of the delivery user Ub who is the original user. , It is determined whether or not the co-starring of the distribution user Ua and the distribution user Ub is permitted.
  • the co-star application determination unit 61d rejects the co-star with the distribution user Ub of the distribution user Ua when the user ID of the user Ua is included in the appearance prohibition information in the co-star application information of the distribution user Ub, and the distribution user When the user ID of Ua is not included in the appearance prohibition information, the performance of the distribution user Ua with the distribution user Ub is permitted.
  • co-starring prohibition information included in the co-starring applicant information of the original user co-starring with a user who is set to prohibit co-starring can be avoided.
  • the co-star application determination unit 61d refers to the co-star application information included in the co-star applicant information other than the original user, instead of or in addition to the co-star applicant information of the original user, the co-star application user. It may be determined whether or not to permit co-starring with the original user. For example, when the distribution user Ua makes a co-star application with the distribution user Ub, the co-star application determination unit 61d determines that the distribution user Ua has the co-star application information of the distribution user Uc different from both the distribution user Ua and the distribution user Ub. When the user ID is included in the appearance prohibition information, the distribution user Ua may refuse to perform together with the distribution user Ub.
  • the co-star application determination unit 61d in the co-star applicant information of a plurality of users other than the co-star application user and the original user, when the user ID of the co-star application user is included in the appearance prohibition information, the co-star application user and the original user You may refuse to perform with the user.
  • the co-star application determination unit 61d may determine co-performability by combining the above determination conditions. For example, by combining the condition regarding the user evaluation information and the condition regarding the distribution time, it is possible to permit the co-starring only to the user who is highly evaluated by other users and who is active in distributing the moving image. When the popularity of the distribution user increases, there is a possibility that the co-star application from other users will be flooded. In such a case, it is possible to select a desired co-star from a large number of co-star application users by tightening the permission condition for permitting the co-star, which is used for the determination by the co-star application determination unit 61d.
  • the permission condition used in the co-star application determination unit 61d may be changed according to the popularity of the user who has applied for the co-star (the distribution user Ub in the above example). For example, the thresholds set for the user evaluation points, the video evaluation points, the distribution time, the number of distributions, and the co-applicant information other than these may be increased according to the popularity of the user who has applied for the co-star.
  • the popularity of the user who has received the application for co-starring can be determined, for example, based on the number of viewing users of the video distributed by the user.
  • the co-star application processing unit 61e when the co-star application determination unit 61d permits the co-star application, generates a co-star video in which the distribution user Ua and the distribution user Ub co-star based on the co-star application. ..
  • the co-star application processing unit 61e acquires the face motion data and the voice data of the delivery user Ua from the delivery user Ua.
  • the face motion data of the distribution user Ua may be transmitted from the distribution user device 20a to the server device 60 together with the co-star application, or after the co-star application is permitted, the distribution user device 20a sends the server to the server device 60 in response to a request from the server device 60. It may be transmitted to the device 60.
  • the body motion data may be provided to the server device 60 together with the face motion data of the distribution user Ua.
  • the co-star application processing unit 61e may acquire only the voice data from the distribution user Ua when the face motion data cannot be acquired from the distribution user Ua. For example, when the distribution user device 20a used by the distribution user Ua does not have the function of the face motion data generation unit 211a or other functions for moving image distribution, when the function is disabled, and other cases. In this case, the co-star application processing unit 61e may acquire voice data from the distribution user Ua without acquiring face motion data (and body motion data).
  • the co-star application processing unit 61e does not display the co-star application button 36 in the display image displayed on the delivery user device of each delivery user when the co-star application determination unit 61d permits the co-star application (the co-star application button 36). May be disabled). As a result, it is possible to prevent an extra application for co-starring from being made when co-starring is permitted.
  • the co-star application processing unit 61e adds the animation of the character object of the distribution user Ua to the moving image including the character object 31 of the distribution user Ub based on the face motion data of the distribution user Ua. Then, generate a co-star movie.
  • the animation of the character object of the distribution user Ua may be generated in the animation generation unit 61a based on the face motion data of the distribution user Ua.
  • the animation of the character object of the distribution user Ua may be generated by applying the face motion data of the distribution user Ua to the model data for the distribution user Ua included in the model data 63a.
  • the co-star application processing unit 61e generates a layer including the animation of the character object of the distribution user Ua, and superimposes this layer on the moving image including the character object 31 of the distribution user Ub, thereby A co-star movie including the character object 31 of the distribution user Ub can be generated.
  • This is a case where the distribution user Ua and the distribution user Ub are using the moving picture distribution system 1 from a point distant from each other by generating a co-star moving picture including the character object 31 of the distribution user Ua and the character object 31 of the distribution user Ub.
  • the co-star application processing unit 61e acquires a video including the character object 31 of the distribution user Ub from the distribution user Ua. By superimposing the sound generated based on the generated sound data, it is possible to generate a co-star movie including the character object 31 of the distribution user Ub and the sound of the distribution user Ua. Even if the model data for the distribution user Ua is not set as the model data 63a, the co-star application processing unit 61e, based on the audio data acquired from the distribution user Ua, in the moving image including the character object 31 of the distribution user Ub. By superimposing the generated sound, the co-star movie including the character object 31 of the distribution user Ub and the sound of the distribution user Ua can be generated. In this way, the distribution user Ua can perform together with the distribution user Ub by his/her own voice.
  • the co-star application processing unit 61e when the face motion data cannot be acquired from the delivery user Ua, delivers the co-star video including the voice of the delivery user Ua and the character object 31 of the delivery user Ub, and then acquires the face motion data from the delivery user Ua.
  • the character object of the distribution user Ua based on the face motion data of the distribution user Ua at the timing, it is possible to generate a co-star movie including the character object of the distribution user Ua and the character object 31 of the distribution user Ub. ..
  • the co-star application processing unit 61e switches the co-star video including the voice of the delivery user Ua and the character object 31 of the delivery user Ub to the co-star video including the character object of the delivery user Ua and the character object 31 of the delivery user Ub. be able to. Contrary to this, the co-star application processing unit 61e generates a co-star video including the character object 31 of the delivery user Ua and the character object 31 of the delivery user Ub, and a co-star video including the voice of the delivery user Ua and the character object 31 of the delivery user Ub. You can switch to.
  • a co-starring video that is co-starred by voice (sometimes called a “voice co-starring video”) and a co-starring video that is co-starred by a character object (sometimes called a “character co-star video”). .) and may be alternately switchable.
  • the generated co-star video is delivered by the video delivery unit 61c.
  • the co-star video may be created by the distribution user device 20a.
  • the co-starring video is transmitted from the distribution user device 20a to the server device 60 and distributed by the video distribution unit 61c of the server device 60. ..
  • FIG. 7 and 8a to 8b show display examples of the co-star video distributed from the video distribution unit 61c.
  • the distribution user Ua permits the distribution user Ub to apply for a co-starring performance, and therefore a co-starring video including the character object 131 of the distribution user Ua and the character object 31 of the distribution user Ub is distributed. There is.
  • a display image 230 of the co-starring movie distributed from the server device 60 is displayed on the display of the viewing user device 10.
  • the display image 230 of the co-star moving image displayed on the viewing user device 10 includes the character object 131 of the distribution user Ua in addition to the character object 31 of the distribution user Ub.
  • the character object 131 of the distribution user Ua is generated by the animation generation unit 61a or the co-star application processing unit 61e as described above.
  • the co-star moving image display image 230 includes a gift button 32, an evaluation button 33, a comment button 34, and a comment display area 35, like the original distribution image shown in FIG.
  • the display image 230 of the co-star moving image includes guest evaluation buttons 133a and 133b.
  • the guest evaluation button 133a is a button for transmitting, to the server device 60, positive evaluation information indicating a positive evaluation of the guest user (the delivery user Ua is a guest user in the illustrated example).
  • the button 133b is a button for transmitting negative evaluation information indicating a negative evaluation of the co-star movie to the server device 60.
  • the distributed image 230 of the co-star movie is a horizontally long image as shown in the figure.
  • the co-star application processing unit 61e or the video delivery unit 61c delivers the co-star video as a horizontally long video.
  • the distribution image 230 of the co-starring moving image is displayed on the viewing user device 10 as a horizontally long image.
  • the co-starring moving image is converted to horizontally long and distributed. Since the co-star movie includes the character objects of the two distribution users, it is easy to display the character objects for the two people without duplication by making the image horizontally long.
  • the left half from the viewing user's point of view may be the area allocated to the original distribution user's character object, and the right half may be the area allocated to the distribution user's character object making the co-star application. ..
  • the allocation of the area to each distribution user may be arbitrarily determined so that the character objects do not overlap each other.
  • a display image 330 of the co-star moving image distributed from the server device 60 is displayed on the display of the distribution user device 20a of the distribution user Ua.
  • the display image 330 includes the same background image, character object image, and comment as the display image 230.
  • the display image 330 differs from the display image 230 in that it does not include the gift button 32, the evaluation button 33, the comment button 34, and the co-star application button 36, but includes the display instruction buttons 42a to 42c.
  • the display image 430 of the co-star moving image distributed from the server device 60 is displayed on the display of the distribution user device 20b.
  • the display image 430 includes the same background image as the image 330 displayed on the distribution user device 20a of the distribution user Ua of the co-star, the character objects 31, 131, the comment 35, and the display instruction buttons 42a to 42c. ..
  • the co-starring end button 45 for ending the co-starring is displayed.
  • the co-starring end button 45 is displayed on the screen 430 of the distribution user Ub who has received the co-starring application, but is not displayed on the screen of the distribution user Ua who has performed the co-starring application.
  • the co-starring end button 45 When the co-starring end button 45 is selected on the delivery user device 20b of the delivery user Ub (host user), a process for ending the co-starring with the delivery user Ua in the co-starring movie is performed.
  • the co-starring end instruction is transmitted from the distribution user device 20b to the server device 60.
  • the distribution user Ub can set the distribution user Ua who is the co-star as a co-starring prohibited user while playing the co-starring video.
  • the distribution user Ua can be set as a co-starring prohibited user when the distribution user Ua makes an undesired action or behavior in the co-starring movie.
  • the setting of the distribution user Ua as the co-starring prohibition user may be performed by recording the user ID of the distribution user Ub in the appearance prohibition information of the co-starring applicant information of the distribution user Ua.
  • the server device 60 receives a co-starring end instruction from the delivery user device 20b, the server user 60 can automatically register the delivery user Ua as a co-starring prohibited user in the co-starring applicant information of the delivery user Ub.
  • the distribution user Ub may set the distribution user Ua as the application-prohibited user other than during the reproduction of the co-star video.
  • the distribution user Ua may be set as the application-prohibited user in response to the posting of the undesirable message by the distribution user Ua.
  • a warning button (not shown) for giving a warning to the guest user may be displayed on the display image 430 of the distribution user Ub who is the host user.
  • This warning button is displayed on the display image 430 of the host user, but is not displayed on the display image of the guest user.
  • the warning button does not reach the point where the co-starring is ended immediately, but it is assumed that the warning button is selected by the host user when the guest user takes an undesirable action for the host user.
  • the warning button is selected on the distribution user device of the host user (for example, the distribution user device 20b of the distribution user Ub)
  • a warning instruction is transmitted from the distribution user device 20b to the server device 60.
  • the host user warns in the display image 330 of the co-star movie displayed on the distribution user device of the guest user (for example, the distribution user device 20a of the distribution user Ua). Warning information indicating that the event has occurred may be displayed.
  • the warning information may be displayed on the display image 230 of the viewing user device 10 instead of or in addition to the display image 330.
  • the co-star movie including the warning information may be generated in the server device 60.
  • the server device 60 counts the number of times a certain host user gives a warning instruction to a certain guest user, and when the number of warning instructions reaches a predetermined number (for example, 3 times), the host user and the guest user concerned. Processing for ending the co-starring with may be performed.
  • the process for ending the co-starring based on the warning instruction of the predetermined number of times or more may be the same process as the process for ending the co-starring based on the co-starring end instruction described above.
  • the co-star application processing unit 61e may issue a video ID that identifies the co-star video that has been created. In association with this moving image ID, it is possible to store the co-star moving image information regarding the co-star moving image in the storage 63. As described above, the co-star time information of the co-star video may be updated in association with the video ID of the co-star video that has been distributed. The co-star time information may be updated based on the monitoring result obtained by monitoring the co-star video distribution time in the video distributor 61c.
  • the co-starring user evaluation information in the co-starring video information is positive evaluation information indicating a positive evaluation to the distribution user Ua, which is a guest user from the viewing user device 10, and negative evaluation information indicating a negative evaluation to the distribution user Ua. May be updated based on For example, the server device 60 may increase the co-starring user evaluation points when receiving positive evaluation information indicating a positive evaluation of the distribution user Ua from the viewing user device 10, and may be negative for the distribution user Ua. The co-star user evaluation points may be decreased when the negative evaluation information indicating the evaluation is received. When the viewing user stops viewing the co-starring video on the way, the viewing user may not be satisfied with the co-starring video.
  • the viewing user stops viewing the co-starring video on the way, it may be determined that the guest user has a negative evaluation, and the co-starring user evaluation point of the guest user may be reduced.
  • At least one of the positive evaluation information and the negative evaluation information may be updated so as to decrease over time. For example, even if the distribution user Ua has 100 points of positive evaluation information at a certain time, the positive evaluation information may be updated so as to approach zero over time.
  • the negative evaluation information about a certain user exceeds a predetermined value, the user may be prohibited from performing together with other users. For example, in the display image displayed on the distribution user device of the user whose negative evaluation information exceeds the predetermined value, processing for not displaying the co-star application button may be performed.
  • the co-starring ending processing unit 61f is a distribution user Ua who is a guest user and a distribution which is a host user. Processing for ending the co-starring with the user Ub is performed.
  • the co-starring end processing unit 61f receives a co-starring end instruction from the distribution user device 20b of the distribution user Ub who is the host user, it determines that the co-starring end condition is satisfied and ends the co-starring video distribution. Process.
  • the co-starring end processing unit 61f stops the generation of the animation of the character object 131 of the delivery user Ua, and does not include the character object 131 of the delivery user Ua, but the character object 31 of the delivery user Ub. Generate a video containing. In other words, the character object 131 of the delivery user Ua who is a guest user is excluded from the delivered video. By removing the character object 131 of the distribution user Ua, which is a guest user, the co-starring of the distribution user Ua and the distribution user Ub ends. After the co-starring ends, the distribution of the moving image including the character object 31 may be continued without including the character object 131.
  • the moving image distributed after the end of this co-star may be generated as a vertically long moving image as shown in FIG. That is, the orientation of the moving image may be changed according to the end of the co-starring. In one embodiment, the orientation of the video may change from landscape to portrait depending on the end of the co-star. In another embodiment, the distribution of the moving image by the distribution user Ub, which is the host user, may be ended in response to the end of the co-starring. In one embodiment, when a co-star application from another user has already been received when the co-star with the distribution user Ub ends, the co-star application determination unit 61d determines that the co-star performance of the other user is based on the co-star application. It may be determined whether or not it is possible.
  • the co-starring end processing unit 61f may accept a co-starring application from another user in response to the end of the co-starring with the distribution user Ub. For example, processing for displaying the co-star application button 36 again (releasing the disabled state of the co-star application button 36) in the display image on the delivery user device of each delivery user may be performed. ..
  • the co-starring end processing unit 61f determines whether or not the character object 131 of the distribution user Ua who is a guest user is in the inactive state, and when it is determined that the character object 131 is in the non-active state, the co-starring end is performed. It is determined that the condition is satisfied. In one embodiment, whether or not the character object 131 of the distribution user Ua is in the inactive state is determined by at least one of face motion data, body motion data, and voice data received from the distribution user device 20a of the distribution user Ua. It is determined based on. Since the face motion data, the body motion data, and the voice data are all data indicating the movement of the distribution user, they may be collectively referred to as “motion data” in this specification.
  • Whether or not the character object 131 of the delivery user Ua is in the non-active state is determined based on the motion data, that is, based on at least one of the face motion data, the body motion data, and the voice data. For example, if face motion data is not input from the distribution user device 20a of the distribution user Ua for a certain period, the facial expression of the character object 131 of the distribution user Ua remains stationary in the co-star moving image, and thus the character object 131 is inactive. It may be determined to be in the state.
  • the character object 131 of the distribution user Ua is inactive. It may be determined to be in the state.
  • the voice data is not input from the delivery user device 20a of the delivery user Ua for a certain period of time, the character object 131 of the delivery user Ua remains silent for the certain period of time in the co-star moving image, so that the character object 131 is in an inactive state. It may be determined.
  • the co-star ending processing unit 61f ends the co-star by excluding the character object 131 of the delivery user Ua who is the guest user from the video according to the co-star video information of the co-star video that has been distributed. For example, when the co-star user evaluation information is the co-star user evaluation point, the co-star ending processing unit 61f excludes the character object 131 of the delivery user Ua from the video when the co-star user rating point becomes smaller than a predetermined threshold value. By doing so, the co-starring with the distribution user Ua can be ended. The co-star user evaluation point becomes smaller as the viewing user receives the negative evaluation information for the distribution user Ua as the guest user. Therefore, by determining whether or not to terminate the co-starring with the distribution user Ua based on the co-starring user evaluation points, it is possible to avoid co-starring with the user who has a low rating from the viewing user for a long time.
  • FIG. 9 is a flowchart showing the flow of the moving image distribution process in the embodiment.
  • the moving image distribution process described with reference to FIG. 9 it is assumed that the moving image generated based on the face motion data acquired by the distribution user Ub using the distribution user device 20b is distributed.
  • step S11 face motion data, which is a digital expression of the facial movement (expression) of the distribution user Ub, is generated.
  • the generation of the face motion data is performed by, for example, the face motion data generation unit 121b of the distribution user device 20b.
  • voice data may be generated based on voice input from the distribution users Ua and Ub.
  • the generated face motion data and voice data are transmitted to the server device 60.
  • step S12 the face motion data from the distribution user device 20b is applied to the model data for the distribution user Ub, so that the animation of the character object 31 that moves in synchronization with the movement of the expression of the distribution user Ub is generated. Is generated.
  • the generation of this animation is performed, for example, by the animation generation unit 61a.
  • step S13 a moving image including the animation of the character object 31 of the distribution user Ub is generated.
  • the voice of the distribution user Ub may be synthesized with this moving image.
  • the animation of the character object 31 is displayed superimposed on the background image.
  • the generation of the moving image is performed by, for example, the moving image generating unit 61b described above.
  • step S14 the moving image generated in step S13 is distributed.
  • This moving image is distributed to the viewing user device 10 and other viewing user devices and distribution user devices via the network 50.
  • a display screen as shown in FIG. 4 is displayed on the viewing user apparatus 10.
  • the moving image is continuously distributed for a predetermined distribution period.
  • the distribution period of the moving image can be set to, for example, 30 seconds, 1 minute, 5 minutes, 10 minutes, 30 minutes, 60 minutes, 120 minutes, and any time other than these.
  • the distribution of the moving image is performed, for example, by the moving image distribution unit 61c.
  • step S15 it is determined whether or not an end condition for ending the distribution of the moving image is satisfied.
  • the end condition is, for example, that the delivery end time has been reached, the delivery user Ub has performed an operation for ending the delivery in the delivery user device 20b, or any other condition. If the ending condition is not satisfied, the processes of steps S11 to S14 are repeatedly executed, and a moving image including an animation synchronized with the movement of the distribution user Ub, or a co-starring video if the co-starring with the distribution user Ua continues. Will continue to be delivered.
  • the distribution process of the moving image is ended.
  • FIG. 10 is a flowchart showing a flow of processing for delivering a co-starring moving image in one embodiment.
  • the co-starring application is made to the distribution user Ub from the distribution user Ua who is watching the video including the character object of the distribution user Ub. ing.
  • the distribution process of the co-star movie is performed in parallel with the distribution process of the movie shown in FIG.
  • step S21 it is determined in step S21 whether a co-star application has been made by a user other than the distribution user Ub.
  • the co-star application is made, for example, by the distribution user Ua.
  • the process proceeds to step S22.
  • step S22 it is determined whether or not to permit the co-star application of the distribution user Ua who has applied for the co-star. Whether to permit the co-star application is determined based on at least a part of the co-star applicant information of the distribution user Ua. For example, when the user evaluation point of the co-star application information of the distribution user Ua is larger than a predetermined threshold value, the co-starring of the distribution user Ua with the distribution user Ub is permitted, and when the user evaluation point is less than the threshold value, the distribution user Ua distribution. Co-starring with the user Ub is rejected.
  • the determination as to whether or not to permit the co-star application is performed by, for example, the co-star application determination unit 61d.
  • step S22 If it is determined in step S22 that the joint performance application is permitted, the process proceeds to step S23.
  • step S23 an animation of the character object 131 of the distribution user Ua is generated based on the face motion data of the distribution user Ua. Then, by adding the animation of the character object 131 of the distribution user Ua to the moving image that is being distributed (a moving image including the character object 31 of the distribution user Ub), a co-starring moving image is generated.
  • the process in step S16 is performed by, for example, the co-star application processing unit 61e.
  • step S24 the co-star moving image generated in step S23 is distributed.
  • This co-star video is distributed to the viewing user device 10 and other viewing user devices and distribution user devices via the network 50.
  • the co-star movie includes, for example, as shown in FIGS. 7 and 8a to 8b, an animation of the character object 131 of the distribution user Ua and an animation of the character object 31 of the distribution user Ub.
  • step S25 it is determined whether or not the co-starring end condition is satisfied. For example, when the character object 131 of the distribution user Ua who is a guest user is in a non-active state, when the co-star user evaluation point becomes equal to or lower than a predetermined threshold value, when a co-starring end instruction is received from the host user, the distribution user Ub. , Or if the predetermined time or more has passed from the start of distribution of the co-starring movie, it is determined that the co-starring end condition is satisfied. If the co-starring condition is satisfied, the process proceeds to step S26.
  • step S26 a process for ending the distribution of the co-star video is performed. For example, by removing the character object 131 of the distribution user Ua, which is a guest user, from the co-starring movie, the co-starring of the distribution user Ua and the distribution user Ub ends. Even if the co-star has ended, the video may be continuously delivered. The character object 131 of the distribution user Ua is not included in the moving image distributed after the co-starring ends.
  • the determination of the co-starring ending condition and the co-starring ending process are performed by, for example, the co-starring processing unit 61f.
  • the delivery user Ub of the delivery user Ua in response to receiving the co-star application requesting co-starring with the delivery user Ub from the delivery user Ua, the delivery user Ub of the delivery user Ua is based on the co-star application information regarding the delivery user Ub. It is determined whether or not to perform with. By this determination, a co-starring movie is generated when co-starring is permitted, and the generated co-starring movie is distributed. Thereby, the co-star can be selected based on the co-star applicant information.
  • the co-star applicant information includes user evaluation information indicating an evaluation of the distribution user Ua who has applied for the co-star.
  • the co-star can be selected based on the evaluation of the user who applies for the co-star. Therefore, it is possible to permit the co-starring only when the distribution user Ua is highly evaluated by other users.
  • the co-star applicant information includes video evaluation information for the video distributed by the distribution user Ua. Accordingly, the co-star can be selected based on the evaluation of the moving image distributed by the user who applies for the co-star. Therefore, the co-star can be permitted only when the video distributed by the distribution user Ua is highly evaluated by other users.
  • the co-star applicant information includes the video distribution time or the video distribution frequency of the distribution user Ua.
  • the co-star can be selected based on the distribution time or the distribution frequency of the video distributed by the user who applies for the co-star. Therefore, it is possible to permit the co-starring only when the distribution user Ua is actively distributing the moving image.
  • the co-star application information includes co-star prohibition information that identifies users whose distribution user Ua is prohibited from co-starring. Accordingly, when the distribution user Ua is registered as a co-starred user, co-starring with the distribution user Ua can be avoided.
  • the character object 131 of the distribution user Ua when it is determined that the character object 131 of the distribution user Ua is in the inactive state based on the motion data indicating the movement of the distribution user Ua, the character object 131 may be excluded from the co-star movie. it can. As a result, it is possible to exclude co-stars who do not contribute to improving the entertainment property of the moving image from the moving image of the distribution user Ub, which is the host user. ..
  • the character object 131 of the distribution user Ua is excluded from the co-star video based on the co-star evaluation information indicating the evaluation of the distribution user Ua from the viewing user.
  • the character object 131 of the distribution user Ua can be excluded from the moving image of the distribution user Ub based on the request from the distribution user Ub, which is the host user.
  • the co-star can be excluded from the moving image according to the determination of the distribution user Ub, which is the host user.
  • the distribution users Ua and Ub can distribute a moving picture including a character object that moves according to their facial expressions by the distribution user device 20 equipped with a camera such as a smartphone.
  • a camera such as a smartphone.
  • At least a part of the functions realized by the computer processor 61 may be realized by a computer processor other than the computer processor 61 of the moving image distribution system 1. At least a part of the functions implemented by the computer processor 61 may be implemented by the computer processor 21 of the distribution user device 20 or the computer processor of the viewing user device 10, for example. Specifically, some or all of the functions of the animation generation unit 61a and the moving image generation unit 61b may be executed by the distribution user device 20. For example, the moving image generated in the distribution user device 20 may be transmitted to the server device 60 and distributed from the server device 60 to the viewing user device 10.
  • the animation of the character object 131 of the distribution user Ua who has made the co-starring request is performed by the server. It may be generated by any of the device 60, the distribution user device 20a of the distribution user Ua, the distribution user device 20b of the distribution user Ub, or the viewing user device 10.
  • the server device 60, the distribution user device 20a of the distribution user Ua, and the distribution user Ub generate the co-star moving image including the generated distribution object Ua of the distribution user Ua, the distribution moving image of the distribution user Ub, and the character object 31. It may be performed by either the user device 20b or the viewing user device 10.
  • the animation of the character object 131 of the distribution user Ua is generated by the distribution user device 20b of the distribution user Ub, from the distribution user device 20a of the distribution user Ua to the distribution user device 20b of the distribution user Ub. Then, the face motion data and voice data of the distribution user Ua are transmitted.
  • the animation of the character object 131 is generated by applying the face motion data and the voice data of the distribution user Ua received from the distribution user device 20a to the model data for the distribution user Ua.
  • the model data for the distribution user Ua may be transmitted from the server device 60 to the distribution user device 20a.
  • the distribution user device 20a of the distribution user Ua sends the face motion data of the distribution user Ua to the viewing user device 10. And the voice data are transmitted, and the face motion data and the voice data of the delivery user Ub are transmitted from the delivery user device 20b of the delivery user Ub to the viewing user device 10.
  • the animation of the character object 131 is generated, and from the distribution user device 20b.
  • the animation of the character object 31 may be generated by applying the received face motion data and voice data of the distribution user Ub to the model data for the distribution user Ub.
  • the model data for the distribution user Ua and the model data for the distribution user Ub may be transmitted from the server device 60 to the viewing user device 10.
  • the animation of the character object of the distribution user can be generated by any device included in the moving image distribution system 1.
  • Animations of character objects may be generated on devices not explicitly shown in FIG. Face motion data and voice data of the distribution user Ua are transmitted from the distribution user device 20a of the distribution user Ua to the device for generating the animation of the character object, and face motion data of the distribution user Ub is transmitted from the distribution user device 20b of the distribution user Ub. And voice data is transmitted.
  • Body motion may be transmitted in addition to face motion.
  • the co-star video may include character objects of three or more distribution users. That is, three or more distribution users may virtually co-star in the moving image by using each character object.
  • An upper limit may be set for the number of distribution users who can co-star.
  • a process (disable process) for making the co-star application button 36 unselectable may be performed in the display image of.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Development Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Game Theory and Decision Science (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Operations Research (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本発明の一態様による動画配信システムは、一又は複数のコンピュータプロセッサを備えている。当該一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、前記共演動画を一又は複数の視聴ユーザに配信する。

Description

動画配信システム、動画配信方法及び動画配信プログラム
 本明細書における開示は、動画配信システム、動画配信方法及び動画配信プログラムに関する。本明細書における開示は、より具体的には、ユーザの動きに基づいて生成されるキャラクタオブジェクトを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラムに関する。
 従来から、配信ユーザの動きに基づいてキャラクタオブジェクトのアニメーションを生成し、かかるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システムが知られている。このような動画配信システムは、例えば、特開2015-184689号公報(特許文献1)及び「長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74-79」(非特許文献1)に開示されている。
 配信ユーザの動きに基づいて生成されたキャラクタオブジェクトを含む動画を配信する動画配信サービスが提供されている。このようなサービスとして、株式会社ドワンゴが提供する「バーチャルキャスト」が知られている。バーチャルキャストでは、ある配信ユーザが配信している動画に他のユーザのキャラクタオブジェクトが入り込み、二人の配信ユーザが各々のキャラクタオブジェクトを介して動画内で仮想的に共演することができる。
特開2015-184689号公報
長谷川 雄介,ヴァーチャルアイドル新時代の幕開け PROJECT MariA,CG WORLD,日本,株式会社ボーンデジタル,2017年11月10日,第231巻,pp.74-79 株式会社ドワンゴ、゛[バーチャルキャスト]凸について″、[online]、[平成30年11月25日検索]、インターネット〈URL:https://qa.nicovideo.jp/faq/show/10740?back=front%2Fcategory%3Ashow&category_id=718&page=1&site_domain=default&sort=sort_access&sort_order=desc〉
 配信動画のクオリティを保つために、どのような配信ユーザが共演相手であるかは、配信ユーザにとって重大な関心事である。しかしながら、現実世界で出演者がスタジオに集まって共演する場合と異なり、キャラクタオブジェクトを介して仮想的に共演する場合には、共演相手の配信ユーザのことを把握することが困難である。他のユーザから共演の申請があった場合に、その申請を自動的に受け入れたり、配信ユーザの決定に委ねたりすると、配信動画内で望ましくない振る舞いを行う共演相手が現れるおそれがある。動画内での共演がキャラクタオブジェクトを介して行われる場合には、共演相手に匿名性があるため、望ましくない行動を取ることに歯止めがかかりにくい。
 このように、キャラクタオブジェクトを介して動画内で複数の配信ユーザが仮想的に共演する場合、配信動画のクオリティを確保するために、共演相手の選択を適切に行うことが望まれる。しかしながら、上記のように、現実世界での共演とは異なり、動画の配信前に共演相手が望ましい行動を取るか予測することが困難である。
 本開示の目的は、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することである。本開示のより具体的な目的の一つは、動画内で仮想的に共演する共演相手を選抜できる動画配信システム、動画配信方法及び動画配信プログラムを提供することである。
 本発明の一態様による動画配信システムは、一又は複数のコンピュータプロセッサを備えている。一態様において、当該一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、前記共演動画を一又は複数の視聴ユーザに配信する。共演可否の判定は、前記第1ユーザに関する共演申請者情報に基づいて行われてもよい。
 本発明の一態様においては、前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含むキャラクタ共演動画である。本発明の他の態様において、前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの音声を含む音声共演動画である。前記キャラクタ共演動画と前記音声共演動画とは交互に切り替え可能であってもよい。
 本発明の一態様において、共演申請者情報は、前記第2ユーザに対する評価を示すユーザ評価情報を含む。
 本発明の一態様において、共演申請者情報は、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む。
 本発明の一態様において、共演申請者情報は、前記第2ユーザの動画配信時間又は動画配信回数を含む。
 本発明の一態様において、共演申請者情報は、前記第2ユーザが共演を禁止されているユーザを特定する共演禁止情報を含む。
 本発明の一態様における動画配信システムは、前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する。
 本発明の一態様における動画配信システムは、前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する。
 本発明の一態様における動画配信システムは、前記第1ユーザからの要求に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する。
 本発明の一態様は、一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法に関する。当該動画配信方法は、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、前記共演動画を一又は複数の視聴ユーザに配信する工程と、を備える。
 本発明の一態様は、動画配信プログラムに関する。当該動画配信プログラムは、一又は複数のコンピュータプロセッサに、第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、前記共演動画を一又は複数の視聴ユーザに配信する工程と、を実行させる。
 本発明の実施形態によれば、動画内で仮想的に共演する共演相手を選抜することができる。
一実施形態による動画配信システムを示すブロック図である。 図1の動画配信システムで配信される動画を配信する配信ユーザ及び当該配信ユーザが使用している配信ユーザ装置を模式的に示す模式図である。 図1の動画配信システムにおいて記憶される共演申請者情報を説明する図である。 図1の動画配信システムにおいて記憶される共演動画情報を説明する図である。 一実施形態において視聴ユーザ装置10に表示される表示画面の例を示す図である。 一実施形態において配信ユーザ装置20aに表示される表示画面の例を示す図である。 一実施形態において配信ユーザ装置20bに表示される表示画面の例を示す図である。 一実施形態において視聴ユーザ装置10に表示される共演動画の表示画面の例を示す図である。 一実施形態において配信ユーザ装置20aに表示される共演動画の表示画面の例を示す図である。 一実施形態において配信ユーザ装置20bに表示される共演動画の表示画面の例を示す図である。 一実施形態による動画配信処理の流れを示すフロー図である。 一実施形態において共演動画を配信する処理の流れを示すフロー図である。
 以下、図面を適宜参照し、本発明の様々な実施形態を説明する。複数の図面において同一の又は類似する構成要素には同じ参照符号が付される。
 図1及び図2を参照して、一実施形態による動画配信システムについて説明する。図1は、一実施形態による動画配信システム1を示すブロック図であり、図2は、動画配信システム1で動画を配信するユーザUa,Ub及び当該ユーザUa,Ubが使用している配信ユーザ装置20a,20bを模式的に示す模式図である。配信ユーザ装置20aは、動画配信システム1において、ユーザUaの動きに基づいて生成されるキャラクタオブジェクトを含む動画を配信するための機能を有し、配信ユーザ装置20bは、動画配信システム1において、ユーザUbの動きに基づいて生成されるキャラクタオブジェクトを含む動画を配信するための機能を有する。詳しくは後述するように、動画配信システム1は、二人以上の配信ユーザのキャラクタオブジェクトを含む動画を生成し、当該動画を配信することができる。言い換えると、動画配信システム1においては、二人以上の配信ユーザが動画内で各々のキャラクタオブジェクトを介して仮想的に共演することができる。このように、二人以上の配信ユーザが各々のキャラクタオブジェクトを介して動画内で仮想的に共演している場合、その動画を共演動画と呼ぶ。例えば、ユーザUbの動きに基づいて生成されるキャラクタオブジェクトを含む動画が配信されているときに、ユーザUaがユーザUbとの共演を申請することができる。この共演申請が許可されると、ユーザUbのキャラクタオブジェクトとユーザUaのキャラクタオブジェクトとを含む共演動画が生成され、当該共演動画が配信される。配信ユーザ装置20a,20bは、動画配信システム1において配信される動画を視聴する機能を有していてもよい。
 動画配信システム1は、視聴ユーザ装置10と、配信ユーザ装置20a,20bと、サーバ装置60と、ストレージ70と、を備える。視聴ユーザ装置10と、配信ユーザ装置20と、サーバ装置60と、ストレージ70とは、ネットワーク50を介して相互に通信可能に接続されている。サーバ装置60は、後述するように、配信ユーザUa及び配信ユーザUbのキャラクタオブジェクトのアニメーションを含む動画を配信するように構成される。サーバ装置60は、動画配信サービス以外にも、ユーザ同士が交流するためのソーシャルネットワーキングサービスまたは当該サービス用のプラットフォーム機能を提供してもよい。
 動画配信システム1において、動画は、サーバ装置60から視聴ユーザ装置10及び配信ユーザ装置20a,20bに配信される。配信された動画は、視聴ユーザ装置10のディスプレイに表示される。視聴ユーザ装置10のユーザである視聴ユーザは、配信された動画を視聴ユーザ装置10により視聴することができる。図面を簡潔するために図1には視聴ユーザ装置10が1台だけ示されているが、動画配信システム1は、複数の視聴ユーザ装置を備えていてもよい。配信ユーザUa,Ubは、配信された動画を視聴することにより、動画中の動画を確認しながらパフォーマンスを行うことができる。また、配信ユーザUa,Ubは、他のユーザのキャラクタオブジェクトを含む動画を配信ユーザ装置20a,20bにより視聴することができる。
 図示の実施形態において、配信ユーザ装置20aは、コンピュータプロセッサ21aと、通信I/F22aと、ディスプレイ23aと、カメラ24aと、マイク25aと、を備えている。同様に、配信ユーザ装置20bは、コンピュータプロセッサ21bと、通信I/F22bと、ディスプレイ23bと、カメラ24bと、マイク25bと、を備えている。配信ユーザ装置20aと配信ユーザ装置20bとは同様の構成及び機能を有しているため、両者を特に区別する必要がない場合には、両者をまとめて配信ユーザ装置20と呼ぶことがあり、その構成要素もコンピュータプロセッサ21などと呼ぶことがある。
 コンピュータプロセッサ21は、ストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ21は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ21は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ21が単一の構成要素として図示されているが、コンピュータプロセッサ21は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。
 通信I/F22は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。配信ユーザ装置20は、通信I/F22を介して、他の装置とデータを送受信することができる。
 ディスプレイ23は、表示パネルと、タッチパネルと、を有する。タッチパネルは、プレイヤのタッチ操作(接触操作)を検出することができるように構成されている。タッチパネルは、プレイヤのタップ、ダブルタップ、ドラッグ等の各種タッチ操作を検出することができる。タッチパネルは、静電容量式の近接センサを備え、プレイヤの非接触操作を検出可能に構成されてもよい。
 カメラ24は、配信ユーザUa,Ubの顔を連続的に撮像し、配信ユーザUa,Ubの顔の撮像データを取得する。カメラ24により撮像された配信ユーザUa,Ubの顔の撮像データは、通信I/F22を介してサーバ装置60に送信される。カメラ24は、人物の顔の奥行きを検出可能な3Dカメラであってもよい。
 マイク25は、入力された音声を音声データに変換するように構成された集音装置である。マイク25は、配信ユーザUa,Ubの音声入力を取得することができるように構成され。マイク25により取得された配信ユーザUa,Ubの音声入力は音声データに変換され、この音声データが通信I/F22を介してサーバ装置60に送信される。
 視聴ユーザ装置10は、配信ユーザ装置20と同様の構成要素を備えてもよい。例えば、視聴ユーザ装置10は、コンピュータプロセッサ、通信I/F、ディスプレイ、及びカメラを備えてもよい。視聴ユーザ装置10は、所定のアプリケーションソフトウェアをダウンロード及びインストールすることにより、配信ユーザ装置20と同様の機能を奏してもよい。
 視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォンなどの情報処理装置である。視聴ユーザ装置10及び配信ユーザ装置20は、スマートフォン以外に、携帯電話機、タブレット端末、パーソナルコンピュータ、電子書籍リーダー、ウェアラブルコンピュータ、ゲーム用コンソール、及びこれら以外の動画を再生可能な各種情報処理装置であってもよい。視聴ユーザ装置10及び配信ユーザ装置20の各々は、上記の構成要素以外に、ジャイロセンサ等の各種センサを備えるセンサユニット、及び各種情報を記憶するストレージを備えてもよい。
 次に、サーバ装置60について説明する。図示の実施形態において、サーバ装置60は、コンピュータプロセッサ61と、通信I/F62と、ストレージ63と、を備えている。 
 コンピュータプロセッサ61は、ストレージ63又はその他のストレージからオペレーティングシステムや様々な機能を実現する様々なプログラムをメモリにロードし、ロードしたプログラムに含まれる命令を実行する演算装置である。コンピュータプロセッサ61は、例えば、CPU、MPU、DSP、GPU、これら以外の各種演算装置、又はこれらの組み合わせである。コンピュータプロセッサ61は、ASIC、PLD、FPGA、MCU等の集積回路により実現されてもよい。図1においては、コンピュータプロセッサ61が単一の構成要素として図示されているが、コンピュータプロセッサ61は複数の物理的に別体のコンピュータプロセッサの集合であってもよい。
 通信I/F62は、ハードウェア、ファームウェア、又はTCP/IPドライバやPPPドライバ等の通信用ソフトウェア又はこれらの組み合わせとして実装される。サーバ装置60は、通信I/F62を介して、他の装置とデータを送受信することができる。
 ストレージ63は、コンピュータプロセッサ61によりアクセスされる記憶装置である。ストレージ63は、例えば、磁気ディスク、光ディスク、半導体メモリ、又はデータを記憶可能な前記以外の各種記憶装置である。ストレージ63には、様々なプログラムが記憶され得る。ストレージ63に記憶され得るプログラム及び各種データの少なくとも一部は、サーバ装置60とは物理的に別体のストレージ(例えば、ストレージ70)に格納されてもよい。
 本明細書において、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるとして説明されるプログラム又は当該プログラムに含まれる命令はそれぞれ、単一のコンピュータプロセッサで実行されてもよいし、複数のコンピュータプロセッサにより分散して実行されてもよい。また、コンピュータプロセッサ21又はコンピュータプロセッサ61によって実行されるプログラム又は当該プログラムに含まれる命令はそれぞれ、複数の仮想コンピュータプロセッサにより実行されてもよい。
 次に、ストレージ63に記憶されるデータについて説明する。図示の実施形態においては、ストレージ63には、モデルデータ63a、オブジェクトデータ63b、共演申請者情報63c、共演動画情報63d、及び前記以外の配信動画の生成及び配信に必要な様々なデータが記憶される。
 モデルデータ63aは、キャラクタのアニメーションを生成するためのモデルデータである。モデルデータ63aは、3次元のアニメーションを生成するための3次元モデルデータであってもよいし、2次元のモデルデータを生成するための2次元モデルデータであってもよい。モデルデータ63aは、例えば、キャラクタの顔及び顔以外の部分の骨格を示すリグデータ(「スケルトンデータ」と呼ばれることもある。)と、キャラクタの表面の形状や質感を示す表面データと、を含む。モデルデータ63aには、互いに異なる複数のモデルデータを含むことができる。この複数のモデルデータは、互いに異なるリグデータを有していてもよいし、同じリグデータを有していてもよい。この複数のモデルデータは、互いと異なる表面データを有していてもよいし、同じ表面データを有していてもよい。
 オブジェクトデータ63bは、動画を構成する仮想空間を構築するためのアセットデータを含む。オブジェクトデータ63bは、動画を構成する仮想空間の背景を描画するためのデータ、動画に表示される各種物体を描画するためのデータ、及びこれら以外の動画に表示される各種オブジェクトを描画するためのデータが含まれる。オブジェクトデータ63bには、仮想空間におけるオブジェクトの位置を示すオブジェクト位置情報を含んでもよい。
 共演申請者情報63cの例が図3に示されている。図示のように、共演申請者情報63cとして、動画配信システム1を利用するユーザのアカウント情報と対応付けて、当該ユーザに関する様々なデータが記憶される。後述するように、共演申請者情報63cは、ユーザが他のユーザとの共演申請を行った場合に、当該申請を許可するか否かを判定するために参照され得る。あるユーザの共演申請者情報63cには、当該ユーザに対する評価を示すユーザ評価情報、当該ユーザが配信した動画した動画に対する評価示す動画評価情報、当該ユーザが配信した動画の配信時間を示す配信時間、当該ユーザが配信した動画の配信回数、及び当該ユーザとの共演が禁止されている共演禁止情報が含まれてもよい。共演申請者情報63cには、上記以外の情報が含まれてもよい。 
 ユーザのアカウント情報は、例えば、当該ユーザを識別するユーザ識別情報(ユーザID)である。ユーザIDは、ユーザが最初に動画配信システム1にサービスの利用登録をするときに、当該ユーザに対して割り当てられる。
 ユーザのアカウント情報に対応付けられているユーザ評価情報は、当該ユーザに対する他のユーザからの評価を示す情報である。ユーザ評価情報は、例えば、自然数で表されるユーザ評価ポイントである。動画配信システム1のユーザは、自らのキャラクタオブジェクトを含む動画をサーバ装置60を介して配信することができる。あるユーザのユーザ評価ポイントは、当該ユーザが配信した動画に対する視聴ユーザからのフィードバックに基づいて更新されてもよい。例えば、視聴ユーザからのフィードバックには、視聴画面に表示される「いいね」ボタンの選択、否定的な評価を表す「ブー」ボタンの選択、視聴画面に表示されるアイテムのギフトのギフティング(ギフトを贈ること)、視聴画面からのコメントの送信、及びこれら以外の様々なフィードバックが含まれる。「いいね」ボタンは、視聴者が視聴動画や視聴動画を配信している配信ユーザに対して好感を持ったときに選択されることが想定されている。「いいね」ボタンは、視聴画面において、「いいね」や「Like」という好感を示す文字を含むアイコンとして示されてもよい。「ブー」ボタンは、視聴者が視聴動画や視聴動画を配信している配信ユーザに対して反感などのネガティブな印象を持ったときに選択されることが想定されている。「ブー」ボタンは、視聴画面において、「よくないね」や「disike」という反感を示す文字を含むアイコンとして示されてもよい。本明細書では、好感を示すためのボタン及びアイコンをそれぞれ「好感ボタン」及び「好感アイコン」と呼び、反感を示すためのボタン及びアイコンをそれぞれ「反感ボタン」及び「反感アイコン」と呼ぶことがある。評価ポイントには、好感ボタンの選択数、反感ボタンの選択数、ギフトのギフティング数(もしくはギフティング金額)、コメント数、又はこれら以外の視聴ユーザからのフィードバックに関連するパラメータが含まれ得る。例えば、視聴ユーザから肯定的なフィードバック又は否定的なフィードバックがなされた場合に、ユーザ評価ポイントを増加させてもよい。ユーザ評価ポイントは、視聴ユーザからの肯定的なフィードバックの数又は量をポイント数として評価するものであってもよいし、視聴ユーザからの否定的なフィードバックの数又は量をポイント数として評価するものであってもよい。さらに肯定的なフィードバックと否定的なフィードバックのそれぞれの数により、ユーザ評価ポイントが増減するようになっていてもよい。より具体的には、肯定的なフィードバックがなされた場合にユーザ評価ポイントを増加させ、否定的なフィードバックがなされた場合に減らす、もしくはその逆であってもよい。あるユーザのユーザ評価ポイントは、当該ユーザが配信した動画に対するフィードバック以外の契機で更新されてもよい。たとえば、あるユーザが他のユーザとサーバ装置60が提供するソーシャルネットワーキングサービスを利用して交流する際に、当該ソーシャルネットワーキングサービスを利用した活動に基づいてユーザ評価ポイントが更新されてもよい。
 ユーザのアカウント情報に対応付けられている動画評価情報は、当該ユーザが配信した動画に対する他のユーザからの評価を示す情報である。動画評価情報は、例えば、自然数で表される動画評価ポイントである。あるユーザの動画評価ポイントは、当該ユーザが配信した動画に対する視聴ユーザからのフィードバックに基づいて更新されてもよい。あるユーザが配信した動画に対して、当該動画を視聴した視聴ユーザから肯定的なフィードバックがなされた場合又は否定的なフィードバックがなされた場合に、当該ユーザの動画評価ポイントを増加させてもよい。あるユーザが配信した動画に対してフィードバックがなされた場合には、ユーザ評価ポイント及び動画評価ポイントを両方とも更新してもよい。
 ユーザのアカウント情報に対応付けられている配信時間は、当該ユーザが配信した動画の配信時間である。この配信時間は、動画配信システム1の利用開始からの総配信時間であってもよいし、ある一定の期間における配信時間であってもよい。ユーザのアカウント情報に対応付けられている配信回数は、当該ユーザが配信した動画の配信回数である。この配信回数は、動画配信システム1の利用開始からの総配信時間であってもよいし、ある一定の期間における配信回数であってもよい。
 ユーザのアカウント情報に対応付けられている共演禁止情報は、当該ユーザを共演禁止ユーザとして指定している他のユーザのユーザIDである。動画配信システム1において、あるユーザは、共演を行わない他のユーザを指定することができる。例えば、ユーザAは、自らが配信する動画において望ましくない行動をとると思われるユーザBを共演禁止ユーザとして指定することができる。この場合、ユーザBのユーザIDと対応付けて、ユーザAのユーザIDが共演禁止情報として記憶される。ユーザAがユーザBを共演禁止ユーザとして指定する場合、ユーザAのユーザIDと対応付けてユーザBのユーザIDを共演禁止情報として記憶してもよい。
 共演動画情報の例が図4に示されている。図示のように、共演動画情報63dとして、共演動画を識別する共演動画識別情報と対応付けて、当該共演動画に関する様々なデータが記憶される。ある共演動画の共演動画情報63dには、当該共演動画における共演ユーザに対する評価を示す共演ユーザ評価情報、及び当該共演動画の共演開始からの経過時間を示す共演時間情報が含まれてもよい。
 あるユーザが他のユーザとの共演申請を行い当該共演申請が許可されて共演動画が配信される場合、その共演申請を行ったユーザを「共演ユーザ」と呼ぶことがある。また、元々動画の配信を行っており、共演申請を受けたユーザを「ホストユーザ」と呼ぶことがある。共演ユーザ情報は、ホストユーザではなく共演ユーザに対する評価を示す。ある共演ユーザの共演ユーザ評価情報は、例えば、自然数で表される共演ユーザ評価ポイントである。
 共演時間情報は、共演ユーザとホストユーザとの共演が始まってからの経過時間を示す。
 配信ユーザ装置20は、配信プログラム及び/又はそれ以外のプログラムをコンピュータプロセッサで実行することにより、フェイスモーションデータ生成部211a以外の機能を実現してもよい。例えば、配信ユーザ装置20は、動画視聴用の視聴プログラムを実行することにより受信した動画を再生する機能を実現してもよい。配信プログラムと視聴プログラムとは、一つのアプリケーションソフトウェアにパッケージングされていてもよいし、別個のアプリケーションソフトウェアとして提供されてもよい。
 視聴ユーザ装置10は、配信ユーザ装置20と同様の機能を提供するように構成されてもよい。例えば、視聴ユーザ装置10は、動画視聴用の視聴プログラムを実行することにより受信した動画を再生する機能を実現してもよく、配信プログラムを実行することによりフェイスモーションデータ生成部211aの機能と同様の機能を実現してもよい。
 次に、コンピュータプロセッサ21a,21bにより実現される機能についてより具体的に説明する。コンピュータプロセッサ21aは、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部211aとして機能する。同様に、コンピュータプロセッサ21bは、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、フェイスモーションデータ生成部211bとして機能する。コンピュータプロセッサ21a,21bにより実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ21a,21b以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ21a,21bにより実現される機能の少なくとも一部は、例えば、サーバ装置60に搭載されているコンピュータプロセッサ61により実現されてもよい。
 フェイスモーションデータ生成部211aは、カメラ24aの撮像データに基づいて、配信ユーザUaの顔の動きのデジタル表現であるフェイスモーションデータを生成する。同様に、フェイスモーションデータ生成部211bは、カメラ24bの撮像データに基づいて、配信ユーザUbの顔の動きのデジタル表現であるフェイスモーションデータを生成する。フェイスモーションデータは、時間の経過に伴って随時生成される。フェイスモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、フェイスモーションデータ生成部211aにて生成されるフェイスモーションデータは、配信ユーザUaの顔の動き(表情の変化)を時系列的にデジタル表現することができ、フェイスモーションデータ生成部211bにて生成されるフェイスモーションデータは、配信ユーザUbの顔の動き(表情の変化)を時系列的にデジタル表現することができる。フェイスモーションデータ生成部211a,211bにて生成されたフェイスモーションデータは、通信I/F22a,22bを介してサーバ装置60に送信される。
 配信ユーザ装置20においては、フェイスモーションデータ生成部211aにて生成されるフェイスモーションデータに加えて、配信ユーザUa,Ubの体の顔以外の各部位の位置及び向きのデジタル表現であるボディモーションデータを生成してもよい。配信ユーザ装置20は、フェイスモーションデータに加えて、ボディモーションデータをサーバ装置60に送信してもよい。ボディモーションデータを生成するために、配信ユーザUa,Ubは、モーションセンサを装着してもよい。配信ユーザ装置20は、配信ユーザUa,Ubに装着されたモーションセンサの検出情報に基づいて、ボディモーションデータを生成することができるように構成されてもよい。ボディモーションデータは、所定のサンプリング時間間隔ごとに生成されてもよい。このように、ボディモーションデータは、配信ユーザUa,Ubの体の動きを時系列的にデジタルデータとして表現する。配信ユーザUa,Ubに装着されたモーションセンサの検出情報に基づくボディモーションデータの生成は、例えば、撮影スタジオで行われてもよい。撮影スタジオには、ベースステーションと、トラッキングセンサと、ディスプレイと、が備えられてもよい。ベースステーションは、多軸レーザーエミッターであってもよい。配信ユーザUa,Ubに装着されるモーションセンサは、例えば、HTC CORPORATIONから提供されているVive Trackerであってもよい。撮影スタジオに備えられるベースステーションは、例えば、HTC CORPORATIONから提供されているベースステーションであってもよい。また、撮影スタジオと別室には、サポーターコンピュータが設置されていてもよい。撮影スタジオのディスプレイは、サポートコンピュータから受信した情報を表示するように構成されてもよい。サーバ装置60は、サポーターコンピュータが設置されている部屋と同じ部屋に設置されてもよい。サポーターコンピュータが設置されている部屋と撮影スタジオとはガラス窓によって隔てられていてもよい。この場合、サポーターコンピュータのオペレータ(本明細書では「サポーター」ということがある。)は、配信ユーザUa,Ubを視認できる。サポーターコンピュータは、サポーターの操作に応じて、撮影スタジオに備えられた各種装置の設定を変更することができるように構成されてもよい。サポーターコンピュータは、例えば、ベースステーションによる走査インターバルの設定、トラッキングセンサの設定、及びこれら以外の各種機器の各種設定の変更を行うことができる。サポーターは、サポーターコンピュータにメッセージを入力し、当該入力されたメッセージを撮影スタジオのディスプレイに表示することができる。
 次に、コンピュータプロセッサ61により実現される機能についてより具体的に説明する。コンピュータプロセッサ61は、配信プログラムに含まれるコンピュータ読み取り可能な命令を実行することにより、アニメーション生成部61a、動画生成部61b、動画配信部61c、共演申請判定部61d、共演申請処理部61e、及び共演終了処理部61fとして機能する。
 アニメーション生成部61aは、配信ユーザ装置20のフェイスモーションデータ生成部21aによって生成されたフェイスモーションデータを、モデルデータ63aに含まれる所定のモデルデータに適用することにより、キャラクタオブジェクトのアニメーションを生成するように構成される。アニメーション生成部61aは、キャラクタオブジェクトの表情が当該フェイスモーションデータに基づいて変化するように、当該キャラクタオブジェクトのアニメーションを生成することができる。具体的には、アニメーション生成部61aは、配信ユーザUaに関するフェイスモーションデータに基づいて、配信ユーザUaの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。同様に、アニメーション生成部61aは、配信ユーザUbに関するフェイスモーションデータに基づいて、配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。
 配信ユーザ装置20から配信ユーザUa,Ubに関するボディモーションデータが提供される場合には、アニメーション生成部61aは、配信ユーザUa,Ubに関するボディモーションデータ及びフェイスモーションデータに基づいて、配信ユーザUa,Ubの体及び表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成することができる。 
 動画生成部61bは、配信ユーザUaの動画を配信する場合には、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザUaに対応するキャラクタオブジェクトのアニメーションと、を含む動画を生成することができる。動画生成部61bは、生成した動画に、配信ユーザ装置20aから受信した音声データに基づいて生成される配信ユーザUaの音声を合成することができる。同様に、動画生成部61bは、配信ユーザUbの動画を配信する場合には、オブジェクトデータ63bを用いて背景を示す背景画像を生成し、この背景画像と、配信ユーザUbに対応するキャラクタオブジェクトのアニメーションと、を含む動画を生成することができる。動画生成部61bは、生成した動画に、配信ユーザ装置20bから受信した音声データに基づいて生成される配信ユーザUbの音声を合成することができる。動画生成部61bによって生成される動画において、配信ユーザUa,Ubに対応するキャラクタオブジェクトは、背景画像に重畳して表示される。以上のようにして、動画生成部61bは、配信ユーザUa又は配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクトのアニメーションを生成し、このアニメーションに配信ユーザUa又は配信ユーザUbの音声が合成された配信用の動画を生成することができる。
 動画配信部61cは、動画生成部61bにおいて生成された動画を配信する。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置に配信される。生成された動画は、配信ユーザ装置20a,20bにも配信される。受信された動画は、視聴ユーザ装置10及び配信ユーザ装置20a,20bにおいて再生される。動画配信部61cは、配信ユーザごとに、動画の配信時間及び配信回数の少なくとも一方をモニターしてもよい。動画配信部61cは、モニター結果に基づいて、共演申請者情報の配信時間及び配信回数を更新してもよい。
 動画配信部61cから配信された動画の表示例を図5及び図6a~図6bに示す。これらの図では、配信ユーザUbが配信ユーザ装置20bを用いて、自らのキャラクタオブジェクトを含む動画を配信し、当該動画が視聴ユーザ装置10及び配信ユーザ装置20a,20bにおいて再生されていると想定している。図6aにおいては、配信ユーザUaは、動画配信を行っておらず、別の配信ユーザである配信ユーザUbによって配信されている動画を視聴している。このため、図5及び図6a~図6bに関する説明においては、配信ユーザUaのことも視聴ユーザと呼ぶことがある。図5は、視聴ユーザ装置10において再生されている動画の表示例を示し、図6aは、配信ユーザ装置20aにおいて再生されている動画の表示例を示し、図6bは、配信ユーザ装置20bにおいて再生されている動画の表示例を示す。
 図5に示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置60から配信された動画の表示画像30が表示される。この視聴ユーザ装置10に表示されている表示画像30には、アニメーション生成部61aにより生成された配信ユーザUbのキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。
 図6aに示されているように、配信ユーザ装置20aのディスプレイには、サーバ装置60から配信された動画の表示画像130が表示される。この表示画像130には、表示画像30と同様に、配信ユーザUbのキャラクタオブジェクト31と、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、が含まれている。これに加えて、表示画像130には、配信ユーザUbが配信している動画において配信ユーザUbとの共演を申請するための共演申請ボタン36が含まれる。配信ユーザ装置20aは、例えば、視聴プログラムを含むアプリケーションソフトウェアを実行することにより、配信された動画の表示画像130を表示することができる。
 図3に示されているように、一実施形態において、視聴ユーザ装置10の表示画像30には共演申請ボタン36が含まれない。例えば、視聴ユーザ装置10に配信プログラムを含むアプリケーションソフトウェアがダウンロードもしくはインストールされていない場合、及び、視聴ユーザ装置10において配信プログラムを含むアプリケーションソフトウェアが起動されていない場合に、共演申請ボタン36が含まれないように視聴ユーザ装置10の表示画像30が生成される。他の実施形態では、視聴ユーザ装置10の表示画像30にも共演申請ボタン36を表示してもよい。例えば、視聴ユーザ装置10に配信プログラムを含むアプリケーションソフトウェアがダウンロードもしくはインストールされている場合、または、視聴ユーザ装置10において配信プログラムを含むアプリケーションソフトウェアが起動されている場合に、共演申請ボタン36が含まれるように視聴ユーザ装置10の表示画像30が生成される。
 キャラクタオブジェクト31は、上記のように、配信ユーザUbのフェイスモーションデータをモデルデータ63aに含まれているモデルデータに適用することにより生成されているため、配信ユーザUbの表情の動きに同期してその表情が変化する。配信ユーザ装置20からボディモーションデータが提供される場合には、キャラクタオブジェクト31は、その顔以外の部位も、配信ユーザUbの体の動きに同期して変化するように制御され得る。
 ギフトボタン32は、視聴ユーザ装置10への操作によって選択可能に表示画面30に表示されている。ギフトボタン32は、例えば、視聴ユーザ装置10のタッチパネルのうちギフトボタン32が表示されている領域へのタップ操作により選択され得る。一実施形態において、ギフトボタン32が選択されると、表示画面30に、視聴中の動画を配信している配信ユーザ(ここでは、配信ユーザUbである。)にギフティングするギフトを選択するためのウィンドウが表示される。当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを購入することができる。他の実施形態においては、ギフトボタン32が選択されたことに応じて、表示画面30に、購入済みのギフトの一覧を含むウィンドウが表示される。この場合、当該視聴ユーザは、当該ウィンドウに表示されているギフトの中からギフティング対象とするギフトを選択することができる。視聴ユーザ装置10においてギフトボタン32が選択されると、ギフティング情報がサーバ装置60に送信されてもよい。このギフティング情報には、ギフティングするギフトを特定するギフト識別情報(ギフトID)が含まれてもよい。このように、動画を視聴している視聴ユーザは、ギフトボタン32の選択により、当該動画を配信している配信ユーザに対して所望のギフトを提供(ギフティング)することができる。
 評価ボタン33は、視聴ユーザ装置10を使用する視聴ユーザによって選択可能に表示画面30に表示されている。評価ボタン33は、例えば、視聴ユーザ装置10のタッチパネルのうち評価ボタン33が表示されている領域へのタップ操作により選択され得る。動画を視聴中の視聴ユーザによって評価ボタン33が選択されると、当該動画を配信する配信ユーザ(図示の例においては、配信ユーザUb)への肯定的な評価又は配信されている動画への肯定的な評価がなされたことを示す評価更新情報がサーバ装置60に送信されてもよい。サーバ装置60では、視聴ユーザからの評価更新情報に基づいて、共演申請者情報を更新することができる。例えば、視聴ユーザからの評価更新情報に基づいて、共演申請者情報に含まれるユーザ評価情報及び動画評価情報のうちの少なくとも一方が更新されてもよい。例えば、図5に示されている表示画像30に含まれる評価ボタン33が視聴ユーザによって選択された場合、視聴ユーザ装置10に表示されている動画を配信している配信ユーザUbのユーザ評価情報及び動画評価情報の少なくとも一方が更新されてもよい。評価ボタン33の選択により、当該動画への否定的な評価がなされたことを示す評価情報がサーバ装置60に送信されてもよい。動画への肯定的な評価を示す評価情報をポジティブ評価情報と呼び、動画への否定的な評価がなされたことを示す評価情報をネガティブ評価情報と呼んでもよい。サーバ装置60は、ポジティブ評価情報を受信した場合、ユーザ評価情報及び動画評価情報の少なくとも一方を増加させてもよい。サーバ装置60は、ネガティブ評価情報を受信した場合、ユーザ評価情報及び動画評価情報の少なくとも一方を減少させてもよい。
 コメントボタン34は、ユーザによって選択可能に表示画面30に表示される。コメントボタン34が例えばタップ操作により選択されると、コメントを入力するためのコメント入力ウィンドウが表示画面30に表示される。視聴ユーザは、視聴ユーザ装置10又は配信ユーザ装置20aの入力機構を介してコメントを入力することができる。入力されたコメントは、視聴ユーザ装置10及び配信ユーザ装置20aからサーバ装置60に送信される。サーバ装置60は、視聴ユーザ装置10、配信ユーザ装置20a、及びこれら以外のユーザ装置からのコメントを受け付け、当該コメントを表示画像30内のコメント表示領域35に表示する。コメント表示領域35には、各ユーザから投稿されたコメントが、例えば時系列に表示される。コメント表示領域35は、表示画面30の一部の領域を占める。コメント表示領域35に表示可能なコメント数には上限がある。図示の例では、コメント表示領域35には3つまでコメントが表示され得る。コメント表示領域35に設定されている上限を超えたコメントの投稿がなされた場合には、投稿時間が古いコメントから順にコメント表示領域35から削除される。このため、受け付けるコメントの頻度が高くなるほどコメント領域35における各コメントの表示時間は短くなる。
 図6bに示されているように、配信ユーザ装置20bのディスプレイには、サーバ装置60から配信された動画の表示画像40が表示される。この配信ユーザ装置20bに表示される表示画像40には、配信ユーザUbに対応するキャラクタオブジェクト31と、視聴ユーザから受け取ったギフトを動画中に表示するための表示指示ボタン42a~42cと、コメント表示領域35と、が含まれている。配信ユーザ装置20bに表示される表示画像40には、表示画像30及び表示画像130と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像40は、ギフトボタン32、評価ボタン33、コメントボタン34、及び共演申請ボタン36を含んでおらず、表示指示ボタン42a~42cを含んでいる点で表示画像30及び表示画像130と異なっている。
 共演申請判定部61dは、あるユーザからの共演申請を受け付けた場合に、当該ユーザの共演申請を許可するか否かを判定する。共演申請は、例えば、配信された動画の視聴中に共演申請ボタン36を選択することによりサーバ装置60に送信され、この送信された共演申請がサーバ装置60にて受け付けられる。共演申請を行うユーザを共演申請ユーザと呼び、共演申請を受けたユーザをオリジナルユーザと呼ぶことがある。例えば、画像を配信しているユーザAに対してユーザBが共演申請を行う場合には、ユーザAがオリジナルユーザであり、ユーザBが共演申請ユーザである。以下では、配信ユーザUbのキャラクタオブジェクト31を含む動画を視聴している配信ユーザUaから配信ユーザUbとの共演申請がなされたと想定して説明を行う。配信ユーザUaは、配信ユーザ装置20aにおいて共演申請ボタン36を選択することにより配信ユーザUbとの共演を申請するための共演申請を配信ユーザ装置20aからサーバ装置60に送信することができる。この例においては、配信ユーザUaが共演申請ユーザである。共演申請ボタン36が選択されたことに応じて、配信ユーザ装置20aにおいて配信プログラムを含むアプリケーションソフトウェアが起動されてもよい。サーバ装置は、配信ユーザUaからの共演申請だけでなく、様々な配信ユーザからの共演申請を受け付けることができる。 
 一実施形態において、配信ユーザUaから配信ユーザUbとの共演を申請する共演申請を受け付けると、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報の少なくとも一部に基づいて、配信ユーザUaと配信ユーザUbとの共演を許可するか否かを判定する。一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうちユーザ評価情報に基づいて、配信ユーザUaの共演可否を判定する。ユーザ評価情報がユーザ評価ポイントである場合には、ユーザ評価ポイントが所定の閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演が許可され、当該閾値以下の場合には配信ユーザUaの配信ユーザUbとの共演は拒否される。既述のとおり、ユーザ評価ポイントは、他のユーザからのフィードバックにより更新され得る。ユーザ評価情報は、ユーザ評価ポイント以外であってもよい。例えば、あるユーザのユーザ評価情報は、当該ユーザが受け取ったギフトの数量であってもよい。ギフトは、視聴ユーザから配信ユーザに対して贈られるものであるから、あるユーザに対して贈られたギフトの数量は、当該ユーザに対する評価を表すと考えられる。本発明に適用可能なユーザ評価情報は、本明細書に明示的に説明されたものには限定されない。配信ユーザUaのユーザ評価情報に基づいて当該配信ユーザUaの共演可否を判定することにより、他のユーザからの評価が高いユーザについてのみ共演を許可することができる。
 一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうち動画評価情報に基づいて、配信ユーザUaの共演可否を判定する。動画評価情報が動画評価ポイントである場合、共演申請判定部61dは、動画評価ポイントが所定の閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演を許可し、当該閾値以下の場合に配信ユーザUaの配信ユーザUbとの共演を拒否してもよい。本発明に適用可能な動画評価情報は、本明細書に明示的に説明されたものには限定されない。配信ユーザUaが配信した動画に対する評価を示す動画評価情報に基づいて当該配信ユーザUaの共演可否を判定することにより、他のユーザからの評価が高い動画を配信したユーザについてのみ共演を許可することができる。
 一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうち配信時間及び配信回数の一方又は両方に基づいて、配信ユーザUaの共演可否を判定する。共演申請判定部61dは、配信時間及び配信回数の少なくとも一方がそれぞれについて定められた閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演を許可してもよい。共演申請判定部61dは、配信時間及び配信回数の両方がそれぞれについて定められた閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演を許可してもよい。配信ユーザUaが配信した動画の配信時間及び/又は配信回数に基づいて当該配信ユーザUaの共演可否を判定することにより、動画の配信に積極的なユーザについてのみ共演を許可することができる。
 一実施形態において、共演申請判定部61dは、共演申請ユーザである配信ユーザUaの共演申請者情報のうち共演禁止情報に基づいて配信ユーザUaの共演可否を判定する。例えば、共演申請判定部61dは、配信ユーザUbのユーザIDが出演禁止情報に含まれている場合に配信ユーザUaの配信ユーザUbとの共演を拒否し、配信ユーザUbのユーザIDが出演禁止情報に含まれていない場合に配信ユーザUaの配信ユーザUbとの共演を許可する。共演禁止情報を参照することにより、共演の禁止が設定されているユーザとの共演を回避することができる。
 一実施形態において、配信ユーザUaから配信ユーザUbとの共演を申請する共演申請を受け付けると、共演申請判定部61dは、オリジナルユーザである配信ユーザUbの共演申請者情報の少なくとも一部に基づいて、配信ユーザUaと配信ユーザUbとの共演を許可するか否かを判定する。例えば、共演申請判定部61dは、配信ユーザUbの共演申請者情報においてユーザUaのユーザIDが出演禁止情報に含まれている場合に配信ユーザUaの配信ユーザUbとの共演を拒否し、配信ユーザUaのユーザIDが出演禁止情報に含まれていない場合に配信ユーザUaの配信ユーザUbとの共演を許可する。このように、オリジナルユーザの共演申請者情報に含まれる共演禁止情報を参照することによっても、共演の禁止が設定されているユーザとの共演を回避することができる。一実施形態において、共演申請判定部61dは、オリジナルユーザの共演申請者情報に代えて、またはこれに加えて、オリジナルユーザ以外の共演申請者情報に含まれる共演禁止情報を参照して共演申請ユーザとオリジナルユーザとの共演を許可するか否かを判定してもよい。例えば、配信ユーザUaから配信ユーザUbとの共演申請がなされた場合に、共演申請判定部61dは、配信ユーザUa及び配信ユーザUbのいずれとも異なる配信ユーザUcの共演申請者情報において配信ユーザUaのユーザIDが出演禁止情報に含まれている場合に、配信ユーザUaの配信ユーザUbとの共演を拒否してもよい。共演申請判定部61dは、共演申請ユーザ及びオリジナルユーザ以外の複数のユーザの共演申請者情報において、当該共演申請ユーザのユーザIDが出演禁止情報に含まれている場合に、当該共演申請ユーザとオリジナルユーザとの共演を拒否してもよい。
 共演申請判定部61dは、上記の判定条件を組み合わせて共演可否を判定してもよい。例えば、ユーザ評価情報に関する条件と配信時間に関する条件とを組み合わせることにより、他のユーザからの評価が高く且つ動画配信に積極的なユーザについてのみ共演を許可することができる。配信ユーザの人気が高まると、他のユーザからの共演申請が殺到する可能性がある。このような場合には、共演申請判定部61dでの判定に用いられる共演を許可するための許可条件を厳しくすることにより、多数の共演申請ユーザから望ましい共演相手を選抜することができる。共演申請判定部61dにおいて用いられる許可条件は、共演の申請を受けたユーザ(上記の例では、配信ユーザUb)の人気度に応じて変更されてもよい。例えば、共演の申請を受けたユーザの人気度に応じて、ユーザ評価ポイント、動画評価ポイント、配信時間、配信回数、及びこれら以外の共演申請者情報について設定される閾値を高くしてもよい。共演の申請を受けたユーザの人気度は、例えば、当該ユーザが配信している動画の視聴ユーザ数に基づいて定めることができる。
 一実施形態において、共演申請処理部61eは、共演申請判定部61dにおいて、共演申請が許可された場合に、当該共演申請に基づいて配信ユーザUaと配信ユーザUbとが共演する共演動画を生成する。共演動画の生成のために、共演申請処理部61eは、配信ユーザUaから、当該配信ユーザUaのフェイスモーションデータ及び音声データを取得する。配信ユーザUaのフェイスモーションデータは、共演申請とともに配信ユーザ装置20aからサーバ装置60に送信されてもよいし、共演申請が許可された後にサーバ装置60からの要求に応じて配信ユーザ装置20aからサーバ装置60に送信されてもよい。配信ユーザUaの体の動きもアニメーションとして表現される場合には、配信ユーザUaのフェイスモーションデータとともにボディモーションデータがサーバ装置60に提供されてもよい。共演申請処理部61eは、配信ユーザUaからフェイスモーションデータが取得できない場合には、配信ユーザUaから音声データのみを取得してもよい。例えば、配信ユーザUaが使用する配信ユーザ装置20aがフェイスモーションデータ生成部211aの機能またはこれ以外の動画配信のための機能を備えていない場合、当該機能がディスエーブルされている場合、及びこれら以外の場合には、共演申請処理部61eは、配信ユーザUaからフェイスモーションデータ(及びボディモーションデータ)を取得せず音声データを取得してもよい。また、共演申請処理部61eは、共演申請判定部61dにおいて共演申請が許可された場合に、各配信ユーザの配信ユーザ装置に表示される表示画像に共演申請ボタン36を表示させない(共演申請ボタン36をディスエーブルする)ための処理を行ってもよい。これにより、共演が許可されたときに余分な共演申請がなされることを防止できる。
 一実施形態において、共演申請処理部61eは、配信ユーザUaのフェイスモーションデータに基づいて、配信ユーザUbのキャラクタオブジェクト31を含む配信中の動画に、配信ユーザUaのキャラクタオブジェクトのアニメーションを追加することで、共演動画を生成する。配信ユーザUaのキャラクタオブジェクトのアニメーションは、アニメーション生成部61aにおいて、配信ユーザUaのフェイスモーションデータに基づいて生成されてもよい。配信ユーザUaのキャラクタオブジェクトのアニメーションは、配信ユーザUaのフェイスモーションデータをモデルデータ63aに含まれている配信ユーザUa用のモデルデータに適用することにより生成されてもよい。例えば、共演申請処理部61eは、配信ユーザUaのキャラクタオブジェクトのアニメーションを含むレイヤーを生成し、このレイヤーを配信ユーザUbのキャラクタオブジェクト31を含む動画に重畳することで、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することができる。配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することで、配信ユーザUaと配信ユーザUbとは互いに離れた地点から動画配信システム1を利用している場合であっても、当該共演動画内で仮想的に共演することができる。共演申請処理部61eは、配信ユーザUaからフェイスモーションデータ(及びボディモーションデータ)を取得せず音声データを取得した場合には、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaから取得した音声データに基づいて生成される音声を重畳することで、配信ユーザUbのキャラクタオブジェクト31と配信ユーザUaの音声とを含む共演動画を生成することができる。共演申請処理部61eは、モデルデータ63aとして配信ユーザUa用のモデルデータが設定されていない場合にも、配信ユーザUbのキャラクタオブジェクト31を含む動画に、配信ユーザUaから取得した音声データに基づいて生成される音声を重畳することで、配信ユーザUbのキャラクタオブジェクト31と配信ユーザUaの音声とを含む共演動画を生成することができる。このように、配信ユーザUaは、自らの音声により配信ユーザUbと共演することができる。
 共演申請処理部61eは、配信ユーザUaからフェイスモーションデータを取得できない場合に配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画を配信し、その後配信ユーザUaからフェイスモーションデータを取得したタイミングで、配信ユーザUaのフェイスモーションデータに基づいて配信ユーザUaのキャラクタオブジェクトを生成することで、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を生成することができる。このように、共演申請処理部61eは、配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画を、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画に切り替えることができる。これとは逆に、共演申請処理部61eは、配信ユーザUaのキャラクタオブジェクト及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画を、配信ユーザUaの音声と配信ユーザUbのキャラクタオブジェクト31を含む共演動画に切り替えることができる。このように、音声による共演が行われている共演動画(「音声共演動画」と呼ぶことがある。)とキャラクタオブジェクトによる共演が行われている共演動画(「キャラクタ共演動画」と呼ぶことがある。)とは、交互に切り替え可能とされてもよい。
 生成された共演動画は、動画配信部61cにより配信される。共演動画は、配信ユーザ装置20aで作成されてもよい。共演動画が配信ユーザ装置20aで生成される場合には、当該共演動画が配信ユーザ装置20aからサーバ装置60に送信され、サーバ装置60の動画配信部61cにより配信される。 
 動画配信部61cから配信された共演動画の表示例を図7及び図8a~図8bに示す。これらの図では、配信ユーザUaから配信ユーザUbに対するが共演申請が許可されたため、配信ユーザUaのキャラクタオブジェクト131及び配信ユーザUbのキャラクタオブジェクト31を含む共演動画が配信されていることを想定している。
 図7に示されているように、視聴ユーザ装置10のディスプレイには、サーバ装置60から配信された共演動画の表示画像230が表示される。この視聴ユーザ装置10に表示されている共演動画の表示画像230には、配信ユーザUbのキャラクタオブジェクト31に加えて、配信ユーザUaのキャラクタオブジェクト131が含まれている。配信ユーザUaのキャラクタオブジェクト131は、上記のように、アニメーション生成部61a又は共演申請処理部61eにおいて生成される。共演動画の表示画像230は、図5に示されている元の配信画像と同様に、ギフトボタン32と、評価ボタン33と、コメントボタン34と、コメント表示領域35と、を含んでいる。共演動画の表示画像230は、これらに加えて、ゲスト評価ボタン133a,133bを含んでいる。ゲスト評価ボタン133aは、ゲストユーザ(図示の例では、配信ユーザUaがゲストユーザである。)への肯定的な評価を示すポジティブ評価情報をサーバ装置60へ送信するためのボタンであり、ゲスト評価ボタン133bは、共演動画への否定的な評価を示すネガティブ評価情報をサーバ装置60へ送信するためのボタンである。
 共演動画の配信画像230は、図示のとおり、横長の画像である。共演申請処理部61e又は動画配信部61cは、共演動画を横長の動画として配信する。これにより、視聴ユーザ装置10には、共演動画の配信画像230が横長の画像として表示される。一実施形態においては、元の動画(画像)が図4に示されているように縦長だとしても、共演動画は横長に変換されて配信される。共演動画は、二人の配信ユーザのキャラクタオブジェクトを含むため、横長の画像とすることにより、二人分のキャラクタオブジェクトを重複なく表示しやすくなる。例えば、共演動画においては、視聴ユーザの視点で向かって左半分を元の配信ユーザのキャラクタオブジェクトに割り当てられる領域とし、右半分を共演申請を行った配信ユーザのキャラクタオブジェクトに割り当てられる領域としてもよい。各配信ユーザへの領域の割り当ては、キャラクタオブジェクト同士が重複しないように任意に定められてもよい。
 図8aに示されているように、配信ユーザUaの配信ユーザ装置20aのディスプレイには、サーバ装置60から配信された共演動画の表示画像330が表示される。この表示画像330には、表示画像230と同じ背景画像、キャラクタオブジェクト画像、及びコメントが含まれている。他方、表示画像330は、ギフトボタン32、評価ボタン33、コメントボタン34、及び共演申請ボタン36を含んでおらず、表示指示ボタン42a~42cを含んでいる点で表示画像230と異なっている。
 図8bに示されているように、配信ユーザ装置20bのディスプレイには、サーバ装置60から配信された共演動画の表示画像430が表示される。表示画像430には、共演相手の配信ユーザUaの配信ユーザ装置20aに表示されている画像330と同じ背景画像、キャラクタオブジェクト31,131、コメント35、及び表示指示ボタン42a~42cが含まれている。他方、表示画像430には、共演を終了させるための共演終了ボタン45が表示されている。共演終了ボタン45は、共演申請を受けた配信ユーザUbの画面430には表示されるが、共演申請を行った配信ユーザUaの画面には表示されない。配信ユーザUb(ホストユーザ)の配信ユーザ装置20bにおいて共演終了ボタン45が選択されると、共演動画において配信ユーザUaとの共演を終了するための処理が行われる。例えば、共演終了ボタン45が選択されたことに応じて、配信ユーザ装置20bからサーバ装置60に対して共演終了指示が送信される。配信ユーザUbは、共演動画を再生している間に、共演者である配信ユーザUaを共演禁止ユーザとして設定することができる。例えば、共演動画内で配信ユーザUaが望ましくない行動や言動を行ったときに、配信ユーザUaを共演禁止ユーザとして設定することができる。配信ユーザUaの共演禁止ユーザとしての設定は、配信ユーザUaの共演申請者情報の出演禁止情報に配信ユーザUbのユーザIDを記録することにより行われてもよい。サーバ装置60は、例えば、配信ユーザ装置20bから共演終了指示を受け付けると、配信ユーザUbの共演申請者情報において配信ユーザUaを共演禁止ユーザとして自動的に登録することができる。配信ユーザUbは、共演動画の再生時以外に、配信ユーザUaを出願禁止ユーザとして設定してもよい。例えば、動画配信システム1が提供するメッセージングサービスにおいて配信ユーザUaによる望ましくないメッセージの投稿を確認したことに応じて、配信ユーザUaを出願禁止ユーザとして設定してもよい。
 ホストユーザである配信ユーザUbの表示画像430には、ゲストユーザに警告を与えるための警告ボタン(不図示)が表示されてもよい。この警告ボタンは、ホストユーザの表示画像430には表示されるが、ゲストユーザの表示画像には表示されない。警告ボタンは、共演終了ボタン45とは異なり、ただちに共演を終了させる程度には至らないが、ゲストユーザがホストユーザにとって望ましくない行動をとった場合にホストユーザによって選択されることが想定される。ホストユーザの配信ユーザ装置(例えば、配信ユーザUbの配信ユーザ装置20b)において警告ボタンが選択されると、配信ユーザ装置20bからサーバ装置60に対して警告指示が送信される。ホストユーザの配信ユーザ装置において警告ボタンが選択されると、ゲストユーザの配信ユーザ装置(例えば、配信ユーザUaの配信ユーザ装置20a)に表示される共演動画の表示画像330においてホストユーザから警告がなされたことを示す警告情報が表示されてもよい。警告情報を視聴ユーザの表示画像230に表示することにより、視聴ユーザに対してゲストユーザの望ましくない行動に対してホストユーザが対応していることを示すことができる。警告情報は、表示画像330に代えて又は表示画像330に加えて、視聴ユーザ装置10における表示画像230に表示されてもよい。警告情報を含む共演動画は、サーバ装置60において生成されてもよい。サーバ装置60は、あるホストユーザからあるゲストユーザに対して警告指示がなされた回数をカウントし、警告指示の回数が所定回数(例えば、3回)になったときに当該ホストユーザと当該ゲストユーザとの共演を終了するための処理を行ってもよい。この所定回数以上の警告指示に基づいて共演を終了させるための処理は、上述した共演終了指示に基づいて共演を終了させるための処理と同じ処理であってもよい。
 共演申請処理部61eは、作成した共演動画を識別する動画IDを発行してもよい。この動画IDと対応付けて、当該共演動画に関する共演動画情報をストレージ63に記憶することができる。既述のように、配信されている共演動画の動画IDと対応付けて、当該共演動画の共演時間情報を更新してもよい。共演時間情報は、動画配信部61cにおいて共演動画の配信時間をモニターし、このモニター結果に基づいて更新されてもよい。
 共演動画情報のうち共演ユーザ評価情報は、視聴ユーザ装置10からのゲストユーザである配信ユーザUaへの肯定的な評価示すポジティブ評価情報及び当該配信ユーザUaへの否定的な評価を示すネガティブ評価情報に基づいて更新されてもよい。例えば、サーバ装置60は、視聴ユーザ装置10から配信ユーザUaへの肯定的な評価示すポジティブ評価情報を受信した場合には共演ユーザ評価ポイントを増加させてもよく、配信ユーザUaへの否定的な評価示すネガティブ評価情報を受信した場合には共演ユーザ評価ポイントを減少させてもよい。視聴ユーザが共演動画の視聴を途中で止めた場合には、当該視聴ユーザが当該共演動画に満足していない可能性がある。よって、視聴ユーザが共演動画の視聴を途中で止めた場合に、ゲストユーザへのネガティブな評価があったものとして、当該ゲストユーザの共演ユーザ評価ポイントを減少させてもよい。ポジティブ評価情報及びネガティブ評価情報の少なくとも一方は、時間の経過とともに減少するように更新されてもよい。例えば、配信ユーザUaがある時刻において100ポイントのポジティブ評価情報を有していても、時間の経過に伴って当該ポジティブ評価情報はゼロに近づくように更新されてもよい。あるユーザについてのネガティブ評価情報が所定の値を超えると、当該ユーザについては他のユーザとの共演を禁止してもよい。例えば、ネガティブ評価情報が所定値を超えたユーザの配信ユーザ装置に表示される表示画像においては、共演申請ボタンを表示させない処理がなされてもよい。
 共演終了処理部61fは、ゲストユーザである配信ユーザUaとホストユーザである配信ユーザUbとの共演を終了させるための共演終了条件が満たされるとゲストユーザである配信ユーザUaとホストユーザである配信ユーザUbとの共演を終了するための処理を行う。一実施形態において、共演終了処理部61fは、ホストユーザである配信ユーザUbの配信ユーザ装置20bから共演終了指示を受け付けると、共演終了条件が満たされたと判定し、共演動画の配信を終了するための処理を行う。例えば、共演終了処理部61fは、共演終了指示が受け付けられると、配信ユーザUaのキャラクタオブジェクト131のアニメーションの生成を中止し、配信ユーザUaのキャラクタオブジェクト131を含まず配信ユーザUbのキャラクタオブジェクト31を含む動画を生成する。言い換えると、配信する動画からゲストユーザである配信ユーザUaのキャラクタオブジェクト131を排除する。ゲストユーザである配信ユーザUaのキャラクタオブジェクト131が排除されることにより、配信ユーザUaと配信ユーザUbとの共演は終了する。共演が終了した後は、キャラクタオブジェクト131を含まずにキャラクタオブジェクト31を含む動画の配信が継続されてもよい。この共演終了後に配信される動画は、図4に示されているように、縦長の動画として生成されてもよい。つまり、共演が終了したことに応じて、動画の向きが変更されてもよい。一実施形態においては、共演が終了したことに応じて、動画の向きが横向きから縦向きに変更されてもよい。他の実施形態においては、共演が終了したことに応じて、ホストユーザである配信ユーザUbによる動画の配信を終了してもよい。一実施形態において、配信ユーザUbとの共演が終了したときに他のユーザからの共演申請を既に受信している場合、共演申請判定部61dは、当該共演申請に基づいて当該他のユーザの共演可否を判定してもよい。別の一実施形態において、共演終了処理部61fは、配信ユーザUbとの共演が終了したことに応じて、別のユーザからの共演申請を受け付けてもよい。例えば、各配信ユーザの配信ユーザ装置における表示画像において共演申請ボタン36を再度表示させる(共演申請ボタン36のディスエーブル状態を解除する)ための処理が行われてもよい。 
 一実施形態において、共演終了処理部61fは、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあるか否かを判定し、ノンアクティブ状態にあると判定された場合に、共演終了条件が満たされたと判定する。一実施形態において、配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあるか否かは、配信ユーザUaの配信ユーザ装置20aから受け取るフェイスモーションデータ、ボディモーションデータ、及び音声データのうちの少なくとも一つに基づいて判定される。フェイスモーションデータ、ボディモーションデータ、及び音声データはいずれも配信ユーザの動きを示すデータであるため、本明細書では、これらを総称して「モーションデータ」と呼ぶことがある。配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあるか否かは、モーションデータに基づいて、すなわちフェイスモーションデータ、ボディモーションデータ、及び音声データのうちの少なくとも一つに基づいて判定される。例えば、配信ユーザUaの配信ユーザ装置20aからフェイスモーションデータの入力が一定期間ない場合には、共演動画において配信ユーザUaのキャラクタオブジェクト131の表情が当該一定期間動かなくなるため、キャラクタオブジェクト131がノンアクティブ状態にあると判定されてもよい。配信ユーザUaの配信ユーザ装置20aからボディモーションデータの入力が一定期間ない場合には、共演動画において配信ユーザUaのキャラクタオブジェクト131の体の動きが当該一定期間動なくなるため、キャラクタオブジェクト131がノンアクティブ状態にあると判定されてもよい。配信ユーザUaの配信ユーザ装置20aから音声データの入力が一定期間ない場合には、共演動画において配信ユーザUaのキャラクタオブジェクト131が当該一定期間無言となるため、キャラクタオブジェクト131がノンアクティブ状態にあると判定されてもよい。
 一実施形態において、共演終了処理部61fは、配信されている共演動画の共演動画情報に応じて、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131を動画から排除することで共演を終了させる。例えば、共演終了処理部61fは、共演ユーザ評価情報が共演ユーザ評価ポイントである場合には、共演ユーザ評価ポイントが所定の閾値よりも小さくなった場合に配信ユーザUaのキャラクタオブジェクト131を動画から排除することで当該配信ユーザUaとの共演を終了させることができる。視聴ユーザからゲストユーザである配信ユーザUaに対するネガティブ評価情報を受けるほど共演ユーザ評価ポイントは小さくなる。よって、共演ユーザ評価ポイントに基づいて配信ユーザUaとの共演を終了するか否かを判定することにより、視聴ユーザからの評価が低いユーザと長期間共演することを回避できる。
 次に、図9を参照して、一態様による動画配信処理について説明する。図9は、一実施形態における動画配信処理の流れを示すフロー図である。図9を参照して説明される動画配信処理においては、配信ユーザUbが配信ユーザ装置20bを用いて取得したフェイスモーションデータに基づいて生成された動画が配信されることが想定されている。
 まず、ステップS11では、配信ユーザUbの顔の動き(表情)のデジタル表現であるフェイスモーションデータが生成される。フェイスモーションデータの生成は、例えば、配信ユーザ装置20bのフェイスモーションデータ生成部121bで行われる。配信ユーザ装置20bにおいては、配信ユーザUa,Ubからの音声入力に基づいて音声データが生成されてもよい。生成されたフェイスモーションデータ及び音声データは、サーバ装置60に送信される。
 次に、ステップS12において、配信ユーザ装置20bからのフェイスモーションデータが、配信ユーザUb用のモデルデータに適用されることにより、配信ユーザUbの表情の動きに同期して動くキャラクタオブジェクト31のアニメーションが生成される。このアニメーションの生成は、例えば、上記のアニメーション生成部61aで行われる。
 次に、ステップS13において、配信ユーザUbのキャラクタオブジェクト31のアニメーションを含む動画が生成される。この動画には、配信ユーザUbの音声が合成されてもよい。キャラクタオブジェクト31のアニメーションは、背景画像に重畳して表示される。この動画の生成は、例えば、上記の動画生成部61bで行われる。
 次に、ステップS14に移行し、ステップS13にて生成された動画が配信される。この動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。配信された動画が視聴ユーザ装置10において再生される場合には、例えば、図4に示すような表示画面が視聴ユーザ装置10に表示される。動画は、所定の配信期間にわたって継続して配信される。動画の配信期間は、例えば、30秒間、1分間、5分間、10分、30分間、60分間、120分間、及びこれら以外の任意の時間に定め得る。この動画の配信は、例えば、上記の動画配信部61cで行われる。
 次に、ステップS15に進み、動画の配信を終了させるための終了条件が成就したか否かが判定される。終了条件は、例えば、配信の終了時刻に達したこと、配信ユーザUbが配信ユーザ装置20bにおいて配信を終了するための操作を行ったこと、またはこれら以外の条件である。終了条件が成就していなければステップS11~S14の処理が繰り返し実行され、配信ユーザUbの動きに同期したアニメーションを含む動画、又は、配信ユーザUaとの共演が継続している場合には共演動画の配信が継続される。動画について終了条件が成就していると判定された場合には、当該動画の配信処理を終了する。
 次に、図10を参照して、一実施形態における共演動画の配信処理について説明する。図10は、一実施形態において共演動画を配信する処理の流れを示すフロー図である。図10を参照して説明される共演動画の配信処理においては、配信ユーザUbのキャラクタオブジェクトを含む動画を視聴している配信ユーザUaから配信ユーザUbに対して共演申請がなされることが想定されている。共演動画の配信処理は、図9に示されている動画の配信処理と並行して行われる。
 まず、配信ユーザUbのキャラクタオブジェクトを含む動画の配信中に、ステップS21において、配信ユーザUb以外のユーザから共演申請がなされたか否かが判定される。共演申請は、例えば、配信ユーザUaからなされる。配信ユーザUaによって共演申請がなされた場合には、処理はステップS22に進む。
 ステップS22では、共演を申請した配信ユーザUaの共演申請を許可するか否かが判定される。共演申請を許可するか否かは、配信ユーザUaの共演申請者情報の少なくとも一部に基づいて判定される。例えば、配信ユーザUaの共演申請者情報のうちユーザ評価ポイントが所定の閾値よりも大きい場合に配信ユーザUaの配信ユーザUbとの共演が許可され、当該閾値以下の場合には配信ユーザUaの配信ユーザUbとの共演は拒否される。この共演申請を許可するか否かの判定は、例えば、共演申請判定部61dにより行われる。
 ステップS22において、共演申請を許可すると判定された場合には、処理はステップS23に進む。ステップS23では、配信ユーザUaのフェイスモーションデータに基づいて、配信ユーザUaのキャラクタオブジェクト131のアニメーションが生成される。そして、配信中の動画(配信ユーザUbのキャラクタオブジェクト31を含む動画)に、配信ユーザUaのキャラクタオブジェクト131のアニメーションを追加することで、共演動画を生成する。ステップS16における処理は、例えば、上記の共演申請処理部61eで行われる。
 次に、処理は、ステップS24に移行する。ステップS24では、ステップS23にて生成された共演動画が配信される。この共演動画は、ネットワーク50を介して視聴ユーザ装置10及びこれら以外の視聴ユーザ装置並びに配信ユーザ装置に配信される。共演動画には、例えば、図7及び図8a~図8bに示されているように、配信ユーザUaのキャラクタオブジェクト131のアニメーション及び配信ユーザUbのキャラクタオブジェクト31のアニメーションが含まれる。
 次に、処理は、ステップS25に移行する。ステップS25では、共演終了条件が満たされたか否かが判定される。例えば、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にある場合、共演ユーザ評価ポイントが所定の閾値以下になった場合、ホストユーザである配信ユーザUbから共演終了指示を受け付けた場合、又は共演動画の配信開始から所定時間以上が経過したことのいずれかの条件が満たされた場合に、共演終了条件が満たされたと判定される。共演終了条件が満たされた場合には、処理はステップS26に進む。
 ステップS26では、共演動画の配信を終了させるための処理が行われる。例えば、共演動画から、ゲストユーザである配信ユーザUaのキャラクタオブジェクト131が排除されることで、配信ユーザUaと配信ユーザUbとの共演を終了させる。共演が終了した場合でも、動画は継続して配信されてもよい。共演が終了した後に配信される動画には、配信ユーザUaのキャラクタオブジェクト131が含まれない。上記の共演終了条件の判定及び共演の終了処理は、例えば、共演終了処理部61fにより行われる。
 上記の一実施形態によれば、配信ユーザUbとの共演を申請する共演申請を配信ユーザUaから受け付けたことに応じて、配信ユーザUbに関する共演申請者情報に基づいて配信ユーザUaの配信ユーザUbとの共演可否が判定される。この判定により、共演が許可された場合に共演動画が生成され、生成された共演動画が配信される。これにより、共演申請者情報に基づいて共演者を選抜することができる。
 上記の一実施形態において、共演申請者情報は、共演を申請した配信ユーザUaに対する評価を示すユーザ評価情報を含む。これにより、共演を申請するユーザに対する評価に基づいて共演者を選抜することができる。したがって、配信ユーザUaに対する他のユーザからの評価が高い場合にのみ共演を許可することが可能となる。
 上記の一実施形態において、共演申請者情報は、配信ユーザUaが配信した動画に対する動画評価情報を含む。これにより、共演を申請するユーザが配信した動画に対する評価に基づいて共演者を選抜することができる。したがって、配信ユーザUaが配信した動画について他のユーザからの評価が高い場合にのみ共演を許可することが可能となる。
 上記の一実施形態において、共演申請者情報は、配信ユーザUaの動画配信時間又は動画配信回数を含む。これにより、共演を申請するユーザが配信した動画の配信時間又は配信回数に基づいて共演者を選抜することができる。したがって、配信ユーザUaが動画の配信に積極的な場合にのみ共演を許可することが可能となる。
 上記の一実施形態において、共演申請者情報は、配信ユーザUaが共演を禁止されているユーザを特定する共演禁止情報を含む。これにより、配信ユーザUaが共演禁止ユーザとして登録されている場合には、配信ユーザUaとの共演を回避することができる。
 上記の一実施形態において、配信ユーザUaの動きを示すモーションデータに基づいて配信ユーザUaのキャラクタオブジェクト131がノンアクティブ状態にあると判定された場合に、共演動画からキャラクタオブジェクト131を排除することができる。これにより、ホストユーザである配信ユーザUbの動画から、動画のエンターティンメント性の向上に貢献しない共演者を排除することができる。 
 上記の一実施形態において、視聴ユーザから配信ユーザUaに対する評価を示す共演者評価情報に基づいて共演動画から配信ユーザUaのキャラクタオブジェクト131を排除する。これにより、ホストユーザである配信ユーザUbの動画から、視聴者からの評価が悪い共演者を排除することができる。
 上記の一実施形態において、ホストユーザである配信ユーザUbからの要求に基づいて、配信ユーザUbの動画から配信ユーザUaのキャラクタオブジェクト131を排除することができる。これにより、ホストユーザである配信ユーザUbの判断に応じて、共演者を動画から排除することができる。
 上記実施形態による動画配信システム1においては、配信ユーザUa,Ubは、スマートフォンなどのカメラを備えた配信ユーザ装置20により自らの表情に応じて動くキャラクタオブジェクトを含む動画を配信することができる。このように、動画配信システム1においては、配信ユーザUa,Ubが動画を配信するための設備が簡略化されているので、配信ユーザUa,Ubが参加しやすいプラットフォームが実現されている。
 本明細書において説明された処理手順、特にフロー図を用いて説明された処理手順においては、その処理手順を構成する工程(ステップ)の一部を省略すること、その処理手順を構成する工程として明示されていない工程を追加すること、及び/又は当該工程の順序を入れ替えることが可能であり、このような省略、追加、順序の変更がなされた処理手順も本発明の趣旨を逸脱しない限り本発明の範囲に含まれる。
 コンピュータプロセッサ61により実現される機能の少なくとも一部は、動画配信システム1のコンピュータプロセッサ61以外のコンピュータプロセッサにより実現されてもよい。コンピュータプロセッサ61により実現される機能の少なくとも一部は、例えば、配信ユーザ装置20のコンピュータプロセッサ21により実現されてもよく、視聴ユーザ装置10のコンピュータプロセッサにより実現されてもよい。具体的には、アニメーション生成部61a及び動画生成部61bの機能の一部又は全部は、配信ユーザ装置20において実行されてもよい。例えば、配信ユーザ装置20において生成された動画がサーバ装置60に送信され、サーバ装置60から視聴ユーザ装置10に配信されてもよい。
 配信ユーザUbのキャラクタオブジェクト31を含む動画を視聴している配信ユーザUaから配信ユーザUbとの共演申請がなされる場合には、共演申請を行った配信ユーザUaのキャラクタオブジェクト131のアニメーションは、サーバ装置60、配信ユーザUaの配信ユーザ装置20a、配信ユーザUbの配信ユーザ装置20b、又は視聴ユーザ装置10のいずれで生成されてもよい。また、生成された配信ユーザUaのキャラクタオブジェクト131と配信ユーザUbの配信動画とキャラクタオブジェクト31とを含む共演動画の生成は、サーバ装置60、配信ユーザUaの配信ユーザ装置20a、配信ユーザUbの配信ユーザ装置20b、又は視聴ユーザ装置10のいずれで行われてもよい。一つの例において、配信ユーザUaのキャラクタオブジェクト131のアニメーションが配信ユーザUbの配信ユーザ装置20bで生成される場合には、配信ユーザUaの配信ユーザ装置20aから配信ユーザUbの配信ユーザ装置20bに対して、配信ユーザUaのフェイスモーションデータ及び音声データが送信される。配信ユーザ装置20bでは、配信ユーザ装置20aから受信した配信ユーザUaのフェイスモーションデータ及び音声データを配信ユーザUa用のモデルデータに適用することでキャラクタオブジェクト131のアニメーションが生成される。この配信ユーザUa用のモデルデータは、サーバ装置60から配信ユーザ装置20aへ送信されてもよい。他の例において、配信ユーザUaのキャラクタオブジェクト131のアニメーションが視聴ユーザ装置10で生成される場合には、配信ユーザUaの配信ユーザ装置20aから視聴ユーザ装置10に対して配信ユーザUaのフェイスモーションデータ及び音声データが送信され、配信ユーザUbの配信ユーザ装置20bから視聴ユーザ装置10に対して配信ユーザUbのフェイスモーションデータ及び音声データが送信される。視聴ユーザ装置10では、配信ユーザ装置20aから受信した配信ユーザUaのフェイスモーションデータ及び音声データを配信ユーザUa用のモデルデータに適用することでキャラクタオブジェクト131のアニメーションが生成され、配信ユーザ装置20bから受信した配信ユーザUbのフェイスモーションデータ及び音声データを配信ユーザUb用のモデルデータに適用することでキャラクタオブジェクト31のアニメーションが生成されてもよい。このを配信ユーザUa用のモデルデータ及び配信ユーザUb用のモデルデータは、サーバ装置60から視聴ユーザ装置10へ送信されてもよい。このように、配信ユーザのキャラクタオブジェクトのアニメーションは、動画配信システム1に含まれる任意の装置で生成され得る。キャラクタオブジェクトのアニメーションは、図1に明示的に示されていない装置で生成されてもよい。キャラクタオブジェクトのアニメーションを生成する装置には、配信ユーザUaの配信ユーザ装置20aから配信ユーザUaのフェイスモーションデータ及び音声データが送信され、配信ユーザUbの配信ユーザ装置20bから配信ユーザUbのフェイスモーションデータ及び音声データが送信される。フェイスモーションに加えてボディモーションが送信されてもよい。
 共演動画は、三人以上の配信ユーザのキャラクタオブジェクトを含んでもよい。つまり、三人以上の配信ユーザが、各々のキャラクタオブジェクトを利用して動画内で仮想的に共演してもよい。共演できる配信ユーザの数には上限が設定されていてもよい。共演できる配信ユーザの数が上限に達すると、配信ユーザが視聴している動画の表示画像(例えば、表示画像130)に共演申請ボタン36を表示させない処理、又は、配信ユーザが視聴している動画の表示画像において共演申請ボタン36を選択不能とする処理(ディスエーブル処理)がなされてもよい。
1 動画配信システム

Claims (14)

  1.  一又は複数のコンピュータプロセッサを備え、
     前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
     第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
     前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
     前記共演動画を一又は複数の視聴ユーザに配信する、
     動画配信システム。
  2.  前記共演申請者情報は、前記第2ユーザに対する評価を示すユーザ評価情報を含む、
     請求項1に記載の動画配信システム。
  3.  前記共演申請者情報は、前記第2ユーザが配信した動画に対する評価を示す動画評価情報を含む、
     請求項1又は請求項2に記載の動画配信システム。
  4.  前記共演申請者情報は、前記第2ユーザの動画配信時間又は動画配信回数を含む、
     請求項1から請求項3のいずれか1項に記載の動画配信システム。
  5.  前記共演申請者情報は、前記第2ユーザが共演を禁止されているユーザを特定する共演禁止情報を含む、
     請求項1から請求項4のいずれか1項に記載の動画配信システム。
  6.  一又は複数のコンピュータプロセッサを備え、
     前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
     第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定し、
     前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成し、
     前記共演動画を一又は複数の視聴ユーザに配信する、
     動画配信システム。
  7.  前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含むキャラクタ共演動画である、
     請求項1から請求項6のいずれか1項に記載の動画配信システム。
  8.  前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの音声を含む音声共演動画である、
     請求項1から請求項6のいずれか1項に記載の動画配信システム。
  9.  前記共演動画は、前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの動きに基づいて生成される第2キャラクタオブジェクトを含むキャラクタ共演動画又は前記第1ユーザの動きに基づいて生成される第1キャラクタオブジェクト及び前記第2ユーザの音声を含む音声共演動画であり、
     前記キャラクタ共演動画と前記音声共演動画とは交互に切り替え可能である、
     請求項1から請求項6のいずれか1項に記載の動画配信システム。
  10.  前記第2ユーザの動きを示すモーションデータに基づいて前記共演動画において前記第2キャラクタオブジェクトがノンアクティブ状態にあると判定された場合に、前記共演動画から前記第2キャラクタオブジェクトを排除する、
     請求項1から請求項9のいずれか1項に記載の動画配信システム。
  11.  前記共演動画の配信中における前記視聴ユーザから前記第2ユーザに対する評価を示す共演者評価情報に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する、
     請求項1から請求項10のいずれか1項に記載の動画配信システム。
  12.  前記第1ユーザからの要求に基づいて前記共演動画から前記第2キャラクタオブジェクトを排除する、
     請求項1から請求項11のいずれか1項に記載の動画配信システム。
  13.  一又は複数のコンピュータプロセッサがコンピュータ読み取り可能な命令を実行することにより実行される動画配信方法であって、
     第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
     前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
     前記共演動画を一又は複数の視聴ユーザに配信する工程と、
     を備える動画配信方法。
  14.  一又は複数のコンピュータプロセッサに、
     第1ユーザとの共演を申請する共演申請を第2ユーザから受け付けたことに応じ、前記第1ユーザ又は前記第2ユーザに関する共演申請者情報に基づいて前記第2ユーザの共演可否を判定する工程と、
     前記第2ユーザの共演が許可された場合に、前記第1ユーザと前記第2ユーザとが共演する共演動画を生成する工程と、
     前記共演動画を一又は複数の視聴ユーザに配信する工程と、
     を実行させる動画配信プログラム。
PCT/JP2019/043639 2018-12-18 2019-11-07 動画配信システム、動画配信方法及び動画配信プログラム WO2020129448A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/414,254 US20220053227A1 (en) 2018-12-18 2019-11-07 Video distribution system, video distribution method, and video distribution program

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2018236152A JP6550522B1 (ja) 2018-12-18 2018-12-18 動画配信システム、動画配信方法及び動画配信プログラム
JP2018-236152 2018-12-18
JP2019-122862 2019-07-01
JP2019122862A JP6664534B1 (ja) 2019-07-01 2019-07-01 動画配信システム、動画配信方法及び動画配信プログラム

Publications (1)

Publication Number Publication Date
WO2020129448A1 true WO2020129448A1 (ja) 2020-06-25

Family

ID=71101267

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/043639 WO2020129448A1 (ja) 2018-12-18 2019-11-07 動画配信システム、動画配信方法及び動画配信プログラム

Country Status (2)

Country Link
US (1) US20220053227A1 (ja)
WO (1) WO2020129448A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7129666B1 (ja) * 2022-04-27 2022-09-02 17Live株式会社 コンピュータプログラム及び端末

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0120930B2 (ja) * 1986-11-22 1989-04-19 Zenya Aruminiumu Seisakusho Kk

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130335509A1 (en) * 2012-06-18 2013-12-19 Mobile Video Date, Inc. Methods, systems, and articles of manufacture for online video dating
US9420213B2 (en) * 2012-06-26 2016-08-16 Google Inc. Video creation marketplace
WO2016160744A1 (en) * 2015-03-27 2016-10-06 Twitter, Inc. Live video streaming services
US9883249B2 (en) * 2015-06-26 2018-01-30 Amazon Technologies, Inc. Broadcaster tools for interactive shopping interfaces
US20190066730A1 (en) * 2017-08-25 2019-02-28 Vid Inc. System and method for creating group videos
JP6527627B1 (ja) * 2018-08-31 2019-06-05 株式会社バーチャルキャスト コンテンツ配信サーバ、コンテンツ配信システム、コンテンツ配信方法及びプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0120930B2 (ja) * 1986-11-22 1989-04-19 Zenya Aruminiumu Seisakusho Kk

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
21 April 2018 (2018-04-21), Retrieved from the Internet <URL:https://www.moguravr.com/virtualcast-2> *
22 May 2017 (2017-05-22), Retrieved from the Internet <URL:https://snscom/twitcasting-block-4529> *
24 November 2018 (2018-11-24), Retrieved from the Internet <URL:https://appli-world.jp/posts/1497> *

Also Published As

Publication number Publication date
US20220053227A1 (en) 2022-02-17

Similar Documents

Publication Publication Date Title
JP6550522B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6700463B2 (ja) ヘッドマウントディスプレイ上の視覚的作用を制限するためのフィルタリング及びペアレンタルコントロール法
JP6543403B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP7134298B2 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6550546B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
US20210065421A1 (en) Moving image distribution system, moving image distribution method, and moving image distribution program
JP7462912B2 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6832997B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
WO2020129448A1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP2024041749A (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6664534B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
WO2020121909A1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6671528B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP7044923B6 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6713080B2 (ja) 配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラム
JP7442097B2 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP7288990B2 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP7194239B2 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6923735B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム
JP6828106B1 (ja) 動画配信システム、動画配信方法及び動画配信プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19899523

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19899523

Country of ref document: EP

Kind code of ref document: A1