JP2022082592A

JP2022082592A - 動画配信システム、動画配信方法および動画配信プログラム

Info

Publication number: JP2022082592A
Application number: JP2022038581A
Authority: JP
Inventors: 夏子串田; Natsuko KUSHIDA
Original assignee: GREE Inc
Current assignee: GREE Inc
Priority date: 2019-04-10
Filing date: 2022-03-11
Publication date: 2022-06-02
Anticipated expiration: 2039-04-10
Also published as: JP7098026B2; JP2020173582A; JP2021168147A; JP2023181219A; JP6900419B2; JP7370525B2

Abstract

【課題】従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供する。【解決手段】コンピュータ読み取り可能な命令を実行することにより、ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける機能と、ユーザの操作により指定された、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画を配信する機能とを実現させ、動画を配信する機能は、動画の配信中に所定の条件が満たされた場合に、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更することを特徴とする。【選択図】図１１

Description

本発明は、動画配信システム、動画配信方法および動画配信プログラムに関し、特に、明細書における開示は、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信システム、動画配信方法および動画配信プログラムに関する。

従来から、アクターの動きに基づいてキャラクタオブジェクトのアニメーションを生成し、かかるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信システムが知られている。このような動画配信システムは、例えば、特許文献１に開示されている。

コンテンツを視聴する視聴ユーザからの要求に応じて、当該視聴ユーザが購入したアイテムに対応するギフトオブジェクトを表示画面に表示させるコンテンツ配信システムも知られている。例えば、特許文献２に開示されている動画配信システムでは、視聴ユーザは、ギフトアイテムを購入し、この購入したギフトアイテムをパフォーマー（コンテンツ配信者）に対してギフトとして提供することができる。

特開２０１５－１８４６８９号公報特開２０１２－１２００９８号公報

このような動画配信に用いられるキャラクタオブジェクトは、アクター（配信ユーザ）により動画配信の前に予め設定されるのが一般的であるが、視聴ユーザのギフトを提供する意欲を向上させるべく、動画配信中であってもキャラクタオブジェクトを変更したいという要望が出てきている。

しかしながら、動画配信中にキャラクタオブジェクトを変更する場合、アクターのアクトへの集中力が低下してしまうおそれがある。

その場合、動画内容のクオリティが下がり、視聴ユーザの視聴意欲が低下してしまうおそれがある。

本開示の目的は、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することである。本開示のより具体的な目的の一つは、アクターのアクトへの集中力を低下させることなく、キャラクタオブジェクトを、他のキャラクタオブジェクトに変更することができる動画配信システム、動画配信方法および動画配信プログラムを提供することである。

本発明の実施形態に係る動画配信システムは、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信システムであって、一又は複数のコンピュータプロセッサを備え、一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける機能と、ユーザの操作により指定された、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画を配信する機能とを実現させ、動画を配信する機能は、動画の配信中に所定の条件が満たされた場合に、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更することを特徴とする。

所定の条件の充足は、ユーザおよび／または視聴ユーザの操作、動作、音声の少なくとも一つに基づいて判断されることができる。

動画を配信している際のユーザ用の画面には、キャラクタオブジェクトを切り替えるためのＧＵＩが表示され、所定の条件の充足は、ＧＵＩに対する操作があったか否かにより判断されることができる。

所定の条件の充足は、視聴ユーザによるギフティングの数が所定数以上であるか否かにより判断されることができる。

所定の条件の充足は、視聴ユーザの数が所定数以上であるか否かにより判断されることができる。

動画を配信する前のユーザ用の画面には、少なくともキャラクタオブジェクトと第一のＧＵＩと第二のＧＵＩが表示される表示画面が表示され、第一のＧＵＩは、動画の配信を開始するためのＧＵＩであり、第二のＧＵＩは、ボディパーツおよび装着パーツの一覧画面の表示を開始するためのＧＵＩであり、一覧画面は、表示画面の少なくとも一部に重畳して表示されることができる。

一覧画面は、第三のＧＵＩおよび第四のＧＵＩを含み、第三のＧＵＩは、ボディパーツおよび装着パーツのカテゴリを示し、かつ、所定の第一の方向に表示内容をスライド可能なＧＵＩであり、第四のＧＵＩは、カテゴリ毎に属するボディパーツおよび装着パーツを示し、かつ、第一の方向とは異なる第二の方向に表示内容をスライド可能なＧＵＩとすることができる。

表示画面には、第三のＧＵＩが重畳して表示され、第三のＧＵＩに対する所定のユーザ操作があった場合に、さらに第四のＧＵＩを表示画面に重畳して表示させることができる。

動画の配信が開始されているか否かを問わず、表示画面に表示されるキャラクタオブジェクトの少なくとも顔部分は、ユーザの顔部分がキャプチャされることができる。

動画の配信中であっても、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更している最中は、表示画面に表示されるキャラクタオブジェクトの少なくとも顔部分は、ユーザの顔部分がキャプチャされないものとすることができる。

動画の配信前であっても、一覧画面が表示されている間は、表示画面に表示されるキャラクタオブジェクトの少なくとも顔部分は、ユーザの顔部分がキャプチャされないものとすることができる。

本発明の実施形態に係る動画配信方法は、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信方法であって、ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける工程と、ユーザの操作により指定された、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画を配信する工程とを備え、動画を配信する工程は、動画の配信中に所定の条件が満たされた場合に、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更することを特徴とする。

本発明の実施形態に係る動画配信プログラムは、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信プログラムであって、一又は複数のコンピュータプロセッサに、ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける工程と、ユーザの操作により指定された、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画を配信する工程とを実現させ、動画を配信する工程は、動画の配信中に所定の条件が満たされた場合に、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更することを特徴とする。

本発明の動画配信システム、動画配信方法および動画配信プログラムによれば、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することができる。また、本発明の動画配信システム、動画配信方法および動画配信プログラムによれば、アクターのアクトへの集中力を低下させることなく、キャラクタオブジェクトを、他のキャラクタオブジェクトに変更することができる。

本発明の一実施形態係る動画配信システムのシステム構成を示すシステム構成図である。本発明の一実施形態係る配信ユーザ用端末の構成を示すブロック図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。本発明の一実施形態係るサーバ装置、配信ユーザ用端末および視聴ユーザ用端末のハードウェア構成を示すブロック図である。本発明の一実施形態に係る動画配信処理の流れを示すフロー図である。本発明の一実施形態に係るキャラクタオブジェクトを変更する処理の流れを示すフロー図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。配信アプリにより表示される表示画面の一例を示すイメージ図である。

初めに、本発明の動画配信システムの概要について図面を参照しながら説明する。

本発明の動画配信システムは、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信システムである。

図１に示されるように、本発明の動画配信システム１００は、一例として、サーバ装置２００と、配信ユーザ用端末３００と、１以上の視聴ユーザ用端末４００とで構成される。

配信ユーザ用端末３００は、一例として図２に示されるように、表情解析部３１０、生成部３２０、受付部３３０、動画配信部３４０および変更部３５０を備え、配信ユーザの表情を認識するフェイシャルキャプチャ機能を実現可能なスマートフォンやタブレット等の情報処理端末とすることができる。具体的には、フェイシャルキャプチャ機能は、表情解析部３１０により実現されることができる。なお、視聴ユーザ用端末４００に関しては、かかるフェイシャルキャプチャ機能を備えることは必須ではない。

キャラクタオブジェクトは、配信ユーザ用端末３００で実行される専用アプリケーション（以下、「配信アプリ」という。）において、フェイシャルキャプチャ機能により配信ユーザの表情が表現される顔、および、少なくとも胴体の一部を有するオブジェクトである。すなわち、このキャラクタオブジェクトには、全身を表したもののみならず、上半身のみを表したものも含まれる。なお、顔以外の部位についても、配信ユーザの動きを認識するモーションキャプチャ機能により配信ユーザの動きが表示されるものとしてもよい。

そして、このキャラクタオブジェクトは、１以上のボディパーツおよび１以上の装着パーツで構成される。これらボディパーツおよび装着パーツは、サーバ装置２００が備えるストレージにおいてそれぞれ識別番号と対応付けて記憶される。

ボディパーツは、例えば、目、眉、鼻、口、ホクロおよび化粧などのパーツである。化粧には、チーク、アイシャドウおよび口紅など、さらに細分化されたパーツが含まれる。また、これらのパーツには、色のみが異なる色違いパーツが存在する。

装着パーツは、例えば、アクセサリ、洋服および靴などのパーツをいう。洋服には、トップス、ボトムスおよび靴下などさらに細分化されたパーツが含まれる。また、これらのパーツには、色のみが異なる色違いパーツが存在する。

そして、配信ユーザは、配信アプリの初回起動時に、自身のアバタとなるキャラクタオブジェクトを作成する。図３～図６は、配信ユーザ用端末３００における配信アプリの初回起動時の画面３０の遷移の一例を示したイメージ図である。

初めに、配信ユーザ用端末３００の画面３０には、図３に示されるように、キャラクタオブジェクトの作成を開始する画面が表示される。なお、図３に示されるように、初回起動時に生成されたキャラクタオブジェクトは後から変更することが可能である。

そして、図４に示されるように、カテゴリ（図４ではＡ～Ｄ）ごとに表示される１以上のボディパーツおよび１以上の装着パーツの中から所定のパーツ（図４ではパーツａ１）を指定し、かつ、指定したパーツに対するカラー（図４ではカラーＣＬ２）を選択することで、選択されたカラーＣＬ２の指定されたパーツａ１で構成されるキャラクタオブジェクトＣＯを作成する。なお、各パーツを指定する毎にキャラクタオブジェクトＣＯの表示は対応して変化する。なお、基本的に各カテゴリでは少なくとも１つのパーツが指定されるが、必須ではないカテゴリのパーツがあってもよい。

そして、図５では一例として右上に示される決定ボタン３３が選択されると、この段階で画面３０に表示されたキャラクタオブジェクトＣＯが初期キャラクタオブジェクトとして作成される。また、図６に示されるように、パーツの一覧の表示は画面３０から一時的に消すこともでき、配信ユーザは、キャラクタオブジェクトＣＯの全体を確認しながら各パーツを指定することができる。

これらボディパーツおよび装着パーツの組み合わせは、各パーツの種類および色の掛け合わせにより無限に近い。そのため、配信ユーザは、膨大なパーツの組み合わせを試しながら、自身の希望するキャラクタオブジェクトを熟考して作成することになる。

初期キャラクタオブジェクト作成後の配信アプリのトップ画面３５には、図７に一例として示されるように、少なくとも動画配信開始ボタン３６およびクローゼットボタン３７が表示される。図７では、さらに、配信アプリの詳細設定を行う設定ボタン３８が表示されている。

動画配信開始ボタン３６が選択されると、表示されているキャラクタオブジェクトＣＯを使用した動画の配信が開始される。動画配信の詳細については後述する。

クローゼットボタン３７が選択されると、上述したボディパーツおよび装着パーツの一覧画面の表示が開始され、キャラクタオブジェクトＣＯの変更が可能となる。

なお、ここでいうキャラクタオブジェクトＣＯの変更は、ボディパーツの変更を行わずに単に装着パーツを変更する場合である「着替え」も含むものとする。

そして、本発明において、配信ユーザは、キャラクタオブジェクトＣＯを複数用意して動画配信を行うことができる。すなわち、クローゼットボタン３７が選択された際のキャラクタオブジェクトＣＯの変更は、スロットごとに行われる。

図８に一例として示されるように、クローゼットボタン３７が選択された際の画面４０には、スロットを識別可能な番号が表示されたスロットボタン４１～４３が表示され、このボタンを選択しスロットを切り替えることで、各スロットに対してキャラクタオブジェクトを作成し、対応づける。なお、このスロットは複数あればよく、上限値は特に定める必要はない。

図８には、スロットボタン４１に対応するスロット１に対応付けられたキャラクタオブジェクトＣＯ１が示されている。同様に、図９、図１０は、それぞれスロットボタン４２、スロットボタン４３に対応するスロット２、スロット３に対応付けられたキャラクタオブジェクトＣＯ２、キャラクタオブジェクトＣＯ３が示されている。

このように、配信ユーザは、スロット毎にキャラクタオブジェクトを設定し、複数のキャラクタオブジェクトを準備して動画配信を開始することができる。かかる複数のキャラクタオブジェクトの準備は、配信ユーザ用端末３００の受付部３３０により受け付けられた配信ユーザからの入力操作に基づいて行われる。

本発明の他の例として、配信ユーザ用端末３００の受付部３３０により受け付けられた配信ユーザの顔写真から自動的にキャラクタオブジェクトＣＯが作成されるものとしてもよい。

そして、配信ユーザによる動画配信は、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトを使用して開始される。かかる動画配信は、配信ユーザ用端末３００の動画配信部３４０により実行される。

動画配信を開始する際のスロットの指定は、動画配信を開始する際に配信ユーザに入力を求めるものであってもよいし、スロットにキャラクタオブジェクトを設定する際に、予め動画配信を開始する際に使用するスロットを指定させるものであってもよい。

そして、動画配信中の配信ユーザは、一例として図１１に示されるように、画面５０に表示された変更ボタン５１～５３を選択することにより、使用するキャラクタオブジェクトを変更することができる。なお、ここでは変更ボタン５１～５３はそれぞれスロット１～３に対応している。かかる変更は、配信ユーザ用端末３００の変更部３５０により実行される。

図１１は、変更ボタン５３に対応するスロット３に対応付けられたキャラクタオブジェクトＣＯを使用した例であり、どのキャラクタオブジェクトＣＯを使用しているか配信ユーザが認識可能に表示されている。

キャラクタオブジェクトの切り替えの際には、所定の演出効果を発生させることもできる。例えば、キャラクタオブジェクトが着替え室に入るような演出を表示したり、キャラクタオブジェクトが回転して変身するような演出を表示したりしてもよい。かかる構成は、キャラクタオブジェクトの変更処理に要する時間を視聴ユーザに感じさせないという効果を奏することができる。

以上、本発明の動画配信システムの概要について説明を行った。続いて、各構成の詳細について説明を行う。

本発明の動画配信システム１００は、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信システムであって、一又は複数のコンピュータプロセッサを備える。

一又は複数のコンピュータプロセッサは、上述したサーバ装置２００、配信ユーザ用端末３００および視聴ユーザ用端末４００が備えるプロセッサとすることができる。上記装置および各端末のハードウェア構成の詳細については後述する。

そして、一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、以下の機能を実現させる。

第一に、一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、配信ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける機能を実現する。かかる機能は、受付部３３０により実現される。受付部３３０の詳細については上述したとおりである。

第二に、一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、配信ユーザの操作により指定された、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画を配信する機能を実現する。かかる機能は、動画配信部３４０により実現される。動画配信部３４０の詳細については後述する。

そして、動画を配信する機能は、動画の配信中に所定の条件が満たされた場合に、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更する。かかる機能は、変更部３５０により実現される。変更部３５０の詳細については上述したとおりである。

以上の構成によれば、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することができる。また、以上の構成によれば、アクターのアクトへの集中力を低下させることなく、キャラクタオブジェクトを、他のキャラクタオブジェクトに変更することができる。具体的には、動画配信中にキャラクタオブジェクトの各パーツを変更するのではなく、予め準備されたスロットを用いてキャラクタオブジェクトを変更することができるため、アクターのアクトへの集中力が維持される。

上記所定の条件の充足は、配信ユーザおよび／または視聴ユーザの操作、動作、音声の少なくとも一つに基づいて判断されることができる。

具体的には、動画を配信している際の配信ユーザ用の画面に、キャラクタオブジェクトを切り替えるためのＧＵＩが表示され、所定の条件の充足は、ＧＵＩに対する操作があったか否かにより判断されることができる。

かかるＧＵＩは、図１１に示した画面に表示される変更ボタン５１～５３とすることができる。なお、かかる変更ボタンには数字以外にもマークを表示したり、キャラクタオブジェクトそのものを縮小して表示したりすることもできる。

配信ユーザの動作とは、例えばウインクを３回するなどのフェイシャルキャプチャ機能により変更指示として認識可能な動作とすることができる。

配信ユーザの音声とは、例えば「チェンジ」などの音声認識機能により変更指示として認識可能な音声とすることができる。

あるいは、所定の条件の充足は、視聴ユーザによるギフティングの数が所定数以上であるか否かにより判断されることができる。視聴ユーザは、視聴ユーザ用端末を介して、動画に対してギフティング操作を行うことができる。かかるギフティングの数を集計し、グフティングの数が所定数以上である場合に、キャラクタオブジェクトが変更されるものとしてもよい。

あるいは、所定の条件の充足は、視聴ユーザの数が所定数以上であるか否かにより判断されるものとしてもよい。

また、視聴ユーザの動作や音声については、視聴ユーザ用端末から直接または間接的に入力された情報から取得されることができる。例えば、視聴ユーザ用端末のマイク、視聴ユーザが装着する眼鏡や所持するペンライトなどから視聴ユーザの動作や音声を取得し、所定の条件を満たした場合にキャラクタオブジェクトが変更されるものとしてもよい。

以上のように、視聴ユーザの情報からキャラクタオブジェクトを変更する場合には、視聴ユーザの動画視聴やギフティングの意欲をより向上させることが可能となる。

動画を配信する前の配信ユーザ用の画面には、少なくともキャラクタオブジェクトと第一のＧＵＩと第二のＧＵＩが表示される表示画面が表示され、第一のＧＵＩは、動画の配信を開始するためのＧＵＩであり、第二のＧＵＩは、ボディパーツおよび装着パーツの一覧画面の表示を開始するためのＧＵＩであり、一覧画面は、表示画面の少なくとも一部に重畳して表示されることができる。

かかるＧＵＩの一例は図７に示される。第一のＧＵＩは動画配信開始ボタン３６であり、第二のＧＵＩはクローゼットボタン３７に対応する。なお、これらのＧＵＩの配置位置は図示されたものに限られず、配信ユーザの利便性を考慮して適宜設定することができる。

そして、一覧画面の一例は図１２に示される。このように、一覧画面６１を表示画面６０の少なくとも一部に重畳して表示することは、キャラクタオブジェクトを見ながら各パーツを見ることができるため、利便性がよい。なお、一覧画面は透過させてキャラクタオブジェクトＣＯに重畳してもキャラクタオブジェクトが見えるようにするのが好ましい。

また、図１２に示されるように、一覧画面６１は、第三のＧＵＩ６２および第四のＧＵＩ６３を含み、第三のＧＵＩ６２は、ボディパーツおよび装着パーツのカテゴリを示し、かつ、所定の第一の方向Ｘに表示内容をスライド可能なＧＵＩであり、第四のＧＵＩ６３は、カテゴリ毎に属するボディパーツおよび装着パーツを示し、かつ、第一の方向Ｘとは異なる第二の方向Ｙに表示内容をスライド可能なＧＵＩとすることができる。

なお、図１２において第一の方向Ｘは画面横方向、第二の方向Ｙは画面縦方向として示したが、第二の方向Ｙを画面横方向、第一の方向Ｘを画面縦方向となるようにしてもよい。かかる設定は、配信ユーザ用端末３００が備える傾きセンサの機能を用いて画面の向きを判定し、利便性の高い表示となるように自動的に変更されるものとしてもよい。

また、図１３に示すように、表示画面６０には、第三のＧＵＩ６２が重畳して表示され、第三のＧＵＩ６２に対する所定の配信ユーザ操作があった場合に、さらに第四のＧＵＩ６３を表示画面６０に重畳して表示させるものとしてもよい。また、第三のＧＵＩ６２を上方に引き出す操作により、図１４に示すように、第四のＧＵＩ６３は、表示画面６０全体に表示されるものとしてもよい。

かかる構成により、容易に第四のＧＵＩ６３の表示／非表示を操作することができる。

続いて、フェイシャルキャプチャ機能を実現する表情解析部３１０の詳細について説明を行う。表情解析部３１０は、配信ユーザ用端末３００のカメラにより撮影された配信ユーザの顔の画像を分析し、配信ユーザの表情を解析する。かかる手法は特に限定されるものではなく、本願の出願時に既に公知の技術を用いることもできるし、今後開発される新たな技術を用いることもできる。

そして、動画の配信が開始されているか否かを問わず、表示画面に表示されるキャラクタオブジェクトの少なくとも顔部分は、配信ユーザの顔部分がキャプチャされるものとすることができる。

一例として、配信アプリの初回起動後であって、キャラクタオブジェクトが画面に表示されている場合には常に配信ユーザの表情がキャラクタオブジェクトの顔に表現される。

かかる構成によれば、キャラクタオブジェクトが配信ユーザの分身（アバタ）であることが配信ユーザに強く意識づけられ、動画の配信の際にクオリティの高いアクトが実現可能となる。

ただし、動画の配信前であっても、一覧画面が表示されている間は、表示画面に表示されるキャラクタオブジェクトの少なくとも顔部分は、配信ユーザの顔部分がキャプチャされない構成としてもよい。

キャラクタオブジェクトを作成している最中、すなわち、パーツを指定している最中には、自身の表情にまで気を配ることができないおそれがあるためである。

また、動画の配信中であっても、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更している最中は、表示画面に表示されるキャラクタオブジェクトの少なくとも顔部分は、配信ユーザの顔部分がキャプチャされないものとすることができる。

かかる構成によれば、変更処理に伴う処理負荷を考慮し、フェイシャルキャプチャによる処理負荷をなくすことができる。なお、この変更している最中には、フェイシャルキャプチャの代わりに、処理負荷の軽い上述した演出効果を発生させるのが好ましい。

続いて、サーバ装置２００、配信ユーザ用端末３００および視聴ユーザ用端末４００のハードウェア構成について図１５を参照しながら説明を行う。

図１５に示すように、配信ユーザ用端末３００は、プロセッサ３０１と、メモリ３０２と、ストレージ３０３と、入出力インタフェース（入出力Ｉ／Ｆ）３０４と、通信インタフェース（通信Ｉ／Ｆ）３０５とを含む。各構成要素は、バスＢを介して相互に接続される。

配信ユーザ用端末３００は、プロセッサ３０１と、メモリ３０２と、ストレージ３０３と、入出力Ｉ／Ｆ３０４と、通信Ｉ／Ｆ３０５との協働により、本実施形態に記載される機能、方法を実現する。

プロセッサ３０１は、ストレージ３０３に記憶されるプログラムに含まれるコード又は命令によって実現する機能、及び／又は、方法を実行する。プロセッサ３０１は、例えば、中央処理装置（ＣＰＵ）、ＭＰＵ（Micro Processing Unit）、ＧＰＵ（Graphics Processing Unit）、マイクロプロセッサ（microprocessor）、プロセッサコア（processor core）、マルチプロセッサ（multiprocessor）、ＡＳＩＣ（Application-Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）等を含み、集積回路（ＩＣ（Integrated Circuit）チップ、ＬＳＩ（Large Scale Integration））等に形成された論理回路（ハードウェア）や専用回路によって各実施形態に開示される各処理を実現してもよい。また、これらの回路は、１又は複数の集積回路により実現されてよく、各実施形態に示す複数の処理を１つの集積回路により実現されることとしてもよい。また、ＬＳＩは、集積度の違いにより、ＶＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩ等と呼称されることもある。

メモリ３０２は、ストレージ３０３からロードしたプログラムを一時的に記憶し、プロセッサ３０１に対して作業領域を提供する。メモリ３０２には、プロセッサ３０１がプログラムを実行している間に生成される各種データも一時的に格納される。メモリ３０２は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）等を含む。

ストレージ３０３は、プログラムを記憶する。ストレージ３０３は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、フラッシュメモリ等を含む。

通信Ｉ／Ｆ３０５は、ネットワークアダプタ等のハードウェアや通信用ソフトウェア、及びこれらの組み合わせとして実装され、ネットワークを介して各種データの送受信を行う。当該通信は、有線、無線のいずれで実行されてもよく、互いの通信が実行できるのであれば、どのような通信プロトコルを用いてもよい。通信Ｉ／Ｆ３０５は、ネットワークを介して、他の情報処理装置との通信を実行する。通信Ｉ／Ｆ３０５は、各種データをプロセッサ３０１からの指示に従って、他の情報処理装置に送信する。また、通信Ｉ／Ｆ３０５は、他の情報処理装置から送信された各種データを受信し、プロセッサ３０１に伝達する。

入出力Ｉ／Ｆ３０４は、配信ユーザ用端末３００に対する各種操作を入力する入力装置、及び、配信ユーザ用端末３００で処理された処理結果を出力する出力装置を含む。入出力Ｉ／Ｆ３０４は、入力装置と出力装置が一体化していてもよいし、入力装置と出力装置とに分離していてもよい。

入力装置は、配信ユーザからの入力を受け付けて、当該入力に係る情報をプロセッサ３０１に伝達できる全ての種類の装置のいずれか、又は、その組み合わせにより実現される。入力装置は、例えば、タッチパネル、タッチディスプレイ、キーボード等のハードウェアキーや、マウス等のポインティングデバイス、カメラ（画像を介した操作入力）、音声出力装置を含むマイク（音声による操作入力）を含む。

出力装置は、プロセッサ３０１で処理された処理結果を出力する。出力装置は、例えば、ディスプレイやスピーカ等を含む。

なお、サーバ装置２００および視聴ユーザ用端末４００も上記配信ユーザ用端末３００の構成と同等であるため図示および説明は省略する。

次に、図１６および図１７を参照して、一態様による動画配信処理について説明する。図１６は、一実施形態における動画配信処理の流れを示すフロー図であり、図１７は、一実施形態における他のキャラクタオブジェクトを表示する処理の流れを示すフロー図である。

まず、ステップＳ１１では、配信ユーザの顔の動き（表情）のデジタル表現であるフェイスモーションデータが生成される。かかるステップは、表情解析部３１０により実行される。

次に、ステップＳ１２において、配信ユーザのフェイスモーションデータに基づいて、配信ユーザの表情の動きに同期して動くキャラクタオブジェクトのアニメーションが生成される。かかるステップは、生成部３２０により実行される。

次に、ステップＳ１３において、配信ユーザに対応するキャラクタオブジェクトのアニメーションを含む動画を生成する。この動画には、配信ユーザの音声が合成されてもよい。キャラクタオブジェクトのアニメーションは、仮想空間内に配置されてもよい。かかるステップは、生成部３２０により実行される。

次に、ステップＳ１４に移行し、ステップＳ１３にて生成された動画が配信される。この動画は、ネットワークを介して視聴ユーザ用端末に配信される。動画は、所定の配信期間にわたって継続して配信される。動画の配信期間は、例えば、３０秒間、１分間、５分間、１０分、３０分間、６０分間、１２０分間、およびこれら以外の任意の時間に定め得る。かかるステップは、動画配信部３４０により実行される。

次に、ステップＳ１５に進み、動画の配信を終了させるための終了条件が成就したか否かが判定される。終了条件は、例えば、配信の終了時刻に達したことなどの条件である。終了条件が成就していなければステップＳ１１～Ｓ１４の処理が繰り返し実行され、配信ユーザの動きに同期したアニメーションを含む動画の配信が継続される。動画について終了条件が成就していると判定された場合には、当該動画の配信処理を終了する。

次に、図１７をさらに参照して、動画の配信中に行われるキャラクタオブジェクトの変更処理について説明する。キャラクタオブジェクトの変更処理は、図１６に示した動画の配信処理と並行して行われる。

動画の配信中に、ステップＳ２１において、キャラクタオブジェクトの変更要求がなされたか否かが判定される。

キャラクタオブジェクトの変更要求がなされた場合には、当該表示処理はステップＳ２２に進む。ステップＳ２２においては、当該変更要求に基づいて、表示が要求された他のキャラクタオブジェクトを配信中の動画に表示させるための処理が行われる。

キャラクタオブジェクトの変更要求がなされていない場合には、変更処理は行われない。

続いて、本発明の実施形態に係る動画配信方法について説明する。

本発明の動画配信方法は、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信方法であって、以下の工程１１０～１３０を備える。

工程１１０は、配信ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける。かかる工程１１０は、上述した受付部３３０により実行されることができる。

工程１２０は、配信ユーザの操作により指定された、複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画を配信する。かかる工程１２０は、上述した表情解析部３１０、生成部３２０および動画配信部３４０により実行されることができる。

そして、工程１２０は、動画の配信中に所定の条件が満たされた場合に、動画に含まれるキャラクタオブジェクトを、一のキャラクタオブジェクトから、複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更する（工程１３０）ことを特徴とする。かかる工程１２０は、上述した変更部３５０により実行されることができる。

以上の構成によれば、上述した従来技術の問題の少なくとも一部を解決又は緩和する技術的な改善を提供することができる。また、本発明の動画配信システム、動画配信方法および動画配信プログラムによれば、アクターのアクトへの集中力を低下させることなく、キャラクタオブジェクトを、他のキャラクタオブジェクトに変更することができる。

最後に、本発明の実施形態に係る動画配信プログラムについて説明する。

本発明の動画配信プログラムは、アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画を配信する動画配信プログラムであって、一又は複数のコンピュータプロセッサに、以下の工程１１０～１３０を実現させる。

本発明の実施形態は、上述した実施形態に限定されるものではなく、その要旨を逸脱しない範囲内で様々な変更が可能である。上述した例では、配信ユーザは自宅で自身のスマートフォンを用いて動画を配信する例を想定したが、配信スタジオにおいて動画を配信する場合にも適用可能である。その場合には、顔だけではなく身体もモーションキャプチャされたキャラクタオブジェクトが作成され、使用される。また、キャラクタオブジェクトの変更指示は、配信ユーザのみならず、補助者により行われるものであってもよい。

また、上述した実施形態に係るサーバ装置又は端末装置として機能させるために、コンピュータ又は携帯電話などの情報処理装置を好適に用いることができる。このような情報処理装置は、実施形態に係るサーバ装置又は端末装置の各機能を実現する処理内容を記述したプログラムを、情報処理装置の記憶部に格納し、情報処理装置のＣＰＵによって当該プログラムを読み出して実行させることによって実現可能である。

また、上述したとおり、動画を配信する機能における所定の条件の充足は、配信ユーザおよび／または視聴ユーザの操作、動作、音声の少なくとも一つに基づいて判断される点について説明したが、かかる所定の条件の内容は、予め定められているものとしてもよいし、配信ユーザにより設定されるものとしてもよい。

特に、図１８に設定画面の一例が示されるように、配信ユーザは、各スロットに対して、「音声認識」「コメント」「ジェスチャ」「コメント数」「ギフティング数」などのプルダウン式の選択肢の中から所定の条件の内容を設定することができるようにしてもよい。

なお、かかる設定は、配信の開始前または配信開始後に配信を一時停止した場合に行うことができる。配信開始後の一時停止は、図１９に一例として示される一時停止ボタンを選択することにより実行される。

「音声認識」を選択した場合には、配信ユーザは、任意の音声を録音して登録することができる。この場合、所定の条件の充足は、配信ユーザにより発せられた音声と登録された音声との一致率が所定値以上であることである。より詳細には、所定時間内の発生された音声と登録された音声との一致率を確認することにより、一致率が所定値以上が否かを判断する。

「コメント」を選択した場合には、配信ユーザは、特定のワードをテキストで登録することができる。この場合、所定の条件の充足は、視聴ユーザが登録されたワードをコメントすることである。

「コメント数」を選択した場合には、配信ユーザは、コメント数を登録することができる。この場合、所定の条件の充足は、視聴ユーザのコメントの総数が登録数を上回ったことである。

「ギフティング数」を選択した場合には、配信ユーザは、ギフティング数を登録することができる。この場合、所定の条件の充足は、視聴ユーザからのギフティング総数が登録数を上回ったことである。

また、これらの構成は、動画配信中に配信ユーザ側と視聴ユーザ側で表示されている画面が同じとなるために表示し辛い配信ユーザへの操作用ＧＵＩを表示させることなく、キャラクタオブジェクトの変更を行うことができるようになる。

さらに、本発明により実現される動画の生配信用のアプリケーションにおいて、配信中に生配信ならではの条件を満たすことでキャラクタオブジェクト（アバター）のビジュアルを変更できることによって、配信の臨場感を向上させ、アプリケーションの興趣性を高めることができる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

また、実施形態に記載した手法は、計算機（コンピュータ）に実行させることができるプログラムとして、例えば磁気ディスク（フロッピー（登録商標）ディスク、ハードディスク等）、光ディスク（ＣＤ－ＲＯＭ、ＤＶＤ、ＭＯ等）、半導体メモリ（ＲＯＭ、ＲＡＭ、フラッシュメモリ等）等の記録媒体に格納し、また通信媒体により伝送して頒布することもできる。なお、媒体側に格納されるプログラムには、計算機に実行させるソフトウェア手段（実行プログラムのみならずテーブルやデータ構造も含む）を計算機内に構成させる設定プログラムをも含む。本装置を実現する計算機は、記録媒体に記録されたプログラムを読み込み、また場合により設定プログラムによりソフトウェア手段を構築し、このソフトウェア手段によって動作が制御されることにより上述した処理を実行する。なお、本明細書でいう記録媒体は、頒布用に限らず、計算機内部あるいはネットワークを介して接続される機器に設けられた磁気ディスクや半導体メモリ等の記憶媒体を含むものである。記憶部は、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。
〔付記事項〕
以下に、本願の原出願の分割直前の特許請求の範囲に記載された発明を付記する。
〔１〕アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する動画配信システムであって、一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
配信ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける機能と、
前記配信ユーザの操作により指定された、前記複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する機能と
を実現させ、
前記動画に関する情報を配信する機能は、動画の配信中に、前記複数のスロットの中の他のスロットに設定された所定の条件が満たされた場合に、前記動画に含まれるキャラクタオブジェクトを、前記一のキャラクタオブジェクトから、前記他のスロットに対応付けられた他のキャラクタオブジェクトに変更する、動画配信システム。
〔２〕前記所定の条件は、前記他のスロットに設定された特定のワードを含むコメントが投稿されることである、請求項１に記載の動画配信システム。
〔３〕前記複数のスロットには、前記所定の条件として、それぞれ異なる特定のワードが設定されることを特徴とする請求項２に記載の動画配信システム。
〔４〕前記所定の条件は、前記他のスロットに設定された特定の音声を、前記配信ユーザが発声することである、請求項１に記載の動画配信システム。
〔５〕前記所定の条件は、前記動画に投稿されたコメントの総数が、前記他のスロットに設定された特定の数を上回ったことである、請求項１に記載の動画配信システム。
〔６〕前記所定の条件は、前記動画に対するギフティング数の総数が、前記他のスロットに設定された特定の数を上回ったことである、請求項１に記載の動画配信システム。
〔７〕前記設定を受け付ける機能は、さらに、前記複数のスロットの各々に対する所定の条件の設定を受付けることを特徴とする請求項１から６のいずれか一項に記載の動画配信システム。
〔８〕前記動画に関する情報を配信する機能は、前記動画の配信中に所定の条件が満たされた場合に、前記動画に含まれるキャラクタオブジェクトを、前記一のキャラクタオブジェクトから、前記複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに自動的に変更することを特徴とする請求項１から７のいずれか一項に記載の動画配信システム。
〔９〕前記一又は複数のコンピュータプロセッサは、さらに、
前記変更の際に、所定の演出効果を発生させる効果発生機能を実現させることを特徴とする、請求項８に記載の動画配信システム。
〔１０〕前記動画の配信中であっても、前記動画に含まれるキャラクタオブジェクトを、前記一のキャラクタオブジェクトから、前記複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更している最中は、前記動画に含まれるキャラクタオブジェクトの少なくとも顔部分は、前記配信ユーザの顔部分がキャプチャされず、前記効果発生機能により前記所定の演出効果が発生されることを特徴とする請求項９に記載の動画配信システム。
〔１１〕前記動画を配信する前の配信ユーザ用の画面には、少なくともキャラクタオブジェクトと第一のＧＵＩと第二のＧＵＩが表示される表示画面が表示され、
前記第一のＧＵＩは、前記動画の配信を開始するためのＧＵＩであり、
前記第二のＧＵＩは、前記ボディパーツおよび前記装着パーツの一覧画面の表示を開始するためのＧＵＩであり、
前記一覧画面は、前記表示画面の少なくとも一部に重畳して表示されることを特徴とする請求項１から１０のいずれか一項に記載の動画配信システム。
〔１２〕前記一覧画面は、第三のＧＵＩおよび第四のＧＵＩを含み、
前記第三のＧＵＩは、前記ボディパーツおよび前記装着パーツのカテゴリを示し、かつ、所定の第一の方向に表示内容をスライド可能なＧＵＩであり、
前記第四のＧＵＩは、前記カテゴリ毎に属する前記ボディパーツおよび前記装着パーツを示し、かつ、前記第一の方向とは異なる第二の方向に表示内容をスライド可能なＧＵＩであることを特徴とする請求項１１に記載の動画配信システム。
〔１３〕前記表示画面には、前記第三のＧＵＩが重畳して表示され、
前記第三のＧＵＩに対する所定の配信ユーザ操作があった場合に、さらに前記第四のＧＵＩを前記表示画面に重畳して表示させることを特徴とする請求項１２に記載の動画配信システム。
〔１４〕アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する動画配信方法であって、
配信ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける工程と、
前記配信ユーザの操作により指定された、前記複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する工程と
を備え、
前記動画に関する情報を配信する工程は、動画の配信中、前記複数のスロットの中の他のスロットに設定された所定の条件が満たされた場合に、前記動画に含まれるキャラクタオブジェクトを、前記一のキャラクタオブジェクトから他のスロットに対応付けられた他のキャラクタオブジェクトに変更する、動画配信方法。
〔１５〕アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する動画配信プログラムであって、
一又は複数のコンピュータプロセッサに、
配信ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける工程と、
前記配信ユーザの操作により指定された、前記複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する工程と
を実現させ、
前記動画に関する情報を配信する工程は、動画の配信中、前記複数のスロットの中の他のスロットに設定された所定の条件が満たされた場合に、前記動画に含まれるキャラクタオブジェクトを、前記一のキャラクタオブジェクトから、前記複数のスロットの中の他のスロットに対応付けられた他のキャラクタオブジェクトに変更する、動画配信プログラム。

１００動画配信システム
２００サーバ装置
３００配信ユーザ用端末
４００視聴ユーザ用端末
３１０表情解析部
３２０生成部
３３０受付部
３４０動画配信部
３５０変更部

Claims

アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する動画配信システムであって、一又は複数のコンピュータプロセッサを備え、
前記一又は複数のコンピュータプロセッサは、コンピュータ読み取り可能な命令を実行することにより、
配信ユーザの操作による、１以上のボディパーツおよび１以上の装着パーツで構成されるキャラクタオブジェクトがそれぞれ対応付けられた複数のスロットの設定を受け付ける機能と、
前記配信ユーザの操作により指定された、前記複数のスロットの中の一のスロットに対応付けられた一のキャラクタオブジェクトのアニメーションを含む動画に関する情報を配信する機能と
を実現させ、
前記動画に関する情報を配信する機能は、動画の配信中に、前記複数のスロットの中の他のスロットに設定された所定の条件が満たされた場合に、前記動画に含まれるキャラクタオブジェクトを、前記一のキャラクタオブジェクトから、前記他のスロットに対応付けられた他のキャラクタオブジェクトに変更する、動画配信システム。