JP7329209B1 - 情報処理システム、情報処理方法およびコンピュータプログラム - Google Patents
情報処理システム、情報処理方法およびコンピュータプログラム Download PDFInfo
- Publication number
- JP7329209B1 JP7329209B1 JP2022097871A JP2022097871A JP7329209B1 JP 7329209 B1 JP7329209 B1 JP 7329209B1 JP 2022097871 A JP2022097871 A JP 2022097871A JP 2022097871 A JP2022097871 A JP 2022097871A JP 7329209 B1 JP7329209 B1 JP 7329209B1
- Authority
- JP
- Japan
- Prior art keywords
- user
- information
- character object
- state
- user terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 156
- 238000003672 processing method Methods 0.000 title claims description 21
- 238000004590 computer program Methods 0.000 title claims description 16
- 230000033001 locomotion Effects 0.000 claims abstract description 118
- 230000009471 action Effects 0.000 claims description 112
- 230000006870 function Effects 0.000 claims description 88
- 230000008859 change Effects 0.000 claims description 46
- 230000005540 biological transmission Effects 0.000 claims description 18
- 230000001755 vocal effect Effects 0.000 claims 2
- 238000004891 communication Methods 0.000 abstract description 37
- 238000009826 distribution Methods 0.000 description 193
- 238000010586 diagram Methods 0.000 description 37
- 238000012545 processing Methods 0.000 description 19
- 238000000034 method Methods 0.000 description 15
- 230000007704 transition Effects 0.000 description 14
- 238000003860 storage Methods 0.000 description 11
- 230000006872 improvement Effects 0.000 description 10
- 230000015654 memory Effects 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 6
- 238000003825 pressing Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 230000007613 environmental effect Effects 0.000 description 5
- 238000002360 preparation method Methods 0.000 description 5
- 230000001186 cumulative effect Effects 0.000 description 4
- 210000005069 ears Anatomy 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000000977 initiatory effect Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000004397 blinking Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- LQIAZOCLNBBZQK-UHFFFAOYSA-N 1-(1,2-Diphosphanylethyl)pyrrolidin-2-one Chemical compound PCC(P)N1CCCC1=O LQIAZOCLNBBZQK-UHFFFAOYSA-N 0.000 description 1
- 235000002017 Zea mays subsp mays Nutrition 0.000 description 1
- 241000482268 Zea mays subsp. mays Species 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000001976 improved effect Effects 0.000 description 1
- 230000005764 inhibitory process Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/157—Conference systems defining a virtual conference space and using avatars or agents
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/152—Multipoint control units therefor
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
図1に一例として示されるように、本開示に係る情報処理システム1000は、1以上の視聴ユーザ端末1100、および、これら視聴ユーザ端末1100とネットワーク1200を介して接続される、動画の配信スタジオ等に配置された情報処理装置(サポートコンピュータ)1300を含むことができる。
ここで、図4を用いて、配信ユーザ端末100のハードウェア構成について説明する。配信ユーザ端末100は、プロセッサ101と、メモリ102と、ストレージ103と、入出力インターフェース(入出力I/F)104と、通信インターフェース(通信I/F)105とを含む。各構成要素は、バスBを介して相互に接続される。
200 視聴ユーザ端末(ユーザ端末)
300 ネットワーク
400 サーバ装置
410 受信部
420 実行部
430 特定部
440 制御部
Claims (20)
- 一又は複数のコンピュータプロセッサを備える情報処理システムであって、
前記一又は複数のコンピュータプロセッサは、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信部と、
前記受信部が受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行部と、
前記ユーザ端末の状態を特定する特定部と、
前記特定部により特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御部と
を備え、
前記特定部は、前記受信部が前記ユーザ端末から前記ユーザの動きに関する情報を受信していない場合、または、前記受信部が受信した前記ユーザの動きに関する情報が第一の条件を満たす場合、前記ユーザ端末が第一の状態であると特定し、
前記制御部は、前記特定部が、前記ユーザ端末が第一の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すための動作を適用させる情報処理システム。 - 前記第一の条件は、前記受信部が、同じ動きに関する情報を所定期間受信し続けていること、または、動きが変化した場合にのみ送信される動きの変化量に関する情報を所定期間受信しないことであることを特徴とする請求項1に記載の情報処理システム。
- 一又は複数のコンピュータプロセッサを備える情報処理システムであって、
前記一又は複数のコンピュータプロセッサは、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信部と、
前記受信部が受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行部と、
前記ユーザ端末の状態を特定する特定部と、
前記特定部により特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御部と
を備え、
前記特定部は、前記受信部が前記ユーザ端末から前記音声に関する情報を受信していない場合、または、前記受信部が受信した前記音声に関する情報が第二の条件を満たす場合、前記ユーザ端末が第二の状態であると特定し、
前記制御部は、前記特定部が、前記ユーザ端末が第二の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトに発声していない様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトに発声していない様子を表すための動作を適用させる情報処理システム。 - 一又は複数のコンピュータプロセッサを備える情報処理システムであって、
前記一又は複数のコンピュータプロセッサは、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信部と、
前記受信部が受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行部と、
前記ユーザ端末の状態を特定する特定部と、
前記特定部により特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御部と
を備え、
前記特定部は、前記受信部が、前記ユーザ端末において特定のアプリケーションが起動または表示されていることを示す情報を受信している場合、前記ユーザ端末が第三の状態であると特定し、
前記制御部は、前記特定部が、前記ユーザ端末が第三の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトに音楽を聴いている様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトに音楽を聴いている様子を表すための動作を適用させる情報処理システム。 - 前記特定部は、前記受信部が、前記ユーザ端末において音楽再生アプリ、動画再生アプリ、ゲームアプリまたは通話アプリを起動していることを示す情報を受信している場合、前記ユーザ端末が第三の状態であると特定することを特徴とする請求項4に記載の情報処理システム。
- 一又は複数のコンピュータプロセッサを備える情報処理システムであって、
前記一又は複数のコンピュータプロセッサは、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信部と、
前記受信部が受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行部と、
前記ユーザ端末の状態を特定する特定部と、
前記特定部により特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御部と
を備え、
前記特定部は、前記受信部が受信した前記音声に関する情報に含まれる前記ユーザによる発声以外の他の音声の音量が第一の値以上である場合、前記ユーザ端末が第四の状態であると特定し、
前記制御部は、前記特定部が、前記ユーザ端末が第四の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトにビデオチャットの音声を聞き辛く感じている様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトがビデオチャットの音声を聞き辛く感じている様子を表すための動作を適用させる情報処理システム。 - 前記特定部が、前記ユーザ端末が第四の状態であると特定した場合、
前記制御部は、前記他の音声の音量が第二の値以上である場合に、前記音声に関する情報を含めずに前記動画を生成することを特徴とする請求項6に記載の情報処理システム。 - 前記受信部は、さらに、前記ユーザ端末から送信される指示情報を受信し、
前記制御部は、前記指示に応じて前記キャラクタオブジェクトの表示態様の変更を行うことを特徴とする請求項1から7のいずれか一項に記載の情報処理システム。 - 一又は複数のコンピュータプロセッサに、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信ステップと、
前記受信ステップにおいて受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記ユーザ端末の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記受信ステップにおいて前記ユーザ端末から前記ユーザの動きに関する情報を受信していない場合、または、前記受信ステップにおいて受信した前記ユーザの動きに関する情報が第一の条件を満たす場合、前記ユーザ端末が第一の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記ユーザ端末が第一の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信ステップと、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信ステップと、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記情報処理装置の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記ユーザの動きに関する情報を受信していない場合、または、前記ユーザの動きに関する情報が第一の条件を満たす場合、前記情報処理装置が第一の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記情報処理装置が第一の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信機能と、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信機能と、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行機能と、
前記情報処理装置の状態を特定する特定機能と、
前記特定機能において特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御機能と
を実現させ、
前記特定機能は、前記ユーザの動きに関する情報を受信していない場合、または、前記ユーザの動きに関する情報が第一の条件を満たす場合、前記情報処理装置が第一の状態であると特定し、
前記制御機能は、前記特定機能により、前記情報処理装置が第一の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトに前記ビデオチャットの画面を視ていない様子を表すための動作を適用させるコンピュータプログラム。 - 一又は複数のコンピュータプロセッサに、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信ステップと、
前記受信ステップにおいて受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記ユーザ端末の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記受信ステップにおいて前記ユーザ端末から前記音声に関する情報を受信していない場合、または、前記受信ステップにおいて受信した前記音声に関する情報が第二の条件を満たす場合、前記ユーザ端末が第二の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記ユーザ端末が第二の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトに発声していない様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトに発声していない様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信ステップと、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信ステップと、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記情報処理装置の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記音声に関する情報を受信していない場合、または、前記音声に関する情報が第二の条件を満たす場合、前記情報処理装置が第二の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記情報処理装置が第二の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトに発声していない様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトに発声していない様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信機能と、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信機能と、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行機能と、
前記情報処理装置の状態を特定する特定機能と、
前記特定機能において特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御機能と
を実現させ、
前記特定機能は、前記音声に関する情報を受信していない場合、または、前記音声に関する情報が第二の条件を満たす場合、前記情報処理装置が第二の状態であると特定し、
前記制御機能は、前記特定機能が、前記情報処理装置が第二の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトに発声していない様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトに発声していない様子を表すための動作を適用させるコンピュータプログラム。 - 一又は複数のコンピュータプロセッサに、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信ステップと、
前記受信ステップにおいて受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記ユーザ端末の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記受信ステップにおいて、前記ユーザ端末において特定のアプリケーションが起動または表示されていることを示す情報を受信している場合、前記ユーザ端末が第三の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記ユーザ端末が第三の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトに音楽を聴いている様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトに音楽を聴いている様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信ステップと、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信ステップと、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記情報処理装置の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記情報処理装置において特定のアプリケーションが起動または表示されていることを示す情報を受信している場合、前記情報処理装置が第三の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記情報処理装置が第三の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトに音楽を聴いている様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトに音楽を聴いている様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信機能と、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信機能と、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行機能と、
前記情報処理装置の状態を特定する特定機能と、
前記特定機能において特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御機能と
を実現させ、
前記特定機能は、前記情報処理装置において特定のアプリケーションが起動または表示されていることを示す情報を受信している場合、前記情報処理装置が第三の状態であると特定し、
前記制御機能は、前記特定機能により、前記情報処理装置が第三の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトに音楽を聴いている様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトに音楽を聴いている様子を表すための動作を適用させるコンピュータプログラム。 - 一又は複数のコンピュータプロセッサに、
ユーザのユーザ端末から送信される、当該ユーザの動きに関する情報、音声に関する情報およびキャラクタオブジェクトに関する情報を含む、動画を生成するための情報を受信可能な受信ステップと、
前記受信ステップにおいて受信した、前記動画を生成するための情報に基づいて、前記キャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記ユーザ端末の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記ユーザ端末の状態に応じて、当該ユーザ端末に対応する前記キャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記受信ステップにおいて受信した前記音声に関する情報に含まれる前記ユーザによる発声以外の他の音声の音量が第一の値以上である場合、前記ユーザ端末が第四の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記ユーザ端末が第四の状態であると特定した場合における前記キャラクタオブジェクトの表示態様の変更として、前記キャラクタオブジェクトにビデオチャットの音声を聞き辛く感じている様子を表すためのオブジェクトを装着、および/または、前記キャラクタオブジェクトがビデオチャットの音声を聞き辛く感じている様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信ステップと、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信ステップと、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行ステップと、
前記情報処理装置の状態を特定する特定ステップと、
前記特定ステップにおいて特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御ステップと
を実行させ、
前記特定ステップでは、前記音声に関する情報に含まれる前記ユーザによる発声以外の他の音声の音量が第一の値以上である場合、前記情報処理装置が第四の状態であると特定し、
前記制御ステップでは、前記特定ステップにおいて、前記情報処理装置が第四の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトにビデオチャットの音声を聞き辛く感じている様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトがビデオチャットの音声を聞き辛く感じている様子を表すための動作を適用させる情報処理方法。 - 情報処理装置が備える一又は複数のコンピュータプロセッサに、
ユーザの動きに関する情報、前記ユーザの音声に関する情報および前記ユーザのキャラクタオブジェクトに関する情報を含む、前記ユーザに係る動画を生成するための情報をサーバ装置に送信可能な送信機能と、
他のユーザの動きに関する情報、前記他のユーザの音声に関する情報および前記他のユーザのキャラクタオブジェクトに関する情報を含む、前記他のユーザに係る動画を生成するための情報をサーバ装置から受信可能な受信機能と、
前記ユーザに係る動画を生成するための情報、および、前記他のユーザに係る動画を生成するための情報に基づいて、前記ユーザおよび前記他のユーザのキャラクタオブジェクトを用いた複数のユーザ間におけるビデオチャットを実行させる実行機能と、
前記情報処理装置の状態を特定する特定機能と、
前記特定機能において特定された前記情報処理装置の状態に応じて、当該情報処理装置に対応する前記ユーザのキャラクタオブジェクトの表示態様を変更する制御機能と
を実現させ、
前記特定機能は、前記音声に関する情報に含まれる前記ユーザによる発声以外の他の音声の音量が第一の値以上である場合、前記情報処理装置が第四の状態であると特定し、
前記制御機能は、前記特定機能により、前記情報処理装置が第四の状態であると特定した場合における前記ユーザのキャラクタオブジェクトの表示態様の変更として、前記ユーザのキャラクタオブジェクトにビデオチャットの音声を聞き辛く感じている様子を表すためのオブジェクトを装着、および/または、前記ユーザのキャラクタオブジェクトがビデオチャットの音声を聞き辛く感じている様子を表すための動作を適用させるコンピュータプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022097871A JP7329209B1 (ja) | 2022-06-17 | 2022-06-17 | 情報処理システム、情報処理方法およびコンピュータプログラム |
US18/211,001 US20230412766A1 (en) | 2022-06-17 | 2023-06-16 | Information processing system, information processing method, and computer program |
JP2023122376A JP2023184519A (ja) | 2022-06-17 | 2023-07-27 | 情報処理システム、情報処理方法およびコンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022097871A JP7329209B1 (ja) | 2022-06-17 | 2022-06-17 | 情報処理システム、情報処理方法およびコンピュータプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023122376A Division JP2023184519A (ja) | 2022-06-17 | 2023-07-27 | 情報処理システム、情報処理方法およびコンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7329209B1 true JP7329209B1 (ja) | 2023-08-18 |
JP2023184000A JP2023184000A (ja) | 2023-12-28 |
Family
ID=87568982
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022097871A Active JP7329209B1 (ja) | 2022-06-17 | 2022-06-17 | 情報処理システム、情報処理方法およびコンピュータプログラム |
JP2023122376A Pending JP2023184519A (ja) | 2022-06-17 | 2023-07-27 | 情報処理システム、情報処理方法およびコンピュータプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023122376A Pending JP2023184519A (ja) | 2022-06-17 | 2023-07-27 | 情報処理システム、情報処理方法およびコンピュータプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US20230412766A1 (ja) |
JP (2) | JP7329209B1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013009073A (ja) | 2011-06-23 | 2013-01-10 | Sony Corp | 情報処理装置、情報処理方法、プログラム、及びサーバ |
WO2015079865A1 (ja) | 2013-11-27 | 2015-06-04 | シャープ株式会社 | 入力装置、コミュニケーション情報の特定方法、処理装置、表示装置、プログラム、および記録媒体 |
WO2018158852A1 (ja) | 2017-02-28 | 2018-09-07 | サン電子株式会社 | 通話システム及びコミュニケーションシステム |
JP2020119425A (ja) | 2019-01-28 | 2020-08-06 | シャープ株式会社 | 情報処理装置、情報処理システム、情報処理方法およびプログラム |
WO2022079933A1 (ja) | 2020-10-14 | 2022-04-21 | 住友電気工業株式会社 | コミュニケーション支援プログラム、コミュニケーション支援方法、コミュニケーション支援システム、端末装置及び非言語表現プログラム |
-
2022
- 2022-06-17 JP JP2022097871A patent/JP7329209B1/ja active Active
-
2023
- 2023-06-16 US US18/211,001 patent/US20230412766A1/en active Pending
- 2023-07-27 JP JP2023122376A patent/JP2023184519A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013009073A (ja) | 2011-06-23 | 2013-01-10 | Sony Corp | 情報処理装置、情報処理方法、プログラム、及びサーバ |
WO2015079865A1 (ja) | 2013-11-27 | 2015-06-04 | シャープ株式会社 | 入力装置、コミュニケーション情報の特定方法、処理装置、表示装置、プログラム、および記録媒体 |
WO2018158852A1 (ja) | 2017-02-28 | 2018-09-07 | サン電子株式会社 | 通話システム及びコミュニケーションシステム |
JP2020119425A (ja) | 2019-01-28 | 2020-08-06 | シャープ株式会社 | 情報処理装置、情報処理システム、情報処理方法およびプログラム |
WO2022079933A1 (ja) | 2020-10-14 | 2022-04-21 | 住友電気工業株式会社 | コミュニケーション支援プログラム、コミュニケーション支援方法、コミュニケーション支援システム、端末装置及び非言語表現プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023184000A (ja) | 2023-12-28 |
US20230412766A1 (en) | 2023-12-21 |
JP2023184519A (ja) | 2023-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6700463B2 (ja) | ヘッドマウントディスプレイ上の視覚的作用を制限するためのフィルタリング及びペアレンタルコントロール法 | |
CN114845081A (zh) | 信息处理装置、记录介质及信息处理方法 | |
JP6883140B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
US11651541B2 (en) | Integrated input/output (I/O) for a three-dimensional (3D) environment | |
WO2021257868A1 (en) | Video chat with spatial interaction and eye contact recognition | |
JP7329209B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP7199791B2 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP7317325B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP7301263B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
US20240152311A1 (en) | Information processing system, information processing method, and computer program | |
JP7253597B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP7229400B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
WO2024040571A1 (en) | Delay optimization for multiple audio streams | |
JP7253026B1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP7150114B1 (ja) | コミュニケーション支援システム、コミュニケーション支援方法、及びコミュニケーション支援プログラム | |
JP7455300B2 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP2024088629A (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP2024087887A (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP2023067679A (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
JP2023098892A (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220617 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20220712 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221203 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230411 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230411 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230704 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230727 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7329209 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |