JP2020144901A - 情報処理装置、情報処理方法及びプログラム - Google Patents
情報処理装置、情報処理方法及びプログラム Download PDFInfo
- Publication number
- JP2020144901A JP2020144901A JP2020082215A JP2020082215A JP2020144901A JP 2020144901 A JP2020144901 A JP 2020144901A JP 2020082215 A JP2020082215 A JP 2020082215A JP 2020082215 A JP2020082215 A JP 2020082215A JP 2020144901 A JP2020144901 A JP 2020144901A
- Authority
- JP
- Japan
- Prior art keywords
- information
- user
- state
- information processing
- recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 213
- 238000003672 processing method Methods 0.000 title claims abstract description 21
- 230000033001 locomotion Effects 0.000 claims abstract description 91
- 238000001514 detection method Methods 0.000 claims abstract description 54
- 238000012545 processing Methods 0.000 claims description 66
- 230000009471 action Effects 0.000 claims description 45
- 238000012986 modification Methods 0.000 claims description 24
- 230000004048 modification Effects 0.000 claims description 24
- 230000006399 behavior Effects 0.000 claims description 19
- 230000008921 facial expression Effects 0.000 claims description 15
- 230000000704 physical effect Effects 0.000 claims description 2
- 230000002401 inhibitory effect Effects 0.000 abstract 1
- 238000000034 method Methods 0.000 description 59
- 238000012937 correction Methods 0.000 description 58
- 230000006870 function Effects 0.000 description 49
- 238000004891 communication Methods 0.000 description 46
- 230000008569 process Effects 0.000 description 33
- 235000019645 odor Nutrition 0.000 description 16
- 238000010586 diagram Methods 0.000 description 15
- 238000005516 engineering process Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010411 cooking Methods 0.000 description 4
- 230000035900 sweating Effects 0.000 description 4
- 206010011469 Crying Diseases 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 3
- 230000001055 chewing effect Effects 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000035807 sensation Effects 0.000 description 3
- 235000019615 sensations Nutrition 0.000 description 3
- 230000001629 suppression Effects 0.000 description 3
- 208000035985 Body Odor Diseases 0.000 description 2
- 208000031361 Hiccup Diseases 0.000 description 2
- 241001282135 Poromitra oscitans Species 0.000 description 2
- 206010040904 Skin odour abnormal Diseases 0.000 description 2
- 206010048232 Yawning Diseases 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000001151 other effect Effects 0.000 description 2
- 239000002304 perfume Substances 0.000 description 2
- 230000008786 sensory perception of smell Effects 0.000 description 2
- 206010015137 Eructation Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 208000027687 belching Diseases 0.000 description 1
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000009508 confectionery Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 210000003811 finger Anatomy 0.000 description 1
- 206010016766 flatulence Diseases 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000018984 mastication Effects 0.000 description 1
- 238000010077 mastication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 206010041232 sneezing Diseases 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 230000003313 weakening effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
- A63F13/422—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle automatically for the purpose of assisting the player, e.g. automatic braking in a driving game
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/215—Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/217—Input arrangements for video game devices characterised by their sensors, purposes or types using environment-related information, i.e. information generated otherwise than by the player, e.g. ambient temperature or humidity
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
- A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
- A63F13/525—Changing parameters of virtual cameras
- A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/85—Providing additional services to players
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
- A63F2300/8082—Virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Environmental & Geological Engineering (AREA)
- Ecology (AREA)
- Biodiversity & Conservation Biology (AREA)
- Environmental Sciences (AREA)
- Health & Medical Sciences (AREA)
- Biophysics (AREA)
- Cardiology (AREA)
- General Health & Medical Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
1.第1の実施形態
1.1.情報処理システムについて
1.1.1.情報処理システムの全体構造について
1.1.2.プラットフォームの構成について
1.2.情報処理装置について
1.3.情報処理方法について
1.4.変形例について
2.ハードウェア構成について
<情報処理システムについて>
まず、図1〜図3を参照しながら、本開示の第1の実施形態に係る情報処理システムの構成について、簡単に説明する。
図1は、本開示の第1の実施形態に係る情報処理システムを模式的に示した説明図である。図2A及び図2Bは、本実施形態に係る情報処理システムの機能の一例を模式的に説明した説明図である。図3は、本実施形態に係る情報処理装置と連携するプラットフォームの構成の一例を示したブロック図である。
本実施形態に係る情報処理システム1は、図1に模式的に示したように、インターネット等の公知のネットワーク3により互いに接続された情報処理装置10と、複数のプラットフォーム20A,20B・・・(以下、複数のプラットフォームを、「プラットフォーム20」と総称することがある。)と、から構成されている。
次に、図3を参照しながら、本実施形態に係る情報処理システム1を構成するプラットフォーム20の構成の一例を、簡単に説明する。図3は、本実施形態に係る情報処理装置と連携するプラットフォームの構成の一例を示したブロック図である。
次に、図4〜図12Bを参照しながら、本実施形態に係る情報処理装置について、詳細に説明する。
図4は、本実施形態に係る情報処理装置の構成の一例を示したブロック図である。図5A及び図5Bは、本実施形態に係る情報処理装置で着目する不適切な情報の一例を示した説明図である。図6は、本実施形態に係る情報処理装置で着目する不適切な情報の認識手法を示した説明図である。図7は、本実施形態に係る情報処理装置が備える制御部の構成の一例を示したブロック図であり、図8は、本実施形態に係る情報処理装置が備える反映内容判断部の構成の一例を示したブロック図である。図9は、本実施形態に係る反映内容判断部における判断処理を説明するための説明図である。図10A〜図10Dは、本実施形態に係る情報処理装置が備える情報修正部における情報修正処理の一例を説明するための説明図である。図11は、本実施形態に係る情報処理装置における反映内容判断処理の他の一例を説明するための説明図である。図12A及び図12Bは、本実施形態に係る情報処理システムにおける表示画面の一例を模式的に示した説明図である。
制御部103は、例えば、CPU、ROM、RAM等により実現される。制御部103は、本実施形態に係る情報処理装置10の機能や動作を統括的に制御する。また、制御部103は、認識部101により特定のユーザの動作又は状態が検出された場合に、検出された当該特定のユーザの動作又は状態に関する情報を着目しているユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、かかる対象に応じて制御する。
(2)不適切な動作等に対応する部分を適切な動作等に置換可能であるもの
(3)不適切な動作等に対応する部分のみを隠蔽可能であるもの
(4)不適切な動作等に対応する部分のみを隠蔽できないもの
関係性判断部133は、例えば、CPU、ROM、RAM等により実現される。関係性判断部133は、着目しているユーザと、着目しているユーザとは異なる対象と、の間に、どのような関係性があるかを判断する処理部である。
情報修正部123は、例えば、CPU、ROM、RAM等により実現される。情報修正部123は、反映内容判断部121から出力された判断結果に基づいて、着目しているユーザによって実施された不適切な動作等に関する情報を修正する。
なお、以上の説明では、情報処理装置10がオンラインゲーム等のゲームアプリケーションを実行している場合を具体例として挙げて、詳細な説明を行ったが、以上説明したような情報の修正処理は、第1のユーザが視認している空間の映像を第2のユーザと共有する映像共有機能を提供するアプリケーションについても同様に適用することが可能である。
次に、図13を参照しながら、本実施形態に係る情報処理方法の流れの一例について、簡単に説明する。図13は、本実施形態に係る情報処理方法の流れの一例を示した流れ図である。
次に、本実施形態に係る情報処理装置及び情報処理方法のいくつかの変形例について、図14A〜図15Dを参照しながら簡単に説明する。図14A〜図14Cは、本実施形態に係るプラットフォームの変形例を模式的に示した説明図である。図15A〜図15Dは、本変形例に係る情報処理方法の流れの一例を示した説明図である。
次に、図16を参照しながら、本開示の実施形態に係る情報処理装置10のハードウェア構成について、詳細に説明する。図16は、本開示の実施形態に係る情報処理装置10のハードウェア構成を説明するためのブロック図である。
データを取得したり、外部接続機器929に各種データを提供したりする。
(1)
1又は複数のセンサによる検出結果を利用して認識部で認識される、ユーザの動作又は状態の少なくとも何れか一方を示す認識結果を取得する取得部と、
前記認識結果が特定のユーザの動作又は状態を示すと判断される場合に、当該特定のユーザの動作又は状態に関する情報を前記ユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、当該対象に応じて制御する制御部と、
を備える、情報処理装置。
(2)
前記制御部は、前記認識部による認識結果に応じて、認識された前記ユーザの動作又は状態に関する情報の内容を修正し、修正後の前記ユーザの動作又は状態に関する情報を、前記通知情報に反映させる、(1)に記載の情報処理装置。
(3)
前記制御部は、前記認識部による認識結果に応じて、前記ユーザの動作又は状態に関する情報の内容を抑制するか、前記ユーザの動作又は状態に関する情報の内容を他の内容へと置換するか、前記ユーザの動作又は状態に関する情報の内容の少なくとも一部を隠蔽するか、の何れかの修正を選択する、(1)又は(2)に記載の情報処理装置。
(4)
前記制御部は、前記ユーザと前記対象との間の動的な関係性に応じて、前記修正の度合いを変更する、(1)〜(3)の何れか1つに記載の情報処理装置。
(5)
前記制御部は、前記ユーザの動作又は状態に関する情報を送信する側のユーザにおける、前記反映度合いの設定情報と、前記ユーザの動作又は状態に関する情報を受信する側のユーザにおける、前記反映度合いの設定情報と、に応じて、前記修正の度合いを変更する、(1)〜(3)の何れか1つに記載の情報処理装置。
(6)
前記制御部は、前記ユーザの動作又は状態に関する情報を送信する側のユーザ、及び、前記ユーザの動作又は状態に関する情報を受信する側のユーザの間の動的な関係性と、前記ユーザの動作又は状態に関する情報を送信する側のユーザにおける、前記反映度合いの設定情報、及び、前記ユーザの動作又は状態に関する情報を受信する側のユーザにおける、前記反映度合いの設定情報と、の双方に応じて、前記修正の度合いを変更する、(1)〜(3)の何れか1つに記載の情報処理装置。
(7)
前記制御部は、第1のユーザから第2のユーザへの前記ユーザの動作又は状態に関する情報の前記反映度合いを表わすオブジェクトを、前記第1のユーザ及び前記第2のユーザが参照している表示画面に表示させる、(1)〜(6)の何れか1つに記載の情報処理装置。
(8)
前記特定のユーザの動作又は状態は、ユーザの身体的な動作、ユーザの表情、ユーザに関する生体情報、ユーザ又はユーザの周囲に存在するにおいもしくは音、振動の少なくとも何れかである、(1)〜(7)の何れか1つに記載の情報処理装置。
(9)
前記センサは、カメラ、モーションセンサ、気圧センサ、においセンサ、振動センサ、マイク、照度センサ、生体センサの少なくとも何れかである、(1)〜(8)の何れか1つに記載の情報処理装置。
(10)
前記対象は、複数のユーザ間で共有される仮想空間を提供するアプリケーションを利用している、他のユーザである、(1)〜(9)の何れか1つに記載の情報処理装置。
(11)
前記対象は、第1のユーザが視認している空間の映像を第2のユーザと共有する映像共有機能を提供するアプリケーションを利用している、他のユーザである、(1)〜(9)の何れか1つに記載の情報処理装置。
(12)
前記認識部、又は、前記制御部の少なくとも何れかは、複数のコンピュータに分散して実現される、(1)〜(11)の何れか1つに記載の情報処理装置。
(13)
1又は複数のセンサによる検出結果を利用して認識部で認識される、ユーザの動作又は状態の少なくとも何れか一方を示す認識結果を取得することと、
前記認識結果が特定のユーザの動作又は状態を示すと判断される場合に、当該特定のユーザの動作又は状態に関する情報を前記ユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、当該対象に応じて制御することと、
を含む、情報処理方法。
(14)
1又は複数のセンサによる検出結果を利用して、ユーザの動作又は状態の少なくとも何れか一方を認識する認識部による認識結果を取得可能なコンピュータに、前記認識部で認識される、ユーザの動作又は状態の少なくとも何れか一方を示す認識結
果を取得する取得機能と、
前記認識結果が特定のユーザの動作又は状態を示すと判断される場合に、当該特定のユーザの動作又は状態に関する情報を前記ユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、当該対象に応じて制御する制御機能と、
を実現させるためのプログラム。
10 情報処理装置
20 プラットフォーム
101 認識部
103 制御部
105 通信制御部
107 記憶部
121 反映内容判断部
123 情報修正部
125 アプリケーション実行部
131 情報種別判別部
133 関係性判断部
135 反映内容決定部
201 統括制御部
203 センサ出力取得部
205 通信制御部
207 出力制御部
209 記憶部
221 認識部
223 情報反映制御部
Claims (14)
- 1又は複数のセンサによる検出結果を利用して認識部で認識される、ユーザの動作又は状態の少なくとも何れか一方を示す認識結果を取得する取得部と、
前記認識結果が特定のユーザの動作又は状態を示すと判断される場合に、当該特定のユーザの動作又は状態に関する情報を前記ユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、当該対象に応じて制御する制御部と、
を備える、情報処理装置。 - 前記制御部は、前記認識部による認識結果に応じて、認識された前記ユーザの動作又は状態に関する情報の内容を修正し、修正後の前記ユーザの動作又は状態に関する情報を、前記通知情報に反映させる、請求項1に記載の情報処理装置。
- 前記制御部は、前記認識部による認識結果に応じて、前記ユーザの動作又は状態に関する情報の内容を抑制するか、前記ユーザの動作又は状態に関する情報の内容を他の内容へと置換するか、前記ユーザの動作又は状態に関する情報の内容の少なくとも一部を隠蔽するか、の何れかの修正を選択する、請求項2に記載の情報処理装置。
- 前記制御部は、前記ユーザと前記対象との間の動的な関係性に応じて、前記修正の度合いを変更する、請求項2に記載の情報処理装置。
- 前記制御部は、前記ユーザの動作又は状態に関する情報を送信する側のユーザにおける、前記反映度合いの設定情報と、前記ユーザの動作又は状態に関する情報を受信する側のユーザにおける、前記反映度合いの設定情報と、に応じて、前記修正の度合いを変更する、請求項2に記載の情報処理装置。
- 前記制御部は、前記ユーザの動作又は状態に関する情報を送信する側のユーザ、及び、前記ユーザの動作又は状態に関する情報を受信する側のユーザの間の動的な関係性と、前記ユーザの動作又は状態に関する情報を送信する側のユーザにおける、前記反映度合いの設定情報、及び、前記ユーザの動作又は状態に関する情報を受信する側のユーザにおける、前記反映度合いの設定情報と、の双方に応じて、前記修正の度合いを変更する、請求項2に記載の情報処理装置。
- 前記制御部は、第1のユーザから第2のユーザへの前記ユーザの動作又は状態に関する情報の前記反映度合いを表わすオブジェクトを、前記第1のユーザ及び前記第2のユーザが参照している表示画面に表示させる、請求項1に記載の情報処理装置。
- 前記特定のユーザの動作又は状態は、ユーザの身体的な動作、ユーザの表情、ユーザに関する生体情報、ユーザ又はユーザの周囲に存在するにおいもしくは音、振動の少なくとも何れかである、請求項1に記載の情報処理装置。
- 前記センサは、カメラ、モーションセンサ、気圧センサ、においセンサ、振動センサ、マイク、照度センサ、生体センサの少なくとも何れかである、請求項1に記載の情報処理装置。
- 前記対象は、複数のユーザ間で共有される仮想空間を提供するアプリケーションを利用している、他のユーザである、請求項1に記載の情報処理装置。
- 前記対象は、第1のユーザが視認している空間の映像を第2のユーザと共有する映像共有機能を提供するアプリケーションを利用している、他のユーザである、請求項1に記載の情報処理装置。
- 前記認識部、又は、前記制御部の少なくとも何れかは、複数のコンピュータに分散して実現される、請求項1 に記載の情報処理装置。
- 1又は複数のセンサによる検出結果を利用して認識部で認識される、ユーザの動作又は状態の少なくとも何れか一方を示す認識結果を取得することと、
前記認識結果が特定のユーザの動作又は状態を示すと判断される場合に、当該特定のユーザの動作又は状態に関する情報を前記ユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、当該対象に応じて制御することと、
を含む、情報処理方法。 - 1又は複数のセンサによる検出結果を利用して、ユーザの動作又は状態の少なくとも何れか一方を認識する認識部による認識結果を取得可能なコンピュータに、
前記認識部で認識される、ユーザの動作又は状態の少なくとも何れか一方を示す認識結果を取得する取得機能と、
前記認識結果が特定のユーザの動作又は状態を示すと判断される場合に、当該特定のユーザの動作又は状態に関する情報を前記ユーザとは異なる対象に対して伝える通知情報に、当該特定のユーザの動作又は状態に関する情報を反映させる程度である反映度合いを、当該対象に応じて制御する制御機能と、
を実現させるためのプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015131164 | 2015-06-30 | ||
JP2015131164 | 2015-06-30 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017526213A Division JP6702322B2 (ja) | 2015-06-30 | 2016-05-17 | 情報処理装置、情報処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020144901A true JP2020144901A (ja) | 2020-09-10 |
JP6992839B2 JP6992839B2 (ja) | 2022-01-13 |
Family
ID=57608198
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017526213A Active JP6702322B2 (ja) | 2015-06-30 | 2016-05-17 | 情報処理装置、情報処理方法及びプログラム |
JP2020082215A Active JP6992839B2 (ja) | 2015-06-30 | 2020-05-07 | 情報処理装置、情報処理方法及びプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017526213A Active JP6702322B2 (ja) | 2015-06-30 | 2016-05-17 | 情報処理装置、情報処理方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US10315111B2 (ja) |
JP (2) | JP6702322B2 (ja) |
CN (1) | CN107735776B (ja) |
WO (1) | WO2017002473A1 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2562025B (en) * | 2017-02-13 | 2020-01-01 | Sony Interactive Entertainment Inc | Simulation method and system |
US10994209B2 (en) * | 2017-11-27 | 2021-05-04 | Sony Interactive Entertainment America Llc | Shadow banning in social VR setting |
CN112639718B (zh) | 2018-05-04 | 2024-09-03 | 谷歌有限责任公司 | 自动化助手功能的免热词调配 |
EP3859494B1 (en) * | 2018-05-04 | 2023-12-27 | Google LLC | Adapting automated assistant based on detected mouth movement and/or gaze |
US10890969B2 (en) | 2018-05-04 | 2021-01-12 | Google Llc | Invoking automated assistant function(s) based on detected gesture and gaze |
KR20200019486A (ko) | 2018-08-14 | 2020-02-24 | 삼성전자주식회사 | 전자 장치, 그 제어 방법 및 전자 시스템 |
JP6721727B1 (ja) * | 2019-01-08 | 2020-07-15 | ソフトバンク株式会社 | 情報処理装置の制御プログラム、情報処理装置の制御方法、及び、情報処理装置 |
US11382510B2 (en) * | 2019-02-13 | 2022-07-12 | Sports Data Labs, Inc. | Biological data tracking system and method |
WO2020176106A1 (en) * | 2019-02-28 | 2020-09-03 | Facebook Technologies, Llc | Methods and apparatus for unsupervised machine learning for classification of gestures and estimation of applied forces |
US11511199B2 (en) * | 2019-02-28 | 2022-11-29 | Vsn Vision Inc. | Systems and methods for creating and sharing virtual and augmented experiences |
KR200489627Y1 (ko) * | 2019-06-11 | 2019-07-12 | 황영진 | 증강현실을 이용한 멀티플레이 교육 시스템 |
WO2020263672A1 (en) * | 2019-06-27 | 2020-12-30 | Raitonsa Dynamics Llc | Assisted expressions |
JP7275940B2 (ja) * | 2019-07-08 | 2023-05-18 | オムロン株式会社 | 制御プログラムおよび方法 |
JP6737942B1 (ja) * | 2019-09-30 | 2020-08-12 | 株式会社バーチャルキャスト | コンテンツ配信システム、コンテンツ配信方法、及びコンテンツ配信プログラム |
US20210263582A1 (en) * | 2020-02-26 | 2021-08-26 | Mursion, Inc. | Systems and methods for automated control of human inhabited characters |
JP7291106B2 (ja) * | 2020-07-16 | 2023-06-14 | 株式会社バーチャルキャスト | コンテンツ配信システム、コンテンツ配信方法、及びコンテンツ配信プログラム |
US12020704B2 (en) | 2022-01-19 | 2024-06-25 | Google Llc | Dynamic adaptation of parameter set used in hot word free adaptation of automated assistant |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06282627A (ja) * | 1993-03-25 | 1994-10-07 | A T R Tsushin Syst Kenkyusho:Kk | 視線アニメーション表示装置 |
JPH08256316A (ja) * | 1995-03-17 | 1996-10-01 | Toshiba Corp | 通信会議システム |
JP2005235142A (ja) * | 2004-01-21 | 2005-09-02 | Nomura Research Institute Ltd | ユーザ間親密度測定システム及びユーザ間親密度測定プログラム |
JP2009077380A (ja) * | 2007-09-24 | 2009-04-09 | Fuji Xerox Co Ltd | 画像修正方法、画像修正システム、及び画像修正プログラム |
JP2010206307A (ja) * | 2009-02-27 | 2010-09-16 | Toshiba Corp | 情報処理装置、情報処理方法、情報処理プログラム、およびネットワーク会議システム |
JP2010239583A (ja) * | 2009-03-31 | 2010-10-21 | Brother Ind Ltd | 通信端末装置、通信端末装置の通信制御方法、通信制御プログラム |
JP2012054897A (ja) * | 2010-09-03 | 2012-03-15 | Sharp Corp | 会議システム、情報処理装置、及び情報処理方法 |
JP2014021707A (ja) * | 2012-07-18 | 2014-02-03 | Nikon Corp | 情報入出力装置、及び情報入出力方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2003030547A1 (en) * | 2001-09-12 | 2003-04-10 | Opentv, Inc. | A method and apparatus for disconnected chat room lurking in an interactive television environment |
JP4645355B2 (ja) | 2005-08-11 | 2011-03-09 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
US8600731B2 (en) * | 2009-02-04 | 2013-12-03 | Microsoft Corporation | Universal translator |
JP2012043284A (ja) * | 2010-08-20 | 2012-03-01 | Nippon Telegr & Teleph Corp <Ntt> | プレゼンス情報管理装置、プレゼンス情報管理方法及びプレゼンス情報管理プログラム |
CN105898429B (zh) * | 2011-02-25 | 2019-05-28 | 英派尔科技开发有限公司 | 能够增强现实演出的方法、设备和增强现实设备 |
US10469416B2 (en) | 2012-09-06 | 2019-11-05 | Sony Corporation | Information processing device, information processing method, and program |
JP6428268B2 (ja) * | 2013-01-24 | 2018-11-28 | ソニー株式会社 | 画像表示装置及び画像表示方法、並びに画像表示システム |
US10203762B2 (en) * | 2014-03-11 | 2019-02-12 | Magic Leap, Inc. | Methods and systems for creating virtual and augmented reality |
-
2016
- 2016-05-17 JP JP2017526213A patent/JP6702322B2/ja active Active
- 2016-05-17 US US15/738,890 patent/US10315111B2/en active Active
- 2016-05-17 CN CN201680036410.9A patent/CN107735776B/zh active Active
- 2016-05-17 WO PCT/JP2016/064641 patent/WO2017002473A1/ja active Application Filing
-
2019
- 2019-05-06 US US16/404,306 patent/US10933321B2/en active Active
-
2020
- 2020-05-07 JP JP2020082215A patent/JP6992839B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06282627A (ja) * | 1993-03-25 | 1994-10-07 | A T R Tsushin Syst Kenkyusho:Kk | 視線アニメーション表示装置 |
JPH08256316A (ja) * | 1995-03-17 | 1996-10-01 | Toshiba Corp | 通信会議システム |
JP2005235142A (ja) * | 2004-01-21 | 2005-09-02 | Nomura Research Institute Ltd | ユーザ間親密度測定システム及びユーザ間親密度測定プログラム |
JP2009077380A (ja) * | 2007-09-24 | 2009-04-09 | Fuji Xerox Co Ltd | 画像修正方法、画像修正システム、及び画像修正プログラム |
JP2010206307A (ja) * | 2009-02-27 | 2010-09-16 | Toshiba Corp | 情報処理装置、情報処理方法、情報処理プログラム、およびネットワーク会議システム |
JP2010239583A (ja) * | 2009-03-31 | 2010-10-21 | Brother Ind Ltd | 通信端末装置、通信端末装置の通信制御方法、通信制御プログラム |
JP2012054897A (ja) * | 2010-09-03 | 2012-03-15 | Sharp Corp | 会議システム、情報処理装置、及び情報処理方法 |
JP2014021707A (ja) * | 2012-07-18 | 2014-02-03 | Nikon Corp | 情報入出力装置、及び情報入出力方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2017002473A1 (ja) | 2017-01-05 |
US10933321B2 (en) | 2021-03-02 |
US10315111B2 (en) | 2019-06-11 |
JPWO2017002473A1 (ja) | 2018-04-19 |
US20180185753A1 (en) | 2018-07-05 |
JP6992839B2 (ja) | 2022-01-13 |
JP6702322B2 (ja) | 2020-06-03 |
CN107735776B (zh) | 2021-07-13 |
US20190255439A1 (en) | 2019-08-22 |
CN107735776A (zh) | 2018-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6992839B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US11726324B2 (en) | Display system | |
KR102239604B1 (ko) | 응시 정보를 사용한 디바이스 제어 | |
US11100694B2 (en) | Virtual reality presentation of eye movement and eye contact | |
US20210074072A1 (en) | Multimodal inputs for computer-generated reality | |
JP7258766B2 (ja) | 割り込みに対するゲーム内反応 | |
US11785277B2 (en) | User interfaces for managing audio for media items | |
US20240104792A1 (en) | Operating Modes for Reducing Distraction in Extended Reality Environments | |
US11991263B2 (en) | Notification delivery in a virtual space based on a user being in a flow state | |
WO2023188904A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US12093603B2 (en) | Dynamically adjusting a personal boundary of an avatar in an XR environment | |
WO2022215725A1 (ja) | 情報処理装置、プログラム、及び、情報処理方法 | |
WO2023095531A1 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
US11775673B1 (en) | Using physiological cues to measure data sensitivity and implement security on a user device | |
EP4335531A1 (en) | Systems and methods of protecting personal space in multi-user virtual environment | |
CN117280305A (zh) | 基于互动的用户建议 | |
JPWO2018179972A1 (ja) | 情報処理装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200605 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200605 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210428 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210525 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210721 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211122 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6992839 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |