JP2021177277A - プログラム、情報処理方法、情報処理装置、及び情報処理システム - Google Patents
プログラム、情報処理方法、情報処理装置、及び情報処理システム Download PDFInfo
- Publication number
- JP2021177277A JP2021177277A JP2020081843A JP2020081843A JP2021177277A JP 2021177277 A JP2021177277 A JP 2021177277A JP 2020081843 A JP2020081843 A JP 2020081843A JP 2020081843 A JP2020081843 A JP 2020081843A JP 2021177277 A JP2021177277 A JP 2021177277A
- Authority
- JP
- Japan
- Prior art keywords
- movement
- character
- information processing
- user
- controlling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 64
- 238000003672 processing method Methods 0.000 title claims abstract description 4
- 230000033001 locomotion Effects 0.000 claims abstract description 132
- 238000001514 detection method Methods 0.000 claims abstract description 47
- 230000004424 eye movement Effects 0.000 claims abstract description 27
- 238000004891 communication Methods 0.000 claims abstract description 21
- 238000000034 method Methods 0.000 claims abstract description 19
- 230000008569 process Effects 0.000 claims abstract description 10
- 210000003128 head Anatomy 0.000 claims description 43
- 238000012545 processing Methods 0.000 claims description 39
- 238000002570 electrooculography Methods 0.000 claims description 38
- 230000005540 biological transmission Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 14
- 230000009471 action Effects 0.000 description 12
- 230000008921 facial expression Effects 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 5
- 230000004397 blinking Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000004886 head movement Effects 0.000 description 3
- 230000008676 import Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 206010034719 Personality change Diseases 0.000 description 1
- 208000003443 Unconsciousness Diseases 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1103—Detecting eye twinkling
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1113—Local tracking of patients, e.g. in a hospital or private home
- A61B5/1114—Tracking parts of the body
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/25—Bioelectric electrodes therefor
- A61B5/279—Bioelectric electrodes therefor specially adapted for particular uses
- A61B5/297—Bioelectric electrodes therefor specially adapted for particular uses for electrooculography [EOG]: for electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/744—Displaying an avatar, e.g. an animated cartoon character
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/55—Controlling game characters or game objects based on the game progress
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2503/00—Evaluating a particular growth phase or type of persons or animals
- A61B2503/12—Healthy persons not otherwise provided for, e.g. subjects of a marketing survey
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0209—Special features of electrodes classified in A61B5/24, A61B5/25, A61B5/283, A61B5/291, A61B5/296, A61B5/053
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0219—Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
- H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Optics & Photonics (AREA)
- Psychiatry (AREA)
- Ophthalmology & Optometry (AREA)
- Physiology (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Dentistry (AREA)
- Child & Adolescent Psychology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Dermatology (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
実施例では、加速度センサ及び角速度センサ、生体電極を搭載するウエアラブル端末の対象として、アイウエアを例に挙げるが、これに限られない。図1は、実施例における情報処理システム1の一例を示す図である。図1に示す情報処理システム1は、情報処理装置10と、アイウエア30とを含み、情報処理装置10と、アイウエア30とは、ネットワークを介して接続され、データ通信可能になっている。
図2は、実施例における情報処理装置10のハードウェア構成を示す概略構成図である。情報処理装置10の典型的な一例は、スマートフォンなどの携帯端末であるが、この他、ネットワークに無線又は有線接続可能な携帯端末、あるいはタブレット型端末のようなタッチパネルを搭載した電子機器など、ネットワークを使って通信しながらデータ処理しつつ画面表示可能な汎用機器なども実施形態における情報処理装置10に該当しうる。
図3は、実施例における処理装置20の構成の一例を示すブロック図である。図3に示すように、処理装置20は、処理部202、送信部204、6軸センサ206、電源部208、及び各生体電極32、34、36を有する。また、各生体電極32、34、36は、例えば増幅部を介して電線を用いて処理部202に接続される。
次に、情報処理装置10の構成について説明する。図4は、実施例における情報処理装置10の構成の一例を示す図である。情報処理装置10は、記憶部302、通信部304、及び制御部306を有する。
次に、実施例におけるアプリケーションAの画面例について図5〜10を用いて説明する。図5は、実施例におけるアプリケーションAの表示画面の例1を示す図である。図5に示す画面D10には、例えば、左が顔アクション(例えば5種類)の選択ボタンB10、右が体アクション(例えば27種類)の選択リボルバーB12が表示される。この画面における操作を、操作検知部320が検知することで、キャラクター制御部318は、キャラクターC10の顔の基本表情(基本動作)を決定したり、キャラクターC10の胴体に関する基本動作を決定したりする。
次に、実施例における情報処理システム1の各処理について説明する。図11は、実施例におけるアプリケーションAに関する処理の一例を示すシーケンス図である。
20 処理装置
30 アイウエア
302 記憶部
304 通信部
306 制御部
312 取得部
314 検出部
316 表示制御部
318 キャラクター制御部
320 操作検知部
Claims (13)
- 情報処理装置に、
ユーザの頭部に装着された他の装置から眼電位信号を少なくとも取得し、
前記眼電位信号に基づいてユーザの眼の動きを少なくとも検出し、
画面に表示中の画像にキャラクターを重畳して表示制御し、
前記眼の動きの検出結果に基づいて、前記キャラクターの動作を制御する、処理を実行させる、プログラム。 - 前記取得することは、
前記他の装置に搭載される加速度センサ及び/又は角速度センサによりセンシングされたセンサ信号を取得することを含み、
前記検出することは、
前記センサ信号に基づいて、前記ユーザの頭の動きを検出することを含み、
前記動作を制御することは、
前記眼の動き及び前記頭の動きの検出結果に基づいて、前記キャラクターの動作を制御することを含む、請求項1に記載のプログラム。 - 前記表示制御することは、
前記キャラクターの胴体に関する基本動作を選択可能なUI部品を、前記画面に表示制御することを含み、
前記動作を制御することは、
前記UI部品を用いて選択された前記キャラクターの胴体に関する基本動作と、前記検出結果に基づく前記キャラクターの頭部に関する動作とに基づいて、前記キャラクターの動作を制御することを含む、請求項1又は2に記載のプログラム。 - 前記表示制御することは、
撮影装置により撮影中の画像に前記キャラクターを重畳して表示制御することを含む、請求項1乃至3のいずれか一項に記載のプログラム。 - 前記検出することは、
前記眼電位信号に基づく瞬目、又は視線移動を検出することを含み、
前記動作を制御することは、
前記瞬目に関連付けられた第1動作パラメータ、又は前記視線移動に関連付けられた第2動作パラメータに基づいて前記キャラクターの動作を制御することを含む、請求項1乃至4のいずれか一項に記載のプログラム。 - 前記検出することは、
前記眼電位信号に基づく瞬目の強度、又は視線移動の速さを検出することを含み、
前記動作を制御することは、
前記瞬目の強度に関連付けられた第3動作パラメータ、又は前記視線移動の速さに関連付けられた第4動作パラメータに基づいて前記キャラクターの動作を制御することを含む、請求項1乃至5のいずれか一項に記載のプログラム。 - 前記動作を制御することは、
前記検出結果に含まれる前記頭の動きに応じて、前記画面に対する奥行き方向の前記キャラクターの位置を変更することを含む、請求項2に記載のプログラム。 - 前記キャラクターの動作は、自動で動作する能動動作を含み、
前記動作を制御することは、
前記検出結果に基づいて、前記能動動作に関するパラメータの値を決定することを含む、請求項1乃至7のいずれか一項に記載のプログラム。 - 前記検出することは、
前記眼電位信号に基づき検出される瞬目を用いて、ユーザの集中度合、又は落ち着き度合を検出することを含み、
前記動作を制御することは、
前記検出結果に含まれる前記集中度合又は前記落ち着き度合に基づいて、前記キャラクターの動作を制御することを含む、請求項1乃至8のいずれか一項に記載のプログラム。 - 前記情報処理装置は携帯端末であり、前記他の装置はアイウエアである、請求項1乃至9のいずれか一項に記載のプログラム。
- 情報処理装置が、
ユーザの頭部に装着された他の装置から眼電位信号を少なくとも取得し、
前記眼電位信号に基づいてユーザの眼の動きを少なくとも検出し、
画面に表示中の画像にキャラクターを重畳して表示制御し、
前記眼の動きの検出結果に基づいて、前記キャラクターの動作を制御する、処理を実行する、情報処理方法。 - 1又は複数のプロセッサを含む情報処理装置であって、
前記1又は複数のプロセッサが、
ユーザの頭部に装着された他の装置から眼電位信号を少なくとも取得し、
前記眼電位信号に基づいてユーザの眼の動きを少なくとも検出し、
画面に表示中の画像にキャラクターを重畳して表示制御し、
前記眼の動きの検出結果に基づいて、前記キャラクターの動作を制御する、処理を実行する、情報処理装置。 - データ通信可能に接続されるアイウエアと情報処理装置とを含む情報処理システムであって、
前記アイウエアは、
複数の生体電極と、
前記複数の生体電極から取得される眼電位信号を前記情報処理装置に送信する送信部と、を備え、
前記情報処理装置は、
前記アイウエアから前記眼電位信号を少なくとも受信する通信部と、
前記眼電位信号に基づいてユーザの眼の動きを少なくとも検出し、画面に表示中の画像にキャラクターを重畳して表示制御し、前記眼の動きの検出結果に基づいて、前記キャラクターの動作を制御する制御部と、を備える、情報処理システム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020081843A JP7529242B2 (ja) | 2020-05-07 | 2020-05-07 | プログラム、情報処理方法、情報処理装置、及び情報処理システム |
TW110115907A TW202142296A (zh) | 2020-05-07 | 2021-05-03 | 程式、資訊處理方法、資訊處理裝置、及資訊處理系統 |
US17/313,423 US20210349533A1 (en) | 2020-05-07 | 2021-05-06 | Information processing method, information processing device, and information processing system |
CN202110497110.3A CN113617023A (zh) | 2020-05-07 | 2021-05-07 | 程序、信息处理方法、信息处理装置以及信息处理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020081843A JP7529242B2 (ja) | 2020-05-07 | 2020-05-07 | プログラム、情報処理方法、情報処理装置、及び情報処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021177277A true JP2021177277A (ja) | 2021-11-11 |
JP7529242B2 JP7529242B2 (ja) | 2024-08-06 |
Family
ID=78377968
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020081843A Active JP7529242B2 (ja) | 2020-05-07 | 2020-05-07 | プログラム、情報処理方法、情報処理装置、及び情報処理システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20210349533A1 (ja) |
JP (1) | JP7529242B2 (ja) |
CN (1) | CN113617023A (ja) |
TW (1) | TW202142296A (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016126500A (ja) * | 2014-12-26 | 2016-07-11 | Kddi株式会社 | ウェアラブル端末装置およびプログラム |
JP2017070602A (ja) * | 2015-10-08 | 2017-04-13 | 株式会社ジェイアイエヌ | 情報処理方法、情報処理装置及びプログラム |
JP2018163617A (ja) * | 2017-03-27 | 2018-10-18 | 株式会社ローレル・コード | 情報処理装置を用いた仮想現実システムにおける視線認識を用いたコンテンツ管理方法およびプログラムと仮想現実システム装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8856691B2 (en) * | 2009-05-29 | 2014-10-07 | Microsoft Corporation | Gesture tool |
-
2020
- 2020-05-07 JP JP2020081843A patent/JP7529242B2/ja active Active
-
2021
- 2021-05-03 TW TW110115907A patent/TW202142296A/zh unknown
- 2021-05-06 US US17/313,423 patent/US20210349533A1/en not_active Abandoned
- 2021-05-07 CN CN202110497110.3A patent/CN113617023A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016126500A (ja) * | 2014-12-26 | 2016-07-11 | Kddi株式会社 | ウェアラブル端末装置およびプログラム |
JP2017070602A (ja) * | 2015-10-08 | 2017-04-13 | 株式会社ジェイアイエヌ | 情報処理方法、情報処理装置及びプログラム |
JP2018163617A (ja) * | 2017-03-27 | 2018-10-18 | 株式会社ローレル・コード | 情報処理装置を用いた仮想現実システムにおける視線認識を用いたコンテンツ管理方法およびプログラムと仮想現実システム装置 |
Non-Patent Citations (1)
Title |
---|
"まばたき・視線でデバイス操作、「JINS MEME」がアプリ開発プラットフォーム", ケータイ WATCH [ONLINE], JPN6023040248, 15 December 2016 (2016-12-15), ISSN: 0005162801 * |
Also Published As
Publication number | Publication date |
---|---|
CN113617023A (zh) | 2021-11-09 |
JP7529242B2 (ja) | 2024-08-06 |
US20210349533A1 (en) | 2021-11-11 |
TW202142296A (zh) | 2021-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10620699B2 (en) | Head mounted display, mobile information terminal, image processing apparatus, display control program, display control method, and display system | |
US10416835B2 (en) | Three-dimensional user interface for head-mountable display | |
EP3341818B1 (en) | Method and apparatus for displaying content | |
KR101920983B1 (ko) | 헤드 마운트형 디스플레이 상에서의 정보의 디스플레이 | |
KR20220070292A (ko) | 자동화된 안경류 디바이스 공유 시스템 | |
KR20120023247A (ko) | 3d 객체 표시가 가능한 휴대용 장치 및 그 방법 | |
KR102110208B1 (ko) | 안경형 단말기 및 이의 제어방법 | |
US20230336865A1 (en) | Device, methods, and graphical user interfaces for capturing and displaying media | |
US20230384907A1 (en) | Methods for relative manipulation of a three-dimensional environment | |
EP3109734A1 (en) | Three-dimensional user interface for head-mountable display | |
US20230359422A1 (en) | Techniques for using in-air hand gestures detected via a wrist-wearable device to operate a camera of another device, and wearable devices and systems for performing those techniques | |
EP3702008A1 (en) | Displaying a viewport of a virtual space | |
JP7529242B2 (ja) | プログラム、情報処理方法、情報処理装置、及び情報処理システム | |
US11768546B1 (en) | Method and device for positional/rotational information of a finger-wearable device | |
US20230260235A1 (en) | Information processing apparatus, information processing method, and information processing system | |
WO2021220407A1 (ja) | ヘッドマウントディスプレイ装置および表示制御方法 | |
US20240104859A1 (en) | User interfaces for managing live communication sessions | |
US20240257486A1 (en) | Techniques for interacting with virtual avatars and/or user representations | |
US20240281108A1 (en) | Methods for displaying a user interface object in a three-dimensional environment | |
US20240104819A1 (en) | Representations of participants in real-time communication sessions | |
US20240265796A1 (en) | Devices, methods, and graphical user interfaces for device position adjustment | |
US20240320930A1 (en) | Devices, methods, and graphical user interfaces for capturing media with a camera application | |
US20240103636A1 (en) | Methods for manipulating a virtual object | |
US20240289007A1 (en) | Devices, methods, and graphical user interfaces for adjusting device settings | |
KR20120016386A (ko) | 3d 객체 표시가 가능한 휴대용 장치 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230921 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231128 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20240209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240422 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240603 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240705 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240718 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7529242 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |