JP2022108093A - Approach avoidance system and galvanic vestibular stimulation device - Google Patents

Approach avoidance system and galvanic vestibular stimulation device Download PDF

Info

Publication number
JP2022108093A
JP2022108093A JP2021002933A JP2021002933A JP2022108093A JP 2022108093 A JP2022108093 A JP 2022108093A JP 2021002933 A JP2021002933 A JP 2021002933A JP 2021002933 A JP2021002933 A JP 2021002933A JP 2022108093 A JP2022108093 A JP 2022108093A
Authority
JP
Japan
Prior art keywords
unit
avoidance system
moving body
approach
pair
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021002933A
Other languages
Japanese (ja)
Inventor
信行 久保井
Nobuyuki Kuboi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Semiconductor Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Semiconductor Solutions Corp filed Critical Sony Semiconductor Solutions Corp
Priority to JP2021002933A priority Critical patent/JP2022108093A/en
Priority to PCT/JP2021/046900 priority patent/WO2022153792A1/en
Publication of JP2022108093A publication Critical patent/JP2022108093A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator

Abstract

To provide a technique which allows a user to avoid approach to a moving body around him or her.SOLUTION: An approach avoidance system includes: an imaging unit which generates images of a peripheral environment surrounding an object at time intervals of dT; a moving body analysis unit which calculates distances L between the object and moving bodies existing in the peripheral environment and relative speed vectors V of the moving bodies relative to the object and uses the distances L and the relative speed vectors V to calculate times T required for the object and the moving bodies to approach each other within a prescribed distance; a speed calculation unit which extracts a moving body for which the calculated time T is equal to or shorter than a determination time Tj, and calculates a speed dV indicating an extent and direction of an action which the object should take so that a distance Lj between the object and the extracted moving body becomes a prescribed distance after the determination time Tj; an electrode unit for applying galvanic vestibular stimulation to the object; and a current control unit which causes a current with a prescribed current value to flow in the electrode unit to apply the galvanic vestibular stimulation to the object in order to prompt the object to take the action at the speed dV.SELECTED DRAWING: Figure 1

Description

本技術は、接近回避システム及び前庭電気刺激装置に関する。より詳細には、本技術は、対象と特定の動体との接近を回避することが可能な接近回避システム、及び当該接近回避システムを構成する前庭電気刺激装置に関する。 The present technology relates to approach avoidance systems and vestibular electrical stimulation devices. More specifically, the present technology relates to an approach avoidance system capable of avoiding an approach between a target and a specific moving body, and a vestibular electrical stimulator that constitutes the approach avoidance system.

近年、拡張現実(AR)の技術を利用したスマートフォン用のコンテンツが種々提供されている。当該コンテンツとしては、例えば、歩行中に視聴することで没入感のある映像を楽しめるスマートフォン専用ミュージックビデオ、及び、歩行しながら操作することで現実世界との融合を楽しめるスマートフォン専用ゲームなどが挙げられる。このようなコンテンツの普及に伴って、歩行中にスマートフォンを操作するユーザが増加してきている。中には、スマートフォンの画面に没頭するあまり、周囲の物体と衝突又は接触する事故に遭遇するユーザが存在する。そのため、歩行中のスマートフォンの使用は、その危険性を多くの人が認識しており、社会問題となっている。 In recent years, various contents for smartphones using augmented reality (AR) technology have been provided. Examples of such content include smartphone-only music videos that allow you to enjoy immersive images while walking, and smartphone-only games that allow you to enjoy fusion with the real world by operating while walking. With the spread of such content, the number of users who operate smartphones while walking is increasing. Some users are so immersed in the screen of their smartphone that they collide with or come into contact with surrounding objects. Therefore, many people are aware of the dangers of using smartphones while walking, and this has become a social problem.

また、近年、新型コロナウイルス感染症(COVID-19)の感染拡大が社会問題となっている。感染拡大防止対策として、密集及び密接の回避が強く推奨されており、周囲の人との間に物理的な距離を確保して行動することが求められている。 In recent years, the spread of the novel coronavirus infection (COVID-19) has become a social problem. As a measure to prevent the spread of infection, it is strongly recommended to avoid crowds and close contact, and it is required to maintain a physical distance from people around you.

これら2つの社会問題への対策として、周囲の動体との接近を自動的に回避するように人を誘導することが可能な技術が有用であると考えられる。従来、人の動作を誘導可能な技術はいくつか提案されている。例えば、下記特許文献1~3に開示されている技術が挙げられる。下記特許文献1には、前庭感覚への電気刺激を利用して、バランス動作により方向を変化させる乗物を運転する運転者を誘導することができ、例えば、障害物を回避するように運転者を誘導することができる運転者支援装置が開示されている。下記特許文献2には、前庭感覚への電気刺激を利用して人間の身体動作を誘導することができ、例えば、移動物体に対する危険を回避する方向を提示し、意図する場所へ誘導することができる身体誘導装置が開示されている。下記特許文献3には、前庭感覚への刺激により、言語による意思疎通の困難な動物などを誘導することができる動物誘導システムが開示されている。 As a countermeasure to these two social problems, it is considered that a technology capable of guiding people to automatically avoid approaching surrounding moving bodies is useful. Conventionally, several technologies have been proposed that are capable of guiding human motion. For example, there are techniques disclosed in Patent Documents 1 to 3 below. In Patent Document 1 below, electrical stimulation to the vestibular sensation can be used to guide a driver who drives a vehicle that changes direction by a balance operation. A driver assistance device that can be guided is disclosed. Patent Document 2 below discloses that electrical stimulation of the vestibular sensation can be used to induce human body movements. Disclosed is a body guidance device that can. Patent Literature 3 listed below discloses an animal guidance system that can guide an animal that has difficulty in verbal communication by stimulating the vestibular sensation.

特開2006-298012号公報JP 2006-298012 A 特開2004-254790号公報JP-A-2004-254790 特開2006-296221号公報JP 2006-296221 A

しかしながら、上記特許文献1に開示された技術は、1つの動体に対応した衝突回避技術であり、且つ、自転車及び自動二輪車のようなバランス動作により方向を変化させる乗り物を運転する人を対象としている。このため、上記特許文献1に開示された技術は、複数の動体を回避することが困難である上、対象となる人が限定的である。上記特許文献2に開示された技術は、周囲の動体に関する情報の取得及び当該情報に基づく身体動作の誘導を、リアルタイムで行うことが困難である。上記特許文献3に開示された技術においては、動物の移動方向は、指示者である人間によって目視で決定される。このため、上記特許文献3に開示された技術は、周囲の動体との接近を自動的に回避するように人を誘導することが可能な技術とはいえない。 However, the technique disclosed in Patent Document 1 is a collision avoidance technique for one moving object, and is intended for people who drive vehicles such as bicycles and motorcycles that change direction by balancing. . For this reason, the technology disclosed in Patent Document 1 makes it difficult to avoid a plurality of moving objects, and the target person is limited. With the technology disclosed in Patent Document 2, it is difficult to acquire information about surrounding moving bodies and guide body movements based on the information in real time. In the technique disclosed in Patent Document 3, the movement direction of the animal is visually determined by a person who is an instructor. Therefore, the technique disclosed in Patent Document 3 cannot be said to be a technique capable of guiding a person to automatically avoid approaching surrounding moving objects.

そこで、本技術は、周囲に存在する動体との接近を回避することが可能な技術を提供することを主目的とする。 Therefore, the main object of the present technology is to provide a technology capable of avoiding approaching a moving object existing in the surroundings.

本発明者は、特定の構成を有する接近回避システムによって上記課題を解決できることを見出し、本技術を完成させるに至った。 The inventors of the present invention have found that the above problems can be solved by an approach avoidance system having a specific configuration, and have completed the present technology.

すなわち、本技術は、
対象の周囲環境の画像を時間間隔dTで生成するイメージング部と、
前記対象と前記周囲環境に存在する動体との間の距離L、及び、前記対象に対する前記動体の相対速度ベクトルVを算出し、前記距離L及び前記相対速度ベクトルVを用いて前記対象と前記動体とが所定の距離まで接近するのに要する時間Tを算出する動体解析部と、
前記時間Tが判定時間Tj以内である前記動体を抽出し、前記判定時間Tj後において前記対象と前記抽出された動体との間の距離Ljが所定の距離となるように、前記対象が取るべき動作の大きさ及び方向を表す速度dVを算出する速度算出部と、
前庭電気刺激を前記対象に与えるための電極部と、
前記電極部に所定の電流値の電流を流して、前記対象が前記速度dVで動作することを誘導すべく前記前庭電気刺激を前記対象に与える電流制御部と、を含む、接近回避システムを提供する。
前記接近回避システムが、前記電極部に電流値Iの電流が流れたときに誘導される動作の速度dVの情報を保持する電流値データベースを検索して、所定の速度dVに対応する電流値Iを取得する電流値取得部をさらに含んでもよく、
前記電流制御部が前記電極部に前記電流値Iの電流を流してもよい。
前記接近回避システムが、前記電流制御部が前記前庭電気刺激を前記対象に与えた後の前記対象と前記抽出された動体との間の距離Lrを確認する結果確認部をさらに含んでもよく、
前記結果確認部は、前記距離Lrが所定の条件を満たす場合に前記電流値データベースを更新してもよい。
前記イメージング部が、TOFイメージンセンサ及び/又はミリ波イメージセンサを含んでもよい。
前記イメージング部が、可視光イメージセンサをさらに含んでもよい。
前記接近回避システムが、一対の前庭電気刺激装置を含んでもよく、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記速度算出部、前記電極部、及び前記電流制御部を含んでもよい。
前記接近回避システムが、一対の前庭電気刺激装置と、モバイル端末と、を含んでもよく、
前記一対の前庭電気刺激装置と、前記モバイル端末と、が通信可能に接続されてよく、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記電極部、及び前記電流制御部を含んでもよく、
前記モバイル端末が、前記速度算出部を含んでもよい。
前記接近回避システムが、一対の前庭電気刺激装置と、情報処理装置と、を含んでもよく、
前記一対の前庭電気刺激装置と、前記情報処理装置と、が通信可能に接続されてよく、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記電極部、及び前記電流制御部を含んでもよく、
前記情報処理装置が、前記速度算出部を含んでもよい。
前記接近回避システムが、モバイル端末を含んでもよく、
前記モバイル端末が、前記イメージング部を含んでもよい。
前記接近回避システムが、モバイル端末を含んでもよく、
前記モバイル端末が、前記イメージング部、前記動体解析部、前記速度算出部、及び前記電流値取得部を含んでもよい。
前記接近回避システムが、音声を出力する音声出力部をさらに含んでもよい。
前記接近回避システムが、映像を表示する映像表示部をさらに含んでもよい。
前記接近回避システムが、前記対象の現在の位置情報を取得する位置情報取得部と、
地図情報と前記位置情報とに基づいて前記対象が目的地に到達するまでの経路を選定し、前記地図情報から前記経路に関する情報を取得する経路選定部と、をさらに含んでもよく、
前記速度算出部が、前記速度dVを算出する際に前記経路に関する情報を用いてもよい。
前記接近回避システムが、前記対象の視界を特定可能な視界情報を取得する視界情報取得部と、
前記視界情報を表示する視界表示部と、
前記視界表示部をモニタする前記対象以外の第三者によって決定される電流値を、前記所定の電流値として設定する電流値設定部と、を含んでもよい。
前記接近回避システムが、一対の前庭電気刺激装置を複数含んでもよく、
前記複数存在する一対の前庭電気刺激装置同士が、通信可能に接続されてよく、
複数の前記対象のそれぞれが、前記一対の前庭電気刺激装置を装着してよく、
前記一対の前庭電気刺激装置が、他の一対の前庭電気刺激装置に自身の前庭電気刺激装置を認識させる認識信号を生成する認識信号生成部と、前記認識信号を送受信する送受信部と、を含んでよく、
前記速度算出部が、前記送受信部が受信した前記他の一対の前庭電気刺激装置からの前記認識信号に基づいて前記速度dVを算出してもよい。
前記接近回避システムが、
前記他の一対の前庭電気刺激装置からの前記認識信号に基づいて、前記他の一対の前庭電気刺激装置を装着している他の対象の行動履歴情報を保持する行動履歴データベースから、前記行動履歴情報を取得する情報取得部と、
取得された前記行動履歴情報に基づいて、前記他の対象の行動を予測して予測速度ベクトルVpを算出する行動予測部と、を含んでもよく、
前記速度算出部が、前記他の対象の前記予測速度ベクトルVpを用いて前記速度dVを算出してもよい。
前記接近回避システムにおいて、前記対象が人であってもよく、前記周囲環境に存在する動体も人であってもよく
前記接近回避システムが、人同士の間に所定の距離を確保して人の密集及び密接を回避するために用いられるものであってもよい。
That is, this technology is
an imaging unit that generates images of the subject's surroundings at time intervals dT;
calculating a distance L between the target and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body with respect to the target; and using the distance L and the relative velocity vector V, the target and the moving body A moving body analysis unit that calculates the time T required for the to approach a predetermined distance,
The moving body whose time T is within the determination time Tj is extracted, and the distance Lj between the target and the extracted moving body after the determination time Tj is a predetermined distance. a speed calculator that calculates a speed dV representing the magnitude and direction of motion;
an electrode unit for providing vestibular electrical stimulation to the subject;
a current control unit that supplies the object with the vestibular electrical stimulation to induce the object to move at the speed dV by applying a current of a predetermined current value to the electrode unit. do.
The approach avoidance system searches a current value database that holds information on the speed dV of the motion induced when the current of the current value I flows through the electrode unit, and searches the current value database that holds the information on the speed dV of the movement induced when the current of the current value I flows through the electrode unit. It may further include a current value acquisition unit that acquires
The current control section may supply the current of the current value I to the electrode section.
The approach avoidance system may further include a result confirmation unit for confirming the distance Lr between the target and the extracted moving body after the current control unit has applied the vestibular electrical stimulation to the target,
The result confirmation unit may update the current value database when the distance Lr satisfies a predetermined condition.
The imaging unit may include a TOF image sensor and/or a millimeter wave image sensor.
The imaging unit may further include a visible light image sensor.
the access avoidance system may include a pair of vestibular electrical stimulators;
Each of the pair of vestibular electrical stimulation devices may include the imaging section, the moving body analysis section, the velocity calculation section, the electrode section, and the current control section.
The approach avoidance system may include a pair of vestibular electrical stimulators and a mobile terminal;
The pair of vestibular electrical stimulation devices and the mobile terminal may be communicably connected,
Each of the pair of vestibular electrical stimulation devices may include the imaging unit, the moving body analysis unit, the electrode unit, and the current control unit,
The mobile terminal may include the speed calculator.
The approach avoidance system may include a pair of vestibular electrical stimulators and an information processing device;
The pair of vestibular electrical stimulation devices and the information processing device may be communicably connected,
Each of the pair of vestibular electrical stimulation devices may include the imaging unit, the moving body analysis unit, the electrode unit, and the current control unit,
The information processing device may include the speed calculator.
The approach avoidance system may include a mobile terminal,
The mobile terminal may include the imaging unit.
The approach avoidance system may include a mobile terminal,
The mobile terminal may include the imaging unit, the moving object analysis unit, the velocity calculation unit, and the current value acquisition unit.
The approach avoidance system may further include an audio output unit that outputs audio.
The approach avoidance system may further include an image display unit that displays an image.
a location information acquisition unit for the approach avoidance system to acquire current location information of the target;
a route selection unit that selects a route for the target to reach the destination based on the map information and the position information, and acquires information about the route from the map information;
The speed calculator may use information about the route when calculating the speed dV.
a visibility information acquisition unit for acquiring visibility information that allows the approach avoidance system to specify the visibility of the target;
a visibility display unit that displays the visibility information;
A current value setting unit that sets a current value determined by a third party other than the target who monitors the field of view display unit as the predetermined current value.
The approach avoidance system may include a plurality of pairs of vestibular electrical stimulators,
The plurality of pairs of vestibular electrical stimulation devices may be communicatively connected to each other,
each of the plurality of subjects may wear the pair of vestibular electrical stimulation devices;
The pair of vestibular electrical stimulation devices includes a recognition signal generation unit that generates a recognition signal that causes another pair of vestibular electrical stimulation devices to recognize its own vestibular electrical stimulation device, and a transmission and reception unit that transmits and receives the recognition signal. well,
The speed calculation unit may calculate the speed dV based on the recognition signals from the other pair of vestibular electrical stimulation devices received by the transmission/reception unit.
The approach avoidance system
Based on the recognition signals from the other pair of vestibular electrical stimulation devices, the action history is retrieved from an action history database holding the behavior history information of another subject wearing the other pair of vestibular electrical stimulation devices. an information acquisition unit that acquires information;
a behavior prediction unit that predicts the behavior of the other target and calculates a predicted velocity vector Vp based on the acquired behavior history information;
The speed calculator may calculate the speed dV using the predicted speed vector Vp of the other target.
In the approach avoidance system, the object may be a person, and the moving object existing in the surrounding environment may also be a person. It may be used to avoid crowding and close contact.

また、本技術は、
一対の前庭電気刺激装置であって、
前記一対の前庭電気刺激装置のそれぞれが、
対象の周囲環境の画像を時間間隔dTで生成するイメージング部と、
前記対象と前記周囲環境に存在する動体との間の距離L、及び、前記対象に対する前記動体の相対速度ベクトルVを算出し、前記距離L及び前記相対速度ベクトルVを用いて前記対象と前記動体とが所定の距離まで接近するのに要する時間Tを算出する動体解析部と、
前記時間Tが判定時間Tj以内である前記動体を抽出し、前記判定時間Tj後において前記対象と前記抽出された動体との間の距離Ljが所定の距離となるように、前記対象が取るべき動作の大きさ及び方向を表す速度dVを算出する速度算出部と、
前庭電気刺激を前記対象に与えるための電極部と、
前記電極部に所定の電流値の電流を流して、前記対象が前記速度dVで動作することを誘導すべく前庭電気刺激を前記対象に与える電流制御部と、を含む、前記一対の前庭電気刺激装置も提供する。
前記一対の前庭電気刺激装置が、一対の耳掛け型のウェアラブル装置であってもよく、
前記一対の前庭電気刺激装置のそれぞれが、1つ以上のイメージセンサを含む前記イメージング部と、3つの電極を含む前記電極部と、を含んでもよい。
In addition, this technology
A pair of vestibular electrical stimulators, comprising:
each of the pair of vestibular electrical stimulation devices comprising:
an imaging unit that generates images of the subject's surroundings at time intervals dT;
calculating a distance L between the target and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body with respect to the target; and using the distance L and the relative velocity vector V, the target and the moving body A moving body analysis unit that calculates the time T required for the to approach a predetermined distance,
The moving body whose time T is within the determination time Tj is extracted, and the distance Lj between the target and the extracted moving body after the determination time Tj is a predetermined distance. a speed calculator that calculates a speed dV representing the magnitude and direction of motion;
an electrode unit for providing vestibular electrical stimulation to the subject;
a current control unit that applies a current of a predetermined current value to the electrode unit and provides vestibular electrical stimulation to the subject to induce the subject to move at the speed dV. Equipment is also provided.
The pair of vestibular electrical stimulation devices may be a pair of ear-hung wearable devices,
Each of the pair of vestibular electrical stimulation devices may include the imaging section including one or more image sensors and the electrode section including three electrodes.

なお、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。 Note that the effects described in this specification are merely examples and are not limited, and other effects may be provided. In other words, the technology according to the present disclosure can produce other effects that are obvious to those skilled in the art from the description of this specification, in addition to or instead of the above effects.

接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of an approach avoidance system. GVS装置の全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of a GVS apparatus. GVS装置の全体構成の他の一例を示す図である。FIG. 4 is a diagram showing another example of the overall configuration of the GVS device; 本体部のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of a main-body part. GVS装置の機能構成の一例を示す図である。FIG. 2 is a diagram showing an example of the functional configuration of a GVS device; FIG. GVS装置が実行する処理の一例を示すフローチャートである。4 is a flowchart showing an example of processing executed by the GVS device; イメージング部により生成された画像の一例を説明するための模式図である。FIG. 3 is a schematic diagram for explaining an example of an image generated by an imaging unit; FIG. 距離L、相対速度ベクトルV、及び時間Tを示す模式図である。4 is a schematic diagram showing distance L, relative velocity vector V, and time T; FIG. 速度算出部が実行する処理の一例を説明するための模式図である。FIG. 5 is a schematic diagram for explaining an example of processing executed by a speed calculation unit; 電流値データベースが保持する電流値I及び速度dVの情報の一例を示す模式図である。FIG. 3 is a schematic diagram showing an example of information on a current value I and a velocity dV held by a current value database; ユーザの右耳付近に配置された3つの電極と、ユーザの方向を示す模式図である。3 is a schematic diagram showing three electrodes placed near the user's right ear and the user's direction; FIG. 第2の実施形態の接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of the approach avoidance system of 2nd Embodiment. 第2の実施形態に係る接近回避システムの機能構成の一例を示す図である。It is a figure showing an example of functional composition of an approach avoidance system concerning a 2nd embodiment. 第3の実施形態の接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of the approach avoidance system of 3rd Embodiment. 第3の実施形態の接近回避システムの機能構成の一例を示す図である。It is a figure showing an example of functional composition of an approach avoidance system of a 3rd embodiment. 第6の実施形態の接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of the approach avoidance system of 6th Embodiment. 第6の実施形態の接近回避システムの機能構成の一例を示す図である。It is a figure which shows an example of functional structure of the approach avoidance system of 6th Embodiment. GVS装置が実行する処理の一例を示すフローチャートである。4 is a flowchart showing an example of processing executed by the GVS device; 第7の実施形態の接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of the approach avoidance system of 7th Embodiment. 第7の実施形態の接近回避システムの機能構成の一例を示す図である。It is a figure which shows an example of functional structure of the approach avoidance system of 7th Embodiment. GVS装置及び操作端末装置が実行する処理の一例を示すフローチャートである。4 is a flow chart showing an example of processing executed by the GVS device and the operation terminal device; 第8の実施形態の接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of the approach avoidance system of 8th Embodiment. 第8の実施形態の接近回避システムの機能構成の一例を示す図である。It is a figure which shows an example of functional structure of the approach avoidance system of 8th Embodiment. 第9の実施形態の接近回避システムの全体構成の一例を示す図である。It is a figure which shows an example of the whole structure of the approach avoidance system of 9th Embodiment. 車酔いの原因について説明するための図である。It is a figure for demonstrating the cause of car sickness. 変形例の車酔い抑制システムの一例を説明するための模式図である。It is a schematic diagram for demonstrating an example of the car sickness suppression system of a modification.

以下、本技術を実施するための好適な形態について図面を参照しながら説明する。以下に説明する実施形態は、本技術の代表的な実施形態を示したものであり、本技術の範囲がこれらの実施形態のみに限定されることはない。本技術の説明は以下の順序で行う。 Preferred embodiments for carrying out the present technology will be described below with reference to the drawings. The embodiments described below show representative embodiments of the present technology, and the scope of the present technology is not limited only to these embodiments. The present technology will be described in the following order.

1.本技術の概要
2.第1の実施形態(前庭電気刺激装置を含む例)
3.第2の実施形態(前庭電気刺激装置及びモバイル端末を含む第1の例)
4.第3の実施形態(前庭電気刺激装置及びモバイル端末を含む第2の例)
5.第4の実施形態(前庭電気刺激装置及びモバイル端末を含む第3の例)
6.第5の実施形態(前庭電気刺激装置及び情報処理装置を含む例)
7.第6の実施形態(地図情報を利用する例)
8.第7の実施形態(第三者が遠隔制御する例)
9.第8の実施形態(前庭電気刺激装置同士が相互通信する例)
10.第9の実施形態(行動履歴を利用する例)
11.第10の実施形態(人の密集及び密接を回避するためのシステム)
12.変形例(車酔い抑制システム)
1. Outline of this technology 2. First embodiment (example including vestibular electrical stimulation device)
3. Second embodiment (first example including vestibular electrical stimulation device and mobile terminal)
4. Third Embodiment (Second Example Including Vestibular Electrical Stimulator and Mobile Terminal)
5. Fourth Embodiment (Third Example Including Vestibular Electrical Stimulator and Mobile Terminal)
6. Fifth embodiment (example including vestibular electrical stimulation device and information processing device)
7. Sixth Embodiment (Example of using map information)
8. Seventh embodiment (example of remote control by a third party)
9. Eighth embodiment (example of mutual communication between vestibular electrical stimulation devices)
10. Ninth Embodiment (Example Using Action History)
11. Tenth embodiment (system for avoiding crowding and close contact of people)
12. Modified example (car sickness control system)

1.本技術の概要 1. Overview of this technology

本技術の接近回避システムは、当該システムの対象(例えば人)が周囲環境に存在する動体との間に所定の距離を確保して、動体との接近を回避できるように、当該対象の動作を誘導するものである。対象の動作を誘導するため、本技術の接近回避システムでは、前庭電気刺激(Galvanic Vestibular Stimulation、以下GVSともいう)が用いられる。GVSとは、内耳にあり加速度を受容する器官である前庭を電流によって刺激することで、身体の動きを誘導する技術である。 The approach avoidance system of this technology keeps the target of the system (for example, a person) at a predetermined distance from a moving body existing in the surrounding environment, and controls the movement of the target so that it can avoid approaching the moving body. It is an inducement. The approach avoidance system of the present technology uses Galvanic Vestibular Stimulation (hereinafter also referred to as GVS) to guide the movement of the object. GVS is a technology that induces body movement by stimulating the vestibule, an organ in the inner ear that receives acceleration, with electric current.

人は、前庭感覚に変化が生じると、体の重心バランスを反射的に制御しようとして、バランスを取り得る方向に脚を踏み出す。そのため、例えば歩行中に前庭が電流によって刺激されると、バランスを補正する動作が誘導され、歩行方向が変化するという現象が起こる。当該現象を利用すると、前庭に印加する電流の方向及び量を制御することで、任意の方向へ歩行を誘導することができる。したがって、GVSの技術を用いることで、上記接近回避システムは、周囲の動体との間に所定の距離を確保できるように対象を誘導することができる。 When a change occurs in the vestibular sensation, a person reflexively tries to control the balance of the center of gravity of the body and steps forward in a direction in which balance can be achieved. Therefore, for example, when the vestibule is stimulated by an electric current during walking, a movement to correct balance is induced, and a phenomenon occurs in which the direction of walking changes. Using this phenomenon, it is possible to induce walking in any direction by controlling the direction and amount of current applied to the vestibule. Therefore, by using the GVS technology, the approach avoidance system can guide the target to keep a predetermined distance from surrounding moving objects.

本明細書において「動体」は、動いているものを意味する。当該動体としては、例えば、人、人以外の動物、並びに、自動車、自動二輪車及び自転車などの車両などが挙げられる。本技術の接近回避システムによって接近を回避することができる動体は、1又は複数であり、特には複数である。 As used herein, "moving object" means something that is moving. Examples of the moving body include humans, animals other than humans, and vehicles such as automobiles, motorcycles, and bicycles. The number of moving objects whose approach can be avoided by the approach avoidance system of the present technology is one or more, particularly more than one.

本明細書において「接近」は、近づくことに加えて、接触すること及び衝突することを包含する概念である。 In this specification, "approaching" is a concept that includes contact and collision in addition to approaching.

2.第1の実施形態(前庭電気刺激装置を含む例) 2. First embodiment (example including vestibular electrical stimulation device)

(1)接近回避システムの構成
本技術の第1の実施形態に係る接近回避システムは、前庭電気刺激装置(以下、GVS装置ともいう)を含む。本技術において、GVS装置は一対で用いられる。GVS装置は、当該接近回避システムの対象の耳付近に装着されるものであり、好ましくは耳掛け型のウェアラブル装置である。
(1) Configuration of approach avoidance system An approach avoidance system according to the first embodiment of the present technology includes a vestibular electrical stimulation device (hereinafter also referred to as a GVS device). In the present technology, GVS devices are used in pairs. The GVS device is worn near the ear of the target of the approach avoidance system, and is preferably an ear-hung wearable device.

図1を参照して、第1の実施形態に係る接近回避システム1の全体構成について説明する。図1は、接近回避システム1の全体構成の一例を示す図である。図1に示される接近回避システム1は、ユーザUの右耳に装着される右耳用GVS装置100と、左耳に装着される左耳用GVS装置(図示せず)と、から構成される、左右一対のGVS装置を含む An overall configuration of an approach avoidance system 1 according to the first embodiment will be described with reference to FIG. FIG. 1 is a diagram showing an example of the overall configuration of an approach avoidance system 1. As shown in FIG. The approach avoidance system 1 shown in FIG. 1 is composed of a right ear GVS device 100 worn on the right ear of a user U and a left ear GVS device (not shown) worn on the left ear. , including a pair of left and right GVS devices

上記ユーザUは、本技術の接近回避システムにおける対象の一例である。当該対象は、人に限定されるものではなく、例えばGVSの技術を適用可能な人以外の動物であってもよい。 The user U is an example of a target in the approach avoidance system of the present technology. The subject is not limited to humans, and may be, for example, non-human animals to which GVS technology can be applied.

(2)前庭電気刺激装置の構成及び動作 (2) Configuration and operation of vestibular electrical stimulation device

(2-1)前庭電気刺激装置の全体構成 (2-1) Overall configuration of vestibular electrical stimulation device

引き続き図1を参照して、GVS装置100の全体構成について説明する。図1に示されるGVS装置100は右耳用であるが、左耳用のGVS装置も同様の構成でありうるため、以下の説明では、右耳用、右耳側及び右側などの語を省略する場合がある。 Continuing to refer to FIG. 1, the overall configuration of the GVS device 100 will be described. Although the GVS device 100 shown in FIG. 1 is for the right ear, since the GVS device for the left ear may have a similar configuration, the following description omits terms such as right ear, right ear side, and right side. sometimes.

図1に示されるGVS装置100は、耳の後部に配置される本体部110と、こめかみから耳上部に亘って配置される第1の装着部141と、耳の後部から首筋に亘って配置される第2の装着部142と、を備える。 The GVS device 100 shown in FIG. 1 includes a main body portion 110 placed behind the ear, a first wearing portion 141 placed from the temple to the upper part of the ear, and a portion placed from the back of the ear to the nape of the neck. and a second mounting portion 142 .

GVS装置100は、さらに、ユーザUの周囲環境をイメージングするためのイメージング部120を備える。イメージング部120は、片耳につき1つ以上のイメージングセンサにより構成され、ユーザUの周囲環境の画像を生成し、好ましくは、当該周囲環境の全方位の画像を生成する。 The GVS device 100 further comprises an imaging unit 120 for imaging the user's U surrounding environment. The imaging unit 120 includes one or more imaging sensors for each ear, and generates an image of the surrounding environment of the user U, preferably an omnidirectional image of the surrounding environment.

イメージング部120に含まれるイメージセンサの数は片耳につき1つ以上である。すなわち、本実施形態において用いられる一対のGVS装置のそれぞれが、1つ以上のイメージセンサを含むイメージング部120を備える。上記イメージセンサの数は、周囲環境のイメージング範囲を拡大するためには、好ましくは片耳につき2つ以上であり、より好ましくは片耳につき3つ以上である。イメージセンサの数が多過ぎると製造コストが高くなるため、例えば、イメージセンサの数は片耳につき3つでありうる。右耳側のイメージセンサと左耳側のイメージセンサは、周囲環境の画像を左右偏りなく生成するため、好ましくは同数である。 The number of image sensors included in the imaging unit 120 is one or more per ear. That is, each of the pair of GVS devices used in this embodiment comprises an imaging unit 120 including one or more image sensors. The number of image sensors is preferably two or more per ear, more preferably three or more per ear, in order to expand the imaging range of the surrounding environment. For example, the number of image sensors can be three per ear, because too many image sensors are expensive to manufacture. The image sensors on the right ear side and the image sensors on the left ear side preferably have the same number in order to generate an image of the surrounding environment evenly to the left and right.

イメージング部120におけるイメージセンサの配置は、周囲環境を捉えられるように、好ましくは周囲環境の全方位を捉えられるように、当業者により適宜選択されてよい。一例として、イメージング部120は、図1に示されるような3つのイメージセンサ121、122、123により構成されうる。イメージセンサ121は、GVS装置100の右耳装着時においてユーザUの右側こめかみ付近に配置され、ユーザUの周囲環境のうち右前方環境の画像を生成する。イメージセンサ122は、GVS装置100の右耳装着時においてユーザUの耳上部付近に配置され、ユーザUの周囲環境のうち右側方環境の画像を生成する。イメージセンサ123は、GVS装置100の右耳装着時においてユーザUの耳裏付近に配置され、ユーザUの周囲環境のうち右後方環境の画像を生成する。左耳用GVS装置(図示せず)も同様に、左前方環境、左側方環境、及び左後方環境の画像を生成する。このような左右のGVS装置によって、ユーザUの周囲環境の全方位の画像が生成されうる。 The arrangement of the image sensors in the imaging unit 120 may be appropriately selected by those skilled in the art so that the surrounding environment can be captured, preferably so that the surrounding environment can be captured in all directions. As an example, the imaging unit 120 may consist of three image sensors 121, 122, 123 as shown in FIG. The image sensor 121 is arranged near the right temple of the user U when the GVS device 100 is worn on the right ear, and generates an image of the right front environment of the user U's surrounding environment. The image sensor 122 is arranged near the upper ear of the user U when the GVS device 100 is worn on the right ear, and generates an image of the right side environment of the user U's surrounding environment. The image sensor 123 is arranged near the back of the ear of the user U when the GVS device 100 is worn on the right ear, and generates an image of the right rear environment of the user U's surrounding environment. A left ear GVS device (not shown) similarly produces images of the left front environment, the left lateral environment, and the left rear environment. With such left and right GVS devices, an omnidirectional image of the user's U surrounding environment can be generated.

上記イメージング部120を構成するイメージセンサは、ユーザUと上記周囲環境に存在する動体との間の距離を測定可能なイメージセンサを含むことが好ましく、TOF(Time of Flight)イメージセンサ及び/又はミリ波イメージセンサを含むことがより好ましい。TOFイメージセンサは、TOF方式距離画像センサであり、対象物に光を照射し、その反射光をセンサで検出するまでの時間差を利用して、対象物までの距離を測定することができる。ミリ波イメージセンサは、検出したミリ波エネルギーの大小を画像の濃淡として記録することによりミリ波の電力強度を画像化するセンサであり、対象物にミリ波を発射し、その戻り時間を測定することで、対象物までの距離を測定することができる。ミリ波は可視光と比較して物質の透過率が高いため、ミリ波イメージセンサは、対象物とイメージセンサとの間に障害物が存在する環境下、及び、雨、雪、霧といった悪天候で視認性が低下した環境下における画像生成に適している。そのため、ミリ波イメージセンサを用いることで、これらの環境下における距離の測定精度を向上させることができる。 The image sensor that constitutes the imaging unit 120 preferably includes an image sensor that can measure the distance between the user U and a moving object that exists in the surrounding environment. More preferably, it includes a wave image sensor. A TOF image sensor is a TOF-type distance image sensor, and can measure the distance to an object by using the time difference between irradiating the object with light and detecting the reflected light by the sensor. A millimeter wave image sensor is a sensor that visualizes the power intensity of millimeter waves by recording the magnitude of the detected millimeter wave energy as the density of the image. Thus, the distance to the object can be measured. Millimeter waves have a higher transmittance than visible light, so millimeter wave image sensors can be used in environments where there are obstacles between the object and the image sensor, and in bad weather such as rain, snow, and fog. Suitable for image generation in environments with reduced visibility. Therefore, by using a millimeter wave image sensor, it is possible to improve the distance measurement accuracy under these environments.

上記イメージセンサは、可視光イメージセンサをさらに含むことが好ましい。可視光イメージセンサによって周囲環境をイメージングすることで、周囲環境に関するより詳細な情報を取得できるため、周囲環境に存在する動体の検出精度を向上させることができる。 Preferably, the image sensor further includes a visible light image sensor. By imaging the surrounding environment with a visible light image sensor, it is possible to acquire more detailed information about the surrounding environment, and thus the detection accuracy of moving objects existing in the surrounding environment can be improved.

イメージング部120が片耳につき2つ以上のイメージセンサを備える場合、これらのイメージセンサは、一部又は全部が同じ種類のイメージセンサであってもよく、全部が異なる種類のイメージセンサであってもよい。 If the imaging unit 120 has two or more image sensors per ear, some or all of these image sensors may be of the same type, or may be of different types. .

GVS装置100は、さらに、ユーザUにGVSを与えるための電極部130を備える。電極部130は、図1に示されるように、好ましくは3つの電極131、132、133を有する。これら3つの電極はそれぞれ、GVS装置100の右耳装着時において、ユーザUの右側のこめかみ付近、右耳の後部の乳様突起上の皮膚付近、及び、右側の首筋(例えば右側の乳様突起の約6cm下)の3か所配置されうる。左耳用GVS装置(図示せず)も同様の3つの電極を有し、これら3つの電極も同様に3か所に配置される。すなわち、本技術において用いられる一対のGVS装置のそれぞれは、上記3つの電極131、132、133を含む電極部130を備えることができ、これによりユーザUの前庭を電流で刺激することができる。 The GVS device 100 further comprises an electrode unit 130 for providing the user U with GVS. The electrode section 130 preferably has three electrodes 131, 132, 133 as shown in FIG. When the GVS device 100 is worn on the right ear, these three electrodes are respectively near the temple on the right side of the user U, near the skin on the mastoid process behind the right ear, and near the skin on the mastoid process on the right side of the neck (for example, the right mastoid process). 6 cm below). The left ear GVS device (not shown) has a similar three electrodes, which are similarly placed in three locations. That is, each of the pair of GVS devices used in the present technology can include an electrode section 130 including the three electrodes 131, 132, 133, thereby stimulating the vestibule of the user U with current.

GVS装置の全体構成は、図1に示されるものに限定されない。図2は、GVS装置101の全体構成の一例を示す図である。図2に示されるように、GVS装置101は、音声を出力する音声出力部150をさらに備えてもよい。音声出力部150は、例えばイヤホンでありうる。図3は、GVS装置102の全体構成の他の一例を示す図である。図3に示されるように、GVS装置102は、映像を表示する映像表示部160をさらに備えてもよい。映像表示部160は、例えば、AR(Augmented Reality)ゴーグル、VR(Virtual Reality)ゴーグル、又はヘッドマウントディスプレイの機能を備えるものでありうる。 The overall configuration of the GVS device is not limited to that shown in FIG. FIG. 2 is a diagram showing an example of the overall configuration of the GVS device 101. As shown in FIG. As shown in FIG. 2, the GVS device 101 may further include an audio output unit 150 that outputs audio. The audio output unit 150 can be, for example, earphones. FIG. 3 is a diagram showing another example of the overall configuration of the GVS device 102. As shown in FIG. As shown in FIG. 3, the GVS device 102 may further comprise an image display unit 160 for displaying images. The video display unit 160 may have functions of, for example, AR (Augmented Reality) goggles, VR (Virtual Reality) goggles, or a head-mounted display.

(2-2)本体部の構成 (2-2) Configuration of main body

図4を参照して、GVS装置100の本体部110の構成について説明する。図4は、本体部110のハードウェア構成の一例を示す図である。図4に示されるように、本体部110は、プロセッサ11、メモリ12、ストレージ13、無線通信インタフェース14、及び電源15を備える。 The configuration of the main unit 110 of the GVS device 100 will be described with reference to FIG. FIG. 4 is a diagram showing an example of the hardware configuration of the main unit 110. As shown in FIG. As shown in FIG. 4 , main body 110 includes processor 11 , memory 12 , storage 13 , wireless communication interface 14 , and power supply 15 .

プロセッサ11は、例えば、CPU(Central Processing Unit)などであり、GVS装置100の動作を制御する。メモリ12は、例えば、ROM(Read Only Memory)及びRAM(Random Access Memory)などであり、プロセッサ11によって実行されたときにGVS装置100に動作を実行させる命令などを格納する。ストレージ13は、例えば、SSD(Solid State Drive)などであり、GVS装置100の動作及び使用に関係する情報及びプログラムを記憶する。無線通信インタフェース14は、Bluetooth(登録商標)及び無線LANといった所定の無線通信規格によって他の装置と無線通信をするためのインタフェースである。電源15は、例えば蓄電池であり、GVS装置100の各部品に電力を供給する。図4では、いずれのハードウェアも単一のものとして示されているが、単なる例であり、いずれのハードウェアも1つ以上でありうる。 The processor 11 is, for example, a CPU (Central Processing Unit) or the like, and controls the operation of the GVS device 100 . The memory 12 is, for example, a ROM (Read Only Memory) and a RAM (Random Access Memory), and stores instructions that cause the GVS apparatus 100 to perform operations when executed by the processor 11 . The storage 13 is, for example, an SSD (Solid State Drive) or the like, and stores information and programs related to the operation and use of the GVS device 100 . The wireless communication interface 14 is an interface for wirelessly communicating with other devices according to predetermined wireless communication standards such as Bluetooth (registered trademark) and wireless LAN. The power source 15 is, for example, a storage battery, and supplies power to each component of the GVS device 100 . Although any piece of hardware is shown in FIG. 4 as being single, this is merely an example and any piece of hardware could be one or more.

(2-3)前庭電気刺激装置の機能構成 (2-3) Functional configuration of vestibular electrical stimulation device

図5を参照して、GVS装置100の機能構成について説明する。図5は、GVS装置100の機能構成の一例を示す図である。図5に示されるように、GVS装置100は、動体解析部111、速度算出部112、電流値取得部113、電流制御部114、結果確認部115、送受信部116、イメージング部120、及び電極部130を含みうる。動体解析部111、速度算出部112、電流値取得部113、電流制御部114、結果確認部115は、主に、プロセッサ11がメモリ12に格納されるプログラムを実行することにより実現される。送受信部116は、主に、プロセッサ11がメモリ12に格納されるプログラムを実行し、無線通信インタフェース14を制御することにより実現される。イメージング部120は、プロセッサ11がメモリ12に格納されるプログラムを実行し、イメージセンサ121、122、123を制御することにより実現される。電極部130は、主に、プロセッサ11がメモリ12に格納されたプログラムを実行し、電極131、132、133を制御することにより実現される。 A functional configuration of the GVS device 100 will be described with reference to FIG. FIG. 5 is a diagram showing an example of the functional configuration of the GVS device 100. As shown in FIG. As shown in FIG. 5, the GVS device 100 includes a moving body analysis unit 111, a velocity calculation unit 112, a current value acquisition unit 113, a current control unit 114, a result confirmation unit 115, a transmission/reception unit 116, an imaging unit 120, and an electrode unit. 130 may be included. Moving object analysis unit 111 , speed calculation unit 112 , current value acquisition unit 113 , current control unit 114 , and result confirmation unit 115 are realized mainly by processor 11 executing a program stored in memory 12 . Transmitting/receiving unit 116 is implemented mainly by processor 11 executing a program stored in memory 12 and controlling wireless communication interface 14 . The imaging unit 120 is implemented by the processor 11 executing a program stored in the memory 12 and controlling the image sensors 121 , 122 and 123 . The electrode section 130 is realized mainly by the processor 11 executing a program stored in the memory 12 and controlling the electrodes 131 , 132 and 133 .

(2-4)前庭電気刺激装置の動作 (2-4) Operation of vestibular electrical stimulation device

図6を参照して、GVS装置100の各機能部(図5参照)の動作、すなわち、本実施形態の接近回避システム1が実行する処理の流れについて説明する。図6は、GVS装置100が実行する処理の一例を示すフローチャートである。 With reference to FIG. 6, the operation of each functional unit (see FIG. 5) of the GVS device 100, that is, the flow of processing executed by the approach avoidance system 1 of this embodiment will be described. FIG. 6 is a flowchart showing an example of processing executed by the GVS device 100. As shown in FIG.

イメージング部120は、ユーザUの周囲環境の画像を時間間隔dTで生成する(ステップS11)。イメージング部120は、好ましくは、ユーザUの周囲環境の全方位の画像を時間間隔dTで生成する。具体的には、例えば、TOFイメージセンサ及び/又はミリ波イメージセンサと、可視光イメージセンサと、がユーザUの周囲環境の全方位の画像を時間間隔dTで生成する。このように周囲環境を時間間隔dTでイメージングすることで、周囲環境の変化を経時的にモニタリングすることができる。 The imaging unit 120 generates images of the surrounding environment of the user U at time intervals dT (step S11). The imaging unit 120 preferably generates an omnidirectional image of the surrounding environment of the user U at time intervals dT. Specifically, for example, a TOF image sensor and/or a millimeter wave image sensor and a visible light image sensor generate omnidirectional images of the surrounding environment of the user U at time intervals dT. By imaging the surrounding environment at time intervals dT in this manner, changes in the surrounding environment can be monitored over time.

動体解析部111は、上記画像に記録された周囲環境の情報から動体に関する情報を抽出する(ステップS12)。当該画像に記録された動体が複数である場合、動体解析部111は、複数の動体に関する情報を抽出することができる。 The moving body analysis unit 111 extracts information about the moving body from the surrounding environment information recorded in the image (step S12). When a plurality of moving bodies are recorded in the image, the moving body analysis unit 111 can extract information about the plurality of moving bodies.

図7を参照して、ステップS12について説明する。図7は、イメージング部120により生成された画像の一例を説明するための模式図である。図7の右側上段のPIC1及び右側下段のPIC2は、イメージング部120により生成された画像の模式図である。PIC1及びPIC2は時間間隔dTで生成され、詳細には、PIC2はPIC1が生成された時間のdT後に生成されたものである。PIC1及びPIC2に記録されたM1~M4は、イメージング部120により捉えられた、ユーザUの周囲環境に存在する動体を模式的に示している。動体解析部111は、例えば、PIC1とPIC2とを比較して、時間間隔dTの間に画像に記録された位置が変化した物体を動体として抽出することができる。 Step S12 will be described with reference to FIG. FIG. 7 is a schematic diagram for explaining an example of an image generated by the imaging unit 120. As shown in FIG. PIC1 on the upper right side of FIG. 7 and PIC2 on the lower right side of FIG. 7 are schematic diagrams of images generated by the imaging unit 120 . PIC1 and PIC2 are generated at a time interval dT, specifically PIC2 was generated dT after the time PIC1 was generated. M1 to M4 recorded in PIC1 and PIC2 schematically show moving objects existing in the surrounding environment of the user U captured by the imaging unit 120. FIG. The moving object analysis unit 111 can, for example, compare PIC1 and PIC2, and extract an object whose position recorded in the image during the time interval dT has changed as a moving object.

図6に戻り、動体解析部111の動作について引き続き説明する。動体解析部111は、ユーザUと周囲環境に存在する動体との間の距離L、及び、ユーザUに対する動体の相対速度ベクトルVを算出し、当該距離L及び当該相対速度ベクトルVを用いてユーザUと動体とが所定の距離まで接近するのに要する時間Tを算出する(ステップS13)。当該動体が複数である場合、動体解析部111は、当該複数の動体のそれぞれについて、距離L、相対速度ベクトルV及び時間Tを算出することができる。 Returning to FIG. 6, the operation of the moving body analysis unit 111 will be continued. The moving body analysis unit 111 calculates a distance L between the user U and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body to the user U, and uses the distance L and the relative velocity vector V to A time T required for U and the moving object to approach each other to a predetermined distance is calculated (step S13). When there are a plurality of moving bodies, the moving body analysis unit 111 can calculate the distance L, the relative velocity vector V, and the time T for each of the plurality of moving bodies.

上記所定の距離がゼロである場合、上記時間Tは、言い換えれば、ユーザUと動体とが接触又は衝突するまでの時間である。上記所定の距離は、例えば、予めメモリ12に格納されてよく、又は、随時更新されてもよい。 When the predetermined distance is zero, the time T is, in other words, the time until the user U contacts or collides with the moving object. For example, the predetermined distance may be stored in the memory 12 in advance, or may be updated as needed.

図8を参照して、距離L、相対速度ベクトルV、及び時間Tについて説明する。図8は、距離L、相対速度ベクトルV、及び時間Tを示す模式図である。図8の左側上段のPIC3及び左側下段のPIC4は、イメージング部120により時間間隔dTで生成された、動体M1~M4を含む画像の模式図である。PIC3及びPIC4中のUは、ユーザの位置を模式的に示す。PIC3及びPIC4中のLは、ユーザUと動体M4との間の距離Lを示す。図8の右側のPIC5は、動体M1~M4の相対速度ベクトルVを模式的に示す矢印を含む。例えば、PIC5中の動体M1上の矢印は、動体解析部111により算出された動体M1の相対速度ベクトルV1を示す。PIC5中の動体M2上の矢印は、動体解析部111により算出された動体M2の相対速度ベクトルV2を示す。PIC5中のT1は、ユーザUと動体M1とが所定の距離まで接近するのに要する時間を意味する。同様に、PIC5中のT2は、ユーザUと動体M2とが所定の距離まで接近するのに要する時間を意味する。 Distance L, relative velocity vector V, and time T will be described with reference to FIG. FIG. 8 is a schematic diagram showing distance L, relative velocity vector V, and time T. As shown in FIG. PIC3 on the upper left side of FIG. 8 and PIC4 on the lower left side of FIG. U in PIC3 and PIC4 schematically indicates the position of the user. L in PIC3 and PIC4 indicates the distance L between the user U and the moving object M4. PIC5 on the right side of FIG. 8 includes arrows that schematically indicate the relative velocity vectors V of the moving bodies M1 to M4. For example, the arrow on the moving object M1 in PIC5 indicates the relative velocity vector V1 of the moving object M1 calculated by the moving object analysis unit 111 . An arrow on the moving object M2 in PIC5 indicates the relative velocity vector V2 of the moving object M2 calculated by the moving object analysis unit 111. FIG. T1 in PIC5 means the time required for the user U and the moving object M1 to approach each other to a predetermined distance. Similarly, T2 in PIC5 means the time required for the user U and the moving object M2 to approach each other to a predetermined distance.

PIC5に示される動体M1~M4のうち、動体M3及びM4は、相対速度ベクトルVがユーザUの方向を向いていないため、ユーザUに接近しないこと又はユーザUから遠ざかることが予測される。そのため、動体解析部111は、動体M3及びM4の上記時間Tを算出しなくてもよい。すなわち、動体解析部111は、ユーザUと、相対速度ベクトルVがユーザUの方向を向いていない動体と、について上記時間Tを算出しなくてもよい。この場合、動体解析部111は、例えば、ユーザUに対する相対速度ベクトルVを算出した後に、周囲に存在する動体の中から上記相対速度ベクトルVがユーザUの方向を向いていない動体を非接近動体と判定することができる。そして、動体解析部111は、ユーザUと、非接近動体を除く動体と、が所定の距離まで接近するのに要する時間Tを算出することができる。すなわち、動体解析部111は、非接近動体の上記時間Tを算出しないという処理を実行することができる。 Of the moving bodies M1 to M4 shown in PIC5, the moving bodies M3 and M4 are predicted not to approach the user U or to move away from the user U because their relative velocity vectors V are not directed in the direction of the user U. Therefore, the moving body analysis unit 111 does not need to calculate the time T of the moving bodies M3 and M4. That is, the moving body analysis unit 111 does not need to calculate the time T for the user U and the moving body whose relative velocity vector V is not directed to the user U. In this case, for example, after calculating the relative velocity vector V with respect to the user U, the moving body analysis unit 111 selects a moving body whose relative velocity vector V does not face the direction of the user U from among the surrounding moving bodies as a non-approaching moving body. can be determined. Then, the moving body analysis unit 111 can calculate the time T required for the user U and the moving body excluding the non-approaching moving body to approach each other to a predetermined distance. That is, the moving object analysis unit 111 can execute a process of not calculating the time T of the non-approaching moving object.

図6に戻り、ステップS14について説明する。速度算出部112は、上記時間Tが判定時間Tj以内である動体を抽出する(ステップS14)。 Returning to FIG. 6, step S14 will be described. The speed calculation unit 112 extracts moving objects for which the time T is within the determination time Tj (step S14).

上記判定時間Tjは、例えば、所定の状況下においてユーザUと動体とが接近することが予測される時間であってよく、詳細には、所定の状況下においてユーザUと動体とが衝突、接触又は所定の距離まで近づくことが予測される時間でありうる。これにより、速度算出部112は、ステップS13において上記時間Tが算出された動体の中から、ユーザUに接近することが予測される動体(詳細には、ユーザUに衝突、接触又は所定の距離まで近づくことが予測される動体)を抽出することができる。例えば、ユーザUが時速4kmで歩行中であり、ユーザUから4.4mの範囲内にユーザUに向かって時速4kmで歩行する歩行者が存在する場合、ユーザUと当該歩行者は2秒後に衝突することが予測される。この衝突するまでの時間である2秒を、判定時間Tjとしてもよい。判定時間Tjは、例えば、予めメモリ12に格納されてよく、又は、随時更新されてもよい。 The determination time Tj may be, for example, a time during which the user U and the moving object are expected to approach each other under a predetermined situation. Alternatively, it can be a time when it is predicted that the vehicle will approach a predetermined distance. As a result, the velocity calculation unit 112 selects a moving object predicted to approach the user U (more specifically, a moving object expected to approach the user U from among the moving objects for which the time T has been calculated in step S13). A moving object that is expected to approach up to a point) can be extracted. For example, when the user U is walking at a speed of 4 km/h and there is a pedestrian walking towards the user U at a speed of 4 km/h within a range of 4.4 m from the user U, the user U and the pedestrian will A collision is expected. Two seconds, which is the time until the collision occurs, may be used as the determination time Tj. The determination time Tj may, for example, be stored in the memory 12 in advance, or may be updated as needed.

引き続き図6を参照して、ステップS15について説明する。速度算出部112は、上記判定時間Tj後においてユーザUと上記抽出された動体との間の距離Ljが所定の距離となるように、ユーザUが取るべき動作の大きさ及び方向を表す速度dVを算出する(ステップS15)。 Next, step S15 will be described with reference to FIG. The speed calculation unit 112 calculates a speed dV representing the magnitude and direction of the action to be taken by the user U so that the distance Lj between the user U and the extracted moving object after the determination time Tj is a predetermined distance. is calculated (step S15).

ステップS15における上記所定の距離は、具体的には、判定時間Tj後においてユーザUと抽出された動体とが接近することがない距離であってよく、詳細には、判定時間Tj後においてユーザUと抽出された動体とが衝突すること、接触すること又は所定の距離まで近づくことがない距離でありうる。これにより、速度算出部113は、判定時間Tj後においてユーザUが抽出された動体に接近すること(より詳細には、判定時間Tj後においてユーザUが抽出された動体と衝突すること、接触すること又は所定の距離まで近づくこと)を回避可能な動作の大きさ及び方向を算出することができる。所定の距離の値は、例えば、予めメモリ12に格納されてよく、又は、随時更新されてもよい。 Specifically, the predetermined distance in step S15 may be a distance at which the user U and the extracted moving object do not approach each other after the determination time Tj. and the extracted moving object may not collide, contact, or come close to a predetermined distance. As a result, the velocity calculation unit 113 determines that the user U approaches the extracted moving object after the determination time Tj (more specifically, the user U collides with or contacts the extracted moving object after the determination time Tj). or approaching a predetermined distance) can be calculated. The predetermined distance value may, for example, be stored in the memory 12 in advance, or may be updated from time to time.

上記速度dVは、判定時間Tj後においてユーザUと抽出された動体との間の距離Ljが所定の距離となるように、ユーザUが取るべき動作の大きさ及び方向を表す。具体的には、当該速度dVは、判定時間Tj後においてユーザUが抽出された動体に接近することを回避可能な動作の大きさ及び方向を表す。より詳細には、当該速度dVは、判定時間Tj後においてユーザUが抽出された動体と衝突すること、接触すること又は所定の距離まで近づくことを回避可能な動作の大きさ及び方向を表す。抽出された動体が複数である場合、当該速度dVは、ユーザUと抽出された全ての動体との間の距離が所定の距離となるように算出される。これにより、抽出された全ての動体との接近を回避しうる動作を、GVSにより誘導することが可能となる。 The speed dV represents the magnitude and direction of the movement to be taken by the user U so that the distance Lj between the user U and the extracted moving object after the determination time Tj is a predetermined distance. Specifically, the velocity dV represents the magnitude and direction of motion that allows the user U to avoid approaching the extracted moving body after the determination time Tj. More specifically, the velocity dV represents the magnitude and direction of motion that allows the user U to avoid colliding with, contacting, or approaching the extracted moving object to a predetermined distance after the determination time Tj. When there are multiple extracted moving bodies, the velocity dV is calculated so that the distance between the user U and all the extracted moving bodies is a predetermined distance. As a result, it is possible to induce motions that can avoid approaching all the extracted moving objects by GVS.

速度算出部112は、例えば、ユーザUと周囲環境に存在する動体との間の距離L、ユーザUに対する動体の相対速度ベクトルV、及び、判定時間Tjを用いて、上記速度dVを算出することができる。 The speed calculation unit 112 calculates the speed dV using, for example, the distance L between the user U and a moving object existing in the surrounding environment, the relative speed vector V of the moving object with respect to the user U, and the determination time Tj. can be done.

図9を参照して、ステップS14及びステップS15についてさらに説明する。図9は、速度算出部112が実行する処理の一例を説明するための模式図である。図9の左側は、ステップS13において算出された、ユーザUと動体M1とが所定の距離まで接近するのに要する時間T1が1秒内であることを模式的に示している。さらに、図9の左側は、ステップS13において同様に算出された、ユーザUと動体M2とが所定の距離まで接近するのに要する時間T2が2秒超であることを模式的に示す。 Steps S14 and S15 will be further described with reference to FIG. FIG. 9 is a schematic diagram for explaining an example of processing executed by the speed calculation unit 112. As shown in FIG. The left side of FIG. 9 schematically shows that the time T1 required for the user U and the moving object M1 to approach each other to a predetermined distance calculated in step S13 is within one second. Furthermore, the left side of FIG. 9 schematically shows that the time T2 required for the user U and the moving object M2 to approach each other to a predetermined distance, which is similarly calculated in step S13, is more than 2 seconds.

上記判定時間Tjが2秒である場合、速度算出部112は、ステップS14において、2つの動体M1及びM2の中から、上記時間T1が判定時間Tj以内である(すなわち2秒以内である)動体M1を抽出する。 If the determination time Tj is 2 seconds, the speed calculation unit 112 determines in step S14 whether the moving object whose time T1 is within the determination time Tj (that is, within 2 seconds) is selected from the two moving objects M1 and M2. Extract M1.

図9の右側は、ステップS13において動体解析部111が算出した動体M1の相対速度ベクトルV1と、ステップS14において速度算出部112が算出したユーザUが取るべき動作の大きさ及び方向を表す速度dVと、を模式的示す。相対速度ベクトルV1で移動する動体M1は、1秒内に、ユーザUに所定の距離まで接近することが予測される。速度算出部112は、ステップS15において、2秒後においてユーザUが動体M1との間に所定の距離を確保できるようにユーザUが取るべき動作の速度dVを算出する。図9の右側は、当該速度dVの方向が、動体M1の相対速度ベクトルV1と垂直方向に設定された例を示す。 The right side of FIG. 9 shows the relative velocity vector V1 of the moving object M1 calculated by the moving object analysis unit 111 in step S13, and the velocity dV representing the magnitude and direction of the movement to be taken by the user U calculated by the velocity calculation unit 112 in step S14. and are schematically shown. The moving object M1 moving with the relative velocity vector V1 is predicted to approach the user U within a predetermined distance within one second. In step S15, the speed calculation unit 112 calculates the speed dV of the action that the user U should take so that the user U can keep a predetermined distance from the moving body M1 after two seconds. The right side of FIG. 9 shows an example in which the direction of the velocity dV is set perpendicular to the relative velocity vector V1 of the moving body M1.

図6に戻り、ステップS16について説明する。GVS装置100は、必須ではないが、電流値取得部113を含みうる。電流値取得部113は、電極部130に電流値Iの電流が流れたときに誘導される動作の速度dVの情報を保持する電流値データベースを検索して、所定の速度dVに対応する電流値Iを取得する(ステップS16)。 Returning to FIG. 6, step S16 will be described. The GVS device 100 may include a current value acquisition unit 113, although this is not essential. The current value acquisition unit 113 searches a current value database holding information on the speed dV of the motion induced when the current of the current value I flows through the electrode unit 130, and obtains the current value corresponding to the predetermined speed dV. I is acquired (step S16).

電流値データベースは、GVS装置100内に備えられているものでもよく、又は、クラウドデータベースなどのGVS装置100の外部にあるものでもよい。 The current value database may be provided within the GVS device 100, or may be external to the GVS device 100, such as a cloud database.

電流値データベースの初回の構築は、例えば、実験的手法により得られた電流値Iと速度dVとの対応関係を利用して行われうる。すなわち、GVS装置を装着した特定の対象を被験者として、当該GVS装置の電極部に電流値Iの電流を印加し、その時に誘導される動作の速度dVの情報を記録する実験を繰り返す。このようにして得られた電流値Iと速度dVとの対応関係が、電流値データベースの構築のために用いられうる。構築された電流値データベースが保持する情報は、随時更新されてよい。 The initial construction of the current value database can be performed, for example, using the correspondence relationship between the current value I and the speed dV obtained by an experimental method. That is, a specific subject wearing a GVS device is used as a test subject, and an experiment is repeated in which a current of current value I is applied to the electrodes of the GVS device, and information on the speed dV of the motion induced at that time is recorded. The correspondence relationship between the current value I and the velocity dV thus obtained can be used for constructing the current value database. Information held by the constructed current value database may be updated as needed.

GVSの効果は対象によって差がある場合があるため、電流値Iによって誘導される動作の速度dVは、対象によって異なりうる。その要因の1つとして、電極部130に流れる電流値Iが同じでも、頭部の大きさなどの影響により、実際に前庭を刺激する電流の大きさが異なることが考えられる。他の要因の1つとして、前庭を刺激する電流の大きさが同じであっても、知覚される刺激の大きさが異なることが考えられる。このような個人差による影響を低減させるため、上記電流値データベースとして、好ましくはユーザUの固有の電流値データベースが用いられうる。これにより、電流値Iと速度dVとの対応精度を向上させて、個人差によるGVSの効果の差を低減することができる。その結果、GVSによるユーザUの動作の誘導を精度良く行うことができるため、本実施形態の接近回避システムにおける動体との接近回避の精度を向上させることができる。当該ユーザUの固有の電流値データベースは、ユーザUが本実施形態の接近回避システムを使用した結果に基づいて電流値Iと速度dVとを対応付けることで構築されうる。 Since the effect of GVS may vary from subject to subject, the speed of motion dV induced by the current value I may vary from subject to subject. One possible reason for this is that even if the current value I flowing through the electrode section 130 is the same, the magnitude of the current that actually stimulates the vestibule differs due to the influence of the size of the head and the like. Another factor could be that the perceived stimulus magnitude is different, even though the magnitude of the current stimulating the vestibule is the same. In order to reduce the influence of such individual differences, a current value database specific to the user U can preferably be used as the current value database. As a result, it is possible to improve the accuracy of correspondence between the current value I and the speed dV, and reduce the difference in GVS effect due to individual differences. As a result, the motion of the user U can be guided by the GVS with high accuracy, so that the accuracy of approach avoidance with a moving object in the approach avoidance system of the present embodiment can be improved. A current value database unique to the user U can be constructed by associating the current value I with the speed dV based on the result of the user U using the approach avoidance system of the present embodiment.

上記ユーザUの固有の電流値データベースは、さらに、ユーザUの属性情報を保持してもよい。当該属性情報は、例えば、国籍、性別、年齢、身長、及び体重からなる群から選ばれる1つ又は2つ以上を含みうる。 The user U's unique current value database may further hold the user's U attribute information. The attribute information may include, for example, one or more selected from the group consisting of nationality, gender, age, height, and weight.

本実施形態において、ユーザUの属性情報を保持する電流値データベースを複数集約した電流値データベース群が構築されてもよい。当該電流値データベース群は、好ましくはクラウドデータベースである。上記電流値取得部113は、当該電流値データベース群の中から当該属性情報を参照して選択した所定の電流値データベースを検索して、所定の速度dVに対応する電流値Iを取得してもよい。例えば、ユーザUが本実施形態の接近回避システムを使用した実績が少なく、個人差を反映した固有の電流値データベースの構築が難しい場合がある。このような場合、電流値取得部113は、当該電流値データベース群の中から、ユーザUと属性情報が近い他のユーザの電流値データベースを選択し、当該他のユーザの電流値データベースを検索して、所定の速度dVに対応する電流値Iを取得してもよい。属性情報が近い他のユーザの電流値データベースを用いることで、個人差によるGVSの効果の差を低減させることができる。その結果、GVSによるユーザUの動作の誘導を精度良く行うことができるため、本実施形態の接近回避システムにおける動体との接近回避の精度を向上させることができる。 In the present embodiment, a current value database group may be constructed in which a plurality of current value databases holding attribute information of the user U are aggregated. The current value database group is preferably a cloud database. The current value acquisition unit 113 searches a predetermined current value database selected by referring to the attribute information from among the current value database group, and acquires the current value I corresponding to the predetermined speed dV. good. For example, the user U has little track record of using the approach avoidance system of this embodiment, and it may be difficult to construct a unique current value database that reflects individual differences. In such a case, the current value acquisition unit 113 selects a current value database of another user whose attribute information is similar to that of the user U from among the current value database group, and searches the current value database of the other user. to obtain the current value I corresponding to the predetermined speed dV. By using the current value database of other users with similar attribute information, it is possible to reduce differences in GVS effects due to individual differences. As a result, the motion of the user U can be guided by the GVS with high accuracy, so that the accuracy of approach avoidance with a moving object in the approach avoidance system of the present embodiment can be improved.

図10は、電流値データベースが保持する電流値I及び速度dVの情報の一例を示す模式図である。図10に示されるように、電流値Iの単位はmAである。このような電流値データベースを用いることで、電流値取得部113は、所定の速度dVに対応する電流値Iを取得することができる。 FIG. 10 is a schematic diagram showing an example of information on the current value I and the velocity dV held by the current value database. As shown in FIG. 10, the unit of current value I is mA. By using such a current value database, the current value acquisition unit 113 can acquire the current value I corresponding to the predetermined speed dV.

図6に戻り、ステップS17について説明する。電流制御部114は、電極部130に電流値Iの電流を流して、ユーザUが上記速度dVで動作することを誘導すべくGVSをユーザUに与える(ステップS17)。GVS装置100が上記電流値取得部113を含まない場合、電流制御部114は、電極部130に所定の電流値の電流を流す。 Returning to FIG. 6, step S17 will be described. The current control unit 114 applies a current value I to the electrode unit 130 and gives GVS to the user U to induce the user U to operate at the speed dV (step S17). When the GVS device 100 does not include the current value acquisition unit 113, the current control unit 114 causes the electrode unit 130 to flow current of a predetermined current value.

電流制御部114は、例えば、電極部130を構成する3つの電極131、132、133の中から、電流値Iの電流が流される電極を選択することができる。 The current control unit 114 can select, for example, an electrode through which a current having a current value I flows from among the three electrodes 131, 132, and 133 that constitute the electrode unit 130. FIG.

図11を参照して、誘導されるユーザUの動作と電流が流される電極との関係について説明する。図11は、ユーザUの右耳付近に配置された3つの電極131、132、133と、ユーザUの方向(X、Y及びZ方向)を示す模式図である。図11において、電極131は右側のこめかみ付近に配置され、電極132は右側の乳様突起上の皮膚付近に配置され、電極133は右側の首筋部分に配置されている。同様の3つの電極が当該ユーザUの左耳付近にも配置されている(図示せず)。図11において、X方向はユーザUの前後方向を示し、Y方向はユーザUの左右方向を示し、Z方向はユーザUの上下方向を示す。 With reference to FIG. 11, the relationship between the induced motion of the user U and the electrodes through which the current flows will be described. FIG. 11 is a schematic diagram showing three electrodes 131, 132, 133 arranged near the right ear of the user U and directions of the user U (X, Y and Z directions). In FIG. 11, electrode 131 is placed near the temple on the right side, electrode 132 is placed near the skin above the mastoid on the right side, and electrode 133 is placed on the nape on the right side. Three similar electrodes are also arranged near the left ear of the user U (not shown). In FIG. 11 , the X direction indicates the user's U front-back direction, the Y direction indicates the user's U left-right direction, and the Z direction indicates the user's U up-down direction.

ユーザUが前後方向Xに動作することを誘導するGVSの場合、電流制御部114は、左右の乳様突起上の皮膚付近に配置された電極に電流を流す。ユーザUが左右方向Yに動作することを誘導するGVSの場合、電流制御部114は、乳様突起上の皮膚付近に配置された電極と、こめかみ付近に配置された電極と、に電流を流す。例えば右方向に誘導する場合、電流制御部114は、右側の乳様突起上の皮膚付近に配置された電極と、右側のこめかみ付近に配置された電極と、に電流を流す。例えば左方向に誘導する場合、電流制御部114は、左側の乳様突起上の皮膚付近に配置された電極と、左側のこめかみ付近に配置された電極と、に電流を流す。また、ユーザUが上下方向Zに動作することを誘導するGVSの場合、電流制御部114は、左右の乳様突起上の皮膚付近に配置された電極と、左右の首筋に配置された電極と、に電流を流す。 In the case of GVS that induces the user U to move in the front-rear direction X, the current control unit 114 causes current to flow through electrodes placed near the skin on the left and right mastoid processes. In the case of the GVS that induces the user U to move in the left-right direction Y, the current control unit 114 applies current to the electrodes arranged near the skin on the mastoid and the electrodes arranged near the temples. . For example, when guiding in the right direction, the current control unit 114 applies current to the electrode placed near the skin on the right mastoid and the electrode placed near the right temple. For example, when guiding to the left, the current control unit 114 applies current to the electrode placed near the skin on the left mastoid and the electrode placed near the left temple. In addition, in the case of the GVS that induces the user U to move in the vertical direction Z, the current control unit 114 controls the electrodes arranged near the skin on the left and right mastoid processes and the electrodes arranged on the left and right nape of the neck. , to pass a current through.

電流制御部114は、電極部130に所定の電流値(電流値I)の電流を流すときに、徐々に電流値を上げていき、所定の時間経過後に当該所定の電流値(電流値I)となるように調整することが好ましい。これにより、ユーザUが電流印加時の刺激を感じることを防止することができる。 The current control unit 114 gradually increases the current value when passing a current of a predetermined current value (current value I) through the electrode unit 130, and after a predetermined time elapses, the current value reaches the predetermined current value (current value I). It is preferable to adjust so that Thereby, it is possible to prevent the user U from feeling a stimulus when the current is applied.

本実施形態の接近回避システムは、上記ステップS17を実行してユーザUにGVSを与えることで、ユーザUに対して周囲に存在する動体との接近を回避しうる動作を誘導することができる。その結果、ユーザUは、周囲に存在する動体との接近を回避することができる。なお、当該動体は1つに限定されず、2つ以上でありうる。 The approach avoidance system of the present embodiment can guide the user U to take actions to avoid approaching moving objects present in the surroundings by executing step S17 and giving the user U the GVS. As a result, the user U can avoid approaching moving objects existing in the surroundings. Note that the number of moving objects is not limited to one, and may be two or more.

引き続き図6を参照して、ステップS18及びS19について説明する。GVS装置100は、必須ではないが、結果確認部115を含みうる。結果確認部115は、電流制御部114がGVSをユーザUに与えた後の、ユーザUと上記抽出された動体との間の距離Lrを確認する(ステップS18)。当該距離Lrが所定の条件を満たさない場合(ステップS18:No)、結果確認部115は処理を終了する。当該距離Lrが所定の条件を満たす場合(ステップS18:Yes)、結果確認部115は上記電流値データベースを更新し(ステップS19)、処理を終了する。 Steps S18 and S19 will be described with continued reference to FIG. The GVS device 100 may, but not necessarily, include a result confirmation unit 115 . The result confirmation unit 115 confirms the distance Lr between the user U and the extracted moving object after the current control unit 114 gives the GVS to the user U (step S18). If the distance Lr does not satisfy the predetermined condition (step S18: No), the result confirmation unit 115 terminates the process. If the distance Lr satisfies the predetermined condition (step S18: Yes), the result confirmation unit 115 updates the current value database (step S19), and terminates the process.

ユーザUは、GVSによって、抽出された動体との間に距離Ljが確保できるような動作(速度dV)を誘導される。そのため、ユーザUは、速度dVで動作すれば抽出された動体との接近を回避しうる。しかしながら、GVSの効果は必ずしも一定ではないことから、GVSを与えられたユーザUが上記速度dVで動作しない場合がある。この場合、ユーザUが抽出された動体との接近を回避できないことがある。すなわち、GVSによって誘導される実際の動作は、想定された動作と異なる場合がある。そこで、実際の動作の結果を確認するための工程が、上記のステップS18である。 The user U is guided by the GVS to move (speed dV) so as to secure a distance Lj to the extracted moving object. Therefore, the user U can avoid approaching the extracted moving body by moving at the speed dV. However, since the effect of GVS is not necessarily constant, the user U given GVS may not operate at the speed dV. In this case, the user U may not be able to avoid approaching the extracted moving object. That is, the actual behavior induced by the GVS may differ from the assumed behavior. Therefore, the step for confirming the result of the actual operation is step S18.

ステップS18における上記所定の条件は、例えば、実際の動作の結果、ユーザUが、動体と衝突すること、接触すること又は所定の距離まで近づくことを回避できたことを確認できる条件でありうる。具体的には、当該所定の条件は、例えば上記Lrが上記Ljと一致することであってもよい。これにより、GVSを与えられて動いた後のユーザUと動体との間の実際の距離(距離Lr)と、想定された距離(距離Lj)と、が一致したことが確認されうる。当該所定の条件は、例えば距離Lrと距離Ljとの差分が所定値以内であることであってもよく、これにより、距離Lrと距離Ljとの誤差が所定値以内であることが確認されうる。当該所定の条件は、例えば距離Lrが所定値であることであってもよく、これにより、実際の距離が所定値であって所定の距離が実際に確保されたことが確認されうる。当該所定の条件は、例えば距離Lrがゼロではないことであってもよく、これにより、実際に衝突又は接触が起こらなかったことが確認されうる。 The predetermined condition in step S18 may be, for example, a condition under which it can be confirmed that, as a result of the actual action, the user U is able to avoid colliding with, contacting, or approaching a moving object within a predetermined distance. Specifically, the predetermined condition may be, for example, that the above Lr matches the above Lj. Thereby, it can be confirmed that the actual distance (distance Lr) between the user U and the moving object after moving under the GVS matches the assumed distance (distance Lj). The predetermined condition may be, for example, that the difference between the distance Lr and the distance Lj is within a predetermined value, whereby it can be confirmed that the error between the distance Lr and the distance Lj is within a predetermined value. . The predetermined condition may be, for example, that the distance Lr is a predetermined value, whereby it can be confirmed that the actual distance is the predetermined value and the predetermined distance is actually secured. The predetermined condition may be, for example, that the distance Lr is non-zero, thereby confirming that no collision or contact actually occurred.

上記ステップS19において、結果確認部115は、距離Lrが所定の条件を満たす場合に、電流値データベースを更新する。結果確認部115は、例えば、実際の動作の結果、ユーザUが、動体と衝突すること、接触すること又は所定の距離まで近づくことを回避できたことを確認した場合に、電流値データベースを更新することができる。ステップS19の処理が実行されることで、ユーザUが本実施形態の接近回避システムを使用した結果を電流値データベースに反映することができるため、ユーザUの固有の電流値データベースが構築されうる。このようなユーザ固有の電流値データベースは、当該接近回避システムにおける接近回避精度の向上に寄与しうる。 In step S19, the result confirmation unit 115 updates the current value database when the distance Lr satisfies a predetermined condition. For example, the result confirmation unit 115 updates the current value database when confirming that the user U was able to avoid colliding with, contacting, or approaching a moving object within a predetermined distance as a result of the actual operation. can do. By executing the process of step S19, the results of the use of the approach avoidance system of the present embodiment by the user U can be reflected in the current value database, so that a unique current value database for the user U can be constructed. Such a user-specific current value database can contribute to improving the accuracy of approach avoidance in the approach avoidance system.

3.第2の実施形態(前庭電気刺激装置及びモバイル端末を含む第1の例) 3. Second embodiment (first example including vestibular electrical stimulation device and mobile terminal)

本技術の第2の実施形態に係る接近回避システムは、一対のGVS装置と、モバイル端末と、を含む。当該一対のGVS装置と当該モバイル端末とは通信可能に接続されうる。本実施形態の接近回避システムは、モバイル端末がイメージング部を含み、GVS装置がその他の機能部を含むことが、上記第1の実施形態との主な相違点である。以下、本実施形態の接近回避システムについて、上記第1の実施形態と異なる点を主に説明する。なお、本実施形態の接近回避システムの構成について、上記第1の実施形態と同一の説明が当てはまるものについては上記第1の実施形態と同一の符号を付す。 An approach avoidance system according to a second embodiment of the present technology includes a pair of GVS devices and a mobile terminal. The pair of GVS devices and the mobile terminal may be communicatively connected. The main difference between the approach avoidance system of this embodiment and the first embodiment is that the mobile terminal includes an imaging unit and the GVS device includes other functional units. In the following, the approach avoidance system of this embodiment will be mainly described with respect to the differences from the first embodiment. Regarding the configuration of the approach avoidance system of the present embodiment, the same reference numerals as those of the first embodiment are assigned to the same descriptions as those of the first embodiment.

図12を参照して、本実施形態の接近回避システム1Aについて説明する。図12は、第2の実施形態の接近回避システム1Aの全体構成の一例を示す図である。図12に示される接近回避システム1Aは、右耳用GVS装置100Aと、左耳用GVS装置(図示せず)と、から構成される左右一対のGVS装置、及び、モバイル端末200Aを含む。 The approach avoidance system 1A of this embodiment will be described with reference to FIG. FIG. 12 is a diagram showing an example of the overall configuration of the approach avoidance system 1A of the second embodiment. The approach avoidance system 1A shown in FIG. 12 includes a pair of left and right GVS devices each composed of a right ear GVS device 100A and a left ear GVS device (not shown), and a mobile terminal 200A.

図12に示されるGVS装置100Aは、イメージング部を含んでおらず、具体的にはイメージングセンサを備えていない。その代わりに、モバイル端末200Aがイメージング部を含んで構成され、具体的にはイメージングセンサ(図示せず)を備える。モバイル端末200Aが含むイメージング部の機能は、上記第1の実施形態において説明したとおりである。当該イメージング部を構成するイメージセンサについても、上記第1の実施形態において説明したとおりである。 The GVS device 100A shown in FIG. 12 does not include an imaging unit, and specifically does not include an imaging sensor. Instead, the mobile terminal 200A is configured to include an imaging unit, specifically an imaging sensor (not shown). The functions of the imaging unit included in the mobile terminal 200A are as described in the first embodiment. The image sensor that constitutes the imaging unit is also the same as described in the first embodiment.

モバイル端末200Aは、通信機能を備える持ち運び可能なコンピュータ装置である。モバイル端末200Aは、例えば、携帯電話、スマートフォン、又はタブレット型端末などでありうる。モバイル端末200Aのハードウェア構成は、通信機能を備える一般的なコンピュータ装置と同様の構成でありうる。モバイル端末200Aは、一例として、プロセッサ、メモリ、無線通信インタフェース、入力装置、及び出力装置を備えることができる。モバイル端末200Aの機能は、基本的に、プロセッサがメモリに格納された所定の制御プログラムを実行することにより実現される。 The mobile terminal 200A is a portable computer device having a communication function. The mobile terminal 200A can be, for example, a mobile phone, a smart phone, a tablet terminal, or the like. The hardware configuration of the mobile terminal 200A can be similar to that of a general computer device with communication functions. The mobile terminal 200A can include, as an example, a processor, memory, wireless communication interface, input device, and output device. The functions of the mobile terminal 200A are basically realized by the processor executing a predetermined control program stored in the memory.

図13を参照して、接近回避システム1Aの機能構成について説明する。図13は、第2の実施形態に係る接近回避システム1Aの機能構成の一例を示す図である。図13に示されるように、GVS装置100Aは、イメージング部を含まない。GVS装置100Aに含まれる機能部は、イメージング部以外は、上記第1の実施形態で図5を参照して説明したGVS装置100の機能部と同じである。モバイル端末200Aは、イメージング部201及び無線通信部205を含む。イメージング部120の機能は、上記第1の実施形態において説明したとおりである。無線通信部205は、例えばモバイル端末200が備える無線通信インタフェースによって実現される。モバイル端末200Aの無線通信部205とGVS装置100Aの送受信部116との間で無線通信が行われる。 A functional configuration of the approach avoidance system 1A will be described with reference to FIG. FIG. 13 is a diagram showing an example of the functional configuration of an approach avoidance system 1A according to the second embodiment. As shown in FIG. 13, the GVS device 100A does not include an imaging section. The functional units included in the GVS device 100A are the same as the functional units of the GVS device 100 described with reference to FIG. 5 in the first embodiment, except for the imaging unit. The mobile terminal 200A includes an imaging section 201 and a wireless communication section 205. FIG. The function of the imaging unit 120 is as described in the first embodiment. The wireless communication unit 205 is implemented by, for example, a wireless communication interface included in the mobile terminal 200 . Wireless communication is performed between the wireless communication unit 205 of the mobile terminal 200A and the transmission/reception unit 116 of the GVS device 100A.

上記モバイル端末200A及びGVS装置100Aの動作、すなわち、本実施形態の接近回避システム1Aが実行する処理について説明する。接近回避システム1Aが実行する処理のフローは、全体的は、図6を参照して上記で説明した、第1の実施形態の接近回避システム1が実行する処理のフローと同様でありうる。本実施形態の接近回避システム1Aにおいては、モバイル端末200Aが図6に示されるステップS11の処理を実行し、GVS装置100Aが他のステップの処理を実行することが、第1の実施形態の接近回避システム1との主な相違点である。モバイル端末200AとGVS装置100Aとの間における必要な情報の送受信は、無線通信によって行われる。 The operations of the mobile terminal 200A and the GVS device 100A, that is, the processing executed by the approach avoidance system 1A of the present embodiment will be described. The flow of processing executed by the approach avoidance system 1A may be generally similar to the flow of processing executed by the approach avoidance system 1 of the first embodiment described above with reference to FIG. In the approach avoidance system 1A of the present embodiment, the mobile terminal 200A executes the processing of step S11 shown in FIG. 6, and the GVS device 100A executes the processing of other steps. This is the main difference from the avoidance system 1. Transmission and reception of necessary information between the mobile terminal 200A and the GVS device 100A are performed by wireless communication.

4.第3の実施形態(前庭電気刺激装置及びモバイル端末を含む第2の例) 4. Third Embodiment (Second Example Including Vestibular Electrical Stimulator and Mobile Terminal)

本技術の第3の実施形態に係る接近回避システムは、一対のGVS装置と、モバイル端末と、を含む。当該一対のGVS装置と当該モバイル端末とは通信可能に接続されうる。本実施形態の接近回避システムは、モバイル端末がイメージング部、動体解析部、速度算出部、及び電流値取得部を含み、GVS装置がその他の機能部を含むことが、上記第1の実施形態との主な相違点である。以下、本実施形態の接近回避システムについて、上記第1又は第2の実施形態と異なる点を主に説明する。なお、本実施形態の接近回避システムの構成について、上記第1又は第2の実施形態と同一の説明が当てはまるものについては上記第1又は第2の実施形態と同一の符号を付す。 An approach avoidance system according to a third embodiment of the present technology includes a pair of GVS devices and a mobile terminal. The pair of GVS devices and the mobile terminal may be communicatively connected. In the approach avoidance system of this embodiment, the mobile terminal includes an imaging unit, a moving object analysis unit, a velocity calculation unit, and a current value acquisition unit, and the GVS device includes other functional units, unlike the first embodiment. is the main difference between In the following, the approach avoidance system of this embodiment will be mainly described with respect to the differences from the first or second embodiment. Regarding the configuration of the approach avoidance system of this embodiment, the same reference numerals as in the first or second embodiment are assigned to the same description as in the first or second embodiment.

図14及び図15を参照して、本実施形態の接近回避システム1Bについて説明する。図14は、第3の実施形態の接近回避システム1Bの全体構成の一例を示す図である。図15は、第3の実施形態の接近回避システム1Bの機能構成の一例を示す図である。 An approach avoidance system 1B of the present embodiment will be described with reference to FIGS. 14 and 15. FIG. FIG. 14 is a diagram showing an example of the overall configuration of the approach avoidance system 1B of the third embodiment. FIG. 15 is a diagram showing an example of the functional configuration of the approach avoidance system 1B of the third embodiment.

接近回避システム1Bは、図14に示されるように、右耳用GVS装置100Bと、左耳用GVS装置(図示せず)と、から構成される左右一対のGVS装置、モバイル端末200B、及び、電流値データベース500を含む。当該電流値データベース500は、例えばクラウドデータベースでありうる。 As shown in FIG. 14, the approach avoidance system 1B comprises a pair of right and left GVS devices, a mobile terminal 200B, and a left ear GVS device 100B, and a left ear GVS device (not shown). A current value database 500 is included. The current value database 500 can be, for example, a cloud database.

モバイル端末200Bは、通信機能を備える持ち運び可能なコンピュータ端末であり、例えば、携帯電話、スマートフォン、又はタブレット型端末などでありうる。モバイル端末200Bのハードウェア構成は、上記第2の実施形態において説明したモバイル端末200Aと同じでありうる。モバイル端末200Bの機能は、基本的に、プロセッサがメモリに格納された所定の制御プログラムを実行することにより実現される。 The mobile terminal 200B is a portable computer terminal having a communication function, and can be, for example, a mobile phone, a smart phone, or a tablet terminal. The hardware configuration of the mobile terminal 200B can be the same as that of the mobile terminal 200A described in the second embodiment. The functions of the mobile terminal 200B are basically realized by the processor executing a predetermined control program stored in the memory.

モバイル端末200Bは、図15に示されるように、機能部として、イメージング部201、動体解析部202、速度算出部203、電流値取得部204、及び無線通信部205を含みうる。GVS装置100Bは、機能部として、電流制御部114、結果確認部115、送受信部116、及び電極部130を含みうる。 The mobile terminal 200B can include an imaging unit 201, a moving object analysis unit 202, a velocity calculation unit 203, a current value acquisition unit 204, and a wireless communication unit 205 as functional units, as shown in FIG. The GVS device 100B can include a current control unit 114, a result confirmation unit 115, a transmission/reception unit 116, and an electrode unit 130 as functional units.

上記接近回避システム1Bが実行する処理のフローは、全体的には、図6を参照して上記で説明した、第1の実施形態の接近回避システム1が実行する処理のフローと同様でありうる。本実施形態の接近回避システム1Bにおいては、GVS装置100Bが図6に示されるステップS17~S19の処理を実行し、モバイル端末200Bが他のステップの処理を実行することが、第1の実施形態の接近回避システム1との主な相違点である。また、本実施形態の接近回避システム1Bにおいては、モバイル端末200Bの電流値取得部204が、図6に示されるステップS16において検索する電流値データベースは、図14及び図15に示される電流値データベース500(クラウドデータベース)である。 The flow of processing executed by the approach avoidance system 1B can be generally similar to the flow of processing executed by the approach avoidance system 1 of the first embodiment described above with reference to FIG. . In the approach avoidance system 1B of the present embodiment, the GVS device 100B executes the processes of steps S17 to S19 shown in FIG. 6, and the mobile terminal 200B executes the processes of other steps. This is the main difference from the approach avoidance system 1 of . Further, in the approach avoidance system 1B of the present embodiment, the current value database searched by the current value acquisition unit 204 of the mobile terminal 200B in step S16 shown in FIG. 6 is the current value database shown in FIGS. 500 (cloud database).

5.第4の実施形態(前庭電気刺激装置及びモバイル端末を含む第3の例) 5. Fourth Embodiment (Third Example Including Vestibular Electrical Stimulator and Mobile Terminal)

本技術の第4の実施形態に係る接近回避システムは、一対のGVS装置と、モバイル端末と、を含む。当該一対のGVS装置と当該モバイル端末とは通信可能に接続されうる。本実施形態の接近回避システムは、モバイル端末が速度算出部を含み、その他の機能部をGVS装置が含むことが、上記第1の実施形態との主な相違点である。 An approach avoidance system according to a fourth embodiment of the present technology includes a pair of GVS devices and a mobile terminal. The pair of GVS devices and the mobile terminal may be communicatively connected. The main difference between the approach avoidance system of this embodiment and the first embodiment is that the mobile terminal includes a speed calculator and the GVS device includes other functional units.

本実施形態で用いられるモバイル端末は、通信機能を備える持ち運び可能なコンピュータ端末であり、例えば、携帯電話、スマートフォン、又はタブレット型端末などでありうる。当該モバイル端末のハードウェア構成は、上記第2の実施形態において説明したモバイル端末200Aと同じでありうる。モバイル端末の機能は、基本的に、プロセッサがメモリに格納された所定の制御プログラムを実行することにより実現される。 A mobile terminal used in the present embodiment is a portable computer terminal having a communication function, and can be, for example, a mobile phone, a smart phone, or a tablet terminal. The hardware configuration of the mobile terminal can be the same as the mobile terminal 200A described in the second embodiment. The functions of the mobile terminal are basically realized by the processor executing a predetermined control program stored in memory.

本実施形態で用いられるモバイル端末は、機能部として、速度算出部及び無線通信部を含む。本実施形態で用いられる一対のGVS装置のそれぞれは、機能部として、イメージング部、動体解析部、電流値取得部、電流制御部、結果確認部、送受信部、及び電極部を含みうる。 The mobile terminal used in this embodiment includes a speed calculator and a wireless communication unit as functional units. Each of the pair of GVS devices used in this embodiment can include, as functional units, an imaging unit, a moving object analysis unit, a current value acquisition unit, a current control unit, a result confirmation unit, a transmission/reception unit, and an electrode unit.

本実施形態の接近回避システムが実行する処理のフローは、全体的には、図6を用いて上記で説明した、第1の実施形態の接近回避システム1が実行する処理のフローと同様でありうる。本実施形態の接近回避システムにおいては、モバイル端末の速度算出部が図6に示されるステップS14及びS15の処理を実行し、GVS装置が他のステップの処理を実行することが、第1の実施形態の接近回避システム1が実行する処理との主な相違点である。 The flow of processing executed by the approach avoidance system of the present embodiment is generally the same as the flow of processing executed by the approach avoidance system 1 of the first embodiment described above with reference to FIG. sell. In the approach avoidance system of this embodiment, the first implementation is that the speed calculation unit of the mobile terminal executes the processing of steps S14 and S15 shown in FIG. 6, and the GVS device executes the processing of other steps. This is the main difference from the processing executed by the morphological approach avoidance system 1 .

6.第5の実施形態(前庭電気刺激装置及び情報処理装置を含む例) 6. Fifth embodiment (example including vestibular electrical stimulation device and information processing device)

本技術の第5の実施形態に係る接近回避システムは、一対のGVS装置と、情報処理装置と、を含む。当該一対のGVS装置と当該情報処理装置とは通信可能に接続されうる。本実施形態の接近回避システムは、上記第4の実施形態の接近回避システムにおいてモバイル端末が実行する処理を情報処理装置で実行するものである。すなわち、本実施形態の接近回避システムは、第4の実施形態で用いられるモバイル端末を情報処理装置に置き換えたこと以外は、第4の実施形態と同様でありうる。 An approach avoidance system according to a fifth embodiment of the present technology includes a pair of GVS devices and an information processing device. The pair of GVS devices and the information processing device can be communicatively connected. In the approach avoidance system of the present embodiment, an information processing device executes the processing that is executed by the mobile terminal in the approach avoidance system of the fourth embodiment. That is, the approach avoidance system of this embodiment can be the same as that of the fourth embodiment except that the mobile terminal used in the fourth embodiment is replaced with an information processing device.

上記情報処理装置は、通信機能を備えるコンピュータ装置であり、例えばサーバ装置でありうる。当該サーバ装置は、1又は複数の物理サーバであってもよく、1又は複数の物理サーバ上で構築された1又は複数の仮想サーバであってもよい。上記複数の物理サーバは、地理的に同一の場所に配置されてもよく、地理的に分散されて配置されてもよい。 The information processing device is a computer device having a communication function, and may be, for example, a server device. The server device may be one or more physical servers, or one or more virtual servers constructed on one or more physical servers. The plurality of physical servers may be geographically located at the same location, or may be geographically distributed.

上記情報処理装置のハードウェア構成は、通信機能を備える一般的なコンピュータ装置と同様でありうる。当該情報処理装置は、一例として、プロセッサ、メモリ、通信インタフェース、入力装置、及び出力装置を備えることができる。情報処理装置の機能は、基本的に、プロセッサがメモリに格納された所定の制御プログラムを実行することにより実現される。 The hardware configuration of the information processing device may be the same as that of a general computer device having a communication function. The information processing device can include, for example, a processor, memory, communication interface, input device, and output device. The functions of the information processing device are basically realized by the processor executing a predetermined control program stored in the memory.

本実施形態で用いられる情報処理装置は、上記第4の実施形態で説明したモバイル端末と同一の機能部を含むものであり、具体的には速度算出部及び無線通信部を含む。本実施形態で用いられる一対のGVS装置のそれぞれは、上記第4の実施形態のGVS装置と同様に、機能部として、イメージング部、動体解析部、電流値取得部、電流制御部、結果確認部、送受信部、及び電極部を含みうる。 The information processing apparatus used in this embodiment includes the same functional units as those of the mobile terminal described in the fourth embodiment, and specifically includes a speed calculation unit and a wireless communication unit. Each of the pair of GVS devices used in this embodiment has, as in the GVS device of the fourth embodiment, functional units such as an imaging unit, a moving object analysis unit, a current value acquisition unit, a current control unit, and a result confirmation unit. , a transceiver unit, and an electrode unit.

本実施形態の接近回避システムにおいて、情報処理装置の速度算出部が図6に示されるステップS14及びS15の処理を実行し、GVS装置が他のステップの処理を実行する。 In the approach avoidance system of this embodiment, the speed calculation unit of the information processing device executes the processing of steps S14 and S15 shown in FIG. 6, and the GVS device executes the processing of other steps.

7.第6の実施形態(地図情報を利用する例) 7. Sixth Embodiment (Example of using map information)

本技術の第6の実施形態に係る接近回避システムは、一対のGVS装置を含む。本実施形態の接近回避システムは、位置情報及び地図情報を利用することなどが、第1の実施形態と相違する。以下、本実施形態の接近回避システムについて、上記第1の実施形態と異なる点を主に説明する。なお、本実施形態の接近回避システムの構成について、上記第1の実施形態と同一の説明が当てはまるものについては上記第1の実施形態と同一の符号を付す。 An approach avoidance system according to a sixth embodiment of the present technology includes a pair of GVS devices. The approach avoidance system of this embodiment differs from that of the first embodiment in that it uses position information and map information. In the following, the approach avoidance system of this embodiment will be mainly described with respect to the differences from the first embodiment. Regarding the configuration of the approach avoidance system of the present embodiment, the same reference numerals as those of the first embodiment are assigned to the same descriptions as those of the first embodiment.

図16及び図17を参照して、本実施形態の接近回避システム1Cについて説明する。図16は、第6の実施形態の接近回避システム1Cの全体構成の一例を示す図である。図17は、第6の実施形態の接近回避システム1Cの機能構成の一例を示す図である。 The approach avoidance system 1C of this embodiment will be described with reference to FIGS. 16 and 17. FIG. FIG. 16 is a diagram showing an example of the overall configuration of the approach avoidance system 1C of the sixth embodiment. FIG. 17 is a diagram showing an example of the functional configuration of the approach avoidance system 1C of the sixth embodiment.

接近回避システム1Cは、図16に示されるように、右耳用GVS装置100Cと、左耳用GVS装置(図示せず)と、から構成される左右一対のGVS装置、及び、地図情報を保持する地図情報データベース600を含む。当該地図情報データベース600は、例えばクラウドデータベースでありうる。 The approach avoidance system 1C, as shown in FIG. 16, holds a pair of left and right GVS devices composed of a right ear GVS device 100C and a left ear GVS device (not shown), and map information. It includes a map information database 600 that The map information database 600 may be, for example, a cloud database.

図16に示されるGVS装置100Cの本体部110Cのハードウェア構成は、図4を参照して説明した第1の実施形態の本体部110のハードウェアの構成要素に加えて、位置情報取得装置を含む。位置情報取得装置は、例えばGPS(Global Positioning System)受信機などにより構成されており、GVS装置100Cの現在の位置情報、すなわち、ユーザUの現在の位置情報を取得する。 The hardware configuration of the main unit 110C of the GVS device 100C shown in FIG. include. The location information acquisition device is configured by a GPS (Global Positioning System) receiver, for example, and acquires the current location information of the GVS device 100C, that is, the current location information of the user U.

図17に示されるGVS装置100Cの機能部は、位置情報取得部117及び経路選定部118を含むことが、図5を参照して説明した第1の実施形態で用いられるGVS装置100との相違点である。位置情報取得部117は、主に、プロセッサ、メモリ、及び位置情報取得装置によって実現される。経路選定部118は、主に、プロセッサ及びメモリにより実現される。 The functional units of the GVS device 100C shown in FIG. 17 differ from the GVS device 100 used in the first embodiment described with reference to FIG. It is a point. The location information acquisition unit 117 is mainly implemented by a processor, memory, and location information acquisition device. The route selection unit 118 is mainly realized by a processor and memory.

図18を参照して、GVS装置100Cの動作、すなわち、本実施形態の接近回避システム1Cが実行する処理の流れについて説明する。図18は、GVS装置100Cが実行する処理の一例を示すフローチャートである。 The operation of the GVS device 100C, that is, the flow of processing executed by the approach avoidance system 1C of the present embodiment will be described with reference to FIG. FIG. 18 is a flowchart showing an example of processing executed by the GVS device 100C.

図18に示されるフローチャートは、ステップS15C及びS21~S23を含むことが、図6を参照して上記で説明した第1の実施形態のフローと相違する。その他のステップ、すなわち、ステップS11~S14及びS16~S19は、上記第1の実施形態において説明したとおりである。 The flow chart shown in FIG. 18 differs from the flow of the first embodiment described above with reference to FIG. 6 in that it includes steps S15C and S21-S23. Other steps, that is, steps S11 to S14 and S16 to S19 are as described in the first embodiment.

本実施形態の接近回避システム1Cにおいて、位置情報取得部117は、ユーザUの現在の位置情報を取得する(ステップS21)。次に、経路選定部118は、地図情報データベース600に保持される地図情報と、ステップS21において取得された位置情報と、に基づいて、ユーザUが目的地に到達するまでの経路を選定する(ステップS22)。当該目的地に関する情報は、予め設定されてよい。例えば、GVS装置100Cは、ユーザUからの情報の入力を受け付ける入力装置を備えてよく、当該入力装置によって受け付けられた目的地に関する情報が、メモリ12に格納されてもよい。 In the approach avoidance system 1C of the present embodiment, the location information acquisition unit 117 acquires the current location information of the user U (step S21). Next, the route selection unit 118 selects a route for the user U to reach the destination based on the map information held in the map information database 600 and the position information acquired in step S21 ( step S22). Information about the destination may be preset. For example, the GVS device 100C may include an input device that receives input of information from the user U, and the destination information received by the input device may be stored in the memory 12 .

次に、経路選定部118は、地図情報から上記経路に関する情報(以下、経路情報ともいう)を取得する(ステップS23)。当該経路情報には、例えば、当該経路に存在する障害物に関する情報が含まれうる。 Next, the route selection unit 118 acquires information about the route (hereinafter also referred to as route information) from the map information (step S23). The route information may include, for example, information regarding obstacles present on the route.

上記ステップS21~S23の処理は、例えば、図18に示されるステップS11~S14の処理と平行して実施されてもよい。 The processing of steps S21 to S23 may be performed in parallel with the processing of steps S11 to S14 shown in FIG. 18, for example.

速度算出部112は、上記速度dVを算出する際に、上記経路に関する情報を用いることができる(ステップS15C)。上記速度dVの算出方法は、上記第1の実施形態におけるステップS15で説明したとおりである。 The speed calculator 112 can use the information about the route when calculating the speed dV (step S15C). The method for calculating the velocity dV is as described in step S15 in the first embodiment.

本実施形態の接近回避システム1Cは、経路情報を加味して上記速度dVを算出することが可能である。そのため、接近回避システム1Cは、ステップS22において選定された経路を通るようにユーザUの動作を誘導することができ、すなわち、ユーザUを上記目的地まで自動で誘導することができる。また、上記経路情報が経路に存在する障害物に関する情報を含む場合、接近回避システム1Cは、当該障害物との接近を回避しながら目的地に到達できるように、ユーザUを誘導することができる。 The approach avoidance system 1C of the present embodiment can calculate the velocity dV in consideration of the route information. Therefore, the approach avoidance system 1C can guide the motion of the user U to follow the route selected in step S22, that is, can automatically guide the user U to the destination. Further, when the route information includes information about obstacles existing on the route, the approach avoidance system 1C can guide the user U so that the user U can reach the destination while avoiding approaching the obstacles. .

8.第7の実施形態(第三者が遠隔制御する例) 8. Seventh embodiment (example of remote control by a third party)

本技術の第7の実施形態に係る接近回避システムは、一対のGVS装置を含む。本実施形態の接近回避システムは、ユーザ以外の第三者によって使用される操作端末装置をさらに含み、当該第三者がGVS装置を遠隔で制御可能であることなどが、第1の実施形態と相違する。より詳細には、当該第三者は、本実施形態の接近回避システムを用いることで、ユーザの視界情報をモニタしながらユーザが装着するGVS装置を遠隔で制御することができる。以下、本実施形態の接近回避システムについて、記第1の実施形態と異なる点を主に説明する。なお、本実施形態の接近回避システムの構成について、上記第1の実施形態と同一の説明が当てはまるものについては上記第1の実施形態と同一の符号を付す。 An approach avoidance system according to a seventh embodiment of the present technology includes a pair of GVS devices. The approach avoidance system of this embodiment further includes an operation terminal device used by a third party other than the user, and the third party can remotely control the GVS device. differ. More specifically, by using the approach avoidance system of this embodiment, the third party can remotely control the GVS device worn by the user while monitoring the visibility information of the user. In the following, the approach avoidance system of this embodiment will be described mainly with respect to the differences from the first embodiment. Regarding the configuration of the approach avoidance system of the present embodiment, the same reference numerals as those of the first embodiment are assigned to the same descriptions as those of the first embodiment.

図19及び図20を参照して、本実施形態の接近回避システム1Dの構成について説明する。図19は、第7の実施形態の接近回避システム1Dの全体構成の一例を示す図である。図20は、第7の実施形態の接近回避システム1Dの機能構成の一例を示す図である。 The configuration of the approach avoidance system 1D of the present embodiment will be described with reference to FIGS. 19 and 20. FIG. FIG. 19 is a diagram showing an example of the overall configuration of an approach avoidance system 1D according to the seventh embodiment. FIG. 20 is a diagram showing an example of the functional configuration of the approach avoidance system 1D of the seventh embodiment.

接近回避システム1Dは、図19に示されるように、右耳用GVS装置100と、左耳用GVS装置(図示せず)と、から構成される左右一対のGVS装置、及び、ユーザU以外の第三者によって使用される操作端末装置300を含む。当該一対のGVS装置と当該操作端末装置300とは通信可能に接続されうる。操作端末装置300は、一対のGVS装置を遠隔で制御することが可能な装置でありうる。 The approach avoidance system 1D, as shown in FIG. An operation terminal device 300 used by a third party is included. The pair of GVS devices and the operation terminal device 300 can be communicably connected. The operation terminal device 300 can be a device capable of remotely controlling a pair of GVS devices.

操作端末装置300は、通信機能を備えるコンピュータ装置である。操作端末装置300は、例えば、スマートフォン、携帯電話、タブレット端末、ラップトップ型パーソナルコンピュータ、及びデスクトップ型パーソナルコンピュータなどである。操作端末装置300のハードウェア構成は、通信機能を備える一般的なコンピュータ装置と同様の構成でありうる。操作端末装置300は、一例として、プロセッサ、メモリ、通信インタフェース、入力装置、及び出力装置を備えることができる。操作端末装置300の機能は、基本的に、プロセッサがメモリに格納された所定の制御プログラムを実行することにより実現される。 The operation terminal device 300 is a computer device having a communication function. The operation terminal device 300 is, for example, a smart phone, a mobile phone, a tablet terminal, a laptop personal computer, a desktop personal computer, or the like. The hardware configuration of the operation terminal device 300 can be the same as that of a general computer device having a communication function. The operation terminal device 300 can include, as an example, a processor, memory, communication interface, input device, and output device. The functions of the operation terminal device 300 are basically realized by the processor executing a predetermined control program stored in the memory.

図20に示されるGVS装置100の各機能部の動作は、第1の実施形態で説明したとおりである。操作端末装置300は、図20に示されるように、機能部として、視界情報取得部301、視界表示部302、及び電流値設定部303を含む。 The operation of each functional unit of the GVS device 100 shown in FIG. 20 is as described in the first embodiment. As shown in FIG. 20, the operation terminal device 300 includes a visibility information acquisition unit 301, a visibility display unit 302, and a current value setting unit 303 as functional units.

図21を参照して、GVS装置100及び操作端末装置300の動作、すなわち、本実施形態の接近回避システム1Dが実行する処理の流れについて説明する。図21は、GVS装置100及び操作端末装置300が実行する処理の一例を示すフローチャートである。 The operations of the GVS device 100 and the operation terminal device 300, that is, the flow of processing executed by the approach avoidance system 1D of the present embodiment will be described with reference to FIG. FIG. 21 is a flowchart showing an example of processing executed by the GVS device 100 and the operation terminal device 300. FIG.

図21に示されるフローチャートは、ステップS31~S34を含むことが、図6を参照して上記で説明した第1の実施形態のフローと相違する。その他のステップ、すなわち、ステップS11~S19は、上記第1の実施形態において説明したとおりである。 The flowchart shown in FIG. 21 differs from the flow of the first embodiment described above with reference to FIG. 6 in that steps S31 to S34 are included. Other steps, that is, steps S11 to S19 are as described in the first embodiment.

本実施形態の接近回避システム1Dにおいて、視界情報取得部301は、ユーザUの視界を特定可能な視界情報を取得する(ステップS31)。当該視界情報は、例えば、ユーザUが目で見渡すことができる範囲を確認可能な画像情報であってもよい。具体的には、当該視界情報は、ユーザUが目で見渡すことができる範囲に存在する動体を確認可能な画像情報であってもよい。当該視界情報は、例えば、GVS装置100のイメージング部120によって取得された情報でもよく、又は、ユーザUに装着されたGVS装置100以外のウェアラブルデバイスによって取得された情報でもよい。 In the approach avoidance system 1D of the present embodiment, the visibility information acquisition unit 301 acquires visibility information that can specify the visibility of the user U (step S31). The field-of-view information may be, for example, image information that allows the user U to check the range that the user U can see with his or her eyes. Specifically, the field-of-view information may be image information that allows the user U to confirm a moving object that exists within a range that the user U can see. The field-of-view information may be information acquired by the imaging unit 120 of the GVS device 100, or information acquired by a wearable device other than the GVS device 100 worn by the user U, for example.

視界表示部302は、ステップS31において取得されユーザUの視界情報を表示する(ステップS32)。視界表示部302は、例えば、当該視界情報を操作端末装置300の出力装置(例えばディスプレイ)に表示してもよい。上記第三者は、視界表示部302をモニタすることができ、これによりユーザUの視界を経時的に捉えることができる。 The visibility display unit 302 displays the visibility information of the user U acquired in step S31 (step S32). The view display unit 302 may display the view information on the output device (for example, display) of the operation terminal device 300, for example. The third person can monitor the field of view display unit 302, and thereby grasp the field of view of the user U over time.

次に、ステップS16において電流値取得部113が電流値データベースから取得した電流値Iが、上記第三者によって参照されてもよい(ステップS33)。なお、GVS装置100において、電流値取得部113は必須の機能部ではない。GVS装置100が電流値取得部113を含まない場合、ステップS33において参照されうる電流値は、電流値Iの代わりに、電極部130に印加されうる所定の電流値であってもよい。 Next, the current value I obtained from the current value database by the current value obtaining unit 113 in step S16 may be referred to by the third party (step S33). Note that the current value acquisition unit 113 is not an essential functional unit in the GVS device 100 . If the GVS device 100 does not include the current value acquiring unit 113, the current value that can be referred to in step S33 may be a predetermined current value that can be applied to the electrode unit 130 instead of the current value I.

電流値設定部303は、視界表示部302をモニタする上記第三者によって決定される電流値を、電流値Iとして(又は所定の電流値として)設定することができる(ステップS34)。ステップS34の後に実行されるステップS17において、電流制御部114は、電流値設定部303によって設定された電流値の電流を電極部130に流す。 The current value setting unit 303 can set the current value determined by the third party who monitors the visual field display unit 302 as the current value I (or as the predetermined current value) (step S34). In step S<b>17 executed after step S<b>34 , the current control unit 114 causes the electrode unit 130 to flow the current having the current value set by the current value setting unit 303 .

本実施形態の接近回避システム1Dの適用例について説明する。例えば、歩行中に周囲の動体と衝突又は接触するリスクに晒される機会が比較的多いと考えられる人(例えば、子供、視覚障害者、又は認知症患者など)が、当該接近回避システム1Dのユーザであってもよい。例えば、第三者は、本実施形態の接近回避システム1Dを用いることで、当該ユーザの視界情報をモニタして、当該ユーザが動体と衝突する可能性があると判断とした際に、所定の電流値を設定して、当該ユーザが動体との接近を回避できるように誘導することが可能である。これにより、第三者は、離れた場所からユーザを見守りつつ安全な歩行をサポートすることができる。なお、本実施形態の接近回避システム1Dの対象は、上述したような人に限定されるものではなく、例えば他の人でもよく、人以外の動物でもよい。 An application example of the approach avoidance system 1D of this embodiment will be described. For example, a person (for example, a child, a visually impaired person, a dementia patient, etc.) who is considered to be exposed to the risk of colliding or contacting surrounding moving bodies while walking is a user of the approach avoidance system 1D. may be For example, by using the approach avoidance system 1D of the present embodiment, a third party monitors the visibility information of the user and determines that the user may collide with a moving object. By setting the current value, it is possible to induce the user to avoid approaching the moving object. As a result, a third party can support safe walking while watching over the user from a remote location. The object of the approach avoidance system 1D of the present embodiment is not limited to humans as described above, and may be, for example, another person or an animal other than a person.

本実施形態の接近回避システム1Dの変形例について説明する。当該変形例において、ユーザが装着するGVS装置は、ユーザの音声及び周囲の環境音などの音を取得するマイクロフォンを備えてもよい。さらに、当該ユーザは指に圧力センサを装着してもよい。一方、ユーザ以外の第三者が操作する操作端末装置は音を取得するマイクロフォン及び音を出力するスピーカを備えてよく、さらに、当該第三者は指に圧力センサを装着してもよい。GVS装置、圧力センサ、及び操作端末装置は、相互に無線(例えばBluetooth(登録商標))によって互いに通信可能に構成される。このような構成であることにより、第三者は、遠隔にいながらも、ユーザの周囲環境をリアルタイムで感じつつユーザの動作を制御することが可能である。そのため、本変形例は、例えば、遠隔での旅行又はデートといったエンターテインメント性のある用途にも適用されうる。 A modification of the approach avoidance system 1D of this embodiment will be described. In this variant, the GVS device worn by the user may comprise a microphone for picking up sounds such as the user's voice and ambient environmental sounds. Additionally, the user may wear a pressure sensor on their finger. On the other hand, an operation terminal device operated by a third party other than the user may include a microphone for acquiring sound and a speaker for outputting sound, and the third party may wear a pressure sensor on their finger. The GVS device, the pressure sensor, and the operation terminal device are configured to communicate with each other wirelessly (for example, Bluetooth (registered trademark)). With such a configuration, a third party can control the user's actions while being remotely aware of the user's surrounding environment in real time. Therefore, this modification can also be applied to entertainment applications such as remote travel or dating, for example.

9.第8の実施形態(前庭電気刺激装置同士が相互通信する例) 9. Eighth embodiment (example of mutual communication between vestibular electrical stimulation devices)

本技術の第8の実施形態に係る接近回避システムは、一対のGVS装置を複数含む。複数存在する一対のGVS装置同士は、通信可能に接続されうる。以下、本実施形態の接近回避システムについて、上記第1の実施形態と異なる点を主に説明する。 An approach avoidance system according to an eighth embodiment of the present technology includes a plurality of pairs of GVS devices. A plurality of pairs of GVS devices can be communicatively connected. In the following, the approach avoidance system of this embodiment will be mainly described with respect to the differences from the first embodiment.

図22及び図23を参照して、本実施形態の接近回避システム10について説明する。図22は、第8の実施形態の接近回避システム10の全体構成の一例を示す図である。図23は、第8の実施形態の接近回避システム10の機能構成の一例を示す図である。 The approach avoidance system 10 of this embodiment will be described with reference to FIGS. 22 and 23. FIG. FIG. 22 is a diagram showing an example of the overall configuration of the approach avoidance system 10 of the eighth embodiment. FIG. 23 is a diagram showing an example of the functional configuration of the approach avoidance system 10 of the eighth embodiment.

図22に示されるように、本実施形態の接近回避システム10において、ユーザUaはGVS装置100aを装着しており、ユーザUbはGVS装置100bを装着している。すなわち、本実施形態の接近回避システム10は、複数のユーザを対象としており、当該複数のユーザのそれぞれが、GVS装置を装着する。図22に示されるGVS装置100a及びGVS装置100bは、それぞれ、右耳用及び左耳用から構成される左右一対のGVS装置である。すなわち、図22に示される接近回避システム10は、一対のGVS装置を2つ含む。なお、本実施形態で用いられる一対のGVS装置の数は、2つに限定されず、2つ以上であればよい。 As shown in FIG. 22, in the approach avoidance system 10 of this embodiment, the user Ua wears the GVS device 100a, and the user Ub wears the GVS device 100b. That is, the approach avoidance system 10 of the present embodiment is intended for a plurality of users, and each of the plurality of users wears a GVS device. The GVS device 100a and the GVS device 100b shown in FIG. 22 are a pair of left and right GVS devices configured for right and left ears, respectively. That is, the approach avoidance system 10 shown in FIG. 22 includes two pairs of GVS devices. Note that the number of pairs of GVS devices used in this embodiment is not limited to two, and may be two or more.

図23に示されるように、GVS装置100aは認識信号生成部119aを含み、GVS装置100bは認識信号生成部119bを含む。これらの認識信号生成部119a、119bは、第1の実施形態において用いられるGVS装置100との相違点である。図23に示される機能部のうち、認識信号生成部119a、119b以外の機能部は、上記第1の実施形態において説明したとおりである。 As shown in FIG. 23, the GVS device 100a includes a recognition signal generator 119a, and the GVS device 100b includes a recognition signal generator 119b. These recognition signal generators 119a and 119b are different from the GVS device 100 used in the first embodiment. Of the functional units shown in FIG. 23, the functional units other than the recognition signal generators 119a and 119b are the same as those described in the first embodiment.

GVS装置100aの認識信号生成部119aは、他のGVS装置100bに、自身のGVS装置100aを認識させるための認識信号を生成する。同様に、GVS装置100bの認識信号生成部119bは、他のGVS装置100aに、自身のGVS装置100bを認識させるための認識信号を生成する。このように、本実施形態の接近回避システム10では、一対のGVS装置100a、100bのそれぞれが、他のGVS装置に自身のGVS装置を認識させる認識信号を生成する認識信号生成部を含む。当該認識信号は、例えば、自身のGVS装置に関する情報を含むことができ、具体的には、自身のGVS装置によって誘導されるユーザの動作の大きさ及び方向に関する情報を含みうる。 The recognition signal generation unit 119a of the GVS device 100a generates a recognition signal for causing another GVS device 100b to recognize its own GVS device 100a. Similarly, the recognition signal generation unit 119b of the GVS device 100b generates a recognition signal for causing the other GVS device 100a to recognize its own GVS device 100b. Thus, in the approach avoidance system 10 of the present embodiment, each of the pair of GVS devices 100a and 100b includes a recognition signal generator that generates a recognition signal that causes the other GVS device to recognize its own GVS device. The recognition signal may, for example, contain information about the own GVS device, and in particular about the magnitude and direction of the user's movements guided by the own GVS device.

GVS装置100a、100bは、それぞれ、上記認識信号を送受信する送受信部116a、116bを含む。上記認識信号は、例えばRF信号であってよく、この場合、送受信部116a、116bは、RF送受信部であってよい。 The GVS devices 100a, 100b respectively include transceivers 116a, 116b for transmitting and receiving the recognition signal. The recognition signal may be, for example, an RF signal, and in this case, the transceivers 116a and 116b may be RF transceivers.

本実施形態で用いられるGVS装置100a、100bは、他のGVS装置の認識信号を受信することで、当該認識信号をユーザ同士の接近回避に利用することができる。具体的には、GVS装置100aの速度算出部112aは、送受信部116aが受信した他のGVS装置100bからの認識信号に基づいて、上記速度dVを算出することができる。同様に、GVS装置100bの速度算出部112bは、送受信部116bが受信した他のGVS装置100aからの認識信号に基づいて、上記速度dVを算出することができる。当該速度dVの算出方法は、上記第1の実施形態におけるステップS15で説明したとおりである。当該認識信号が、上述したようなユーザの動作の大きさ及び方向に関する情報を含む場合、他のGVS装置からの認識信号を用いて速度dVを算出することで、他のユーザとの接近を回避しうる速度dVが得られうる。 By receiving recognition signals from other GVS devices, the GVS devices 100a and 100b used in this embodiment can use the recognition signals to avoid users from approaching each other. Specifically, the speed calculator 112a of the GVS device 100a can calculate the speed dV based on the recognition signal received by the transmitter/receiver 116a from the other GVS device 100b. Similarly, the speed calculator 112b of the GVS device 100b can calculate the speed dV based on the recognition signal from the other GVS device 100a received by the transmitter/receiver 116b. The method for calculating the velocity dV is as described in step S15 in the first embodiment. If the recognition signal includes information about the size and direction of the user's motion as described above, the velocity dV is calculated using the recognition signals from other GVS devices to avoid approaching other users. possible velocity dV can be obtained.

10.第9の実施形態(行動履歴を利用する例) 10. Ninth Embodiment (Example Using Action History)

本技術の第9の実施形態に係る接近回避システムは、一対のGVS装置を複数含む。複数存在する一対のGVS装置同士は、通信可能に接続されうる。本実施形態の接近回避システムは、行動履歴データベースをさらに含み、当該行動履歴データベースを利用することが、上記第8の実施形態との主な相違点である。以下、本実施形態の接近回避システムについて、上記第8の実施形態と異なる点を主に説明する。なお、本実施形態の接近回避システムの構成について、上記第8の実施形態と同一の説明が当てはまるものについては上記第8の実施形態と同一の符号を付す。 An approach avoidance system according to a ninth embodiment of the present technology includes a plurality of pairs of GVS devices. A plurality of pairs of GVS devices can be communicatively connected. The approach avoidance system of this embodiment further includes an action history database, and the main difference from the eighth embodiment is that the action history database is used. In the following, the approach avoidance system of this embodiment will be mainly described with respect to the differences from the eighth embodiment. Regarding the configuration of the approach avoidance system of the present embodiment, the same reference numerals as those of the eighth embodiment are assigned to those to which the same description as that of the eighth embodiment applies.

図24は、第9の実施形態の接近回避システム10Aの全体構成の一例を示す図である。図24に示されるように、本実施形態の接近回避システム10Aは、行動履歴管理装置700を含む。行動履歴管理装置700は、通信機能を備えるコンピュータ装置であり、例えばクラウドサーバであってもよい。行動履歴管理装置700は、1又は複数の一対のGVS装置と通信可能に接続されうる。 FIG. 24 is a diagram showing an example of the overall configuration of the approach avoidance system 10A of the ninth embodiment. As shown in FIG. 24, the approach avoidance system 10A of this embodiment includes a behavior history management device 700. FIG. The action history management device 700 is a computer device having a communication function, and may be a cloud server, for example. The action history management device 700 can be communicably connected to one or more pairs of GVS devices.

上記行動履歴管理装置700のハードウェア構成は、通信機能を備える一般的なコンピュータ装置と同様でありうる。当該行動履歴管理装置700は、一例として、プロセッサ、メモリ、通信インタフェース、入力装置、及び出力装置を備えることができる。行動履歴管理装置700の機能は、基本的に、プロセッサがメモリに格納された所定の制御プログラムを実行することにより実現される。 The hardware configuration of the action history management device 700 can be the same as that of a general computer device having a communication function. The action history management device 700 can include, for example, a processor, a memory, a communication interface, an input device, and an output device. The functions of the action history management device 700 are basically realized by the processor executing a predetermined control program stored in the memory.

行動履歴管理装置700は、行動履歴データベースを含む。行動履歴データベースは、ユーザごとの行動履歴情報を保持する。行動履歴情報は、例えば、GVS装置を装着したユーザの過去の行動に関連する情報であってよく、具体的には、時刻情報、GPS情報、地図情報、加速度情報、及び周囲環境のイメージング情報などが含まれうる。 Action history management device 700 includes an action history database. The action history database holds action history information for each user. The action history information may be, for example, information related to past actions of the user wearing the GVS device, and specifically includes time information, GPS information, map information, acceleration information, imaging information of the surrounding environment, and the like. can be included.

本実施形態において用いられるGVS装置100a、100bは、それぞれ、図23を参照して説明した第8の実施形態におけるGVS装置100a、100bの機能部を含む。さらに、本実施形態において用いられるGVS装置100a、100bは、それぞれ、機能部として、情報取得部を含む。情報取得部は、他のGVS装置からの認識信号に基づいて、当該他のGVS装置を装着している他のユーザの行動履歴を保持する行動履歴データベースから、当該他のユーザの行動履歴を取得することがきる。例えば、GVS装置100aの情報取得部は、他のGVS装置100bからの認識信号に基づいて、当該他のGVS装置100bを装着している他のユーザUbの行動履歴を保持する行動履歴データベースから、ユーザUbの行動履歴を取得することができる。 The GVS devices 100a and 100b used in this embodiment respectively include the functional units of the GVS devices 100a and 100b in the eighth embodiment described with reference to FIG. Furthermore, the GVS devices 100a and 100b used in this embodiment each include an information acquisition unit as a functional unit. Based on the recognition signal from the other GVS device, the information acquisition unit acquires the action history of the other user from the action history database holding the action history of the other user wearing the other GVS device. can do For example, the information acquisition unit of the GVS device 100a, based on the recognition signal from the other GVS device 100b, from the action history database holding the action history of the other user Ub wearing the other GVS device 100b, User Ub's action history can be acquired.

行動履歴管理装置700は、機能部として行動予測部を含んでもよい。当該行動予測部は、行動履歴情報に基づいて、ユーザの行動を予測して予測速度ベクトルVpを算出することができる。当該行動予測部は、例えば、ディープラーニングなどの機械学習によって実現されうる。 The action history management device 700 may include an action prediction section as a functional section. The behavior prediction unit can predict the behavior of the user and calculate the predicted velocity vector Vp based on the behavior history information. The action prediction unit can be realized by machine learning such as deep learning, for example.

GVS装置100a、100bの各情報取得部は、行動履歴管理装置700の行動予測部から、上記予測速度ベクトルVpを取得することができる。例えば、GVS装置100aは、他のGVS装置100bを装着する他のユーザUbの予測速度ベクトルVpを取得することができる。この場合、GVS装置100aの速度算出部112aは、当該他のユーザUbの予測速度ベクトルVpを用いて、上記速度dVを算出することができる。このように、他のユーザの予測速度ベクトルVpを用いて速度dVを算出することで、他のユーザとの接近をより精度良く回避することができる。 Each information acquisition unit of the GVS devices 100 a and 100 b can acquire the predicted velocity vector Vp from the action prediction unit of the action history management device 700 . For example, the GVS device 100a can acquire the predicted velocity vector Vp of another user Ub wearing another GVS device 100b. In this case, the velocity calculator 112a of the GVS device 100a can calculate the velocity dV using the predicted velocity vector Vp of the other user Ub. By calculating the velocity dV using the predicted velocity vector Vp of the other user in this way, it is possible to more accurately avoid approaching the other user.

11.第10の実施形態(人の密集及び密接を回避するためのシステム) 11. Tenth embodiment (system for avoiding crowding and close contact of people)

本技術の第10の実施形態は、本技術の接近回避システムであって、人の密集及び密接を回避するために用いられるシステムである。当該接近回避システムにおいて、対象は人であり、周囲環境に存在する動体も人である。このような条件下で本技術の接近回避システムを用いることで、人同士の接近を回避することができ、その結果、人の密集及び密接を回避することができる。 A tenth embodiment of the present technology is an approach avoidance system of the present technology, which is used to avoid crowding and close contact of people. In the approach avoidance system, the object is a person, and the moving object existing in the surrounding environment is also a person. By using the approach avoidance system of the present technology under such conditions, it is possible to avoid the approach of people, and as a result, it is possible to avoid the crowding and close contact of people.

上記人の密集及び密接を回避するための接近回避システムは、例えば、子供が運動する時又は遊ぶ時に密集及び密接することを防ぐサービスのために用いられうる。以下、当該サービスの一例について説明する。 The access avoidance system for avoiding crowding and closeness of people can be used, for example, for services that prevent crowding and closeness when children exercise or play. An example of the service will be described below.

上記サービスは、公園、学校の校庭、及びアミューズメントパークなどの特定の領域内で実施されることを前提とする。当該サービスの利用者は、当該サービスの申し込み用のwebサイトに必要事項を入力して、又は、当該サービスを提供する場所へ行って紙面に必要事項を記入して、サービス提供者とサービス利用に関する契約を締結する。これにより、サービスの提供が開始される。利用者に提供される装置及びサービスは、例えば、GVS装置、接近回避システムの定期メンテナンス、GVS装置の電流値データベース、他利用者の行動履歴データベース、第三者(特に子供の親)が操作する制御ツール、並びに、ARゴーグル、VRゴーグル又はヘッドマウントディスプレイにより視聴可能な映像又はゲームコンテンツなどでありうる。 The above services are assumed to be implemented within specific areas such as parks, school playgrounds, and amusement parks. The user of the service can enter the necessary information on the website for applying for the service, or go to the place where the service is provided and fill in the necessary information We signed a contract. Service provision is thereby started. Devices and services provided to users include, for example, the GVS device, regular maintenance of the approach avoidance system, the current value database of the GVS device, the action history database of other users, and third parties (especially parents of children). It can be a control tool, video or game content viewable through AR goggles, VR goggles or a head-mounted display, and the like.

上記サービスによって、公園、学校の校庭、及びアミューズメントパークなどの子供が密状態になりやすい場所での密集及び密接を抑制することができる。 With the above services, crowding and close contact can be suppressed in places where children tend to be crowded, such as parks, school playgrounds, and amusement parks.

12.変形例(車酔い抑制システム) 12. Modified example (car sickness control system)

本技術の接近回避システムの基本構成は、例えば、車酔いを抑制する技術に応用されうる。以下、本技術の変形例として、車酔い抑制システムについて説明する。 The basic configuration of the approach avoidance system of the present technology can be applied, for example, to technology for suppressing car sickness. Hereinafter, a car sickness suppression system will be described as a modified example of the present technology.

本変形例の車酔い抑制システムの概要を説明する。当該車酔い抑制システムは、完全自動運転化され、且つ、車窓が全面ディスプレイ化された自動車向けの技術であり、当該自動車に搭乗する人の車酔いを抑制することを目的とする。本システムでは、上記実施形態において説明したイメージング部を赤外線及び可視光イメージング部として構成する。そして、本システムは、上記実施形態で説明したGVS装置を、動体との接近回避のためではなく、実際の加速度と映像中の加速度との差によって生じる車内での酔い抑制のために利用する。 An outline of the car sickness suppression system of this modified example will be described. The motion sickness suppression system is a technology for vehicles that are fully automated and whose windows are full-screen displays, and aims to suppress motion sickness of passengers in the vehicle. In this system, the imaging section described in the above embodiment is configured as an infrared and visible light imaging section. This system uses the GVS device described in the above embodiment not to avoid approaching a moving object, but to suppress in-vehicle motion sickness caused by the difference between the actual acceleration and the acceleration in the image.

図25を参照して、上記車酔いの原因について説明する。上記自動車に搭乗している際に、車窓全面に表示されている映像を見ていると、搭乗者の前庭により感知される加速度(実際の加速度)と、搭乗者が視覚情報から感じる加速度との間に差が生じる場合がある。すなわち、前庭によって感知された情報と、視覚により得られた情報との間には、不整合が生じる場合がある。このような前庭情報と視覚情報との不整合が、車酔いの原因となりうる。 The cause of the car sickness will be described with reference to FIG. 25 . Looking at the image displayed on the entire surface of the car window while riding in the above car, the acceleration sensed by the passenger's vestibule (actual acceleration) and the acceleration felt by the passenger based on visual information There may be differences between That is, there may be a mismatch between the information sensed by the vestibule and the information obtained visually. Such inconsistency between vestibular information and visual information can cause car sickness.

図26を参照して、上記車酔い抑制システムについて説明する。図26は、本変形例の車酔い抑制システム20の一例を説明するための模式図である。車酔い抑制システム20は、右耳用GVS装置103と、左耳用GVS装置(図示せず)と、から構成される左右一対のGVS装置を含む。一対のGVS装置を装着するユーザUは、図26に示される自動車800の搭乗者でもある。自動車800の車窓は、全面がディスプレイ化されている。 The car sickness suppression system will be described with reference to FIG. 26 . FIG. 26 is a schematic diagram for explaining an example of the car sickness suppression system 20 of this modified example. The motion sickness suppression system 20 includes a pair of left and right GVS devices including a right ear GVS device 103 and a left ear GVS device (not shown). A user U who wears a pair of GVS devices is also a passenger of a car 800 shown in FIG. The entire window of the automobile 800 is made into a display.

自動車800は、可視光イメージセンサ部、赤外線イメージセンサ部、顔色判断部、車体加速度センサ部、ディスプレイ画像処理部、及び運動解析部を備える。可視光イメージセンサ部は、可視光イメージングによって搭乗者(ユーザU)の顔を識別する。赤外線イメージセンサ部は、近赤外線イメージングによって搭乗者の血中のヘモグロビン量の変動を判断し、そして脈拍変化を算出する。可視光イメージセンサ部及び赤外線イメージセンサ部は、それぞれ、自動車800の内部に複数実装されてよく、これにより複数の搭乗者の状態が個別に判断されうる。 The automobile 800 includes a visible light image sensor section, an infrared image sensor section, a facial color determination section, a vehicle body acceleration sensor section, a display image processing section, and a motion analysis section. The visible light image sensor unit identifies the face of the passenger (user U) by visible light imaging. The infrared image sensor unit determines variations in the amount of hemoglobin in the passenger's blood by near-infrared imaging, and calculates pulse changes. A plurality of visible light image sensor units and infrared image sensor units may each be mounted inside the vehicle 800, so that the states of a plurality of passengers can be individually determined.

顔色判断部は、可視光イメージセンサ部及び赤外線イメージセンサ部から得られる情報を用いて、搭乗者の顔色を判断する。顔色判断部は、当該顔色が所定の閾値を超えた場合、搭乗者が酔いの兆候であるストレス状態にあると判断する。 The facial color determination unit determines the facial color of the passenger using information obtained from the visible light image sensor unit and the infrared image sensor unit. The facial color determination unit determines that the passenger is in a stressed state, which is a sign of intoxication, when the facial color exceeds a predetermined threshold value.

車体加速度センサ部は、自動車800の加速度を抽出する。ディスプレイ画像処理部は、車窓のディスプレイに表示される映像中の加速度を抽出する。運動解析部は、当該自動車800の加速度と当該映像中の加速度との差分が算出する。GVS装置103は、当該差分を埋め合わせるように、装置内の電極に印加する電流値を決定する。本変形例の車酔い抑制システムにおいては、加速度と電流値とを対応付けたデータベースが作成されてもよく、GVS装置103の電極に印加される電流値は、当該データベースを用いて決定されてもよい。 The vehicle body acceleration sensor section extracts the acceleration of the automobile 800 . The display image processing unit extracts the acceleration in the video displayed on the car window display. The motion analysis unit calculates the difference between the acceleration of the vehicle 800 and the acceleration in the image. The GVS device 103 determines the current values to apply to the electrodes within the device to compensate for the difference. In the car sickness suppression system of this modified example, a database in which acceleration and current values are associated may be created, and the current values applied to the electrodes of the GVS device 103 may be determined using the database. good.

なお、上記複数の実施形態は、その構成及び動作に矛盾が生じない範囲において、組み合わせて実施することが可能である。 It should be noted that the plurality of embodiments described above can be implemented in combination as long as there is no contradiction in their configurations and operations.

本技術では、以下の構成を取ることもできる。
〔1〕
対象の周囲環境の画像を時間間隔dTで生成するイメージング部と、
前記対象と前記周囲環境に存在する動体との間の距離L、及び、前記対象に対する前記動体の相対速度ベクトルVを算出し、前記距離L及び前記相対速度ベクトルVを用いて前記対象と前記動体とが所定の距離まで接近するのに要する時間Tを算出する動体解析部と、
前記時間Tが判定時間Tj以内である前記動体を抽出し、前記判定時間Tj後において前記対象と前記抽出された動体との間の距離Ljが所定の距離となるように、前記対象が取るべき動作の大きさ及び方向を表す速度dVを算出する速度算出部と、
前庭電気刺激を前記対象に与えるための電極部と、
前記電極部に所定の電流値の電流を流して、前記対象が前記速度dVで動作することを誘導すべく前記前庭電気刺激を前記対象に与える電流制御部と、を含む、接近回避システム。
〔2〕
前記電極部に電流値Iの電流が流れたときに誘導される動作の速度dVの情報を保持する電流値データベースを検索して、所定の速度dVに対応する電流値Iを取得する電流値取得部をさらに含み、
前記電流制御部が前記電極部に前記電流値Iの電流を流す、〔1〕に記載の接近回避システム。
〔3〕
前記電流制御部が前記前庭電気刺激を前記対象に与えた後の前記対象と前記抽出された動体との間の距離Lrを確認する結果確認部をさらに含み、
前記結果確認部は、前記距離Lrが所定の条件を満たす場合に前記電流値データベースを更新する、〔2〕に記載の接近回避システム。
〔4〕
前記イメージング部が、TOFイメージンセンサ及び/又はミリ波イメージセンサを含む、〔1〕~〔3〕のいずれか1つに記載に接近回避システム。
〔5〕
前記イメージング部が、可視光イメージセンサをさらに含む、〔4〕に記載の接近回避システム。
〔6〕
前記接近回避システムが、一対の前庭電気刺激装置を含み、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記速度算出部、前記電極部、及び前記電流制御部を含む、〔1〕~〔5〕のいずれか1つに記載の接近回避システム。
〔7〕
前記接近回避システムが、一対の前庭電気刺激装置と、モバイル端末と、を含み、
前記一対の前庭電気刺激装置と、前記モバイル端末と、が通信可能に接続されており、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記電極部、及び前記電流制御部を含み、
前記モバイル端末が、前記速度算出部を含む、〔1〕~〔6〕のいずれか1つに記載の接近回避システム。
〔8〕
前記接近回避システムが、一対の前庭電気刺激装置と、情報処理装置と、を含み、
前記一対の前庭電気刺激装置と、前記情報処理装置と、が通信可能に接続されており、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記電極部、及び前記電流制御部を含み、
前記情報処理装置が、前記速度算出部を含む、〔1〕~〔7〕のいずれか1つに記載の接近回避システム。
〔9〕
前記接近回避システムが、モバイル端末を含み、
前記モバイル端末が、前記イメージング部を含む、〔1〕~〔8〕のいずれか1つに記載の接近回避システム。
〔10〕
前記接近回避システムが、モバイル端末を含み、
前記モバイル端末が、前記イメージング部、前記動体解析部、前記速度算出部、及び前記電流値取得部を含む、〔2〕又は〔3〕に記載の接近回避システム。
〔11〕
音声を出力する音声出力部をさらに含む、〔1〕~〔10〕のいずれか1つに記載の接近回避システム。
〔12〕
映像を表示する映像表示部をさらに含む、〔1〕~〔11〕のいずれか1つに記載の接近回避システム。
〔13〕
前記対象の現在の位置情報を取得する位置情報取得部と、
地図情報と前記位置情報とに基づいて前記対象が目的地に到達するまでの経路を選定し、前記地図情報から前記経路に関する情報を取得する経路選定部と、をさらに含み、
前記速度算出部が、前記速度dVを算出する際に前記経路に関する情報を用いる、〔1〕~〔12〕のいずれか1つに記載の接近回避システム。
〔14〕
前記対象の視界を特定可能な視界情報を取得する視界情報取得部と、
前記視界情報を表示する視界表示部と、
前記視界表示部をモニタする前記対象以外の第三者によって決定される電流値を、前記所定の電流値として設定する電流値設定部と、を含む、〔1〕~〔13〕のいずれか1つに記載の接近回避システム。
〔15〕
前記接近回避システムが、一対の前庭電気刺激装置を複数含み、
前記複数存在する一対の前庭電気刺激装置同士が、通信可能に接続されており、
複数の前記対象のそれぞれが、前記一対の前庭電気刺激装置を装着し、
前記一対の前庭電気刺激装置が、他の一対の前庭電気刺激装置に自身の前庭電気刺激装置を認識させる認識信号を生成する認識信号生成部と、前記認識信号を送受信する送受信部と、を含み、
前記速度算出部が、前記送受信部が受信した前記他の一対の前庭電気刺激装置からの前記認識信号に基づいて前記速度dVを算出する、〔1〕~〔14〕のいずれか1つに記載の接近回避システム。
〔16〕
前記接近回避システムが、
前記他の一対の前庭電気刺激装置からの前記認識信号に基づいて、前記他の一対の前庭電気刺激装置を装着している他の対象の行動履歴情報を保持する行動履歴データベースから、前記行動履歴情報を取得する情報取得部と、
取得された前記行動履歴情報に基づいて、前記他の対象の行動を予測して予測速度ベクトルVpを算出する行動予測部と、を含み、
前記速度算出部が、前記他の対象の前記予測速度ベクトルVpを用いて前記速度dVを算出する、〔15〕に記載の接近回避システム。
〔17〕
前記対象が人であり、前記周囲環境に存在する動体も人であり、
人同士の間に所定の距離を確保して人の密集及び密接を回避するために用いられるものである、〔1〕~〔16〕のいずれか1つに記載の接近回避システム。
〔18〕
一対の前庭電気刺激装置であって、
前記一対の前庭電気刺激装置のそれぞれが、
対象の周囲環境の画像を時間間隔dTで生成するイメージング部と、
前記対象と前記周囲環境に存在する動体との間の距離L、及び、前記対象に対する前記動体の相対速度ベクトルVを算出し、前記距離L及び前記相対速度ベクトルVを用いて前記対象と前記動体とが所定の距離まで接近するのに要する時間Tを算出する動体解析部と、
前記時間Tが判定時間Tj以内である前記動体を抽出し、前記判定時間Tj後において前記対象と前記抽出された動体との間の距離Ljが所定の距離となるように、前記対象が取るべき動作の大きさ及び方向を表す速度dVを算出する速度算出部と、
前庭電気刺激を前記対象に与えるための電極部と、
前記電極部に所定の電流値の電流を流して、前記対象が前記速度dVで動作することを誘導すべく前庭電気刺激を前記対象に与える電流制御部と、を含む、前記一対の前庭電気刺激装置。
〔19〕
前記一対の前庭電気刺激装置が、一対の耳掛け型のウェアラブル装置であり、
前記一対の前庭電気刺激装置のそれぞれが、1つ以上のイメージセンサを含む前記イメージング部と、3つの電極を含む前記電極部と、を含む、〔18〕に記載の一対の前庭電気刺激装置。
The present technology can also take the following configuration.
[1]
an imaging unit that generates images of the subject's surroundings at time intervals dT;
calculating a distance L between the target and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body with respect to the target; and using the distance L and the relative velocity vector V, the target and the moving body A moving body analysis unit that calculates the time T required for the to approach a predetermined distance,
The moving body whose time T is within the determination time Tj is extracted, and the distance Lj between the target and the extracted moving body after the determination time Tj is a predetermined distance. a speed calculator that calculates a speed dV representing the magnitude and direction of motion;
an electrode unit for providing vestibular electrical stimulation to the subject;
and a current control unit that supplies the subject with the vestibular electrical stimulation to induce the subject to move at the speed dV by applying a current of a predetermined current value to the electrode unit.
[2]
A current value acquisition of searching a current value database holding information on a speed dV of an operation induced when a current of a current value I flows through the electrode portion, and acquiring a current value I corresponding to a predetermined speed dV. further comprising
The approach avoidance system according to [1], wherein the current control unit causes the current of the current value I to flow through the electrode unit.
[3]
further comprising a result confirmation unit for confirming the distance Lr between the target and the extracted moving body after the current control unit has applied the vestibular electrical stimulation to the target,
The approach avoidance system according to [2], wherein the result confirmation unit updates the current value database when the distance Lr satisfies a predetermined condition.
[4]
The approach avoidance system according to any one of [1] to [3], wherein the imaging unit includes a TOF image sensor and/or a millimeter wave image sensor.
[5]
The approach avoidance system according to [4], wherein the imaging unit further includes a visible light image sensor.
[6]
the access avoidance system includes a pair of vestibular electrical stimulators;
any one of [1] to [5], wherein each of the pair of vestibular electrical stimulation devices includes the imaging unit, the moving body analysis unit, the velocity calculation unit, the electrode unit, and the current control unit Access avoidance system as described.
[7]
the approach avoidance system includes a pair of vestibular electrical stimulators and a mobile terminal;
The pair of vestibular electrical stimulation devices and the mobile terminal are communicably connected,
Each of the pair of vestibular electrical stimulation devices includes the imaging unit, the moving body analysis unit, the electrode unit, and the current control unit,
The approach avoidance system according to any one of [1] to [6], wherein the mobile terminal includes the speed calculator.
[8]
The approach avoidance system includes a pair of vestibular electrical stimulators and an information processing device,
The pair of vestibular electrical stimulation devices and the information processing device are communicably connected,
Each of the pair of vestibular electrical stimulation devices includes the imaging unit, the moving body analysis unit, the electrode unit, and the current control unit,
The approach avoidance system according to any one of [1] to [7], wherein the information processing device includes the speed calculation unit.
[9]
The approach avoidance system includes a mobile terminal,
The approach avoidance system according to any one of [1] to [8], wherein the mobile terminal includes the imaging unit.
[10]
The approach avoidance system includes a mobile terminal,
The approach avoidance system according to [2] or [3], wherein the mobile terminal includes the imaging unit, the moving object analysis unit, the velocity calculation unit, and the current value acquisition unit.
[11]
The approach avoidance system according to any one of [1] to [10], further including an audio output unit that outputs audio.
[12]
The approach avoidance system according to any one of [1] to [11], further including an image display unit that displays an image.
[13]
a location information acquisition unit that acquires current location information of the target;
a route selection unit that selects a route for the target to reach a destination based on the map information and the position information, and acquires information about the route from the map information;
The approach avoidance system according to any one of [1] to [12], wherein the speed calculator uses the information about the route when calculating the speed dV.
[14]
a visibility information acquisition unit that acquires visibility information that can specify the visibility of the target;
a visibility display unit that displays the visibility information;
any one of [1] to [13], including a current value setting unit that sets, as the predetermined current value, a current value determined by a third party other than the target who monitors the field of view display unit. The approach avoidance system described in 1.
[15]
The approach avoidance system includes a plurality of pairs of vestibular electrical stimulators,
the plurality of pairs of vestibular electrical stimulation devices are communicably connected to each other,
each of the plurality of subjects wearing the pair of vestibular electrical stimulation devices;
The pair of vestibular electrical stimulation devices includes a recognition signal generation unit that generates a recognition signal that causes the other pair of vestibular electrical stimulation devices to recognize its own vestibular electrical stimulation device, and a transmission and reception unit that transmits and receives the recognition signal. ,
According to any one of [1] to [14], wherein the speed calculation unit calculates the speed dV based on the recognition signals from the other pair of vestibular electrical stimulation devices received by the transmission/reception unit. approach avoidance system.
[16]
The approach avoidance system
Based on the recognition signals from the other pair of vestibular electrical stimulation devices, the action history is retrieved from an action history database holding the behavior history information of another subject wearing the other pair of vestibular electrical stimulation devices. an information acquisition unit that acquires information;
a behavior prediction unit that predicts the behavior of the other target based on the acquired behavior history information and calculates a predicted velocity vector Vp;
The approach avoidance system according to [15], wherein the velocity calculator calculates the velocity dV using the predicted velocity vector Vp of the other object.
[17]
the subject is a person, and the moving body present in the surrounding environment is also a person;
The approach avoidance system according to any one of [1] to [16], which is used to secure a predetermined distance between people to avoid crowds and close contact.
[18]
A pair of vestibular electrical stimulators, comprising:
each of the pair of vestibular electrical stimulation devices comprising:
an imaging unit that generates images of the subject's surroundings at time intervals dT;
calculating a distance L between the target and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body with respect to the target; and using the distance L and the relative velocity vector V, the target and the moving body A moving body analysis unit that calculates the time T required for the to approach a predetermined distance,
The moving body whose time T is within the determination time Tj is extracted, and the distance Lj between the target and the extracted moving body after the determination time Tj is a predetermined distance. a speed calculator that calculates a speed dV representing the magnitude and direction of motion;
an electrode unit for providing vestibular electrical stimulation to the subject;
a current control unit that applies a current of a predetermined current value to the electrode unit and provides vestibular electrical stimulation to the subject to induce the subject to move at the speed dV. Device.
[19]
The pair of vestibular electrical stimulation devices is a pair of ear-hung wearable devices,
A pair of vestibular electrical stimulators according to [18], wherein each of the pair of vestibular electrical stimulators includes the imaging unit including one or more image sensors and the electrode unit including three electrodes.

1 接近回避システム
100 前庭電気刺激装置
111 動体解析部
112 速度算出部
114 電流制御部
120 イメージング部
130 電極部
1 approach avoidance system 100 vestibular electrical stimulation device 111 moving body analysis unit 112 speed calculation unit 114 current control unit 120 imaging unit 130 electrode unit

Claims (19)

対象の周囲環境の画像を時間間隔dTで生成するイメージング部と、
前記対象と前記周囲環境に存在する動体との間の距離L、及び、前記対象に対する前記動体の相対速度ベクトルVを算出し、前記距離L及び前記相対速度ベクトルVを用いて前記対象と前記動体とが所定の距離まで接近するのに要する時間Tを算出する動体解析部と、
前記時間Tが判定時間Tj以内である前記動体を抽出し、前記判定時間Tj後において前記対象と前記抽出された動体との間の距離Ljが所定の距離となるように、前記対象が取るべき動作の大きさ及び方向を表す速度dVを算出する速度算出部と、
前庭電気刺激を前記対象に与えるための電極部と、
前記電極部に所定の電流値の電流を流して、前記対象が前記速度dVで動作することを誘導すべく前記前庭電気刺激を前記対象に与える電流制御部と、を含む、接近回避システム。
an imaging unit that generates images of the subject's surroundings at time intervals dT;
calculating a distance L between the target and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body with respect to the target; and using the distance L and the relative velocity vector V, the target and the moving body A moving body analysis unit that calculates the time T required for the to approach a predetermined distance,
The moving body whose time T is within the determination time Tj is extracted, and the distance Lj between the target and the extracted moving body after the determination time Tj is a predetermined distance. a speed calculator that calculates a speed dV representing the magnitude and direction of motion;
an electrode unit for providing vestibular electrical stimulation to the subject;
and a current control unit that supplies the subject with the vestibular electrical stimulation to induce the subject to move at the speed dV by applying a current of a predetermined current value to the electrode unit.
前記電極部に電流値Iの電流が流れたときに誘導される動作の速度dVの情報を保持する電流値データベースを検索して、所定の速度dVに対応する電流値Iを取得する電流値取得部をさらに含み、
前記電流制御部が前記電極部に前記電流値Iの電流を流す、請求項1に記載の接近回避システム。
A current value acquisition of searching a current value database holding information on a speed dV of an operation induced when a current of a current value I flows through the electrode portion, and acquiring a current value I corresponding to a predetermined speed dV. further comprising
2. The approach avoidance system according to claim 1, wherein said current control section causes said current value I to flow through said electrode section.
前記電流制御部が前記前庭電気刺激を前記対象に与えた後の前記対象と前記抽出された動体との間の距離Lrを確認する結果確認部をさらに含み、
前記結果確認部は、前記距離Lrが所定の条件を満たす場合に前記電流値データベースを更新する、請求項2に記載の接近回避システム。
further comprising a result confirmation unit for confirming the distance Lr between the target and the extracted moving body after the current control unit has applied the vestibular electrical stimulation to the target,
3. The approach avoidance system according to claim 2, wherein said result confirmation unit updates said current value database when said distance Lr satisfies a predetermined condition.
前記イメージング部が、TOFイメージンセンサ及び/又はミリ波イメージセンサを含む、請求項1に記載に接近回避システム。 The approach avoidance system according to claim 1, wherein the imaging unit comprises a TOF image sensor and/or a millimeter wave image sensor. 前記イメージング部が、可視光イメージセンサをさらに含む、請求項4に記載の接近回避システム。 5. The approach avoidance system of claim 4, wherein the imaging portion further comprises a visible light image sensor. 前記接近回避システムが、一対の前庭電気刺激装置を含み、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記速度算出部、前記電極部、及び前記電流制御部を含む、請求項1に記載の接近回避システム。
the access avoidance system includes a pair of vestibular electrical stimulators;
The approach avoidance system according to claim 1, wherein each of the pair of vestibular electrical stimulation devices includes the imaging section, the moving body analysis section, the velocity calculation section, the electrode section, and the current control section.
前記接近回避システムが、一対の前庭電気刺激装置と、モバイル端末と、を含み、
前記一対の前庭電気刺激装置と、前記モバイル端末と、が通信可能に接続されており、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記電極部、及び前記電流制御部を含み、
前記モバイル端末が、前記速度算出部を含む、請求項1に記載の接近回避システム。
the approach avoidance system includes a pair of vestibular electrical stimulators and a mobile terminal;
The pair of vestibular electrical stimulation devices and the mobile terminal are communicably connected,
Each of the pair of vestibular electrical stimulation devices includes the imaging unit, the moving body analysis unit, the electrode unit, and the current control unit,
The approach avoidance system according to claim 1, wherein said mobile terminal includes said velocity calculator.
前記接近回避システムが、一対の前庭電気刺激装置と、情報処理装置と、を含み、
前記一対の前庭電気刺激装置と、前記情報処理装置と、が通信可能に接続されており、
前記一対の前庭電気刺激装置のそれぞれが、前記イメージング部、前記動体解析部、前記電極部、及び前記電流制御部を含み、
前記情報処理装置が、前記速度算出部を含む、請求項1に記載の接近回避システム。
The approach avoidance system includes a pair of vestibular electrical stimulators and an information processing device,
The pair of vestibular electrical stimulation devices and the information processing device are communicably connected,
Each of the pair of vestibular electrical stimulation devices includes the imaging unit, the moving body analysis unit, the electrode unit, and the current control unit,
2. The approach avoidance system according to claim 1, wherein said information processing device includes said speed calculator.
前記接近回避システムが、モバイル端末を含み、
前記モバイル端末が、前記イメージング部を含む、請求項1に記載の接近回避システム。
The approach avoidance system includes a mobile terminal,
2. The approach avoidance system of claim 1, wherein the mobile terminal includes the imaging unit.
前記接近回避システムが、モバイル端末を含み、
前記モバイル端末が、前記イメージング部、前記動体解析部、前記速度算出部、及び前記電流値取得部を含む、請求項2に記載の接近回避システム。
The approach avoidance system includes a mobile terminal,
3. The approach avoidance system according to claim 2, wherein said mobile terminal includes said imaging unit, said moving body analysis unit, said velocity calculation unit, and said current value acquisition unit.
音声を出力する音声出力部をさらに含む、請求項1に記載の接近回避システム。 The approach avoidance system according to claim 1, further comprising an audio output unit that outputs audio. 映像を表示する映像表示部をさらに含む、請求項1に記載の接近回避システム。 2. The approach avoidance system according to claim 1, further comprising an image display unit for displaying an image. 前記対象の現在の位置情報を取得する位置情報取得部と、
地図情報と前記位置情報とに基づいて前記対象が目的地に到達するまでの経路を選定し、前記地図情報から前記経路に関する情報を取得する経路選定部と、をさらに含み、
前記速度算出部が、前記速度dVを算出する際に前記経路に関する情報を用いる、請求項1に記載の接近回避システム。
a location information acquisition unit that acquires current location information of the target;
a route selection unit that selects a route for the target to reach the destination based on the map information and the position information, and acquires information about the route from the map information;
2. The approach avoidance system according to claim 1, wherein said velocity calculator uses said route information when calculating said velocity dV.
前記対象の視界を特定可能な視界情報を取得する視界情報取得部と、
前記視界情報を表示する視界表示部と、
前記視界表示部をモニタする前記対象以外の第三者によって決定される電流値を、前記所定の電流値として設定する電流値設定部と、を含む、請求項1に記載の接近回避システム。
a visibility information acquisition unit that acquires visibility information that can specify the visibility of the target;
a visibility display unit that displays the visibility information;
2. The approach avoidance system according to claim 1, further comprising a current value setting unit that sets a current value determined by a third party other than the target who monitors the visual field display unit as the predetermined current value.
前記接近回避システムが、一対の前庭電気刺激装置を複数含み、
前記複数存在する一対の前庭電気刺激装置同士が、通信可能に接続されており、
複数の前記対象のそれぞれが、前記一対の前庭電気刺激装置を装着し、
前記一対の前庭電気刺激装置が、他の一対の前庭電気刺激装置に自身の前庭電気刺激装置を認識させる認識信号を生成する認識信号生成部と、前記認識信号を送受信する送受信部と、を含み、
前記速度算出部が、前記送受信部が受信した前記他の一対の前庭電気刺激装置からの前記認識信号に基づいて前記速度dVを算出する、請求項1に記載の接近回避システム。
The approach avoidance system includes a plurality of pairs of vestibular electrical stimulators,
the plurality of pairs of vestibular electrical stimulation devices are communicably connected to each other,
each of the plurality of subjects wearing the pair of vestibular electrical stimulation devices;
The pair of vestibular electrical stimulation devices includes a recognition signal generation unit that generates a recognition signal that causes the other pair of vestibular electrical stimulation devices to recognize its own vestibular electrical stimulation device, and a transmission and reception unit that transmits and receives the recognition signal. ,
The approach avoidance system according to claim 1, wherein the velocity calculator calculates the velocity dV based on the recognition signals from the other pair of vestibular electrical stimulators received by the transmitter/receiver.
前記接近回避システムが、
前記他の一対の前庭電気刺激装置からの前記認識信号に基づいて、前記他の一対の前庭電気刺激装置を装着している他の対象の行動履歴情報を保持する行動履歴データベースから、前記行動履歴情報を取得する情報取得部と、
取得された前記行動履歴情報に基づいて、前記他の対象の行動を予測して予測速度ベクトルVpを算出する行動予測部と、を含み、
前記速度算出部が、前記他の対象の前記予測速度ベクトルVpを用いて前記速度dVを算出する、請求項15に記載の接近回避システム。
The approach avoidance system
Based on the recognition signals from the other pair of vestibular electrical stimulation devices, the action history is retrieved from an action history database holding the behavior history information of another subject wearing the other pair of vestibular electrical stimulation devices. an information acquisition unit that acquires information;
a behavior prediction unit that predicts the behavior of the other target based on the acquired behavior history information and calculates a predicted velocity vector Vp;
16. The approach avoidance system according to claim 15, wherein said velocity calculator calculates said velocity dV using said predicted velocity vector Vp of said another object.
前記対象が人であり、前記周囲環境に存在する動体も人であり、
人同士の間に所定の距離を確保して人の密集及び密接を回避するために用いられるものである、請求項1に記載の接近回避システム。
the subject is a person, and the moving body present in the surrounding environment is also a person;
2. The approach avoidance system according to claim 1, which is used to keep a predetermined distance between people to avoid crowding and close contact.
一対の前庭電気刺激装置であって、
前記一対の前庭電気刺激装置のそれぞれが、
対象の周囲環境の画像を時間間隔dTで生成するイメージング部と、
前記対象と前記周囲環境に存在する動体との間の距離L、及び、前記対象に対する前記動体の相対速度ベクトルVを算出し、前記距離L及び前記相対速度ベクトルVを用いて前記対象と前記動体とが所定の距離まで接近するのに要する時間Tを算出する動体解析部と、
前記時間Tが判定時間Tj以内である前記動体を抽出し、前記判定時間Tj後において前記対象と前記抽出された動体との間の距離Ljが所定の距離となるように、前記対象が取るべき動作の大きさ及び方向を表す速度dVを算出する速度算出部と、
前庭電気刺激を前記対象に与えるための電極部と、
前記電極部に所定の電流値の電流を流して、前記対象が前記速度dVで動作することを誘導すべく前庭電気刺激を前記対象に与える電流制御部と、を含む、前記一対の前庭電気刺激装置。
A pair of vestibular electrical stimulators, comprising:
each of the pair of vestibular electrical stimulation devices comprising:
an imaging unit that generates images of the subject's surroundings at time intervals dT;
calculating a distance L between the target and a moving body existing in the surrounding environment and a relative velocity vector V of the moving body with respect to the target; and using the distance L and the relative velocity vector V, the target and the moving body A moving body analysis unit that calculates the time T required for the to approach a predetermined distance,
The moving body whose time T is within the determination time Tj is extracted, and the distance Lj between the target and the extracted moving body after the determination time Tj is a predetermined distance. a speed calculator that calculates a speed dV representing the magnitude and direction of motion;
an electrode unit for providing vestibular electrical stimulation to the subject;
a current control unit that applies a current of a predetermined current value to the electrode unit and provides vestibular electrical stimulation to the subject to induce the subject to move at the speed dV. Device.
前記一対の前庭電気刺激装置が、一対の耳掛け型のウェアラブル装置であり、
前記一対の前庭電気刺激装置のそれぞれが、1つ以上のイメージセンサを含む前記イメージング部と、3つの電極を含む前記電極部と、を含む、請求項18に記載の一対の前庭電気刺激装置。
The pair of vestibular electrical stimulation devices is a pair of ear-hung wearable devices,
19. A pair of vestibular electrical stimulators according to claim 18, wherein each of said pair of vestibular electrical stimulators includes said imaging section comprising one or more image sensors and said electrode section comprising three electrodes.
JP2021002933A 2021-01-12 2021-01-12 Approach avoidance system and galvanic vestibular stimulation device Pending JP2022108093A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021002933A JP2022108093A (en) 2021-01-12 2021-01-12 Approach avoidance system and galvanic vestibular stimulation device
PCT/JP2021/046900 WO2022153792A1 (en) 2021-01-12 2021-12-20 Approach avoidance system and galvanic vestibular stimulation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021002933A JP2022108093A (en) 2021-01-12 2021-01-12 Approach avoidance system and galvanic vestibular stimulation device

Publications (1)

Publication Number Publication Date
JP2022108093A true JP2022108093A (en) 2022-07-25

Family

ID=82447174

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021002933A Pending JP2022108093A (en) 2021-01-12 2021-01-12 Approach avoidance system and galvanic vestibular stimulation device

Country Status (2)

Country Link
JP (1) JP2022108093A (en)
WO (1) WO2022153792A1 (en)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4263921B2 (en) * 2003-02-25 2009-05-13 独立行政法人科学技術振興機構 Body guidance device
JP4554424B2 (en) * 2005-04-15 2010-09-29 日本電信電話株式会社 Animal guidance system
JP5315798B2 (en) * 2008-06-05 2013-10-16 日産自動車株式会社 Vehicle driving support apparatus and vehicle driving support method
JP2010198205A (en) * 2009-02-24 2010-09-09 Toyota Motor Corp Collision avoidance support device
US8718796B2 (en) * 2009-03-05 2014-05-06 Mayo Foundation For Medical Education Galvanic vestibular stimulation system and method of use for simulation, directional cueing, and alleviating motion-related sickness
JP5677154B2 (en) * 2011-03-18 2015-02-25 富士重工業株式会社 Vehicle driving support device
US10099122B2 (en) * 2016-03-30 2018-10-16 Sony Interactive Entertainment Inc. Head-mounted display tracking
JP6536521B2 (en) * 2016-09-22 2019-07-03 株式会社デンソー Object detection apparatus and object detection method
JP2018151347A (en) * 2017-03-15 2018-09-27 株式会社日立製作所 Device and method for aiding movement of user

Also Published As

Publication number Publication date
WO2022153792A1 (en) 2022-07-21

Similar Documents

Publication Publication Date Title
KR102615214B1 (en) racing simulation
US20200216078A1 (en) Driver attentiveness detection system
US20140176296A1 (en) Methods and systems for managing motion sickness
CN112204640B (en) Auxiliary device for visually impaired
US20170146801A1 (en) Head-mounted display device with a camera imaging eye microsaccades
CN104427960B (en) Self-adaptive visual servicing unit
US10342462B2 (en) Application of gait characteristics for mobile
US20210154430A1 (en) Systems and methods for predicting and preventing motion sickness
CN109074748A (en) Image processing equipment, image processing method and movable body
US10488222B2 (en) Mobile device control leveraging user kinematics
CN110641468A (en) Controlling autonomous vehicles based on passenger behavior
WO2016028933A1 (en) System for determining an underwriting risk, risk score, or price of insurance using sensor information
CN112506336A (en) Head mounted display with haptic output
US20220355063A1 (en) Hearing assistance devices with motion sickness prevention and mitigation features
US11045116B1 (en) Enhanced determination of cadence for control in mobile
Guo et al. Psycho-physiological measures on a bicycle simulator in immersive virtual environments: how protected/curbside bike lanes may improve perceived safety
CN109983784B (en) Information processing apparatus, method and storage medium
KR20220014254A (en) Method of providing traveling virtual reality contents in vehicle such as a bus and a system thereof
WO2022153792A1 (en) Approach avoidance system and galvanic vestibular stimulation device
Woźniak et al. Gapeau: Enhancing the Sense of Distance to Others with a Head-Mounted Sensor
Fedotov et al. Towards estimating emotions and satisfaction level of tourist based on eye gaze and head movement
Matviienko et al. QuantiBike: Quantifying Perceived Cyclists' Safety via Head Movements in Virtual Reality and Outdoors
Loomis et al. Visual control of action without retinal optic flow
Guo et al. Roadway Design Matters: Variation in Bicyclists' Psycho-Physiological Responses in Different Urban Roadway Designs
JP6884854B2 (en) Audio providing device, audio providing method and program