WO2022009758A1 - Acoustic field generation device, acoustic field generation method, and acoustic field generation program - Google Patents

Acoustic field generation device, acoustic field generation method, and acoustic field generation program Download PDF

Info

Publication number
WO2022009758A1
WO2022009758A1 PCT/JP2021/024884 JP2021024884W WO2022009758A1 WO 2022009758 A1 WO2022009758 A1 WO 2022009758A1 JP 2021024884 W JP2021024884 W JP 2021024884W WO 2022009758 A1 WO2022009758 A1 WO 2022009758A1
Authority
WO
WIPO (PCT)
Prior art keywords
pressure field
region
field
sound
ultrasonic
Prior art date
Application number
PCT/JP2021/024884
Other languages
French (fr)
Japanese (ja)
Inventor
充 伊藤
裕之 篠田
Original Assignee
株式会社ニコン
国立大学法人 東京大学
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ニコン, 国立大学法人 東京大学 filed Critical 株式会社ニコン
Publication of WO2022009758A1 publication Critical patent/WO2022009758A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer

Abstract

The present invention provides an acoustic field generation device comprising: an ultrasonic oscillation element array in which ultrasonic oscillation elements that emit ultrasonic waves are arranged; and a control unit which controls the ultrasonic oscillation element array, wherein the control unit generates a first pressure field with the ultrasonic waves in a first region within a space, and generates a second pressure field with the ultrasonic waves which is in a second region different from the first region within the space and which is different in strength from the first pressure field.

Description

音場生成装置、音場生成方法、および音場生成プログラムSound field generator, sound field generation method, and sound field generation program
 本発明は、音場生成装置、音場生成方法、および音場生成プログラムに関する。 The present invention relates to a sound field generator, a sound field generation method, and a sound field generation program.
 トランスデューサーアレイから音響場を生成し、知覚可能フィードバックを生成する方法が知られている(例えば、特許文献1)。
 特許文献1 特表2018-507485号
A method of generating an acoustic field from a transducer array to generate perceptible feedback is known (for example, Patent Document 1).
Patent Document 1 Special Table 2018-507485
一般的開示General disclosure
 音場生成装置は、超音波を発振する超音波発振素子が配列された超音波発振素子アレイを備えてよい。
 音場生成装置は、超音波発振素子アレイを制御する制御部を備えてよい。
 制御部は、空間内の第1領域に超音波による第1の圧力場を生成し、空間内の第1領域とは異なる第2領域に第1の圧力場と異なる強度の超音波の時空間変調による第2の圧力場を生成してよい。
 第1領域と第2領域は隣接し、隣接する第1領域と第2領域との圧力場の強度差は、予め設定された値よりも大きくてよい。
 第1の圧力場の強度は、第1領域内で連続的に変化してよい。
 制御部は、時空間変調とは異なる第1の変調で制御した超音波により第1の圧力場を生成し、第1の変調と異なる第2の変調で制御した超音波により第2の圧力場を生成してよい。
 第1の変調と第2の変調とは変調方式が異なってよい。
 第1の圧力場と第2の圧力場とは同じ変調方式によって生成されてよい。
 制御部は、超音波を振幅変調して第1の圧力場を生成してよい。
 制御部は、無変調の超音波によって第1の圧力場を生成し、変調した超音波によって第2の圧力場を生成してよい。
 制御部は、パルス状の超音波によって第2の圧力場を生成してよい。
 制御部は、パルス状の超音波の焦点位置を、パルス時間内に第2領域内の複数個所間で往復運動させてよい。
 音場生成装置は、物体の位置を検知する検知部をさらに備えてよい。
 制御部は、物体の位置により、第1の圧力場を生成する制御から第2の圧力場を生成する制御へ切り替えてよい。
 制御部は、物体の位置により、第1の圧力場の強度を変更してよい。
 制御部は、第2の圧力場を生成する物体の位置において、第1の圧力場の強度が最大となってよい。
 制御部は、物体の位置にかかわらず、第1の圧力場と第2の圧力場の少なくとも一方を生成してよい。
 超音波発振素子アレイは、互いに異なる平面上に複数配置されてよい。
 音場生成装置は、空間内に映像を表示する映像表示装置をさらに備えてよい。
 制御部は、映像表示装置により表示された映像の位置に第1の圧力場と第2の圧力場の少なくとも一方を重畳して生成してよい。
 音場生成方法は、超音波を発振する超音波発振素子が配列された超音波発振素子アレイの振動を制御する制御段階を備えてよい。
 制御段階において、空間内の第1領域に超音波による第1の圧力場を生成し、空間内の第1領域とは異なる第2領域に第1の圧力場と異なる強度の超音波の時空間変調による第2の圧力場を生成してよい。
 音場生成プログラムは、コンピュータに、超音波を発振する超音波発振素子が配列された超音波発振素子アレイの振動を制御する制御段階を実行させることにより、超音波による圧力場を提示する音場生成プログラムであって、
 制御段階において、空間内の第1領域に超音波による第1の圧力場を生成し、空間内の第1領域とは異なる第2領域に第1の圧力場と異なる強度の超音波の時空間変調による第2の圧力場を生成してよい。
The sound field generator may include an ultrasonic oscillating element array in which ultrasonic oscillating elements that oscillate ultrasonic waves are arranged.
The sound field generator may include a control unit that controls the ultrasonic oscillating element array.
The control unit generates a first pressure field by sound waves in the first region in the space, and in a second region different from the first region in the space, a spatiotemporal space of ultrasonic waves having a different intensity from the first pressure field. A second pressure field due to modulation may be generated.
The first region and the second region are adjacent to each other, and the strength difference of the pressure field between the adjacent first region and the second region may be larger than the preset value.
The strength of the first pressure field may change continuously within the first region.
The control unit generates the first pressure field by the ultrasonic wave controlled by the first modulation different from the spatiotemporal modulation, and the second pressure field by the ultrasonic wave controlled by the second modulation different from the first modulation. May be generated.
The modulation method may be different between the first modulation and the second modulation.
The first pressure field and the second pressure field may be generated by the same modulation method.
The control unit may amplitude-modulate the ultrasonic waves to generate a first pressure field.
The control unit may generate a first pressure field by unmodulated ultrasonic waves and a second pressure field by modulated ultrasonic waves.
The control unit may generate a second pressure field by pulsed ultrasonic waves.
The control unit may reciprocate the focal position of the pulsed ultrasonic wave between a plurality of locations in the second region within the pulse time.
The sound field generator may further include a detector that detects the position of the object.
The control unit may switch from the control for generating the first pressure field to the control for generating the second pressure field depending on the position of the object.
The control unit may change the strength of the first pressure field depending on the position of the object.
The control unit may maximize the strength of the first pressure field at the position of the object that creates the second pressure field.
The control unit may generate at least one of a first pressure field and a second pressure field regardless of the position of the object.
A plurality of ultrasonic oscillator array may be arranged on different planes.
The sound field generator may further include a video display device that displays video in space.
The control unit may generate by superimposing at least one of the first pressure field and the second pressure field on the position of the image displayed by the image display device.
The sound field generation method may include a control step for controlling the vibration of an ultrasonic oscillating element array in which ultrasonic oscillating elements oscillating ultrasonic waves are arranged.
In the control stage, a first pressure field by sound waves is generated in the first region in space, and a spatiotemporal space of ultrasonic waves having a different intensity from the first pressure field in a second region different from the first region in space. A second pressure field due to modulation may be generated.
The sound field generation program presents a pressure field by ultrasonic waves by causing a computer to execute a control step of controlling the vibration of an ultrasonic oscillating element array in which ultrasonic oscillating elements oscillating ultrasonic waves are arranged. It ’s a generator,
In the control stage, a first pressure field by sound waves is generated in the first region in space, and a spatiotemporal space of ultrasonic waves having a different intensity from the first pressure field in a second region different from the first region in space. A second pressure field due to modulation may be generated.
 なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。 The outline of the above invention does not list all the necessary features of the present invention. A subcombination of these feature groups can also be an invention.
第1の実施形態に係る音場生成装置100の概略構成を示す図である。It is a figure which shows the schematic structure of the sound field generation apparatus 100 which concerns on 1st Embodiment. 超音波発振素子アレイ10の構成の一例を示す図である。It is a figure which shows an example of the structure of the ultrasonic oscillation element array 10. 映像表示装置40の概略構成を示す図である。It is a figure which shows the schematic structure of the image display device 40. 人間の皮膚内の触覚受容器の概略構成を示す断面図である。It is sectional drawing which shows the schematic structure of the tactile receptor in human skin. 第1の実施形態における圧力場の制御の段階を示す図である。It is a figure which shows the stage of the control of a pressure field in 1st Embodiment. 無変調の超音波による圧力場の概略を示す図である。It is a figure which shows the outline of the pressure field by an unmodulated ultrasonic wave. 超音波のLM変調についての説明図である。It is explanatory drawing about the LM modulation of ultrasonic waves. 第2段階の超音波による圧力場に切り替えるタイミングを示す図である。It is a figure which shows the timing of switching to the pressure field by the ultrasonic wave of the 2nd stage. LM変調のタイミングチャートである。It is a timing chart of LM modulation. 第2の実施形態に係る音場生成装置101概略構成を示す図である。It is a figure which shows the schematic structure of the sound field generation apparatus 101 which concerns on 2nd Embodiment. 第2の実施形態における圧力場の制御の段階を示す図である。It is a figure which shows the stage of the control of a pressure field in 2nd Embodiment. AM変調された圧力場とLM変調された圧力場の強度の比較を示す図である。It is a figure which shows the comparison of the intensity of the AM-modulated pressure field and the LM-modulated pressure field. 圧力場の他の組み合わせを示す図である。It is a figure which shows the other combination of a pressure field. 本発明の複数の態様が全体的または部分的に具現化されてよいコンピュータ2200の例を示す。An example of a computer 2200 in which a plurality of aspects of the present invention may be embodied in whole or in part is shown.
 以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。 Hereinafter, the present invention will be described through embodiments of the invention, but the following embodiments do not limit the invention according to the claims. Also, not all combinations of features described in the embodiments are essential to the means of solving the invention.
 [第1の実施形態]
 図1は、第1の実施形態に係る音場生成装置100の概略構成を示す図である。図1に示すように、音場生成装置100は、複数の超音波発振素子アレイ10と、制御部20と、検知部30と、映像表示装置40と、を有する。音場生成装置100は、複数の超音波発振素子アレイ10を制御することにより超音波による圧力場(音響放射圧による圧力分布であり、音圧の分布、すなわち音場に対応する)を生成し、複数の超音波発振素子アレイ10により囲まれた空間内に、人間の皮膚に仮想的な押し込み型のボタンの触覚刺激を提示する。なお、説明の便宜上、人間の皮膚に提示される仮想的な押し込み型のボタンの触覚刺激を仮想ボタン50と称し、図中でボタンの形状で示す。
[First Embodiment]
FIG. 1 is a diagram showing a schematic configuration of a sound field generation device 100 according to the first embodiment. As shown in FIG. 1, the sound field generation device 100 includes a plurality of ultrasonic oscillation element arrays 10, a control unit 20, a detection unit 30, and an image display device 40. The sound field generation device 100 generates a pressure field by ultrasonic waves (a pressure distribution by acoustic radiation pressure, that is, a sound pressure distribution, that is, corresponding to a sound field) by controlling a plurality of ultrasonic oscillation element arrays 10. In a space surrounded by a plurality of ultrasonic oscillating element arrays 10, a virtual push-type button tactile stimulus is presented to human skin. For convenience of explanation, the tactile stimulus of a virtual push-type button presented on human skin is referred to as a virtual button 50, and is shown in the form of a button in the figure.
 図2は、超音波発振素子アレイ10の構成の一例を示す図である。超音波発振素子アレイ10は、超音波を発振する超音波発振素子11を複数個二次元的に配列して、支持体12で支持したものである。図2に示すように、超音波発振素子アレイ10の一例は、超音波発振素子11を直交する2方向に均一に配列した構成を有する。本実施形態において超音波発振素子アレイ10は、192mmの幅を有する正方形の形状である。 FIG. 2 is a diagram showing an example of the configuration of the ultrasonic oscillating element array 10. The ultrasonic oscillating element array 10 is a structure in which a plurality of ultrasonic oscillating elements 11 that oscillate ultrasonic waves are two-dimensionally arranged and supported by a support 12. As shown in FIG. 2, an example of the ultrasonic oscillating element array 10 has a configuration in which the ultrasonic oscillating elements 11 are uniformly arranged in two orthogonal directions. In the present embodiment, the ultrasonic oscillator array 10 has a square shape having a width of 192 mm.
 超音波発振素子11は、圧電素子、及び、所定の周波数で共振するように設定された共振器から成る。圧電素子に位相制御信号が入力されることで、圧電素子が振動し、共振器から超音波が発振する。なお、図2に示す超音波発振素子アレイ10は、超音波発振素子11を直交する2方向に矩形状に配列したものであるが、これに限定はされない。例えば、超音波発振素子アレイ10は、複数の超音波発振素子11が円を形成するように二次元的に配列したものでもよい。 The ultrasonic oscillating element 11 includes a piezoelectric element and a resonator set to resonate at a predetermined frequency. When the phase control signal is input to the piezoelectric element, the piezoelectric element vibrates and ultrasonic waves oscillate from the resonator. The ultrasonic oscillating element array 10 shown in FIG. 2 is an array of ultrasonic oscillating elements 11 arranged in a rectangular shape in two directions orthogonal to each other, but is not limited thereto. For example, the ultrasonic oscillating element array 10 may be two-dimensionally arranged so that a plurality of ultrasonic oscillating elements 11 form a circle.
 図1に戻り、本実施形態において6個の超音波発振素子アレイ10が異なる平面上に互いに対向するように配置され、6個の超音波発振素子アレイ10が取り囲む空間の概ね中央部分に仮想ボタン50を生成する。互いに対向する超音波発振素子アレイ10同士の距離は、400mmである。なお、超音波発振素子アレイ10の配置、形状、および個数は上記例に限定されない。 Returning to FIG. 1, in the present embodiment, the six ultrasonic oscillating element arrays 10 are arranged so as to face each other on different planes, and a virtual button is located in a substantially central portion of the space surrounded by the six ultrasonic oscillating element arrays 10. Generate 50. The distance between the ultrasonic oscillating element arrays 10 facing each other is 400 mm. The arrangement, shape, and number of the ultrasonic oscillating element arrays 10 are not limited to the above example.
 超音波発振素子アレイ10を構成する複数の超音波発振素子11のそれぞれは、制御部20によって駆動制御される。複数の超音波発振素子11のそれぞれから超音波が発振されるが、超音波は山と谷とを有するので、各超音波発振素子11から出力された超音波は互いに強めあったり、弱めあったりする。制御部20が、各超音波発振素子11の発振タイミングを制御することにより、超音波が互いに強めあう位置や、互いに弱めあう位置を調整し、触覚刺激を提示したい位置に複数の超音波発振素子11から発せられる超音波による圧力が最大になる焦点を形成する。 Each of the plurality of ultrasonic oscillating elements 11 constituting the ultrasonic oscillating element array 10 is driven and controlled by the control unit 20. Ultrasonic waves are oscillated from each of the plurality of ultrasonic oscillating elements 11, but since the ultrasonic waves have peaks and valleys, the ultrasonic waves output from each ultrasonic oscillating element 11 may strengthen or weaken each other. do. By controlling the oscillation timing of each ultrasonic oscillating element 11, the control unit 20 adjusts the position where the ultrasonic waves strengthen each other and the position where the ultrasonic waves weaken each other, and a plurality of ultrasonic oscillating elements at the position where the tactile stimulus is to be presented. It forms a focal point where the pressure from the ultrasonic waves emitted from 11 is maximized.
 制御部20は、複数の超音波発振素子アレイ10を制御することにより超音波を発生させ、複数の超音波発振素子アレイ10により囲まれた空間内に超音波による圧力場を生成する制御を行う。制御部20は、複数の超音波発振素子11の発振タイミングが決定された位相制御信号を、複数の超音波発振素子11のそれぞれに入力する。 The control unit 20 controls to generate ultrasonic waves by controlling a plurality of ultrasonic oscillating element arrays 10 and to generate a pressure field by ultrasonic waves in a space surrounded by the plurality of ultrasonic oscillating element arrays 10. .. The control unit 20 inputs a phase control signal in which the oscillation timing of the plurality of ultrasonic oscillating elements 11 is determined to each of the plurality of ultrasonic oscillating elements 11.
 検知部30は、人間の皮膚の位置を検出する素子であり、例えば、CCDカメラなどの撮像装置が用いられている。第1の実施形態において、検知部30は人間の指先の位置を検知するものとする。検知部30は、例えば、6つの超音波発振素子アレイ10のうち、1つの超音波発振素子アレイ10に隣接するように配置されて、空間内を移動する指先の画像を撮影する。検知部30にて撮影された指先の画像が、制御部20によって解析されて、空間内における指先の3次元位置が検知される。検知部30は、赤外線のToF(Time Of Flight)を用いたデプスセンサであってもよい。 The detection unit 30 is an element that detects the position of human skin, and for example, an image pickup device such as a CCD camera is used. In the first embodiment, the detection unit 30 shall detect the position of a human fingertip. The detection unit 30 is arranged so as to be adjacent to one of the six ultrasonic oscillating element arrays 10 among the six ultrasonic oscillating element arrays 10, and captures an image of a fingertip moving in space. The image of the fingertip taken by the detection unit 30 is analyzed by the control unit 20, and the three-dimensional position of the fingertip in the space is detected. The detection unit 30 may be a depth sensor using an infrared ToF (TimeOfFlight).
 映像表示装置40は、複数の超音波発振素子アレイ10により囲まれた空間内に空中映像を表示する、いわゆる3次元映像表示器である。図3は、映像表示装置40の概略構成を示す図である。映像表示装置40は、例えば、画像出力部41、ハーフミラー42および凹面鏡43を備える。映像表示装置40は、画像出力部41から出射した光を、ハーフミラー42で反射し、凹面鏡43により空間内に結像する。映像表示装置40は、図1及び図3に示すように仮想ボタン50の位置にボタンの像を結像させる。 The image display device 40 is a so-called three-dimensional image display device that displays an aerial image in a space surrounded by a plurality of ultrasonic oscillation element arrays 10. FIG. 3 is a diagram showing a schematic configuration of the video display device 40. The image display device 40 includes, for example, an image output unit 41, a half mirror 42, and a concave mirror 43. The image display device 40 reflects the light emitted from the image output unit 41 by the half mirror 42, and forms an image in space by the concave mirror 43. The image display device 40 forms an image of the button at the position of the virtual button 50 as shown in FIGS. 1 and 3.
 図4は、人間の皮膚内の触覚受容器の概略構成を示す断面図である。図4に示すように、人間の皮膚は、表層から内側に向かって、表皮、真皮、皮下組織がある。触覚受容器として、真皮に位置するメルケル触盤とマイスナー小体、及び、皮下組織に位置するパチニ小体がある。これらの触覚受容器それぞれは、超音波の強度が変調する周波数に応じて、反応する量が異なる。メルケル触盤は、静的(すなわち無変調)な圧力場に対して反応する。マイスナー小体は、強度がおよそ25Hzで振動する動的な圧力場に対して最も大きく反応する。そして、パチニ小体は、強度がおよそ200Hzで振動する動的な圧力場に対して最も大きく反応する。本発明では、静的(すなわち無変調)な圧力場と、動的な(すなわち上述の振動知覚域で変調した)圧力場が用いられる。 FIG. 4 is a cross-sectional view showing a schematic configuration of tactile receptors in human skin. As shown in FIG. 4, human skin has an epidermis, a dermis, and a subcutaneous tissue from the surface layer to the inside. Tactile receptors include the Mercel corpuscle and Meissner corpuscle located in the dermis, and the Pacinian corpuscle located in the hypodermis. Each of these tactile receptors responds differently depending on the frequency at which the intensity of the ultrasonic waves is modulated. The Mercel tactile board reacts to a static (ie, unmodulated) pressure field. The Meissner corpuscle responds most to a dynamic pressure field that oscillates at an intensity of approximately 25 Hz. And the Pacinian corpuscle reacts most to a dynamic pressure field where the intensity oscillates at about 200 Hz. In the present invention, a static (that is, unmodulated) pressure field and a dynamic (that is, modulated in the vibration perception region described above) pressure field are used.
 第1の実施形態では、押し込み型のボタンやスイッチの押し込みが一定量なされたときに指先に感じる触覚刺激(クリック感ともいう)を再現するために、超音波による圧力場を指先の位置に応じて静的な圧力場から動的な圧力場に切り替え、2つの段階の触覚刺激を提示する。図5は、圧力場が人間の指先に提示する触覚刺激の2つの段階の一例を示す。第1段階は、無変調な超音波による圧力場により指先が感知する程度の触覚刺激を提示する段階であり、第2段階は、変調された超音波による圧力場により指先に振動の触覚刺激を提示する段階である。なお、図5に示すように、第1段階では指先が下方向に移動するに従い無変調な超音波の圧力が高まってボタンを押し込んでいるような触覚刺激を人間の指先に提示する。 In the first embodiment, in order to reproduce the tactile stimulus (also referred to as a click feeling) felt on the fingertip when a push-type button or switch is pressed by a certain amount, an ultrasonic pressure field is applied according to the position of the fingertip. It switches from a static pressure field to a dynamic pressure field and presents two stages of tactile stimuli. FIG. 5 shows an example of two stages of tactile stimulation presented by a pressure field to a human fingertip. The first step is to present the tactile stimulus to the extent that the fingertip senses by the pressure field by unmodulated ultrasonic wave, and the second step is the step to present the tactile stimulus of vibration to the fingertip by the pressure field by the modulated ultrasonic wave. It is the stage to present. As shown in FIG. 5, in the first stage, as the fingertip moves downward, the pressure of the unmodulated ultrasonic wave increases, and a tactile stimulus as if the button is pressed is presented to the human fingertip.
 図6は、第1領域および第2領域の圧力場の概略を示す図である。第1段階において提示する圧力場は無変調な超音波により第1領域Bに生成され、仮想ボタン50の存在を感知できる。また、この無変調の圧力場はその中心に近いほど強度が大きいので、仮想ボタン50を押し込んでいく触覚刺激を与えるための静的で弱い触覚刺激を指先に提示する。無変調な超音波による圧力場は、主にメルケル触盤によって知覚可能である。本実施形態では、40kHzの超音波を用いて圧力場を生成する。これによって可聴音は発生しない。 FIG. 6 is a diagram showing an outline of the pressure fields in the first region and the second region. The pressure field presented in the first stage is generated in the first region B by unmodulated ultrasonic waves, and the presence of the virtual button 50 can be sensed. Further, since the intensity of this unmodulated pressure field is larger as it is closer to the center, a static and weak tactile stimulus for pressing the virtual button 50 is presented to the fingertip. The pressure field due to unmodulated ultrasonic waves is mainly perceptible by the Mercel touch panel. In this embodiment, a pressure field is generated using ultrasonic waves of 40 kHz. As a result, no audible sound is generated.
 無変調な超音波による第1領域Bの圧力場は複数の超音波発振素子アレイ10により囲まれた空間内の部分領域B1~B3に予め生成されている。無変調な超音波による圧力場は、指先の位置によらずに予め生成されている。図6に示すように、無変調な超音波による圧力場の強度は、空間内における部分領域B1~B3によって異なっている。図6においてハッチングが最も濃い第3部分領域B3は、圧力場の強度が最も強い領域であり、ハッチングの濃さが中程度である第2部分領域B2は、圧力場の強度が中程度である領域であり、ハッチングが最も薄い第1部分領域B1は、圧力場の強度が最も弱い領域である。なお、無変調な超音波による第1領域Bの圧力場の強度は連続的に変化しているが、図6では説明の都合上模式的に3段階で描いている。また、第3部分領域B3の圧力場の強度と第2部分領域B2の圧力場の強度との差は、指先で明確に強度差を知覚できるように所定値以上となっている。 The pressure field of the first region B due to the unmodulated ultrasonic waves is generated in advance in the partial regions B1 to B3 in the space surrounded by the plurality of ultrasonic oscillating element arrays 10. The pressure field due to unmodulated ultrasonic waves is pre-generated regardless of the position of the fingertip. As shown in FIG. 6, the intensity of the pressure field due to the unmodulated ultrasonic wave differs depending on the partial regions B1 to B3 in the space. In FIG. 6, the third partial region B3 where the hatching is the strongest is the region where the pressure field strength is the strongest, and the second partial region B2 where the hatching density is medium is the region where the pressure field strength is medium. The first partial region B1, which is a region and has the thinnest hatching, is a region where the strength of the pressure field is the weakest. Although the intensity of the pressure field in the first region B due to the unmodulated ultrasonic waves changes continuously, it is schematically drawn in three stages in FIG. 6 for convenience of explanation. Further, the difference between the strength of the pressure field in the third partial region B3 and the strength of the pressure field in the second partial region B2 is equal to or higher than a predetermined value so that the strength difference can be clearly perceived by the fingertips.
 したがって、指先が位置A1に移動したときには第1部分領域B1に形成された圧力を受けるため弱い触覚刺激を感じる。同様に、指先が位置A2に移動したときには第2部分領域B2に形成された圧力を受けるため中程度の触覚刺激を感じ、指先が位置A3に移動したときには第3部分領域B3に形成された圧力を受けるため強い触覚刺激を感じる。 Therefore, when the fingertip moves to the position A1, the pressure formed in the first partial region B1 is received, so that a weak tactile stimulus is felt. Similarly, when the fingertip moves to position A2, the pressure formed in the second partial region B2 is received, so that a moderate tactile stimulus is felt, and when the fingertip moves to the position A3, the pressure formed in the third partial region B3 is felt. I feel a strong tactile stimulus to receive.
 このように、指先が下方向に移動するにつれて提示する触覚刺激が強くなるため、ボタンを押下するかのような触覚刺激を指先に与えることができる。以上により、指先に第1段階の無変調な超音波による圧力場を提示する。検知部30により、指先が位置A3に移動したことを検知すると、制御部は第1段階の無変調の圧力場から、第2段階の変調された圧力場へと切り替える制御を行う。本実施形態における変調された圧力場は、LM(lateral modulation)変調された超音波による圧力場である。 In this way, the tactile stimulus presented becomes stronger as the fingertip moves downward, so that the tactile stimulus as if the button is pressed can be given to the fingertip. From the above, the pressure field by the first stage unmodulated ultrasonic wave is presented to the fingertip. When the detection unit 30 detects that the fingertip has moved to the position A3, the control unit controls to switch from the unmodulated pressure field of the first stage to the modulated pressure field of the second stage. The modulated pressure field in the present embodiment is an LM (lateral modulation) modulated ultrasonic pressure field.
 第2段階の圧力場は変調された超音波により図6に示す第2領域Cに生成され、ボタンを最終位置まで押下したときのクリック感を想起させる振動触覚刺激を指先に対して提示する。変調された超音波による圧力場は、第1段階の無変調の圧力場と比較して強度が強い圧力場である。第2段階の変調された超音波による圧力場によって提示される触覚刺激は、主にパチニ小体によって知覚可能である。なお、第2領域Cは第1領域Bと部分的に重なるが、領域全体としては互いに異なっている。 The pressure field of the second stage is generated in the second region C shown in FIG. 6 by the modulated ultrasonic wave, and presents a vibrating tactile stimulus reminiscent of the click feeling when the button is pressed to the final position to the fingertip. The pressure field due to the modulated ultrasonic wave is a pressure field having a higher intensity than the unmodulated pressure field of the first stage. The tactile stimuli presented by the second stage modulated ultrasonic pressure field are predominantly perceptible by the Pacinian corpuscle. The second region C partially overlaps with the first region B, but the regions as a whole are different from each other.
 図7は、第2領域Cの圧力場を生成する超音波のLM変調についての説明図である。LM変調とは、パルス状の超音波の焦点位置を、パルス時間内に複数個所間で水平方向に往復運動させる時空間変調である。なお、時空間変調による複数個所間の往復運動は水平方向に限らず、仮想ボタンの操作方向に応じて必要な、三次元空間の如何なる方向であっても良い。図7に示すように、本実施形態において、超音波音圧の焦点位置を焦点面内の二つのポイントP1およびP2間で横方向(指の腹に沿った方向)に往復運動させる。往復運動の振幅Lは9mmとし、往復運動の周波数は250Hzとする。LM変調された超音波による触覚刺激の提示時間は40msとする。触覚刺激の提示時間が長いと「ブルブル」とした触覚刺激となり、短いと「カチッ」とした触覚刺激になる。なお、往復運動の振幅、周波数および触覚刺激の提示時間は上記例に限定されない。また、3つ以上のポイント間で焦点を移動させてもよい。 FIG. 7 is an explanatory diagram of LM modulation of ultrasonic waves that generate a pressure field in the second region C. LM modulation is a spatiotemporal modulation in which the focal position of a pulsed ultrasonic wave is reciprocated horizontally between a plurality of locations within a pulse time. The reciprocating motion between a plurality of locations due to spatiotemporal modulation is not limited to the horizontal direction, and may be any direction in the three-dimensional space required according to the operation direction of the virtual button. As shown in FIG. 7, in the present embodiment, the focal position of the ultrasonic sound pressure is reciprocated laterally (direction along the pad of the finger) between two points P1 and P2 in the focal plane. The amplitude L of the reciprocating motion is 9 mm, and the frequency of the reciprocating motion is 250 Hz. The presentation time of the tactile stimulus by the LM-modulated ultrasonic wave is 40 ms. If the presentation time of the tactile stimulus is long, the tactile stimulus becomes "bluble", and if it is short, the tactile stimulus becomes "click". The amplitude, frequency and presentation time of the tactile stimulus of the reciprocating motion are not limited to the above examples. Also, the focus may be moved between three or more points.
 図8は、第1段階から第2段階の変調された圧力場に切り替えるタイミングを示す図である。図8(a)は、無変調の圧力場の強度を示す。ここで、人間の指先が一定の速度で空間内を下降しているものとする。図8(a)に示すように、時間の経過とともに、無変調の圧力場の強度が強くなっており、特定の位置を経過すると圧力場の強度が弱くなる。圧力場の強度が最も強くなる位置は、図6における第3部分領域B3の中心位置である。無変調の圧力場の強度が最も強くなったタイミングにおいて、図8(b)に示すLM変調された圧力場に切り替える。 FIG. 8 is a diagram showing the timing of switching from the first stage to the second stage modulated pressure field. FIG. 8 (a) shows the intensity of the unmodulated pressure field. Here, it is assumed that a human fingertip is descending in space at a constant speed. As shown in FIG. 8A, the strength of the unmodulated pressure field becomes stronger with the passage of time, and the strength of the pressure field becomes weaker after a lapse of a specific position. The position where the strength of the pressure field is the strongest is the central position of the third partial region B3 in FIG. At the timing when the intensity of the unmodulated pressure field becomes the strongest, the pressure field is switched to the LM-modulated pressure field shown in FIG. 8 (b).
 図9は、LM変調のタイミングチャートである。本実施形態において、超音波を周波数が25Hzのパルス波として出力する。1パルス(40ms)内において、超音波音圧の焦点位置は、指先の腹の二つのポイントP1,P2間で5往復する。なお、超音波の振動周波数は、40kHzとする。 FIG. 9 is a timing chart of LM modulation. In this embodiment, ultrasonic waves are output as pulse waves having a frequency of 25 Hz. Within one pulse (40 ms), the focal position of the ultrasonic sound pressure reciprocates 5 times between the two points P1 and P2 on the pad of the fingertip. The vibration frequency of the ultrasonic wave is 40 kHz.
 制御部20は、映像表示装置40が生成した空中映像に、第1段階の無変調の超音波による圧力場と第2段階の変調された超音波による圧力場の少なくとも一方が重畳するように制御する。なお、制御部20は、映像表示装置40が生成した空中映像の一部の領域に、第1段階の無変調の圧力場と第2段階の変調された圧力場の少なくとも一つが重畳するように制御してもよい。 The control unit 20 controls so that at least one of the pressure field by the unmodulated ultrasonic wave of the first stage and the pressure field by the modulated ultrasonic wave of the second stage is superimposed on the aerial image generated by the image display device 40. do. The control unit 20 superimposes at least one of the unmodulated pressure field of the first stage and the modulated pressure field of the second stage on a part of the aerial image generated by the image display device 40. You may control it.
 第1の実施形態に係る音場生成装置100によれば、無変調の圧力場と、変調された圧力場とを動的に切り替え、空間内の異なる領域に2段階の異なる触覚刺激を提示する。これは、第1段階と、第2段階とで、異なる空間領域に変調方式が異なる圧力場を生成している一例になっている。さらに、第1段階と、第2段階とで、異なる空間領域に強度が異なる圧力場を生成している一例でもある。これにより、超音波音圧が人間の指先に与える触覚刺激の違いを作り出すことができ、仮想的なボタンの位置を認識させ、当該ボタンを押し込んだクリック感を再現することができる。 According to the sound field generator 100 according to the first embodiment, the unmodulated pressure field and the modulated pressure field are dynamically switched, and two stages of different tactile stimuli are presented in different regions in the space. .. This is an example of generating pressure fields with different modulation methods in different spatial regions in the first stage and the second stage. Further, it is also an example of generating pressure fields having different intensities in different spatial regions in the first stage and the second stage. As a result, it is possible to create a difference in the tactile stimulus given to the human fingertip by the ultrasonic sound pressure, recognize the position of a virtual button, and reproduce the click feeling when the button is pressed.
 [第2の実施形態]
 上記第1の実施形態では、クリック感を再現する触覚刺激を提示するために第1段階を無変調の圧力場とし、第2段階をLM変調された圧力場とした。これに対して、第2の実施形態では、第1段階をAM(amplitude modulation)変調された圧力場とし、第2段階をLM変調された圧力場とする。AM変調は、超音波の振幅変調である。変調する振幅は数Hz~200Hzとする。LM変調は第1の実施形態において説明したものと同じである。
[Second Embodiment]
In the first embodiment, the first stage is an unmodulated pressure field and the second stage is an LM-modulated pressure field in order to present a tactile stimulus that reproduces a click feeling. On the other hand, in the second embodiment, the first stage is an AM (amplitude modulation) -modulated pressure field, and the second stage is an LM-modulated pressure field. AM modulation is ultrasonic amplitude modulation. The amplitude to be modulated is several Hz to 200 Hz. The LM modulation is the same as described in the first embodiment.
 図10は、第2の実施形態に係る音場生成装置101概略構成を示す図である。図10に示すように、音場生成装置101は、超音波発振素子アレイ10と、制御部20と、検知部30と、映像表示装置40と、を有する。第2の実施形態に係る音場生成装置101は、ひとつの超音波発振素子アレイ10を用いて底面から600mmの位置に触覚刺激を提示する。図10には、超音波発振素子アレイ10から600mmの位置に仮想ボタン51が示されている。なお、第2の実施形態において、検知部30は人間の手の平の位置を検知するものとする。 FIG. 10 is a diagram showing a schematic configuration of the sound field generator 101 according to the second embodiment. As shown in FIG. 10, the sound field generation device 101 includes an ultrasonic oscillation element array 10, a control unit 20, a detection unit 30, and an image display device 40. The sound field generator 101 according to the second embodiment presents a tactile stimulus at a position 600 mm from the bottom surface by using one ultrasonic oscillating element array 10. In FIG. 10, a virtual button 51 is shown at a position 600 mm from the ultrasonic oscillator array 10. In the second embodiment, the detection unit 30 detects the position of the human palm.
 図10において、仮想ボタン51の上部の第1領域B4に、第1段階においてAM変調された超音波による圧力場を生成する。仮想ボタン51の下部の第2領域B5に、第2段階においてLM変調された超音波による圧力場を生成する。図10に示すように、AM変調された超音波による圧力場を生成する第1領域B4は、LM変調された超音波による圧力場を生成する第2領域B5よりも位置が高い。本実施形態において、AM変調された超音波による圧力場を生成する領域の高さは例えば50mmとし、LM変調された超音波による圧力場を生成する領域の高さは例えば100mmとする。また、AM変調された超音波による圧力場の強度は、LM変調された超音波による圧力場の強度の概ね10分の1の強度とする。 In FIG. 10, an AM-modulated ultrasonic pressure field is generated in the first region B4 above the virtual button 51 in the first stage. An LM-modulated ultrasonic pressure field is generated in the second region B5 below the virtual button 51 in the second stage. As shown in FIG. 10, the first region B4 that generates the pressure field by the AM-modulated ultrasonic wave is higher in position than the second region B5 that generates the pressure field by the LM-modulated ultrasonic wave. In the present embodiment, the height of the region for generating the pressure field by the AM-modulated ultrasonic wave is, for example, 50 mm, and the height of the region for generating the pressure field by the LM-modulated ultrasonic wave is, for example, 100 mm. Further, the strength of the pressure field due to the AM-modulated ultrasonic wave is approximately one tenth of the strength of the pressure field due to the LM-modulated ultrasonic wave.
 図11は、第2の実施形態における圧力場の制御の段階を示す図である。図11に示すように、第2の実施形態では、探索と操作の2段階の触覚刺激を提示する。探索の段階は、人の手がボタンの位置を能動的に探索する段階であり、AM変調された超音波による圧力場による弱い触覚刺激を提示する。操作の段階は、人の手が仮想ボタンを押下し操作を完了させる段階であり、LM変調された超音波による圧力場による強い触覚刺激を提示する。 FIG. 11 is a diagram showing a stage of pressure field control in the second embodiment. As shown in FIG. 11, in the second embodiment, a two-step tactile stimulus of search and operation is presented. The search stage is the stage in which the human hand actively searches for the position of the button, and presents a weak tactile stimulus due to the pressure field of AM-modulated ultrasonic waves. The operation stage is a stage in which a human hand presses a virtual button to complete the operation, and presents a strong tactile stimulus by a pressure field by LM-modulated ultrasonic waves.
 図12は、AM変調された超音波による圧力場とLM変調された超音波による圧力場の強度の比較を示す図である。図12に示すように、AM変調された超音波による圧力場はLM変調された圧力場と比べて音響放射圧の時間平均が2分の1程度の強度の触覚刺激であり、手の平に対して弱い触覚刺激を提示する。なお、音響放射圧は圧力場の強度の指標となるものである。 FIG. 12 is a diagram showing a comparison of the strengths of the pressure field due to AM-modulated ultrasonic waves and the pressure field due to LM-modulated ultrasonic waves. As shown in FIG. 12, the pressure field by the AM-modulated ultrasonic wave is a tactile stimulus with an intensity of about half the time average of the acoustic radiation pressure as compared with the LM-modulated pressure field. Presents a weak tactile stimulus. The acoustic radiation pressure is an index of the strength of the pressure field.
 この二つの圧力場は、検知部30が人の手の位置を検知することにより切り替える。検知部30が第2領域B5に人の手が移動したことを検知したら、制御部20はAM変調された超音波による圧力場からLM変調された超音波による圧力場へと切り替える。 The two pressure fields are switched by the detection unit 30 detecting the position of a human hand. When the detection unit 30 detects that the human hand has moved to the second region B5, the control unit 20 switches from the pressure field by the AM-modulated ultrasonic wave to the pressure field by the LM-modulated ultrasonic wave.
 第2の実施形態に係る音場生成装置101によれば、AM変調された超音波による圧力場による触覚刺激と、LM変調された超音波による圧力場による触覚刺激とを空間内の異なる領域に提示する。異なる変調方式により変調されることで、人間に感じられる強度が異なる2段階の触覚刺激を空間内の異なる領域に提示することにより、人間の手の平に与える触覚刺激の違いを作り出すことができ、クリック感を再現することができる。 According to the sound field generator 101 according to the second embodiment, the tactile stimulus by the pressure field by the AM-modulated ultrasonic wave and the tactile stimulus by the pressure field by the LM-modulated ultrasonic wave are applied to different regions in the space. Present. By being modulated by different modulation methods, it is possible to create a difference in the tactile stimulus given to the human palm by presenting two stages of tactile stimuli with different intensities perceived by humans in different areas in space. The feeling can be reproduced.
 [変形例1]
 上記第1の実施形態では第1領域の圧力場を無変調の超音波による圧力場とし、第2領域の圧力場をLM変調された超音波による圧力場とした。また、上記第2の実施形態では第1領域の圧力場をAM変調された超音波による圧力場とし、第2領域の圧力場をLM変調された超音波による圧力場とした。しかしながら、図13に示すような他の組み合わせも可能である。
[Modification 1]
In the first embodiment, the pressure field in the first region is a pressure field by unmodulated ultrasonic waves, and the pressure field in the second region is a pressure field by LM-modulated ultrasonic waves. Further, in the second embodiment, the pressure field in the first region is a pressure field by AM-modulated ultrasonic waves, and the pressure field in the second region is a pressure field by LM-modulated ultrasonic waves. However, other combinations as shown in FIG. 13 are also possible.
 図13において「無変調」は無変調の圧力場であり、「AM強」はAM変調された超音波の出力を強くした圧力場であり、「LM強」はLM変調された超音波の出力を強くした圧力場であり、「AM弱」はAM変調された超音波の出力を弱くした圧力場であり、「LM弱」はLM変調された超音波の出力を弱くした圧力場である。図12において、好ましい組み合わせについて「〇」とし、可能性がある組み合わせについて「△」としている。 In FIG. 13, “unmodulated” is an unmodulated pressure field, “AM strong” is a pressure field in which the output of AM-modulated ultrasonic waves is strengthened, and “LM strong” is the output of LM-modulated ultrasonic waves. "Weak AM" is a pressure field in which the output of AM-modulated sound waves is weakened, and "weak LM" is a pressure field in which the output of LM-modulated sound waves is weakened. In FIG. 12, a preferable combination is indicated by “◯”, and a possible combination is indicated by “Δ”.
 図13に示すように、例えば、第1領域の圧力場を無変調の圧力場とし、第2領域をAM変調された超音波の強度が強い圧力場とすることも可能である。また、第1領域の圧力場をLM変調された超音波の強度が弱い圧力場とし、第2領域をLM変調された超音波の強度が強い圧力場とするように、第1領域の圧力場と第2領域の圧力場とで圧力場の変調方式は変えずに出力の強度(度合い)を変えることも可能である。 As shown in FIG. 13, for example, it is possible to use the pressure field in the first region as an unmodulated pressure field and the second region as a pressure field with strong AM-modulated ultrasonic waves. Further, the pressure field in the first region is such that the pressure field in the first region is a pressure field in which the intensity of the LM-modulated ultrasonic wave is weak and the second region is a pressure field in which the intensity of the LM-modulated ultrasonic wave is strong. It is also possible to change the output intensity (degree) without changing the pressure field modulation method between the pressure field and the pressure field in the second region.
 [変形例2]
 上記第1の実施形態では図6に示すように無変調な圧力場が所定の位置で所定の圧力になるように予め作りこんでおいた。すなわち、無変調な圧力場を形成する超音波の焦点位置を空間内の予め定められた位置(部分領域B3の中心位置)としていた。しかしながら、この超音波の焦点位置を検知部30により取得した人の指先の位置と連動させ、動的に制御してもよい。すなわち、第1段階において超音波の焦点位置およびその圧力場の強度を動的に制御してもよい。例えば、指先が高い位置A1にある場合に超音波の焦点位置をA1の位置として0.6(相対値)の大きさの圧力場を生成し、指先が中間の位置A2に来たことを検知部30で確認したら、超音波の焦点位置をA2の位置として0.8(相対値)の大きさの圧力場を生成し、指先が低い位置A3に来たことを検知部30で確認したら、超音波の焦点位置をA3の位置として1.0(相対値)の大きさの圧力場を生成するように制御してもよい。
[Modification 2]
In the first embodiment, as shown in FIG. 6, the unmodulated pressure field is preliminarily created so as to have a predetermined pressure at a predetermined position. That is, the focal position of the ultrasonic wave forming the unmodulated pressure field was set to a predetermined position in the space (center position of the partial region B3). However, the focal position of the ultrasonic wave may be dynamically controlled by interlocking with the position of the fingertip of a person acquired by the detection unit 30. That is, the focal position of the ultrasonic wave and the intensity of the pressure field thereof may be dynamically controlled in the first stage. For example, when the fingertip is at the high position A1, a pressure field with a magnitude of 0.6 (relative value) is generated with the focal position of the sound wave as the position of A1, and it is detected that the fingertip has come to the intermediate position A2. After confirming with the unit 30, a pressure field having a magnitude of 0.8 (relative value) is generated with the focal position of the sound wave as the position of A2, and when the detection unit 30 confirms that the fingertip has come to the low position A3, The focal position of the sound wave may be controlled to generate a pressure field having a magnitude of 1.0 (relative value) as the position of A3.
 [変形例3]
 なお、上記第1の実施形態では、検知部30によって指先が所定の位置に移動したことを検知したときに第1領域の圧力場から第2領域の圧力場へと切り替えた。すなわち、検知された指先の位置に応じて、圧力場を第1段階から第2段階へ切り替えた。これに代えて、第1領域の圧力場と第2領域の第2段階の圧力場を常時生成してもよい。すなわち、第1段階から第2段階への切り替えを行わなくてよい。この場合には、検知部30によって指先の位置を検知しなくてもよい。
[Modification 3]
In the first embodiment, when the detection unit 30 detects that the fingertip has moved to a predetermined position, the pressure field in the first region is switched to the pressure field in the second region. That is, the pressure field was switched from the first stage to the second stage according to the detected position of the fingertip. Instead of this, a pressure field in the first region and a pressure field in the second stage in the second region may be constantly generated. That is, it is not necessary to switch from the first stage to the second stage. In this case, the detection unit 30 does not have to detect the position of the fingertip.
 また、本発明の様々な実施形態は、フローチャートおよびブロック図を参照して記載されてよく、ここにおいてブロックは、(1)操作が実行されるプロセスの段階または(2)操作を実行する役割を持つ装置のセクションを表わしてよい。特定の段階およびセクションが、専用回路、コンピュータ可読媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、および/またはコンピュータ可読媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタルおよび/またはアナログハードウェア回路を含んでよく、集積回路(IC)および/またはディスクリート回路を含んでよい。プログラマブル回路は、論理AND、論理OR、論理XOR、論理NAND、論理NOR、および他の論理操作、フリップフロップ、レジスタ、フィールドプログラマブルゲートアレイ(FPGA)、プログラマブルロジックアレイ(PLA)等のようなメモリ要素等を含む、再構成可能なハードウェア回路を含んでよい。 In addition, various embodiments of the present invention may be described with reference to flowcharts and block diagrams, where the block serves (1) the stage of the process in which the operation is performed or (2) the role of performing the operation. It may represent a section of the device it has. Specific stages and sections are implemented by dedicated circuits, programmable circuits supplied with computer-readable instructions stored on a computer-readable medium, and / or processors supplied with computer-readable instructions stored on a computer-readable medium. It's okay. Dedicated circuits may include digital and / or analog hardware circuits, and may include integrated circuits (ICs) and / or discrete circuits. Programmable circuits are memory elements such as logical AND, logical OR, logical XOR, logical NAND, logical NOR, and other logical operations, flip flops, registers, field programmable gate arrays (FPGAs), programmable logic arrays (PLA), etc. May include reconfigurable hardware circuits, including, etc.
 コンピュータ可読媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読媒体は、フローチャートまたはブロック図で指定された操作を実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読媒体のより具体的な例としては、フロッピー(登録商標)ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、消去可能プログラマブルリードオンリメモリ(EPROMまたはフラッシュメモリ)、電気的消去可能プログラマブルリードオンリメモリ(EEPROM)、静的ランダムアクセスメモリ(SRAM)、コンパクトディスクリードオンリメモリ(CD-ROM)、デジタル多用途ディスク(DVD)、ブルーレイ(RTM)ディスク、メモリスティック、集積回路カード等が含まれてよい。 The computer readable medium may include any tangible device capable of storing instructions executed by the appropriate device, so that the computer readable medium having the instructions stored therein is specified in a flow chart or block diagram. It will be equipped with a product that contains instructions that can be executed to create means for performing the operation. Examples of the computer-readable medium may include an electronic storage medium, a magnetic storage medium, an optical storage medium, an electromagnetic storage medium, a semiconductor storage medium, and the like. More specific examples of computer-readable media include floppy (registered trademark) disks, diskettes, hard disks, random access memory (RAM), read-only memory (ROM), erasable programmable read-only memory (EPROM or flash memory), Electrically erasable programmable read-only memory (EEPROM), static random access memory (SRAM), compact disk read-only memory (CD-ROM), digital versatile disk (DVD), Blu-ray (RTM) disk, memory stick, integrated A circuit card or the like may be included.
 コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ(ISA)命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、またはSmalltalk、JAVA(登録商標)、C++等のようなオブジェクト指向プログラミング言語、および「C」プログラミング言語または同様のプログラミング言語のような従来の手続型プログラミング言語を含む、1または複数のプログラミング言語の任意の組み合わせで記述されたソースコードまたはオブジェクトコードのいずれかを含んでよい。 Computer-readable instructions are assembler instructions, instruction set architecture (ISA) instructions, machine instructions, machine-dependent instructions, microcode, firmware instructions, state-setting data, or object-oriented programming such as Smalltalk, JAVA®, C ++, etc. Includes either source code or object code written in any combination of one or more programming languages, including languages, and traditional procedural programming languages such as the "C" programming language or similar programming languages. good.
 コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサまたはプログラマブル回路に対し、ローカルにまたはローカルエリアネットワーク(LAN)、インターネット等のようなワイドエリアネットワーク(WAN)を介して提供され、フローチャートまたはブロック図で指定された操作を実行するための手段を作成すべく、コンピュータ可読命令を実行してよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。 Computer-readable instructions are used locally or to a local area network (LAN), wide area network (WAN) such as the Internet, to a general purpose computer, a special purpose computer, or the processor or programmable circuit of another programmable data processing device. ) May execute computer-readable instructions to create means for performing the operations specified in the flowchart or block diagram. Examples of processors include computer processors, processing units, microprocessors, digital signal processors, controllers, microcontrollers, and the like.
 図14は、本発明の複数の態様が全体的または部分的に具現化されてよいコンピュータ2200の例を示す。コンピュータ2200にインストールされたプログラムは、コンピュータ2200に、本発明の実施形態に係る装置に関連付けられる操作または当該装置の1または複数のセクションとして機能させることができ、または当該操作または当該1または複数のセクションを実行させることができ、および/またはコンピュータ2200に、本発明の実施形態に係るプロセスまたは当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ2200に、本明細書に記載のフローチャートおよびブロック図のブロックのうちのいくつかまたはすべてに関連付けられた特定の操作を実行させるべく、CPU2212によって実行されてよい。 FIG. 14 shows an example of a computer 2200 in which a plurality of aspects of the present invention may be embodied in whole or in part. The program installed on the computer 2200 can cause the computer 2200 to function as an operation associated with the device according to an embodiment of the present invention or as one or more sections of the device, or the operation or the one or more. Sections can be run and / or the computer 2200 can be run a process according to an embodiment of the invention or a stage of such process. Such a program may be run by the CPU 2212 to cause the computer 2200 to perform certain operations associated with some or all of the blocks of the flowcharts and block diagrams described herein.
 本実施形態によるコンピュータ2200は、CPU2212、RAM2214、グラフィックコントローラ2216、およびディスプレイデバイス2218を含み、それらはホストコントローラ2210によって相互に接続されている。コンピュータ2200はまた、通信インタフェース2222、ハードディスクドライブ2224、DVD-ROMドライブ2226、およびICカードドライブのような入/出力ユニットを含み、それらは入/出力コントローラ2220を介してホストコントローラ2210に接続されている。コンピュータはまた、ROM2230およびキーボード2242のようなレガシの入/出力ユニットを含み、それらは入/出力チップ2240を介して入/出力コントローラ2220に接続されている。 The computer 2200 according to this embodiment includes a CPU 2212, a RAM 2214, a graphic controller 2216, and a display device 2218, which are interconnected by a host controller 2210. The computer 2200 also includes input / output units such as a communication interface 2222, a hard disk drive 2224, a DVD-ROM drive 2226, and an IC card drive, which are connected to the host controller 2210 via the input / output controller 2220. There is. The computer also includes legacy input / output units such as ROM 2230 and keyboard 2242, which are connected to the input / output controller 2220 via an input / output chip 2240.
 CPU2212は、ROM2230およびRAM2214内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ2216は、RAM2214内に提供されるフレームバッファ等またはそれ自体の中にCPU2212によって生成されたイメージデータを取得し、イメージデータがディスプレイデバイス2218上に表示されるようにする。 The CPU 2212 operates according to the programs stored in the ROM 2230 and the RAM 2214, thereby controlling each unit. The graphic controller 2216 acquires the image data generated by the CPU 2212 in a frame buffer or the like provided in the RAM 2214 or itself so that the image data is displayed on the display device 2218.
 通信インタフェース2222は、ネットワークを介して他の電子デバイスと通信する。ハードディスクドライブ2224は、コンピュータ2200内のCPU2212によって使用されるプログラムおよびデータを格納する。DVD-ROMドライブ2226は、プログラムまたはデータをDVD-ROM2201から読み取り、ハードディスクドライブ2224にRAM2214を介してプログラムまたはデータを提供する。ICカードドライブは、プログラムおよびデータをICカードから読み取り、および/またはプログラムおよびデータをICカードに書き込む。 The communication interface 2222 communicates with other electronic devices via the network. The hard disk drive 2224 stores programs and data used by the CPU 2212 in the computer 2200. The DVD-ROM drive 2226 reads the program or data from the DVD-ROM 2201 and provides the program or data to the hard disk drive 2224 via the RAM 2214. The IC card drive reads programs and data from the IC card and / or writes programs and data to the IC card.
 ROM2230はその中に、アクティブ化時にコンピュータ2200によって実行されるブートプログラム等、および/またはコンピュータ2200のハードウェアに依存するプログラムを格納する。入/出力チップ2240はまた、様々な入/出力ユニットをパラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入/出力コントローラ2220に接続してよい。 The ROM 2230 stores in it a boot program or the like executed by the computer 2200 at the time of activation, and / or a program depending on the hardware of the computer 2200. The input / output chip 2240 may also connect various input / output units to the input / output controller 2220 via a parallel port, serial port, keyboard port, mouse port, and the like.
 プログラムが、DVD-ROM2201またはICカードのようなコンピュータ可読媒体によって提供される。プログラムは、コンピュータ可読媒体から読み取られ、コンピュータ可読媒体の例でもあるハードディスクドライブ2224、RAM2214、またはROM2230にインストールされ、CPU2212によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ2200に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置または方法が、コンピュータ2200の使用に従い情報の操作または処理を実現することによって構成されてよい。 The program is provided by a computer-readable medium such as a DVD-ROM 2201 or an IC card. The program is read from a computer-readable medium, installed on a hard disk drive 2224, RAM 2214, or ROM 2230, which is also an example of a computer-readable medium, and executed by the CPU 2212. The information processing described in these programs is read by the computer 2200 and provides a link between the program and the various types of hardware resources described above. The device or method may be configured to implement the manipulation or processing of information in accordance with the use of computer 2200.
 例えば、通信がコンピュータ2200および外部デバイス間で実行される場合、CPU2212は、RAM2214にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース2222に対し、通信処理を命令してよい。通信インタフェース2222は、CPU2212の制御下、RAM2214、ハードディスクドライブ2224、DVD-ROM2201、またはICカードのような記録媒体内に提供される送信バッファ処理領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、またはネットワークから受信された受信データを記録媒体上に提供される受信バッファ処理領域等に書き込む。 For example, when communication is executed between the computer 2200 and an external device, the CPU 2212 executes a communication program loaded in the RAM 2214, and performs communication processing on the communication interface 2222 based on the processing described in the communication program. You may order. Under the control of the CPU 2212, the communication interface 2222 reads and reads transmission data stored in a transmission buffer processing area provided in a recording medium such as a RAM 2214, a hard disk drive 2224, a DVD-ROM 2201, or an IC card. The data is transmitted to the network, or the received data received from the network is written to the reception buffer processing area provided on the recording medium.
 また、CPU2212は、ハードディスクドライブ2224、DVD-ROMドライブ2226(DVD-ROM2201)、ICカード等のような外部記録媒体に格納されたファイルまたはデータベースの全部または必要な部分がRAM2214に読み取られるようにし、RAM2214上のデータに対し様々なタイプの処理を実行してよい。CPU2212は次に、処理されたデータを外部記録媒体にライトバックする。 Further, the CPU 2212 makes the RAM 2214 read all or necessary parts of the file or the database stored in the external recording medium such as the hard disk drive 2224, the DVD-ROM drive 2226 (DVD-ROM2201), and the IC card. Various types of processing may be performed on the data on the RAM 2214. The CPU 2212 then writes back the processed data to an external recording medium.
 様々なタイプのプログラム、データ、テーブル、およびデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。CPU2212は、RAM2214から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプの操作、情報処理、条件判断、条件分岐、無条件分岐、情報の検索/置換等を含む、様々なタイプの処理を実行してよく、結果をRAM2214に対しライトバックする。また、CPU2212は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第2の属性の属性値に関連付けられた第1の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、CPU2212は、第1の属性の属性値が指定される、条件に一致するエントリを当該複数のエントリの中から検索し、当該エントリ内に格納された第2の属性の属性値を読み取り、それにより予め定められた条件を満たす第1の属性に関連付けられた第2の属性の属性値を取得してよい。 Various types of information such as various types of programs, data, tables, and databases may be stored in recording media and processed. The CPU 2212 describes various types of operations, information processing, conditional judgment, conditional branching, unconditional branching, and information retrieval described in various parts of the present disclosure with respect to the data read from the RAM 2214. Various types of processing may be performed, including / replacement, etc., and the results are written back to RAM 2214. Further, the CPU 2212 may search for information in a file, database, or the like in the recording medium. For example, when a plurality of entries each having an attribute value of the first attribute associated with the attribute value of the second attribute are stored in the recording medium, the CPU 2212 specifies the attribute value of the first attribute. Search for an entry that matches the condition from the plurality of entries, read the attribute value of the second attribute stored in the entry, and associate it with the first attribute that satisfies the predetermined condition. The attribute value of the second attribute obtained may be acquired.
 上で説明したプログラムまたはソフトウェアモジュールは、コンピュータ2200上またはコンピュータ2200近傍のコンピュータ可読媒体に格納されてよい。また、専用通信ネットワークまたはインターネットに接続されたサーバーシステム内に提供されるハードディスクまたはRAMのような記録媒体が、コンピュータ可読媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ2200に提供する。 The program or software module described above may be stored on or on a computer-readable medium near the computer 2200. Also, a recording medium such as a hard disk or RAM provided in a dedicated communication network or a server system connected to the Internet can be used as a computer readable medium, thereby providing the program to the computer 2200 over the network. do.
 以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、請求の範囲の記載から明らかである。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments. It will be apparent to those skilled in the art that various changes or improvements can be made to the above embodiments. It is clear from the claims that embodiments with such modifications or improvements may also be included in the technical scope of the invention.
 請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。 The order of execution of operations, procedures, steps, steps, etc. in the equipment, system, program, and method shown in the claims, description, and drawings is particularly "before" and "prior to". It should be noted that it can be realized in any order unless the output of the previous process is used in the subsequent process. Even if the claims, the description, and the operation flow in the drawings are explained using "first", "next", etc. for convenience, it means that it is essential to carry out in this order. is not it.
 10 超音波発振素子アレイ、11 超音波発振素子、12 支持体、20 制御部、30 検知部、40 映像表示装置、50,51 仮想ボタン、100,101 音場生成装置、2200 コンピュータ、2201 DVD-ROM、2210 ホストコントローラ、2212 CPU、2214 RAM、2216 グラフィックコントローラ、2218 ディスプレイデバイス、2220 入/出力コントローラ、2222 通信インタフェース、2224 ハードディスクドライブ、2226 DVD-ROMドライブ、2230 ROM、2240 入/出力チップ、2242 キーボード、B1~B5 領域、A1~A3 位置、P1,P2 焦点位置 10 ultrasonic oscillating element array, 11 ultrasonic oscillating element, 12 support, 20 controller, 30 detector, 40 video display device, 50, 51 virtual buttons, 100, 101 sound field generator, 2200 computer, 2201 DVD- ROM, 2210 host controller, 2212 CPU, 2214 RAM, 2216 graphic controller, 2218 display device, 2220 input / output controller, 2222 communication interface, 2224 hard disk drive, 2226 DVD-ROM drive, 2230 ROM, 2240 input / output chip, 2242. Keyboard, B1 to B5 area, A1 to A3 position, P1, P2 focus position

Claims (18)

  1.  超音波を発振する超音波発振素子が配列された超音波発振素子アレイと、
     前記超音波発振素子アレイを制御する制御部と、
    を備え、
     前記制御部は、空間内の第1領域に前記超音波による第1の圧力場を生成し、前記空間内の前記第1領域とは異なる第2領域に前記第1の圧力場と異なる強度の前記超音波の時空間変調による第2の圧力場を生成する、音場生成装置。
    An ultrasonic oscillating element array in which ultrasonic oscillating elements that oscillate ultrasonic waves are arranged, and
    A control unit that controls the ultrasonic oscillating element array and
    Equipped with
    The control unit generates a first pressure field by the sound wave in the first region in the space, and has a strength different from that of the first pressure field in a second region different from the first region in the space. A sound field generator that generates a second pressure field by spatiotemporal modulation of sound waves.
  2.  前記第1領域と前記第2領域は隣接し、隣接する前記第1領域と前記第2領域との圧力場の強度差は、予め設定された値よりも大きい、請求項1に記載の音場生成装置。 The sound field according to claim 1, wherein the first region and the second region are adjacent to each other, and the strength difference of the pressure field between the adjacent first region and the second region is larger than a preset value. Generator.
  3.  前記第1の圧力場の強度は、前記第1領域内で連続的に変化する、請求項1または2に記載の音場生成装置。 The sound field generator according to claim 1 or 2, wherein the strength of the first pressure field changes continuously in the first region.
  4.  前記制御部は、時空間変調とは異なる第1の変調で制御した前記超音波により前記第1の圧力場を生成し、前記第1の変調と異なる第2の変調で制御した前記超音波により前記第2の圧力場を生成する請求項1から3のいずれか一項に記載の音場生成装置。 The control unit generates the first pressure field by the ultrasonic wave controlled by the first modulation different from the spatiotemporal modulation, and by the ultrasonic wave controlled by the second modulation different from the first modulation. The sound field generator according to any one of claims 1 to 3, which generates the second pressure field.
  5.  前記第1の変調と前記第2の変調とは変調方式が異なる請求項4に記載の音場生成装置。 The sound field generator according to claim 4, wherein the first modulation and the second modulation have different modulation methods.
  6.  前記第1の圧力場と前記第2の圧力場とは同じ変調方式によって生成される請求項1に記載の音場生成装置。 The sound field generator according to claim 1, wherein the first pressure field and the second pressure field are generated by the same modulation method.
  7.  前記制御部は、前記超音波を振幅変調して前記第1の圧力場を生成する請求項4または5に記載の音場生成装置。 The sound field generator according to claim 4 or 5, wherein the control unit is amplitude-modulated with the ultrasonic waves to generate the first pressure field.
  8.  前記制御部は、無変調の前記超音波によって前記第1の圧力場を生成し、変調した前記超音波によって前記第2の圧力場を生成する請求項4または6に記載の音場生成装置。 The sound field generator according to claim 4 or 6, wherein the control unit generates the first pressure field by the unmodulated ultrasonic wave, and generates the second pressure field by the modulated ultrasonic wave.
  9.  前記制御部は、パルス状の前記超音波によって前記第2の圧力場を生成する請求項8に記載の音場生成装置。 The sound field generation device according to claim 8, wherein the control unit generates the second pressure field by the pulsed ultrasonic waves.
  10.  前記制御部は、前記パルス状の超音波の焦点位置を、パルス時間内に前記第2領域内の複数個所間で往復運動させる請求項9に記載の音場生成装置。 The sound field generation device according to claim 9, wherein the control unit reciprocates the focal position of the pulsed ultrasonic wave between a plurality of locations in the second region within the pulse time.
  11.  物体の位置を検知する検知部をさらに備え、
     前記制御部は、前記物体の位置により、前記第1の圧力場を生成する制御から前記第2の圧力場を生成する制御へ切り替える請求項1から10のいずれか一項に記載の音場生成装置。
    It also has a detector that detects the position of an object.
    The sound field generation according to any one of claims 1 to 10, wherein the control unit switches from a control for generating the first pressure field to a control for generating the second pressure field depending on the position of the object. Device.
  12.  前記制御部は、前記物体の位置により、前記第1の圧力場の強度を変更する請求項11に記載の音場生成装置。 The sound field generator according to claim 11, wherein the control unit changes the strength of the first pressure field according to the position of the object.
  13.  前記制御部は、前記第2の圧力場を生成する前記物体の位置において、前記第1の圧力場の強度が最大となる請求項12に記載の音場生成装置。 The sound field generating device according to claim 12, wherein the control unit maximizes the strength of the first pressure field at the position of the object that generates the second pressure field.
  14.  前記制御部は、前記物体の位置にかかわらず、前記第1の圧力場と前記第2の圧力場の少なくとも一方を生成する請求項11から13のいずれか一項に記載の音場生成装置。 The sound field generation device according to any one of claims 11 to 13, wherein the control unit generates at least one of the first pressure field and the second pressure field regardless of the position of the object.
  15.  前記超音波発振素子アレイは、互いに異なる平面上に複数配置された請求項1から14のいずれか一項に記載の音場生成装置。 The sound field generator according to any one of claims 1 to 14, wherein the ultrasonic oscillating element array is arranged in a plurality of planes different from each other.
  16.  前記空間内に映像を表示する映像表示装置をさらに備え、
     前記制御部は、前記映像表示装置により表示された映像の位置に前記第1の圧力場と前記第2の圧力場の少なくとも一方を重畳して生成する、請求項1から15のいずれか一項に記載の音場生成装置。
    Further equipped with a video display device for displaying video in the space,
    One of claims 1 to 15, wherein the control unit superimposes at least one of the first pressure field and the second pressure field on the position of the image displayed by the image display device. The sound field generator described in.
  17.  超音波を発振する超音波発振素子が配列された超音波発振素子アレイの振動を制御する制御段階を備え、
     前記制御段階において、空間内の第1領域に前記超音波による第1の圧力場を生成し、前記空間内の前記第1領域とは異なる第2領域に前記第1の圧力場と異なる強度の前記超音波の時空間変調による第2の圧力場を生成する、音場生成方法。
    It is equipped with a control stage that controls the vibration of the ultrasonic oscillating element array in which the ultrasonic oscillating elements that oscillate ultrasonic waves are arranged.
    In the control stage, a first pressure field by the sound wave is generated in a first region in the space, and a second region different from the first region in the space has a strength different from that of the first pressure field. A sound field generation method for generating a second pressure field by spatiotemporal modulation of sound waves.
  18.  コンピュータに、
     超音波を発振する超音波発振素子が配列された超音波発振素子アレイの振動を制御する制御段階を実行させることにより、超音波による圧力場を提示する音場生成プログラムであって、
     前記制御段階において、空間内の第1領域に前記超音波による第1の圧力場を生成し、前記空間内の前記第1領域とは異なる第2領域に前記第1の圧力場と異なる強度の前記超音波の時空間変調による第2の圧力場を生成する、音場生成プログラム。
    On the computer
    A sound field generation program that presents a pressure field by ultrasonic waves by executing a control step that controls the vibration of an ultrasonic oscillating element array in which ultrasonic oscillating elements that oscillate ultrasonic waves are arranged.
    In the control stage, a first pressure field by the sound wave is generated in a first region in the space, and a second region different from the first region in the space has a strength different from that of the first pressure field. A sound field generation program that generates a second pressure field by spatiotemporal modulation of sound waves.
PCT/JP2021/024884 2020-07-08 2021-06-30 Acoustic field generation device, acoustic field generation method, and acoustic field generation program WO2022009758A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020118019A JP2023113979A (en) 2020-07-08 2020-07-08 Sound field generation device, sound field generation method, and sound field generation program
JP2020-118019 2020-07-08

Publications (1)

Publication Number Publication Date
WO2022009758A1 true WO2022009758A1 (en) 2022-01-13

Family

ID=79552472

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/024884 WO2022009758A1 (en) 2020-07-08 2021-06-30 Acoustic field generation device, acoustic field generation method, and acoustic field generation program

Country Status (2)

Country Link
JP (1) JP2023113979A (en)
WO (1) WO2022009758A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017027401A (en) * 2015-07-23 2017-02-02 株式会社デンソー Display operation device
JP2018507485A (en) * 2015-02-20 2018-03-15 ウルトラハプティクス アイピー リミテッドUltrahaptics Ip Ltd Perception in the tactile system
JP2019144673A (en) * 2018-02-16 2019-08-29 トヨタ自動車株式会社 Hand guiding device
JP2019525344A (en) * 2016-08-03 2019-09-05 ウルトラハプティクス アイピー リミテッドUltrahaptics Ip Ltd Three-dimensional perception in haptic systems

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018507485A (en) * 2015-02-20 2018-03-15 ウルトラハプティクス アイピー リミテッドUltrahaptics Ip Ltd Perception in the tactile system
JP2017027401A (en) * 2015-07-23 2017-02-02 株式会社デンソー Display operation device
JP2019525344A (en) * 2016-08-03 2019-09-05 ウルトラハプティクス アイピー リミテッドUltrahaptics Ip Ltd Three-dimensional perception in haptic systems
JP2019144673A (en) * 2018-02-16 2019-08-29 トヨタ自動車株式会社 Hand guiding device

Also Published As

Publication number Publication date
JP2023113979A (en) 2023-08-17

Similar Documents

Publication Publication Date Title
US10481697B2 (en) System and input method for receiving input in response to motion of user
US11099653B2 (en) Machine responsiveness to dynamic user movements and gestures
US11182685B2 (en) Interactions with virtual objects for machine control
EP3259653B1 (en) Method for producing an acoustic field in a haptic system
US20200356238A1 (en) Virtual Interactions for Machine Control
CN104423591B (en) System and method for the visual processes of spectrogram to generate haptic effect
US20180267612A1 (en) Touch interface device and method for applying lateral forces on a human appendage
US20080122797A1 (en) Apparatus, method, and medium for outputting tactile feedback on display device
KR20170142902A (en) Systems and methods for closed-loop control for haptic feedback
US10416834B1 (en) Interaction strength using virtual objects for machine control
US20140256438A1 (en) Haptic sensations as a function of eye gaze
Emgin et al. Haptable: An interactive tabletop providing online haptic feedback for touch gestures
US10558271B2 (en) System for receiving input in response to motion of user
Sadihov et al. Prototype of a VR upper-limb rehabilitation system enhanced with motion-based tactile feedback
CN109116979A (en) The variable tactile dimension watched attentively in orientation virtual environment
WO2017084253A1 (en) Control method applied to head-mounted device and head-mounted device
US20200264705A1 (en) Information processing apparatus and electronic device
WO2022009758A1 (en) Acoustic field generation device, acoustic field generation method, and acoustic field generation program
US20170262058A1 (en) Apparatus and method for providing image
US10545576B2 (en) Electronic device and drive control method thereof
CN113867186B (en) Terminal control method, storage medium and massage system of physiotherapy massage instrument
KR101019163B1 (en) Mouse
KR101128628B1 (en) Interface Apparatus and Method that produce sense feedback about user input
WO2023037463A1 (en) Tactile presentation device
Muryan Awaludin Human Factors As HCI Theories

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21838761

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21838761

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP