JP6959703B2 - 仮想現実ヘッドセットスタンド - Google Patents

仮想現実ヘッドセットスタンド Download PDF

Info

Publication number
JP6959703B2
JP6959703B2 JP2020501158A JP2020501158A JP6959703B2 JP 6959703 B2 JP6959703 B2 JP 6959703B2 JP 2020501158 A JP2020501158 A JP 2020501158A JP 2020501158 A JP2020501158 A JP 2020501158A JP 6959703 B2 JP6959703 B2 JP 6959703B2
Authority
JP
Japan
Prior art keywords
virtual reality
reality headset
stem
user
stand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020501158A
Other languages
English (en)
Other versions
JP2020527304A (ja
Inventor
ホリイ,ヒロシ
スマザーズ,ケヴィン
ロビンソン,イアン,エヌ
セイヤー,アレキサンダー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hewlett Packard Development Co LP
Original Assignee
Hewlett Packard Development Co LP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Development Co LP filed Critical Hewlett Packard Development Co LP
Publication of JP2020527304A publication Critical patent/JP2020527304A/ja
Application granted granted Critical
Publication of JP6959703B2 publication Critical patent/JP6959703B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/98Accessories, i.e. detachable arrangements optional for the use of the video game device, e.g. grip supports of game controllers
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/24Constructional details thereof, e.g. game controllers with detachable joystick handles
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0176Head mounted characterised by mechanical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1632External expansion units, e.g. docking stations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)

Description

拡張現実/仮想現実(Augmented Reality/Virtual Reality(AR/VR))(以下、仮想現実と称す)は、エンターテインメント及び商業目的の双方で人気が高まり続けている。仮想現実ヘッドセットは、ユーザの頭部に装着されてユーザの目を覆う。該ヘッドセットは、ユーザに対して仮想現実イメージを表示し、及びユーザが自分の頭部を動かした際に遷移することが可能なものである。
一例による仮想現実ヘッドセットスタンド及び仮想現実ヘッドセットの概略図を示す側面図である。 一例による仮想現実ヘッドセットスタンド及び仮想現実ヘッドセットの概略図を示す正面図である。 一例による仮想現実ヘッドセットスタンド及び仮想現実ヘッドセットの概略図を正面側から見て示す斜視図である。 一例による仮想現実ヘッドセットスタンドの概略図を正面側から見て示す斜視図である。 一例による仮想現実ヘッドセットスタンドの概略図を側面側から見て示す斜視図である。 一例による仮想現実ヘッドセットスタンドの概略図を背面側から見て示す斜視図である。 一例による仮想現実ヘッドセットスタンド及び仮想現実ヘッドセットの概略図を背面側から見て示す斜視図である。 一例による仮想現実ヘッドセットスタンド及び仮想現実ヘッドセットの使用時における概略図を示している。 一例によるボディパック(body pack)に結合された仮想現実ヘッドセットスタンド及び仮想現実ヘッドセットの概略図を示す斜視図である。 一例によるシステムの概略図を示している。 一例による方法を示すフローチャートである。 一例によるシステムのブロック図を示している。 一例による別の方法を示すフローチャートである。 一例による第1の仮想現実イメージの概略図を示している。 一例による第2の仮想現実イメージの概略図を示している。 一例による仮想現実ヘッドセット及びコントローラの概略図を示している。 一例による仮想現実ヘッドセット及びコントローラの概略図を示している。 一例によるコンピュータシステム図である。
本書で説明する例は、仮想現実ヘッドセットを保持するための機構を提供し、該機構は、グラフィックデザイナー、プログラマー、建築家、エンジニア等が、従来のヘッドマウント又はストラップを使用して頭部にヘッドセットを物理的に取り付けることを必要とすることなく、ヘッドセットを介して仮想現実イメージ/ビデオを見ることを可能し、及び手を使用しないこと又は該機構の片手保持を可能にする。取り付けスタンドにより仮想現実ヘッドセットが所定位置に保持されるため、ユーザの片手又は両手が自由になって、コンピュータのキーボード又はタッチスクリーンで作業し続けることが可能となり、更に、ユーザが従来のコンピュータスクリーンと仮想現実ヘッドセットとの間でビューを容易に切り替えることが可能となる。該スタンドは、そのサイズが小さいため、ユーザのワークステーションで多くのスペースを占有することがなく、及び所望の利用時にユーザが容易に運ぶことが可能である。
図1Aないし図1Cは、一例による仮想現実ヘッドセットスタンド5及び仮想現実ヘッドセット25を示す様々な図である。この自立式スタンド5は、該スタンド5が仮想現実ヘッドセット25を所定位置に保持するように、ユーザの机上及び仮想現実ソフトウェアを実行しているユーザのコンピュータの隣に載置することが可能である。ユーザは、仮想現実イメージ/ビデオを見るようヘッドセット25に身を乗り出すが、該スタンド5又はヘッドセット25を物理的に保持する必要はない。仮想現実ヘッドセットスタンド5は、ベース10、該ベース10から延びるステム15、及び該ステム15に取り付けられたドッキングステーション20を含む。ステム15は、ベース10に向かって角度をなすことが可能である。ドッキングステーション20は、ステム15から離れるよう角度をなすことが可能である。一例によれば、ドッキングステーション20は、仮想現実ヘッドセット25を使用する前にステム15を取り外すことを必要とせず、及びユーザが下方を見た際に該ユーザの身体に干渉しないように、ステム15から離れるよう角度をなすことが可能である。一例によれば、ベース10もまた、ステム15から離れるよう角度をなしているドッキングステーション20のアンバランスを相殺するように、ステム15に向かって角度をなすことが可能である。、
ドッキングステーション20は、仮想現実ヘッドセット25を保持するための輪郭を有することが可能である。仮想現実ヘッドセット25は、当業界で使用される任意のタイプの仮想現実ヘッドセットとすることが可能であり、ストラップは典型的には仮想現実ヘッドセットのデザインに組み込まれるが、本書の例は、仮想現実ヘッドセット25がヘッドストラップを含むことを必要としない。しかし、スタンド5は、ヘッドストラップを含み又はヘッドストラップを有さない仮想現実ヘッドセット25で等しく機能する。ドッキングステーション20は、ステム15に接続されたリップ30、該リップ30に接続された本体部分35、及び該本体部分35に接続されたクリップ40であって、スタンド5が取り付けられた仮想現実ヘッドセット25と共に持ち上げられ又は移動される際に該仮想現実ヘッドセット25を所定位置に保持するよう配設されたクリップ40といった様々な取付機構を含む(但し、それらには限定されない)。
一例では、ステム15は、仮想現実ヘッドセット25で提供されるアクションを制御するためのコントローラ機構45を含む。該コントローラ機構45は、1つ以上のボタン、ジョイスティック、又はその他の入力制御装置46,110を含むことが可能であり、図1Aないし図1Cには図示しないが、無線又は有線で仮想現実ヘッドセット25に電気的に接続することが可能である。一例では、入力制御装置46をコントローラ機構45の第1の側48に沿って配置し、入力制御装置110をコントローラ機構45の第2の側49に沿って配置することが可能であり、この場合、該第1の側48は該第2の側49とは反対側に位置している。
図1Aないし図1Cに関連して、図2Aないし図2Cは、仮想現実ヘッドセット25が取り付けられていない状態で仮想現実ヘッドセットスタンド5のみを示す様々な図である。一例では、ステム15は、湾曲した表面65を有することが可能である。ステム15はまた、ドッキングステーション20のリップ30に隣接して保持部材50を有することが可能である。一例では、及び図面に示すように、複数のクリップ40をドッキングステーション20に配設することが可能である。他の例では、細長い単一のクリップ40を用いることが可能である。ドッキングステーション20の本体部分35は、仮想現実ヘッドセット25と正しく位置合わせして該仮想現実ヘッドセット25を保持するための湾曲した背面33及び湾曲した正面34を含むことが可能である。ドッキングステーション20の本体部分35はまた、センサ(例えば、仮想現実ヘッドセット25上のカメラ)が覆われるのを回避するための穴(例えば、穴36)を含むことが可能である。一例によれば、本体部分35の背面33から延びる一対のクリップ38を配設することも可能である。一例では、クリップ38は、仮想現実ヘッドセット25の配線に適応し維持するために使用することも可能である。
ベース10は、ステム15に接続され、及びドッキングステーション20と反対側の端部に配置される。ベース10は、スタンド5がユーザにより保持されていないときに該スタンド5を直立状態に保つための適当な支持を提供する任意の適当な態様で構成することが可能である。このため、ベース10は、スタンド5が自立して完全にハンズフリーのスタンド5として機能することを可能とし、これにより、ユーザは、スタンド5又は仮想現実ヘッドセット25を手に取ることなく該仮想現実ヘッドセット25に表示されたイメージを見ることが可能となる。ベース10はまた、図1Aないし図2Cに示すように、ステム15から外方に突出する一対の脚部55を含むことが可能である。
図1Aないし図2Cに関連して、図3は、一例による、仮想現実ヘッドセットスタンド5及び仮想現実ヘッドセット25の概略図を示す背面から見た斜視図である。コントローラ機構45の第1の側48にある入力制御装置46の配置、及びコントローラ機構45の第2の側49にある入力制御装置110の配置は、ユーザが親指を使用して1つ以上の入力制御装置46を操作すると共に同じ手の他の指で入力制御装置110を操作することを可能とし、これにより、スタンド5又は仮想現実ヘッドセット25を操作する際に両手を使う必要がなくなる。一例では、入力制御装置110は、プッシュ/スクイーズボタンとして構成することが可能である。
図1Bないし図3では、コントローラ機構45は、ステム15の一部として示されている。代替的な例では、コントローラ機構45をステム15から取り外し可能とする一方で、該ステム15を機械的に完全な状態に保ち、これにより、スタンド5を依然としてヘッドセット25の支持及び保持のために使用することが可能となる。別の例では、スタンド5は、仮想現実ヘッドセット25自体に関連する複数のハンドヘルドコントローラのうちの1つに適応するよう構成することが可能である。後者の場合、ハンドヘルドコントローラがスタンド5に取り付けられたことを仮想現実システムが検出した際に、該ハンドヘルドコントローラの機能を変更することが可能である。別の例では、スタンド5は、ドッキングステーション20をステム15に取り付ける複数のジンバル(図示せず)を含むことが可能であり、これにより、ユーザが保持するスタンド5の部分に対する更なる頭部の動きが可能となる。かかる複数のジンバルに複数のセンサを取り付けることにより、スタンドの残りの部分に対する仮想現実ディスプレイ25の動きをコントローラ機構45への別の入力として使用することが可能となる。
図1Aないし図3に関連して、図4は、一例による、使用時における仮想現実ヘッドセットスタンド5及び仮想現実ヘッドセット25の概略図を示している。図4では、破線はユーザ60の潜在的な配置を表している。この例では、スタンド5は、机等の表面上に載置され、及びユーザ60が持ち上げ及び動かすことができるスティック状のスタンド5として構成されている。ベース10は、自立した位置で直立状態を維持するための(すなわち、ユーザ60がスタンド5を所定位置で直立させて保持することを必要としない)適当な支持をスタンド5に提供するための任意の適当な構成で配設することが可能である。ユーザ60は、スタンド5を手に取って仮想現実ヘッドセット25を自分の頭部に対して配置することが可能である。代替的には、ユーザ60は、単にスタンド5を机又はワークステーション等の所与の表面上に載置し、該スタンド5に保持され取り付けられた仮想現実ヘッドセット25に対して自分の頭部を配置することが可能である。一例では、ベース10及びステム15は、仮想現実ヘッドセット25がユーザ60の目の前に配置される間に該仮想現実ヘッドセット25をドッキングステーション20内の所定位置に維持するのに十分な支持力を有する。一例によれば、仮想現実ヘッドセット25は、ユーザ60の頭部にストラップを配置することを必要とすることなく、ユーザ60の目の前で所定位置に保持される。ステム15の湾曲した表面65は、仮想現実ヘッドセット25がユーザ60の目の前に配置されている間に該ユーザ60がステム15を保持してスタンド5を移動させることを可能にする。仮想現実ヘッドセット25の配線42が図4に示されており、該配線42は、仮想現実ヘッドセット25をコンピュータ(図4には図示せず)に接続することが可能である。一例では、スタンド5もまた、コンピュータに接続される配線42を含む。別の例では、スタンド5のコントローラ機構45に関連する電子機器がコンピューターに無線で接続される。
図1Aないし図4に関連して、図5Aは、一例による、ボディパック95及び仮想現実ヘッドセット25に接続される仮想現実ヘッドセットスタンド105の別の例の概略図を示す斜視図である。ボディパック95は、仮想現実システム70を実行するために使用される携帯型のコンピュータを含むことが可能である。該システム70はバックパックとして使用するように構成することが可能であるが、図5Bに示すように少なくとも1つのユーザ取付機構100で短期間の使用のためにユーザ60の身体の正面に対してシステム70を保持することが可能である。スタンド105は、ボディパック95がユーザ60の身体の正面に対して保持されているときに、ユーザ60が仮想現実ヘッドセット25に対して自分の顔を快適に押圧することが可能となるように、仮想現実ヘッドセット25を保持するよう構成されている。スタンド105は、ユーザ60が必要とするように仮想現実ヘッドセット25の高さ等を調節することを可能にする様々な調節機構(図示せず)を含むことが可能である。図5Aにおいて、破線はユーザ60の頭部の潜在的な位置を表している。ストラップ26は、図5Aでは仮想現実ヘッドセット25に接続されるよう図示されているが、本書で説明する例は、ユーザ60の頭部に対して仮想現実ヘッドセット25を正しく保持するために該ユーザ60が自分の頭部にストラップ26を配置することを必要としない。スタンド105は、仮想現実ヘッドセット25を保持するためのドッキングステーション120を含む。スタンド105はまた、ステム115とボディパック95に取り付けられる接続部材75とを含む。
図1Aないし図5Aに関連して、図5Bは、接続部材75、該接続部材75から延びるステム115、及び該ステム115に取り付けられるドッキングステーション120を含むスタンド105を含む仮想現実システム70を示しており、該ドッキングステーション120は、仮想現実ヘッドセット25を保持するための輪郭を有している。スタンド105は、少なくとも1つのユーザ取付機構100を介してユーザ60に装着されるボディパック95上に取り付けられる。図5Bは、一例による、一対のユーザ取付機構100を示している。スタンド105は、ユーザがヘッドストラップ26を着用する必要がないようにボディパック95により所定位置に保持されるが、必要であればユーザがヘッドストラップ26を着用することも可能である。仮想現実ヘッドセット25は、ボディパック95に取り付けられ、該ボディパック95は、ユーザにより着用された際に所定位置に保持され、ユーザ60は、仮想現実ヘッドセット25を直接保持する必要がなく、単に自分の頭部を仮想現実ヘッドセット25に対して押圧するだけでよい。この例は、ユーザ60が仮想現実ヘッドセット25を介してイメージ/ビデオを見ている間に、該ユーザ60が立ち上がり、向きを変え、及び部屋内を移動することを可能にする。ボディパック95はまた、該ボディパック95が着用されておらずデスクトップ上にドッキングされている際にユーザ60が単に自分の顔を仮想現実ヘッドセット25に対して押圧することができるように該ボディパック95を直立状態に保持するデスクトップ・ドック(図示せず)を含むことが可能である。
図5Bにおいて、ユーザ60の形状の破線は、ユーザ60の潜在的な位置関係を表している。図5Bは、ハンドヘルド制御装置77を使用しているユーザ60を示している。ハンドヘルド制御装置77は、仮想現実ヘッドセット25で提供されるアクションを制御するために使用することが可能である。ハンドヘルド制御装置77は、仮想現実ヘッドセット25に無線接続することが可能である。一例では、図1Bないし図3におけるコントローラ機構45と類似したコントローラ機構を、ボディパック95、又は該ボディパック95を把持するために使用されるユーザ60の手が容易にアクセスできるよう配置されたスタンド105に配設することが可能である。別の例では、スタンド115は、図示しない複数のジンバルを含むことが可能であり、これにより頭部の更なる動きが可能となる。これらジンバルにセンサを取り付けて、ボディパックに対する仮想現実ディスプレイの動きをコントローラ機構45への別の入力として使用することが可能である。
プロセッサ80は(それが存在する場合には)、制御装置77及びコントローラ機構45に対して通信可能な状態で接続することが可能である。例えば、制御装置77は、一例では無線接続により、別の例では有線接続により、通信可能な状態で接続することが可能である。図6に示す方法200を実施するためにプロセッサにより実行することが可能な命令を含むメモリ85が配設される。ディスプレイ装置90は、コンピュータによりシミュレートされたイメージ及び方法200により生成された変換されたコンピュータによりシミュレートされたイメージを表示するためにプロセッサ80に通信可能な状態で接続されている。
図1Aないし図5Bに関連して、図6に示す方法200において、ブロック201は、コンピュータによりシミュレートされたイメージを格納するために提供される。ブロック203は、仮想現実ヘッドセット25により識別されたモーションイベントを格納するために提供される。ブロック205は、該モーションイベントを使用して、コンピュータによりシミュレートされたイメージを変換されたコンピュータによりシミュレートされたイメージへと変換するために提供される。ブロック207は、前記変換されたコンピュータによりシミュレートされたイメージを仮想現実イベントへと変換するために提供される。ブロック209は、該仮想現実イベントを仮想現実ヘッドセット25で提示するために提供される。
一例では、前記命令は、プロセッサ80に、仮想現実ヘッドセット25で提示される仮想現実イベントの編集を行わせる。別の例では、制御装置77が、仮想現実ヘッドセット25で提示される仮想現実イベントを編集するよう構成される。
図1Aないし図6に関連して、図7は、一例によるシステム70のブロック図を示している。システム70は、仮想現実ヘッドセット25を保持するためのドッキングステーション20,120をそれぞれ含むスタンド5,105を含む。システム70はまた、コントローラ機構45を含み、この例では、該コントローラ機構45は、仮想現実アプリケーションにおけるナビゲーションを制御するために使用される。例えば、コントローラ機構45は、仮想現実ヘッドセット25で提示される仮想現実空間内でモーションイベントを操縦するよう構成される。一例では、コンピュータ130は、コントローラ機構45及び仮想現実ヘッドセット25に対して通信可能な状態で接続可能なものであり、この場合、コンピュータ130は、プロセッサ80と、図8に示す方法250を実施するためにプロセッサ80により実行することが可能な命令を含むメモリ85とを含む。
図1Aないし図7に関連して、図8に示す方法250では、ブロック251は、仮想現実コンピュータアプリケーション140を動作させるために提供される。ブロック253は、仮想現実ヘッドセット25により識別されるモーションイベントを格納するために提供される。ブロック255は、モーションイベントを仮想現実イメージとして変換するために提供される。ブロック257は、仮想現実イメージを修正するために提供される。ブロック259は、修正された仮想現実イメージを仮想現実ヘッドセット25で提示するために提供される。
図7を再び参照すると、仮想現実ヘッドセット25はスタンド5,105に取り付けられ、該スタンド5,105は、自立し、又は、ユーザ60が該スタンド5,105を物理的に保持することを必要としないものである。一例として、ユーザ60が、コンピュータ130のディスプレイ画面90上で3次元(3D)コンピュータ支援設計(CAD)ソフトウェアを使用してオブジェクトのモデリングを開始した際に、プラグインユーティリティが、処理中のCADデータを取り込んで、該CADデータを仮想現実で見ることが可能な3Dデータへと自動的に変換する。ユーザ60は、仮想現実ヘッドセット25を介してイメージを見ることにより、仮想現実環境で処理中の設計を見ることが可能である。CADオペレータ(ユーザ60であってもなくてもよい)は、コンピュータ130を使用して調整を行い、及びディスプレイ90上に視覚的に描画することが可能であり、該調整されたイメージは、仮想現実ヘッドセット25で提示される仮想現実モデルで自動的に更新される。一例では、コントローラ機構45は、仮想現実ヘッドセット25において、修正された仮想現実イメージ内に表示される。
典型的には、机上等の場所での仮想現実システムの使用は、仮想現実内にいる際にユーザ60が取り得る物理的な動きの自由を制限し得るものである。空間的要件に加えて、ケーブル長に関する制限が存在し、複数のユーザが存在する大きなオープンオフィス環境では、利用可能な光学追跡インフラストラクチャがうまく機能しない可能性がある。
追跡インフラストラクチャを利用することができない場合には、幾分か制限されたヘッドセットの動きをスタンド5,105のセンサにより検出することが可能である。例えば、ディスプレイのドッキングステーション20,120をステム15,115に接続するジンバル上の回転センサ、又はドッキングステーション20,120内の慣性測定ユニットである。また、方向に関する情報は、典型的には、仮想現実ヘッドセット25内に含まれる磁力計及び加速度計等のセンサから取得することが可能である。各回転ポイントにおける回転エンコーダを使用してこの情報を増補することが可能である。
これを超える動きのためにコントローラ機構45を使用することが可能である。例えば、コントローラ機構45は、3つの空間次元での平行移動に、ビュー・ピッチ(/仰角)及びヨー(/方位角)を加えた、少なくとも5つの自由度を提供するよう構成することが可能である。これは、図1Bないし図3における入力制御装置46,110の位置にあるジョイスティック、トラックボール、ディレクショナルパッド(directional pads)、サム・ホイール(thumbwheels)等の幾つかの組み合わせを介して達成することが可能である。仮想現実内での平行移動のための別の態様は、「瞬間移動(teleporting)」であり、すなわち、特定の場所をポイントして、ユーザの視点をその場所に移動させる制御をアクティブにすることである。この動作のための制御は、コントローラ機構45内に含めることが可能である。
図1Aないし図8に関連して、図9A及び図9Bは、様々な例による仮想現実イメージ147の概略図を示している。典型的には、ユーザの頭部の動きにより引き起こされない仮想現実内でのあらゆる動きは、仮想現実を病んだ状態にする可能性があり、これは、かかる動きの間に周辺の視覚的なキューを除去することにより相殺することが可能である。このため、コントローラ機構45は、その制御手段がタッチされたときを示すセンサを含むことが可能である。これが生じるとすぐに、仮想現実ヘッドセット25内でユーザー60が見ているビューが、周辺視野150内の動きを不明瞭にし又は抑制するよう変更される。仮想現実ヘッドセット25に提示される(図7に示し及び図8のブロック259に記載したような)修正された仮想現実イメージは、仮想現実イメージ147から周辺の視覚的なモーションキューが除去され又はマスクされた仮想現実イメージを含むことが可能である。図7に示したようなマスキングソフトウェアモジュール125をコンピュータ130と共に使用して、図9A及び図9Bの周辺の視覚的なモーションキュー150を除去することが可能である。図9Aでは、ビューは、周辺の特徴150のビューを除去するよう絞り込まれている。図9Bでは、高コントラストの静的なシャペロン状の(chaperone-like)グリッド151が、周辺イメージ150上に重畳され、これは、該グリッド151の背後にある一層低いコントラストのイメージの動きによるモーションキューを抑制する効果を有する。
図1Aないし図9Bに関連して、図10A及び図10Bは、様々な例による、仮想現実ヘッドセット25及びそれに関連する仮想現実システムハンドヘルドコントローラ77の概略図を示している。仮想現実アプリケーションによっては、2つのハンドヘルドコントローラ(ユーザの両手に1つずつ)からの入力により利益を得るものがある。例えば、利き手でない方の手にあるコントローラは、メニューパレットを表示させるためにトリガすることが可能であり、ユーザは、利き手にあるコントローラで該メニューパレットから選択を行うことが可能である。典型的には、両方のコントローラを表すアバターが、ユーザにとって有用な基準として、ユーザの手の中の物理的な場所に対応する仮想的な場所で、仮想現実システムにより生成される。図10A及び図10Bにおいて、ユーザ60の形状の破線は、ユーザ60の潜在的な位置を表している。
図10A及び図10Bに示すように、利き手でない方の手61aが仮想現実ヘッドセットスタンド5,105を保持するために使用されている場合、該スタンド5,105内のコントローラ機構45は、利き手でない方の手の仮想現実システムコントローラで使用される制御手段を模倣するよう構成することが可能である。仮想現実システム74は、ユーザ60の利き手により保持されているハンドヘルドコントローラ77に対応するアバター177を生成して、仮想シーン62内の対応する位置に表示することが可能である。ハンドヘルドコントローラ77の第2の例として使用される場合、システム74は、コントローラ機構45が模倣している利き手でない方の手のハンドヘルドコントローラのためのアバター145を表示することが可能である。コントローラ機構45は、仮想現実ヘッドセット25を保持しているスタンド5,105に取り付けることが可能であり、このため、その位置は典型的にはユーザの仮想視野62の外部にあることになる。有用な基準をユーザ60に提供するために、アバター145は、仮想視野62内の固定位置(例えば、図10Bに示すように、通常はユーザ60の正面で腕の長さで保持される位置と等価な位置)に表示することが可能である。コントローラアバター145の表示は、専用のスイッチ(例えば、コントローラ機構45上の入力制御装置46,110)により制御することも可能である。該アバターの位置は、仮想現実ヘッドセット25に対して固定されることになるが、依然として多数の制御機能を実施することが可能である。
本書で説明した様々な例は、ハードウェア要素及びソフトウェア要素の両方を含むことが可能である。ソフトウェアで実施される例、例えば、図6及び図8の方法200,250は、ファームウェア、常駐ソフトウェア、マイクロコード等を含むことが可能である(但し、これらには限定されない)。他の例は、予め設定された一組の命令を含むよう構成されたコンピュータプログラム製品を含むことが可能であり、該命令は、その実行時に、上述した方法に関して説明したアクションを生じさせることが可能なものである。一例では、前記予め設定された一組の命令は、ソフトウェアコードを含む有形の非一時的なコンピュータ読み取り可能媒体又はプログラム記憶装置に格納することが可能である。
図1Aないし図10Bに関連して、本書におけるソフトウェアの例を実施するための例示的なハードウェア環境が図11に示されている。このブロック図は、本書における一例による情報操作/コンピュータシステム300のハードウェア構成を示している。該システム300は、前記プロセッサ80と通信することが可能な1つ以上のプロセッサ又は中央処理装置(CPU)310を含む。該CPU310は、システムバス312を介してRAM314及びROM316等の少なくとも1つの記憶装置309と相互接続されている。一例では、前記少なくとも1つの記憶装置309は、前記メモリ85として構成することが可能である。該少なくとも1つの記憶装置309は、プログラムコードの実際の実行時に使用されるローカルメモリ、大容量記憶装置、及び実行中に大容量記憶装置からコードを読み出さなければならない回数を削減するために少なくとも幾つかのプログラムコードの一時的な記憶を提供するキャッシュメモリを含むことが可能である。
I/Oアダプタ318は、ディスク装置311及び記憶装置313等の周辺装置、又はシステム300により読み取ることが可能なその他のプログラム記憶装置に接続することが可能である。システム300は、バス312を、キーボード315、マウス317、スピーカ324、マイク322、及び/又はユーザ60との間でユーザ入力を収集し及び情報を表示するためのタッチスクリーン装置等のその他のユーザインタフェイス装置に接続することが可能なユーザインタフェイスアダプタ319を含む。更に、通信アダプタ320は、バス312をデータ処理ネットワーク325に接続し、ディスプレイアダプタ321は、バス312をディスプレイ装置323に接続し、該ディスプレイ装置323は、前記ディスプレイ装置90として構成可能なものであり、及びユーザ60が対話を行うためのグラフィカルユーザインタフェイス(GUI)を提供することが可能なものである。更に、送受信器326、信号比較器327、及び信号変換器328を、電気信号又は電子信号の処理、送信、受信、比較、及び変換をそれぞれ行うためにバス312に接続することが可能である。
仮想現実の消費の大部分は専用の空間で行われるが、仮想現実のワークフローコンテンツの作成は、近い将来、デスクトップアクティビティであり続ける可能性がある。グラフィックデザインユーザーやその他のコンテンツ作成者のワークフローは、机やワークステーションを離れることなく自身の作品を仮想現実で迅速に確認することを可能とすることにより大幅に改善される。スタンド5,105は、ユーザ60が、ディスプレイ装置90から3Dコンテンツを取り込み、シームレスな態様で仮想現実ヘッドセット25を介して仮想現実内でレビューすることを可能とする。コントローラ機構45及びコントローラ77は、ユーザ60が、仮想現実内で複数のイメージを同時に見て、コンピュータ130上で実行されているCADソフトウェアでオリジナルファイルを修正することを可能とする。例えば、仮想現実ヘッドセットスタンド5は、仮想現実モデルのビューを操作するためにコントローラ機構45を使用するジョイスティック状の制御手段を組み込むことが可能であり、又は触覚によるフィードバックを利用して3Dモデルの限界やスナップを示すことが可能である。
本開示は、上述した例示的な実施態様に関して図示し説明した。本書では特定の例を図示し説明してきたが、特許請求する主題の範囲は、特許請求の範囲及びその等価物によってのみ制限されることが明白に意図されている。しかし、特許請求の範囲で規定する本開示の思想及び範囲から逸脱することなく、他の形態、詳細、及び例を実施することが可能であることを理解されたい。

Claims (10)

  1. ベースと、
    該ベースから延びるステムと、および
    該ステムに取り付けられたドッキングステーションとを含み、該ドッキングステーションはユーザの身体に干渉しないように前記ステムから離れるよう角度をなしており、前記ステムは前記ドッキングステーションのアンバランスを相殺するように前記ベースに向かって角度をなしており、前記ドッキングステーションは仮想現実ヘッドセットを保持するための輪郭を有しており、前記ドッキングステーション
    前記ステムに接続されたリップと、
    該リップに接続された本体部分と、および
    該本体部分に接続されたクリップと
    を含む、仮想現実ヘッドセットスタンド。
  2. 前記ステムが、前記仮想現実ヘッドセットで提示されるアクションを制御するためのコントローラ機構を含む、請求項1に記載の仮想現実ヘッドセットスタンド。
  3. 前記コントローラ機構は前記コントローラ機構の第1の側に沿って配置された第1の制御装置と、前記コントローラ機構の第2の側に沿って配置された第2の制御装置を含み、前記第1の側は前記第2の側とは反対側に位置している、請求項2に記載の仮想現実ヘッドセットスタンド。
  4. 前記コントローラ機構は前記ステムの一部であるか、またはコントローラ機構は前記ステムから取り外し可能である、請求項2または3に記載の仮想現実ヘッドセットスタンド。
  5. 前記ステム、前記ドッキングステーションの前記リップに隣接する保持部材を含む、請求項1から4のいずれか1に記載の仮想現実ヘッドセットスタンド。
  6. 前記ベース、前記ステムから外方に突出する一対の脚部を含む、請求項1から5のいずれか1に記載の仮想現実ヘッドセットスタンド。
  7. 前記ベース及び前記ステム、前記仮想現実ヘッドセットがユーザの目の前に配置されている間に該仮想現実ヘッドセットを前記ドッキングステーション内の所定位置に維持するのに十分な支持力を有する、請求項1から6のいずれか1に記載の仮想現実ヘッドセットスタンド。
  8. 前記仮想現実ヘッドセットは、ユーザの頭部にストラップを配置することを必要とすることなく前記ユーザの目の前の所定位置保持される、請求項に記載の仮想現実ヘッドセットスタンド。
  9. 前記ステムは、前記仮想現実ヘッドセットがユーザの目の前に配置されている間に該ユーザが前記ステムを保持して前記仮想現実ヘッドセットスタンドを移動させることを可能にする湾曲した表面含む、請求項1から8のいずれか1に記載の仮想現実ヘッドセットスタンド。
  10. 前記仮想現実ヘッドセットスタンドの残りの部分に対する前記仮想現実ヘッドセットの動きを可能とするよう、前記ドッキングステーションを前記ステムに取り付けるジンバルをさらに含む、請求項1から9のいずれか1に記載の仮想現実ヘッドセットスタンド。
JP2020501158A 2017-07-14 2017-07-14 仮想現実ヘッドセットスタンド Active JP6959703B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2017/042064 WO2019013808A1 (en) 2017-07-14 2017-07-14 BASES FOR HELMET OF VIRTUAL REALITY

Publications (2)

Publication Number Publication Date
JP2020527304A JP2020527304A (ja) 2020-09-03
JP6959703B2 true JP6959703B2 (ja) 2021-11-05

Family

ID=65002272

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020501158A Active JP6959703B2 (ja) 2017-07-14 2017-07-14 仮想現実ヘッドセットスタンド

Country Status (7)

Country Link
US (1) US11331588B2 (ja)
EP (1) EP3621709B1 (ja)
JP (1) JP6959703B2 (ja)
KR (1) KR102371288B1 (ja)
CN (1) CN111107912B (ja)
BR (1) BR112020000722A2 (ja)
WO (1) WO2019013808A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112020000722A2 (pt) * 2017-07-14 2020-07-14 Hewlett-Packard Development Company, L.P. suportes de headset de realidade virtual
WO2020115576A1 (en) * 2018-12-04 2020-06-11 Eden Immersive Limited A virtual reality or augmented reality headset accessory
USD936074S1 (en) * 2019-04-01 2021-11-16 Igt Display screen or portion thereof with graphical user interface
JP2020204977A (ja) * 2019-06-18 2020-12-24 株式会社ジャパンディスプレイ 検出機能付き表示装置
US10951736B1 (en) * 2019-10-21 2021-03-16 Disney Enterprises, Inc. Augmented reality (AR)-capable headset and visually detected controller devices
US20230022698A1 (en) * 2020-01-07 2023-01-26 Eden Immersive Limited Virtual reality or augmented reality headset accessory for facilitating controlled viewing experiences in mobile environments
US20230127034A1 (en) * 2021-07-02 2023-04-27 David Black Mountable virtual reality station and system

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4007221A1 (de) * 1990-03-07 1991-09-12 Gao Ges Automation Org Pruefkopf fuer kontaktflaechen von wertkarten mit eingelagertem halbleiterchip
US5577981A (en) * 1994-01-19 1996-11-26 Jarvik; Robert Virtual reality exercise machine and computer controlled video system
JPH0838743A (ja) * 1994-07-29 1996-02-13 Masanori Takasugi Vr用シミュレータ
US5864346A (en) * 1994-09-12 1999-01-26 Nintendo Co., Ltd. Picture display unit and image display system
TW269094B (en) * 1994-11-11 1996-01-21 Nitendo Kk Three dimensional visual image display device and electric game apparatus, memory device thereof
JPH08136855A (ja) * 1994-11-11 1996-05-31 Nintendo Co Ltd 画像表示装置、画像表示システムおよびそれに用いられるプログラムカートリッジ
JP3504361B2 (ja) * 1995-01-23 2004-03-08 オリンパス株式会社 頭部装着型映像表示装置
US6919867B2 (en) * 2001-03-29 2005-07-19 Siemens Corporate Research, Inc. Method and apparatus for augmented reality visualization
JP3085720U (ja) 2001-10-31 2002-05-17 株式会社 英技研 ディスプレイスタンド
US7684694B2 (en) * 2005-05-10 2010-03-23 Fromm Wayne G Apparatus for supporting a camera and method for using the apparatus
JP5748939B2 (ja) 2006-01-06 2015-07-15 マーシオ マーク アブリュー 電子装置装着装置
US8941989B2 (en) * 2010-09-29 2015-01-27 James W. Pollex Tablet computer holder and stand
CN202587096U (zh) * 2012-03-22 2012-12-05 上海市宝山区青少年科学技术指导站 头戴式方便手机架
US9378028B2 (en) 2012-05-31 2016-06-28 Kopin Corporation Headset computer (HSC) with docking station and dual personality
US9001511B2 (en) * 2012-10-19 2015-04-07 2236008 Ontario Inc. Portable docking station for portable electronic device
US20140168264A1 (en) 2012-12-19 2014-06-19 Lockheed Martin Corporation System, method and computer program product for real-time alignment of an augmented reality device
US20150253574A1 (en) * 2014-03-10 2015-09-10 Ion Virtual Technology Corporation Modular and Convertible Virtual Reality Headset System
US9740010B2 (en) * 2014-11-28 2017-08-22 Mahmoud A. ALHASHIM Waterproof virtual reality goggle and sensor system
WO2016182504A1 (en) * 2015-05-08 2016-11-17 Chow Bryan Shwo-Kang A virtual reality headset
EP3096212B1 (en) * 2015-05-18 2020-01-01 DreamWorks Animation LLC Method and system for calibrating a virtual reality system
US10586469B2 (en) 2015-06-08 2020-03-10 STRIVR Labs, Inc. Training using virtual reality
US10335083B2 (en) 2015-07-21 2019-07-02 Courtland Keith Keteyian Systems and methods for detecting and analyzing biosignals
JP6172228B2 (ja) 2015-09-01 2017-08-02 株式会社ニコン ヘッドマウントディスプレイ
CN105138135B (zh) * 2015-09-15 2018-08-28 北京国承万通信息科技有限公司 头戴式虚拟现实设备及虚拟现实系统
US20170084084A1 (en) * 2015-09-22 2017-03-23 Thrillbox, Inc Mapping of user interaction within a virtual reality environment
JP6618753B2 (ja) * 2015-10-02 2019-12-11 株式会社クリュートメディカルシステムズ ヘッドマウントディスプレイユニットおよびヘッドマウントディスプレイ固定器具
KR101789883B1 (ko) 2015-11-06 2017-10-25 주식회사 한영엔지니어링 스핀 가상 현실 시뮬레이터
CN205594231U (zh) * 2016-04-19 2016-09-21 深圳聚众创科技有限公司 虚拟现实眼镜
US10780358B1 (en) * 2017-03-22 2020-09-22 Intuitive Research And Technology Corporation Virtual reality arena system
CN206594627U (zh) 2017-03-30 2017-10-27 北京蓝数工坊数字科技有限公司 一种虚拟现实教育V‑Learing系统
BR112020000722A2 (pt) * 2017-07-14 2020-07-14 Hewlett-Packard Development Company, L.P. suportes de headset de realidade virtual
US10305720B1 (en) * 2017-09-08 2019-05-28 Daniel Sherbondy Virtual reality gaming apparatus
JP7027109B2 (ja) * 2017-10-13 2022-03-01 任天堂株式会社 姿勢位置推測システム、姿勢位置推測方法、および姿勢位置推測装置
JP6353994B1 (ja) * 2018-01-17 2018-07-04 任天堂株式会社 情報処理システム、情報処理プログラム、情報処理方法、および情報処理装置
US10946272B2 (en) * 2019-07-26 2021-03-16 Arkade, Inc. PC blaster game console
US10773157B1 (en) * 2019-07-26 2020-09-15 Arkade, Inc. Interactive computing devices and accessories

Also Published As

Publication number Publication date
BR112020000722A2 (pt) 2020-07-14
CN111107912A (zh) 2020-05-05
EP3621709A1 (en) 2020-03-18
KR20200016962A (ko) 2020-02-17
JP2020527304A (ja) 2020-09-03
KR102371288B1 (ko) 2022-03-07
WO2019013808A1 (en) 2019-01-17
US11331588B2 (en) 2022-05-17
CN111107912B (zh) 2023-08-25
EP3621709A4 (en) 2021-03-17
US20200197822A1 (en) 2020-06-25
EP3621709B1 (en) 2022-03-09

Similar Documents

Publication Publication Date Title
JP6959703B2 (ja) 仮想現実ヘッドセットスタンド
CN110794958B (zh) 在增强/虚拟现实环境中使用的输入设备
US10534431B2 (en) Tracking finger movements to generate inputs for computer systems
US10754497B2 (en) Two-handed object manipulations in virtual reality
EP3488321B1 (en) Detecting user range of motion for virtual reality user interfaces
JP6481057B1 (ja) 仮想空間におけるキャラクタの制御方法
EP3321777A1 (en) Dragging virtual elements of an augmented and/or virtual reality environment
JP7155053B2 (ja) 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
WO2019087564A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US20170322628A1 (en) Airborne haptic feedback device
JP2023126474A (ja) 拡張現実のためのシステムおよび方法
JP2020177607A (ja) 一人称視点モードと三人称視点モードとの間で切り替え可能なヘッドマウントディスプレイシステム、関連する方法、関連するプログラム及び関連する非一時的なコンピュータ可読記憶媒体
JP2022184958A (ja) アニメーション制作システム
US20230142242A1 (en) Device for Intuitive Dexterous Touch and Feel Interaction in Virtual Worlds
JP2009258884A (ja) ユーザインタフェイス
WO2021020143A1 (ja) 画像処理装置、画像処理方法、及び記録媒体
US11960660B2 (en) Terminal device, virtual object manipulation method, and virtual object manipulation program
JP2022153476A (ja) アニメーション制作システム
WO2023021757A1 (ja) 情報処理装置、情報処理方法、及びプログラム
WO2023281819A1 (ja) オブジェクトの保持を判定する情報処理装置
JP7115698B2 (ja) アニメーション制作システム
JP2019133675A (ja) 仮想空間におけるキャラクタの制御方法
JP2019133676A (ja) 仮想空間におけるキャラクタの制御方法
JP2019133672A (ja) 仮想空間におけるキャラクタの制御方法
JP2019133673A (ja) 仮想空間におけるキャラクタの制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200110

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210419

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210928

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211006

R150 Certificate of patent or registration of utility model

Ref document number: 6959703

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150