JP7284878B2 - ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置 - Google Patents

ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置 Download PDF

Info

Publication number
JP7284878B2
JP7284878B2 JP2022559913A JP2022559913A JP7284878B2 JP 7284878 B2 JP7284878 B2 JP 7284878B2 JP 2022559913 A JP2022559913 A JP 2022559913A JP 2022559913 A JP2022559913 A JP 2022559913A JP 7284878 B2 JP7284878 B2 JP 7284878B2
Authority
JP
Japan
Prior art keywords
user
unit
augmented reality
sports
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022559913A
Other languages
English (en)
Other versions
JP2023515891A (ja
Inventor
ユ,ワンユン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Twohandsinteractive Co Ltd
Original Assignee
Twohandsinteractive Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Twohandsinteractive Co Ltd filed Critical Twohandsinteractive Co Ltd
Publication of JP2023515891A publication Critical patent/JP2023515891A/ja
Application granted granted Critical
Publication of JP7284878B2 publication Critical patent/JP7284878B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0075Means for generating exercise programs or schemes, e.g. computerized virtual trainer, e.g. using expert databases
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/26Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/66Tracking systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/87Combinations of systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work or social welfare, e.g. community support activities or counselling services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0087Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load
    • A63B2024/0096Electric or electronic controls for exercising apparatus of groups A63B21/00 - A63B23/00, e.g. controlling load using performance related parameters for controlling electronic or video games or avatars
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0625Emitting sound, noise or music
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/06363D visualisation
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • A63B2071/0638Displaying moving images of recorded environment, e.g. virtual environment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/803Motion sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/805Optical or opto-electronic sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/89Field sensors, e.g. radar systems
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2225/00Miscellaneous features of sport apparatus, devices or equipment
    • A63B2225/20Miscellaneous features of sport apparatus, devices or equipment with means for remote communication, e.g. internet or the like
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2225/00Miscellaneous features of sport apparatus, devices or equipment
    • A63B2225/50Wireless data transmission, e.g. by radio transmitters or telemetry
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/816Athletics, e.g. track-and-field sports
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85Providing additional services to players
    • A63F13/87Communicating with other players during game play, e.g. by e-mail or chat
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30221Sports video; Sports image
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Electromagnetism (AREA)
  • Tourism & Hospitality (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Software Systems (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Child & Adolescent Psychology (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Description

本発明は、拡張現実インタラクティブスポーツ装置に関し、より具体的には、ライダー(LiDAR: Light Detection and Ranging)センサーを用いた拡張現実インタラクティブスポーツ装置に関する。
科学の発達に伴って現代人の身体活動が減少し、大多数の現代人に運動不足の現象が発生している。特に、肥満などの生活習慣病に該当する人口が持続的に増加している。また、急激な天候変化や環境汚染、粒子状物質、伝染性疾患などで野外活動が制限される中で、屋内にて十分な身体活動を行える運動に関する関心が高まっている。
屋内にて行える最も一般的な運動としてフィットネス(Fitness)があるが、フィットネスは、バランスのとれた健康な体を作り出すこと、又はそのための運動をいう。このようなフィットネスは、専門装備を備えたフィットネスセンターで専門トレーナーのパーソナルトレーニング(Personal Training)を通じて行われる。ところが、現代人は、忙しい日常のため、フィットネスセンターに訪れて定期的に専門トレーナーの指導を受けるのが難しく、高価な講習料によりフィットネスを持続することが非常に難しい。
一方、通常のフィットネスは、装備を用いて運動するので、誤った運動による怪我の危険があり、専門装備を用いて行える運動が限られているので飽き・嫌気が来易いという問題点がある。さらに、有酸素運動のためのトレッドミルなどの装備は、運動の過程が単調であり、所定のコースのみが繰り返されるので、ユーザーが運動を途中で止めてしまうことが多いという問題点がある。
かかる問題点を解決するために、仮想現実又は拡張現実を用いてスポーツを楽しめる技術が開発されたりもした。関連した先行技術として、韓国公開特許第10-2020-0082990号(発明の名称:VRスポーツによるフィットネス管理方法)等が開示されている。
しかし、従来の仮想現実を用いてスポーツを楽しめる技術は、VR装置を頭に着用しなければならないので、動作が不便であって十分な運動効果を得ることが難しいという限界がある。それだけでなく、フィットネスやVRスポーツは、子供と青少年の体力増進及び教育の目的で使用するには限界があり、一般に一人で運動するので、子供と青少年の協同心を養うのには適していない。
また、従来技術では、カメラセンシングを用いてユーザーのモーションを認識するが、カメラセンシングを用いれば、複数のユーザーのモーションを同時に認識することができないので、一人ずつ用いるしかなく、複数のユーザーが一緒にスポーツを楽しむことは困難であるという問題点があった。或いは、別途のオブジェクトを利用しなければならないので、スポーツの種類が限定されるという問題点があった。
したがって、屋内で、複数のユーザーが一緒に様々なスポーツを楽しめる技術の開発が求められている。
本発明は、既に提案された方法の上述した問題点を解決するために提案されたものであって、その目的は、床面(床面または地面)にスポーツコンテンツのための映像を投影し、スポーツコンテンツを利用するユーザーのモーションについて、ライダーセンサーを用いてトラッキングして、スポーツコンテンツとユーザーとの相互作用を制御することにより、別個のオブジェクトや装置を着用することなく、身体だけで屋内でスポーツを楽しむことができ、モーショントラッキングが可能な範囲が広いために床面を効率よく利用することができ、2つのライダーセンサーを用いてユーザーのモーションをトラッキングすることにより、複数のユーザーが同時にスポーツコンテンツを利用する場合でも、迅速かつ正確にそれぞれのユーザーのモーションをトラッキングすることができる、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置を提供することにある。
上記の目的を達成するための本発明の特徴によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置は、拡張現実インタラクティブスポーツ装置であって、(1)本体と、(2)前記本体の前面に備えられ、床面にスポーツコンテンツのための映像を投影するプロジェクター部と、(3)プロジェクター部の投影方向に向けて設置されるライダーセンサー部と、(4)前記ライダーセンサー部を用いて前記スポーツコンテンツに応じたユーザー位置を認識してユーザーのモーションをトラッキングするモーショントラッキング部と、(5)一端は前記本体の下端の側面に連結され、他端は前記ライダーセンサー部に連結されることにより、前記ライダーセンサー部が前記本体から所定の距離だけ離間するように連結するセンサー連結部と、(6)前記プロジェクター部を通じて前記スポーツコンテンツを出力して拡張現実に基づいて前記スポーツコンテンツをユーザーに提供し、前記モーショントラッキング部でもってトラッキングされるユーザーのモーションを用いて、前記スポーツコンテンツとユーザーとの相互作用を制御する制御部と、を備えることをその構成上の特徴とする。
好ましくは、前記ライダーセンサー部は、前記センサー連結部を通じて前記本体の下端の両側面にそれぞれ連結される、2つのライダーセンサーを含むことができる。
好ましくは、前記ライダーセンサー部は、レーザーを生成及び照射する光送信モジュールと、前記ユーザーの身体によって散乱した光信号を集束させる光受信モジュールと、前記光受信モジュールによって集束された光信号を感知する光感知モジュールと、を含み、
前記モーショントラッキング部は、前記感知された光信号を用いて、ユーザーのモーションをトラッキングすることができる。
好ましくは、前記モーショントラッキング部は、前記ライダーセンサー部を用いて、地面からの予め定められた地点におけるユーザーの足の位置を認識し、ユーザーの足の位置の変化をトラッキングして、ユーザーのモーションをトラッキングすることができる。
好ましくは、前記センサー連結部は、前記本体の下端の側面に、ヒンジ構造でもって連結されうる。
好ましくは、前記本体の下端に設置された、移動補助のための補助輪をさらに含むことができる。
好ましくは、トレーナー端末との通信を行い、前記トレーナー端末にユーザーのスポーツコンテンツ利用情報を提供し、前記トレーナー端末から制御信号を受信して前記制御部へ伝達することにより、前記ユーザーに非接触方式のトレーニングを提供する通信部をさらに備えることができる。
さらに好ましくは、前記本体の前面に備えられ、前記スポーツコンテンツの選択信号の入力を受け、前記スポーツコンテンツに関連するプレー情報を出力するディスプレー部と、前記スポーツコンテンツに関連する音響を出力するスピーカー部と、をさらに含み、
前記ディスプレー部及びスピーカー部は、前記通信部が前記トレーナー端末から受信したリアルタイムトレーナー映像を出力することができる。
本発明で提案している、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置によれば、床面にスポーツコンテンツのための映像を投影し、スポーツコンテンツを利用するユーザーのモーションについて、ライダーセンサーを用いてトラッキングして、スポーツコンテンツとユーザーとの相互作用を制御することにより、別途のオブジェクトや装置を着用することなく、身一つ(身体だけ)で屋内にてスポーツを楽しむことができ、モーショントラッキングが可能な範囲が広いために床面を効率よく利用することができるのであり、2つのライダーセンサーを用いてユーザーのモーションをトラッキングすることにより、複数のユーザーが同時にスポーツコンテンツを利用する場合でも、迅速かつ正確にそれぞれのユーザーのモーションをトラッキングすることができる。
本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置の構成を示す図である。 本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置の様子を示す図(1)である。 本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置の様子を示す図(2)である。 本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置のプロジェクター部の投影領域を示す図である。 本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置における、ライダーセンサー部の詳細な構成を示す図である。 本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置における、シングルライダーセンサー構造を示す図である。 本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置における、デュアルライダーセンサー構造を示す図である。 本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置がトレーナー端末と通信する様子を示す図である。
以下、添付図面を参照して、本発明の属する技術分野における通常の知識を有する者が本発明を容易に実施し得るように、好適な実施形態を詳細に説明する。ただし、本発明の好適な実施形態を詳細に説明するにあたり、関連する公知の機能又は構成についての具体的な説明が本発明の要旨を不必要にぼやけさせるおそれがあると判断された場合には、その詳細な説明を省略する。また、類似の機能及び作用をする部分については、図面の全体にわたって同一の符号を使用する。
また、明細書全体において、ある部分が他の部分と「連結」されているとするとき、これは「直接的に連結」されている場合だけでなく、それらの間に別の素子を介して「間接的に連結」されている場合も含む。さらに、ある構成要素を「含む」というのは、特に反する記載がない限り、他の構成要素を除外するのではなく、他の構成要素をさらに含むことができることを意味する。
図1は、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100の構成を示す図であり、図2及び図3は、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100の様子を示す図である。図1~図3に示すように、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100は、本体110、プロジェクター部120、ライダーセンサー部130、モーショントラッキング部140、センサー連結部150、及び制御部160を含み、通信部170、ディスプレー部180及びスピーカー部190をさらに含んで構成されうる。
本体110は、拡張現実インタラクティブスポーツ装置100の胴体を構成するフレームであってもよく、内面に制御部160を含むコンピュータ装置などを備えうる。本体110は、図2に示す直方体の形状であってもよいが、図3に示すような形状であってもよく、具体的な形態や形状は多様に具現されうる。特に、図3に示すように、本体110の下端に設置された、移動補助のための補助輪111をさらに、少なくとも1つ含むことで、拡張現実インタラクティブスポーツ装置100を移動式に実現することにより、必要に応じて場所を自由に移してスポーツコンテンツをプレーすることができる。
プロジェクター部120は、本体110の前面に備えられ、床面に、スポーツコンテンツのための映像を投影することができる。図2に示すように、本体110の前面にプロジェクターが設置され、本体110の前でユーザーがスポーツコンテンツの提供を受けることができ、プロジェクターは、壁面ではなく、床面に映像を投影するように方向を調整して設置されうる。
図4は、本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100におけるプロジェクター部120の投影領域10を示す図である。図4に示すように、本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100におけるプロジェクター部120は、床面に長方形の投影領域10をプロジェクション(投影)することができる。このようにプロジェクター部120を用いて床面を十分に活用することにより、モニタや携帯端末、TVなどのディスプレー装置を用いる場合よりも遥かに広い投影領域10を活用して多様なスポーツコンテンツを提供することができる。例えば、投影領域10は、4.5m×2.6mの大きさであり得る。一方、プロジェクター部120は、投影領域10の形状が菱形などに歪まずに長方形となるように、歪みを補正して映像を投影することができる。
ライダーセンサー部130は、プロジェクター部120の投影方向に向けて設置されうる。すなわち、投影領域10においてスポーツコンテンツを利用するユーザーのモーションを認識するために、ライダーセンサー部130は、投影領域10をカバーするように配置されうる。ここで、ライダーセンサー部130が含むライダーセンサーはRP Lidar A3であってもよく、レーザースキャニングの範囲は20m程度であってもよい。特に、ライダーセンサー部130は、2つのライダーセンサー130b、130bを含んで構成されうる。ライダーセンサー部130の詳細な構成については、図5を参照して詳細に説明するようにする。
モーショントラッキング部140は、ライダーセンサー部130を用いて、スポーツコンテンツに応じたユーザー位置を認識してユーザーのモーションをトラッキングすることができる。より具体的には、モーショントラッキング部140は、ライダーセンサー部130を用いて、地面からの予め定められた地点でのユーザーの足の位置を認識し、ユーザーの足の位置の変化をトラッキングすることで、ユーザーのモーションをトラッキングすることができる。すなわち、ライダーセンサー部130は、地面から5cm程度の高さの平面をレーザースキャニングすることで、ユーザーの足の存否(存在如何)及び位置を検出することができるのであるが、モーショントラッキング部140は、ユーザーの足の位置の変化を、ユーザーのモーションとしてトラッキングすることができる。
図5は、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100における、ライダーセンサー部130の詳細な構成を示す図である。図5に示すように、本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100のライダーセンサー部130は、レーザーを生成及び照射する光送信モジュール131、ユーザーの身体によって散乱した光信号を集束させる光受信モジュール132、及び光受信モジュール132によって集束された光信号を感知する光感知モジュール133を含んで構成されうるのであり、モーショントラッキング部140は、感知された光信号を用いてユーザーのモーションをトラッキングすることができる。
従来のユーザーモーショントラッキング方式としては、カメラを用いたセンシングが多用されている。例えば、超高速カメラセンサー、3Dデプスカメラセンサー、キネクトカメラセンサー(Kinetic camera sensor)などを使用することができる。超高速カメラセンサーは、仮想現実運動などに使用できるが、データ処理を行うためには連続的なトラッキングが不可能であり、定められた位置にて1人ずつ使用しなければならず、別個のオブジェクトが必要であるという限界がある。3Dデプスカメラセンサーは、特定の深度(depth)での変化値を検出して使用するため、特定の深度でイベントを発生させなければならず、1~10人程度の少数のみが同時に利用することができ、別個のオブジェクトが必要であるという限界がある。キネクトカメラセンサーは、被写体のモーションを検出するが、カメラの画角のためにセンシング範囲が狭くなって所定の位置で運動しなければならないので活動範囲が狭く、一度に1人だけ使用することができるという限界がある。
上述した従来技術の問題を解決することができる、本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100は、ライダーセンサー部130及びモーショントラッキング部140を含むことにより、別途のオブジェクトや装置を着用することなく、身体(身一つ)だけでも拡張現実スポーツを楽しむことができ、モーショントラッキングが可能な範囲が広いため、投影領域10を含む床面を十分に利用して、あちこち移動して運動することができる。また、ライダーセンサー部130が1~30人の位置を同時にトラッキングすることができるので、団体スポーツにも適用することができ、これにより一緒に運動する楽しみを与え、協同心を養うのに役立つことができる。
センサー連結部150は、一端が本体110の下端の側面に連結され、他端はライダーセンサー部130に連結されることにより、ライダーセンサー部130が本体110から所定の距離だけ離間するように連結することができる。より具体的には、図2及び図3に示すように、センサー連結部150は、バー状をなし、本体110の両側面に連結されうる。センサー連結部150の長さは、80~120cm程度、より具体的には100cmとすることができる。また、図3に示すように、センサー連結部150は、本体110の下端の側面とヒンジ構造で連結されることにより、使用しない時や移動時に、センサー連結部150を折り畳んで便利に保管又は移動することができる。
一方、ライダーセンサー部130は、センサー連結部150を介して本体110の下端の両側面にそれぞれ連結される2つのライダーセンサーを含むことができる。特に、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100では、2つのライダーセンサーを用いてユーザーのモーションをトラッキングすることにより、迅速かつ正確に複数のユーザーをトラッキングすることができる。
図6は、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100における、シングルライダーセンサー構造を示す図であり、図7は、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100における、デュアルライダーセンサー構造を示す図である。本発明の一実施形態による、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100は、図6に示すように、1つのライダーセンサーを用いてユーザーのモーショントラッキングを行うこともできるが、図7に示すように、2つのライダーセンサーを用いると、ユーザーの相対位置によるトラッキングエラーを回避し、複数のユーザーの位置を干渉なく正確に把握することができる。
つまり、ライダーセンサーを用いる場合、レーザースキャニングシェード領域が発生し、シェード領域に位置したオブジェクトは探知することができない。シングルライダーセンサー構造で、2人のユーザーの位置が重複しなければ、それぞれのユーザーのモーショントラッキングに問題がないが、図6に示すように、プレーヤーBがプレーヤーAのレーザースキャニングシェード領域に位置すると、プレーヤーBは、トラッキングが不可能になる。
反面、2つのライダーセンサーを用いる場合(デュアルライダーセンサー構造)、第1ライダーセンサー130aによるレーザースキャニングシェード領域は、第2ライダーセンサー130bによってスキャニングされるので、干渉なく複数のユーザーのモーショントラッキングを同時に行うことができる。すなわち、図7に示すように、プレーヤーBがプレーヤーAの第1ライダーセンサー130aのレーザースキャニングシェード領域に位置しても、プレーヤーBのモーションは、第2ライダーセンサー130bによってトラッキングされうる。
制御部160は、プロジェクター部120を通じてスポーツコンテンツを出力して拡張現実に基づいてスポーツコンテンツをユーザーに提供するが、モーショントラッキング部140でトラッキングされるユーザーのモーションを用いて、スポーツコンテンツとユーザーとの相互作用を制御することができる。すなわち、制御部160は、ユーザーとスポーツコンテンツとがインタラクションすることができるように、モーショントラッキング部140でトラッキングされるユーザーのモーションを、スポーツコンテンツの入力信号に変換して伝達することができる。
通信部170は、トレーナー端末との通信を行い、トレーナー端末に、ユーザーのスポーツコンテンツ利用情報を提供し、トレーナー端末から制御信号を受信して、制御部160に伝達することにより、ユーザーに非接触方式のトレーニングを提供することができる。ここで、通信部170は、インターネット連結が可能なWi-Fi(登録商標)(Wireless Fidelity)、移動通信網(mobile radio communication network)、衛星通信網、ブルートゥース(登録商標)(Bluetooth)、 Wibro(Wireless Broadband Internet)、3G/4G/5G(3/4/5th Generation Mobile Telecommunication)及びLTE(Long Term Evolution)を含む、様々な無線通信方式が適用されるものと理解できる。
ディスプレー部180は、本体110の前面に備えられ、スポーツコンテンツの選択信号の入力を受け、スポーツコンテンツに関連するプレー情報を出力することができる。すなわち、図2に示すように、ディスプレー部180は、本体110の前面に位置することができ、ユーザーがユーザーの情報を入力又は閲覧し、スポーツコンテンツを選択するなど、各種入出力ができるようにタッチスクリーンとして具現されうる。
スピーカー部190は、スポーツコンテンツに関連する音響を出力することができる。スピーカーは、本体110の前面や側面などに設置されうるのであり、ディスプレー部180を通じてボリュームが調節されうる。
特に、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100は、プロジェクター部120、ライダーセンサー部130、モーショントラッキング部140、制御部160、通信部170、ディスプレー部180、スピーカー部190などが、全て一体に構成されるので、本体110を移動させて特定の場所に置くだけで、容易に所望の場所でスポーツコンテンツを楽しむことができる。
図8は、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100がトレーナー端末と通信する様子を示す図である。図8に示すように、本発明の一実施形態によるライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100は、通信部170を通じてトレーナー端末から制御信号を受信して、遠隔でトレーニングサービスを提供することができる。トレーナーは、端末にアプリケーションをインストールし、拡張現実インタラクティブスポーツ装置100からユーザーの運動データの提供を受けて確認することができるのであり、各ユーザーに、適切なスポーツコンテンツを推薦したり、運動姿勢や運動時間などをコーチングしたりするなど、トレーニングデータを提供することができる。
ここで、トレーナー端末は、電子装置として実現できる。電子装置は、スマートフォン、タブレット(tablet)PC(personal computer)、携帯電話、ビデオ電話、電子書籍リーダー、デスクトップ(desktop)PC、ラップトップ(laptop)PC、ネットブック(netbook)コンピュータ、ワークステーション(workstation)、サーバー(server)、PDA(personal digital assistant)、メディアボックス、ゲームコンソール、電子辞書又はウェアラブル機器(wearable device)のうちの少なくとも1つを含むことができ、ウェアラブル機器は、アクセサリ型(例えば、時計、指輪、ブレスレット、アンクレット、ネックレス、メガネ、コンタクトレンズ、又はヘッド(頭部)着用型装置(HMD、head-mounted-device)、ファブリック又は衣類との一体型(例えば、電子衣服)、身体付着・取付型(例えば、スキンパッド(skin pad)又は、入れ墨(tattoo seal))、又は生体埋め込み型回路(implantalbe circuit)のうちの少なくとも1つを含むことができる。様々な実施形態において、電子装置は、前述した機器に限定されず、前述した様々な装置のうちの2つ以上の組み合わせであり得る。
一方、ディスプレー部180及びスピーカー部190は、通信部170がトレーナー端末から受信したリアルタイムトレーナー映像を出力することができる。すなわち、図8に示すように、リアルタイムトレーナー映像をディスプレー部180及びスピーカー部190へ出力することにより、直接の対面接触なしにも、ユーザーとトレーナーとが遠隔で顔を見てトレーニングサービスを提供したり受けたりすることができる。このために、本体110の前面にカメラを備えて、スポーツコンテンツを利用するユーザーの様子を撮影し、撮影された映像を、通信部170を用いてトレーナー端末へ伝送することができる。
上述したように、本発明で提案している、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置100によれば、床面にスポーツコンテンツのための映像を投影し、ライダーセンサーを用いて、スポーツコンテンツを利用するユーザーのモーションをトラッキングして、スポーツコンテンツとユーザーとの相互作用を制御することにより、別途のオブジェクトや装置を着用することなく、身体だけで屋内にてスポーツを楽しむことができるのであり、モーショントラッキングが可能な範囲が広いために、床面を効率よく利用することができ、2つのライダーセンサーを用いてユーザーのモーションをトラッキングすることにより、複数のユーザーが同時にスポーツコンテンツを利用する場合でも、迅速かつ正確に、それぞれのユーザーのモーションをトラッキングすることができる。
以上説明した本発明は、本発明の属する技術分野における通常の知識を有する者によって様々な変形や応用が可能であり、本発明による技術的思想の範囲は、以下の特許請求の範囲によって定められるべきである。
10 投影領域
100 拡張現実インタラクティブスポーツ装置
110 本体
111 補助輪
120 プロジェクター部
130 ライダーセンサー部
130a 第1ライダーセンサー
130b 第2ライダーセンサー
131 光送信モジュール
132 光受信モジュール
133 光感知モジュール
140 モーショントラッキング部
150 センサー連結部
160 制御部
170 通信部
180 ディスプレー部
190 スピーカー部

Claims (6)

  1. 拡張現実インタラクティブスポーツ装置(100)であって、
    本体(110)と、
    前記本体(100)の前面に備えられ、床面に、スポーツコンテンツのための映像を投影するプロジェクター部(120)と、
    前記プロジェクター部(120)の投影方向に向けて設置されるライダーセンサー部(130)と、
    前記ライダーセンサー部(130)を用いて、前記スポーツコンテンツに応じたユーザーの位置を認識して、ユーザーのモーションをトラッキングするモーショントラッキング部(140)と、
    一方の末端は前記本体(110)の下端の側面に連結され、他方の末端は前記ライダーセンサー部(130)に連結されることにより、前記ライダーセンサー部(130)が前記本体(110)から、予め定められた距離だけ離間するように連結するセンサー連結部(150)と、
    前記プロジェクター部(120)を通じて前記スポーツコンテンツを出力して、拡張現実に基づいて前記スポーツコンテンツをユーザーに提供し、前記モーショントラッキング部(140)でトラッキングされるユーザーのモーションを用いて、前記スポーツコンテンツとユーザーとの相互作用を制御する制御部(160)と、を備え
    前記ライダーセンサー部(130)は、
    前記センサー連結部(150)を通じて前記本体(110)の下端の両側面に、それぞれ連結される、2つ以上のライダーセンサーを含み、複数のユーザーの相対位置によるレーザースキャニングシェード領域でのトラッキングエラーを回避して、それぞれのユーザーの位置を把握し、
    前記モーショントラッキング部(140)は、
    前記ライダーセンサー部(130)を用いて、地面からの予め定められた高さの平面をレーザースキャニングすることでユーザーの足の位置を認識し、ユーザーの足の位置の変化をトラッキングすることで、ユーザーのモーションをトラッキングし、
    複数のユーザーが同時に前記スポーツコンテンツを利用して団体スポーツを行うことができることを特徴とする、ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置(100)。
  2. 前記ライダーセンサー部(130)は、
    レーザーを生成及び照射する光送信モジュール(131)と、
    前記ユーザーの身体によって散乱した光信号を集束させる光受信モジュール(132)と、
    前記光受信モジュール(132)によって集束された光信号を感知する光感知モジュール(133)と、を含み、
    前記モーショントラッキング部(140)は、
    前記感知された光信号を用いて、ユーザーのモーションをトラッキングすることを特徴とする、請求項1に記載のライダーセンサーを用いた拡張現実インタラクティブスポーツ装置(100)。
  3. 前記センサー連結部(150)は、
    前記本体(110)の下端の側面にヒンジ構造でもって連結されることを特徴とする、請求項1に記載のライダーセンサーを用いた拡張現実インタラクティブスポーツ装置(100)。
  4. 前記本体(110)の下端に設置される、移動補助のための補助輪(111)をさらに含むことを特徴とする、請求項1に記載のライダーセンサーを用いた拡張現実インタラクティブスポーツ装置(100)。
  5. トレーナー端末との通信を行い、前記トレーナー端末にユーザーのスポーツコンテンツ利用情報を提供し、前記トレーナー端末から制御信号を受信して、前記制御部(160)へ伝達することにより、前記ユーザーに非接触方式のトレーニングを提供する通信部(170)をさらに備えることを特徴とする、請求項1に記載のライダーセンサーを用いた拡張現実インタラクティブスポーツ装置(100)。
  6. 前記本体(110)の前面に備えられ、前記スポーツコンテンツの選択信号の入力を受け、前記スポーツコンテンツに関連するプレー情報を出力するディスプレー部(180)と、
    前記スポーツコンテンツに関連する音響を出力するスピーカー部(190)と、をさらに含み、
    前記ディスプレー部(180)及びスピーカー部(190)は、
    前記通信部(170)が前記トレーナー端末から受信したリアルタイムトレーナー映像を出力することを特徴とする、請求項に記載のライダーセンサーを用いた拡張現実インタラクティブスポーツ装置(100)。
JP2022559913A 2020-10-12 2020-10-29 ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置 Active JP7284878B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2020-0131501 2020-10-12
KR1020200131501A KR102233395B1 (ko) 2020-10-12 2020-10-12 라이다 센서를 이용한 증강현실 인터랙티브 스포츠 장치
PCT/KR2020/014925 WO2022080548A1 (ko) 2020-10-12 2020-10-29 라이다 센서를 이용한 증강현실 인터랙티브 스포츠 장치

Publications (2)

Publication Number Publication Date
JP2023515891A JP2023515891A (ja) 2023-04-14
JP7284878B2 true JP7284878B2 (ja) 2023-05-31

Family

ID=75264917

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022559913A Active JP7284878B2 (ja) 2020-10-12 2020-10-29 ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置

Country Status (6)

Country Link
US (1) US11850499B2 (ja)
EP (1) EP4226979A1 (ja)
JP (1) JP7284878B2 (ja)
KR (1) KR102233395B1 (ja)
CN (1) CN115768532B (ja)
WO (1) WO2022080548A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102233395B1 (ko) 2020-10-12 2021-03-30 (주)투핸즈인터랙티브 라이다 센서를 이용한 증강현실 인터랙티브 스포츠 장치
KR102519798B1 (ko) * 2021-10-08 2023-04-11 이재복 라이다센서 및 인공지능을 이용한 체험형 야구-시뮬레이션 서비스 시스템
KR102506127B1 (ko) 2021-10-29 2023-03-07 (주)아이원 라이더를 이용한 가상 터치 스크린 장치
WO2023158072A1 (ko) * 2022-02-18 2023-08-24 경북대학교 산학협력단 비디오 분할에 기반한 라이다 데이터 증강 장치 및 라이다 데이터 증강 방법
KR20230166856A (ko) 2022-05-31 2023-12-07 (주)아이원 인터랙티브 영상 출력시스템
KR102672715B1 (ko) * 2023-01-12 2024-06-05 (주)투핸즈인터랙티브 증강현실 인터랙티브 스포츠 장치를 이용한 보행 분석 방법 및 장치
KR102590735B1 (ko) * 2023-08-10 2023-10-20 (주)에어패스 Ar/vr/xr 인터랙티브 스포츠를 위한 멀티 라이다 센서및 d-camera를 이용한 슬림형 액션플로어 콘텐츠 제공 시스템 및 이를 이용한 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001224729A (ja) 2000-02-18 2001-08-21 Namco Ltd ゲーム装置および情報記憶媒体
JP2015109937A (ja) 2013-01-23 2015-06-18 株式会社東芝 動作情報処理装置
KR102088333B1 (ko) 2019-08-20 2020-03-13 주식회사 마이베네핏 혼합 현실 기반 운동 장치를 이용한 팀 트레이닝 시스템

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7134080B2 (en) * 2002-08-23 2006-11-07 International Business Machines Corporation Method and system for a user-following interface
DE102008052406A1 (de) 2008-08-08 2010-02-11 Epionics Medical Gmbh Verfahren und Vorrichtung zum Erfassen von Parametern zur Charakterisierung von Bewegungsabläufen am menschlichen oder tierischen Körper
KR20170008896A (ko) * 2015-06-19 2017-01-25 (주)블루클라우드 실감형 인터랙티브 콘텐츠에 기반한 운동시스템의 증강된 가상 운동공간 제공 장치 및 그 방법
KR101974260B1 (ko) * 2017-01-18 2019-04-30 엘지전자 주식회사 유도 가열 및 무선 전력 전송 장치
WO2019079790A1 (en) * 2017-10-21 2019-04-25 Eyecam, Inc ADAPTIVE GRAPHIC USER INTERFACE SYSTEM
KR102018435B1 (ko) * 2017-11-15 2019-11-20 (주)새온 인터렉티브 비디오 게임 시스템
US10653957B2 (en) 2017-12-06 2020-05-19 Universal City Studios Llc Interactive video game system
KR102598061B1 (ko) * 2018-09-03 2023-11-03 삼성디스플레이 주식회사 유기 발광 표시 장치 및 그 제조 방법
US10818090B2 (en) * 2018-12-28 2020-10-27 Universal City Studios Llc Augmented reality system for an amusement ride
KR102151321B1 (ko) 2018-12-31 2020-09-08 동서대학교 산학협력단 Vr 스포츠를 통한 피트니스 관리방법
KR20200075707A (ko) * 2019-03-05 2020-06-26 코어다 주식회사 제스쳐의 인식 위치에 따른 모션 인식 기기의 제어 방법, 서버, 기기 및 프로그램
CN110568931A (zh) * 2019-09-11 2019-12-13 百度在线网络技术(北京)有限公司 交互方法、设备、系统、电子设备及存储介质
KR102233395B1 (ko) 2020-10-12 2021-03-30 (주)투핸즈인터랙티브 라이다 센서를 이용한 증강현실 인터랙티브 스포츠 장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001224729A (ja) 2000-02-18 2001-08-21 Namco Ltd ゲーム装置および情報記憶媒体
JP2015109937A (ja) 2013-01-23 2015-06-18 株式会社東芝 動作情報処理装置
KR102088333B1 (ko) 2019-08-20 2020-03-13 주식회사 마이베네핏 혼합 현실 기반 운동 장치를 이용한 팀 트레이닝 시스템

Also Published As

Publication number Publication date
EP4226979A1 (en) 2023-08-16
US20230241483A1 (en) 2023-08-03
KR102233395B1 (ko) 2021-03-30
JP2023515891A (ja) 2023-04-14
CN115768532B (zh) 2023-07-14
US11850499B2 (en) 2023-12-26
WO2022080548A1 (ko) 2022-04-21
CN115768532A (zh) 2023-03-07

Similar Documents

Publication Publication Date Title
JP7284878B2 (ja) ライダーセンサーを用いた拡張現実インタラクティブスポーツ装置
JP6538897B2 (ja) 空間感知を備えるゲーム機
US9753549B2 (en) Gaming device with rotatably placed cameras
US11826636B2 (en) Depth sensing module and mobile device including the same
CN103930180B (zh) 对游戏控制器校准和偏置的系统和方法
US20140168100A1 (en) Video-game controller assemblies designed for progressive control of actionable-objects displayed on touchscreens: expanding the method and breadth of touch-input delivery
KR102476285B1 (ko) 증강현실 인터랙티브 스포츠 장치를 이용한 개인별 운동량 측정 방법
CN109069933A (zh) 在vr环境中的观众视角
CN107111340A (zh) 用于使用头戴式显示器在虚拟或增强现实场景内进行用户交互的方法和系统
US20130083003A1 (en) Personal audio/visual system
KR101703924B1 (ko) 관람위치 변경이 가능한 가상현실안경을 포함하는 가상현실 시스템
US20190091544A1 (en) Dual Motion Sensor Bands for Real Time Gesture Tracking and Interactive Gaming
WO2020218368A1 (ja) 運動用設備
KR20220106770A (ko) 비디오 게임 및 e스포츠를 위한 라이트필드 디스플레이 시스템
KR102464094B1 (ko) 이중 라이다 센서 구조의 모션 트래킹 장치
TWI683687B (zh) 雲端虛擬實境之運動健身機系統
KR102384296B1 (ko) 뎁스 인식 및 컬러 인식을 이용한 증강현실 스포츠 콘텐츠 시스템
JP2003134510A (ja) 画像情報配信システム
KR102476730B1 (ko) 증강현실 인터랙티브 스포츠 장치를 이용한 서킷 트레이닝 제공 방법
EP3673348B1 (en) Data processing device, method and non-transitory machine-readable medium for detecting motion of the data processing device
KR102430084B1 (ko) 라이다 센서를 이용한 증강현실 인터랙티브 스포츠 시스템
Al Zayer Universal Usability of Virtual Reality
Eckert et al. Usage of VR headsets for rehabilitation exergames
KR102669062B1 (ko) 운동 보조 서비스 제공 로봇 및 운동 보조 서비스 제공 방법
Loviscach Playing with all senses: Human–Computer interface devices for games

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221028

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220929

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20221028

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230519

R150 Certificate of patent or registration of utility model

Ref document number: 7284878

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150