JP2024509342A - 別個の装置を使用してインテリジェント車両を操作するための装置、システム、および方法 - Google Patents
別個の装置を使用してインテリジェント車両を操作するための装置、システム、および方法 Download PDFInfo
- Publication number
- JP2024509342A JP2024509342A JP2023535547A JP2023535547A JP2024509342A JP 2024509342 A JP2024509342 A JP 2024509342A JP 2023535547 A JP2023535547 A JP 2023535547A JP 2023535547 A JP2023535547 A JP 2023535547A JP 2024509342 A JP2024509342 A JP 2024509342A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- user
- modular
- simulated
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 28
- 230000004044 response Effects 0.000 claims abstract description 4
- 238000013473 artificial intelligence Methods 0.000 claims description 21
- 230000015654 memory Effects 0.000 claims description 21
- 238000004891 communication Methods 0.000 claims description 11
- 238000004088 simulation Methods 0.000 claims description 10
- 230000008878 coupling Effects 0.000 claims description 7
- 238000010168 coupling process Methods 0.000 claims description 7
- 238000005859 coupling reaction Methods 0.000 claims description 7
- 230000000007 visual effect Effects 0.000 claims description 7
- 230000003190 augmentative effect Effects 0.000 claims description 5
- 230000001133 acceleration Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 abstract description 11
- 239000000463 material Substances 0.000 description 12
- 238000010801 machine learning Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 239000002609 medium Substances 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 239000002023 wood Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 229910052738 indium Inorganic materials 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 230000005693 optoelectronics Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 239000006163 transport media Substances 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H17/00—Toy vehicles, e.g. with self-drive; ; Cranes, winches or the like; Accessories therefor
- A63H17/26—Details; Accessories
- A63H17/36—Steering-mechanisms for toy vehicles
- A63H17/395—Steering-mechanisms for toy vehicles steered by program
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0022—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the communication link
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H17/00—Toy vehicles, e.g. with self-drive; ; Cranes, winches or the like; Accessories therefor
- A63H17/26—Details; Accessories
- A63H17/36—Steering-mechanisms for toy vehicles
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H30/00—Remote-control arrangements specially adapted for toys, e.g. for toy vehicles
- A63H30/02—Electrical arrangements
- A63H30/04—Electrical arrangements using wireless transmission
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/222—Remote-control arrangements operated by humans
- G05D1/224—Output arrangements on the remote controller, e.g. displays, haptics or speakers
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/222—Remote-control arrangements operated by humans
- G05D1/224—Output arrangements on the remote controller, e.g. displays, haptics or speakers
- G05D1/2244—Optic
- G05D1/2247—Optic providing the operator with simple or augmented images from one or more cameras
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/226—Communication links with the remote-control arrangements
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/221—Remote-control arrangements
- G05D1/227—Handing over between remote control and on-board control; Handing over between remote control arrangements
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/24—Arrangements for determining position or orientation
- G05D1/243—Means capturing signals occurring naturally from the environment, e.g. ambient optical, acoustic, gravitational or magnetic signals
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
- A63H2200/00—Computerized interactive toys, e.g. dolls
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2101/00—Details of software or hardware architectures used for the control of position
- G05D2101/10—Details of software or hardware architectures used for the control of position using artificial intelligence [AI] techniques
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2101/00—Details of software or hardware architectures used for the control of position
- G05D2101/24—Details of software or hardware architectures used for the control of position decentralised arrangement of the on-board controllers
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2101/00—Details of software or hardware architectures used for the control of position
- G05D2101/26—Details of software or hardware architectures used for the control of position retrofitting existing legacy systems
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2105/00—Specific applications of the controlled vehicles
- G05D2105/30—Specific applications of the controlled vehicles for social or care-giving applications
- G05D2105/32—Specific applications of the controlled vehicles for social or care-giving applications for amusement, e.g. toys
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2109/00—Types of controlled vehicles
- G05D2109/10—Land vehicles
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D2111/00—Details of signals used for control of position, course, altitude or attitude of land, water, air or space vehicles
- G05D2111/10—Optical signals
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Toys (AREA)
- Studio Devices (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
周囲環境を介してラジコン車両の自動運転を提供するためのシステムが本明細書に開示される。本システムは、周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを有するモジュール式装置と、RC車両に機械的に結合されるように構成されるベッドプレートと、ベッドプレートに機械的に結合され、モジュール式装置に通信可能に結合されるように構成されるモジュール式制御回路とを含むことができ、モジュール式制御回路が、RC車両のハードウェアに通信可能に結合され、モジュール式装置から受信したコマンドに応答してRC車両を制御するように構成される。【選択図】図1
Description
関連出願の相互参照
本出願は、2021年2月10日に出願された、「既存のモバイル装置を使用するインテリジェント車両のための方法およびシステム」と題する、米国仮特許出願第63/148,040号に対する優先権を主張するものであり、その開示は参照によりその全体が本明細書に組み込まれる。
本出願は、2021年2月10日に出願された、「既存のモバイル装置を使用するインテリジェント車両のための方法およびシステム」と題する、米国仮特許出願第63/148,040号に対する優先権を主張するものであり、その開示は参照によりその全体が本明細書に組み込まれる。
本開示は、一般に自動車両に関連し、より具体的には、車両の自動運転のために別個のユーザー装置を使用する、改善された装置、システム、および方法を対象とする。
いくつかの実施形態では、別個のユーザー装置からのセンサーを使用して自動運転車両を提供するための方法およびシステムが開示される。いくつかの実施形態では、ユーザー装置をリモコン車両上に位置付け、ユーザー装置からのセンサーを使用してリモコン車両を制御するためのシステムを提示する。いくつかの実施形態では、ユーザーの別個の装置がリモコン車両に取り付けられ得るように、システムは、既存のリモコン車両に取り付けられる、固有のシャーシを含む。いくつかの実施形態では、ユーザーの別個の装置からリモコン車両へのインターフェイスを提供する回路が含まれる。回路は、システムにハードウェア層を提供してもよく、いくつかの実施形態では、ハードウェアコンポーネントを互いにリンクするファームウェア層も含まれる。いくつかの実施形態では、人工知能プログラミングは、ユーザーの別個の装置に提供され、ユーザーの別個の装置内のセンサーを利用して、リモコン車両を制御するかまたは駆動する方法を指示する。いくつかの実施形態では、リモコン車両の手動制御も含まれ、ユーザーの別個の装置で制御をオーバーライドまたは補完するために使用することができる。
いくつかの実施形態では、システムは、ユーザーのモバイル装置を使用して遠隔制御(RC)車両の自動運転を提供するために導入される。モバイル装置は、少なくとも一つのセンサーおよび有線または無線インターフェイスを含み得る。システムは、RC車両に取り付けられるように構成されるシャーシを含み得る。シャーシは、ユーザーのスマートフォンを運ぶように構成されるスロットと、RC車両に通信的に連結し、RC車両を操作するために信号を送信するように構成される回路とを含み得る。回路は、ユーザーのモバイル装置の有線または無線インターフェイスに接続するためのインターフェイスを含んでもよく、またRC車両にルーティングされ得るユーザーのモバイル装置からコマンドを受信するように構成され得る。
システムのいくつかの実施形態では、回路は、少なくとも一つのセンサーを利用するユーザーのモバイル装置からコマンドを受信するようにさらに構成される。
いくつかの実施形態では、システムは、RC車両を制御するための人工知能(AI)をプログラミングするためのプラットフォームを提供するように構成されるソフトウェアまたはファームウェアで表される仮想化層をさらに含む。
システムのいくつかの実施形態では、仮想化層は、シミュレーター抽象化モジュール、自動運転抽象化モジュール、および車両ハードウェア抽象化モジュールを含む。
システムのいくつかの実施形態では、仮想化層は、シミュレーター抽象化モジュールに接続されるソフトウェアシミュレーターを介してAIをプログラミングするためのプラットフォームを提供するように構成され、ソフトウェアシミュレーターは、ユーザーのモバイル装置とは別個のユーザー装置上で操作される。
いくつかの実施形態では、システムは、ユーザーが、RC車両が移動している時に、モバイル装置がRC車両に取り付けられている間に、ユーザーのモバイル装置のカメラビューを見ることができるように、ユーザーが着用できる仮想現実(VR)または拡張現実(AR)装置へのインターフェイスをさらに含む。
システムのいくつかの実施形態では、VRまたはARインターフェイスは、ユーザーのモバイル装置のビジュアルデータストリーミング機能を使用して、VRまたはAR装置にライブビジュアルストリーミングを提供するように構成される。
システムのいくつかの実施形態では、回路は、RC車両への手動インターフェイスと通信するようにさらに構成される。
システムのいくつかの実施形態では、回路は、手動インターフェイスから受信した入力に基づき、RC車両にコマンドを送信するようにさらに構成される。
システムのいくつかの実施形態では、回路は、ユーザーのモバイル装置から受信されたコマンドをオーバーライドするように構成されるセーフモードコンポーネントを含む。
いくつかの実施形態は、例示として図示されており、添付図面の図には限定されていない。
既存のユーザーのモバイル装置を使用して運転車両を制御し、ユーザーのモバイル装置を介して人工知能を用いて運転車両の制御をプログラミングするための方法、装置、およびシステム(例えば、機械)の例が提示される。より広い聴衆が人工知能(AI)とコンピュータープログラミングに慣れ親しむためのエントリーポイントとして、AIによって制御されるインターフェイスを備えた遠隔制御(RC)車両が、楽しさと具体的なエントリーポイントを提供することができる。多くの場合、プログラミング、特にAIの実践に必要なハードウェアとソフトウェアは非常に複雑であり、現在のソリューションでは、これらのスキルが幅広い聴衆によって経験されるのを防ぐ、高価な障壁が提供される。本開示の態様は、スマートフォンなどのユーザーの既存のモバイル装置を、市販の普通のRC車などの既存のRC車両に接続し、最小限の追加装置で、自動運転および制御でRCをプログラムするためのソリューションを提供する。
いくつかの実施形態では、ハードウェアは、RC車の上部に取り付け、ユーザーのスマートフォンを保持するスロットを含むシャーシを含む。シャーシに結合された回路は、カメラ、LIDAR、タッチスクリーン、マイク、スピーカー、位置決めシステム、Wi-Fi(登録商標)、Bluetooth(登録商標)、セルラーシステムなどの取り付けられるスマートフォンのセンサーと接続し、RC車に指示を伝達する。スマートフォンにダウンロードできるソフトウェアによって、ユーザーがAIプログラミングを行うことが可能になり、スマートフォンのセンサーにアクセスして、取り付けられるシャーシに結合された回路にコマンドを送信することによって、RC車を制御するために使用される。このようにして、本開示の既存のスマートフォンおよびハードウェアおよびソフトウェアのみを使用して、ユーザーは、自動運転を実施するために、RC車にAIアルゴリズムを実装することができる。ユーザーはその後、AIプログラミングスキルを実践し、センサーとアルゴリズムの使用を、即時のフィードバックにより実用的な方法で改良し、仕上げることができる。これにより、コスト効率が良く、より簡単にアクセスできるソリューションが可能になり、より多くの人にAIやプログラミング全般を紹介することができる。
いくつかの実施形態では、例示的なハードウェアおよびソフトウェアコンポーネントは、空中ロボット、脚付きロボット、またはロボットアームなどの他の既存の車両に適用され得る。ユーザーのスマートフォンは、ロボットに結合されると、AIプログラムで使用するための入力を提供する感知能力を提供することができる。本開示のハードウェアおよびソフトウェアインターフェイスは、ロボットを制御するために、ユーザーにより、スマートフォンのセンサーおよびプログラムを接続し得る。
いくつかの実施形態では、取り付けられるシャーシに結合された回路はまた、スイッチなどの手動オーバーライドを可能にし、通常、RC車の購入とともに提供される、RC手動制御装置からの入力を受信する。手動制御により、RC車をより簡単に取得できるようにすることで、安全性を高め、フィードバックを増やすことができ、RC車を使用する方法の数に柔軟性を与える。例えば、視線上にいる間、RC車の手動制御を使用できるが、視線から外れた場合、取り付けられるスマートフォンによって提供されるRC車のAI制御を使用できる。
いくつかの実施形態では、スマートフォンにダウンロードされたソフトウェアは、ユーザーが、RC車に取り付けられた時にスマートフォンのカメラが見るものを見ることを可能にする、仮想現実インターフェイスを提供する。ソフトウェアは、カメラデータを利用して、ユーザーが着用するVR装置に送信してもよく、ユーザーは、それが自律的にまたは手動で運転される間に、RC車の動きを経験することができる。
いくつかの実施形態では、本明細書に記載のARおよびVR原理は、eスポーツなどのゲームシナリオまたは手持ち式コンソールでも実施され得る。複数の車両およびユーザーの各モバイル装置でのピアツーピアレーシングは、本開示のインテリジェントRC車両を利用して、現実世界の設定で一緒にリンクされ得る。各ユーザーは、モバイル装置のカメラからの視点を使用して参加し得る。
いくつかの実施形態では、モバイル装置を他のロボットに取り付ける装置も提供される。本明細書に提供されるシャーシと同様に、別の類似の取り付け装置は、ユーザーのモバイル装置センサーを利用するために、他のロボットに取り付けることができる。本明細書に記載の原理により、ユーザーは、ARまたはVR環境で別の種類のロボットを制御することができる。さらに、以下に開示される仮想化層は、ユーザーのモバイル装置などの別個の装置からのセンサーを使用して、他の種類のロボットを自律的に制御することを可能にし得る。
ここで図1を参照すると、別個の装置104を使用してインテリジェント車両102を操作するためのシステム100が、本開示の少なくとも一つの非限定的態様に従って示される。図1の非限定的態様によれば、システム100は、別個の装置104を収容するよう構成されるシャーシ106とともに、車両102自体を含み得る。一般性を失うことなく、装置104は、システム100に対して前方、後方、および/または他の三次元配向を有するように位置付けられてもよい。図1に示すように、車両102は、車両102が地形を横断できるように構成される一つまたは複数のホイール108を含み得る。例えば、図1の車両102は、遠隔制御される車両のフォームファクタと類似したフォームファクタを含み得る。しかしながら、他の非限定的態様によれば、車両102は、車両102が、とりわけ、大気、水、および/または空間を含む他の媒体を横断するように、代替的におよび/または追加的に構成できるように、他のコンポーネント(例えば、エンジン、ノーズコーン、ローター、プロペラ、フィン、翼、エアクッション、シールなど)を含み得る。言い換えれば、他の非限定的態様によれば、車両102は、他の車両タイプの中でも、遠隔制御されたドローン、航空機、ヘリコプター、ロケット、ボート、潜水艦、および/またはホバークラフトとして構成することができる。
さらに図1を参照すると、システム100はまた、車両102自体から構造的および/または機能的に分離された装置104を収容するように構成されるシャーシ106を含み得る。言い換えれば、図1の装置104は、車両102の操作以外の主要な目的のために、ユーザーによって商業的に確保され得る。特に、装置104は、他の装置との無線および/または有線通信のために構成されてもよく、装置104を囲む周囲環境の特徴を検出するよう構成される一つまたは複数のセンサー104を含み得る。例えば、図1の非限定的態様によれば、装置104は、アドホック(例えば、Bluetooth(登録商標)、近距離通信、RFIDなど)、および/またはインフラネットワーク(例えば、携帯、WiFi(登録商標)、ラジオなど)を介した無線通信のために構成されるユーザーのスマートフォンを含んでもよく、周囲環境内の特徴を視覚的に検出し、検出された特徴に関連付けられる画像データを生成するように構成される、カメラなどの一つまたは複数のセンサー110を含み得る。図1の装置104は、前述の機能を可能にするための任意の数のアンテナ、プロセッサー、メモリー、レシーバー、トランスミッター、および/またはトランシーバーを含み得ることが理解されるべきである。しかしながら、他の非限定的態様によれば、装置104は、感知および計算目的のために構成される他の装置の中でも特に、タブレット、パーソナルデジタルアシスタント、ラップトップコンピューター、および/またはスマートウォッチを含み得る。さらに他の非限定的態様によれば、装置104は、周囲環境内の他の特徴を検出するよう構成される他のセンサー、とりわけ周囲環境を特徴付けおよび/またはマッピングするよう構成される光検出および測距センサー(「LIDAR」)、音波振動を検出するよう構成されるマイク、機械的振動を検出するよう構成されるジャイロスコープ、および/または周囲環境内の熱振動を検出するよう構成される赤外線カメラを含み得る。一般性の喪失なしに、図1のセンサー110、または他の非限定的態様に関して参照される他のセンサーのいずれかは、車両100に対して前方、後方、または他の三次元配向に面するように位置付けられてもよい。
図1をさらに参照すると、シャーシ106は、装置104を車両102に収容し固定するように幾何学的に構成され得る。例えば、図1の非限定態様によれば、シャーシ106は、装置104に対応する幾何学的形状のスロット112を画定してもよく、装置104を車両102に固定し、車両102の操作から生じる振動に応答して車両102から分離するのを防止するように構成される一つまたは複数の壁114を含み得る。シャーシ106は、車両102に一体型であってもよく、および/または車両102への選択的機械的および/または電気的結合のために構成され得る。例えば、図1の非限定的態様によれば、シャーシ106は、シャーシ106およびシャーシ106内に取り付けられる装置102を車両102に機械的に固定するように構成される一つまたは複数の結合要素118を有するフェイスプレートとして構成されるマウント116を含み得る。一部の非限定的態様によれば、結合要素118は、シャーシ106を車両102に接続するねじおよび/またはボルトを収容するように構成される穴および/またはタップ挿入であり得る。
シャーシ106が、選択的な機械的および電気的結合のために構成される、図1の非限定的態様によれば、シャーシ106は、図1の車両102など、任意の市販の利用可能な遠隔被制御車両に取り付けることができる。このように、シャーシ104は、さまざまな材料およびプロセスを介して、車両102とは別個に製造され得る。例えば、いくつかの非限定的態様によれば、シャーシ106および/またはマウント116は、三次元印刷、プラスチック成形、および/または木材または金属から機械加工される(例えば、コンピューター数値制御(「CNC」)方法などを介して)ことによって製造され得る。マウント116は、ベッドプレート120全体に配置される複数のスロット122を介して、ベッドプレート120と機械的に接合するように構成され得る。シャーシ196および/またはマウント116と同様に、ベッドプレート120は、三次元印刷、プラスチック成形、および/または木材または金属から機械加工される(例えば、コンピューター数値制御(「CNC」)方法などを介して)ことによって製造され得る。さらに、ベッドプレート120全体に配置されるスロット122の各々は、装置104が車両102の機械的および電気システムに効果的に統合され得るように、機械的および/または電気的インターフェイスとして機能するように構成され得る。例えば、複数のスロット122の第一のスロット(目に見えない)は、シャーシ106を収容するように構成することができるが、複数のスロット122の第二のスロット(目に見えない)は、とりわけマイクロプロセッサーまたは論理ベースのコントローラーなどの制御回路124を収容するように構成することができる。ベッドプレート120は、装置104と制御回路124との間の電気的通信を確立するよう構成される、一つまたは複数の電気的接続126(例えば、回路、ワイヤ、コネクターなど)をさらに含み得る。一つのこうした電気的接続126(目に見えない)は、電気的接続126が装置104上の特定のデータ接続(例えば、ライトニングケーブル、マイクロユニバーサルシリアルバス(「USB」)、USB-Cなど)と整列するように、シャーシ106内に特化され、寸法的に位置付けられてもよく、それによって、装置104が制御回路124との間で信号を送受信することが可能になる。もちろん、他の非限定的態様によれば、装置104は、例えば、アドホックリンク(例えば、Bluetooth(登録商標)、NFCなど)を介して、制御回路124との間で信号を無線通信するように構成され得る。図1の非限定的態様によれば、装置104は、例えば、Apple iPhone(登録商標)、またはGoogle Android(登録商標)などのスマートフォンであってもよく、制御回路124は、Arduino(登録商標)マイクロコントローラーであり得る。従って、図1のシャーシ106、マウント116、ベッドプレート120、およびスロット122は、こうした装置に対応するように幾何学的および電気的に構成され得る。
図1の車両102を効果的に操作させるために、車両102にわずかな修正を実施することができる。例えば、図1の車両102は、「市販」の車両102に固有の遠隔制御レシーバーからのパルス幅変調(PWM)信号をスロット122の一つを介してベッドプレート120上に取り付けられる制御回路124に配線し直すことができる。一つまたは複数の電気的接続126(例えば、回路、ワイヤ、コネクターなど)は、装置104と制御回路124との間の電気的通信を確立するように構成されるため、制御回路124は、ユーザーの選択および/または意図された用途に応じて、装置104から制御信号を受信し、それらを車両102のシャーシ128に転送することができる。一部の非限定的態様によれば、制御回路124は、本明細書でさらに詳細に論じるように、操作のために、車両102のシャーシ128に転送するために受信する複数の信号のうちの一つを選択的に受けいれるように構成することができる。
言い換えれば、図1の装置104は、制御回路124と通信するように構成されてもよく、制御回路124は、一つまたは複数の電気的接続126を介して車両102のシャーシ128と通信するように構成され得る。さらに、シャーシ106は、装置104の所望のセンサー110が、車両102を手動でおよび/または自律的に運転するのを支援するために、装置104を使用してユーザーを助けるために、好ましくは配置されるように、装置104に対して具体的に構成され得る。図1によると、シャーシ106によって画定されるスロット112は、一つまたは複数のセンサー110が車両102に対して所望の位置にあるように、装置104を収容することができる。例えば、一つまたは複数のセンサー110が装置104のカメラである場合、シャーシ106は、装置104が適切に設置されると、車両の手動および/または自動運転のための視覚的入力として機能し得るように構成され得る。従って、図1のシステム100は、追加のセンサーを必要とせずに、車両102の手動および/または自動運転を可能にすることができる。このように、図1のシステム100は、平均的な消費者に対して、手動および/または自動車両102の操作への、より効率的なアクセスの増加を可能にすることができる。
一部の非限定的態様によれば、制御回路124は、車両102の操作プラットフォーム、または車両102の操作を支援することができるソフトウェアを格納するように構成されるメモリーに通信可能に結合され得る。例えば、ソフトウェアを装置104のメモリー上にインストールして、制御回路124および車両102に、所望の操作に必要なさまざまな程度の機能を提供することができる。一部の非限定的態様によれば、このソフトウェアは、ユーザーによって、装置104を介して、「アプリストア」、または他の取得手段からダウンロードされるモバイルアプリケーションであり得る。本開示によって企図され、図1のシステム100を介して実装されるプラットフォームは、一般的に、少なくとも三つのタスクの形で機能を提供できる。1)ソフトウェアは、一つまたは複数のセンサー110を利用して画像データおよび/または運動データを取得するように装置104に命令することができる(例えば、カメラ、微小電気機械システム(「MEMS」)ジャイロスコープ、加速度計、慣性測定ユニット(「IMU」)などを介して)。2)ソフトウェアは、生成されたデータを、レンダリングのために、ユーザーの別の装置などのリモートコンピューター装置に送信するように装置104に命令することができる。および3)ソフトウェアは、装置104に搭載されていないリモートコンピューティングリソースの助けを借りずにセンサー110のデータを局所的に利用するいくつかの人工知能および/または機械学習アルゴリズムに基づいて、システム100の自動運転の決定を行うことができ、装置104をさらに制御して、車両102を制御するための自動運転決定に従ってコマンドを発行することができる。言い換えれば、装置104およびソフトウェアは、車両102の視点から操作環境の一人称視点を生成し、ユーザーに提供することができるため、ソフトウェアは、ユーザーが視線を超えて車両を操作することを可能にすることができる。このように、図1のシステム100は、オンボード駆動位置の仮想的な没入感を生成するように実装され得る。
ソフトウェアの設計は、ソフトウェアが、どの制御回路が車両102、または車両102上に配置されるロボットシステムを、高価な変更に相当なコストを加えることなく効果的に制御できるかを変更できるように、ポータブルな形式であるか、または柔軟に設計することができる。前述したように、ソフトウェアは、装置104および/または車両102のシャーシ128上の一つまたは複数のセンサー110のハードウェア設計および能力によってのみ制限される、ソフトウェアおよび/またはユーザー入力のコマンドで幅広い自律的タスクを実行するように構成されるスマートフォンなどの装置104によって実行され得る。従って、ソフトウェアは、車両102の自動運転を容易にすることができる。追加的および/または代替的に、ソフトウェアは、ユーザーにソフトウェアによって生成されたコマンドをオーバーライドする能力を提供することができ、それによって車両102の手動操作を容易にする。さらに、別個の装置104および制御回路124を含めることで、制御回路124がロボットシャーシに伝送されたコマンドをオーバーライドすることが可能になり、それによって、自律制御と手動制御との間の車両操作の瞬時切り替えが促進される。より具体的には、装置104上のソフトウェアは、ユーザーによって発行された手動制御コマンドを通して、さらに変更することなく制御回路124に単にパスし得る。これにより、ユーザーは車両102を直接制御することができる。第二に、装置104上のソフトウェアは、ユーザーによって発行された手動制御コマンドを完全にオーバーライドすることができ、事実上、いくつかのAIアルゴリズムが車両102を完全に制御することができる。これには、人による監視なしに全自動運転するシナリオ、および差し迫った衝突の前に車両102を停止するなどの緊急安全オーバーライドのシナリオが含まれる。最後に、装置104上のソフトウェアは、追加の制御コマンドを増強することによって、ユーザーによって発行された手動制御コマンドを修正できる。一部の自動運転シナリオでは、これにより、動的クルーズ制御、衝突回避、自動レーン変更、および自動駐車などを含む自動操縦機能など、安全性または性能を強化するためのソフトウェアによって、ユーザーが車両102を制御することが可能になる。しかしながら、一部のeスポーツシナリオでは、装置104上のソフトウェアは、制御制約を加えて、いくつかのゲームプレイに従って車両102の性能を制限し、それゆえ、車両102を、ユーザーによる制御をより困難にし得る。例えば、仮想現実環境において、車両102の位置は、仮想障害物(仮想水たまりまたは仮想砂トラップなど)と衝突し得る。バーチャルリアリティ環境と同期するソフトウェアは、車両102のスロットルまたはステアリングの運転可能性を減少させてもよく、事実上、ユーザーが仮想現実環境内の仮想障害物を認識するときに、ユーザーが車両102を制御するための課題を生じさせ得る。
ここで図2を参照すると、本開示の少なくとも一つの非限定的態様に従って、前述のシステム100コンポーネント間のさまざまな相互作用を示す、図1のシステム100の機能ブロック図が示される。前述したように、車両102(図1)シャーシ128は、制御回路124からコマンド信号202(例えば、PWM信号など)を受信し、テレメトリ信号202を介して制御回路124に送り返すことができるテレメトリを生成するように構成されるモーター212およびサーボ機構214などのさまざまな他のコンポーネントを含む、車両102(図1)の操作を支持する基礎構造を提供することができる。この機能構成は、図2のブロック図によって示される。前述したように、制御回路124は、車両102のシャーシ128(図1)に結合されたArduino(登録商標)タイプのマイクロコントローラーを含んでもよく、これは車両128のモーター212および/またはサーボ214を制御するように配線されていてもよい。従って、制御回路124は、車両102(図1)の連続的な制御および操作を提供するために、RCのさまざまなコンポーネントから車両102(図1)テレメトリ202を受信することができる。シャーシ128はまた、ユーザーのスマートフォンなどの別個の装置104の位置決めをサポートし得る。前述のように、装置104は、前述の電気的接続126(図1)および/またはBluetooth(登録商標)を介して、有線または無線接続を介して制御回路124に通信可能に結合され得る。装置104は、カメラなどのそのセンサー110(図1)によって生成されるデータに基づき、有線および/または無線接続を介して制御回路124にコマンド信号204を提供し得る。装置104、より具体的には、装置104によって実装されるソフトウェアは、ニューラルネットワークなどの人工知能プラットフォーム、または車両102を自律的に操作させるように構成される監視付きアルゴリズム、非監視アルゴリズム、または補強アルゴリズムなどの機械学習プラットフォームを含み得る。一部の非限定的態様によれば、車両102は、なおも、コマンド204を送信し、制御回路124からテレメトリ202を受信するように構成できる、ラジコンレシーバー210を介して手動で操作することがでる。
全体として、本開示の前述の特徴は、ストック車両102(図1)シャーシ128を、別製造のシャーシ106(図1)、ベッドプレート120(図1)、制御回路124、および装置104と一体化して、より安価で、持ち運びが容易で、かつ極めて強力であり、改善された車両102(図1)を形成し、従来のストック車両102(図1)に対する技術的改良を可能にする。
ここで図3を参照すると、図1のシステム100によって提供される技術的改良の一部のみを示すブロック図が、本開示の少なくとも一つの非限定的態様に従って図示される。図3の非限定的態様によれば、システム100(図1)は、装置104の機能を利用して、拡張現実(「AR」)および/または仮想現実(「VR」)体験を車両102(図1)に提供することができる。ソフトウェアは、AR/VRゲーム層302、シミュレーション層304、および/または仮想化層306を含み得る。AR/VRゲーム層302は、装置104から受信した画像データ308に基づき、拡張または仮想ゲームを生成できる。シミュレーション層304は、装置104から受信したテレメトリ310に基づき、車両102(図1)および周囲環境のシミュレーションを生成できる。仮想化層306は、装置104から受信された画像データ308および/またはテレメトリ310に基づき、自動運転コード312を生成できる。生成されたコード312は、装置104にダウンロードされ、車両102の自動運転を実行および/または改善するために実装され得る(図1)。
図3の非限定的態様によれば、装置104は、その一つまたは複数のセンサー110(図1)を介して、キャプチャビデオデータをストリーム配信するように構成されてもよく、およびキャプチャビデオデータを、有線または無線接続を介して、ユーザーが着用するヘッドマウントディスプレイ(図示せず)にストリーム配信することができる。装置104によって実行されるソフトウェアはまた、車両102(図1)に関連付けられるテレメトリデータを、ARおよび/またはVR体験を生成するために、またはソフトウェアによって提供される車両102(図1)シミュレーションに関連する代替的な使用のために、ユーザーのリモートコンピューター装置(図示せず)にリアルタイムで送信することができる。例えば、こうしたテレメトリデータは、他のタイプのテレメトリデータの中でも特に、車両102(図1)に関連付けられる六自由度の位置、速度、加速度、および/またはステアリング角度を含み得る。車両102(図1)が自律的に、または手動で操作されるかどうかに関わらず、ユーザーは、レシーバー210(図2)を介して、装置104(図1)が車両102(図1)上に取り付けられる際に、車両102(図1)が装置104(図1)の一つまたは複数のセンサー110を介して経験しているものを経験することができる。ユーザーはまた、車両102(図1)テレメトリによって生成された仮想シミュレーション車両102(図1)を介して、車両102(図1)によって提供されるテレメトリデータに基づき生成された仮想シミュレーション環境での運転を経験し得る。同様に、本明細書でさらに詳細に説明するように、システム100(図1)によって生成されるテレメトリデータを使用して、コードを更新したり、人工知能および/または機械学習アルゴリズムを練習してシミュレーションを改善することができる。
スマートフォンなどの装置104上でコードをプログラムして、特定の自律的タスクを行うことは困難であり得る。実際に、図1の車両102などのロボットシステムを正確に制御するためのプログラミングアプリケーションは、このようなアプリケーションが一般的に電話自体にプログラムされるのではなく、より能力のあるパーソナルコンピューターに依存してコードをプログラムするため、困難であり得る。さらに、コードは通常、装置104上にインストールされる「展開」手順を受ける。しかしながら、装置104は、本開示によって意図されるように、車両102(図1)と一体化されるため、装置104は、車両102(図1)とともに移動し、更新によって装置104をプログラミングできるパーソナルコンピューターから分離される。明らかに、これは、車両102を操作させるために装置104が実装される手段を改善することができる自律型コードおよびコード更新の導入および試験を複雑にする(図1)。しかしながら、本開示によって企図されるシステム100(図1)は、装置104を介して展開される仮想化層306を介してこの問題を解決する。一部の非限定的態様によれば、仮想化層306は、ミドルウェアを含み得、車両102(図1)制御コードをプログラムし、シミュレーターシステム上で徹底的に試験できる。
ここで図4を参照すると、図3の仮想化層306を含むソフトウェアアーキテクチャー400のブロック図が、本開示の少なくとも一つの非限定的態様に従って示される。図4の非限定的態様によれば、アーキテクチャー400は、とりわけ、シミュレーションおよび/またはビジュアライゼーションスタック402、機械学習ライブラリースタック404、および車両ハードウェアスタック406などを含む。さらに、仮想化層306とは別に、アーキテクチャー400は、自動運転アルゴリズムライブラリー405をさらに含み得る。このように、仮想化層306は、ソフトウェアシミュレーター304、機械学習ライブラリー408、およびアクチュエーター410および/またはセンサー412などの車両102(図1)からのハードウェアから、データを取得して自動運転アルゴリズムライブラリー405に送信するように構成され得る。
図4の非限定的態様によれば、仮想化層306は、シミュレーター抽象化414、自動運転抽象化416、および/または車両ハードウェア抽象化416を含み得る。オプションで、仮想化層306は、装置104(図1)の抽象化を含むことができ、または少なくとも、装置104(図1)上の一つまたは複数のセンサー110(図1)によって生成された信号を受信するようにさらに構成することができる。このように、仮想化層306は、ソフトウェアシミュレーター304、さまざまな機械学習ライブラリー402、および/または車両102(図1)自体と通信できる。このように、仮想化層306は、必要なコード変更なしで装置104(図1)に展開できる、車両102(図1)の操作コードおよび/または自動化アルゴリズム、ならびに更新を生成できる。言い換えれば、仮想化層306は、車両102(図1)および車両102(図1)が通過する周囲環境の挙動を抽象化および仮想化することができ、車両102(図1)のソフトウェアシミュレーター304、機械学習ライブラリー402、および/またはハードウェアシステム404とインターフェイスすることができる。仮想化層306は、これらの入力を利用して、仮想入力を利用して、自動運転アルゴリズムライブラリー405の環境マッピングエンジン422、環境知覚エンジン424、動作計画エンジン426、および/またはコントローラー428を実施および/または改善することができる、自動運転ソフトウェアスタック420と通信することができる。
スマートフォンをロボットの「脳」として追加することの低コスト設計、ほとんどのRC車に対する、および潜在的に他のロボットシステムに対するシステムの互換性、および仮想化ソリューションを使用したソフトウェア導入およびテストプロセスの使いやすさを組み合わせることにより、本開示の態様は、消費者が簡単にインテリジェンスを「非スマート」または「ダム」ロボットシステムに追加するための画期的なユーザー体験を提供する。
本明細書に記載される主題のさまざまな態様が、以下の番号の付いた条項に記載される。
条項1:
ユーザーのモバイル装置を使用してラジコン(RC)車両の自動運転を提供するためのシステムであって、モバイル装置が少なくとも一つのセンサーおよび通信インターフェイスを含み、RC車両上に取り付けられるように構成されるシャーシであって、ユーザーのスマートフォンを運ぶように構成されるスロットを含む、シャーシと、RC車両に通信的に連結し、RC車両を操作させるために信号を送信するように構成される回路であって、ユーザーのモバイル装置の通信インターフェイスに接続するためのインターフェイスを含み、RC車両にルーティングされ得る、ユーザーのモバイル装置からコマンドを受信するように構成される、回路と、を含む、システム。
ユーザーのモバイル装置を使用してラジコン(RC)車両の自動運転を提供するためのシステムであって、モバイル装置が少なくとも一つのセンサーおよび通信インターフェイスを含み、RC車両上に取り付けられるように構成されるシャーシであって、ユーザーのスマートフォンを運ぶように構成されるスロットを含む、シャーシと、RC車両に通信的に連結し、RC車両を操作させるために信号を送信するように構成される回路であって、ユーザーのモバイル装置の通信インターフェイスに接続するためのインターフェイスを含み、RC車両にルーティングされ得る、ユーザーのモバイル装置からコマンドを受信するように構成される、回路と、を含む、システム。
条項2:
回路が、少なくとも一つのセンサーを利用するユーザーのモバイル装置からコマンドを受信するようにさらに構成される、請求項1に記載のシステム。
回路が、少なくとも一つのセンサーを利用するユーザーのモバイル装置からコマンドを受信するようにさらに構成される、請求項1に記載のシステム。
条項3:
RC車両を制御するための人工知能(AI)をプログラミングするためのプラットフォームを提供するように構成されるソフトウェアまたはファームウェアで表される仮想化層をさらに含む条項1または2のいずれかに記載のシステム。
RC車両を制御するための人工知能(AI)をプログラミングするためのプラットフォームを提供するように構成されるソフトウェアまたはファームウェアで表される仮想化層をさらに含む条項1または2のいずれかに記載のシステム。
条項4:
仮想化層が、シミュレーター抽象化モジュール、自動運転抽象化モジュール、および車両ハードウェア抽象化モジュールを含む、条項1~3のいずれかに記載のシステム。
仮想化層が、シミュレーター抽象化モジュール、自動運転抽象化モジュール、および車両ハードウェア抽象化モジュールを含む、条項1~3のいずれかに記載のシステム。
条項5:
仮想化層が、シミュレーター抽象化モジュールに接続されるソフトウェアシミュレーターを介してAIをプログラミングするためのプラットフォームを提供するように構成され、ソフトウェアシミュレーターが、ユーザーのモバイル装置とは別個のユーザー装置上で操作される、条項1~4のいずれかに記載のシステム。
仮想化層が、シミュレーター抽象化モジュールに接続されるソフトウェアシミュレーターを介してAIをプログラミングするためのプラットフォームを提供するように構成され、ソフトウェアシミュレーターが、ユーザーのモバイル装置とは別個のユーザー装置上で操作される、条項1~4のいずれかに記載のシステム。
条項6:
ユーザーが、RC車両が移動している時にモバイル装置がRC車両に取り付けられる間にユーザーのモバイル装置のカメラビューを見ることができるように、ユーザーが着用できる仮想現実(VR)または拡張現実(AR)装置へのインターフェイスをさらに含む、条項1~5のいずれかに記載のシステム。
ユーザーが、RC車両が移動している時にモバイル装置がRC車両に取り付けられる間にユーザーのモバイル装置のカメラビューを見ることができるように、ユーザーが着用できる仮想現実(VR)または拡張現実(AR)装置へのインターフェイスをさらに含む、条項1~5のいずれかに記載のシステム。
条項7:
VRまたはARインターフェイスが、ユーザーのモバイル装置のビジュアルデータストリーミング機能を使用して、VRまたはAR装置にライブビジュアルストリーミングを提供するように構成される、条項1~6のいずれかに記載のシステム。
VRまたはARインターフェイスが、ユーザーのモバイル装置のビジュアルデータストリーミング機能を使用して、VRまたはAR装置にライブビジュアルストリーミングを提供するように構成される、条項1~6のいずれかに記載のシステム。
条項8:
回路が、RC車両への手動インターフェイスと通信するようにさらに構成される、条項1~7のいずれかに記載のシステム。
回路が、RC車両への手動インターフェイスと通信するようにさらに構成される、条項1~7のいずれかに記載のシステム。
条項9:
回路が、手動インターフェイスから受信した入力に基づき、RC車両にコマンドを送信するようにさらに構成される、条項1~8のいずれかに記載のシステム。
回路が、手動インターフェイスから受信した入力に基づき、RC車両にコマンドを送信するようにさらに構成される、条項1~8のいずれかに記載のシステム。
条項10:
回路が、ユーザーのモバイル装置から受信されたコマンドをオーバーライドするように構成されるセーフモードコンポーネントを含む、条項1~9のいずれかに記載のシステム。
回路が、ユーザーのモバイル装置から受信されたコマンドをオーバーライドするように構成されるセーフモードコンポーネントを含む、条項1~9のいずれかに記載のシステム。
条項11:
囲環境を介してラジコン(RC)車両の自動運転を提供するためのシステムであって、周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを含む、モジュール式装置と、RC車両に機械的に結合されるように構成されるベッドプレートであって、ベッドプレートが、複数のスロットを含む、ベッドプレートと、複数のスロットの第一のスロットを介してベッドプレートに機械的に結合されるように構成されるモジュール式制御回路であって、モジュール式制御回路がモジュール式装置に通信可能に結合されるように構成され、モジュール式制御回路がRC車両のハードウェアに通信可能に結合され、モジュール式装置から受信したコマンドに応答してRC車両を制御するように構成される、モジュール式制御回路と、複数のスロットの第二のスロットを介してベッドプレートに機械的に結合されるように構成されるシャーシであって、シャーシがさらに、モジュール式装置をRC車両に収容および取り外し可能に固定するように構成される、シャーシとを含む、システム。
囲環境を介してラジコン(RC)車両の自動運転を提供するためのシステムであって、周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを含む、モジュール式装置と、RC車両に機械的に結合されるように構成されるベッドプレートであって、ベッドプレートが、複数のスロットを含む、ベッドプレートと、複数のスロットの第一のスロットを介してベッドプレートに機械的に結合されるように構成されるモジュール式制御回路であって、モジュール式制御回路がモジュール式装置に通信可能に結合されるように構成され、モジュール式制御回路がRC車両のハードウェアに通信可能に結合され、モジュール式装置から受信したコマンドに応答してRC車両を制御するように構成される、モジュール式制御回路と、複数のスロットの第二のスロットを介してベッドプレートに機械的に結合されるように構成されるシャーシであって、シャーシがさらに、モジュール式装置をRC車両に収容および取り外し可能に固定するように構成される、シャーシとを含む、システム。
条項12:
モジュール式装置が、プロセッサーと、プロセッサーによって実行されるとき、プロセッサーに、センサーから信号を受信すること、センサーから受信した信号に基づき、センサーによって検出された周囲環境の特性を決定すること、周囲環境の判定された特性に少なくとも部分的に基づくコマンド信号を生成すること、および生成されたコマンド信号を制御回路に送信することであって、生成されたコマンド信号によって、制御回路に、アルゴリズムによってあらかじめ決定された様式でRC車両を自律的に操作させる、ように送信することを実行させるアルゴリズムを格納するように構成されるメモリーと、を含む、条項11に記載のシステム。
モジュール式装置が、プロセッサーと、プロセッサーによって実行されるとき、プロセッサーに、センサーから信号を受信すること、センサーから受信した信号に基づき、センサーによって検出された周囲環境の特性を決定すること、周囲環境の判定された特性に少なくとも部分的に基づくコマンド信号を生成すること、および生成されたコマンド信号を制御回路に送信することであって、生成されたコマンド信号によって、制御回路に、アルゴリズムによってあらかじめ決定された様式でRC車両を自律的に操作させる、ように送信することを実行させるアルゴリズムを格納するように構成されるメモリーと、を含む、条項11に記載のシステム。
条項13:
モジュール式装置のメモリーが、プロセッサーによって実行されるとき、プロセッサーに、センサーから第二の信号を受信すること、センサーによって検出された周囲環境の第二の特性を決定すること、およびRC車両の自動運転を中断することなく、周囲環境の判定した第二の特性に、少なくとも部分的に基づき、モジュール式装置のメモリーに格納されるアルゴリズムを自律的に修正することを実行させる仮想化層を格納するようにさらに構成される、条項11または12に記載のシステム。
モジュール式装置のメモリーが、プロセッサーによって実行されるとき、プロセッサーに、センサーから第二の信号を受信すること、センサーによって検出された周囲環境の第二の特性を決定すること、およびRC車両の自動運転を中断することなく、周囲環境の判定した第二の特性に、少なくとも部分的に基づき、モジュール式装置のメモリーに格納されるアルゴリズムを自律的に修正することを実行させる仮想化層を格納するようにさらに構成される、条項11または12に記載のシステム。
条項14:
モジュール式装置のメモリーが、プロセッサーによって実行されるとき、プロセッサーに、センサーから受信した信号に少なくとも部分的に基づき、シミュレートされた周囲環境内にシミュレートされたRC車両を生成することを実行させる、シミュレーション層を格納するようにさらに構成される、条項11~13のいずれかに記載のシステム。
モジュール式装置のメモリーが、プロセッサーによって実行されるとき、プロセッサーに、センサーから受信した信号に少なくとも部分的に基づき、シミュレートされた周囲環境内にシミュレートされたRC車両を生成することを実行させる、シミュレーション層を格納するようにさらに構成される、条項11~13のいずれかに記載のシステム。
条項15:
プロセッサーによって実行されるとき、シミュレーション層が、プロセッサーに、RC車両からテレメトリを受信することを実行させ、シミュレートされたRC車両およびシミュレートされた周囲環境の生成がさらに、RC車両から受信したテレメトリに基づく、条項11~14のいずれかに記載のシステム。
プロセッサーによって実行されるとき、シミュレーション層が、プロセッサーに、RC車両からテレメトリを受信することを実行させ、シミュレートされたRC車両およびシミュレートされた周囲環境の生成がさらに、RC車両から受信したテレメトリに基づく、条項11~14のいずれかに記載のシステム。
条項16:
テレメトリが、RC車両の6自由度の位置、RC車両の速度、RC車両の加速、およびRC車両のステアリング角、またはそれらの組み合わせのうちの少なくとも一つを含む、条項11~15のいずれかに記載のシステム。
テレメトリが、RC車両の6自由度の位置、RC車両の速度、RC車両の加速、およびRC車両のステアリング角、またはそれらの組み合わせのうちの少なくとも一つを含む、条項11~15のいずれかに記載のシステム。
条項17:
システムのユーザーによって着用されるように構成されるヘッドマウントディスプレイをさらに含み、ヘッドマウントディスプレイが、シミュレーションされた周囲環境内にシミュレーションされたRC車両を表示するように構成される、条項11~16のいずれかに記載のシステム。
システムのユーザーによって着用されるように構成されるヘッドマウントディスプレイをさらに含み、ヘッドマウントディスプレイが、シミュレーションされた周囲環境内にシミュレーションされたRC車両を表示するように構成される、条項11~16のいずれかに記載のシステム。
条項18:
周囲環境を介してラジコン(RC)車両を自律運転する方法であって、モジュール式装置をRC車両に選択的に結合することであって、モジュール式装置が、周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを含むように、結合することと、モジュール式制御回路をRC車両に選択的に結合することと、リモートコンピューター装置を介してセンサーからの信号を受信することと、リモートコンピューター装置を介して、センサーから受信した信号に基づき、センサーによって検出された周囲環境の特性を決定することと、リモートコンピューター装置を介して、周囲環境の判定された特性に少なくとも部分的に基づいたコマンド信号を生成することと、リモートコンピューター装置を介して、生成されたコマンド信号を介してモジュール式制御回路に送信することと、モジュール式制御回路を介して、受信したコマンド信号に従ってRC車両を自律的に操作させることとを含む、方法。
周囲環境を介してラジコン(RC)車両を自律運転する方法であって、モジュール式装置をRC車両に選択的に結合することであって、モジュール式装置が、周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを含むように、結合することと、モジュール式制御回路をRC車両に選択的に結合することと、リモートコンピューター装置を介してセンサーからの信号を受信することと、リモートコンピューター装置を介して、センサーから受信した信号に基づき、センサーによって検出された周囲環境の特性を決定することと、リモートコンピューター装置を介して、周囲環境の判定された特性に少なくとも部分的に基づいたコマンド信号を生成することと、リモートコンピューター装置を介して、生成されたコマンド信号を介してモジュール式制御回路に送信することと、モジュール式制御回路を介して、受信したコマンド信号に従ってRC車両を自律的に操作させることとを含む、方法。
条項19:
リモートコンピューター装置を介して、センサーから受信した信号に少なくとも部分的に基づき、シミュレートされた周囲環境内でシミュレートされたRC車両を生成することと、リモートコンピューター装置に通信可能に結合されたヘッドマウントディスプレイを介して、シミュレートされた周囲環境内にシミュレートされたRC車両を表示することとをさらに含む、条項18に記載の方法。
リモートコンピューター装置を介して、センサーから受信した信号に少なくとも部分的に基づき、シミュレートされた周囲環境内でシミュレートされたRC車両を生成することと、リモートコンピューター装置に通信可能に結合されたヘッドマウントディスプレイを介して、シミュレートされた周囲環境内にシミュレートされたRC車両を表示することとをさらに含む、条項18に記載の方法。
条項20:
リモートコンピューター装置を介して、RC車両からテレメトリを受信することと、RC車両から受信したテレメトリに少なくとも部分的に基づき、シミュレートされたRC車両およびシミュレートされた周囲環境を更新することとをさらに含む、条項18または19のいずれかに記載のシステム。
リモートコンピューター装置を介して、RC車両からテレメトリを受信することと、RC車両から受信したテレメトリに少なくとも部分的に基づき、シミュレートされたRC車両およびシミュレートされた周囲環境を更新することとをさらに含む、条項18または19のいずれかに記載のシステム。
条項21:
モジュール式装置を介して、RC車両のユーザーから手動で実装されたコマンド信号を受信することと、モジュール式装置によって実行されるプラットフォームを介して、シミュレートされた周囲環境の自律的に生成されたパラメーター特性に基づき、手動で実装されたコマンド信号を変更することとを含む、条項18~20のいずれかに記載の方法
モジュール式装置を介して、RC車両のユーザーから手動で実装されたコマンド信号を受信することと、モジュール式装置によって実行されるプラットフォームを介して、シミュレートされた周囲環境の自律的に生成されたパラメーター特性に基づき、手動で実装されたコマンド信号を変更することとを含む、条項18~20のいずれかに記載の方法
条項22:
自律的に生成されたパラメーターが、センサーから受信した信号に基づき生成され、周囲環境の決定された特性に対応する、条項18~21のいずれかに記載の方法。
自律的に生成されたパラメーターが、センサーから受信した信号に基づき生成され、周囲環境の決定された特性に対応する、条項18~21のいずれかに記載の方法。
条項21:
自律的に生成されたパラメーターが、周囲環境内に存在しないシミュレートされた周囲環境の生成された特性を含む、条項18~20のいずれかに記載の方法。
自律的に生成されたパラメーターが、周囲環境内に存在しないシミュレートされた周囲環境の生成された特性を含む、条項18~20のいずれかに記載の方法。
本明細書で言及される全ての特許、特許出願、刊行物、またはその他の開示資料は、各個々の参照がそれぞれ参照により明示的に組み込まれたかのように、その全体が参照により本明細書に組み込まれる。本明細書に参照により組み込まれると言われる全ての参照、および任意の材料、またはその一部は、本明細書に組み込まれるが、組み込まれた材料が、本開示に記載される既存の定義、記述、またはその他の開示材料と矛盾しない限りにおいてのみ、本明細書に組み込まれる。従って、および必要な範囲で、本明細書に明記される本開示は、参照により本明細書に組み込まれる任意の矛盾する材料に優先し、本開示は本出願対照に明示的に明記される。
さまざまな例示的および例示的態様が説明される。本明細書に記載された態様は、本開示のさまざまな態様のさまざまな詳細の例示的特徴を提供するものとして理解され、従って、別段の指定がない限り、可能な限り、開示された側面の一つまたは複数の機能、要素、コンポーネント、構成要素、成分、構造、モジュール、および/または側面が、本開示の範囲から逸脱することなく、開示された側面の一つまたは複数の他の特徴、要素、コンポーネント、構成要素、成分、構造、モジュール、および/または側面と、またはそれらに対して、組み合わせ、分離、交換、および/または再配置することができる。従って、当業者であれば、特許請求の範囲から逸脱することなく、例示的な態様のいずれかのさまざまな置換、改変、または組み合わせがなされ得ることを認識するであろう。さらに、当業者は、本明細書の検討時に、本開示のさまざまな態様に対する多くの等価物を認識するか、または日常的な実験のみを使用して確認することができる。従って、本開示は、さまざまな態様の説明によって限定されないが、特許請求の範囲によって限定される。
当業者は、本明細書で使用される用語、特に添付の特許請求の範囲(例えば、添付の特許請求の範囲の本体)において、一般には「オープン(open)」な用語として意図されることを認識するであろう(例えば、「含む(including)」という用語は、「含む(including)がこれに限定されない」と解釈する必要があり「持っている(having)」という用語は、「少なくとも持っている(having)」と解釈する必要があり、「含む(includes)」という用語は、「含む(includes)がこれに限定されない」と解釈する必要がある)。特定の数の特許請求の範囲の列挙が意図される場合、そのような意図は特許請求の範囲に明示的に列挙され、そのような列挙がない場合、そのような意図は存在しないことが、当業者によってさらに理解されるであろう。例えば、理解の支援として、以下の添付の特許請求の範囲は、請求項の列挙を導入するための、「少なくとも一つ」および「一つまたは複数」という導入句の使用を含有し得る。しかしながら、そのような語句の使用は、不定冠詞「a」または「an」による請求項の列挙の導入が、そのような導入される請求項の列挙を含有する任意の特定の請求項を、同じ請求項が導入句の「一つまたは複数」または「少なくとも一つ」および「a」または「an」などの不定冠詞を含むときでさえ、一つのそのような列挙のみを含む請求項に限定することを暗示するものとして解釈されるべきではなく(例えば、「a」および/または「an」は、典型的には、「少なくとも一つ」または「一つまたは複数」を意味すると解釈されるべきである)、請求項の記述を導入するために使用される定冠詞の使用についても同様である。
さらに、導入された請求項の記述の特定の数が明示的に記述される場合でも、当業者は、そのような記述が通常、少なくとも記述された数を意味すると解釈されるべきであることを認識するであろう(例えば、他の修飾語句がない「二つの記述」のあからさまな記述は、通常、少なくとも二つの記述、または二つ以上の記述を意味する。さらに、「A、B、およびCなどのうちの少なくとも一つ」に類似した慣例が使用される、そのような事例では、一般的に、そのような構造は、当業者が、慣例(例えば、「A、B、およびCのうちの少なくとも一つを有するシステム」は、限定されるものではないが、A単独、B単独、C単独、AおよびBを一緒に、AおよびCを一緒に、BおよびCを一緒に、ならびに/またはA、B、およびCを一緒に有するなどのシステムを含むであろう)を理解するであろうという意味で意図される。慣例が「A、B、またはC等のうちの少なくとも一つ」に類似している慣例が使用される、例では、一般的に、このような構造は、当業者が、本慣習(例えば、A、B、およびCの少なくとも一つを持つシステムは、A単独、B単独、C単独、AとBを一緒に、AとCを一緒に、BとCを一緒に、および/またはA、B、およびCを一緒に持つシステムを含むが、これらに限定されない)を理解するという意味で意図される。説明、特許請求の範囲、または図面のいずれにおいても、二つ以上の代替的な用語を提示する典型的な選言的な単語および/または語句は、文脈が別途指示しない限り、用語のうちの一つ、用語のうちのいずれか、または両方の用語を含む可能性を企図することが理解されるべきであることが、当業者によってさらに理解されるであろう。例えば、語句「AまたはB」は、典型的には、「A」または「B」または「AおよびB」の可能性を含むと理解される。
添付の特許請求の範囲に関して、当業者は、その中に列挙された操作が一般に任意の順序で行われてもよいことを理解するであろう。また、請求項の列挙は、配列で提示されるが、さまざまな操作は、記載されるもの以外の他の順序で行われてもよく、または同時に行われてもよいことが理解されるべきである。そのような代替的な順序付けの例としては、文脈が別途指示しない限り、重複、交互配置、中断、再順序付け、増分、予備、補足、同時、逆、または他のさまざまな順序付けが挙げられ得る。さらに、文脈が別途指示しない限り、「に応答する」、「に関連する」、または他の過去形形容詞などの用語は、一般に、そのような変形を除外することを意図していない。
「一つの態様」、「一態様」、「一例証」、「一つの例証」などへの任意の参照は、態様に関連して説明される特定の特徴、構造、または特性が、少なくとも一つの態様に含まれることを意味することに留意すべきである。従って、本明細書全体を通して、さまざまな箇所における「一つの態様では」、「一態様では」、「一例証では」、および「一つの例証では」という語句の出現は、必ずしも全てが同じ態様を参照しているわけではない。さらに、特定の特徴、構造または特性は、一つまたは複数の態様では、任意の適切な様式で組み合わせられてもよい。
本明細書で使用される場合、文脈が別途明確に指示しない限り、単数形の「a」、「an」、および「the」は、複数の参照を含む。
例えば限定されないが、最上部、最下部、左、右、下方、上方、前、後、およびそれらの変形など、本明細書で使用される方向表現は、添付図面に示される要素の配向に関連し、別段の明示的な記載がない限り、特許請求の範囲を限定するものではない。
本開示で使用される用語「約」または「およそ」は、別段の指定がない限り、当業者によって決定される特定の値に対する許容可能な誤差を意味し、これは、値がどのように測定または決定されるかに部分的に依存する。特定の態様では、用語「約」または「およそ」は、1、2、3、または4標準偏差以内を意味する。特定の態様では、用語「約」または「およそ」は、所与の値または範囲の50%、200%、105%、100%、9%、8%、7%、6%、5%、4%、3%、2%、1%、0.5%、または0.05%以内を意味する。
本明細書において、別段の示唆がない限り、全ての数値パラメーターは、前置きされるものとして理解され、全ての場合で、数値パラメーターは、パラメーターの数値を決定するために使用される基礎となる測定技法の固有変動特性を有する用語「約」によって修正されるべきである。少なくとも、および特許請求の範囲に対する等価物の原則の適用を制限する試みとしてではなく、本明細書に記載される各数値パラメーターは、少なくとも、報告された有効桁の数に照らして、および通常の丸め技法を適用することによって解釈されるべきである。
本明細書で列挙された任意の数値範囲は、列挙された範囲内に推定された全てのサブ範囲を含む。例えば、1から100の範囲は、列挙された最小値1と、列挙された最大値100との間の(境界値を含む)全てのサブ範囲、すなわち、最小値が1以上、および最大値が100以下のものを含む。また、本明細書で列挙される全ての範囲は、列挙された範囲の終点を含む。例えば、「1~100」の範囲は、終点1および100を含む。本明細書に列挙される任意の最大数的制限は、その中に仮定される全てのより低い数的制限を含むことが意図され、本明細書に列挙される任意の最小数的制限は、その中に仮定される全ての高い数的制限を含むことが意図される。従って、出願人は、特許請求の範囲を含め、明示的に列挙された範囲内に列挙されたサブ範囲を明示的に列挙するために、本明細書を修正する権利を留保する。こうした全ての範囲は、本明細書に本質的に記載される。
本明細書において言及され、かつ/または任意のアプリケーションデータシートに列挙された任意の特許出願、特許、非特許公開、またはその他の開示資料は、本明細書に参照により組み込まれ、その限りにおいて、本明細書と矛盾しない。従って、および必要な範囲で、本明細書に明示的に記載される本開示は、参照により本明細書に組み込まれる任意の矛盾する材料に優先する。参照により本明細書に組み込まれると言われるが、本明細書に明記される既存の定義、声明、またはその他の開示資料と矛盾する任意の資料またはその一部は、その組み込まれた資料と既存の開示資料との間にいかなる矛盾も生じない範囲でのみ、組み込まれる。
「含む(comprise)」(ならびに「comprises」および「comprising」などのcompriseの任意の形態)、「有する(have)」(ならびに「has」および「having」などのhaveの任意の形態)、「含む(include)」(ならびに「includes」および「including」などのincludeの任意の形態)、「含有する(contain)」(ならびに「contains」および「containing」などのcontainの任意の形態)という用語は、オープンエンドの連結動詞である。結果として、一つまたは複数の要素を「含む」、「有する」、「含む」、または「含有する」システムは、それらの一つまたは複数の要素を保有するが、それらの一つまたは複数の要素のみを保有することに限定されない。同様に、一つまたは複数の特徴を「含む」、「有する」、「含む」、または「含有する」システム、デバイス、または装置の要素は、それらの一つまたは複数の特徴を保有するが、それらの一つまたは複数の特徴のみを保有することに限定されない。
前述の詳細な説明は、ブロック図、フローチャート、および/または実施例の使用による、さまざまな形態の装置および/またはプロセスが記載される。そのようなブロック図、フローチャート、および/または実施例が一つまたは複数の機能および/または操作を含む場合、こうしたブロック図、フローチャート、および/または実施例内の各機能および/または操作は、個々のおよび/または集合的に、広範囲のハードウェア、ソフトウェア、ファームウェア、または実質的に任意の組み合わせによって実装され得ることが、当技術分野の人々によって理解されるであろう。当業者は、本明細書に開示された形態のいくつかの態様が、全体的または部分的に、一台以上のコンピューターで実行される一つまたは複数のコンピュータープログラムとして(例えば、一つまたは複数のコンピューターシステムで実行される一つまたは複数のプログラムとして)、一つまたは複数のプロセッサーで実行される一つまたは複数のプログラムとして(例えば、一つまたは複数のマイクロプロセッサーで実行される一つまたは複数のプログラムとして)、ファームウェアとして、または実質的にそれらの任意の組み合わせとして、集積回路において同等に実装され得ること、および回路を設計すること、および/またはソフトウェアおよび/またはファームウェアのコードを書くことが、本開示に照らして当業者の技術の範囲内であることを認識するであろう。さらに、当業者は、本明細書に記載される主題の機構が、さまざまな形態で一つまたは複数のプログラム製品として分配されることができ、本明細書に記載される主題の例示的な形態が、実際に分配を実施するために使用される特定のタイプの信号移送媒体にかかわらず適用されることを理解するであろう。
論理をプログラムしてさまざまな開示された態様を実施するために使用される命令は、動的ランダムアクセスメモリー(DRAM)、キャッシュ、フラッシュメモリー、または他の記憶装置など、システム内のメモリー内に記憶され得る。さらに、命令は、ネットワークを介して、または他のコンピューター可読媒体を介して配布することができる。従って、機械可読媒体は、フロッピーディスク、光ディスク、コンパクトディスク読み出し専用メモリー(CD-ROM)、光磁気ディスク、読み出し専用メモリー(ROM)、ランダムアクセスメモリー(RAM)、消去可能でプログラム可能な読み出し専用メモリー(EPROM)、電気的に消去可能でプログラム可能な読み出し専用メモリー(EEPROM)、磁気カードまたは光カード、フラッシュメモリー、または電気、光、音響、またはその他の形式の伝搬信号を介してインターネットを介して情報を送信する際に使用される有形の機械可読ストレージ(例えば、搬送波、赤外線信号、デジタル信号など)を含むが、これらに限定されない、機械(例えば、コンピューター)によって読み取り可能な形式で情報を格納または送信するための任意のメカニズムを含み得る。従って、非一時的コンピューター可読媒体は、電子命令または情報を、機械(例えば、コンピューター)によって可読な形態で保存または伝送するのに適した、任意のタイプの有形の機械可読媒体を含む。
本明細書の任意の態様で使用されるように、「制御回路」という用語は、例えば、ハードワイヤド回路、プログラム可能な回路(例えば、一つまたは複数の個々の命令処理コア、処理ユニット、プロセッサー、マイクロコントローラー、マイクロコントローラーユニット、コントローラー、デジタル信号プロセッサー(DSP)、プログラム可能なロジックデバイス(PLD)、プログラム可能なロジックアレイ(PLA)、またはフィールドプログラム可能なゲートアレイ(FPGA)を含む、コンピュータープロセッサー)、状態マシン回路、プログラム可能な回路によって実行される命令を格納するファームウェア、およびそれらの任意の組み合わせを指し得る。制御回路は、集合的にまたは個別に、より大きなシステム、例えば、集積回路(IC)、特定用途向け集積回路(ASIC)、システムオンチップ(SoC)、デスクトップコンピューター、ラップトップコンピューター、タブレットコンピューター、サーバー、スマートフォンなどの一部を形成する回路として具体化され得る。従って、本明細書で使用される「制御回路」には、少なくとも一つの個別の電気回路を有する電気回路と、少なくとも一つの集積回路を有する電気回路と、少なくとも一つの特定用途向け集積回路を有する電気回路と、コンピュータープログラムによって構成された汎用コンピューター装置(例えば、プロセスを少なくとも部分的に実行するコンピュータープログラムによって構成された汎用コンピューター、および/または本明細書に記載のデバイス、またはプロセスを少なくとも部分的に実行するコンピュータープログラムによって構成されたマイクロプロセッサー、および/または本明細書に記載のデバイス)を形成する電気回路と、メモリー装置を形成する電気回路(例えば、ランダムアクセスメモリーの形式)と、および/または通信装置を形成する電気回路(例えば、モデム、通信スイッチ、光電気機器)とが含まれるが、これらに限定されない。当業者であれば、本明細書に記載される主題が、アナログもしくはデジタルの様式またはそれらのいくつかの組み合わせで実施され得ることを認識するであろう。
本明細書の任意の態様で使用される場合、用語「ロジック」は、前述の操作のいずれかを行うように構成されるアプリケーション、ソフトウェア、ファームウェア、および/または回路を指し得る。ソフトウェアは、ソフトウェアパッケージ、コード、命令、命令セット、および/または非一時的コンピューター可読記憶媒体に記録されたデータとして具現化され得る。ファームウェアは、メモリー装置内でハードコードされた(例えば、不揮発性)コード、命令、または命令セット、および/またはデータとして具現化され得る。
本明細書の任意の態様で使用される場合、用語「構成要素」、「システム」、「モジュール」などは、コンピューター関連エンティティ、つまり、ハードウェア、ハードウェアとソフトウェアの組み合わせ、ソフトウェア、または実行中のソフトウェアのいずれかを指すことができる。
本明細書の任意の態様で使用される場合、「アルゴリズム」は、所望の結果をもたらすステップの自己整合的な順序を指し、ここで「ステップ」は、必ずしも、記憶、移動、結合、比較、およびその他操作されることができる電気または磁気信号の形態を取る必要はないが、物理的量および/または論理状態の操作を指す。これらの信号をビット、値、要素、記号、文字、用語、数字などと呼ぶのが一般的である。これらおよび類似の用語は、適切な物理量と関連付けられてもよく、これらの量および/または状態に適用される単に便利なラベルである。
特に明記されていない限り、説明すること、「加工するprocessing」「計算するcomputing」、「計算するcalculating」「決定するdetermining」「提示するpresenting」「表示displaying」または類似のもの言葉をして、本明細書で論ずることは、一つまたは複数のメモリー(例えば、揮発性メモリー、不揮発性メモリー、またはその任意の適切な組み合わせ)、レジスター、または情報を受信、格納、送信、または表示する他の機械部品内の物理的(例えば、電子、磁気、または光学的)な量として表されるデータを操作し、または変形する、機械1100(例えば、コンピューター)の行動をまたはプロセスを指す。さらに、別段の記載がない限り、特許文書に共通するとおり、本明細書において用語「a」または「an」は、一つまたは複数の例を含むために使用される。最後に、本明細書で使用される場合、特に明記されない限り、結合の「または」は非排他的な「または」を指す。
本開示は例示的であり、限定するものではない。さらなる修正は、本開示の観点で当業者には明らかであり、添付の特許請求の範囲に入ることが意図される。
Claims (23)
- ユーザーのモバイル装置を使用してラジコン(RC)車両の自動運転を提供するためのシステムであって、前記モバイル装置が少なくとも一つのセンサーおよび通信インターフェイスを含み、前記システムが
前記RC車両上に取り付けられるように構成されるシャーシであって、前記ユーザーのスマートフォンを運ぶように構成されるスロットを含む、前記シャーシと、
前記RC車両に通信的に連結し、前記RC車両を操作させるために信号を送信するように構成される回路と、を含み、
前記回路が、前記ユーザーのモバイル装置の前記通信インターフェイスに接続するためのインターフェイスを含み、前記RC車両にルーティングされ得る、前記ユーザーのモバイル装置からコマンドを受信するように構成される、システム。 - 前記回路が、前記少なくとも一つのセンサーを利用する前記ユーザーのモバイル装置からコマンドを受信するようにさらに構成される、請求項1に記載のシステム。
- 前記RC車両を制御するための人工知能(AI)をプログラミングするためのプラットフォームを提供するように構成されるソフトウェアまたはファームウェアで表される仮想化層をさらに含む、請求項1に記載のシステム。
- 前記仮想化層が、シミュレーター抽象化モジュール、自動運転抽象化モジュール、および車両ハードウェア抽象化モジュールを含む、請求項3に記載のシステム。
- 前記仮想化層が、前記シミュレーター抽象化モジュールに接続されるソフトウェアシミュレーターを介してAIをプログラミングするための前記プラットフォームを提供するように構成され、前記ソフトウェアシミュレーターが、前記ユーザーのモバイル装置とは別個のユーザー装置上で操作される、請求項4に記載のシステム。
- 前記ユーザーが、前記RC車両が移動している時に前記モバイル装置が前記RC車両に取り付けられる間に前記ユーザーのモバイル装置のカメラビューを見ることができるように、前記ユーザーが着用できる仮想現実(VR)または拡張現実(AR)装置へのインターフェイスをさらに含む、請求項1に記載のシステム。
- 前記VRまたはARインターフェイスが、前記ユーザーのモバイル装置のビジュアルデータストリーミング機能を使用して、前記VRまたはAR装置にライブビジュアルストリーミングを提供するように構成される、請求項6に記載のシステム。
- 前記回路がさらに、前記RC車両への手動インターフェイスと通信するように構成される、請求項1に記載のシステム。
- 前記回路が、前記手動インターフェイスから受信した入力に基づき、前記RC車両にコマンドを送信するようにさらに構成される、請求項7に記載のシステム。
- 前記回路が、前記ユーザーのモバイル装置から受信されたコマンドをオーバーライドするように構成されるセーフモードコンポーネントを含む、請求項1に記載のシステム。
- 周囲環境を介してラジコン(RC)車両の自動運転を提供するためのシステムであって、前記システムが、
前記周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを含む、モジュール式装置と、
前記RC車両に機械的に結合されるように構成されるベッドプレートであって、複数のスロットを含む、ベッドプレートと、
前記複数のスロットの第一のスロットを介して前記ベッドプレートに機械的に結合されるように構成されるモジュール式制御回路であって、前記モジュール式制御回路が前記モジュール式装置に通信可能に結合されるように構成され、前記モジュール式制御回路が前記RC車両のハードウェアに通信可能に結合され、前記モジュール式装置から受信したコマンドに応答して前記RC車両を制御するように構成される、モジュール式制御回路と、
前記複数のスロットの第二のスロットを介して前記ベッドプレートに機械的に結合されるように構成されるシャーシであって、前記シャーシがさらに、前記モジュール式装置を前記RC車両に収容および取り外し可能に固定するように構成される、シャーシと、を含む、システム。 - 前記モジュール式装置が、
プロセッサーと、
前記プロセッサーによって実行されるとき、前記プロセッサーに、
前記センサーから信号を受信すること、
前記センサーから受信した前記信号に基づき、前記センサーによって検出された前記周囲環境の特性を決定すること、
前記周囲環境の前記判定された特性に少なくとも部分的に基づくコマンド信号を生成すること、および
前記生成されたコマンド信号を前記制御回路に送信すること、
を実行させるアルゴリズムを格納するように構成されるメモリーと、を含み、
前記生成されたコマンド信号は、前記制御回路に、前記アルゴリズムによってあらかじめ決定された様式で前記RC車両を自律的に操作させる、請求項13に記載のシステム。 - 前記モジュール式装置の前記メモリーが、前記プロセッサーによって実行されるとき、前記プロセッサーに、
前記センサーから第二の信号を受信すること、
前記センサーによって検出された前記周囲環境の第二の特性を決定すること、
前記RC車両の前記自動運転を中断することなく、前記周囲環境の前記判定した前記第二の特性に、少なくとも部分的に基づき、前記モジュール式装置の前記メモリーに格納される前記アルゴリズムを自律的に修正すること、
を実行させる仮想化層を格納するようにさらに構成される、請求項12に記載のシステム。 - 前記モジュール式装置の前記メモリーが、前記プロセッサーによって実行されるとき、前記プロセッサーに、
前記センサーから受信した前記信号に少なくとも部分的に基づき、シミュレートされた周囲環境内にシミュレートされたRC車両を生成すること、
を実行させるシミュレーション層を格納するようにさらに構成される、請求項12に記載のシステム。 - 前記プロセッサーによって実行されるとき、前記シミュレーション層が、前記プロセッサーに、前記RC車両からテレメトリを受信することを実行させ、前記シミュレートされたRC車両および前記シミュレートされた周囲環境の前記生成がさらに、前記RC車両から受信した前記テレメトリに基づく、請求項14に記載のシステム。
- 前記テレメトリが、前記RC車両の六自由度の位置、前記RC車両の速度、前記RC車両の加速、および前記RC車両のステアリング角、またはそれらの組み合わせのうちの少なくとも一つを含む、請求項15に記載のシステム。
- 前記システムのユーザーによって着用されるように構成されるヘッドマウントディスプレイをさらに含み、前記ヘッドマウントディスプレイが、前記シミュレーションされた周囲環境内に前記シミュレーションされたRC車両を表示するように構成される、請求項15に記載のシステム。
- 周囲環境を介してラジコン(RC)車両を自律運転する方法であって、前記方法が、
モジュール式装置を前記RC車両に選択的に結合することであって、前記モジュール式装置が、前記周囲環境の特性に関連する信号を生成するように構成される少なくとも一つのセンサーを含むように、結合することと、
モジュール式制御回路を前記RC車両に選択的に結合することと、
リモートコンピューター装置を介して前記センサーからの信号を受信することと、
前記リモートコンピューター装置を介して、前記センサーから受信した前記信号に基づき、前記センサーによって検出された前記周囲環境の特性を決定することと、
前記リモートコンピューター装置を介して、前記周囲環境の前記判定された特性に少なくとも部分的に基づいたコマンド信号を生成することと、
前記リモートコンピューター装置を介して、前記生成されたコマンド信号を介して前記モジュール式制御回路に送信することと、
前記モジュール式制御回路を介して、前記受信したコマンド信号に従って前記RC車両を自律的に操作させることと、を含む、方法。 - 前記リモートコンピューター装置を介して、前記センサーから受信した前記信号に少なくとも部分的に基づき、シミュレートされた周囲環境内でシミュレートされたRC車両を生成することと、
前記リモートコンピューター装置に通信可能に結合されたヘッドマウントディスプレイを介して、前記シミュレートされた周囲環境内に前記シミュレートされたRC車両を表示することと、をさらに含む、請求項18に記載の方法。 - 前記リモートコンピューター装置を介して、前記RC車両からテレメトリを受信することと、
前記RC車両から受信した前記テレメトリに少なくとも部分的に基づき、前記シミュレートされたRC車両および前記シミュレートされた周囲環境を更新することと、をさらに含む、請求項19に記載の方法。 - 前記モジュール式装置を介して、前記RC車両のユーザーから手動で実装されたコマンド信号を受信することと、
前記モジュール式装置によって実行されるプラットフォームを介して、前記シミュレートされた周囲環境の自律的に生成されたパラメーター特性に基づき、前記手動で実装されたコマンド信号を変更することと、をさらに含む、請求項19に記載の方法。 - 前記自律的に生成されたパラメーターが、前記センサーから受信した前記信号に基づき生成され、前記周囲環境の前記決定された特性に対応する、請求項21に記載の方法。
- 前記自律的に生成されたパラメーターが、前記周囲環境内に存在しない前記シミュレートされた周囲環境の生成された特性を含む、請求項21に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202163148040P | 2021-02-10 | 2021-02-10 | |
US63/148,040 | 2021-02-10 | ||
PCT/US2022/070586 WO2022174230A1 (en) | 2021-02-10 | 2022-02-09 | Devices, systems, and methods for operating intelligent vehicles using separate devices |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024509342A true JP2024509342A (ja) | 2024-03-01 |
Family
ID=82837256
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023535547A Pending JP2024509342A (ja) | 2021-02-10 | 2022-02-09 | 別個の装置を使用してインテリジェント車両を操作するための装置、システム、および方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11947350B2 (ja) |
EP (1) | EP4292069A4 (ja) |
JP (1) | JP2024509342A (ja) |
CN (1) | CN116583335A (ja) |
WO (1) | WO2022174230A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2024509342A (ja) | 2021-02-10 | 2024-03-01 | インテリジェント レーシング インコーポレイテッド | 別個の装置を使用してインテリジェント車両を操作するための装置、システム、および方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6438456B1 (en) * | 2001-04-24 | 2002-08-20 | Sandia Corporation | Portable control device for networked mobile robots |
US8600432B2 (en) * | 2010-07-16 | 2013-12-03 | Ari Krupnik | Methods and apparatus for leveraging a mobile phone or mobile computing device for use in controlling model vehicles |
WO2013169312A1 (en) * | 2012-01-13 | 2013-11-14 | Robotex Inc. | Robotic system and methods of use |
US20130324004A1 (en) * | 2012-05-30 | 2013-12-05 | Robert Schwartz | Remote-controlled toy with bumper sensor |
US9518821B2 (en) * | 2012-08-02 | 2016-12-13 | Benjamin Malay | Vehicle control system |
US20170300051A1 (en) * | 2013-02-06 | 2017-10-19 | Dylan T X Zhou | Amphibious vertical take off and landing unmanned device with AI data processing apparatus |
US8903568B1 (en) * | 2013-07-31 | 2014-12-02 | SZ DJI Technology Co., Ltd | Remote control method and terminal |
US20150096500A1 (en) * | 2013-10-03 | 2015-04-09 | Steven Quinn McCain | Mobile Electronic Call and Decoy Device |
US10537817B2 (en) | 2014-02-12 | 2020-01-21 | InRoad Toys, LLC | Construction system for creating autonomous control system stimuli and a complete deterministic operational environment for mobile agents using printed adhesive tape and other accessories |
CN115855022A (zh) * | 2017-04-07 | 2023-03-28 | 辉达公司 | 使用深度神经网络执行自主路径导航 |
US11654552B2 (en) * | 2019-07-29 | 2023-05-23 | TruPhysics GmbH | Backup control based continuous training of robots |
JP2024509342A (ja) | 2021-02-10 | 2024-03-01 | インテリジェント レーシング インコーポレイテッド | 別個の装置を使用してインテリジェント車両を操作するための装置、システム、および方法 |
-
2022
- 2022-02-09 JP JP2023535547A patent/JP2024509342A/ja active Pending
- 2022-02-09 WO PCT/US2022/070586 patent/WO2022174230A1/en active Application Filing
- 2022-02-09 CN CN202280007919.6A patent/CN116583335A/zh active Pending
- 2022-02-09 US US18/264,518 patent/US11947350B2/en active Active
- 2022-02-09 EP EP22753546.5A patent/EP4292069A4/en active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4292069A4 (en) | 2024-06-12 |
EP4292069A1 (en) | 2023-12-20 |
US11947350B2 (en) | 2024-04-02 |
WO2022174230A1 (en) | 2022-08-18 |
US20240045421A1 (en) | 2024-02-08 |
CN116583335A (zh) | 2023-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10874952B2 (en) | Virtual representation of physical agent | |
US10134299B2 (en) | Systems and methods for flight simulation | |
US9067145B2 (en) | Virtual representations of physical agents | |
KR102292522B1 (ko) | 물리 엔진을 이용한 물리적 장난감 제어 | |
US8190295B1 (en) | Apparatus and method for modifying the operation of a robotic vehicle in a real environment, to emulate the operation of the robotic vehicle operating in a mixed reality environment | |
WO2018180143A1 (ja) | 情報処理装置及び情報処理方法、コンピュータ・プログラム、並びにプログラム製造方法 | |
KR101793189B1 (ko) | 하나 이상의 모바일 컴퓨팅 디바이스들을 갖는 로봇 시스템의 통합 | |
KR102244988B1 (ko) | 군집 비행을 위한 복수 개의 무인항공기의 군집 비행 제어 시스템 및 방법 | |
CN110901656B (zh) | 用于自动驾驶车辆控制的实验设计方法和系统 | |
CN109891347A (zh) | 用于模拟可移动物体状态的方法和系统 | |
JP7110884B2 (ja) | 学習装置、制御装置、学習方法、及び学習プログラム | |
KR101437747B1 (ko) | 영상 처리 장치 및 방법 | |
JP2022510450A (ja) | 自動車の遠隔制御におけるユーザの支援方法、コンピュータプログラム製品、遠隔制御装置および自動車の運転支援システム | |
Bu et al. | General simulation platform for vision based UAV testing | |
JP2021522943A (ja) | 動的乗り物プロファイルのためのシステム及び方法 | |
JP2024509342A (ja) | 別個の装置を使用してインテリジェント車両を操作するための装置、システム、および方法 | |
CN109935132A (zh) | 飞行模拟器 | |
CN113711162A (zh) | 用于混合现实应用中机器人交互的系统和方法 | |
JP7513030B2 (ja) | 情報処理装置、情報処理方法、情報処理プログラム及び制御装置 | |
WO2018180148A1 (ja) | 情報処理装置及び情報処理方法、コンピュータ・プログラム、並びにプログラム製造方法 | |
CN105139619A (zh) | 一套可以模拟遥控运动设备运动姿态的系统 | |
CN116009583A (zh) | 基于纯粹视觉的分布式无人机协同运动控制方法和装置 | |
KR20150051715A (ko) | 실시간 영상 재생 장치 및 그 방법 | |
WO2020042062A1 (zh) | 地面遥控机器人的漂移控制方法、装置及地面遥控机器人 | |
Monzon | Developing a ROS Enabled Full Autonomous Quadrotor |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230821 |