JP2023068493A - Mobile projection device, mobile projection system, control method for mobile projection device, and control program - Google Patents
Mobile projection device, mobile projection system, control method for mobile projection device, and control program Download PDFInfo
- Publication number
- JP2023068493A JP2023068493A JP2021179645A JP2021179645A JP2023068493A JP 2023068493 A JP2023068493 A JP 2023068493A JP 2021179645 A JP2021179645 A JP 2021179645A JP 2021179645 A JP2021179645 A JP 2021179645A JP 2023068493 A JP2023068493 A JP 2023068493A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- projection
- light
- target person
- mobile
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 19
- 238000003384 imaging method Methods 0.000 claims abstract description 71
- 238000001514 detection method Methods 0.000 claims abstract description 17
- 230000003287 optical effect Effects 0.000 claims description 17
- 230000009429 distress Effects 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 6
- 238000010191 image analysis Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical group C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
Description
本発明は、移動式投射装置、移動式投射システム、移動式投射装置の制御方法、及び、制御プログラムに関する。 The present invention relates to a mobile projection device, a mobile projection system, a control method for a mobile projection device, and a control program.
近年では、例えば山岳地帯での遭難者や災害発生時の避難者等に対して、ドローン等の飛行体から避難経路等の情報を提供するシステムの開発が進められている。 In recent years, for example, systems have been developed for providing information such as evacuation routes from aircraft such as drones to victims in mountainous areas and evacuees at the time of a disaster.
関連する技術は、例えば特許文献1に開示されている。特許文献1に開示された無人飛行体は、自機の位置を検出する自機位置検出部と、自機の飛行を制御するフライトコントロール部と、誘導経路に沿って走行する無人搬送車のための誘導経路の画像を路面に投影する投影部と、を備える。 A related technique is disclosed in Patent Document 1, for example. The unmanned aerial vehicle disclosed in Patent Document 1 includes a self-position detection unit that detects the position of the self-aircraft, a flight control unit that controls the flight of the self-aircraft, and an unmanned guided vehicle that travels along a guidance route. and a projection unit that projects the image of the guidance route onto the road surface.
特許文献1では、無人飛行体が、自機の位置情報に応じた無人搬送車用の誘導経路を路面に投影した後、無人搬送車が、無人飛行体によって路面に投影された誘導経路を自ら検出して、検出した誘導経路に沿って走行している。即ち、無人飛行体は、無人搬送車が誘導経路を検出できる程度に近くを走行しているか否かに関わらず、自機の位置情報に応じた無人搬送者用の誘導経路を路面に投影している。そのため、特許文献1の構成では、遭難者や避難者等の対象人物が視認可能なエリアに、避難経路等の情報を適切に投影することができない可能性がある。 In Patent Document 1, after an unmanned flying object projects a guidance route for an unmanned guided vehicle according to its own position information onto a road surface, the unmanned flying vehicle projects the guidance route projected onto the road surface by the unmanned flying object. It detects and travels along the detected guidance route. That is, the unmanned flying object projects a guidance route for the unmanned carrier on the road surface according to the position information of the unmanned carrier, regardless of whether or not the unmanned guided vehicle is traveling close enough to detect the guidance route. ing. Therefore, with the configuration of Patent Literature 1, there is a possibility that information such as an evacuation route cannot be appropriately projected in an area that can be visually recognized by a target person such as a victim or an evacuee.
本開示の目的の一つは、上述した課題を解決する移動式投射装置、移動式投射システム、移動式投射装置の制御方法、及び、制御プログラムを提供することにある。 One object of the present disclosure is to provide a mobile projection device, a mobile projection system, a mobile projection device control method, and a control program that solve the above-described problems.
一実施の形態によれば、移動式投射装置は、自装置の位置情報を取得する位置情報取得部と、自装置の向きを検出する方向検出部と、自装置の周辺を撮像する撮像部と、前記位置情報取得部によって取得される位置情報を基に、指定されたエリアに自装置を移動させる移動制御部と、光を投射する投射部と、前記指定されたエリアにおける前記撮像部の撮像画像から対象人物が特定された場合、前記投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、前記方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させる投射制御部と、を備える。 According to one embodiment, a mobile projection device includes a position information acquisition unit that acquires position information of the device, a direction detection unit that detects the orientation of the device, and an imaging unit that captures an image of the surroundings of the device. a movement control unit for moving the device to a designated area based on the position information acquired by the position information acquisition unit; a projection unit for projecting light; When the target person is identified from the image, using the projection unit, based on the position information of the device acquired by the position information acquisition unit and the orientation of the device detected by the direction detection unit and a projection control unit for projecting the determined pattern of light onto an area visible to the target person.
一実施の形態によれば、移動式投射装置の制御方法は、位置情報取得部によって取得される自装置の位置情報を基に、指定されたエリアに自装置を移動させるステップと、前記指定されたエリアにおいて、撮像部によって自装置の周辺を撮像するステップと、前記撮像部の撮像画像から対象人物が特定された場合、投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させるステップと、を備える。 According to one embodiment, a control method for a mobile projection device includes the steps of: moving the device to a designated area based on position information of the device acquired by a position information acquisition unit; a step of capturing an image of the surroundings of the device by an imaging unit in the area obtained by the imaging unit; and projecting light of a pattern determined based on the position information and the orientation of the device detected by the direction detection unit onto an area visible to the target person.
一実施の形態によれば、制御プログラムは、位置情報取得部によって取得される自装置の位置情報を基に、指定されたエリアに自装置を移動させる処理と、前記指定されたエリアにおいて、撮像部によって自装置の周辺を撮像する処理と、前記撮像部の撮像画像から対象人物が特定された場合、投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させる処理と、をコンピュータに実行させる。 According to one embodiment, the control program moves the device to a specified area based on the position information of the device acquired by the position information acquisition unit; When a target person is identified from the captured image of the image pickup unit, the position information of the own device acquired by the position information acquisition unit using the projection unit, and the direction A computer is caused to execute a process of projecting light of a pattern determined based on the orientation of the device detected by the detection unit onto an area visible to the target person.
前記一実施の形態によれば、遭難者等の対象人物に対して、自装置の位置情報等に応じた標示内容を表すパターンの光を適切に投射することが可能な移動式投射装置、移動式投射システム、移動式投射装置の制御方法、及び、制御プログラムを提供することができる。 According to the above-described embodiment, a mobile projection device capable of appropriately projecting a pattern of light representing indication content according to the position information of the device to a target person such as a victim. A projection system, a control method for a mobile projection device, and a control program can be provided.
以下、図面を参照しつつ、実施の形態について説明する。なお、図面は簡略的なものであるから、この図面の記載を根拠として実施の形態の技術的範囲を狭く解釈してはならない。また、同一の要素には、同一の符号を付し、重複する説明は省略する。 Hereinafter, embodiments will be described with reference to the drawings. Since the drawings are simplified, the technical scope of the embodiments should not be narrowly interpreted based on the description of the drawings. Also, the same elements are denoted by the same reference numerals, and overlapping descriptions are omitted.
以下の実施の形態においては便宜上その必要があるときは、複数のセクションまたは実施の形態に分割して説明する。ただし、特に明示した場合を除き、それらはお互いに無関係なものではなく、一方は他方の一部または全部の変形例、応用例、詳細説明、補足説明等の関係にある。また、以下の実施の形態において、要素の数等(個数、数値、量、範囲等を含む)に言及する場合、特に明示した場合および原理的に明らかに特定の数に限定される場合等を除き、その特定の数に限定されるものではなく、特定の数以上でも以下でもよい。 For the sake of convenience, the following embodiments will be divided into a plurality of sections or embodiments when necessary. However, unless otherwise specified, they are not unrelated to each other, and one is a part or all of the other in terms of modified examples, application examples, detailed explanations, supplementary explanations, and the like. In addition, in the following embodiments, when referring to the number of elements (including the number, numerical value, amount, range, etc.), when it is particularly specified, when it is clearly limited to a specific number in principle, etc. Except, it is not limited to the specific number, and may be more or less than the specific number.
さらに、以下の実施の形態において、その構成要素(動作ステップ等も含む)は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではない。同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは、特に明示した場合および原理的に明らかにそうでないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。このことは、上記数等(個数、数値、量、範囲等を含む)についても同様である。 Furthermore, in the following embodiments, the constituent elements (including operation steps and the like) are not necessarily essential, unless otherwise specified or clearly considered essential in principle. Similarly, in the following embodiments, when referring to the shape, positional relationship, etc. of components, etc., unless otherwise specified or in principle clearly considered otherwise, the shape is substantially the same. It shall include things that are similar or similar to, etc. This also applies to the above numbers and the like (including numbers, numerical values, amounts, ranges, etc.).
<実施の形態1>
図1は、実施の形態1にかかる移動式投射システム1の構成例を示すブロック図である。移動式投射システム1に設けられた移動式投射装置は、撮像部の撮像画像から対象人物(捜索中の遭難者等)を特定した場合に、管理装置によって指定された種類の標示内容(例えば避難方向を示す矢印)、を表したパターンの光を、自装置の位置情報及び向きに基づいて調整したうえで、当該対象人物が視認可能なエリアに投射する。換言すると、この移動式投射装置は、撮像部の撮像画像から対象人物(捜索中の遭難者等)を特定した場合に、自装置の位置情報及び向きに基づいて決定された標示内容、を表したパターンの光を、当該対象人物が視認可能なエリアに投射する。それにより、対象人物は、例えば、投射された光のパターンによって表される矢印の方向に沿って移動することで、遭難エリアから抜け出して目的位置にたどり着くことができる。なお、レーザは目に入ると危険なので、頭上のドローンを見上げた時にレーザが目に入ることの無いように、人体を避けて投射されることが望ましい。以下、具体的に説明する。
<Embodiment 1>
FIG. 1 is a block diagram showing a configuration example of a mobile projection system 1 according to a first embodiment. When the mobile projection device provided in the mobile projection system 1 identifies a target person (such as a victim being searched for) from the captured image of the imaging unit, the type of display content (for example, evacuation An arrow indicating a direction) is adjusted based on the position information and orientation of the device, and projected onto an area visible to the target person. In other words, when the mobile projection device identifies a target person (such as a victim being searched for) from the captured image of the imaging unit, the display content determined based on the position information and orientation of the device itself is displayed. The patterned light is projected onto an area visible to the target person. Thereby, the target person can get out of the distress area and reach the target position, for example, by moving along the direction of the arrow represented by the projected light pattern. Lasers are dangerous if they get into your eyes, so it is desirable that the laser is projected while avoiding the human body so that the lasers do not get into your eyes when you look up at the drone above your head. A specific description will be given below.
図1に示すように、移動式投射システム1は、移動式投射装置11と、管理装置12と、ネットワーク50と、を少なくとも備える。移動式投射装置11と管理装置12とは、互いにネットワーク50を介して通信可能に構成されている。なお、管理装置12は、移動式投射装置11に組み込まれていてもよい。
As shown in FIG. 1 , the mobile projection system 1 includes at least a
移動式投射装置11は、例えばドローン等の飛行体であって、管理装置12からの指示を受けて指定されたエリアの上空に移動可能に構成されている。なお、本実施の形態では、移動式投射装置11が、ドローン等の飛行体である場合を例に説明するが、これに限られず、例えば、管理装置12からの指示に応じて地面を移動可能な車両や移動ロボットなどであってもよい。
The
図2は、移動式投射装置11の構成例を示すブロック図である。
図2に示すように、移動式投射装置11は、位置情報取得部111と、方向検出部112と、制御部113と、撮像部114と、投射部115と、を少なくとも備える。以下、移動式投射装置11と、単に自装置とも称す。
FIG. 2 is a block diagram showing a configuration example of the
As shown in FIG. 2 , the
位置情報取得部111は、例えばGPS(Global Positioning System)センサであって、移動式投射装置11の位置情報を取得可能に構成されている。
The position
方向検出部112は、例えば地磁気センサやジャイロセンサ等の方位センサであって、移動式投射装置11の向きを検出可能に構成されている。
The
撮像部114は、所謂カメラであって、移動式投射装置11の周辺を撮像する。本実施の形態では、移動式投射装置11がドローン等の飛行体であるため、撮像部114は、飛行中の移動式投射装置11から下方のエリアを撮像する。なお、撮像部114は、夜間でも撮像可能な赤外線カメラであってもよい。
The
投射部115は、指定された標示内容、を表したパターンの光を、指定されたエリアに投射する。投射部115の詳細については後述する。
The
制御部113は、管理装置12からの指示に従って移動式投射装置11の各機能を制御する。具体的には、制御部113は、移動制御部1131と、投射制御部1132と、を少なくとも備える。
The
移動制御部1131は、管理装置12からの指示に従って移動式投射装置11の移動を制御する。具体的には、移動制御部1131は、位置情報取得部111によって取得される移動式投射装置11の位置情報を参照しながら、管理装置12によって指定されたエリアの上空まで移動式投射装置11を飛行させる。ここで、指定されたエリアとは、例えば、山岳地帯等で遭難した遭難者の周辺エリア(遭難エリア)や、災害時に避難している避難者の周辺エリア(避難エリア)などである。このようなエリアの情報は、例えば、管理者(ユーザ)の操作によって管理装置12に入力される。
The
投射制御部1132は、管理装置12からの指示に従って投射部115による光の投射を制御する。
The
具体的には、投射制御部1132は、撮像部114の撮像画像を画像解析することによって対象人物(例えば捜索中の遭難者)が特定された場合、管理装置12によって指定された種類の標示内容、を表したパターンの光を、移動式投射装置11の位置情報及び向きに基づいて調整したうえで、投射部115を用いて、当該対象人物が視認可能なエリアに投射させる。ここで、対象人物が視認可能なエリアとは、対象人物が投射光を視認できる程度に対象人物に近いエリア、且つ、対象人物の死角にならないエリアであって、投射面は滑らかな地面又は壁が好ましい。
Specifically, when a target person (for example, a victim being searched for) is identified by image analysis of the image captured by the
なお、撮像部114の撮像画像の画像解析は、投射制御部1132によって行われてもよいし、移動式投射装置11に別途設けられた画像解析部(不図示)によって行われてもよい。
The image analysis of the image captured by the
例えば、投射制御部1132は、移動式投射装置11の位置情報及び向きに基づいて決定された、対象人物が進むべき移動方向を示す矢印、を表したパターンの光を、投射部115を用いて、当該対象人物が視認可能なエリアに投射させる。
For example, the
より具体的には、投射制御部1132は、データベース(不図示)に格納された地図情報と、移動式投射装置11の位置情報及び向きと、に基づいて、対象人物の現在位置から目的位置までの移動経路(例えば遭難者の遭難経路)を決定したうえで、決定した移動経路に沿った移動方向を示す矢印、を表したパターンの光を、投射部115を用いて、当該対象人物が視認可能なエリアに投射させる。
More specifically, the
なお、投射制御部1132は、撮像部114の撮像画像から対象人物の周辺エリアにおいて障害物が特定された場合、当該障害物を回避するような移動方向を示す矢印、を表したパターンの光を、投射部115を用いて、当該対象人物が視認可能なエリアに投射させてもよい。ここで、障害物とは、遭難者の移動を妨げる物体、例えば、川、岩、崖、密集した草木などである。
Note that when an obstacle is specified in the area around the target person from the captured image of the
また、投射制御部1132は、夜間等において、撮像部114による撮像範囲の照度が所定の照度よりも低い場合(即ち、撮像部114による撮像範囲の明るさが所定の明るさよりも暗い場合)、周囲を照らすライト(図示せず)を用いて、撮像部114による撮像範囲の一部又は全部を含む範囲を照らしてもよい。それにより、撮像部114による撮像範囲の照度が所定の照度以上になるため、撮像部114により撮像される被写体(遭難者及びその周辺環境)の特定が可能となる。
In addition, the
図3は、投射部115の具体的な構成例を示すブロック図である。また、図4は、移動式投射装置11のうち投射部115を模式的に示した図である。なお、図4には、移動式投射装置11の動力源である電源116も示されている。
FIG. 3 is a block diagram showing a specific configuration example of the
投射部115は、光源1151と、光空間位相変調器1152と、光学系1153と、を少なくとも備える。光源1151は、位相がそろったコヒーレントな光であって、可視領域の特定波長の光を出射する。例えば、光源1151は、可視領域のレーザ光を出射する。それにより、夜間はもちろんのこと、日中でも視認可能となる。光源1151から出射された光は、光空間位相変調器1152に入射される。光空間位相変調器1152は、光源から出射された光を、投射制御部1132の指示に従ったパターンとなるように変調する。光学系1153は、レンズ、反射鏡、プリズム等の組み合わせによって構成され、光空間位相変調器1152によって変調された光を対象人物が視認可能なエリアに投射する。ここで、投射部115は、光空間位相変調器1152の変調度合いを調整することにより、投射される光のパターンを変更することができる。
The
(移動式投射装置11の動作)
続いて、図5~図8を用いて、移動式投射システム1における移動式投射装置11の動作について説明する。図5は、移動式投射装置11の動作を示すフローチャートである。図6~図8は、移動式投射装置11の動作を説明するための概念図である。なお、本実施の形態では、対象人物である捜索中の遭難者TGが、山岳地帯の遭難エリアA1において遭難している場合を例に説明する。
(Operation of mobile projection device 11)
Next, the operation of the
まず、移動式投射装置11は、管理装置12からの指示を受けて、位置情報取得部111によって取得される自装置の位置情報を参照しながら、遭難エリアA1に移動する(ステップS101→S102)。
First, the
移動式投射装置11は、遭難エリアA1の上空に到着すると、遭難エリアA1のうち、撮像部114によって未だ撮像されていない任意のエリアの上空で停止する(ステップS103)。
When the
ここで、移動式投射装置11は、撮像部114による撮像範囲の照度が所定の照度より低い場合(ステップS104のYES)、撮像部114による撮像範囲の一部又は全部を含むような投射範囲の広いパターンの光を投射する(ステップS105)。それにより、撮像部114による撮像範囲の照度が所定の照度以上になるため、撮像部114により撮像される被写体(遭難者及びその周辺環境)の特定が可能となる。なお、撮像部114による撮像範囲の照度が所定の照度以上である場合(ステップS104のNO)、光を投射する必要は無い。
Here, when the illuminance of the imaging range by the
その後、移動式投射装置11は、撮像部114による撮像を行う(ステップS106)。
After that, the
例えば、撮像部114の撮像画像から遭難者TGが特定されなかった場合(ステップS107のNO;図6参照)、移動式投射装置11は、遭難エリアA1内を移動する(ステップS108)。そして、遭難エリアA1のうち、撮像部114によって未だ撮像されていない任意のエリアの上空で停止した後(ステップS103)、再びステップS104~S107の処理が行われる。
For example, if the victim TG is not identified from the captured image of the imaging unit 114 (NO in step S107; see FIG. 6), the
そして、撮像部114の撮像画像から遭難者TGが特定された場合(ステップS107のYES;図7参照)、移動式投射装置11は、管理装置12によって指定された種類の標示内容、を表したパターンの光を、自装置の位置情報及び向きに基づいて調整したうえで、遭難者TGが視認可能なエリアに投射する(ステップS109)。
Then, when the victim TG is specified from the captured image of the imaging unit 114 (YES in step S107; see FIG. 7), the
例えば、移動式投射装置11は、データベース(不図示)に格納された地図情報と、自装置の位置情報及び向きに基づいて、遭難者TGの現在位置から目的位置までの避難経路を決定したうえで、決定した避難経路に沿った移動方向(避難方向)を示す矢印、を表したパターンの光を、当該遭難者TGが視認可能なエリアに投射する(図8参照)。なお、移動式投射装置11は、遭難者TGの移動に伴って移動しつつ、遭難経路に沿った移動方向を示す矢印、を表したパターンの光を、当該遭難者TGが視認可能なエリアに投射することができる。それにより、遭難者TGは、矢印の方向に沿って移動することにより、遭難エリアA1から抜け出して目的位置(例えば山の麓)にたどり着くことができる。
For example, the
このように、本実施の形態に係る移動式投射装置は、撮像部の撮像画像から対象人物(捜索中の遭難者等)を特定した場合に、管理装置によって指定された種類の標示内容(例えば避難方向を示す矢印)、を表したパターンの光を、自装置の位置情報及び向きに基づいて調整したうえで、当該対象人物が視認可能なエリアに投射する。換言すると、本実施の形態に係る移動式投射装置は、撮像部の撮像画像から対象人物(捜索中の遭難者等)を特定した場合に、自装置の位置情報及び向きに基づいて決定された標示内容、を表したパターンの光を、当該対象人物が視認可能なエリアに投射する。それにより、対象人物は、例えば、投射された光のパターンによって表される矢印の方向に沿って移動することで、遭難エリアから抜け出して目的位置にたどり着くことができる。 In this way, when the mobile projection device according to the present embodiment identifies a target person (such as a victim being searched for) from the captured image of the imaging unit, the display content of the type specified by the management device (for example, An arrow indicating an evacuation direction) is adjusted based on the position information and orientation of the device, and projected onto an area visible to the target person. In other words, when the mobile projection device according to the present embodiment identifies a target person (such as a victim being searched for) from the captured image of the imaging unit, A pattern of light representing the content of the indication is projected onto an area visible to the target person. Thereby, the target person can get out of the distress area and reach the target position, for example, by moving along the direction of the arrow represented by the projected light pattern.
なお、本実施の形態では、移動式投射装置11が、移動方向を示す矢印、を表したパターンの光を投射する場合を例に説明したが、これに限られず、避難情報等を示す文字や図形、を表したパターンの光を投射してもよい。
In the present embodiment, the case where the
また、本実施の形態では、対象人物が、山岳地帯などでの遭難者である場合を例に説明したが、これに限られない。対象人物は、移動式投射装置11によって投射される光のパターンによって情報を得ることを必要とする、任意の状況に置かれた人物であってよい。
Also, in the present embodiment, the case where the target person is a distressed person in a mountainous area or the like has been described as an example, but the present invention is not limited to this. The target person may be a person in any situation that requires obtaining information from the light pattern projected by the
(移動式投射装置11の制御機能のハードウェア構成)
なお、移動式投射システム1によって実現される移動式投射装置11の制御処理、具体的には、管理装置12による移動式投射装置11の制御処理、及び、移動式投射装置11に設けられた制御部113による制御処理、の一方又は両方は、汎用的なコンピュータシステムにより実現可能である。以下、図9を用いて簡単に説明する。
(Hardware Configuration of Control Function of Mobile Projection Device 11)
Control processing of the
図9は、移動式投射装置11の制御機能のハードウェア構成の一例を示すブロック図である。コンピュータ100は、例えば、制御装置であるCPU(Central Processing Unit)101と、RAM(Random Access Memory)102と、ROM(Read Only Memory)103と、を備える。コンピュータ100は、さらに、外部とのインターフェースであるIF(Inter Face)104と、不揮発性記憶装置の一例であるHDD(Hard Disk Drive)105と、を備える。さらに、コンピュータ100は、その他図示しない構成として、キーボードやマウス等の入力装置やディスプレイ等の表示装置を備えていてもよい。
FIG. 9 is a block diagram showing an example of the hardware configuration of the control functions of the
HDD105には、OS(Operating System)(不図示)と、制御プログラム106と、が記憶されている。制御プログラム106は、本実施の形態に係る移動式投射装置11の制御処理が実装されたコンピュータプログラムである。
The
CPU101は、コンピュータ100における各種処理、RAM102,ROM103,IF104及びHDD105へのアクセス等を制御する。コンピュータ100は、CPU101がHDD105に記憶されたOS、制御プログラム106を読み込み、実行する。これにより、コンピュータ100は、移動式投射装置11の制御機能を実現する。
The
上述の実施の形態では、本開示をハードウェアの構成として説明したが、本開示は、これに限定されるものではない。本開示は、移動式投射装置11の制御処理を、CPUにコンピュータプログラムを実行させることにより実現することも可能である。
Although the present disclosure has been described as a hardware configuration in the above embodiments, the present disclosure is not limited to this. The present disclosure can also realize the control processing of the
また、上述したプログラムは、コンピュータに読み込まれた場合に、実施形態で説明された1又はそれ以上の機能をコンピュータに行わせるための命令群(又はソフトウェアコード)を含む。プログラムは、非一時的なコンピュータ可読媒体又は実体のある記憶媒体に格納されてもよい。限定ではなく例として、コンピュータ可読媒体又は実体のある記憶媒体は、RAM、ROM、フラッシュメモリ、SSD(Solid-State Drive)又はその他のメモリ技術、CD-ROM、DVD(Digital Versatile Disc)、Blu-ray(登録商標)ディスク又はその他の光ディスクストレージ、磁気カセット、磁気テープ、磁気ディスクストレージ又はその他の磁気ストレージデバイスを含む。プログラムは、一時的なコンピュータ可読媒体又は通信媒体上で送信されてもよい。限定ではなく例として、一時的なコンピュータ可読媒体又は通信媒体は、電気的、光学的、音響的、またはその他の形式の伝搬信号を含む。 The programs described above also include instructions (or software code) that, when read into a computer, cause the computer to perform one or more of the functions described in the embodiments. The program may be stored in a non-transitory computer-readable medium or tangible storage medium. By way of example, and not limitation, computer readable media or tangible storage media may include RAM, ROM, flash memory, Solid-State Drives (SSDs) or other memory technologies, CD-ROMs, Digital Versatile Discs (DVDs), Blu-ray Including ray® discs or other optical disc storage, magnetic cassettes, magnetic tapes, magnetic disc storage or other magnetic storage devices. The program may be transmitted on a transitory computer-readable medium or communication medium. By way of example, and not limitation, transitory computer readable media or communication media include electrical, optical, acoustic, or other forms of propagated signals.
以上、図面を参照して、本開示の実施の形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、本開示の要旨を逸脱しない範囲内において様々な設計変更等が可能である。 Although the embodiments of the present disclosure have been described in detail above with reference to the drawings, the specific configurations are not limited to those described above, and various design changes can be made without departing from the gist of the present disclosure. etc. is possible.
上記の実施の形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。 Some or all of the above embodiments can also be described in the following additional remarks, but are not limited to the following.
(付記1)
自装置の位置情報を取得する位置情報取得部と、
自装置の向きを検出する方向検出部と、
自装置の周辺を撮像する撮像部と、
前記位置情報取得部によって取得される位置情報を基に、指定されたエリアに自装置を移動させる移動制御部と、
光を投射する投射部と、
前記指定されたエリアにおける前記撮像部の撮像画像から対象人物が特定された場合、前記投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、前記方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させる投射制御部と、
を備えた、移動式投射装置。
(Appendix 1)
a location information acquisition unit that acquires location information of its own device;
a direction detection unit that detects the orientation of the device;
an imaging unit for imaging the surroundings of the device;
a movement control unit that moves the device to a designated area based on the position information acquired by the position information acquisition unit;
a projection unit that projects light;
When a target person is specified from the captured image of the imaging unit in the designated area, the position information of the own device acquired by the position information acquisition unit and the direction detection unit detect by using the projection unit. a projection control unit for projecting light of a pattern determined based on the determined direction of the own device onto an area visible to the target person;
A mobile projection device with
(付記2)
前記投射制御部は、前記投射部を用いて、前記対象人物が進むべき移動方向を示す矢印、を表したパターンの光を、前記対象人物が視認可能なエリアに投射させる、
付記1に記載の移動式投射装置。
(Appendix 2)
The projection control unit uses the projection unit to project light in a pattern representing an arrow indicating a direction in which the target person should move, onto an area visible to the target person.
1. The mobile projection device according to Appendix 1.
(付記3)
前記投射制御部は、前記撮像部の撮像画像から前記対象人物の周辺エリアにおいて障害物が特定された場合、前記投射部を用いて、前記障害物を回避するような移動方向を示す矢印、を表したパターンの光を、前記対象人物が視認可能なエリアに投射させる、
付記2に記載の移動式投射装置。
(Appendix 3)
When an obstacle is identified in the area around the target person from the captured image of the imaging unit, the projection control unit uses the projection unit to generate an arrow indicating a moving direction to avoid the obstacle. Projecting the represented pattern of light onto an area visible to the target person;
2. The mobile projection device according to Appendix 2.
(付記4)
地図情報が格納されたデータベースをさらに有し、
前記投射制御部は、前記地図情報に基づいて前記対象人物の現在位置から目的位置までの移動経路を決定したうえで、前記投射部を用いて、決定した移動経路に沿った移動方向を示す矢印、を表したパターンの光を、前記対象人物が視認可能なエリアに投射させる、
付記2に記載の移動式投射装置。
(Appendix 4)
further having a database in which map information is stored;
The projection control unit determines a moving route from the current position of the target person to a target position based on the map information, and uses the projection unit to generate an arrow indicating a moving direction along the determined moving route. Project light of a pattern representing , to an area visible to the target person,
2. The mobile projection device according to Appendix 2.
(付記5)
前記投射制御部は、前記撮像部の撮像範囲の照度が所定の照度よりも低い場合には、前記投射部を用いて、前記撮像部の撮像画像の一部又は全部を含むような投射範囲のパターンの光を投射させる、
付記1~4の何れか一項に記載の移動式投射装置。
(Appendix 5)
When the illuminance of the imaging range of the imaging unit is lower than a predetermined illuminance, the projection control unit uses the projection unit to adjust the projection range to include part or all of the image captured by the imaging unit. project a pattern of light,
5. The mobile projection device according to any one of Appendices 1-4.
(付記6)
前記投射部は、
光源と、
前記光源から出射された光を、前記投射制御部の指示に従ったパターンとなるように変調する光空間位相変調器と、
前記光空間位相変調器によって変調された光を投射する光学系と、
を有する、
付記1~5の何れか一項に記載の移動式投射装置。
(Appendix 6)
The projection unit is
a light source;
an optical spatial phase modulator that modulates light emitted from the light source so as to have a pattern according to instructions from the projection control unit;
an optical system for projecting light modulated by the optical spatial phase modulator;
having
6. The mobile projection device according to any one of Appendices 1-5.
(付記7)
前記光は、レーザ光である、
付記1~6の何れか一項に記載の移動式投射装置。
(Appendix 7)
wherein the light is laser light;
7. The mobile projection device according to any one of Appendices 1-6.
(付記8)
前記移動式投射装置は、飛行可能に構成されている、
付記1~7の何れか一項に記載の移動式投射装置。
(Appendix 8)
wherein the mobile projection device is configured to be able to fly;
8. The mobile projection device according to any one of appendices 1-7.
(付記9)
付記1~8の何れか一項に記載の移動式投射装置と、
前記移動式投射装置に対し、前記指定されたエリアに移動するように指示を与えるとともに、前記光のパターンによって表される標示内容に関する指示を与える管理装置と、
を備えた、移動式投射システム。
(Appendix 9)
The mobile projection device according to any one of Appendices 1 to 8;
a management device that instructs the mobile projection device to move to the designated area and instructs the display content represented by the light pattern;
A mobile projection system with
(付記10)
位置情報取得部によって取得される自装置の位置情報を基に、指定されたエリアに自装置を移動させるステップと、
前記指定されたエリアにおいて、撮像部によって自装置の周辺を撮像するステップと、
前記撮像部の撮像画像から対象人物が特定された場合、投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させるステップと、
を備えた、移動式投射装置の制御方法。
(Appendix 10)
a step of moving the own device to a designated area based on the location information of the own device acquired by the location information acquisition unit;
a step of capturing an image of the surroundings of the device by an imaging unit in the designated area;
When the target person is specified from the captured image of the imaging unit, the position information of the own device acquired by the position information acquisition unit using the projection unit, the orientation of the own device detected by the direction detection unit, projecting a pattern of light determined based on the area visible to the target person;
A control method for a mobile projection device, comprising:
(付記11)
前記撮像部によって自装置の周辺を撮像するステップでは、前記撮像部の撮像範囲の照度が所定の照度よりも低い場合には、前記投射部を用いて前記撮像部の撮像画像の一部又は全部を含むような投射範囲のパターンの光を投射させながら、前記撮像部によって自装置の周辺を撮像する、
付記10に記載の移動式投射装置の制御方法。
(Appendix 11)
In the step of capturing an image of the surroundings of the device by the imaging unit, if the illuminance of the imaging range of the imaging unit is lower than a predetermined illuminance, part or all of the captured image of the imaging unit is captured using the projection unit. while projecting light in a pattern of a projection range including
11. A control method for a mobile projection device according to appendix 10.
(付記12)
位置情報取得部によって取得される自装置の位置情報を基に、指定されたエリアに自装置を移動させる処理と、
前記指定されたエリアにおいて、撮像部によって自装置の周辺を撮像する処理と、
前記撮像部の撮像画像から対象人物が特定された場合、投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させる処理と、
をコンピュータに実行させる制御プログラム。
(Appendix 12)
a process of moving the own device to a designated area based on the location information of the own device acquired by the location information acquisition unit;
a process of capturing an image of the surroundings of the device by an imaging unit in the designated area;
When the target person is specified from the captured image of the imaging unit, the position information of the own device acquired by the position information acquisition unit using the projection unit, the orientation of the own device detected by the direction detection unit, A process of projecting the light of the pattern determined based on the target person to the visible area;
A control program that causes a computer to execute
(付記13)
前記撮像部によって自装置の周辺を撮像する処理では、前記撮像部の撮像範囲の照度が所定の照度よりも低い場合には、前記投射部を用いて前記撮像部の撮像画像の一部又は全部を含むような投射範囲のパターンの光を投射させながら、前記撮像部によって自装置の周辺を撮像する、
付記12に記載の制御プログラム。
(Appendix 13)
In the process of capturing an image of the surroundings of the own device using the imaging unit, when the illuminance of the imaging range of the imaging unit is lower than a predetermined illuminance, the projection unit is used to capture part or all of the captured image of the imaging unit. while projecting light in a pattern of a projection range including
The control program according to
1 移動式投射システム
11 移動式投射装置
12 管理装置
50 ネットワーク
100 コンピュータ
101 CPU
102 RAM
103 ROM
104 IF
105 HDD
106 制御プログラム
111 位置情報取得部
112 方向検出部
113 制御部
114 撮像部
115 投射部
116 電源
1131 移動制御部
1132 投射制御部
1151 光源
1152 光空間位相変調器
1153 光学系
1
102 RAMs
103 ROMs
104IF
105 HDDs
106
Claims (10)
自装置の向きを検出する方向検出部と、
自装置の周辺を撮像する撮像部と、
前記位置情報取得部によって取得される位置情報を基に、指定されたエリアに自装置を移動させる移動制御部と、
光を投射する投射部と、
前記指定されたエリアにおける前記撮像部の撮像画像から対象人物が特定された場合、前記投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、前記方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させる投射制御部と、
を備えた、移動式投射装置。 a location information acquisition unit that acquires location information of its own device;
a direction detection unit that detects the orientation of the device;
an imaging unit for imaging the surroundings of the device;
a movement control unit that moves the device to a designated area based on the position information acquired by the position information acquisition unit;
a projection unit that projects light;
When a target person is specified from the captured image of the imaging unit in the designated area, the position information of the own device acquired by the position information acquisition unit and the direction detection unit detect by using the projection unit. a projection control unit for projecting light of a pattern determined based on the determined direction of the own device onto an area visible to the target person;
A mobile projection device with
請求項1に記載の移動式投射装置。 The projection control unit uses the projection unit to project light in a pattern representing an arrow indicating a direction in which the target person should move, onto an area visible to the target person.
A mobile projection device according to claim 1 .
請求項2に記載の移動式投射装置。 When an obstacle is identified in the area around the target person from the captured image of the imaging unit, the projection control unit uses the projection unit to generate an arrow indicating a moving direction to avoid the obstacle. Projecting the represented pattern of light onto an area visible to the target person;
3. A mobile projection device according to claim 2.
前記投射制御部は、前記地図情報に基づいて前記対象人物の現在位置から目的位置までの移動経路を決定したうえで、前記投射部を用いて、決定した移動経路に沿った移動方向を示す矢印、を表したパターンの光を、前記対象人物が視認可能なエリアに投射させる、
請求項2に記載の移動式投射装置。 further having a database in which map information is stored;
The projection control unit determines a moving route from the current position of the target person to a target position based on the map information, and uses the projection unit to generate an arrow indicating a moving direction along the determined moving route. Project light of a pattern representing , to an area visible to the target person,
3. A mobile projection device according to claim 2.
請求項1~4の何れか一項に記載の移動式投射装置。 When the illuminance of the imaging range of the imaging unit is lower than a predetermined illuminance, the projection control unit uses the projection unit to adjust the projection range to include part or all of the image captured by the imaging unit. project a pattern of light,
A mobile projection device according to any one of claims 1-4.
光源と、
前記光源から出射された光を、前記投射制御部の指示に従ったパターンとなるように変調する光空間位相変調器と、
前記光空間位相変調器によって変調された光を投射する光学系と、
を有する、
請求項1~5の何れか一項に記載の移動式投射装置。 The projection unit is
a light source;
an optical spatial phase modulator that modulates light emitted from the light source so as to have a pattern according to instructions from the projection control unit;
an optical system for projecting light modulated by the optical spatial phase modulator;
has a
A mobile projection device according to any one of claims 1-5.
請求項1~6の何れか一項に記載の移動式投射装置。 wherein the light is laser light;
A mobile projection device according to any one of claims 1-6.
前記移動式投射装置に対し、前記指定されたエリアに移動するように指示を与えるとともに、前記光のパターンによって表される標示内容に関する指示を与える管理装置と、
を備えた、移動式投射システム。 a mobile projection device according to any one of claims 1 to 7;
a management device that instructs the mobile projection device to move to the designated area and instructs the display content represented by the light pattern;
A mobile projection system with
前記指定されたエリアにおいて、撮像部によって自装置の周辺を撮像するステップと、
前記撮像部の撮像画像から対象人物が特定された場合、投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させるステップと、
を備えた、移動式投射装置の制御方法。 a step of moving the own device to a designated area based on the location information of the own device acquired by the location information acquisition unit;
a step of capturing an image of the surroundings of the device by an imaging unit in the designated area;
When the target person is specified from the captured image of the imaging unit, the position information of the own device acquired by the position information acquisition unit using the projection unit, the orientation of the own device detected by the direction detection unit, projecting a pattern of light determined based on the area visible to the target person;
A control method for a mobile projection device, comprising:
前記指定されたエリアにおいて、撮像部によって自装置の周辺を撮像する処理と、
前記撮像部の撮像画像から対象人物が特定された場合、投射部を用いて、前記位置情報取得部によって取得された自装置の位置情報と、方向検出部によって検出された自装置の向きと、に基づいて決定されたパターンの光を、前記対象人物が視認可能なエリアに投射させる処理と、
をコンピュータに実行させる制御プログラム。 a process of moving the own device to a designated area based on the location information of the own device acquired by the location information acquisition unit;
a process of capturing an image of the surroundings of the device by an imaging unit in the designated area;
When the target person is specified from the captured image of the imaging unit, the position information of the own device acquired by the position information acquisition unit using the projection unit, the orientation of the own device detected by the direction detection unit, A process of projecting the light of the pattern determined based on the target person to the visible area;
A control program that causes a computer to execute
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021179645A JP7481015B2 (en) | 2021-11-02 | 2021-11-02 | MOBILE PROJECTION DEVICE, MOBILE PROJECTION SYSTEM, CONTROL METHOD FOR MOBILE PROJECTION DEVICE, AND CONTROL PROGRAM |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021179645A JP7481015B2 (en) | 2021-11-02 | 2021-11-02 | MOBILE PROJECTION DEVICE, MOBILE PROJECTION SYSTEM, CONTROL METHOD FOR MOBILE PROJECTION DEVICE, AND CONTROL PROGRAM |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023068493A true JP2023068493A (en) | 2023-05-17 |
JP7481015B2 JP7481015B2 (en) | 2024-05-10 |
Family
ID=86327050
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021179645A Active JP7481015B2 (en) | 2021-11-02 | 2021-11-02 | MOBILE PROJECTION DEVICE, MOBILE PROJECTION SYSTEM, CONTROL METHOD FOR MOBILE PROJECTION DEVICE, AND CONTROL PROGRAM |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7481015B2 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018084955A (en) * | 2016-11-24 | 2018-05-31 | 株式会社小糸製作所 | Unmanned aircraft |
WO2018230539A1 (en) * | 2017-06-16 | 2018-12-20 | 本田技研工業株式会社 | Guide system |
JP6615394B1 (en) * | 2019-01-30 | 2019-12-04 | 株式会社スペース二十四インフォメーション | Pedestrian guidance system |
JP2021175042A (en) * | 2020-04-21 | 2021-11-01 | 合同会社酒井総合研究所 | Image projection device |
-
2021
- 2021-11-02 JP JP2021179645A patent/JP7481015B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018084955A (en) * | 2016-11-24 | 2018-05-31 | 株式会社小糸製作所 | Unmanned aircraft |
WO2018230539A1 (en) * | 2017-06-16 | 2018-12-20 | 本田技研工業株式会社 | Guide system |
JP6615394B1 (en) * | 2019-01-30 | 2019-12-04 | 株式会社スペース二十四インフォメーション | Pedestrian guidance system |
JP2021175042A (en) * | 2020-04-21 | 2021-11-01 | 合同会社酒井総合研究所 | Image projection device |
Non-Patent Citations (1)
Title |
---|
寺井晴香: "空間光位相変調器を用いた投影画素の再配置による画素密度補正", 映像情報メディア学会誌, vol. 75巻6号, JPN7023004716, 1 November 2021 (2021-11-01), JP, pages 820 - 823, ISSN: 0005216764 * |
Also Published As
Publication number | Publication date |
---|---|
JP7481015B2 (en) | 2024-05-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210199973A1 (en) | Hybrid reality system including beacons | |
KR102100051B1 (en) | A 3d lidar system using a dichroic mirror for autonomous driving vehicles | |
CN109074101B (en) | Imaging using multiple drones | |
CN113147579B (en) | System mounted on vehicle | |
JP6601554B2 (en) | Unmanned aerial vehicle, unmanned aircraft control system, flight control method, and computer program | |
CA3062459A1 (en) | System and method for threat monitoring, detection, and response | |
US20200218289A1 (en) | Information processing apparatus, aerial photography path generation method, program and recording medium | |
KR102083934B1 (en) | Method and apparaus for automatic landing of aircraft using vision-based information | |
WO2018076895A1 (en) | Method, device, and system for controlling flying of slave unmanned aerial vehicle based on master unmanned aerial vehicle | |
JP7305263B2 (en) | Unmanned aerial vehicles, inspection methods and inspection programs | |
KR20200096518A (en) | Information processing device, moving object, control system, information processing method and program | |
JP7243714B2 (en) | EXPOSURE CONTROL DEVICE, EXPOSURE CONTROL METHOD, PROGRAM, PHOTOGRAPHY DEVICE, AND MOBILE | |
WO2020184100A1 (en) | Wearable device and control method | |
JP6814431B2 (en) | Computer systems, drone control methods and programs | |
KR102397366B1 (en) | Apparatus and method for controlling drones to search for victims at sea | |
JP2023068493A (en) | Mobile projection device, mobile projection system, control method for mobile projection device, and control program | |
KR20190123095A (en) | Drone-based omni-directional thermal image processing method and thermal image processing system therefor | |
JP2021113005A (en) | Unmanned aircraft system and flight control method | |
US10814487B2 (en) | Communicative self-guiding automation | |
KR102351057B1 (en) | Apparatus and method for controlling the unmanned aerial vehicle based on disaster complexity | |
US20210385414A1 (en) | Shutter and light signal synchronization systems and methods | |
WO2021100152A1 (en) | Moving body control system, moving body control device, and moving body control method | |
KR102200182B1 (en) | An unmanned aerial vehicle for displaying flight areas on the ground and its operating method | |
JP6984256B2 (en) | Signal processing equipment, and signal processing methods, programs, and mobiles. | |
JP2021142819A (en) | Flight vehicle, vehicle monitoring system, flight vehicle control method and flight control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230307 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240326 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240418 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7481015 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |