JP7176926B2 - Foreign object detection method and system - Google Patents
Foreign object detection method and system Download PDFInfo
- Publication number
- JP7176926B2 JP7176926B2 JP2018202157A JP2018202157A JP7176926B2 JP 7176926 B2 JP7176926 B2 JP 7176926B2 JP 2018202157 A JP2018202157 A JP 2018202157A JP 2018202157 A JP2018202157 A JP 2018202157A JP 7176926 B2 JP7176926 B2 JP 7176926B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- target area
- detected
- stopped
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Geophysics And Detection Of Objects (AREA)
- Emergency Alarm Devices (AREA)
- Radar Systems Or Details Thereof (AREA)
Description
本開示は、駐車場等、車両の停止する領域内において、車両以外の異物を検知する方法およびシステムに関する。 The present disclosure relates to a method and system for detecting foreign objects other than vehicles in areas where vehicles stop, such as parking lots.
車両が進入し、停止する空間、例えば機械式駐車場の入出庫スペース等においては、出入口の扉を開閉したり、車両を載せたパレットを運搬するといった操作を行うにあたり、車両の他に運転者や乗員、手荷物といった異物が存在しないことを確認する必要がある。こうした異物不在の確認作業は、運転者や施設の係員等が目視で行うことができるが、人力のみに頼った場合、不注意等により確認が徹底されない可能性がある。そこで、近年では、異物の不在確認を確実に行うよう、人力のみに頼ることなく、対象領域内の異物を自動で検出する技術が要請されている。 In a space where a vehicle enters and stops, such as an entry/exit space in a mechanical parking lot, the operator must be present in addition to the vehicle when performing operations such as opening and closing the entrance door and transporting a pallet on which the vehicle is placed. It is necessary to confirm that there are no foreign objects such as passengers, passengers, or baggage. Such confirmation work for the absence of foreign matter can be performed visually by the driver or facility staff. Therefore, in recent years, there has been a demand for a technique for automatically detecting foreign matter in a target area without relying only on human power, so as to reliably confirm the absence of foreign matter.
また、現在、各国で開発が進められている自動運転技術が本格的に実用化されれば、車両の運転のみならず、上述の如き扉の開閉やパレットの運搬といった、車両周辺において行われる種々の操作についても自動化が進められることが想定できる。例えば、自動運転により車両が乗員を目的地に送り届けた後、自動で近傍の機械式駐車場へ移動し、格納スペースに格納されるといったケースが考えられるが、この場合、車両は乗員が不在の状態で移動し、入出庫スペースに停止することになる。このとき、扉の開閉、パレットの移動の開始といった操作は、係員が異物の不在を目視で確認し、操作ボタンを入力することで実行されるようにしても良いが、異物の不在を自動で確認し、操作を開始する仕組みがあればよりスムーズである。 In addition, if the autonomous driving technology that is currently being developed in various countries is put into practical use, it will not only be possible to drive the vehicle, but also various things around the vehicle such as opening and closing the door and transporting pallets as described above. It can be assumed that automation will also be promoted for the operation of For example, after the vehicle delivers the occupants to their destination, the vehicle automatically moves to a nearby mechanical parking lot and is stored in a storage space. It will move in the state and stop at the loading/unloading space. At this time, operations such as opening and closing the door and starting the movement of the pallet may be executed by visually confirming the absence of foreign matter and inputting an operation button by a staff member. It will be smoother if there is a mechanism to confirm and start the operation.
このような異物の検知を行う仕組みは、機械式駐車場だけでなく、例えば電気自動車の給電設備等、停止した車両の周辺で何らかの操作を行う場所において広く必要とされ得る。 Such a mechanism for detecting a foreign object may be widely required not only in a mechanical parking lot but also in a place where some kind of operation is performed around a stopped vehicle, such as a power feeding facility for an electric vehicle.
車両の進入する対象領域内の異物を自動的に検知するための技術としては、例えば下記特許文献1に記載の如き技術が挙げられる。特許文献1には、立体駐車場において、パレット以外の外部連通部の床面全体に、圧電シートにより構成されたマットスイッチを敷設し、人の存在を検出する技術が記載されている。しかしながら、特許文献1に記載の技術の場合、マットスイッチの設置されていないパレット等については、人や異物を検出することができない。
Techniques for automatically detecting a foreign object in a target area into which a vehicle enters include, for example, the technique described in
そこで、マットスイッチ等を敷設できる領域以外についても異物を検出し得る技術として、例えば下記特許文献2、3に記載の如き技術が提案されている。特許文献2には、機械式駐車設備の入庫部に測域センサを備え、該測域センサの走査情報から床面上の物体を検出する入庫部検知装置が記載されている。該入庫部検知装置では、前記測域センサの検出データのうち所定サイズ以上のものを候補データとし、そのうち自動車のタイヤとして認識したもの以外を残留物として認識する。
Therefore, techniques such as those described in
特許文献3には、測域センサー(検知手段)と、制御装置(制御手段)を備えたエリア検知装置が記載されている。測域センサーは、機械式駐車設備の乗降エリアに入庫した車両の位置、大きさ、形状を検知し、車両輪郭データを取得する。制御装置は、乗降エリアのうち、前記車両輪郭データの範囲を除いた居残り検出範囲の状態を入庫初期データとして記憶し、リアルタイムデータと比較して相違の有無を判定する。
しかしながら、上記特許文献2、3に記載の如き技術では、異物の検知にあたってデータに対し高度な演算処理を施すことが要求される。特許文献2に記載の入庫部検知装置の場合、まず検出データから所定サイズ以上の物を候補データとして選出し、さらに候補データの中から重心位置の近いものを同一物体として関連付け、タイヤと認識する。検出データから物体のサイズを検出したり、候補データから物体の重心位置を特定して関連付ける工程に複雑な演算が必要である。
However, in the techniques as described in
また、特許文献3に記載のエリア検知装置の場合、測域センサーによる走査に基づき、車両の二次元あるいは三次元における輪郭を取得する。車両の表面は複雑な形状であることがほとんどであり、測域センサーのデータから車両輪郭データを作成するには、やはり複雑な演算が必要である。
Further, in the case of the area detection device described in
このように、異物を自動的に検知する技術は、高度な演算を要することが一般的である。このため、機械式駐車設備等において入出庫の際にデータの演算に時間がかかるなど、円滑な稼働が妨げられてしまう可能性がある。 As described above, the technology for automatically detecting a foreign object generally requires a high degree of computation. For this reason, there is a possibility that the smooth operation of a mechanical parking facility or the like may be hindered, for example, it may take a long time to calculate data when entering or exiting a vehicle.
そこで、本開示においては、対象領域内の異物を簡便に検知し得る異物検知方法およびシステムを説明する。 Therefore, in the present disclosure, a foreign object detection method and system that can easily detect a foreign object in a target area will be described.
本開示は、車両の進入する対象領域内を測定する測域センサを対象領域に対して配置し、対象領域の停止位置に車両が停止しており、且つ対象領域内に異物のない状態で、前記測域センサにより被検出点データを基準データとして取得するステップと、対象領域の停止位置に車両が停止している任意の時点において前記測域センサにより被検出点データを取得するステップと、前記任意の時点に取得した車両の停止した領域の被検出点を含む被検出点データを、車両の停止した領域の被検出点を含む前記基準データと比較するステップと、該ステップにおいてデータ間に所定以上の差分が見られた場合に、前記任意の時点において対象領域内に異物が存在すると判定するステップとを含む異物検知工程を実行する異物検知方法にかかるものである。 In the present disclosure, a range sensor that measures the inside of a target area into which a vehicle enters is arranged with respect to the target area, the vehicle is stopped at the stop position of the target area, and there is no foreign object in the target area, a step of acquiring detected point data by the range sensor as reference data; a step of acquiring the detected point data by the range sensor at an arbitrary point in time when the vehicle is stopped at a stop position in the target area ; a step of comparing detected point data including detected points in an area where the vehicle is stopped acquired at an arbitrary time with the reference data including detected points in an area where the vehicle is stopped; This invention relates to a foreign matter detection method for executing a foreign matter detection step including the step of determining that a foreign matter exists in the target area at the arbitrary time when the above difference is found.
上述の異物検知方法において、前記基準データは、対象領域に車両が進入し、対象領域内の停止位置に停止した時に取得される被検出点データとすることができる。 In the foreign matter detection method described above, the reference data may be detected point data acquired when the vehicle enters the target area and stops at a stop position within the target area.
上述の異物検知方法においては、前記異物検知工程に加え、対象領域内への車両の進入に伴い、前記測域センサを作動させて対象領域内の測定を時々刻々実行するステップと、直近の時点に取得された被検出点データと、その前の時点に取得された被検出点データとを比較するステップと、被検出点データ同士の差分が所定値以下である状態が所定時間以上継続した場合に、車両が停止したと判定するステップとを含む車両の停止判定工程を実行しても良い。 In the foreign matter detection method described above, in addition to the foreign matter detection step, as the vehicle enters the target region, the range sensor is operated to measure the target region from time to time; a step of comparing the detected point data acquired at the previous point with the detected point data acquired at the previous point; Additionally, a vehicle stop determination process including a step of determining that the vehicle has stopped may be executed.
上述の異物検知方法においては、前記基準データとして、前記車両の停止判定工程で、車両の停止が判定される直前において被検出点データ同士の差分が所定値以下である状態が継続している途中に取得した被検出点データ、または、前記車両の停止判定工程で、車両の停止が判定された直後に取得した被検出点データを使用することができる。 In the above-described foreign object detection method, as the reference data, in the vehicle stop determination step, immediately before the vehicle stop determination is made, the difference between detected point data is equal to or less than a predetermined value. or the detected point data acquired immediately after it is determined that the vehicle has stopped in the vehicle stop determining step.
また、本開示は、車両の進入する対象領域内を測定する測域センサを備え、対象領域の停止位置に車両が停止しており、且つ対象領域内に異物のない状態で前記測域センサにより被検出点データを基準データとして取得すると共に、対象領域の停止位置に車両が停止している任意の時点において前記測域センサにより被検出点データを取得し、前記任意の時点に取得した車両の停止した領域の被検出点を含む被検出点データを、車両の停止した領域の被検出点を含む前記基準データと比較し、データ間に所定以上の差分が見られた場合に、前記任意の時点において対象領域内に異物が存在すると判定するよう構成された異物検知システムにかかるものである。 In addition, the present disclosure is provided with a range sensor that measures the inside of a target area into which a vehicle enters , and the vehicle is stopped at a stop position of the target area, and the range sensor is used in a state where there is no foreign object in the target area. Acquisition of detected point data as reference data, acquisition of detected point data by the range sensor at an arbitrary point in time when the vehicle is stopped at a stop position in the target area, and acquisition of the detected point data at the arbitrary point in time. The detected point data including the detected points in the stopped area is compared with the reference data including the detected points in the stopped area of the vehicle. It relates to a foreign object detection system configured to determine that a foreign object is present in a target area at a point in time.
上述の異物検知システムにおいて、前記測域センサは、対象領域に対して2個以上が設置され、平面視で車両の停止位置の全周を測定範囲に含むように配置することができる。 In the foreign matter detection system described above, two or more range sensors are installed for the target area, and can be arranged so that the measurement range includes the entire circumference of the stop position of the vehicle in a plan view.
本発明の異物検知方法およびシステムによれば、対象領域内の異物を簡便に検知し得るという優れた効果を奏し得る。 According to the foreign matter detection method and system of the present invention, it is possible to obtain the excellent effect of being able to easily detect foreign matter in the target area.
以下、本開示における実施例の形態を添付図面を参照して説明する。図1に示す本実施例の異物検知システムは、対象領域Aとして機械式駐車設備の入出庫スペースを想定している。対象領域A内には、車両1を運搬するパレット2が出入りするようになっており、このパレット2上にあたる領域が車両1の停止位置Pに設定されている。そして、対象領域A内において、停止位置Pに停止した車両1以外に物体(異物)Oが存在する場合に、該異物Oを検知するようになっている。尚、「異物」とは、対象領域内に存在する車両以外の物体であって、対象領域にもとより設置された物体以外の物体、例えば、車両の運転者、乗員、設備の係員等の人、また、手荷物等を指す。図1には、一例として対象領域A内に2つの異物Oを図示している。
Hereinafter, embodiments of the present disclosure will be described with reference to the accompanying drawings. In the foreign object detection system of the present embodiment shown in FIG. 1, the target area A is assumed to be a parking space for mechanical parking equipment. A
入出庫スペースである対象領域Aは、四方を壁で囲まれた空間であり、奥側(図中上側)に搬送口3が、手前側(図中下側)に入出庫口4が設けられている。車両1を搬送するパレット2は、対象領域A外の格納スペース(図示せず)から搬送口3を通じて入出庫スペースである対象領域Aに出入りする。対象領域Aにおけるパレット2の定位置は、対象領域Aの中央部である。入庫時において、車両1は、入出庫口4を通じて対象領域A内に進入し、パレット2上の停止位置Pに停止し、パレット2と共に搬送口3から前記格納スペースへ搬送され、格納される。出庫時には、車両1はパレット2と共に前記格納スペースから搬送口3を通じて対象領域A内に搬送された後、入出庫口4から対象領域A外へ退出する。
The target area A, which is the loading/unloading space, is a space surrounded by walls on all four sides, with a
対象領域Aには、該対象領域A内の測定を行う測域センサ5が配置されている。測域センサ5は、図1に矢印で示す如く、レーザ光や超音波等を照射波として周囲の空間に照射し、反射波を検出する装置である。測域センサ5からの照射波が周囲の物体、あるいは壁、床、柱といった構造物に到達して反射し、その反射波が測域センサ5に検出されると、反射した点の測域センサ5からの距離、および測域センサ5に対する角度がデータとして取得される(以下、測域センサ5によって反射波を検出された対象領域A内の点を、被検出点と称する)。
In the target area A, a
本実施例では、2個の測域センサ5を、平面視で長方形状をなす対象領域Aに対し、互いに対角線をなす角部に配置している。このように、一対の測域センサ5を、車両1の停止位置Pを挟むように配置することで、停止位置Pの平面視における全周を、測域センサ5の測定範囲に含むことができる。照射波は原則として直進するので、仮に対象領域Aに対して測域センサ5を1個だけ配置した場合、測域センサ5から見て停止位置Pに停止した車両1の反対側については測定範囲外となってしまう。そこで、図1に示す如く測域センサ5を配置すれば、車両1の周辺の領域全体について漏れなく異物検知を行うことができるのである。尚、ここに示した測域センサ5の数および配置は一例であって、測定の精度を高めたり、測定可能な範囲を広く確保するよう、3個以上の測域センサ5を対象領域Aに対し配置しても良い。
In this embodiment, two
測域センサ5により取得された各被検出点のデータ(以下、「被検出点データ」と称する)は、測定信号5aとして制御装置6に入力される。制御装置6は、入出庫スペースである対象領域Aを含む機械式駐車場全体を監視し、各部の運転を行う装置であり、搬送口3および入出庫口4の開閉、パレット2の搬送、各測域センサ5の作動等を制御する。
Data of each detected point acquired by the range sensor 5 (hereinafter referred to as "detected point data") is input to the
入出庫口4近傍の外壁には、入庫スイッチ7が備えられている。入庫スイッチ7を操作すると、入庫信号7aが制御装置6に入力される。制御装置6では、入庫信号7aの入力を条件として、車両1の入庫に係る各工程、すなわちパレット2の搬送、入出庫口4の開放、さらに後述する停止判定の工程、等が実行されるようになっている。尚、入庫スイッチ7の設置位置は、ここに示した例に限らず、入出庫口4の動作等に好適な適宜位置を選択することができる。
A
また、対象領域Aの内外の各所には、警報装置8が備えられている。警報装置8は、制御装置6の管理する領域(対象領域Aを含む)において、人員に対して注意を促すべき何らかの事態が生じた場合に警報を発する装置であり、制御装置6からの警報信号8aの入力により作動する。「人員に対して注意を促すべき何らかの事態」とは、例えば車両1を対象領域A外の格納スペースへ移動させるにあたり、後述する異物検知の工程を実行した結果、対象領域Aに車両1以外の異物Oが検知された場合などである。警報の内容は、アラーム音、警告灯の点灯、警告メッセージの表示など、人員に対して注意を喚起できればどのようなものであっても良く、適当な形式を選択することができる。
In addition,
ここに示した例では、警報装置8を対象領域Aの内壁、および入出庫口4近傍の外壁に図示しているが、この他の箇所にも必要に応じて警報装置8を設けても良い。例えば、図示しない機械式駐車場の管理室等に警報装置8を備えることもできる。
In the example shown here, the
測定信号5a、入庫信号7a、警報信号8aといった各種の信号のやり取りは、有線または無線いずれの形式で行っても良い。一例としては、Ethernet(登録商標)等により、制御装置6と測域センサ5、入庫スイッチ7、警報装置8といった装置を接続し、相互に通信を行うように構成することができる。
Various signals such as the
次に、上記した本実施例の作動を説明する。 Next, the operation of the present embodiment described above will be described.
図1に示す本実施例の異物検知システムでは、対象領域A内の異物Oの検知は勿論であるが、車両1が停止位置Pに停止したか否かも判定することができる。まず、この車両1の停止判定について説明する。
In the foreign object detection system of the present embodiment shown in FIG. 1, not only can foreign objects O in the target area A be detected, but also whether or not the
停止判定は、入庫信号7aの入力を条件として、制御装置6にて行われる。ここに示した例では、入庫信号7aの入力は、入庫スイッチ7の操作により行われるようになっている。すなわち、車両1が入出庫口4の手前に停止したら、車両1の運転者、あるいは機械式駐車場の係員等である乗員が入庫スイッチ7を操作し、これにより入庫信号7aが入力されるのである。ただし、これはあくまで一例であって、入庫信号7aの入力は、他の方式により実行されても良い。例えば、自動運転車である車両1が無人の状態で入出庫スペースである対象領域Aの入出庫口4の前に移動し、自動で入庫する場合、入庫スイッチ7を操作する人員がいない状況も想定される。そのような場合、例えば車両1を入出庫口4の前に検出するセンサを別途設け、該センサにより車両1が検知されたら、その検知信号を入庫信号として扱うようにすれば良い。あるいは、車両1から何らかの信号を出力し、該信号を制御装置6が入庫信号として認識するようにしても良い。
Stop determination is performed by the
入庫信号7aが入力されたら、制御装置6は、入出庫口4を開放する。入庫の開始にあたっては、空のパレット2が対象領域A内の定位置である中央部に配備された状態で入出庫口4を開放する。仮に、入庫の開始が指示された時点で対象領域A内に空のパレット2が存在しない場合には、搬送口3を開放して空のパレット2を対象領域Aへ搬送し、中央部に配備してから、入出庫口4を開放する。そして、図2に示す停止判定工程を開始する。
When the
車両1は、入出庫口4が開放されると、徐行運転にて対象領域A内のパレット2に向かって移動する。制御装置6では、各測域センサ5を作動させ、それぞれの測域センサ5にて対象領域A内の測定を行う(ステップS1)。各測域センサ5では、反射波から被検出点データを取得する。この被検出点データは、ある時点において、対象領域A内の構造物や物体表面にて照射波が反射された多数の点の各測域センサ5からの距離、および各測域センサ5に対する角度である。被検出点データは、測定信号5aとして制御装置6に入力される。
When the entrance/
ステップS2においては、先のステップS1同様、測域センサ5による対象領域A内の測定を行う。ステップS1以降、ステップS2の測定は、繰り返し時々刻々実行する。
In step S2, the
そして、ステップS3,S4において、直近のステップS2で取得された被検出点データと、その前のステップS1で取得された被検出点データの比較を行う。ステップS3では、両データの差分を計算する。この差分データは、各測域センサ5毎に、取得した被検出点データに関して算出される。そして、ダウンサンプリングやノイズ除去といった処理を経たうえで、次のステップS4において、それぞれの測域センサ5に関し、差分データに残った被検出点の数が閾値未満であるか否かを判定する。
Then, in steps S3 and S4, the detected point data acquired in the latest step S2 is compared with the detected point data acquired in the previous step S1. In step S3, the difference between both data is calculated. This difference data is calculated with respect to the detected point data acquired for each
ある時点と、別の時点との間で、対象領域A内における物体の有無、位置、角度等に差がない場合、前記ある時点に取得された被検出点データと、前記別の時点に取得された被検出点データとは、ノイズ等を考慮しない限り一致する。すなわち、両時点における被検出点データの差分はゼロとなるので、差分データには被検出点が残らない。一方、対象領域A内で物体の移動があった場合には、両時点間で被検出点データに差が生じるので、差分データに被検出点が残ることになる。つまり、ステップS4では、各測域センサ5において測定された前後の被検出点データに、所定以上の差があるか否かを判定し、これにより、対象領域A内に動きがあったか否かを判定するのである。無論、ここで想定される対象領域A内の動きとは、車両1が停止位置Pへ移動する動きである。
If there is no difference in the presence/absence, position, angle, etc. of an object in the target area A between a certain time point and another time point, the detected point data acquired at the certain time point and the detected point data acquired at the other time point The data of the detection point thus obtained matches as long as noise and the like are not taken into account. That is, since the difference between the detected point data at both times is zero, the detected point does not remain in the differential data. On the other hand, if the object moves within the target area A, the detected point data will differ between the two points in time, so the detected point will remain in the differential data. That is, in step S4, it is determined whether or not there is a predetermined difference or more between the data of the detected points before and after each
一つ以上の測域センサ5において、差分データに残った被検出点の数が閾値以上であった場合は、ステップS4からステップS2に戻り、再度測域センサ5による測定を行う。そして、ここで取得した被検出点データを、次のステップS3,S4において、前回取得した被検出点データと比較する。すなわち、ステップS3で、直前のステップS2で取得した被検出点データと、その前のステップS2で取得した被検出点データの差分を算出し、その差分データを続くステップS4で判定する。差分データに残った被検出点の数が閾値未満になるまで、このステップS2~S4を繰り返す。差分データに閾値以上の数の被検出点が残っている間は、車両1が静止せずに移動していると考えられるので、差分データに残る被検出点が閾値未満となり、車両1が静止したと判断できるまで、測定を繰り返すのである。
If the number of detected points remaining in the difference data for one or
ステップS4において、直前のステップS3で算出された差分データに残った被検出点の数が全ての測域センサ5において閾値未満であると判定された場合には、ステップS5に移る。ステップS5では、ステップS4においてYESと判定された状態、すなわち「差分データに残った被検出点の数が全ての測域センサ5において閾値未満である状態」が所定の時間以上、継続しているか否かを判定する。つまり、直近のステップS2と、その前のステップS2またはステップS1にて取得された被検出点データ同士の差分が所定値以下である状態の継続時間を判定するのである。
If it is determined in step S4 that the number of detection points remaining in the difference data calculated in immediately preceding step S3 is less than the threshold for all
この状態の継続時間が所定値未満であった場合には、再度ステップS2へ戻り、前記状態の継続が所定の時間以上となるまでステップS2~S5を繰り返す。そして、ステップS5において前記状態の継続時間が所定値以上であると判定されたら、車両1が停止位置Pに停止したと判断する(ステップS6)。車両1をパレット2上の停止位置Pまで移動させる際には、途中で一旦停止して移動を再開するような場合も想定できるため、車両1が静止している状態が一定時間以上継続していることをもって、車両1が目的の停止位置Pに確実に停止したと判断するのである。
If the continuation time of this state is less than the predetermined value, the process returns to step S2, and steps S2 to S5 are repeated until the continuation of the state becomes equal to or longer than the predetermined time. Then, when it is determined in step S5 that the duration of the state is equal to or longer than the predetermined value, it is determined that the
停止の判定自体はステップS6までで完了するが、本実施例では、後の異物検知工程(図3参照)において使用する被検出点データを、続いて取得する。車両1が停止位置Pに停止したと判定されたらステップS7に進み、測域センサ5を作動させ、車両1が停止したと判定された直後の時点における被検出点データを取得する。ステップS8において、ステップS7で取得した被検出点データを車両1停止時の基準データとして記憶し、工程を終了する。
The stop determination itself is completed up to step S6, but in this embodiment, detected point data to be used in the subsequent foreign matter detection step (see FIG. 3) is subsequently acquired. When it is determined that the
尚、ここではステップS2~ステップS3を繰り返す前に、初回の被検出点データを取得する工程としてステップS1を実行しているが、このステップS1は必ずしも必要ではない。例えば、ステップS1を省略し、停止判定工程における最初のステップS3では、直前のステップS2で取得した被検出点データをNullデータと比較するようにしても良い。その場合、最初のステップS3で算出される差分データは必ず閾値以上の被検出点データとなり、車両1は動いていると判定されるので、停止判定にあたって特に支障はない。
Here, before repeating steps S2 to S3, step S1 is executed as a step of obtaining the first detected point data, but this step S1 is not necessarily required. For example, step S1 may be omitted, and in the first step S3 in the stoppage determination process, the detected point data obtained in the immediately preceding step S2 may be compared with Null data. In this case, the difference data calculated in the first step S3 is always detected point data equal to or larger than the threshold value, and it is determined that the
また、基準データとして使用する被検出点データを取得するタイミングは、ここに述べた例に限定されない。対象領域A内の停止位置P内に車両1が停止しており、対象領域A内に異物Oが存在しないと考えられる状態で測域センサ5において取得された被検出点データであれば、基準データとして利用することができる。例えば、図2に示す車両1の停止判定工程において、ステップS5で車両1の停止が判定される直前、被検出点データ同士の差分が所定値以下である状態が継続している途中にステップS2で取得された被検出点データを、基準データとしても良い。
Also, the timing of acquiring the detected point data to be used as the reference data is not limited to the example described here. If it is detected point data acquired by the
図2に示す工程では、ステップS5で所定の状態の継続時間が所定値以上となったと判定されるまでの間、ステップS2~S4を繰り返すが、この間は、ステップS4における判定がYESである状態が継続している。つまり、この間にステップS2で取得される被検出点データは、「対象領域A内の停止位置P内に車両1が停止しており、対象領域A内に異物Oの存在しない状態の被検出点データ」と考えることができる。そこで、ステップS5においてYESの判定が行われたら、そのステップS5の判定に至るまでステップS4のYES判定が継続していた間にステップS2で取得された被検出点データを、基準データとして記憶するのである。このようにしても、「車両1が対象領域A内の停止位置Pに停止した時の被検出点データ」であり、「対象領域A内に異物Oがない状態で取得された」と考えることができる被検出点データを、基準データとして取得することができる。
In the process shown in FIG. 2, steps S2 to S4 are repeated until it is determined in step S5 that the duration of the predetermined state has exceeded a predetermined value. continues. In other words, the detected point data acquired in step S2 during this period is "a detected point in a state where the
尚、ここでは図1に示す如き異物検知のための本システムを車両1の停止判定に利用する場合を例示したが、機械式駐車場等に本開示の如き異物検知システムを設置するにあたり、必ずしも同システムに停止判定と異物検知の両方の機能を兼ねる必要はない。後述する異物検知の工程は図1に示す如きシステムで行う一方、停止判定に関しては、例えばパレット2に対する車両1の位置を検知するようなセンサ等を別途設置して行っても良い。ただし、対象領域Aにおける車両1の移動や停止と、車両1周辺での各種の操作とをスムーズに連携させるためには、本実施例のように、異物検知のためのシステムにより車両1の停止をも判定できるようにした方が、システム構成の単純化や動作の高速化の面で有利である。あるいは、本実施例の如きシステムで停止判定を行いつつ、別途設置したセンサ等によっても停止判定を行うといったように、複数のシステムを併用しても良い。
Here, the case of using this system for foreign matter detection as shown in FIG. It is not necessary for the system to have both stop judgment and foreign object detection functions. While the process of detecting a foreign object, which will be described later, is performed by the system shown in FIG. However, in order to smoothly coordinate the movement and stopping of the
次に、異物検知工程について、図3を参照しながら説明する。 Next, the foreign matter detection process will be described with reference to FIG.
異物検知工程は、対象領域A内の状態を確認したい任意のタイミングで開始することができる。例えば、入庫時に車両1内に運転者や乗員がいたり、対象領域A内に係員等がいたりする場合には、停止位置Pに車両1が停止した後、パレット2による車両1の搬送を開始する前に、対象領域Aが無人であることを確認する必要があることが想定できる。その場合は、図2に示す一連の工程が終了した直後に異物検知工程を自動的に開始し、異物Oが検知されなかったことを条件としてパレット2の移動を実行すれば良い。あるいは、図示しないスイッチ等の操作により車両1の搬送が指示された時点で異物検知工程を開始し、異物Oが検知されなかった場合に搬送を行い、検知されたら搬送を停止するようにしても良い。また、入出庫口4を閉鎖する際にも、異物検知工程を実行して異物Oの不在を確認してから扉の動作を行う、といった態様が想定できる。
The foreign matter detection process can be started at any timing when the state within the target area A is desired to be confirmed. For example, if there is a driver or a passenger in the
異物検知工程では、まず、異物検知をしたい任意の時点における被検出点データを取得する(ステップS11)。リアルタイムの異物検知を行う場合、この時点で測域センサ5を作動させ、対象領域A内の測定を行えば良い。次のステップS12,S13で、ステップS11にて取得した被検出点データと、基準データとを比較する。ステップS12では、両データの差分を測域センサ5毎に算出する。基準データとしては、例えば上に説明したように、車両1の入庫時、車両1が停止位置Pに停止した際に取得した被検出点データを使用することができる(図2、ステップS7,S8参照)。
In the foreign matter detection step, first, detection target point data at an arbitrary point in time when foreign matter detection is desired is acquired (step S11). In the case of performing real-time foreign matter detection, the
差分データについて、ダウンサンプリングやノイズ除去といった処理を行い、残った被検出点データについてラベリング処理を行う(ステップS13)。このステップS13では、例えば差分として残った被検出点データのうち、複数の被検出点が互いに近い座標に存在していた場合、それらの被検出点に同じ標識を付し、それらは同一の異物Oに属すると見なす処理を行う。 Processing such as downsampling and noise removal is performed on the difference data, and labeling processing is performed on the remaining detection point data (step S13). In this step S13, for example, among the detected point data remaining as a difference, if a plurality of detected points exist at coordinates close to each other, the detected points are labeled with the same label, and they are identified as the same foreign matter. Perform processing that is considered to belong to O.
続くステップS14~S16では、ステップS12,S13で行った比較の結果、データ間に所定以上の差分が見られるか否かを判定し、これに基づき、ステップS11にて被検出点データを取得した時点において対象領域Aに異物Oが存在するか否かを判定する。ステップS14では、ラベリングされた各測域センサ5の差分データに関し、異物Oの個数をカウントする。一つ以上の測域センサ5において、差分データに一個以上の異物Oと見られる被検出点データが認められたら、検知フラグを立て(ステップS15)、異物検知工程は終了する。いずれの測域センサ5の差分データにも異物Oと見られる被検出点データがなければ、検知フラグを立てずに(ステップS16)、異物検知工程は終了する。
In subsequent steps S14 to S16, as a result of the comparison performed in steps S12 and S13, it is determined whether or not a difference of a predetermined value or more is found between the data, and based on this, the detected point data is acquired in step S11. It is determined whether or not the foreign matter O exists in the target area A at the time point. In step S14, the number of foreign objects O is counted with respect to the labeled differential data of each
以上の異物検知工程において検知フラグが立った場合には、例えばパレット2の移動、あるいは入出庫口4の開閉といった動作を停止したり、操作を禁止するなどの処置を行う。また、必要に応じて警報装置8から警報を発報する。そして、例えば係員等により対象領域A内に異物Oが無いことが確認され、警報が解除されたら、再度上記の異物検知工程を実行する。異物検知工程を再実行し、検知フラグが立った場合には、パレット2、入出庫口4等の操作を禁止したままとし、検知フラグが立たなければ、操作の禁止を解除すれば良い。
If the detection flag is set in the above foreign matter detection process, for example, actions such as movement of the
このような異物検知システムおよび方法によれば、対象領域Aに対して測域センサ5を配置した簡単な構成により、対象領域A内の異物Oを検知することができる。上記特許文献1に記載の技術のように床面で異物を検知するシステムとは異なり、測域センサ5の照射波により空間を走査するので、パレット2上の異物Oをも検知することが可能である。また、取得した被検出点データから異物Oの存在を検知するにあたっては、任意の時点に取得した被検出点データを、別の時点に取得した基準データと直接比較するだけで済む。つまり、上記特許文献2、3に記載の技術のように、物体のサイズを特定したり、重心位置を算出したり、あるいは車両輪郭データを取得するといった複雑な演算を必要としない。両データの差分を取るなど、データ同士を直接比較することで異物Oを検知することができるので、異物検知にあたってはごく単純な演算を行えば良く、高速且つ信頼性の高い検知が可能である。
According to such a foreign object detection system and method, a foreign object O in the target area A can be detected with a simple configuration in which the
また、本実施例の異物検知システムでは、図2に示す如き車両1の停止判定をも行うことができる。このようにすると、停止判定のための装置等を別途設置することなく、異物検知システムのみによって車両1の停止判定から異物Oの検知までの工程を実行することができる。例えば、上記特許文献3に記載の如き技術では、車両がパレット上の定位置に停止したことを、測域センサーとは別に設置された位置センサーにより判定し、それを条件としてトリガー信号が発信され、車両輪郭データの取得が開始されるようになっている。このようなシステムでは、例えば前記位置センサーに何らかの不具合が生じた場合に、異物検知を実行できなくなることが考えられる。本実施例のように、異物検知工程(図3参照)に加え、同じシステムにより車両1の停止判定工程(図2参照)を実行するようにすれば、仮に車両1の停止判定のために別途設置した装置等に不具合が生じたとしても、それを原因として異物検知工程までもが適切に実施できなくなるようなことはない。また、例えば上に説明したように、停止判定の工程中に、または該工程に前後して取得した被検出点データを、後述する異物検知の工程に利用するといったことも容易にできる。
Further, in the foreign object detection system of this embodiment, it is possible to determine whether the
尚、ここでは、対象領域Aの例として、車両1の搬送のための装置としてパレット2のみを備えた入出庫スペースを説明したが、対象領域Aの形式はこれに限定されない。例えば、パレットの手前にターンテーブルを備えた形式の入出庫スペースにおいて、前記ターンテーブルおよびその周辺と、前記パレットおよびその周辺に、それぞれ本開示における異物検知システムと同様のシステムを備えることもできる。あるいは、機械式駐車場に限らず、例えば電気自動車の給電設備など、車両の周辺で何らかの操作を行う設備一般に広く適用し得る。
Here, as an example of the target area A, a loading/unloading space provided with only the
以上のように、上記本実施例の異物検知方法においては、車両1の進入する対象領域A内を測定する測域センサ5を対象領域Aに対して配置し、対象領域A内に異物Oのない状態で、測域センサ5により被検出点データを基準データとして取得するステップS7,S8と、任意の時点において測域センサ5により被検出点データを取得するステップS11と、前記任意の時点に取得した被検出点データを前記基準データと比較するステップS12,S13と、該ステップS12,S13においてデータ間に所定以上の差分が見られた場合に、前記任意の時点において対象領域A内に異物Oが存在すると判定するステップS14~S16とを含む異物検知工程を実行するようにしている。このようにすると、対象領域Aに対して測域センサ5を配置した簡単な構成により、対象領域A内の異物Oを検知することができる。異物検知にあたっては、データに対しごく単純な演算を行えば良く、高速且つ信頼性の高い検知が可能である。
As described above, in the foreign matter detection method of the present embodiment, the
本実施例の異物検知方法において、前記基準データは、対象領域Aに車両1が進入し、対象領域A内の停止位置Pに停止した時に取得される被検出点データとすることができる。
In the foreign object detection method of this embodiment, the reference data can be detection point data acquired when the
本実施例の異物検知方法においては、前記異物検知工程に加え、対象領域A内への車両1の進入に伴い、測域センサ5を作動させて対象領域A内の測定を時々刻々実行するステップS1,S2と、直近の時点に取得された被検出点データと、その前の時点に取得された被検出点データとを比較するステップS3,S4と、被検出点データ同士の差分が所定値以下である状態が所定時間以上継続した場合に、車両1が停止したと判定するステップS5,S6とを含む車両の停止判定工程を実行するようにしている。このようにすると、対象領域Aにおける車両1の移動や停止と、車両1周辺での各種の操作とをスムーズに連携させることができる。
In the foreign matter detection method of the present embodiment, in addition to the foreign matter detection step, as the
本実施例の異物検知方法においては、前記基準データとして、前記車両1の停止判定工程で、車両1の停止が判定される直前において被検出点データ同士の差分が所定値以下である状態が継続している途中に取得した被検出点データ、または、前記車両1の停止判定工程で、車両1の停止が判定された直後に取得した被検出点データを使用することができる。
In the foreign object detection method of the present embodiment, as the reference data, in the stop determination step of the
また、本実施例の異物検知システムは、車両1の進入する対象領域A内を測定する測域センサ5を備え、対象領域A内に異物Oのない状態で測域センサ5により被検出点データを基準データとして取得すると共に、任意の時点において測域センサ5により被検出点データを取得し、前記任意の時点に取得した被検出点データを前記基準データと比較し、データ間に所定以上の差分が見られた場合に、前記任意の時点において対象領域A内に異物Oが存在すると判定するよう構成されている。このようにすると、対象領域Aに対して測域センサ5を配置した簡単な構成により、対象領域A内の異物Oを好適に検知することができる。
Further, the foreign object detection system of this embodiment is provided with a
本実施例の異物検知システムにおいて、測域センサ5は、対象領域Aに対して2個以上が設置され、平面視で車両1の停止位置Pの全周を測定範囲に含むように配置されているので、車両1の周辺の領域全体について漏れなく異物検知を行うことができる。
In the foreign object detection system of this embodiment, two or
したがって、上記本実施例によれば、対象領域内の異物を簡便に検知し得る。 Therefore, according to the present embodiment, it is possible to easily detect a foreign object in the target area.
尚、本開示において説明した本発明の異物検知方法およびシステムは、上述の実施例にのみ限定されるものではなく、要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。 The foreign matter detection method and system of the present invention described in the present disclosure are not limited to the above-described embodiments, and can of course be modified in various ways without departing from the scope of the invention.
1 車両
2 パレット
3 搬送口
4 入出庫口
5 測域センサ
5a 測定信号
6 制御装置
7 入庫スイッチ
7a 入庫信号
8 警報装置
8a 警報信号
A 対象領域
O 物体(異物)
P 停止位置
REFERENCE SIGNS
P stop position
Claims (6)
対象領域の停止位置に車両が停止しており、且つ対象領域内に異物のない状態で、前記測域センサにより被検出点データを基準データとして取得するステップと、
対象領域の停止位置に車両が停止している任意の時点において前記測域センサにより被検出点データを取得するステップと、
前記任意の時点に取得した車両の停止した領域の被検出点を含む被検出点データを、車両の停止した領域の被検出点を含む前記基準データと比較するステップと、
該ステップにおいてデータ間に所定以上の差分が見られた場合に、前記任意の時点において対象領域内に異物が存在すると判定するステップと
を含む異物検知工程を実行する異物検知方法。 A range sensor for measuring the target area into which the vehicle enters is arranged with respect to the target area,
a step of obtaining detected point data as reference data by the range sensor in a state where the vehicle is stopped at a stop position of the target area and there is no foreign object in the target area;
a step of acquiring detected point data by the range sensor at an arbitrary point in time when the vehicle is stopped at a stop position in the target area ;
a step of comparing the detected point data including the detected points in the area where the vehicle has stopped , acquired at the arbitrary time, with the reference data including the detected points in the area where the vehicle has stopped ;
and determining that a foreign object exists in the target area at the arbitrary point in time when a difference of a predetermined value or more is found between the data in the step.
対象領域内への車両の進入に伴い、前記測域センサを作動させて対象領域内の測定を時々刻々実行するステップと、
直近の時点に取得された被検出点データと、その前の時点に取得された被検出点データとを比較するステップと、
被検出点データ同士の差分が所定値以下である状態が所定時間以上継続した場合に、車両が停止したと判定するステップと
を含む車両の停止判定工程を実行する、請求項1または2に記載の異物検知方法。 In addition to the foreign matter detection step,
a step of actuating the range sensor to measure the target area from time to time as the vehicle enters the target area;
a step of comparing detected point data acquired at the most recent time point with detected point data acquired at an earlier time point;
3. The vehicle stop determination step of determining that the vehicle has stopped when a state in which the difference between the detected point data is equal to or less than a predetermined value continues for a predetermined time or longer. foreign object detection method.
前記車両の停止判定工程で、車両の停止が判定される直前において被検出点データ同士の差分が所定値以下である状態が継続している途中に取得した被検出点データ、または、
前記車両の停止判定工程で、車両の停止が判定された直後に取得した被検出点データ
を使用する、請求項3に記載の異物検知方法。 As the reference data,
In the vehicle stop determination step, the detected point data acquired while the state in which the difference between the detected point data is equal to or less than a predetermined value continues immediately before it is determined that the vehicle is stopped; or
4. The foreign matter detection method according to claim 3, wherein, in said vehicle stop determination step, detected point data acquired immediately after it is determined that the vehicle has stopped is used.
対象領域の停止位置に車両が停止しており、且つ対象領域内に異物のない状態で前記測域センサにより被検出点データを基準データとして取得すると共に、
対象領域の停止位置に車両が停止している任意の時点において前記測域センサにより被検出点データを取得し、
前記任意の時点に取得した車両の停止した領域の被検出点を含む被検出点データを、車両の停止した領域の被検出点を含む前記基準データと比較し、データ間に所定以上の差分が見られた場合に、前記任意の時点において対象領域内に異物が存在すると判定するよう構成された異物検知システム。 Equipped with a range sensor that measures the target area into which the vehicle enters,
While the vehicle is stopped at the stop position of the target area and there is no foreign object in the target area, data of the point to be detected is acquired as reference data by the range sensor, and
Acquiring detected point data by the range sensor at an arbitrary time when the vehicle is stopped at the stop position of the target area ,
The detected point data including the detected points in the stopped area of the vehicle acquired at the arbitrary time is compared with the reference data including the detected points in the stopped area of the vehicle, and a difference of a predetermined value or more exists between the data. A foreign object detection system configured to determine, if seen, that a foreign object is present in the region of interest at the given time.
6. The foreign object detection system according to claim 5, wherein two or more of said range sensors are installed with respect to the target area, and arranged so that the measurement range includes the entire circumference of the stop position of the vehicle in plan view.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018202157A JP7176926B2 (en) | 2018-10-26 | 2018-10-26 | Foreign object detection method and system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018202157A JP7176926B2 (en) | 2018-10-26 | 2018-10-26 | Foreign object detection method and system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020067437A JP2020067437A (en) | 2020-04-30 |
JP7176926B2 true JP7176926B2 (en) | 2022-11-22 |
Family
ID=70390173
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018202157A Active JP7176926B2 (en) | 2018-10-26 | 2018-10-26 | Foreign object detection method and system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7176926B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7515371B2 (en) | 2020-10-30 | 2024-07-12 | Ihi運搬機械株式会社 | Unmanned Verification System and Method |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009167645A (en) | 2008-01-14 | 2009-07-30 | Toyota Motor Corp | Parking supporting system and building |
JP2011164665A (en) | 2010-02-04 | 2011-08-25 | Panasonic Corp | Vehicle surrounding change detection device |
JP2012059211A (en) | 2010-09-13 | 2012-03-22 | Denso Corp | Portable unit and vehicle system |
JP2013096092A (en) | 2011-10-28 | 2013-05-20 | Sumitomo Heavy Ind Ltd | Vehicle protrusion detection device and method for mechanical parking facility |
JP2014080735A (en) | 2012-10-12 | 2014-05-08 | Mitsubishi Heavy Industries Pariking Co Ltd | Area detector, mechanical parking facility with the same, and control method for the same |
JP2014164538A (en) | 2013-02-26 | 2014-09-08 | Denso Corp | Control system |
CN108132032A (en) | 2018-01-31 | 2018-06-08 | 深圳市奇见科技有限公司 | The carbody inspection system and its detection method of a kind of vertical circulating garage |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0962842A (en) * | 1995-08-21 | 1997-03-07 | Fujitsu General Ltd | Parking lot management system |
JP3527362B2 (en) * | 1995-12-21 | 2004-05-17 | 新明和工業株式会社 | Human detection device in parking lot |
-
2018
- 2018-10-26 JP JP2018202157A patent/JP7176926B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009167645A (en) | 2008-01-14 | 2009-07-30 | Toyota Motor Corp | Parking supporting system and building |
JP2011164665A (en) | 2010-02-04 | 2011-08-25 | Panasonic Corp | Vehicle surrounding change detection device |
JP2012059211A (en) | 2010-09-13 | 2012-03-22 | Denso Corp | Portable unit and vehicle system |
JP2013096092A (en) | 2011-10-28 | 2013-05-20 | Sumitomo Heavy Ind Ltd | Vehicle protrusion detection device and method for mechanical parking facility |
JP2014080735A (en) | 2012-10-12 | 2014-05-08 | Mitsubishi Heavy Industries Pariking Co Ltd | Area detector, mechanical parking facility with the same, and control method for the same |
JP2014164538A (en) | 2013-02-26 | 2014-09-08 | Denso Corp | Control system |
CN108132032A (en) | 2018-01-31 | 2018-06-08 | 深圳市奇见科技有限公司 | The carbody inspection system and its detection method of a kind of vertical circulating garage |
Also Published As
Publication number | Publication date |
---|---|
JP2020067437A (en) | 2020-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5984613B2 (en) | Area detection device, mechanical parking equipment provided with the same, and control method thereof | |
US10040676B2 (en) | Vehicle and environmental detection system | |
JP6828825B2 (en) | Parking control method and parking control device | |
JP6159127B2 (en) | Garbage collection system in apartment houses | |
JP2009234716A (en) | Elevator system and method of controlling the same | |
KR20170069212A (en) | Door system with sensor unit for contactless passenger monitoring | |
JP4655566B2 (en) | Elevator boarding / alighting system for autonomous mobile robot | |
JP2018112048A (en) | Warehousing control method and leaving control method of mechanical parking device | |
JP2017031682A (en) | Mechanical parking device | |
JP2013249693A (en) | Detection system for remainder in parking lot and detection method for remainder in vehicle | |
JP7176926B2 (en) | Foreign object detection method and system | |
JP2017128882A (en) | Management system of mechanical parking lot, and mechanical parking lot control device for use in the same | |
JP7126436B2 (en) | Foreign object detection method and system | |
JP7176925B2 (en) | Foreign object detection method and system | |
JP7036278B2 (en) | Logistics system and unmanned aircraft | |
JP7190366B2 (en) | Vehicle stop determination method, foreign object detection method, and system using these | |
JP2020012269A (en) | Mechanical parking device | |
EP3882199A2 (en) | Specialized, personalized and enhanced elevator calling for robots & co-bots | |
JP2023001935A (en) | Unmanned confirmation device, parking device, and method of controlling parking device | |
JP2009211442A (en) | Control method for unmanned conveyor | |
JP6868070B2 (en) | Mechanical parking device and control method of mechanical parking device | |
JP2020084602A (en) | Mechanical parking device, and safety confirmation method and safety confirmation program therefor | |
TWI228481B (en) | Transport system | |
JP7284942B1 (en) | elevator door control system | |
JP2020172853A (en) | Mechanical parking device and its control method and control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210615 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220614 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220729 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221025 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7176926 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |