JP7448509B2 - 情報処理装置、情報処理方法、および情報処理プログラム - Google Patents

情報処理装置、情報処理方法、および情報処理プログラム Download PDF

Info

Publication number
JP7448509B2
JP7448509B2 JP2021145896A JP2021145896A JP7448509B2 JP 7448509 B2 JP7448509 B2 JP 7448509B2 JP 2021145896 A JP2021145896 A JP 2021145896A JP 2021145896 A JP2021145896 A JP 2021145896A JP 7448509 B2 JP7448509 B2 JP 7448509B2
Authority
JP
Japan
Prior art keywords
time
bus
bus stop
expected arrival
customer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021145896A
Other languages
English (en)
Other versions
JP2023038993A (ja
Inventor
哲也 増田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Platforms Ltd
Original Assignee
NEC Platforms Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Platforms Ltd filed Critical NEC Platforms Ltd
Priority to JP2021145896A priority Critical patent/JP7448509B2/ja
Publication of JP2023038993A publication Critical patent/JP2023038993A/ja
Application granted granted Critical
Publication of JP7448509B2 publication Critical patent/JP7448509B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Description

本開示は、バスの運行情報を処理する装置等に関し、特に、バス停留所にバスが到着する時刻を予測する装置等に関する。
バスの運行を制御することにおいて、バス停留所にバスが到着する時刻を予測する技術が知られている。
特許文献1には、バスの運行スケジュール、位置情報、および運行履歴に基づいて到着時刻を予測し、バス停留所に設置されたIC(Integrated Circuit)チップを読み取った端末に送信して表示させるバスロケーションシステムが記載されている。
特開2014-49082号公報
しかしながら、上述した特許文献1に記載されたバスロケーションシステムは、バス停留所において、その時々で異なる人数の乗客がバスに乗り込むために停留する時間が変化することが、予想到着時刻に考慮されていない。
本開示の目的の一例は、バスの到着時刻を精度よく予測することができる情報処理装置等を提供することにある。
本開示の一態様における情報処理装置は、バス停留所の付近を撮影した停留所画像を取得する取得手段と、前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類手段と、前記利用客の人数および前記利用客候補の人数を検出する検出手段と、前記検出の結果に基づいて、前記バス停留所における乗車時間を算出する算出手段と、を備える。
本開示の一態様における情報処理システムは、情報処理装置と、前記停留所画像を撮影する撮影手段と、予想到着時刻を出力する出力手段と、を備える。情報処理装置は、バス停留所の付近を撮影した停留所画像を取得する取得手段と、前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類手段と、前記利用客の人数および前記利用客候補の人数を検出する検出手段と、前記検出の結果に基づいて、前記バス停留所における乗車時間を算出し、さらに、前記乗車時間に基づいて、停留予定のバス停留所に到着する予想到着時刻を算出する算出手段と、前記予想到着時刻を出力手段に送信する送信手段と、を備える。
本開示の一態様における情報処理方法は、バス停留所の付近を撮影した停留所画像を取得し、前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類し、前記利用客の人数および前記利用客候補の人数を検出し、前記検出の結果に基づいて、前記バス停留所における乗車時間を算出する。
本開示の一態様における情報処理プログラムは、コンピュータに、バス停留所の付近を撮影した停留所画像を取得する取得処理と、前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類処理と、前記利用客の人数および前記利用客候補の人数を検出する検出処理と、前記検出の結果に基づいて、前記バス停留所における乗車時間を算出する算出処理と、を実行させる。
本発明による効果の一例は、バスの到着時刻を精度よく予測することができることである。
図1は、本開示における情報処理システムの利用シーンの一例を示す図である。 図2は、本開示における端末の表示画面の一例を示す図である。 図3は、本開示におけるバス内の表示画面の一例を示す図である。 図4は、第一実施形態における情報処理装置の構成を示すブロック図である。 図5は、第一実施形態における、人物の年代ごとの乗車時間を表した表の一例である。 図6は、第一実施形態における、情報処理装置の動作を示すフローチャートである。 図7は、第二実施形態における情報処理システムの構成を示すブロック図である。 図8は、第二実施形態における、情報処理システムの動作を示すフローチャートである。 図9は、変形例における、バス停留所の曜日および時間帯ごとの平均降車時間を表した表の一例である。 図10は、本開示における情報処理装置をコンピュータ装置とその周辺装置で実現したハードウェア構成を示す図である。
まず、本開示の概略の一例を、図1、図2及び図3を用いて説明する。
図1は、本開示における情報処理システムの利用シーンの一例を示す図である。
図1において、撮影装置300は、バス停留所600の周辺を撮影する。撮影装置300が撮影する領域は、例えば図1に示す撮影範囲301のように表される。撮影装置300は、バス500を利用する人物を撮影できるよう、撮影範囲301を調整して設置される。撮影した画像は停留所画像として情報処理装置200に送信される。情報処理装置200は、停留所画像の解析を行い、停留所画像に含まれる人物を、通行人、利用客候補、利用客に分類する。そして、情報処理装置200は、利用客候補の人数と利用客の人数を検出し、検出した結果に基づいて、バス停留所600における乗車時間を算出する。
これにより、情報処理装置200は、バス停留所600における利用客および利用客候補の乗車時間に基づいて、精度よくバス500の予想到着時刻を算出することが可能となる。ここで、予想到着時刻は、例えば、バス500が次に停留するバス停留所600よりも後に、バス500が停留する予定のバス停留所に到着する予想到着時刻を意味する。すなわち、次にバス500が停留するバス停留所がバス停留所600である場合、算出した乗車時間に基づいて、情報処理装置200は、バス停留所600以降に停留予定のバス停留所に到着する予想到着時刻を算出する。各バス停留所での乗車時間は、履歴情報としてメモリに記憶されてもよい。一般に、バス停留所間のバスの走行時間は、バス停留所間の距離や交通量でほぼ決まり、既知であるが、バス停留所での乗車時間は、利用者の人数で大きく変わる。したがって、乗車時間を精度良く算出できれば、バスの到着時刻を精度よく予測することができる。
予想到着時刻は、情報処理装置200によって、バス500内の装置やバスの乗客の持つ端末、または停留予定のバス停留所に設置された出力手段などの送信先の通信手段に送信される。これにより、バスの運転手、バスの乗客、またはバスを利用としようとする乗客が、バス停留所600以降に停留予定のバス停留所にバス500が到着する時刻を知ることができる。例えば、バスの乗客が持つ端末装置は、図2のように、予想到着時刻を表示する。また、バスの乗客が持つ端末装置は、予想到着時刻に加えて、または予想到着時刻に代えて、遅延時間を表示してもよい。例えば、遅延時間は、停留予定のバス停留所までの予測運行時間と、算出された乗車時間との和と、運行中のバスが停留予定のバス停留所に到着するまでの通常運行スケジュールに基づく通常到着時間との差である。あるいは、図3のように、バスの運転手に対してバス内の装置が、予想到着時刻を表示する。また、バス内の装置は、算出された乗車時間を表示してもよい。
また、バス停留所において、その時々で多様な乗客がバスに乗り込むために停留する時間が変化することが予想される。例えば、停留所画像に含まれる人物801が利用客として分類されているとする。人物801は、車いすを利用している。一般に、車いすを利用する人物は、車いすを利用しない人物に比べて、バスに乗車する時間が長くなる。この場合、情報処理装置200は、車いすを利用する人物801を停留所画像から検出し、人物801がバスに乗車するためにかかる乗車時間を考慮して、バス停留所600においてバス500に利用客が乗車する乗車時間を算出する。これにより、さらに精度よくバス500が、バス停留所600以降のバス停留所に到着する到着時刻を予測することが可能となる。
以上説明したように、本開示によれば、バス停留所600で乗客がバス500に乗車する乗車時間を算出することで、バス500がバス停留所600以降のバス停留所に到着する到着時刻をより精度よく予測することができる。
次に、実施形態について図面を参照して詳細に説明する。
[第一実施形態]
図4は、第一実施形態における情報処理装置100の構成を示すブロック図である。図4を参照すると、情報処理装置100は、取得部101と分類部102と検出部103と算出部104と、を備える。
次に、第一実施形態における情報処理装置100の構成について詳しく説明する。
図4において、取得部101は、バス停留所の付近を撮影した停留所画像を取得する。停留所画像は、バス停留所の付近に設置された撮影装置によって撮影される。
分類部102は、取得部101が取得した停留所画像を解析することにより、停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する。本実施形態において、利用客は、バス停留所からバスに乗車する可能性が高い人物である。また、通行人は、バス停留所からバスに乗車する可能性が低い人物である。利用客候補は、バス停留所からバスに乗車する可能性が、利用客より低く、通行人より高い人物であり、利用客となる可能性がある人物である。
例えば、分類部102は、抽出部と人物分類部を持つ。抽出部が、停留所画像から、人物と、その人物の特徴情報を画像解析によって抽出する。抽出部が抽出した人物の特徴情報に基づいて、人物分類部が、停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する。特徴情報とは、例えば、人物を識別するための特徴、人物がバス停留所の付近に滞留している時間、または人物の行動を示す情報である。
また、抽出部が抽出する特徴情報は、人物の属性の情報を含んでもよい。人物の属性の情報は、人物がバスに乗車するためにかかる時間が変化する要因となる属性の情報を含む。例えば、人物の属性とは、人物の年代である。例えば、人物が70代以上であると、バスに乗車する時間が、10代から60代の人物と比較して長くなる傾向がある。あるいは、人物が未就学児である場合、10代から60代の人物と比較してスムーズに乗車せず、バスに乗車する時間が長くなることがある。このように、人物の属性によって、バスに乗車するためにかかる時間を予測することができる。他にも、乗車に介助が必要な車いす等の利用有無、杖やベビーカー、または大きな荷物の有無、バス停留所から離れて待っていることなどが、人物がバスに乗車するためにかかる時間が変化する要因となる属性の情報の例として挙げられる。
分類部102は、停留所画像に含まれる人がバス停留所の付近に滞留している時間と、停留所画像に含まれる人物の行動とのうち、少なくともいずれか一つに基づいて、停留所画像に含まれる人物を、前述のように分類する。
分類部102が行う分類の方法の一例を説明する。この例では、停留所画像に含まれる人物を、人物が滞留している時間に基づいて、分類部102が利用客、利用客候補、または通行人のいずれかに分類する。分類部102は、まず、抽出された人物を通行人に分類する。次に、通行人がバス停留所の付近に滞留している時間が、第1の閾値を超えたとき、分類部102は、当該通行人を利用客候補に分類する。さらに、利用客候補が、バス停留所の付近にさらに滞留し続け、滞留している時間が第2の閾値を超えたとき、分類部102は、当該利用客候補を利用客に分類する。このとき、第1の閾値と第2の閾値の各値は、第2の閾値が第1の閾値よりも大きいという条件内で、設定される。すなわち、分類部102は、停留所画像に含まれる人物がバス停留所の付近に滞留する時間が長いほど利用客である可能性が高いとして、停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する。
また、分類部102は、例えば、停留所画像に含まれていた人物が停留所画像に含まれなくなった場合に行う処理を、以下のように通行人、利用客候補、利用客によって変えてもよい。停留所画像に含まれていた人物が停留所画像に含まれなくなることは、停留所画像の撮影範囲から撮影範囲外に当該人物が移動した場合に生じる。分類部102は、通行人に分類されている人物が停留所画像に含まれなくなったことを検出した場合、当該人物がバス停留所を離れたと判断する。そして、分類部102は、当該人物の情報を削除する。また、利用客候補に分類されている人物が停留所画像に含まれなくなった状態で、一定時間経過した場合、分類部102は、当該人物の情報を削除する。さらに、利用客に分類されている人物が停留所画像に含まれなくなった場合は、分類部102は、一定時間経過するまでは当該人物の情報を削除しない。さらに、当該人物を利用客から利用客候補に分類してもよい。これにより、情報処理装置100は、一時的にバス停留所を離れた利用客でも、バス停留所における乗車時間に加味することができる。
また、分類部102が行う分類の他の例を説明する。この例では、停留所画像に含まれる人物を、人物の行動を示す情報に基づいて、分類部102が利用客、利用客候補、または通行人のいずれかに分類する。分類部102は、停留所画像に含まれる人物が一定以上の速さで移動している、すなわち停留所画像に含まれる人物の移動速度が一定の値以上であることが特徴情報として抽出された場合、当該人物を通行人に分類する。また、分類部102は、停留所画像に含まれる人物がバス停留所の付近に滞留している場合、あるいは移動速度が一定の値未満の場合、当該人物を利用客候補に分類する。また例えば、分類部102は、停留所画像に含まれる人物がバス停留所の時刻表を見ている、ベンチに座る、などの行動があった場合に、当該人物を利用客候補に分類してもよい。さらに、分類部102は、停留所画像に含まれる人物がバス停留所の列に並んでいる場合、当該人物を利用客に分類する。なお、上述した移動速度の一定の値は、例えば人間が歩行する際の速さに基づいて定められればよい。
さらに、上記2つの分類の方法の例を組み合わせて、分類部102は停留所画像に含まれる人物の分類を行ってもよい。また、分類部102は、停留所画像に含まれる人物の特徴情報を学習モデルへの入力とし、学習モデルを用いて人物を通行人、利用客候補、または利用客に分類するようにしてもよい。この場合に、学習モデルは、ニューラルネットワークなどの機械学習により、停留所画像に含まれる人物の特徴情報と、通行人、利用客候補または利用客のいずれかとの関係性を学習することで生成される。停留所画像に含まれる人物の特徴情報は、事前に収集される。
分類部102は、例えば、バス停留所にバスが停留し、その後出発したタイミングで、停留所画像、停留所画像から抽出された人物の特徴情報、および停留所画像に含まれる人物を分類した情報をすべて削除することによって初期化してもよい。この場合、バス停留所にバスが停留し、その後出発したタイミングは、停留所画像の解析によって検出されてもよいし、バスの運行予定の停留および発車時刻でもよい。または、分類部102は、停留所画像から抽出された人物のうち、バスに乗車した人物の特徴情報、または停留所画像をデータベースに蓄積することによって、分類部102が行う分類を最適化してもよい。
検出部103は、分類部102によって分類された、利用客の人数および利用客候補の人数を検出する。また、例えば、検出部103は、特徴情報として抽出された人物の属性ごとの利用客の人数、および、特徴情報として抽出された人物の属性ごとの利用客候補の人数を検出してもよい。例えば、検出部103は、利用客の年代ごとの人数、および、利用客候補の年代ごとの人数を検出してもよい。
算出部104は、検出部103が行った検出の結果に基づいて、バス停留所における乗車時間を算出する。例えば、利用客の人数、および利用客候補の人数に、一人当たりにかかる乗車時間を乗算して、乗車時間を算出する。このとき、一人当たりにかかる乗車時間は、例えば、平均値である。
また、検出部103が、人物の属性ごとの利用客の人数および人物の属性ごとの利用客候補の人数を検出している場合、算出部104は、属性ごとの一人当たりの乗車時間を属性ごとの人数に乗算して属性ごとの乗車時間を算出する。そして、算出部104は、属性ごとの乗車時間を足し合わせることによって乗車時間を算出してもよい。乗車時間を算出するための人物の属性は、この例に限られない。また、乗車時間を算出するための人物の属性は、複数の属性を考慮することができる。
ここで、属性として人物の年代を用いた乗車時間の算出の一例について、図5を用いて説明する。図5は、人物の年代ごとの一人当たりの乗車時間を表した表の一例である。まず、検出部103が、バス停留所における利用客の年代ごとの人数として、10代までが3人、20~40代が1人、50~60代が1人、70代以上が3人と検出したとする。また、検出部103が、バス停留所における利用客候補の年代ごとの人数として、10代までが1人、20~40代が2人、50~60代が0人、70代以上が2人と検出したとする。まず、利用客の年代ごとの人数に年代ごとの一人当たりの乗車時間を乗算して、利用客の乗車時間を算出する。そして、利用客候補の年代ごとの人数に年代ごとの一人当たりの乗車時間を乗算して、利用客候補の乗車時間を算出する。そして、利用客の乗車時間と利用客候補の乗車時間を足し合わせて、バス停留所における乗車時間を算出する。この場合、バス停留所における乗車時間は、87秒であると予測される。
ここで説明した乗車時間の算出の一例における、年代の分け方や、一人当たりの乗車時間は一例であり、これに限られない。また、この例では、算出部104は、利用客の乗車時間と利用客候補の乗車時間を足し合わせて乗車時間としたが、例えば、乗車時間を、利用客のみの乗車時間から、利用客の乗車時間と利用客候補の乗車時間を足し合わせた乗車時間というように、幅を持たせた予測にしてもよい。上述の例において、幅を持たせた予測を行うと、このバス停留所における乗車時間は48秒から87秒であると予測される。
また、図5の人物の年代ごとの一人当たりの乗車時間を表した表の一例では、利用客と利用客候補で、一人当たりの乗車時間が異なる。これは、利用客候補が、バス停留所において、列に並んでいなかったり、バス停留所から離れた場所にいたり、乗るバスを迷っていたりすることが想定されるためである。このため、利用客候補は、利用客と比較して乗車に時間がかかることが想定される。しかし、利用客候補の一人当たりの乗車時間は、この例に限られず、利用客の一人当たりの乗車時間と同様に設定されてもよい。
算出部104は、算出した乗車時間に基づいて、停留予定のバス停留所に到着する予想到着時刻を算出することができる。例えば、バスが搭載するGPS(Global Positioning System)による位置情報、および渋滞の有無などの交通情報、運行スケジュール、バスが前に出発したバス停留所の出発時刻などに基づいて、算出部104は、予想到着時刻を算出する。
バスがバス停留所A、バス停留所B、バス停留所Cの順に運行する場合の予想到着時刻の一例について説明する。バスがバス停留所Aを10時23分に出発し、10時25分現在、バス停留所Bに10時26分に到着すると予測されている。算出部104が算出したバス停留所Bにおける乗車時間が2~3分であった場合、通常の運行スケジュールによりバス停留所Cまでは移動に2分かかると予測されると、バス停留所Cに到着する到着時刻は10時30分から10時31分であると予測される。
以上のように構成された情報処理装置100の動作について、図6のフローチャートを参照して説明する。
図6は、第一実施形態における情報処理装置100の動作の概要を示すフローチャートである。尚、このフローチャートによる処理は、プロセッサによるプログラム制御に基づいて、実行されてもよい。
図6に示すように、まず、取得部101は、撮影装置300が撮影した停留所画像を取得する(ステップS101)。
次に、分類部102は、停留所画像から人物と当該人物の特徴情報を抽出する(ステップS102)。
次に、分類部102は、特徴情報に基づいて、人物を通行人、利用客候補、または利用客に分類する(ステップS103)。
次に、検出部103は、分類部102の分類に基づいて、利用客候補の人数および利用客の人数を検出する(ステップS104)。
次に、算出部104は、検出部103が検出した結果に基づいて、バス停留所における乗車時間を算出する(ステップS105)。
以上で、情報処理装置100は、一連の動作を終了する。この一連の動作は、一定間隔で行われる。また、上述の人物の滞留時間によって人物を分類する場合、一定間隔は第1の閾値および第1の閾値と第2の閾値との差分よりも短い時間である。また、一定間隔が短い場合、より精度よく到着時刻を予測することができる。また、一定間隔が長い場合、情報処理装置100の処理量や記憶領域、撮影装置300の電力などを節約することができる。
上述した本実施形態における情報処理装置は、取得部が、バス停留所の付近を撮影した停留所画像を取得する。取得部が取得した停留所画像を解析することにより、停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する。そして、検出部が、利用客の人数および利用客候補の人数を検出し、算出部が、検出の結果に基づいて、バス停留所における乗車時間を算出する。
その結果、本実施形態における情報処理装置は、バスの到着時刻を精度よく予測することができる。
また、本実施形態における情報処理装置は、利用客の人数に加えて利用客候補の人数に基づいて乗車時間を算出する。その結果、利用客候補が乗車しなかった場合から利用客候補が乗車した場合まで乗車時間および到着時刻を予測することができる。あるいは、利用客に比べて利用客候補がスムーズに乗車できないと想定される場合、利用客と利用客候補で一人当たりの乗車時間に差をつけることで、より精度よく到着時刻を予測することができる。
[第二実施形態]
次に、本開示の第二実施形態について、図面を参照して詳細に説明する。以下、本実施形態の説明が不明確にならない範囲で、前述の説明と重複する内容については説明を省略する。
図7は、本開示の第二実施形態にかかる情報処理システムの構成を示すブロック図である。第二実施形態の情報処理システムは、情報処理装置200と、撮影装置300と、出力部400とを含む。また、第二実施形態にかかる情報処理装置200は、第一実施形態の構成に加えて、送信部205を含む。
撮影装置300は、バス停留所の周辺の画像である、停留所画像を撮影する。撮影装置は、各バス停留所に一つ以上設置される。一つのバス停留所に複数の撮影装置を設置し、撮影装置の死角がなくなるようにしたり、撮影範囲、すなわち人物を抽出および分類する範囲が広くなるようにしたりしてもよい。また、暗視カメラや電灯を用いることによって、夜間のバス停留所でもより確実に人物を確認できるようにしてもよい。撮影装置300が撮影した停留所画像は、情報処理装置200の取得部101に送信される。
第二実施形態において、算出部104は、算出した乗車時間に基づいて、乗車時間を算出したバス停留所よりも後に停留予定のバス停留所に到着する予想到着時刻を算出する。
送信部205は、算出部104が算出した、乗車時間を算出したバス停留所よりも後に停留予定のバス停留所に到着する予想到着時刻を、出力部400に対して送信する。より具体的には、送信部205は、送信先となる出力部400の通信部に対して、予想到着時刻を送信する。あるいは、送信部205は、算出部104が算出した乗車時間を、出力部400に対して送信してもよい。この場合、出力部400は、受信した乗車時間に基づいて、乗車時間を算出したバス停留所よりも後に停留予定のバス停留所に到着する予想到着時刻を出力する。例えば、出力部400は、受信した乗車時間と基準乗車時間との差を算出することによって、後に停留予定のバス停留所に到着する遅延時間を算出して予想到着時刻の代わりに出力してよい。基準乗車時間とは、バス停留所においてバスが停留する時間であって、運行スケジュールに加味されている時間である。
出力部400は、予想到着時刻を送信部205から受信する。そして、受信した予想到着時刻を、バスを利用する人物が取得可能に出力する。出力部400は、例えば表示を行うディスプレイや、音声出力を行うスピーカーであるが、これらに限られない。また、送信され、出力される予想到着時刻は、例えば10時26分などの時刻でもよいし、あるいは運行スケジュールに基づいて、2分遅れや1分早く到着するなどの運行スケジュールとの差分でもよい。
また、送信する予想到着時刻は、第一実施形態でも説明したように、例えば10時30分~10時31分などと、幅を持たせてもよい。この場合、算出部104は、利用客のみの乗車時間に基づいて、第1予想到着時刻を算出し、さらに、利用客と利用客候補との乗車時間に基づいて、第2予想到着時刻を算出する。そして、送信部205が、第1予想到着時刻および第2予想到着時刻を出力部400に送信する。こうすることで、出力部400は、予想到着時刻を第1予想到着時刻から第2予想到着時刻であるというように出力することができる。あるいは、予想到着時刻として第1予想到着時刻または第2予想到着時刻のみを出力することもできる。このように、幅を持たせて予想到着時刻を出力することで、予想到着時刻が外れてしまうことを防ぐことができる。これにより、予想到着時刻を確認するバスのユーザや、バスの運転手の不満を減らすことができる。
出力部400は、例えばバスのユーザが所持する端末の一部である。出力部400は、例えば端末のアプリケーションやウェブサイト上で、受信した予想到着時刻を出力する。出力部400による出力は、ユーザが予想到着時刻を確認したいバスとバス停留所を選択することによって、例えば図2のように画面表示によって行われる。または、ユーザの所持する端末で、バス停留所に設置した二次元バーコードやICチップなどを読み取ることにより、予想到着時刻を出力するウェブサイトなどに誘導し、当該バス停留所に停留するバスの到着時刻を出力するようにしてもよい。あるいは、ユーザが所持する端末による予想到着時刻の出力は、音声によって行われてもよい。
また、出力部400は、例えばバス停留所の出力装置である。バス停留所に表示装置または音声出力装置を設置し、予想到着時刻を出力することにより、バス停留所においてバスを待つユーザが予想到着時刻を知ることができる。
さらに、出力部400は、バス内の出力装置でもよい。例えば、運転席周辺に設置されるバス内の出力装置は、送信部205から予想到着時刻を受信し、予想到着時刻を出力する。バス内の出力装置は、予想到着時刻を、バスの運転手に対して出力してもよいし、バス内の乗客に対して出力してもよい。
また、出力部400がバスの運転手に対して予想到着時刻を出力する場合、予想到着時刻とともに、推奨速度を出力してもよい。この場合、算出部104が算出した予想到着時刻に基づいて、算出部104が、運行スケジュールに沿ってバスが運行できるような速度を、推奨速度として算出する。推奨速度は、予想到着時刻に加えて、バスが搭載するGPSによる位置情報、渋滞の有無や速度制限などの交通情報、運行スケジュール、バスが前に出発したバス停留所の出発時刻などに基づいて、算出されてもよい。算出された推奨速度は、送信部205から出力部400に送信され、出力部400によって、バスの運転手に対して出力される。
以上のように構成された情報処理システムの動作について、図8のフローチャートを参照して説明する。
図8は、第二実施形態における情報処理システムの動作の概要を示すフローチャートである。尚、このフローチャートによる処理は、プロセッサによるプログラム制御に基づいて、実行されてもよい。
図8に示すように、まず、取得部101は、撮影装置300が撮影した停留所画像を取得する(ステップS201)。
次に、分類部102は、停留所画像から人物と当該人物の特徴情報を抽出する(ステップS202)。
次に、分類部102は、特徴情報に基づいて、人物を通行人、利用客候補、または利用客に分類する(ステップS203)。
次に、検出部103は、分類部102の分類に基づいて、利用客候補の人数および利用客の人数を検出する(ステップS204)。
次に、算出部104は、検出部103が検出した結果に基づいて、バス停留所における乗車時間を算出する(ステップS205)。
次に、算出部104は、ステップS205で算出した乗車時間に基づいて、予想到着時刻を算出する(ステップS206)。
次に、送信部205は、ステップS206で算出した予想到着時刻を出力部400に送信し、出力部400は受信した予想到着時刻を出力する(ステップS207)。
以上で、情報処理システムは、一連の動作を終了する。この一連の動作は、一定間隔で行われる。ステップS207の送信および出力の動作は、ステップS201乃至ステップS206とは別のタイミングで行われてもよい。例えば、ステップS207は、予想到着時刻に変化があったときのみ行われて、出力する情報を更新する。
上述した本実施形態における情報処理システムは、取得部が、バス停留所の付近を撮影した停留所画像を取得する。取得部が取得した停留所画像を解析することにより、停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する。そして、検出部が、利用客の人数および利用客候補の人数を検出し、算出部が、利用客の人数および利用客候補の人数に基づいて、バス停留所における乗車時間を算出する。算出した乗車時間に基づいて、算出部がさらに停留予定のバス停留所に到着する予想到着時刻を算出する。そして、送信部が出力部に予想到着時刻を送信し、出力部が予想到着時刻を出力する。
その結果、本実施形態における情報処理システムは、バスの到着時刻を精度よく予測することができる。
また、本実施形態における情報処理システムは、利用客の人数に加えて利用客候補の人数に基づいて乗車時間を算出する。その結果、利用客候補が乗車しなかった場合から利用客候補が乗車した場合まで乗車時間および到着時刻を予測することができる。あるいは、利用客に比べて利用客候補がスムーズに乗車できないと想定される場合、利用客と利用客候補で一人当たりの乗車時間に差をつけることで、より精度よく到着時刻を予測することができる。したがって、バスを利用する人物またはバスの運転手が、より精度の高い予想到着時刻を知ることができる。
[変形例1]
次に、本開示の各実施形態の変形例1について説明する。
変形例1において、分類部102は、利用客候補および利用客のうち、バス停留所の付近のあらかじめ指定された領域に含まれる人物を特定する。検出部103は、当該領域に含まれる利用客および利用客候補の人数を検出し、算出部104が、当該領域に含まれる利用客および利用客候補の人数に基づいて、バス停留所における乗車時間を算出する。
ここで、あらかじめ指定された領域は、例えば、バス停留所において、複数の路線のバスが停留する場合に、それぞれのバスに応じた並び場所である領域である。バスAとバスBが停留するバス停留所において、分類部102は、バス停留所の利用客および利用客候補のうち、バスAの並び場所である領域に含まれる人物を特定する。検出部103は、バスAの並び場所である領域に含まれる利用客の人数および利用客候補の人数を検出し、算出部104がバスAの利用客の人数および利用客候補の人数に基づいて、バスAのバス停留所における乗車時間を算出する。同様に、分類部102は、バス停留所の利用客および利用客候補のうち、バスBの並び場所である領域に含まれる人物を特定する。検出部103は、バスBの並び場所である領域に含まれる利用客の人数および利用客候補の人数を検出し、算出部104がバスBの利用客の人数および利用客候補の人数に基づいて、バスBのバス停留所における乗車時間を算出する。
その結果、バス停留所に複数の路線のバスが停留する場合においても、それぞれのバスの乗車時間をそれぞれ算出することができ、それぞれのバスの到着時刻を精度よく予測することができる。
[変形例2]
次に、本開示の各実施形態の変形例2について説明する。
変形例2において、分類部102は、停留所画像に含まれる人物のうち、利用客の情報を利用履歴情報として蓄積し、例えば、ある人物が一定回数以上バスを利用している場合、定期利用客として、当該人物を利用客に分類してもよい。その結果、例えば、通勤や通学にバスを利用している利用客の分類が簡単にできるようになる。
[変形例3]
次に、本開示の各実施形態の変形例3について説明する。
変形例3において、算出部104は、乗車時間を算出するだけでなく、乗車時間及び降車時間に基づいて、予想到着時刻を算出する。
算出部104は、各実施形態に基づいて、乗車時間を算出する。算出部は、算出した乗車時間と、降車時間を比較し、時間が長い方の値を、バス停留所においてバスが停留する停留時間として算出してもよい。そして、算出部104は停留時間に基づいて、予想到着時刻を算出する。この場合、予想到着時刻は、各実施形態に基づいて、乗車時間の代わりに停留時間を用いて算出される。
降車時間は、例えば平均値を用いる。降車時間の平均値は、バス停留所ごとの平均値でもよいし、時間帯ごとの平均値でもよいし、曜日ごとの平均値でもよい。または、降車時間の平均値は、バスの路線ごとの平均値でもよい。
乗車時間及び降車時間に基づいて、停留時間を算出する方法の例について説明する。算出部104は、図9のような、バス停留所Aにおける曜日および時間帯ごとの平均降車時間の情報を参照して、バス停留所Aにおける停留時間を算出する。例えば、水曜日の9時30分に、バス停留所Aにおける乗車時間が20秒と算出された場合、算出部104は図9を参照し、平均降車時間が46秒であることを取得する。そして、算出部104は、乗車時間と平均降車時間の大きい数値である46秒を、水曜日の9時30分のバス停留所Aにおけるバスの停留時間として算出する。
さらに、降車時間は、バス内の降車ボタンを押した人数に基づいて算出されてもよいし、バス内を監視するカメラの画像を解析してバス内の人物の行動などに基づいて、降車しそうな人数を検出して降車時間を算出してもよい。
その結果、変形例3では、バス停留所において、バスに乗車する人物がいないが、バスから降車する人物がいる場合においても、バスの到着時刻を精度よく予測することができる。
[コンピュータによるハードウェア構成]
以上説明した、本開示の各実施形態における各構成要素は、機能的なブロックで表されており、図10に示すコンピュータ装置と同様に、その機能をハードウェア的に実現することはもちろん、プログラム制御に基づくコンピュータ装置、ファームウェアで実現することができる。
図10は、本開示の各実施形態における情報処理装置100または情報処理装置200を、プロセッサを含むコンピュータ装置10で実現したハードウェア構成の一例を示す図である。図10に示されるように、コンピュータ装置10は、CPU(Central Processing Unit)11、メモリ12、プログラムを格納するハードディスク等の記憶装置13、入力装置および出力装置接続用の入出力I/F(Interface)14、およびネットワーク接続用の通信I/F(Interface)15を含む。
CPU11は、オペレーティングシステムを動作させて本開示の情報処理装置の全体を制御する。また、CPU11は、例えばドライブ装置などに装着された記憶媒体からメモリ12にプログラムやデータを読み出す。また、CPU11は、例えば第一実施形態における分類部102、検出部103の一部として機能し、プログラムに基づいて処理または命令を実行する。
記憶装置13は、例えば光ディスク、フレキシブルディスク、磁気光ディスク、外付けハードディスク、または半導体メモリ等である。記憶装置の一部の記憶媒体は、不揮発性記憶装置であり、そこにプログラムを記録する。また、プログラムは、通信網に接続されている図示しない外部コンピュータからダウンロードされてもよい。
入出力I/F(Interface)14に接続される入力装置は、例えばマウスやキーボード、内蔵のキーボタンなどで実現され、入力操作に用いられる。入力装置は、マウスやキーボード、内蔵のキーボタンに限らず、例えば撮影装置でもよい。
同様に入出力I/F(Interface)14に接続される出力装置は、例えばディスプレイやスピーカーで実現され、出力を確認するために用いられる。
通信I/F(Interface)15は、他装置との有線通信または無線通信を行う。例えば、外部の撮影装置、端末装置、または情報処理装置などとの通信を行う。
以上のように、本開示の各実施形態および各変形例の情報処理装置は、図10に示されるコンピュータ・ハードウェアによって実現される。ただし、情報処理装置が備える各部の実現手段は、以上説明した構成に限定されない。また、情報処理装置は、物理的に結合した一つの装置により実現されてもよいし、物理的に分離した二つ以上の装置を有線または無線で接続し、これら複数の装置により実現されてもよい。例えば、入力装置および出力装置は、コンピュータ装置10とネットワークを経由して接続されていてもよい。
以上、各実施形態およびその変形例を参照して本発明を説明したが、本発明は上記実施の形態に限定されるものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解しえる様々な変更をすることができる。
たとえば、複数の動作をフローチャートの形式で順番に記載してあるが、その記載の順番は複数の動作を実行する順番を限定するものではない。このため、各実施形態を実施するときには、その複数の動作の順番は内容的に支障しない範囲で変更することができる。
上記の各実施形態およびその変形例の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
(付記1)
バス停留所の付近を撮影した停留所画像を取得する取得手段と、
前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類手段と、
前記利用客の人数および前記利用客候補の人数を検出する検出手段と、
前記検出の結果に基づいて、前記バス停留所における乗車時間を算出する算出手段と、
を備える情報処理装置。
(付記2)
前記算出手段は、前記乗車時間に基づいて、停留予定のバス停留所に到着する予想到着時刻を算出する
ことを特徴とする、付記1に記載の情報処理装置。
(付記3)
送信手段をさらに備え、
前記算出手段は、前記利用客の前記乗車時間に基づいて第1予想到着時刻を算出し、さらに、前記利用客と前記利用客候補の前記乗車時間に基づいて第2予想到着時刻を算出し、
前記送信手段は、前記第1予想到着時刻および前記第2予想到着時刻を前記予想到着時刻として送信する
ことを特徴とする、付記2に記載の情報処理装置。
(付記4)
前記検出手段は、前記利用客の属性ごとの人数および前記利用客候補の属性ごとの人数を検出し、
前記算出手段は、属性ごとの一人当たりの乗車時間に基づいて、乗車時間を算出する
ことを特徴とする、付記2または3に記載の情報処理装置。
(付記5)
前記分類手段は、前記停留所画像に含まれる人が前記バス停留所の付近に滞留している時間と、前記停留所画像に含まれる人の行動とのうち、少なくともいずれか一つに基づいて、前記停留所画像に含まれる人物を、前記利用客、前記利用客候補、または前記通行人のいずれかに分類する
ことを特徴とする、付記2乃至4のいずれかに記載の情報処理装置。
(付記6)
前記分類手段は、前記停留所画像に含まれる人物を前記通行人に分類し、前記通行人が前記バス停留所の付近に滞留している時間が、第1の閾値を超えたとき、前記利用客候補に分類
し、さらに、前記利用客候補が前記バス停留所の付近に滞留している時間が、第2の閾値を超えたとき、前記利用客に分類する
ことを特徴とする、付記2乃至5のいずれかに記載の情報処理装置。
(付記7)
前記分類手段は、前記通行人が前記停留所画像から検出されなくなった場合、前記通行人の情報を削除する
ことを特徴とする、付記2乃至6のいずれかに記載の情報処理装置。
(付記8)
前記分類手段は、前記利用客候補が前記停留所画像から検出されなくなった状態で一定時間経過した場合、前記利用客候補の情報を削除する
ことを特徴とする、付記2乃至7のいずれかに記載の情報処理装置。
(付記9)
前記分類手段は、前記利用客が前記停留所画像から検出されなくなった場合、前記利用客を前記利用客候補に分類する
ことを特徴とする、付記2乃至8のいずれかに記載の情報処理装置。
(付記10)
前記分類手段は、前記停留所画像に含まれる人物が一定以上の速さで移動している場合、前記通行人に分類し、前記停留所画像に含まれる人物が止まっている場合、あるいは移動速度が一定の値未満の場合、前記利用客候補に分類し、前記停留所画像に含まれる人物が列に並んでいる場合、前記利用客に分類する
ことを特徴とする、付記2乃至9のいずれかに記載の情報処理装置。
(付記11)
前記分類手段は、前記停留所画像に含まれる人物が、定期的にバスを利用しているか否かを利用履歴情報に基づいて判定し、定期的にバスを利用していると判定された前記停留所画像に含まれる人を、前記利用客に分類する
ことを特徴とする、付記2乃至10のいずれかに記載の情報処理装置。
(付記12)
前記送信手段は、前記予想到着時刻を、バスを利用する人物が取得可能な出力手段に送信する
ことを特徴とする、付記2乃至11のいずれかに記載の情報処理装置。
(付記13)
前記送信手段は、前記予想到着時刻を、バス内の出力手段に送信する
ことを特徴とする、付記2乃至12のいずれかに記載の情報処理装置。
(付記14)
前記算出手段は、前記予想到着時刻に基づいて、バスの推奨速度を算出し、
前記送信手段は、前記推奨速度をバス内の出力手段に送信する
ことを特徴とする、付記2乃至13のいずれかに記載の情報処理装置。
(付記15)
前記算出手段は、前記乗車時間に加え、さらに降車時間に基づいて、前記予想到着時刻を算出する
ことを特徴とする、付記2乃至14のいずれかに記載の情報処理装置。
(付記16)
付記2乃至15のいずれかに記載の情報処理装置と、
前記停留所画像を撮影する撮影手段と、
前記予想到着時刻を出力する出力手段と、
を備える情報処理システム。
(付記17)
バス停留所の付近を撮影した停留所画像を取得し、
前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類し、
前記利用客の人数と前記利用客候補の人数を検出し、
前記検出の結果に基づいて、前記バス停留所における乗車時間を算出する
情報処理方法。
(付記18)
バス停留所の付近を撮影した停留所画像を取得する取得処理と、
前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類処理と、
前記利用客の人数と前記利用客候補の人数を検出する検出処理と、
前記検出の結果に基づいて、前記バス停留所における乗車時間を算出する算出処理と、
をコンピュータに実行させる情報処理プログラム。
10 コンピュータ装置
11 CPU
12 メモリ
13 記憶装置
14 入出力I/F
15 通信I/F
100 情報処理装置
101 取得部
102 分類部
103 検出部
104 算出部
200 情報処理装置
205 送信部
300 撮影装置
301 撮影範囲
400 出力部
500 バス
600 バス停留所
700 端末装置
801 人物
802 人物

Claims (7)

  1. バス停留所の付近を撮影した停留所画像を取得する取得手段と、
    前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類手段と、
    前記利用客の人数および前記利用客候補の人数を検出する検出手段と、
    前記検出の結果に基づいて、前記バス停留所における乗車時間を算出し、前記利用客の前記乗車時間に基づいて第1予想到着時刻を算出し、さらに、前記利用客と前記利用客候補の前記乗車時間に基づいて第2予想到着時刻を算出する算出手段と、
    前記第1予想到着時刻および前記第2予想到着時刻を、停留予定のバス停留所に到着する予想到着時刻として送信先の通信手段に送信する送信手段と、
    を備える情報処理装置。
  2. 前記分類手段は、前記停留所画像に含まれる人が前記バス停留所の付近に滞留している時間と、前記停留所画像に含まれる人の行動とのうち、少なくともいずれか一つに基づいて、前記停留所画像に含まれる人物を、前記利用客、前記利用客候補、または前記通行人のいずれかに分類する
    ことを特徴とする、請求項1に記載の情報処理装置。
  3. 前記検出手段は、前記利用客の属性ごとの人数および前記利用客候補の属性ごとの人数を検出し、
    前記算出手段は、属性ごとの一人当たりの乗車時間に基づいて、前記乗車時間を算出する
    ことを特徴とする、請求項1または2に記載の情報処理装置。
  4. 前記送信手段は、前記乗車時間を送信先の通信手段に送信する
    ことを特徴とする、請求項1乃至3のいずれかに記載の情報処理装置。
  5. 前記算出手段は、前記予想到着時刻に基づいて、バスの推奨速度を算出し、
    前記送信手段は、前記推奨速度をバス内の通信手段に送信する
    ことを特徴とする、請求項乃至のいずれかに記載の情報処理装置。
  6. コンピュータが、
    バス停留所の付近を撮影した停留所画像を取得し、
    前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類し、
    前記利用客の人数と前記利用客候補の人数を検出し、
    前記検出の結果に基づいて、前記バス停留所における乗車時間を算出し、前記利用客の前記乗車時間に基づいて第1予想到着時刻を算出し、さらに、前記利用客と前記利用客候補の前記乗車時間に基づいて第2予想到着時刻を算出し、
    前記第1予想到着時刻および前記第2予想到着時刻を、停留予定のバス停留所に到着する予想到着時刻として送信先の通信手段に送信する
    情報処理方法。
  7. バス停留所の付近を撮影した停留所画像を取得する取得処理と、
    前記停留所画像を解析することにより、前記停留所画像に含まれる人物を、利用客、利用客候補、または通行人のいずれかに分類する分類処理と、
    前記利用客の人数と前記利用客候補の人数を検出する検出処理と、
    前記検出の結果に基づいて、前記バス停留所における乗車時間を算出し、前記利用客の前記乗車時間に基づいて第1予想到着時刻を算出し、さらに、前記利用客と前記利用客候補の前記乗車時間に基づいて第2予想到着時刻を算出する算出処理と、
    前記第1予想到着時刻および前記第2予想到着時刻を、停留予定のバス停留所に到着する予想到着時刻として送信先の通信手段に送信する送信処理と、
    をコンピュータに実行させる情報処理プログラム。
JP2021145896A 2021-09-08 2021-09-08 情報処理装置、情報処理方法、および情報処理プログラム Active JP7448509B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021145896A JP7448509B2 (ja) 2021-09-08 2021-09-08 情報処理装置、情報処理方法、および情報処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021145896A JP7448509B2 (ja) 2021-09-08 2021-09-08 情報処理装置、情報処理方法、および情報処理プログラム

Publications (2)

Publication Number Publication Date
JP2023038993A JP2023038993A (ja) 2023-03-20
JP7448509B2 true JP7448509B2 (ja) 2024-03-12

Family

ID=85600579

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021145896A Active JP7448509B2 (ja) 2021-09-08 2021-09-08 情報処理装置、情報処理方法、および情報処理プログラム

Country Status (1)

Country Link
JP (1) JP7448509B2 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005267505A (ja) 2004-03-22 2005-09-29 Fujitsu Ltd 交通管理システム
JP2005292995A (ja) 2004-03-31 2005-10-20 Kyocera Corp 運行管理システム
WO2018037954A1 (ja) 2016-08-26 2018-03-01 ソニー株式会社 移動体制御装置、移動体制御方法、及び、移動体
JP2019197268A (ja) 2018-05-07 2019-11-14 トヨタ自動車株式会社 バス乗降停車時間予測装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005267505A (ja) 2004-03-22 2005-09-29 Fujitsu Ltd 交通管理システム
JP2005292995A (ja) 2004-03-31 2005-10-20 Kyocera Corp 運行管理システム
WO2018037954A1 (ja) 2016-08-26 2018-03-01 ソニー株式会社 移動体制御装置、移動体制御方法、及び、移動体
JP2019197268A (ja) 2018-05-07 2019-11-14 トヨタ自動車株式会社 バス乗降停車時間予測装置

Also Published As

Publication number Publication date
JP2023038993A (ja) 2023-03-20

Similar Documents

Publication Publication Date Title
JP6962413B2 (ja) 誘導システム、誘導方法及びプログラム
KR101159230B1 (ko) 버스 승차정보 제공 시스템 및 그 방법
EP2541506A1 (en) Method and system for managing a flow of passengers on a platform
CN109311622B (zh) 电梯系统以及轿厢呼叫估计方法
JP2020004252A (ja) 残留物検出システム
JP5520203B2 (ja) 混雑度推定装置
CN107402397B (zh) 基于移动终端的用户活动状态确定方法、装置及移动终端
US20160155328A1 (en) Video based method and system for automated side-by-side drive thru load balancing
JP2007328435A (ja) 移動体行動分析装置
JP6464737B2 (ja) 見込み客位置情報検出システム、方法およびプログラム
TW201944324A (zh) 導引系統
JP2019197268A (ja) バス乗降停車時間予測装置
WO2015101546A1 (en) System and method for recommending target locations
JP2018205872A (ja) 情報処理装置、情報処理方法およびプログラム
CN111488792A (zh) 用于预测行人行为的系统和方法
JP2019059315A (ja) 車両混雑状況通知システム、車両混雑状況通知方法及び車両混雑状況通知装置
KR101256873B1 (ko) 객체 추적 방법, 객체 추적 장치 및 이를 이용한 교통 감시 시스템
JP6633981B2 (ja) 交通情報配信システムおよび交通情報配信方法
JP7448509B2 (ja) 情報処理装置、情報処理方法、および情報処理プログラム
CN112299176B (zh) 用于电梯拥挤预测的方法和系统
JP7290503B2 (ja) 業務支援システム
KR102116396B1 (ko) 사회약자 인식장치 및 그 장치의 구동방법
CN107533811B (zh) 信息处理装置、信息处理方法和程序
KR101915176B1 (ko) 사물인터넷기반의 정거장 상황인지 정보 표출시스템
JP7548885B2 (ja) 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230920

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231003

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240229

R151 Written notification of patent or utility model registration

Ref document number: 7448509

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151