TW202046194A - 支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式 - Google Patents

支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式 Download PDF

Info

Publication number
TW202046194A
TW202046194A TW109118489A TW109118489A TW202046194A TW 202046194 A TW202046194 A TW 202046194A TW 109118489 A TW109118489 A TW 109118489A TW 109118489 A TW109118489 A TW 109118489A TW 202046194 A TW202046194 A TW 202046194A
Authority
TW
Taiwan
Prior art keywords
information
facility
inspection
classification
location
Prior art date
Application number
TW109118489A
Other languages
English (en)
Inventor
奈良一孝
末松克輝
平野潤也
平川祐介
城戸拓也
渡邉隆
堀潤
Original Assignee
日商古河電氣工業股份有限公司
日商善鄰數據通訊股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商古河電氣工業股份有限公司, 日商善鄰數據通訊股份有限公司 filed Critical 日商古河電氣工業股份有限公司
Publication of TW202046194A publication Critical patent/TW202046194A/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29Geographical information databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/55Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30181Earth observation
    • G06T2207/30184Infrastructure

Abstract

支援資訊製作裝置3,包括:關聯資訊取得部31,取得對於時間序列上依序拍攝的複數的第1攝影影像分別連結了顯示第1攝影影像的攝影位置的第1攝影位置資訊之第1關聯資訊;影像解析部32,解析複數的第1攝影影像,辨識複數的第1攝影影像的至少任一第1攝影影像中拍入的特定的設施;分類判別部32,判別第1攝影影像中拍入的特定的設施的分類,產生顯示分類的第1設施分類資訊;以及資訊製作部32,製作將第1設施分類資訊及第1設施位置資訊連結的支援資訊,其中第1設施位置資訊係顯示了連結了拍入特定的設施的第1攝影影像之第1攝影位置資訊所對應的特定的設施的位置。

Description

支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式
本發明係有關於支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式。
過去,做為支援標示或照明等的道路附屬物的檢查之檢查支援系統,有一種系統使用檢查部位的攝影及該檢查部位的檢查結果的輸入彼此獨立的2台裝置(拍攝裝置、檢查終端)來進行(例如,參照專利文獻1)。另外,使用專利文獻1所記載的檢查支援系統來進行檢查的道路附屬物等的設施,通常會以設施清冊(支援資訊)來管理。該設施清冊是就自治體等的管理者所管理的管轄內的每個設施,將顯示該設施的位置的設施位置資訊(緯度及經度等)、顯示該設施的分類(標示、照明、及資訊板等)的設施分類資訊、以及顯示該設施的損傷度的損傷度資訊等清單化的資訊。也就是,管理者參照設施清冊的話,就能夠掌握要進行檢查的設施、以及該設施的損傷度等。
然後,設施清冊在過去如以下方式製作而成。作業者在管轄內走動藉此尋找在該管轄內的道路附屬物等的設施。又,作業者找到道路附屬物等的設施的情況下,會調查該設施的位置,且記下顯示該調查的位置的設施位置資訊(緯度及經度)及顯示該設施的分類(標示、照明、及資訊板等)的設施分類資訊。然後,作業者針對管轄內找到的全部的設施,製作將每個設施的設施位置資訊及設施分類資訊清單化的設施清冊。又,記載於設施清冊的設施進行檢查後,作業者將顯示該設施的損傷度(該檢查結果)的損傷度資訊追加至設施清冊中。
專利文獻1:日本特開2017-228249號公報
然而,過去的設施清冊的製作方法中,有著強迫作業者做繁雜的作業、無法提昇便利性的問題。
本發明有鑑於上述的問題,目的是提出一種能夠提昇便利性的支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式。
為了解決上述問題並達成目的,本發明的支援資訊製作裝置,包括:關聯資訊取得部,取得對於時間序列上依序拍攝的複數的第1攝影影像分別連結了顯示該第1攝影影像的攝影位置的第1攝影位置資訊之第1關聯資訊;影像解析部,解析該複數的第1攝影影像,辨識該複數的第1攝影影像的至少任一第1攝影影像中拍入的特定的設施;分類判別部,判別該第1攝影影像中拍入的該特定的設施的分類,產生顯示該分類的第1設施分類資訊;以及資訊製作部,製作將該第1設施分類資訊及第1設施位置資訊連結的支援資訊,其中該第1設施位置資訊係顯示了連結了拍入該特定的設施的該第1攝影影像之該第1攝影位置資訊所對應的該特定的設施的位置。
本發明的支援資訊製作裝置是在上述發明中,該資訊製作部,在該影像解析部辨識出彼此不同的複數的該特定的設施的情況下,就該辨識的每個該特定的設施,製作將該第1設施分類資訊及該第1設施位置資訊清單化的該支援資訊。
本發明的支援資訊製作裝置是在上述發明中,該資訊製作部,在該影像解析部辨識出彼此不同的複數的該特定的設施的情況下,就該辨識的每個該特定的設施,分別製作該支援資訊。
本發明的支援資訊製作裝置是在上述發明中,更包括:地圖資訊儲存部,儲存地圖資訊,其中該資訊製作部根據與拍入該特定的設施的該第1攝影影像連結的該第1攝影位置資訊所對應之該第1設施位置資訊,從該地圖資訊抽出對應到該特定的設施的位置之對應資訊,製作將該對應資訊連結到該第1設施位置資訊之該支援資訊。
本發明的支援資訊製作裝置是在上述發明中,更包括:位置修正部,根據該第1攝影位置資訊來產生該第1設施位置資訊,該位置修正部根據該影像解析部辨識的該特定的設施在該第1攝影影像內的大小,推測從攝影位置至該特定的設施的距離,根據推測的該距離,修正該攝影位置並產生該第1設施位置資訊
本發明的支援資訊製作裝置是在上述發明中,該關聯資訊取得部,取得對於時間序列上依序拍攝的複數的第2攝影影像分別連結了顯示該第2攝影影像的攝影位置的第2攝影位置資訊之第2關聯資訊;該影像解析部,解析該複數的第2攝影影像,辨識該複數的第2攝影影像的至少任一第2攝影影像中拍入的特定的設施;該分類判別部,判別該第2攝影影像中拍入的該特定的設施的分類,產生顯示該分類的第2設施分類資訊;該資訊製作部,將該第2設施分類資訊、顯示了連結了拍入該特定的設施的該第2攝影影像之該第2攝影位置資訊所對應的該特定的設施的位置之第2設施位置資訊、該支援資訊所包含的該第1設施分類資訊、以及該第1設施位置資訊相比較,根據該比較結果更新該支援資訊。
本發明的支援資訊製作裝置,包括:攝影部,依序輸出拍攝的攝影影像;測位部,測量攝影位置並產生顯示該攝影位置的攝影位置資訊;影像解析部,依序解析從該攝影部輸出的該攝影影像,辨識該攝影影像中拍入的特定的設施;分類判別部,判別該攝影影像拍入的該特定的設施的分類,產生顯示出該分類的設施分類資訊;資訊製作部,製作將該設施分類資訊以及設施位置資訊彼此連結之支援資訊,其中該設施位置資訊顯示出該特定的設施的位置,其對應到表示拍入該特定的設施的該攝影影像的攝影位置之該攝影位置資訊。
本發明的支援資訊製作系統,包括:上述的支援資訊製作裝置;關聯資訊製作裝置,具有產生該複數的第1攝影影像的攝影部、以及測量該攝影部的位置並產生顯示該位置的該第1攝影位置資訊的測位部,產生該第1關聯資訊。
本發明的支援資訊製作方法,由支援資訊製作裝置的處理器來執行,包括:取得對於時間序列上依序拍攝的複數的攝影影像分別連結了顯示該攝影影像的攝影位置的攝影位置資訊之關聯資訊;解析該複數的攝影影像,辨識該複數的攝影影像的至少任一攝影影像中拍入的特定的設施;判別該攝影影像中拍入的該特定的設施的分類,產生顯示該分類的設施分類資訊;以及製作將該設施分類資訊及設施位置資訊連結的支援資訊,其中該設施位置資訊係顯示了連結了拍入該特定的設施的該攝影影像之該攝影位置資訊所對應的該特定的設施的位置。
本發明的支援資訊製作方法,由支援資訊製作裝置的處理器來執行,包括:使攝影部依序輸出拍攝的攝影影像;使測位部測量該攝影部的位置並產生顯示該位置的攝影位置資訊;依序解析從該攝影部輸出的該攝影影像,辨識該攝影影像中拍入的特定的設施;判別該攝影影像裝置拍入的該特定的設施的分類,產生顯示出該分類的設施分類資訊;製作將該設施分類資訊以及設施位置資訊彼此連結之支援資訊,其中該設施位置資訊顯示出該特定的設施的位置,其對應到表示拍入該特定的設施的該攝影影像的攝影位置之該攝影位置資訊。
本發明的支援資訊製作程式,使支援資訊製作裝置的處理器執行,該支援資訊製作程式指示該處理器執行以下處理:取得對於時間序列上依序拍攝的複數的攝影影像分別連結了顯示該攝影影像的攝影位置的攝影位置資訊之關聯資訊;解析該複數的攝影影像,辨識該複數的攝影影像的至少任一攝影影像中拍入的特定的設施;判別該攝影影像中拍入的該特定的設施的分類,產生顯示該分類的設施分類資訊;以及製作將該設施分類資訊及設施位置資訊連結的支援資訊,其中該設施位置資訊係顯示了連結了拍入該特定的設施的該攝影影像之該攝影位置資訊所對應的該特定的設施的位置。
本發明的支援資訊製作程式,使支援資訊製作裝置的處理器執行,該支援資訊製作程式指示該處理器執行以下處理:使攝影部依序輸出拍攝的攝影影像;使測位部測量該攝影部的位置並產生顯示該位置的攝影位置資訊;依序解析從該攝影部輸出的該攝影影像,辨識該攝影影像中拍入的特定的設施;判別該攝影影像裝置拍入的該特定的設施的分類,產生顯示出該分類的設施分類資訊;製作將該設施分類資訊以及設施位置資訊彼此連結之支援資訊,其中該設施位置資訊顯示出該特定的設施的位置,其對應到表示拍入該特定的設施的該攝影影像的攝影位置之該攝影位置資訊。
根據本發明的支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式,能夠提昇便利性。
以下,參照圖式來說明用以實施本發明的型態(以下稱為實施型態)。本發明並不被以下說明的實施型態所限定。另外,圖式的記載中,相同的部分會標示相同的符號。
(實施型態1) [支援資訊製作系統的概略架構] 第1圖係顯示實施型態1的支援資訊製作系統1。支援資訊製作系統1是製作用以支援標示或照明等的道路附屬物(相當於本發明的設施)的檢查之支援資訊的系統。做為該支援資訊,具體將於後述,但能夠舉例出設施清冊資料(以下,記載為設施清冊)以及設施規格資料(以下記載為設施規格)。這個支援資訊製作系統1如第1圖所示,具備關聯資訊製作裝置2、支援資訊製作裝置3、可搬型的記錄媒體4。記錄媒體4是用來接收傳遞關聯資訊製作裝置2及支援資訊製作裝置3之間的資料的可搬型的記錄媒體,能夠分別對關聯資訊製作裝置2及支援資訊製作裝置3進行裝卸。
[關聯資訊製作裝置的架構] 第2圖係顯示關聯資訊製作裝置2的方塊圖。關聯資訊製作裝置2由搭載於車輛的行車記錄器等構成。這個關聯資訊製作裝置2如第2圖所示,具備第1控制部21、第1記錄部22、第1輸入部23、第1顯示部24、第1攝影部25、第1測位部26、第1讀寫器27,各部21~27透過匯流排28連接。
第1控制部21是以CPU(Central Processing Unit)或FPGA(Field-Programmable Gate Array)等構成,依照儲存於第1儲存部22的程式,控制關聯資訊製作裝置2全體的動作。第1儲存部22儲存第1控制部21要執行的程式、該第1控制部21的處理所必要的資訊、以及該第1控制部21所處理的資訊等。
第1輸入部23是由接受使用者操作的按鈕、開關、觸控面板等所構成,將因應該使用者操作的操作訊號輸出至第1控制部21。第1顯示部24是以使用液晶或有機EL(Electro Luminescence)的顯示器構成,在第1控制部21的控制下,顯示各種影像。另外,第1輸入部23的功能一部分或全部也可以做為觸控面板配置於第1顯示部24的表面。
第1攝影部25相當於本發明的攝影部。這個第1攝影部25具體的圖示省略,但具備透鏡單元、拍攝元件、訊號處理部。該透鏡單元將被拍攝體影像成像在該拍攝元件的拍攝面。該拍攝元件是由接收該透鏡單元成像的被拍攝體像並轉換成電訊號的CCD(Charge Coupled Device)或CMOS(Complementary Metal Oxide Semiconductor)等所構成。該訊號處理部對來自該拍攝元件的電訊號進行訊號處理(例如A/D轉換等)並輸出影像資料(以下記載為拍攝影像)。
第1測位部26相當於本發明的測位部。這個第1測位部26會接收構成測量地上物體位置的測位手段之GPS(Global Positioning System)的複數的GPS衛星所發送而來的衛星的軌道資訊,根據該接收的軌道資訊,輸出顯示出關聯資訊製作裝置2(第1拍攝部25)的位置(緯度或精度)的攝影位置資訊。
然後,第1控制部21將第1攝影部25按時間序依序拍攝的複數的影像,分別與顯示該攝影影像的攝影位置之攝影位置資訊(以第1測位部26產生)連結,而產生關聯資訊。另外,第1測位部26每單位時間產生的攝影位置資訊的數目比第1攝影部25每單位時間產生的拍攝影像的數目(幀率)少。因此,第1控制部21在產生攝影影像時無法產生攝影位置資訊的情況下,以插補產生該攝影位置資訊,對該攝影影像連結該插補所產生的攝影位置資訊。另外,該插補假定為直線插補,在無法做直線插補的曲線等的情況下,假設移動於附近的道路形狀的網路資料(道路連結)上,沿著這個道路連結上來修正資料。具體來說,第1控制部21根據前後取得的GPS的位置資訊、行走資料(時速或距離等)來修正。
第1讀寫器27在記錄媒體4插入安裝於該第1讀寫器27後,在第1控制部21的控制下,將該第1控制部21所產生的關聯資訊記錄於該記錄媒體4。在此,該關聯資訊是關聯資訊製作裝置2搭載於車輛且該車輛行走於道路時,根據第1攝影部25依序攝影的複數的攝影影像、以及第1測位部26依序測量的攝影位置資訊而產生的資訊。
[支援資訊製作裝置的架構] 第3圖係顯示支援資訊製作裝置3的方塊圖。支援資訊製作裝置3是以PC(Personal Computer)等構成。這個支援資訊製作裝置3如第3圖所示,具備第2讀寫器31、第2控制部32、第2儲存部33、第2輸入部34、第2顯示部35,各部31~35透過匯流排36連接。第2讀寫器31相當於本發明的關聯資訊取得部。這個第2讀寫器31在記錄媒體4插入安裝於該第2讀寫器31後,在第2控制部32的控制下,讀取儲存於該記錄媒體4的關聯資訊。然後,第2讀寫器31所讀取的關聯資訊儲存於第2儲存部33。
另外,本實施型態1中,採用了利用可搬型的記錄媒體4從關聯資訊製作裝置2對支援資訊製作裝置3接收傳遞關聯資訊的架構,但不限定於此。例如,採用了利用無線通訊或有線通訊從關聯資訊製作裝置2對支援資訊製作裝置3接收傳遞關聯資訊的架構。此時,設置於支援資訊製作裝置3並進行通訊的通訊部,相當於本發明的關聯資訊取得部。
第2控制部32相當於本發明的處理器。這個第2控制部32是以CPU或FPGA等構成,依照儲存於第2儲存部33的程式(包括本發明的支援資訊製作程式),控制支援資訊製作裝置3全體的動作。在此,第2控制部32具有做為本發明的影像解析部、區分判別部、位置修正部、以及資訊製作部的功能。另外,根據第2控制部32的功能,會在後述的「支援資訊製作方法」中說明。
第2記錄部33儲存第2控制部32所執行的程式(包括本發明的支援資訊製作程式)、該第2控制部32的處理所必要的資訊、該第2控制部32所處理的資訊、以及第2讀寫器31所讀取的關聯資訊等。在此,做為該第2控制部32的處理所必要的資訊,能夠舉出使用於汽車導航裝置等的地圖資訊或以下所示的學習模型。也就是,第2儲存部33相當於本發明的地圖資訊儲存部。該學習模型是依每個道路附屬物的種類別設置,根據該道路附屬物所攝影的攝影影像(教師影像),機械學習(例如深層學習等)該道路附屬物的特徵的模型。然後,第2控制部32藉由使用了該學習模型的影像辨識(使用AI(Artificial Intelligence)的影像辨識),能夠辨識寫入包含於關聯資訊的複數的攝影影像的至少任一者的攝影影像中的道路附屬物(相當於本發明的特定的設施(本實施型態1中標示、照明、以及資訊板等))。
第2輸入部34是由接受使用者操作的按鈕、開關、觸控面板等所構成,將因應該使用者操作的操作訊號輸出至第2控制部32。第2顯示部35是以使用液晶或有機EL的顯示器構成,在第2控制部32的控制下,顯示各種影像。另外,第2輸入部34的功能一部分或全部也可以做為觸控面板配置於第2顯示部35的表面。
[支援資訊製作方法] 接著,說明上述的支援資訊製作裝置3的動作(支援資訊製作方法)。第4圖係顯示支援資訊製作方法的流程表。以下,為了說明方便,假設關聯資訊製作裝置2已產生了關聯資訊,儲存了該關聯資訊的記錄媒體4插入安裝於第2讀寫器。首先,第2控制部32因應於作業者對第2輸入部34進行開始製作的支援資訊之使用者操作,輸出控制訊號至第2讀寫器31。回應於該控制訊號,第2讀寫器31讀取儲存於儲存媒體4的關聯資訊(步驟S1A)。然後,第2讀取器31所讀取的關聯資訊儲存於第2儲存部33。
步驟S1A後,第2控制部32讀出儲存於第2記錄部33的關聯資訊,解析包含於該關聯資訊中的複數的攝影影像(步驟S1B)。具體來說,第2控制部32藉由使用了儲存在第2儲存部33中的學習模型之影像辨識,辨識寫入複數的攝影影像的至少任一者的攝影影像中的道路附屬物(相當於本發明的特定的設施(本實施型態1中標示、照明、以及資訊板等))。
步驟S1B後,第2控制部32判別步驟S1B中辨識的道路附屬物的分類(標示、照明及資訊板等),產生顯示該分類的設施分類資訊(步驟S1C)。
步驟S1C後,第2控制部32如後述,根據拍入步驟S1B中辨識的道路附屬物的攝影影像所連結的攝影位置資訊,產生顯示該道路附屬物的位置之設施位置資訊(步驟S1D)。具體來說,第2控制部32在步驟S1D,根據步驟S1B中辨識的道路附屬物的攝影影像內的大小,推測攝影位置到該道路附屬物的距離,根據推測的該距離,修正該攝影位置,產生顯示該道路附屬物的位置之設施位置資訊。例如,預先設定使得攝影影像內拍進能夠規定大小或長度的構件(以下,記載為規定構件)。又,第2控制部32拍入步驟S1B中辨識的道路附屬物的攝影影像內,參照該道路附屬物及拍入的規定構件,藉由該規定構件的畫素數目等,算出第1攝影部25的位置(根據拍入步驟S1B中辨識的道路附屬物的攝影影像所連結的攝影位置資訊之位置)至該道路附屬物的距離。然後,第2控制部32根據該第1攝影部25的位置及該算出的距離,產生顯示該道路附屬物的位置的設施位置資訊。又,例如,第2控制部32藉由比較拍入步驟S1B中辨識的道路附屬物之攝影影像、以及相對於該攝影影像的既定時間前產生的攝影影像,算出第1攝影部25的位置(根據拍入步驟S1B中辨識的道路附屬物的攝影影像所連結的攝影位置資訊之位置)至該道路附屬物的距離。然後,第2控制部32根據該第1攝影部25的位置及該算出的距離,產生顯示該道路附屬物的位置的設施位置資訊。
步驟S1D後,第2控制部32製作與步驟S1C中產生的設施分類資訊及步驟S1D中產生的設施位置資訊連結的支援資訊(設施清冊D1(參照第5圖)及設施規格D2(參照第6圖))(步驟S1E)。之後,第2控制部32結束本流程。
第5圖係顯示步驟S1E中製作的設施清冊D1的一例。另外,第5圖中,在步驟S1B,例示了從包含於關聯資訊中的全部的攝影影像辨識出彼此不同的3個道路附屬物(No. 1~No. 3的道路附屬物)的情況。步驟S1E中製作的設施清冊D1例如第5圖所示,就步驟S1B中辨識的每個道路附屬物,設置有管理編號D101、管理者名D102、路線名D103、距離標S104、設施位置資訊D105(緯度D106及精度D107)、顯示道路的上行或下行的上下分類D108、設施分類資訊D109、檢查日D110、檢查公司D111、檢查員D112、以及損傷度D113的登錄欄位。也就是,設施清冊S1就每個道路附屬物,將各項目D101~D113清單化。
在此,第2控制部32根據拍入了步驟S1B中辨識的道路附屬物的攝影影像所連結的攝影位置資訊,將步驟S1D中產生的設施位置資訊登錄到設施位置資訊D105(緯度D106及經度D107)的登錄欄。例如,No.1的道路附屬物中,根據拍入了No.1的道路附屬物的攝影影像所連結的攝影位置資訊而產生的設施位置資訊(緯度及經度)是緯度「X1」及經度「Y1」,因此緯度D106及經度D107的登錄欄中分別登錄了該緯度「X1」及該經度「Y1」。
又,第2控制部32將步驟S1C中產生的設施分類資訊登錄到設施區分資訊D109的登錄欄。例如,No.1的道路附屬物中,顯示該No.1的道路附屬物的分類之設施分類資訊是「標示」,因此設施分類資訊D109的登錄欄中登錄了該「標示」。
又,第2控制部32根據步驟S1D中產生的顯示道路附屬物的位置之設施位置資訊,將顯示該道路附屬物所處的道路的路線名之路線名資訊、顯示在該道路上的該道路附屬物所處的距離標之距離標資訊、以及顯示該道路的上下分類之上下分類資訊,從儲存於第2儲存部33的地圖資訊抽出。該路線名資訊、距離標資訊、以及上下分類資訊相當於本發明的對應資訊。然後,第2控制部32將該抽出的路線名資訊、距離標資訊、以及上下分類資訊,分別登錄於路線名D103、距離標D104、及上下分類D108的各登錄欄中。
管理者名D102的登錄欄中,因應例如作業者對第2輸入部34的使用者操作(管理者名的輸入操作),而登錄管理該道路附屬物的管理者名。又,檢查日D110、檢查公司D111、檢查員D112、以及損傷度D113的各登錄欄中,因應例如作業者對第2輸入部34的使用者操作(檢查日、檢查公司、檢查員、以及損傷度的輸入操作),而分別登錄檢查該道路附屬物的檢查日、檢查公司、檢查員、以及顯示檢查結果的損傷度。另外,管理編號D101的登錄欄雖登錄了該道路附屬物固有的管理編號,但第2控制部32也可以獨自產生固有的該管理編號並登錄,或者是,因應於作業者對第2輸入部34的使用者操作(管理編號的輸入操作)而登錄固有的該管理編號。
第6圖係顯示步驟S1E中製作的設施規格D2的一例。步驟S1E中製作的設施規格D2會就步驟S1B中辨識的每一道路附屬物設置。也就是說,對應第5圖所示的設施清冊D1的設施規格D2會因為包含於該設施清冊D1的道路附屬物有3個而製作3個。另外,第6圖中,只有顯示了包含於第5圖所示的設施清冊D1中的No.1的道路附屬物所對應的設施規格D2。這個設施規格D2例如第6圖所示,設置了種別資訊D201、位置資訊D202、構造資訊D203、設置環境資訊D204、檢查資訊D205、周邊地圖D206、及攝影影像D207的登錄欄。
種別資訊D201的登錄欄是由該道路附屬物的設施分類資訊、該道路附屬物的管理者名、該道路附屬物的管理編號等的資訊的各登錄欄所構成。然後,第2控制部32將步驟S1C中產生的設施分類資訊,登錄到種別資訊D201中包含的設施分類資訊的登錄欄。又,種別資訊D201中包含的管理者名的登錄欄中,因應例如作業者對第2輸入部34的使用者操作(管理者名的輸入操作),而登錄管理該道路附屬物的管理者名。另外,種別資訊D201所包含的管理編號的登錄欄雖登錄了該道路附屬物固有的管理編號,但第2控制部32也可以獨自產生固有的該管理編號並登錄,或者是,因應於作業者對第2輸入部34的使用者操作(管理編號的輸入操作)而登錄固有的該管理編號。
位置資訊D202的登錄欄是由顯示該道路附屬物的位置之設施位置資訊(經度及緯度)、該道路附屬物所處的道路之道路種別(一般國道/主要地方道路/…)、該道路的路線名、該道路的上下分類、以及該道路附屬物的所在地等的資訊的各登錄欄所構成。然後,第2控制部32將步驟S1D中產生的設施位置資訊,登錄到位置資訊D202中包含的設施位置資訊的登錄欄。又,第2控制部32根據步驟S1D所產生的顯示道路附屬物的位置之設施位置資訊,將顯示該道路附屬物所處道路的道路種別之道路種別資訊、顯示該道路的路線名之路線名資訊、顯示該道路的上下分類之上下分類資訊、以及顯示該道路附屬物的所在地(○○縣○○市○○區1-1等)之所在地資訊,從儲存於第2儲存部33的地圖資訊抽出。該道路種別資訊、路線名資訊、上下分類資訊、以及所在地資訊相當於本發明的對應資訊。然後,第2控制部32中該抽出的道路種別資訊、路線名資訊、上下分類資訊、以及所在地資訊,分別登錄位置資訊D202中包含的道路種別、路線名、上下分類、以及所在地的各登錄欄。
構造資訊D203的登錄欄是由有關於該道路附屬物的支柱形式、表面處理形式、以及支柱基部肋形狀等的道路附屬物的構造之資訊的各登錄欄所構成。然後,構造資訊D203的登錄欄中,例如因應於作業者對第2輸入部34的使用者操作(各種資訊的輸入操作)而分別登錄各種資訊。
設置環境資訊D204的登錄欄是由該道路附屬物的設置環境(一般部/橋樑部/隧道/…)、與海岸的距離、是否為融雪劑散布區間、是否是風力限制實施區間、以及是否是防雪對策實施區間等有關於道路附屬物的設置環境之資訊的各登錄欄所構成。然後,設置環境資訊D204的各登錄欄中,例如因應作業者對第2輸入部34的使用者操作(各種的資訊的輸入操作),分別登錄各種資訊。
檢查資訊D205的登錄欄是由該道路附屬物的檢查的種別(初期檢查/定期檢查/臨時檢查/…)、檢查方法(接近目視/外觀目視/…)、檢查日、前次檢查日、檢查公司、以及檢查員等的資訊的各登錄欄所構成。然後,檢查資訊D205的各登錄欄中,例如因應作業者對第2輸入部34的使用者操作(各種資訊的輸入操作),分別登錄各種資訊。
又,第2控制部32根據步驟S1D中產生的顯示道路附屬物的位置之設施位置資訊,從儲存於第2儲存部33的地圖資訊中抽出該道路附屬物的周邊地圖。該周邊地圖相當於本發明的對應資訊。然後,第2控制部32將該抽出的周邊地圖上所標記的該道路附屬物的位置之周邊地圖資訊,登錄到周邊地圖D206的登錄欄。又,第2控制部32將拍入步驟S1B中辨識的道路附屬物之攝影影像,登錄到攝影影像D207的登錄欄。
另外,實際檢查道路附屬物時,後述的檢查支援系統5(參照第7圖)中,除了上述的設施規格D2以外,會使用根據該設施規格製作的檢查結果票資料D3(以下,記載為檢查結果票D3(參照第10圖))。根據這個檢查結果票D3,製作損傷記錄票資料D4(以下,記載為損傷記錄票D4(參照第10圖)),詳細將於後述。
檢查結果票D3中,登錄了由管理編號特定的1個道路附屬物全體的檢查結果的資訊。在此,道路附屬物是支柱的話,是由支柱本體或支柱基部等的複數的構件構成。又,該構件是支柱本體的話,該構件上會被分配支柱本體、支柱關節部、以及支柱分歧部等的複數的檢查部位。然後,檢查結果票D3上,預先登錄將構成道路附屬物的各構件唯一地識別的複數的構件固有資訊、將分配至每個構件的複數的檢查部位唯一地識別的複數的檢查部位固有資訊。又,檢查結果票D3上,在後述的步驟S3H中,與該複數的檢查部位固有資訊分別連結而登錄有無該複數的檢查部位的檢查對象(有/無)、該複數的檢查部位的檢查狀況(已實施/未實施)、該複數的檢查部位的損傷程度的評價分類(不承認損傷/承認損傷/損傷大)、該複數的檢查部位的對策需要與否(要/否)、該複數的檢查部位的健全性的診斷分類(健全/預防保全階段/早期措施階段/緊急措施階段)等的檢查結果資訊。又,檢查結果票D3中,基於道路附屬物中全部的檢查結果的健全性的診斷結果,也登錄作為該道路附屬物整體的健全性的診斷分類等的資訊。
損傷記錄票D4中分別構成登錄管理編號所特定的1個道路附屬物的每個構件的資訊(以下,記載為構件資訊)。該構件資訊中預先登錄了該構件的構件固有資訊。又,該構件資訊中,在後述的步驟S30,與該構件固有資訊連結,登錄基於分配至該構件的複數的檢查部位的損傷程度的評價結果之作為構件整體的損傷程度的評價結果及該構件的處置內容等的資訊、攝影分配至該構件的複數的檢查部位之檢查影像。
另外,1個道路附屬物的管理編號、構成該道路附屬物的構件之構件固有資訊、分配至該構件的檢查部位的檢查部位固有資訊是彼此具有關聯性的資訊。例如,能夠從檢查部位固有資訊中,推導出包含根據該檢查部位固有資訊的檢查部位在內的構件之構件固有資訊、以及包含該構件的道路附屬物的管理編號。
[檢查支援系統的概略架構] 接著,說明檢查支援系統5。第7圖係顯示檢查支援系統5的示意圖。檢查支援系統5是支援道路附屬物的檢查之系統。本實施型態1中,檢查支援系統1如第7圖所示,是使用檢查部位的攝影及該檢查部位的檢查結果的輸入彼此獨立的攝影裝置6及檢查支援裝置7這兩台裝置的系統。也就是,在進行道路附屬物的檢查時,進行該檢查的作業者是由操作檢查支援裝置7的作業者(以下,記載為第1作業者)、操作攝影裝置6的作業者(以下,記載為第2作業者)的複數人所構成。另外,第1作業者及第2作業者也可以是同一人物。又,本實施型態1中,檢查支援系統5是只具備1台的攝影裝置6的架構,但並不限定於此,也可以是具備複數台攝影裝置6的架構。
攝影裝置6例如以數位相機等構成。另外,關於攝影裝置6的功能,將在後述的「攝影裝置的動作」中說明。檢查支援裝置7例如以平板終端、智慧型手機、筆記型電腦(Personal Computer)、穿戴式裝置(例如眼鏡型或頭戴型的頭戴型顯示器)等構成。另外,關於檢查支援裝置7的功能,將在後述的「檢查支援裝置的動作」中說明。
[檢查支援系統的動作] 接著,說明上述的檢查支援系統5的動作。以下,為了說明的方便,依序說明攝影裝置6的動作、以及檢查支援裝置7的動作。
[攝影裝置的動作] 第8圖係顯示攝影裝置6的動作的流程圖。攝影裝置6平常總是監視是否有第2作業者的攝影操作(步驟S2A)。有攝影操作的情況下(步驟S2A:Yes),攝影裝置6拍攝檢查部位並產生檢查影像(步驟S2B)。另外,沒有攝影操作的情況下(步驟S2A:No),攝影裝置6重複步驟S2A。步驟S2B後,攝影裝置6將步驟S2B中產生的檢查影像及該檢查影像的攝影時刻(例如在步驟S2A中具有攝影操作的時刻)連結後,將其做為攝影資料記錄於內部的記錄部(圖示略)(步驟S2C)。之後,攝影裝置6回到步驟S2A。
[檢查支援裝置的動作] 以下,作為檢查支援裝置7的動作,依序說明第1動作及第2動作。
[檢查支援裝置的第1動作] 首先,說明檢查支援裝置7的第1動作。第9圖係顯示檢查支援裝置7的第1動作的流程圖。檢查支援裝置7顯示設施選擇畫面F1(參照第11圖)(步驟S3A)。第10圖及第11圖是說明步驟S3A的示意圖。具體來說,第10圖係顯示檢查資料D0的一例的示意圖。第11圖係顯示設施選擇畫面F1的一例的示意圖。在此,檢查支援裝置7的內部的記錄部(省略圖示)中,儲存了成為檢查對象的道路附屬物的檢查資料D0(第10圖)。檢查資料D0中,如第10圖所示,就上述的設施清冊D1所含的全部的每個道路附屬物,上述的設施規格D2、檢查結果票D3、以及損傷記錄票D4連結並儲存。
在步驟S3A,檢查支援裝置7根據儲存於內部的儲存部(省略圖示)的檢查資料D0所包含的各設施規格D2,顯示設施選擇畫面F1(第11圖),促使第1作業者選擇成為檢查對象的道路附屬物。具體來說,設施選擇畫面F1是一覽顯示了複數的道路附屬物的資訊(各道路附屬物資訊F10a、F10b、…)的畫面。道路附屬物資訊F10a、F10b…例如第11圖所示,是記載了因應於對應的道路附屬物之設施規格D2所包含的道路附屬物的「設施分類資訊」及「管理編號」等的規格資訊F11a、F11b、…、該設施規格D2所包含的道路附屬物全體的攝影影像(步驟S1B中辨識的道路附屬物所寫入的攝影影像)F12a、F12b、…的資訊。然後,第1作業者藉由確認步驟S3A中顯示的設施選擇畫面F1,而能夠對檢查支援裝置7進行設施選擇操作,選擇成為檢查對象的道路附屬物。該設施選擇操作是從設施選擇畫面F1內的複數的道路附屬物資訊F10a、F10b…中選擇成為檢查對象的道路附屬物所對應的道路附屬物資訊之操作。
步驟S3A後,檢查支援裝置7總是監視是否有第1作業者進行設施操作操作(步驟S3B)。有設施選擇操作的情況下(步驟S3B:Yes),檢查支援裝置7根據以該設施選擇操作所選擇的道路附屬物所對應的檢查結果票D3,顯示檢查部位選擇畫面F2(參照第12圖)(步驟S3C)。該檢查部位選擇畫面F2在步驟S3C以後,總是顯示到結束本流程(步驟S3A~S3L)為止。另外,沒有設施選擇操作的情況下(步驟S3B:No),檢查支援裝置7重複步驟S3B。
第12圖係顯示檢查部位選擇畫面F2的一例。具體來說,檢查部位選擇畫面F2是,例如第12圖所示,畫面中記載了1個道路附屬物中的全部的檢查部位的名稱,且設置了組合框CB,促使就該全部的檢查部位的每一者,選擇有無檢查的對象(有/無)、檢查狀況(已實施/未實施)、損傷程度的評價分類(不承認損傷/承認損傷/損傷大)、是否要對策(要/否)、以及健全性的診斷分類(健全/預防保全階段/早期處置階段/緊急處置階段)。
又,檢查部位選擇畫面F2中,分別就全部的檢查部位,設置了促使該檢查部位的檢查開始的操作之檢查開始按鈕BS、促使該檢查部位的檢查結束的操作之檢查結束按鈕BE。另外,檢查開始按鈕BS及檢查結束按鈕BE也可以是由相同的按鈕(以下,記載為檢查按鈕)所構成。在這個架構的情況下,檢查支援裝置7具有計數檢查按鈕的選擇次數的功能。然後,檢查支援裝置7根據選擇次數的計數,判斷進行了檢查開始的操作、或是進行了檢查結束的操作。然後,第1作業者確認步驟S3C中顯示的檢查部位選擇畫面F2,藉此能夠對檢查支援裝置7進行檢查開始操作(選擇因應於該檢查部位的檢查開始按鈕BS的操作)以開始對成為檢查對象的檢查部位的檢查,以及進行檢查結束操作(選擇因應於該檢查部位的檢查結束按鈕BE的操作)以結束對檢查部位的檢查。.
又,檢查部位選擇畫面F2上設置了確認按鈕BC,促使選擇結束對1個道路附屬物中全部的檢查部位的檢查。然後,第1作業者確認步驟S3C中顯示的檢查部位選擇畫面F2,藉此能夠進行確認操作(選擇確認按鈕BC的操作)以對檢查支援裝置7結束1個道路附屬物中全部的檢查部位的檢查。
步驟S3C後,檢查支援裝置7總是監視是否有第1作業者進行的檢查開始操作(步驟S3D)。有檢查開始操作的情況下(步驟S3D:Yes),檢查支援裝置7特定透過該檢查開始操作所選擇的檢查開始按鈕BS對應的檢查部位的檢查部位固有資訊、該檢查部位的檢查開始時刻(例如,在步驟S3D有檢查開始操作的時刻)(步驟S3E)。另外,沒有檢查開始操作的情況下(步驟S3D:No),檢查支援裝置7反覆步驟S3D。
步驟S3E後,檢查支援裝置7總是監視是否有第1作業者進行的檢查結束操作(步驟S3F)。有檢查開始操作的情況下(步驟S3F:Yes),檢查支援裝置7特定透過該檢查結束操作所選擇的檢查結束按鈕BS對應的檢查部位的檢查部位固有資訊、該檢查部位的檢查結束時刻(例如,在步驟S3F有檢查結束操作的時刻)(步驟S3G)。另外,沒有檢查結束操作的情況下(步驟S3F:No),檢查支援裝置7反覆步驟S3F。
在此,第1作業者進行成為檢查對象的檢查部位所對應的檢查開始操作(步驟S3D)後,對第2作業者指示該檢查部位的攝影。又,第2作業者結束該檢查部位的攝影後,將結束該攝影這樣的資訊通知第1作業者。然後,第1作業者在有來自第2作業者的結束該攝影這樣的聯絡後,進行該檢查部位所對應的檢查結束操作(步驟S3F)。也就是,拍攝了檢查部位的檢查影像(步驟S2B中產生的檢查影像)中,在步驟S2C,連結對應該檢查部位的檢查開始操作至檢查結束操作為止的期間(步驟S3D~S3F的期間)內。
又,第1作業者在對應成為檢查對象的檢查部位的檢查開始操作至檢查結束操作為止的期間中,一邊確認檢查部位選擇畫面F2,一邊操作組合框CB,針對該檢查部位,分別選擇有無檢查的對象、檢查狀況、損傷程度的評價分類、對策需要與否、以及健全性的診斷分類。然後,在步驟S3G後,檢查支援裝置7將該選擇的檢查的對象有無、檢查狀況、損傷程度的評價分類、對策需要與否、以及健全性的診斷分類的檢查結果資訊,連結到與步驟S3E、S3F中特定的檢查部位固有資訊相同的檢查部位固有資訊,登錄到檢查結果票D3(步驟S3H)。另外,組合框CB的操作的一部分或全部也可以在全部的檢查作業結束後進行。又,也可以在全部的檢查作業結束後,修正在檢查時所選擇的組合框CB的操作內容。
步驟S3H後,檢查支援裝置7參照儲存於內部的記錄部(圖示省略)的對照表TB,判定與步驟S3E、S3G中特定的檢查部位固有資訊相同的檢查部位固有資訊是否登錄於該對照表TB(步驟S3I)。第13圖係顯示對照表TB的一例。在此,檢查支援裝置7的內部的記錄部(圖示省略)中記錄了對照表TB(第13圖)。對照表TB對於上述的設施清冊D1中包含的全部的道路附屬物分別設置。另外,第13圖中,僅圖示1個道路附屬物所對應的1個對照表TB。這個對照表TB中,針對每個檢查部位登錄複數個檢查關聯資訊,其連結了檢查部位的檢查部位固有資訊、以及顯示該檢查部位的檢查開始時刻及檢查結束時刻之時間戳記。第13圖的例子中,假設1個道路附屬物的全部的檢查部位是第1~第6檢查部位的6個部位,對照表TB中登錄了該第1~第6檢查部位所分別對應的6個檢查關聯資訊DA1~DA6。以下,說明6個檢查關聯資訊DA1~DA6中的檢查關聯資訊DA1、DA2、DA5。
檢查關聯資訊DA1是檢查部位固有資訊ID1、顯示檢查開始時刻ST1及檢查結束時刻EN1的時間戳記、以及顯示檢查開始時刻ST1’及檢查結束時刻EN1’的時間戳記相連結的資訊。在此,檢查部位固有資訊ID1是對第1檢查部位執行的第1次的步驟S3E、S3G中特定的檢查部位固有資訊。又,顯示檢查開始時刻ST1及檢查結束時刻EN1的時間戳記,是對第1檢查部位執行的第1次的步驟S3E、S3G中特定的時間戳記。又,顯示檢查開始時刻ST1’及檢查結束時刻EN1’的時間戳記是對第1檢查部位執行的第2次的步驟S3E、S3G中特定的時間戳記。
檢查關聯資訊DA2是檢查部位固有資訊ID2、顯示檢查開始時刻ST2及檢查結束時刻EN2的時間戳記相連結的資訊。在此,檢查部位固有資訊ID2是對第2檢查部位執行的第1次的步驟S3E、S3G中特定的檢查部位固有資訊。又,顯示檢查開始時刻ST2及檢查結束時刻EN2的時間戳記,是對第2檢查部位執行的第1次的步驟S3E、S3G中特定的時間戳記。另外,其他的檢查關聯資訊DA3、DA4、DA6也具有與檢查關聯資訊DA2相同的架構。
檢查關聯資訊DA5是檢查部位固有資訊ID5、顯示檢查開始時刻ST5及檢查結束時刻EN5的時間戳記、顯示檢查開始時刻ST5’及檢查結束時刻EN5’的時間戳記、以及顯示檢查開始時刻ST5”及檢查結束時刻EN5”的時間戳記相連結的資訊。在此,檢查部位固有資訊ID5是對第5檢查部位執行的第1次的步驟S3E、S3G中特定的檢查部位固有資訊。又,顯示檢查開始時刻ST5及檢查結束時刻EN5的時間戳記,是對第5檢查部位執行的第1次的步驟S3E、S3G中特定的時間戳記。又,顯示檢查開始時刻ST5’及檢查結束時刻EN5’的時間戳記是對第5檢查部位執行的第2次的步驟S3E、S3G中特定的時間戳記。又,顯示檢查開始時刻ST5”及檢查結束時刻EN5”的時間戳記是對第5檢查部位執行的第3次的步驟S3E、S3G中特定的時間戳記。
以下,基於第13圖的例子,說明步驟S3J、S3K。在此,假設以下的第1情況。第1情況是指在對第1檢查部位執行第1次的步驟S3E、S3G中,特定了檢查部位固有資訊ID1、檢查開始時刻ST1、以及檢查結束時刻EN1的情況。又,第1情況是在第1次的步驟S3E、S3G之前,檢查關聯資訊DA1沒有登錄對照表TB的情況。
第1情況下,檢查支援裝置7判定與第1次的步驟S3E、S3G中特定的檢查部位固有資訊ID1相同的檢查部位固有資訊ID1沒有登錄到對照表TB(步驟S3I:No)。然後,檢查支援裝置7將第1次的步驟S3E、S3G中特定的檢查部位固有資訊ID1、顯示檢查開始時刻ST1及檢查結束時刻EN1的時間戳記相連結,作為新的檢查關聯資訊DA1登錄至對照表TB(步驟S3J)。
又,假設以下的第2情況。第2情況是指在對第1檢查部位執行第2次的步驟S3E、S3G中,特定了檢查部位固有資訊ID1、檢查開始時刻ST1’、以及檢查結束時刻EN1’的情況。也就是,又,第2情況是在第2次的步驟S3E、S3G之前檢查關聯資訊DA1登錄到了對照表TB,但檢查關聯資訊DA1中沒有包含檢查開始時刻ST1’及檢查結束時刻EN1’的時間戳記的情況。
第2情況下,檢查支援裝置7判定與第2次的步驟S3E、S3G中特定的檢查部位固有資訊ID1相同的檢查部位固有資訊ID1登錄到對照表TB(步驟S3I:Yes)。然後,檢查支援裝置7將與第2次的步驟S3E、S3G中特定的檢查部位固有資訊ID1相同的檢查部位固有資訊ID1、顯示該第2次的步驟S3E、S3G中特定的檢查開始時刻ST1’及檢查結束時刻EN1’的時間戳記相連結,更新檢查關聯資訊DA1(步驟S3K)。
步驟S3J或步驟S3K後,檢查支援裝置7判斷是否有第1作業者進行的確認操作(步驟S3L)。沒有確認操作的情況下(步驟S3L:No),檢查支援裝置7回到步驟S3D。另一方面,有確認操作的情況下(步驟S3L:Yes),檢查支援裝置7結束本流程(第1動作)。
[檢查支援裝置的第2動作] 接著,說明檢查支援裝置7的第2動作。第14圖係顯示檢查支援裝置7的第2動作的流程圖。檢查支援裝置7確立與攝影裝置6之間的通訊連接,接收該攝影裝置6中的內部的記錄部(圖示省略)中儲存的攝影資料(步驟S3M)。另外,作為第2動作,也可以接在第1動作之後執行,也可以在第1動作後與該第1動作獨立地執行。將第2動作接在第1動作後執行的架構下,例如將有確認操作做為觸發來執行步驟S3M。又,第1動作後,與該第1動作獨立地執行第2動作的架構下,例如將使用者對檢查支援裝置7的既定操作做為觸發來執行步驟S3M。
步驟S3M後,檢查支援裝置7將儲存於內部的儲存部(圖示省略)中的對照表TB中登錄的檢查部位固有資訊,連結在步驟S3M接收的攝影資料中的檢查影像,更新檢查關聯資訊(步驟S3N)。
第15圖係說明步驟S3N的示意圖。具體來說,第15圖係顯示對照表TB的一例。另外,假設第15圖是對應到第13圖的圖。又,第15圖中,為了說明方便,檢查關聯資訊DA1~DA6中,省略了時間戳記的圖示。更進一步,第15圖中,檢查影像IM1~IM35是依照該檢查影像IM1~IM35的順序被拍攝。更具體來說,檢查影像IM1~IM5是從檢查開始時刻ST1至檢查結束時刻EN1為止的期間內分別攝影的檢查影像。檢查影像IM6~IM11是從檢查開始時刻ST2至檢查結束時刻EN2為止的期間內分別攝影的檢查影像。檢查影像IM12~IM14是從檢查開始時刻ST3至檢查結束時刻EN3為止的期間內分別攝影的檢查影像。檢查影像IM15~IM20是從檢查開始時刻ST4至檢查結束時刻EN4為止的期間內分別攝影的檢查影像。檢查影像IM21、IM22是從檢查開始時刻ST5至檢查結束時刻EN5為止的期間內分別攝影的檢查影像。檢查影像IM23~IM28是從檢查開始時刻ST6至檢查結束時刻EN6為止的期間內分別攝影的檢查影像。檢查影像IM29~IM31是從檢查開始時刻ST1’至檢查結束時刻EN1’為止的期間內分別攝影的檢查影像。檢查影像IM32、IM33是從檢查開始時刻ST5’至檢查結束時刻EN5’為止的期間內分別攝影的檢查影像。檢查影像IM34、IM35是從檢查開始時刻ST5”至檢查結束時刻EN5”為止的期間內分別攝影的檢查影像。
以下,基於第15圖的例子來說明步驟S3N。檢查支援裝置7比對登錄於對照表TB的各檢查關聯資訊DA1~DA6中包含的時間戳記、以及在步驟S3M接收的攝影資料中包含的攝影時刻。然後,檢查支援裝置7將連結了從檢查開始時刻至檢查結束時刻為止的期間內的攝影時刻之檢查影像,與連結了顯示該檢查開始時刻及該檢查結束時刻的時間戳記之檢查部位固有資訊進行連結然後更新檢查關聯資訊。例如,檢查影像IM1~IM5中分別連結了從檢查開始時刻ST1至檢查結束時刻EN1為止的期間內的攝影時刻。又,檢查影像IM29~IM31中分別連結了從檢查開始時刻ST1’至檢查結束時刻EN1’為止的期間內的攝影時刻。因此,檢查支援裝置7將檢查影像IM1~IM5、IM29~IM31與檢查部位固有資訊ID1連結並更新檢查關聯資訊DA1。同樣地,檢查支援裝置7將檢查影像IM6~IM11連結到檢查部位固有資訊ID2,然後更新檢查關聯資訊DA2。又,檢查支援裝置7將檢查影像IM12~IM14連結到檢查部位固有資訊ID3然後更新檢查關聯資訊DA3。更進一步,檢查支援裝置7將檢查影像IM15~IM20連結到檢查部位固有資訊ID4然後更新檢查關聯資訊DA4。又,檢查支援裝置7將檢查影像IM21、IM22、IM32~IM35連結到檢查部位固有資訊ID5然後更新檢查關聯資訊DA5。更進一步,檢查支援裝置7將檢查影像IM23~IM28連結到檢查部位固有資訊ID6然後更新檢查關聯資訊DA6。
步驟S3N後,檢查支援裝置7根據在步驟S3H登錄檢查結果資訊的檢查結果票D3、以及在步驟S3N更新的各檢查關聯資訊,將每個構件的構件資訊登錄至損傷記錄票D4(步驟S30)。之後,檢查支援裝置7結束本流程(第2動作)。具體來說,檢查支援裝置7在步驟S30登錄既定的構件之構件資訊時,將登錄到檢查結果票D3且連結到檢查部位固有資訊(關聯於該構件的構件固有資訊)的檢查結果資訊、以及登錄到對照表TB且連結到檢查部位固有資訊(關聯於該構件固有資訊)的檢查影像,連結至該構件固有資訊,然後將其作為構件資訊登錄到損傷記錄票D3。
在此,檢查支援裝置7中也有第1作業者進行損傷記錄票畫面的顯示操作的情況。該損傷記錄票畫面的顯示操作是在記載了檢查部位選擇畫面F2內的構件的名稱之複數的領域Ar1(第12圖)中,選擇出對應至想要確認的構件的領域Ar1的操作。然後,檢查支援裝置7在有第1作業者進行損傷記錄票畫面的顯示操作的情況下,根據在該顯示操作中選擇的構件所對應的損傷記錄票D3,顯示損傷記錄票畫面F3(參照第16圖)。
第16圖係顯示損傷記錄票畫面F3的一例的示意圖。損傷記錄票畫面F3中,例如第16圖所示,登載了構件名稱、作為構件全體的損傷程度的評價結果、以及該構件的處置內容等的資訊、配置分配至該構件的複數的檢查部位之檢查影像。
根據以上說明的本實施型態1,達成以下的效果。本實施型態1的支援資訊製作裝置3中,第2控制部32解析以關聯資訊製作裝置2預先製作的關聯資訊中包含的複數的攝影影像,辨識拍進該複數的攝影影像的至少任一者的攝影影像中的道路附屬物。又,第2控制部32判別拍入至攝影影像中的道路附屬物的分類,產生顯示該分類的設施分類資訊。然後,第2控制部32製作支援資訊(設施清冊D1及設施規格D2),其連結了設施分類資訊、以及顯示該道路附屬物的位置(對應於連結到拍入該道路附屬物的攝影影像之攝影位置資訊)的設施位置資訊。如以上,支援資訊製作裝置3能夠根據以關聯資訊製作裝置2製作的關聯資訊,略自動地製作支援資訊,因此要製作該支援資訊時不需要像習知一樣強迫作業者進行繁雜的作業,而能夠提昇便利性。
又,本實施型態1的支援資訊製作裝置3中,第2控制部32根據與拍入道路附屬物的攝影影像連結的攝影位置資訊所對應的設施位置資訊,從儲存於第2儲存部33的地圖資訊中抽出對應於該道路附屬物的位置的對應資訊。然後,第2控制部32製作對該設施位置資訊連結上該對應資訊之支援資訊。因此,支援資訊製作裝置3會因為有關於道路附屬物的各種資訊(設施分類資訊、設施位置資訊、以及對應資訊等)登錄到支援資訊,根據該支援資訊,管理該道路附屬物變得容易,能夠進一步提昇便利性。
又,本實施型態1的支援資訊製作裝置3中,第2控制部32根據攝影位置資訊來產生設施位置資訊。因此,相較於將攝影位置資訊登錄到支援資訊的架構,能夠將作為道路附屬物的位置之精度高的位置資訊(設施位置資訊)登錄至支援資訊。
(實施型態2) 接著,說明本實施型態2。以下的說明中,與上述的實施型態1相同的架構會標示相同的符號,並省略或簡略詳細的說明。相對於上述的實施型態1,本實施型態2對具有以第4圖的流程來製作支援資訊(設施清冊D1及設施規格D2)的支援資訊製作功能的第2控制部32,追加了用來更新製作的該支援資訊的支援資訊更新機能,只有這點的差異。關於該支援資訊更新功能,將在以下的「資訊更新方法」中說明。
[資訊更新方法] 第17圖係顯示本實施型態2的資訊更新方法的流程圖。以下,為了說明的方便,假設以第4圖的流程已經製作了支援資訊(設施清冊D1及設施規格D2),該支援資訊已經儲存於第2儲存部33。又,假設與關聯資訊製作裝置2在步驟S1A中取得的關聯資訊不同的新的關聯資訊會產生,儲存了該新的關聯資訊的儲存媒體4插入安裝於第2讀寫器31。另外,該新的關聯資訊是重新行走於製作步驟S1A取得的關聯資訊時車輛所行走的道路時,根據以第1攝影部25依序攝影的複數的攝影影像、以及以第1測位部26依序測量的攝影位置資訊而產生的資訊。
在此,步驟S1A中取得的關聯資訊、該關聯資訊中包含的攝影影像及攝影位置資訊,分別相當於本發明的第1關聯資訊、第1攝影影像及第1攝影位置資訊。又,已經由第4圖的流程製作的支援資訊(設施清冊D1及設施規格D2)所包含的設施分類資訊及設施位置資訊,分別相當於本發明的第1設施分類資訊及第1設施位置資訊。以下,為了說明方便,將已經由第4圖的流程製作的支援資訊所包含的設施分類資訊以及設施位置資訊分別記載為第1設施分類資訊以及第1設施位置資訊。更進一步,該新的關聯資訊、該新的關聯資訊所包含的攝影影像以及攝影位置資訊,分別相當於本發明的第2關聯資訊、第2攝影影像以及第2攝影位置資訊。
首先,第2控制部32因應於作業者對第2輸入部34進行開始支援資訊的更新之使用者操作,而輸出控制訊號至第2讀寫器31。回應該控制訊號,第2讀寫器31讀取儲存於儲存媒體4的新的關聯資訊(步驟S1F)。然後,被第2讀寫器31讀取的新的關聯資訊會儲存於第2儲存部33。
步驟S1F後,第2控制部32讀出儲存於第2儲存部33的新的關聯資訊,解析該新的關聯資訊中包含的複數的攝影影像(步驟S1G)。另外,該攝影影像的解析手法與上述實施型態1中說明的步驟S1B相同。藉此,第2控制部32辨識新的關聯資訊中包含的複數的攝影影像的至少任一攝影影像中拍入的道路附屬物。
步驟S1G後,第2控制部32判別在步驟S1G辨識的道路附屬物的分類(標示、照明、及資訊板),產生顯示出該分類的設施分類資訊(步驟S1H)該設施分類資訊相當於本發明的第2設施分類資訊。以下,為了說明方便,將該設施分類資訊記載為第2設施分類資訊。
在步驟S1H後,第2控制部32根據寫入了在步驟S1G辨識的道路附屬物的攝影影像所連結的攝影位置資訊,產生顯示出該道路附屬物的位置的設施位置資訊(步驟S1I)。另外,該設施位置資訊的產生手法與上述的實施型態1中說明的步驟S1D相同。該設施位置資訊相當於本發明的第2設施位置資訊。以下,為了說明方便,將該設施位置資訊記載為第2設施位置資訊。
步驟S1I後,第2控制部32讀取出儲存於第2儲存部33中的設施清冊D1所包含的全部的道路附屬物中的各第1設施位置資訊。然後,第2控制部32分別算出根據該各第1設施位置資訊的各道路附屬物的位置、根據在步驟S1I產生的第2設施位置資訊的道路附屬物(在步驟S1G辨識的道路附屬物)的位置之間的各分離距離△R(步驟S1J)。
在步驟S1J後,第2控制部32判定在步驟S1J算出的全部的分離距離△R是否各自超過了既定的閾值Rj(步驟S1K)。判定了全部的分離距離△R分別超過閾值Rj的情況下(步驟S1K:Yes),第2控制部32將在步驟S1G辨識的道路附屬物識別為新設置的道路附屬物。然後,第2控制部32更新儲存於第2儲存部33的支援資訊(步驟S1L)。之後,第2控制部32結束本流程。具體來說,第2控制部32在步驟S1L,將針對該新設置的道路附屬物在步驟S1H產生的第2設施分類資訊以及在步驟S1I產生的第2設施位置資訊等,新登錄(第5圖的例子中是作為No.4的道路附屬物而新登錄)至設施清冊D1。又,第2控制部32製作該新設置的道路附屬物所對應的設施規格D2。
另一方面,判定任一分離距離△R在閾值Rj以下,全部的分離距離△R各自都沒有超過閾值Rj的情況下(步驟S1K:No),第2控制部32判定相對於在步驟S1G辨識的道路附屬物(以下記載為第2道路附屬物)在閾值Rj以下的分離距離△R之道路附屬物(以下記載為第1道路附屬物)的位置(第1設施位置資訊)所連結的第1設施分類資訊、與針對第2道路附屬物在步驟S1H產生的第2設施分類資訊是否相同(步驟S1M)。判定第1設施分類資訊及第2設施分類資訊相同的情況下(步驟S1M:Yes),第2控制部32判斷第2道路附屬物是已經登錄到設施清冊D1中的道路附屬物(例如,自治體等的管理者所管理的管轄內的道路上已經設置的道路附屬物),結束本流程。
另一方面,判定第1設施分類資訊及第2設施分類資訊不同的情況下(步驟S1M:No),第2控制部32辨識第2道路附屬物是替代第1道路附屬物而新設置的道路附屬物。然後,第2控制部32移至步驟S1L,更新儲存於第2儲存部33的支援資訊。具體來說,第2控制部32在步驟S1L削除有關登錄到設施清冊D1的第1道路附屬物的資訊。又,第2控制部32刪除因應於第1道路附屬物的設施規格D2。更進一步,第2控制部32針對第2道路附屬物在步驟S1H產生的第2設施分類資訊以及在步驟S1I產生的第2設施位置資訊等,新登錄至設施清冊D1。又,第2控制部32製作第2道路附屬物所對應的設施規格D2。
根據以上說明的本實施型態2,除了與上述的實施型態1相同的效果之外,也可以達成以下的效果。本實施型態2的支援資訊製作裝置3中,第2控制部32藉由上述的資訊更新方法來更新支援資訊。因此,支援資訊製作裝置3能夠容易地製作去掉或新設置道路附屬物的情況下所對應的支援資訊,能夠更加提昇便利性。
(實施型態3) 接著,說明本實施型態3。以下的說明中,與上述的實施型態1相同的架構會標示相同的符號,而省略或簡略其詳細的說明。上述的實施型態1中,支援資訊製作裝置3根據以關聯資訊製作裝置2預先製作的關聯資訊,製作支援資訊。相對於此,本實施型態3的支援資訊製作裝置是以搭載於車輛的行車記錄器等構成,該車輛一邊行走於自治體等的管理者所管理的管轄內的道路一邊攝影道路附屬物等時,即時地製作支援資訊。
第18圖係顯示本實施型態3的支援資訊製作裝置8的方塊圖。本實施型態3的支援資訊製作裝置8如第18圖所示,具備第3控制部81、第3儲存部82、第3輸入部83、第3顯示部84、第3攝影部85、第3測位部86、通訊部87,是該各部81~87透過匯流排88連接的構造。
第3控制部81相當於本發明的處理器。這個第3控制部81是以CPU或FPGA等構成,按照儲存於第3儲存部82的程式(包括本發明的支援資訊製作程式),控制支援資訊製作裝置8全體的動作。在此,第3控制部81具有本發明的影像解析部、分類判別部、位置修正部、以及資訊製作部的功能。另外,關於第3控制部81的功能,將在後述的「支援資訊製作方法」中說明。
第3儲存部82儲存第3控制部81所執行的程式(包括本發明的支援資訊製作程式)、該第3控制部81的處理所必要的資訊、以及該第3控制部81處理的資訊(包括第3攝影部85所產生的攝影影像)等。在此,作為該第3控制部81的處理所必要的資訊,能夠例示出儲存於上述的實施型態1中說明的第2控制部33的地圖資訊或學習模型。
第3輸入部83是由受理使用者操作的按鈕、開關、觸控面板等所構成,將因應於該使用者操作的操作訊號輸出到第3控制部81。第3顯示部84是使用液晶或有機EL等的顯示器所構成,在第2控制部81的控制下,顯示各種的影像。另外,第3輸入部83的功能的一部分或全部分也可以作為觸控面板配置於第3顯示部84的表面。
第3攝影部85相當於本發明的攝影部。這個第3攝影部85省略了具體的圖式,但具備透鏡單元、拍攝元件、訊號處理部。該透鏡單元將被拍攝體影像成像在該拍攝元件的拍攝面。該拍攝元件是以接收該透鏡單元成像的被拍攝體影像並轉換為電訊號的CCD或CMOS等所構成。該訊號處理部對來自該拍攝元件的電訊號進行訊號處理(例如A/D轉換等)輸出影像資料(以下記載為攝影影像)。
第3測位部86相當於本發明的測位部。這個第3測位部86接收構成測量地上的物體的位置的測量手段GPS(Global Positioning System)的複數的GPS衛星發送而來的衛星的軌道資訊,根據該接收的軌道資訊,輸出顯示支援資訊製作裝置3(第3攝影部85)的位置(緯度或經度)的攝影位置資訊。
通訊部87在第3控制部81的控制之下,按照既定的協定,與上述實施型態1中說明的檢查支援裝置7等的外部機器(省略圖示)之間進行各種資料(製作的支援資訊等)的通訊(無線通訊或有線通訊)。另外,本實施型態3中,雖然是透過通訊將製作的支援資訊等發送到外部機器的架構,但並不限於此,也可以採用使用上述實施型態1中說明的儲存媒體4這樣的可搬型儲存媒體,將該支援資訊等傳遞到該外部機器的架構。
[支援資訊製作方法] 接著,說明上述的支援資訊製作裝置8的動作(支援資訊製作方法)。第19圖係顯示支援資訊製作方法的流程圖。以下,假設支援資訊製作裝置8搭載於車輛,該車輛行走於自治體等的管理者所管理的管轄內的道路。首先,第3控制部81因應於作業者對第3輸入部83進行開始支援資訊的製作之使用者操作,將控制訊號分別輸出至第3攝影部85及第3測位部86。然後,回應於該控制訊號,由第3攝影部85拍攝的攝影影像依序輸出,同時,與該攝影影像的輸出時序同步,由第3測位部86測位而產生的攝影位置資訊依序輸出(步驟S4A)。
在步驟S4A後,第3控制部81依序解析從第3攝影部85依序輸出的攝影影像(步驟S4B)。另外,該攝影影像的解析手法與上述實施型態1中說明的步驟S1B相同。藉此,第3控制部81辨識拍入攝影影像中的道路附屬物。
步驟S4B後,第3控制部81判別在步驟S4B辨識的道路附屬物的分類(標示、照明、及資訊板等),產生顯示出該分類的設施分類資訊(步驟S4C)。
步驟S4C後,第3控制部81,根據在與拍入在步驟S4B辨識的道路附屬物的攝影影像略相同的輸出時序下從第3測位部86輸出的攝影位置資訊,產生顯示出該道路附屬物的位置之設施位置資訊(步驟S4D)。另外,該設施位置資訊的產生手法與上述實施型態1所說明的步驟S1D相同。又,第3測位部86中每單位時間產生的攝影位置資訊的數目比第3攝影部85中每單位時間產生的攝影影像的數目(幀數)少。因此,第3控制部81在沒有與拍入在步驟S4B辨識的道路附屬物的攝影影像略相同的輸出時序下從第3測位部86輸出的攝影位置資訊的情況下,藉由插補(例如直線插補)來產生該攝影位置資訊。
步驟S4D後,第3控制部81與上述實施型態1中說明的步驟S1E相同,製作將在步驟S4C中產生的設施分類資訊以及將在步驟S4D中產生的設施位置資訊連結的支援資訊(設施清冊D1及設施規格D2)(步驟S4E)。之後,第3控制部81結束本流程。
如以上說明的本實施型態3,支援資訊製作裝置8即使採用在拍攝道路附屬物等時即時製作支援資訊的架構,也會達成與上述的實施型態1相同的效果。
(其他的實施型態) 目前為止說明了實施本發明的型態,但本發明並不限定於上述實施型態1~3。上述的實施型態1~3中,本發明的設施是以道路附屬物做為例子展示,但並不限定於此,也包含了橋樑或隧道等。上述的實施型態1~3中說明的流程並不限定於第4、8、9、14、17及19圖的流程,在沒有矛盾的範圍內亦可變更順序。
[產業上的利用可能性] 如以上所述,本發明的支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式,對製作用以支援標示或照明等的道路附屬物的檢查之支援資訊有所幫助。
1:支援訊製作系統 2:關聯資訊製作裝置 3,8:支援資訊製作裝置 4:儲存媒體 5:檢查支援系統 6:攝影裝置 7:檢查支援裝置 21:第1控制部 22:第1儲存部 23:第1輸入部 24:第1顯示部 25:第1攝影部 26:第1測位部 27:第1讀寫器 28:匯流排 31:第2讀寫器 32:第2控制部 33:第2儲存部 34:第2輸入部 35:第2顯示部 36:匯流排 81:第3控制部 82:第3儲存部 83:第3輸入部 84:第3顯示部 85:第3攝影部 86:第3測位部 87:通訊部 88:匯流排 BC:確認按鈕 BE:檢查結束按鈕 BS:檢查開始按鈕 CB:組合框 D0:檢查資料 D1:設施清冊 D2:設施規格 D3:檢查結果票 D4:損傷記錄票 D101:管理編號 D102:管理者名 D10:路線名 D104:距離標 D105:設施位置資訊 D106:緯度 D107:經度 D108:上下分類 D109:設施分類資訊 D110:檢查日 D111:檢查公司 D112:檢查員 D113:損傷度 D201:種別資訊 D202:位置資訊 D203:構造資訊 D204:設置環境資訊 D205:檢查資訊 D206:周邊地圖 D207:攝影影像 DA1~DA6:檢查關聯資訊 EN1,EN1’,EN2~EN5,EN5’,EN5”,EN6:檢查結束時刻 F1:設施選擇畫面 F2:檢查部位選擇畫面 F3:損傷記錄票畫面 F10a,F10b:道路附屬物資訊 F11a,F11b:規格資訊 F12a,F12b:攝影影像 ID1~ID6:檢查部位固有資訊 IM1~IM35:檢查影像 ST1,ST1’,ST2~ST5,ST5’,ST5”,ST6:檢查開始時刻 TB:對照表
第1圖係顯示有關實施型態1的支援資訊製作系統。 第2圖係顯示關聯資訊製作裝置的方塊圖。 第3圖係顯示支援資訊製作裝置的方塊圖。 第4圖係顯示支援資訊製作方法的流程圖。 第5圖係顯示在步驟S1E製作的設施清冊的一例。 第6圖係顯示在步驟S1E製作的設施規格的一例。 第7圖係顯示檢查支援系統。 第8圖係顯示攝影裝置的動作的流程圖。 第9圖係顯示檢查支援裝置的第1動作的流程圖。 第10圖係說明步驟S3A的示意圖。 第11圖係說明步驟S3A的示意圖。 第12圖係顯示檢查部位選擇畫面的一例。 第13圖係顯示對照表的一例。 第14圖係顯示檢查支援裝置的第2動作的流程圖。 第15圖係說明步驟S3N的示意圖。 第16圖係顯示損傷記錄票畫面的一例。 第17圖係顯示實施型態2的資訊更新方法的流程圖。 第18圖係顯示實施型態3的支援資訊製作裝置的方塊圖。 第19圖係顯示支援資訊製作方法的流程圖。
3:支援資訊製作裝置
31:第2讀寫器
32:第2控制部
33:第2儲存部
34:第2輸入部
35:第2顯示部
36:匯流排

Claims (12)

  1. 一種支援資訊製作裝置,包括: 關聯資訊取得部,取得對於時間序列上依序拍攝的複數的第1攝影影像分別連結了顯示該第1攝影影像的攝影位置的第1攝影位置資訊之第1關聯資訊; 影像解析部,解析該複數的第1攝影影像,辨識該複數的第1攝影影像的至少任一第1攝影影像中拍入的特定的設施; 分類判別部,判別該第1攝影影像中拍入的該特定的設施的分類,產生顯示該分類的第1設施分類資訊;以及 資訊製作部,製作將該第1設施分類資訊及第1設施位置資訊連結的支援資訊,其中該第1設施位置資訊係顯示了連結了拍入該特定的設施的該第1攝影影像之該第1攝影位置資訊所對應的該特定的設施的位置。
  2. 如請求項1之支援資訊製作裝置,其中該資訊製作部,在該影像解析部辨識出彼此不同的複數的該特定的設施的情況下,就該辨識的每個該特定的設施,製作將該第1設施分類資訊及該第1設施位置資訊清單化的該支援資訊。
  3. 如請求項1之支援資訊製作裝置,其中該資訊製作部,在該影像解析部辨識出彼此不同的複數的該特定的設施的情況下,就該辨識的每個該特定的設施,分別製作該支援資訊。
  4. 如請求項1至3任一項之支援資訊製作裝置,更包括: 地圖資訊儲存部,儲存地圖資訊, 其中該資訊製作部根據與拍入該特定的設施的該第1攝影影像連結的該第1攝影位置資訊所對應之該第1設施位置資訊,從該地圖資訊抽出對應到該特定的設施的位置之對應資訊,製作將該對應資訊連結到該第1設施位置資訊之該支援資訊。
  5. 如請求項1至4任一項之支援資訊製作裝置,更包括: 位置修正部,根據該第1攝影位置資訊來產生該第1設施位置資訊, 該位置修正部,根據該影像解析部辨識的該特定的設施在該第1攝影影像內的大小,推測從攝影位置至該特定的設施的距離,根據推測的該距離,修正該攝影位置並產生該第1設施位置資訊。
  6. 如請求項1至5任一項之支援資訊製作裝置,其中該關聯資訊取得部,取得對於時間序列上依序拍攝的複數的第2攝影影像分別連結了顯示該第2攝影影像的攝影位置的第2攝影位置資訊之第2關聯資訊; 該影像解析部,解析該複數的第2攝影影像,辨識該複數的第2攝影影像的至少任一第2攝影影像中拍入的特定的設施; 該分類判別部,判別該第2攝影影像中拍入的該特定的設施的分類,產生顯示該分類的第2設施分類資訊; 該資訊製作部,將該第2設施分類資訊、顯示了連結了拍入該特定的設施的該第2攝影影像之該第2攝影位置資訊所對應的該特定的設施的位置之第2設施位置資訊、該支援資訊所包含的該第1設施分類資訊、以及該第1設施位置資訊相比較,根據該比較結果更新該支援資訊。
  7. 一種支援資訊製作裝置,包括: 攝影部,依序輸出拍攝的攝影影像; 測位部,測量攝影位置並產生顯示該攝影位置的攝影位置資訊; 影像解析部,依序解析從該攝影部輸出的該攝影影像,辨識該攝影影像中拍入的特定的設施; 分類判別部,判別該攝影影像裝置拍入的該特定的設施的分類,產生顯示出該分類的設施分類資訊; 資訊製作部,製作將該設施分類資訊以及設施位置資訊彼此連結之支援資訊,其中該設施位置資訊顯示出該特定的設施的位置,其對應到表示拍入該特定的設施的該攝影影像的攝影位置之該攝影位置資訊。
  8. 一種支援資訊製作系統,包括: 如請求項1至6任一項之支援資訊製作裝置; 關聯資訊製作裝置,具有產生該複數的第1攝影影像的攝影部、以及測量該攝影部的位置並產生顯示該位置的該第1攝影位置資訊的測位部,產生該第1關聯資訊。
  9. 一種支援資訊製作方法,由支援資訊製作裝置的處理器來執行,包括: 取得對於時間序列上依序拍攝的複數的攝影影像分別連結了顯示該攝影影像的攝影位置的攝影位置資訊之關聯資訊; 解析該複數的攝影影像,辨識該複數的攝影影像的至少任一攝影影像中拍入的特定的設施; 判別該攝影影像中拍入的該特定的設施的分類,產生顯示該分類的設施分類資訊;以及 製作將該設施分類資訊及設施位置資訊連結的支援資訊,其中該設施位置資訊係顯示了連結了拍入該特定的設施的該攝影影像之該攝影位置資訊所對應的該特定的設施的位置。
  10. 一種支援資訊製作方法,由支援資訊製作裝置的處理器來執行,包括: 使攝影部依序輸出拍攝的攝影影像; 使測位部測量該攝影部的位置並產生顯示該位置的攝影位置資訊; 依序解析從該攝影部輸出的該攝影影像,辨識該攝影影像中拍入的特定的設施; 判別該攝影影像裝置拍入的該特定的設施的分類,產生顯示出該分類的設施分類資訊; 製作將該設施分類資訊以及設施位置資訊彼此連結之支援資訊,其中該設施位置資訊顯示出該特定的設施的位置,其對應到表示拍入該特定的設施的該攝影影像的攝影位置之該攝影位置資訊。
  11. 一種支援資訊製作程式,使支援資訊製作裝置的處理器執行,該支援資訊製作程式指示該處理器執行以下處理: 取得對於時間序列上依序拍攝的複數的攝影影像分別連結了顯示該攝影影像的攝影位置的攝影位置資訊之關聯資訊; 解析該複數的攝影影像,辨識該複數的攝影影像的至少任一攝影影像中拍入的特定的設施; 判別該攝影影像中拍入的該特定的設施的分類,產生顯示該分類的設施分類資訊;以及 製作將該設施分類資訊及設施位置資訊連結的支援資訊,其中該設施位置資訊係顯示了連結了拍入該特定的設施的該攝影影像之該攝影位置資訊所對應的該特定的設施的位置。
  12. 一種支援資訊製作程式,使支援資訊製作裝置的處理器執行,該支援資訊製作程式指示該處理器執行以下處理: 使攝影部依序輸出拍攝的攝影影像; 使測位部測量該攝影部的位置並產生顯示該位置的攝影位置資訊; 依序解析從該攝影部輸出的該攝影影像,辨識該攝影影像中拍入的特定的設施; 判別該攝影影像拍入的該特定的設施的分類,產生顯示出該分類的設施分類資訊; 製作將該設施分類資訊以及設施位置資訊彼此連結之支援資訊,其中該設施位置資訊顯示出該特定的設施的位置,其對應到表示拍入該特定的設施的該攝影影像的攝影位置之該攝影位置資訊。
TW109118489A 2019-06-03 2020-06-02 支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式 TW202046194A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-103609 2019-06-03
JP2019103609A JP7280119B2 (ja) 2019-06-03 2019-06-03 支援情報作成装置、支援情報作成システム、支援情報作成方法、及び支援情報作成プログラム

Publications (1)

Publication Number Publication Date
TW202046194A true TW202046194A (zh) 2020-12-16

Family

ID=73648473

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109118489A TW202046194A (zh) 2019-06-03 2020-06-02 支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式

Country Status (5)

Country Link
US (1) US20220084309A1 (zh)
EP (1) EP3979150A4 (zh)
JP (1) JP7280119B2 (zh)
TW (1) TW202046194A (zh)
WO (1) WO2020246474A1 (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266442B1 (en) * 1998-10-23 2001-07-24 Facet Technology Corp. Method and apparatus for identifying objects depicted in a videostream
JP2007096855A (ja) * 2005-09-29 2007-04-12 Fujifilm Corp 撮影システム及び撮影方法
JP2011048674A (ja) * 2009-08-27 2011-03-10 Fujifilm Corp 検査支援システム、助言者端末、検査支援方法および検査支援プログラム
US11386512B2 (en) * 2015-02-06 2022-07-12 Sunrun, Inc. Systems and methods for generating permit sets
JP6203208B2 (ja) * 2015-02-18 2017-09-27 株式会社東芝 道路構造物管理システム、及び道路構造物管理方法
JP6646527B2 (ja) * 2016-06-14 2020-02-14 株式会社日立ソリューションズ 物体検知評価システム及び物体検知評価方法
JP6588392B2 (ja) 2016-06-24 2019-10-09 古河電気工業株式会社 点検支援システム、情報端末、点検支援方法、およびプログラム
JP6615065B2 (ja) * 2016-07-29 2019-12-04 エヌ・ティ・ティ・コムウェア株式会社 情報処理装置、情報処理方法、及びプログラム
JP6602743B2 (ja) * 2016-12-08 2019-11-06 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および情報処理方法
US20200241549A1 (en) * 2017-10-12 2020-07-30 Sony Corporation Information processing apparatus, moving apparatus, and method, and program

Also Published As

Publication number Publication date
EP3979150A4 (en) 2023-04-26
WO2020246474A1 (ja) 2020-12-10
EP3979150A1 (en) 2022-04-06
US20220084309A1 (en) 2022-03-17
JP2020197903A (ja) 2020-12-10
JP7280119B2 (ja) 2023-05-23

Similar Documents

Publication Publication Date Title
CN105788017B (zh) 一种基于北斗/gps定位、rfid和摄像头获取学生精准考勤状态的方法
JP7070683B2 (ja) 劣化診断装置、劣化診断システム、劣化診断方法、プログラム
JP7023690B2 (ja) 道路維持管理システム、道路維持管理方法及びコンピュータプログラム
CN103941746A (zh) 无人机巡检图像处理系统及方法
CN111260325A (zh) 基于bim的桥梁施工进度管理系统
JP2019070631A (ja) 飛行体利用劣化診断システム
CN103455789A (zh) 信息处理设备,信息处理方法和程序
CN111141311B (zh) 一种高精度地图定位模块的评估方法及系统
WO2016035993A1 (ko) 클라우드 포인트를 이용한 실내 지도 구축 장치 및 방법
CN106156714A (zh) 基于骨骼关节特征和表面特征融合的人体行为识别方法
US20170300971A1 (en) Information Processing System, Information Processing Apparatus, and Information Processing Method
CN107704851B (zh) 人物识别方法、公共传媒展示装置、服务器和系统
JP2022054521A (ja) 巡視点検作業評価システム、巡視点検作業評価装置、操作端末、位置検出端末、及び巡視点検作業評価方法
CN109711504A (zh) 固定标识物自动识别控制方法
KR101047378B1 (ko) 옥외광고물 측정시스템
CN113378754B (zh) 一种工地裸土监测方法
CN111242354A (zh) 用于可穿戴设备的方法、装置、电子设备及可读存储介质
TW202046194A (zh) 支援資訊製作裝置、支援資訊製作系統、支援資訊製作方法以及支援資訊製作程式
CN112418096A (zh) 检测跌的方法、装置和机器人
CN113190013B (zh) 控制终端运动的方法和装置
CN116259101A (zh) 一种用于考场或课堂纪律巡视的方法及巡视机器人
JP2022050926A (ja) 支援情報作成装置、支援情報作成システム、支援情報作成方法、及び支援情報作成プログラム
JP2023112536A (ja) 路面損傷位置の算定方法
JP2023133708A (ja) 支援情報作成装置、支援情報作成システム、支援情報作成方法、および支援情報作成プログラム
JP2020173866A (ja) 点検支援装置、点検支援システム、点検支援方法、及び点検支援プログラム