WO2017168779A1 - 情報抽出装置、情報抽出方法、およびプログラム - Google Patents
情報抽出装置、情報抽出方法、およびプログラム Download PDFInfo
- Publication number
- WO2017168779A1 WO2017168779A1 PCT/JP2016/074595 JP2016074595W WO2017168779A1 WO 2017168779 A1 WO2017168779 A1 WO 2017168779A1 JP 2016074595 W JP2016074595 W JP 2016074595W WO 2017168779 A1 WO2017168779 A1 WO 2017168779A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- road
- construction
- road construction
- update
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/08—Construction
Definitions
- the present invention relates to an information extraction device, an information extraction method, and a program, and more particularly to a technique for extracting information related to road updating.
- road update information that has been (or will be) generated (for example, white lines) or information on road signs, etc.
- road update information is highly useful information for each company providing services utilizing geospatial information. It is.
- the present invention has been made in view of the above-described problems, and an object of the present invention is to provide an information extraction device, an information extraction method, and a program capable of efficiently extracting information on road updates. Is to provide.
- a collecting means for collecting information relating to road construction and an extracting means for analyzing the collected information and extracting information relating to road updating.
- an information extraction device According to 1st invention, the information extraction apparatus which extracts automatically the information regarding road update based on the information regarding the collected road construction is provided. This makes it possible to efficiently extract information regarding road updates.
- the collecting means may collect information relating to a bid for road construction, and the extracting means may analyze the information and extract information relating to road updating.
- the information regarding the bid for road construction means information including at least a construction tender notice, a construction order prospect, and construction results.
- construction bid information means information including at least a construction tender notice, a construction order prospect, and construction results.
- the collecting means may collect information on road construction from arbitrary social media, and the extracting means may analyze the information and extract information on road updating. Thereby, the information regarding the road update about the road construction which a private organization implements can be grasped
- a discriminator for discriminating whether or not there is a road update, which is learned and generated based on information relating to road construction in which the presence or absence of road update is known, and the extracting means uses the discriminator.
- the information related to road update is at least one of information related to a place where the road update occurs, information related to the date and time of road update, and information related to the type of road update. Thereby, the detail of the information regarding road update can be obtained.
- information providing means for providing information to a user terminal connected to the information extracting device and the network may be further provided based on information relating to road update extracted by the extracting means.
- a user such as a map creator
- the collecting means further collects accompanying information accompanying information relating to road construction, and the providing means provides the accompanying information together.
- the user can grasp
- the collecting means performs text analysis on a resource to be collected, includes a keyword related to road construction, and does not include a keyword not related to road construction. It is desirable to collect information on road construction. Thereby, the information regarding road construction can be suitably collected.
- the second invention is an information extraction method including a collection step for collecting information on road construction, and an extraction step for analyzing the collected information and extracting information on road update. According to the second invention, there is provided an information extraction method for automatically extracting information relating to road updating based on the collected information relating to road construction. This makes it possible to efficiently extract information regarding road updates.
- the collecting step may collect information on road construction bids, and the extracting step may extract road update information based on the information.
- information on road updating is extracted from construction bid information published by each public entity on the Web, so that all road construction performed by an administrative entity can be grasped.
- the collecting step may collect information on road construction from arbitrary social media, and the extracting step may extract road update information based on the information.
- the information regarding the road update about the road construction which a private organization implements can be grasped
- the third invention is a program characterized in that it functions as the information extraction device according to any one of claims 1 to 8. By installing the program according to the third invention in the computer, the information extracting device according to the first invention is obtained.
- the present invention provides an information processing apparatus, an information extraction method, and a program that can efficiently extract information related to road updates.
- FIG. 1 is a diagram showing an overview of an information providing system 100 according to the present embodiment.
- the information providing system 100 includes an information extracting device 1 and one or more user terminals 3 connected to the information extracting device 1 via a network.
- the information extraction apparatus 1 collects information related to road construction (road construction related information 20) from resources on the Web, and extracts information related to road update (road update information 30). Then, the information extraction device 1 provides information to the user terminal 3 based on the extracted road update information 30.
- the resources on the Web refer to arbitrary information (text information, image information, and other various data files) constituting the Web site.
- the road construction related information 20 is data including text information (or information that can be converted into text) in part or all of the information.
- FIG. 2 is a diagram illustrating a hardware configuration of the information extraction apparatus 1 according to the present embodiment.
- the information extraction apparatus 1 includes a control unit 11, a storage unit 12, a media input / output unit 13, a communication control unit 14, an input unit 15, a display unit 16, and a peripheral device I / F unit 17. .
- the control unit 11 includes a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like.
- a CPU Central Processing Unit
- ROM Read Only Memory
- RAM Random Access Memory
- the CPU calls a program stored in the storage unit 12, ROM, storage medium or the like to a work memory area on the RAM and executes it, and executes all the processes performed by the information extraction apparatus 1 via the bus 19.
- the ROM is a non-volatile memory, and permanently holds a program such as a boot program and BIOS of the information extraction apparatus 1, data, and the like.
- the RAM is a volatile memory, and temporarily holds a program, data, and the like loaded from the storage unit 12, ROM, storage medium, and the like, and includes a work area used by the control unit 11 for performing various processes.
- the storage unit 12 is usually composed of an HDD (hard disk drive), and stores a program executed by the control unit 11, data necessary for program execution, and the like.
- a control program corresponding to an OS (operating system), a program for executing processing of the information extracting apparatus 1 described later, and the like are stored.
- Each of these program codes is read by the control unit 11 as necessary, transferred to the RAM, read by the CPU, and executed as various means.
- a program (crawler) for collecting (crawling) information related to road construction (road construction-related information 20) and accompanying information 50 associated with the road construction is periodically stored in the storage unit 12. Stored. Further, a discriminator 7 for discriminating whether or not a road is updated from the collected road construction related information 20 is stored.
- the media input / output unit 13 inputs / outputs data, and includes media input / output devices such as CD drives (-ROM, -R, -RW, etc.) and DVD drives (-ROM, -R, -RW, etc.). .
- the communication control unit 14 includes a communication control device, a communication port, and the like, collects road construction information 20 and incidental information 50 from resources on the Web via the network 5, and performs data communication with the user terminal 3 (for example, , Communication using TCP / IP).
- the input unit 15 inputs data and includes, for example, a pointing device such as a keyboard and a mouse, and an input device such as a numeric keypad.
- a pointing device such as a keyboard and a mouse
- an input device such as a numeric keypad.
- An operation instruction, an operation instruction, data input, and the like can be performed on the computer via the input unit 15.
- the display unit 16 includes a display device such as a CRT monitor and a liquid crystal panel.
- the peripheral device I / F (interface) unit 17 is a port for connecting a peripheral device to the computer, and the computer performs data communication with the peripheral device via the peripheral device I / F unit 17.
- the peripheral device I / F unit 17 is configured by USB, IEEE 1394, RS-232C, or the like, and usually includes a plurality of peripheral devices I / F.
- the connection form with the peripheral device may be wired or wireless.
- the bus 19 is a path that mediates transmission / reception of control signals and data signals between the devices.
- the information extraction apparatus 1 collects road construction related information 20 that is information relating to road construction from, for example, resources on the Web (crawling target) (step S1). Resources on the Web (Web site or the like) to be crawled are set and held in the storage unit 12 in advance.
- the road construction related information 20 may be information that is automatically or manually collected from any resource that is not open to the public other than the Web and stored in the storage unit 12.
- the road construction related information 20 is firstly construction bid information 20A (see FIG. 1).
- the construction bid information 20A refers to information including at least a construction tender notice, a construction order prospect, and construction results. Much of this information is published on the Web by each public entity. Construction tender notices, etc. are legally required to be provided when performing public works. For this reason, it is possible to grasp all road works carried out by the administrative body through construction bid announcements and the like. In addition, it is possible to grasp future road updates before the start of construction or at an early stage during construction.
- the road construction related information 20 is secondly social information 20B (see FIG. 1).
- the social information 20B refers to information related to road construction collected from posted articles and comments on arbitrary social media (Twitter, blog, Facebook, etc.).
- the construction bid information 20A described above for example, information on road construction performed by a private organization cannot be obtained.
- the social information 20B it is possible to cover information related to road construction that cannot be obtained by the construction bid information 20A.
- both the construction bid information 20A and the social information 20B are road construction related information 20 from the viewpoint of covering a wide range of information related to road construction performed by public and private organizations. Accordingly, only the construction bid information 20A or only the social information 20B may be collected.
- the information extraction apparatus 1 When the road construction related information 20 (construction bid information 20A and / or social information 20B) is collected in step S1, the information extraction apparatus 1 performs text analysis on all the resources to be crawled, and performs predetermined processing.
- the resources satisfying the above keyword condition are collected as road construction related information 20.
- the keyword condition includes, for example, keywords related to road construction (for example, “road”, “line”, “country”, “no.”, Etc.), and keywords not related to road construction (for example, “water supply”, “drainage”, “lighting”). For example).
- a dictionary in which names such as route names and place names nationwide are registered in advance, and information to be collected may be further narrowed down using this dictionary. Note that after all resources to be crawled are collected once, text analysis may be performed on the collected resources, and only resources satisfying a predetermined keyword condition or the like may be used as the road construction related information 20. That is, the processing order of selecting information after selecting it or selecting information after collecting it may be any.
- the construction tender announcement usually includes two types of information, that is, outline information of the construction described in HTML and published on the Web, and detailed information of the construction published in a PDF file or the like.
- the information extracting device 1 converts both into text data and collects it as construction bid information 20A (road construction related information 20).
- the information extraction apparatus 1 uses the collected road construction related information 20 to identify any road identification information (road identification). In association with the information), the data is differentiated for each road and managed and stored in the storage unit 12.
- the road identification information is, for example, road address, latitude / longitude, route name, and link ID position information extracted from road construction related information 20 (construction bid information 20A and / or social information 20B). Based on the road identification information, the collected road construction related information 20 is data-divided for each road.
- construction bid information 20A and social information 20B are collected as road construction related information 20
- Each piece of information on the road for example, each piece of information with matching road identification information
- the construction bid information 20A and the social information 20B related to the same road are accurately associated.
- the road construction related information 20 will be described as being data-divided for each road.
- the information extraction device 1 further collects incidental information 50 accompanying the road construction related information 20, associates it with each road (road identification information) of the road construction related information 20, and stores it.
- the accompanying information 50 is, for example, attached data relating to each road construction (photo data and drawing data of a construction site attached to a construction report or the like) disclosed on the website of each public organization. Thereby, since the data which can grasp
- the accompanying information 50 is search information (search URL, search image, etc.) searched using any search engine using road identification information obtained by text analysis of the road construction related information 20 as a search keyword. May be.
- the information extraction device 1 analyzes the road construction related information 20 collected in step S1, and extracts information relating to road update (hereinafter, road update information 30) for each road.
- the information extraction apparatus 1 determines whether or not roads are updated for each road construction. As a result, a road construction that involves road updating (changes in road structure and road usage rules occur) is identified. Specifically, a morphological analysis is performed on the collected road construction related information 20, keywords are extracted, the extracted keywords are input to the discriminator 7, and whether roads are updated or not is determined for each road construction. .
- the discriminator 7 is learned and generated in advance by machine learning in the following procedure, for example, and stored in the storage unit 12.
- Service 1 For a large number of roads, road construction related information that makes clear whether or not roads are updated is prepared.
- (Procedure 2) Morphological analysis is performed on the prepared road construction related information, and a phrase (keyword) is extracted.
- a phrase keyword
- the words “noun” and “sa-noun” are extracted (however, “proper nouns” such as place names are excluded) .
- the discriminator 7 uses the extracted words / phrases (keywords) and information on whether or not roads are updated as a learning data set, the discriminator 7 is moved by an arbitrary machine learning method (for example, support vector machine, neural network, boosting, deep learning, etc.). Let them learn.
- an arbitrary machine learning method for example, support vector machine, neural network, boosting, deep learning, etc.
- the information extraction device 1 discriminates whether or not there is a road update for each road, and identifies the road that accompanies the road update.
- the information extraction device 1 further analyzes the text of the road construction related information 20, and for the road with the specified road update, information on the location where the road update occurs (information such as “address”), and the date and time of the road update.
- Information information such as “construction completion date”
- information on the type of road update for example, “new construction”, “improvement construction”, etc.
- road update information 30 are extracted as road update information 30.
- These pieces of information are extracted by specifying a text part in the road construction related information 20 that matches a predetermined description rule of each road update information (for example, a description rule such as “address” and “date”). Is done.
- the information extraction apparatus 1 provides information to the user terminal 3 based on the road update information 30 extracted in step S2 (step S3). For example, it provides map data that clearly indicates a list of road addresses and road update locations that have been identified as “updated”.
- the information extracting apparatus 1 obtains the accompanying information 50 regarding the road determined to be “updated” from the storage unit 12 and provides the accompanying information 50 together.
- the information extraction apparatus 1 collects the road construction related information 20 from the resources on the Web (step S1), analyzes the collected road related information 20, and extracts the road update information 30. (Step S2). Then, based on the extracted road update information 30, information is provided to the user terminal 3 (step S3).
- road construction-related information 20 regarding road construction bid announcements
- construction bid information 20A regarding road construction bid announcements
- all road construction performed by the administrative body can be grasped, and before construction starts or under construction From this early stage, future road updates can be grasped.
- social information 20B about road construction collected from articles and comments posted on any social media (such as Twitter, blog, Facebook)
- information on road updates can be obtained for road works.
- by collecting the accompanying information 50 further, it is possible to grasp the details relating to the road update in more detail.
- the construction bid information 20A, the social information 20B, and the accompanying information 50 described above are not managed independently, but are integrated and managed in association with road identification information for identifying a road.
- the road update information 30 regarding a specific road can be extracted from the information included in both the construction bid information 20A and the social information 20B, and the accompanying information 50 associated with the road is referred to as the road update information 30. It can also be provided to users.
- Information extraction device 3 User terminal 5: Network 7: Discriminator 20: Road construction related information 20A: Construction bid information 20B: Social information 30: Road update information 50: Accompanying information 100: Information providing system
Landscapes
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
情報抽出装置1は、Web上のリソースから道路工事に関する情報(道路工事関連情報20)を収集し、道路更新に関する情報(道路更新情報30)を抽出する。道路工事関連情報20とは、第1には、各公共団体がWeb上で公開している道路工事の工事入札公告に関する情報(工事入札情報20A)である。また道路工事関連情報20とは、第2には、任意のソーシャルメディアの投稿記事やコメントなどから収集される道路工事に関する情報(ソーシャル情報20B)である。情報抽出装置1は、抽出した道路更新情報30に基づいて、利用者端末3に情報提供を行う。
Description
本発明は、情報抽出装置、情報抽出方法、およびプログラムに関し、特に、道路更新に関する情報を抽出する技術に関する。
近年、カーナビゲーションやマンナビゲーションをはじめ様々な分野において、地理空間情報を活用したサービスが広がっている。この中で、道路構造や道路利用ルールの変化(道路の新規供用、車線拡幅、交差点改良などの構造変化を伴う変化の他、信号機、街灯、防音壁の設置などによる変化や、道路標示(車線の白線など)、道路標識の変更など)が生じた(または生じる)ことを伝える情報(以下、道路更新情報)は、地理空間情報を活用したサービスを提供する各業者にとって、利用価値の高い情報である。
ところで、従来から、道路更新情報の収集は、道路管理者への問合せ、現地調査、調査車両等を用いた計測などにより行われている。しかしながら、このような収集方法は、多くの手間と時間を要するため、効率的ではない。
本発明は、前述した問題点に鑑みてなされたものであり、その目的とすることは、効率的に道路更新に関する情報を抽出することが可能な、情報抽出装置、情報抽出方法、およびプログラムを提供することである。
前述した目的を達成するための第1の発明は、道路工事に関する情報を収集する収集手段と、収集した前記情報を解析して、道路更新に関する情報を抽出する抽出手段と、を備えることを特徴とする情報抽出装置である。第1の発明によれば、収集した道路工事に関する情報に基づいて、道路更新に関する情報を自動で抽出する、情報抽出装置が提供される。これにより、効率的に道路更新に関する情報を抽出することが可能となる。
また第1の発明において、前記収集手段は、道路工事の入札に関する情報を収集し、前記抽出手段は、前記情報を解析して、道路更新に関する情報を抽出して
もよい。ここで、道路工事の入札に関する情報(工事入札情報)とは、少なくとも、工事入札公告、工事発注見通し、及び工事実績を含む情報のことをいう。これにより、例えば、各公共団体がWeb上で公開している工事入札情報から、道路更新に関する情報を抽出するので、行政主体で行われる全ての道路工事を把握できる。また、工事着工前または工事実施中の早い段階から、将来の道路更新について把握することができる。
もよい。ここで、道路工事の入札に関する情報(工事入札情報)とは、少なくとも、工事入札公告、工事発注見通し、及び工事実績を含む情報のことをいう。これにより、例えば、各公共団体がWeb上で公開している工事入札情報から、道路更新に関する情報を抽出するので、行政主体で行われる全ての道路工事を把握できる。また、工事着工前または工事実施中の早い段階から、将来の道路更新について把握することができる。
また第1の発明において、前記収集手段は、任意のソーシャルメディアから道路工事に関する情報を収集し、前記抽出手段は、前記情報を解析して、道路更新に関する情報を抽出してもよい。これにより、例えば、民間機関が実施する道路工事についての道路更新に関する情報を把握できる。
また第1の発明において、道路更新の有無を既知とする道路工事に関する情報に基づいて学習生成された、道路更新の有無を判別する判別器を有し、前記抽出手段は、前記判別器を用いて、道路更新を伴う道路工事を特定し、当該道路工事についての道路更新に関する情報を抽出することが望ましい。これにより、判別器を用いて道路更新を伴う道路工事を特定するので、好適に道路更新に関する情報を抽出できる。
また第1の発明において、前記道路更新に関する情報は、道路更新が生ずる場所に関する情報、道路更新の日時に関する情報、道路更新の種別に関する情報、の少なくともいずれかであることが望ましい。これにより、道路更新に関する
情報の詳細を得ることができる。
情報の詳細を得ることができる。
また第1の発明において、前記抽出手段により抽出した道路更新に関する情報に基づいて、情報抽出装置とネットワーク接続された利用者端末に情報提供を行う情報提供手段を更に備えるようにしてもよい。これにより、例えば、利用者(地図作成業者など)は、提供された情報に基づいて、効率的に地図データの更新作業を行うことができる。
このとき、前記収集手段は、道路工事に関する情報に付随する付随情報を更に収集し、前記提供手段は、前記付随情報を併せて提供することが望ましい。これにより、利用者は、道路更新に関する内容を、より詳細に把握することができる。
このとき、前記収集手段は、道路工事に関する情報に付随する付随情報を更に収集し、前記提供手段は、前記付随情報を併せて提供することが望ましい。これにより、利用者は、道路更新に関する内容を、より詳細に把握することができる。
また第1の発明において、前記収集手段は、収集対象であるリソースに対して、テキスト解析を行い、道路工事に関連するキーワードを含み、かつ、道路工事に関連しないキーワードを含まない、前記リソースを道路工事に関する情報として収集することが望ましい。これにより、道路工事に関する情報を好適に収集することができる。
第2の発明は、道路工事に関する情報を収集する収集ステップと、収集した前記情報を解析して、道路更新に関する情報を抽出する抽出ステップと、を含むことを特徴とする情報抽出方法である。第2の発明によれば、収集した道路工事に関する情報に基づいて、道路更新に関する情報を自動で抽出する、情報抽出方法が提供される。これにより、効率的に道路更新に関する情報を抽出することが可能となる。
また第2の発明において、前記収集ステップは、道路工事の入札に関する情報を収集し、前記抽出ステップは、前記情報に基づいて、道路更新情報を抽出してもよい。これにより、例えば、各公共団体がWeb上で公開している工事入札情報から、道路更新に関する情報を抽出するので、行政主体で行われる全ての道路工事を把握できる。また、工事着工前または工事実施中の早い段階から、将来の道路更新について把握することができる。
また第2の発明において、前記収集ステップは、任意のソーシャルメディアから道路工事に関する情報を収集し、前記抽出ステップは、前記情報に基づいて、道路更新情報を抽出してもよい。これにより、例えば、民間機関が実施する道路工事についての道路更新に関する情報を把握できる。
第3の発明は、請求項1から請求項8のいずれかに記載の情報抽出装置として機能させることを特徴とするプログラムである。第3の発明に係るプログラムをコンピュータにインストールすることで、第1の発明に係る情報抽出装置が得られる。
本発明により、効率的に道路更新に関する情報を抽出することが可能な、情報処理装置、情報抽出方法、およびプログラムが提供される。
以下図面に基づいて、本発明の実施形態を詳細に説明する。
図1は、本実施形態に係る情報提供システム100の概要を示す図である。図に示すように、情報提供システム100は、情報抽出装置1と、情報抽出装置1とネットワーク接続された1以上の利用者端末3と、を備える。
情報抽出装置1は、例えば、Web上のリソースから道路工事に関する情報(道路工事関連情報20)を収集し、道路更新に関する情報(道路更新情報30)を抽出する。そして、情報抽出装置1は、抽出した道路更新情報30に基づいて、利用者端末3に情報を提供する。
Web上のリソースとは、Webサイトを構成する任意の情報(テキスト情報、画像情報、その他種々のデータファイル)を指す。また道路工事関連情報20とは、その一部または全部に、テキスト情報(またはテキスト化可能な情報)を含むデータとする。
図1は、本実施形態に係る情報提供システム100の概要を示す図である。図に示すように、情報提供システム100は、情報抽出装置1と、情報抽出装置1とネットワーク接続された1以上の利用者端末3と、を備える。
情報抽出装置1は、例えば、Web上のリソースから道路工事に関する情報(道路工事関連情報20)を収集し、道路更新に関する情報(道路更新情報30)を抽出する。そして、情報抽出装置1は、抽出した道路更新情報30に基づいて、利用者端末3に情報を提供する。
Web上のリソースとは、Webサイトを構成する任意の情報(テキスト情報、画像情報、その他種々のデータファイル)を指す。また道路工事関連情報20とは、その一部または全部に、テキスト情報(またはテキスト化可能な情報)を含むデータとする。
図2は、本実施形態に係る情報抽出装置1のハードウェア構成を示す図である。図に示すように、情報抽出装置1は、制御部11、記憶部12、メディア入出力部13、通信制御部14、入力部15、表示部16、周辺機器I/F部17から構成される。
制御部11は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等で構成される。
CPUは、記憶部12、ROM、記憶媒体等に格納されるプログラムをRAM上のワークメモリ領域に呼び出して実行し、バス19を介して情報抽出装置1が行う全ての処理を実行する。
ROMは、不揮発性メモリであり、情報抽出装置1のブートプログラムやBIOS等のプログラム、データ等を恒久的に保持している。
RAMは、揮発性メモリであり、記憶部12、ROM、記憶媒体等からロードしたプログラム、データ等を一時的に保持するとともに、制御部11が各種処理を行う為に使用するワークエリアを備える。
ROMは、不揮発性メモリであり、情報抽出装置1のブートプログラムやBIOS等のプログラム、データ等を恒久的に保持している。
RAMは、揮発性メモリであり、記憶部12、ROM、記憶媒体等からロードしたプログラム、データ等を一時的に保持するとともに、制御部11が各種処理を行う為に使用するワークエリアを備える。
記憶部12は、通常はHDD(ハードディスクドライブ)から構成され、制御部11が実行するプログラム、プログラム実行に必要なデータ等が格納される。プログラムに関しては、OS(オペレーティングシステム)に相当する制御プログラムや、後述する情報抽出装置1の処理を実行するためのプログラム等が格納されている。これらの各プログラムコードは、制御部11により必要に応じて読み出されてRAMに移され、CPUに読み出されて各種の手段として実行される。
記憶部12には、Web上のリソースを対象として、周期的に、道路工事に関する情報(道路工事関連情報20)、およびこれに付随する付随情報50を収集(クローリング)するプログラム(クローラ―)が格納されている。また、収集した道路工事関連情報20から、道路更新の有無を判別する判別器7が格納されている。
メディア入出力部13は、データの入出力を行い、例えば、CDドライブ(-ROM、-R、-RW等)、DVDドライブ(-ROM、-R、-RW等)のメディア入出力装置を有する。
通信制御部14は、通信制御装置、通信ポート等を有し、ネットワーク5を介してWeb上のリソースから道路工事情報20および付随情報50を収集し、また、利用者端末3とデータ通信(例えば、TCP/IPを用いた通信)を行う。
入力部15は、データの入力を行い、例えば、キーボード、マウス等のポインティングデバイス、テンキ―等の入力装置を有する。入力部15を介して、コンピュータに対して、操作指示、動作指示、データ入力等を行うことができる。
表示部16は、CRTモニタ、液晶パネル等のディスプレイ装置等を有する。
周辺機器I/F(インタフェース)部17は、コンピュータに周辺機器を接続させるためのポートであり、周辺機器I/F部17を介してコンピュータは周辺機器とのデータ通信を行う。周辺機器I/F部17は、USBやIEEE1394やRS-232C等で構成されており、通常複数の周辺機器I/Fを有する。周辺機器との接続形態は有線、無線を問わない。
バス19は、各装置間の制御信号、データ信号等の授受を媒介する経路である。
次に、図3のフローチャートを参照して、情報提供システム100(情報抽出装置1)の動作について説明する。
(道路工事関連情報および付随情報の収集)
まず、情報抽出装置1は、例えば、Web上のリソース(クローリングの対象)から、道路工事に関する情報である道路工事関連情報20を収集する(ステップS1)。クローリングの対象とするWeb上のリソース(Webサイト等)は、予め記憶部12に設定・保持されている。なお、道路工事関連情報20は、Web以外の一般公開されていない任意のリソースから、自動または手動にて収集し、記憶部12に記憶された情報でもよい。
まず、情報抽出装置1は、例えば、Web上のリソース(クローリングの対象)から、道路工事に関する情報である道路工事関連情報20を収集する(ステップS1)。クローリングの対象とするWeb上のリソース(Webサイト等)は、予め記憶部12に設定・保持されている。なお、道路工事関連情報20は、Web以外の一般公開されていない任意のリソースから、自動または手動にて収集し、記憶部12に記憶された情報でもよい。
ここで道路工事関連情報20とは、第1には、工事入札情報20A(図1参照)である。工事入札情報20Aとは、少なくとも、工事入札公告、工事発注見通し、及び工事実績を含む情報のことをいう。これらの情報の多くは、各公共団体がWeb上に公開している。工事入札公告等は、公的な工事を行う際に提供が法的に義務付けられている。このため、工事入札公告等によって行政主体で行われる全ての道路工事を把握できる。また、工事着工前または工事実施中の早い段階から、将来の道路更新について把握することができる。
また道路工事関連情報20とは、第2には、ソーシャル情報20B(図1参照)である。ソーシャル情報20Bとは、任意のソーシャルメディア(Twitter、ブログ、Facebookなど)の投稿記事やコメントなどから収集される道路工事に関する情報のことをいう。前記した工事入札情報20Aでは、例えば、民間機関が実施する道路工事に関する情報を得ることができない。ソーシャル情報20Bを用いることで、工事入札情報20Aでは得られない道路工事に関する情報を網羅することができる。
公的機関および民間機関が実施する道路工事に関する情報を幅広く網羅する観点から、前記した工事入札情報20Aおよびソーシャル情報20Bの双方を道路工事関連情報20として収集するのが望ましいが、実施の目的に応じて工事入札情報20Aのみ、或いはソーシャル情報20Bのみを収集するのでもよい。
ステップS1において道路工事関連情報20(工事入札情報20A、及び/又は、ソーシャル情報20B)を収集する際、情報抽出装置1はクローリングの対象となる全てのリソースに対して、テキスト解析を行い、所定のキーワード条件を満たす前記リソースを道路工事関連情報20として収集する。キーワード条件は、例えば、道路工事に関連するキーワード(例えば「道」「線」「国」「号」など)を含み、かつ、道路工事に関連しないキーワード(例えば「水道」「排水」「照明」など)を含まない、などの条件である。これにより、道路工事に関する情報のみが効果的に収集され、後段(ステップS2)において、道路更新に関する情報を精度よく抽出することができる。また、全国の路線名や地名などの名称を登録した辞書を予め用意しておき、この辞書を用いて、収集する情報を更に絞り込んでもよい。なお、クローリングの対象となる全てのリソースを一旦収集した後に、収集したリソースに対して、テキスト解析を行い、所定のキーワード条件等を満たすリソースのみを道路工事関連情報20とするのでもよい。すなわち、情報を選別してから収集するか、或いは収集した後に情報を選別するか、の処理順序はいずれでもよい。
また、工事入札公告は、通常、HTMLで記述されWeb上に公開されている工事の概要情報と、PDFファイル等で公開されている工事の詳細情報と、の2つを含む。情報抽出装置1は、両者をテキストデータ化して工事入札情報20A(道路工事関連情報20)として収集する。
道路工事関連情報20(工事入札情報20A、及び/又は、ソーシャル情報20B)を収集後、情報抽出装置1は、収集した道路工事関連情報20を、各道路を識別する任意の識別情報(道路識別情報)と対応付けて、道路ごとにデータ分化した上で記憶部12に管理記憶する。道路識別情報とは、例えば、道路工事関連情報20(工事入札情報20A、及び/又は、ソーシャル情報20B)から抽出される道路の住所、緯度経度、路線名やリンクIDの位置情報などである。この道路識別情報に基づいて、収集した道路工事関連情報20を道路ごとにデータ分化する。なお道路工事関連情報20として、工事入札情報20Aとソーシャル情報20Bの2つの情報を収集した場合には、道路ごとにデータ分化された各情報(工事入札情報20Aとソーシャル情報20B)のうち、同じ道路に関する各情報(例えば、道路識別情報が一致する各情報)を1つのデータとして管理記憶する。これにより、同じ道路に関する工事入札情報20Aとソーシャル情報20Bの双方が正確に紐付くこととなる。
以降、道路工事関連情報20は、道路ごとにデータ分化されているものとして説明する。
以降、道路工事関連情報20は、道路ごとにデータ分化されているものとして説明する。
また情報抽出装置1は、道路工事関連情報20に加え、道路工事関連情報20に付随する付随情報50を更に収集し、道路工事関連情報20の各道路(道路識別情報)と紐づけて、記憶部12に記憶する。付随情報50とは、例えば、各公共団体のWebサイトに公開されている各道路工事に関する添付データ(工事報告書等に添付される工事現場の写真データや図面データ)である。これにより、道路工事の内容を、写真や図面とともに視覚的に把握できるデータが得られるため、現地での道路更新箇所の照合等が容易となる。また付随情報50は、道路工事関連情報20をテキスト解析して得られる道路識別情報等を検索キーワードとし、任意の検索エンジンを用いて検索される検索情報(検索URLや検索画像など)等であってもよい。
(道路更新情報の抽出)
続いて、情報抽出装置1は、ステップS1において収集した道路工事関連情報20を解析し、各道路について、道路更新に関する情報(以下、道路更新情報30)を抽出する。
続いて、情報抽出装置1は、ステップS1において収集した道路工事関連情報20を解析し、各道路について、道路更新に関する情報(以下、道路更新情報30)を抽出する。
まず、情報抽出装置1は、各道路工事について、道路更新の有無を判別する。これにより、道路更新を伴う(道路構造や道路利用ルールの変化が生ずる)道路工事が特定される。
具体的には、収集した道路工事関連情報20に対して、形態素解析を実施し、キーワードを抽出し、抽出したキーワードを判別器7に入力し、各道路工事について、道路更新の有無を判別する。
具体的には、収集した道路工事関連情報20に対して、形態素解析を実施し、キーワードを抽出し、抽出したキーワードを判別器7に入力し、各道路工事について、道路更新の有無を判別する。
ここで判別器7は、例えば次のような手順で、事前に機械学習により学習生成され、記憶部12に格納されている。
(手順1)多数の道路について、道路更新の有無を明らかとした道路工事関連情報を準備する。
(手順2)準備した道路工事関連情報に対して、形態素解析を実施し、語句(キーワード)を抽出する。このとき、道路更新に関連しない用語の影響による機械学習の精度低下を抑制するため、「名詞」および「サ変名詞」の語句のみを抽出する(但し、地名などの「固有名詞」は除外する)。
(手順3)抽出した語句(キーワード)と道路更新の有無の情報を学習用データセットとして、任意の機械学習法(例えばサポートベクターマシン、ニューラルネットワーク、ブースティング、ディープラーニングなど)により判別器7を学習させる。
(手順1)多数の道路について、道路更新の有無を明らかとした道路工事関連情報を準備する。
(手順2)準備した道路工事関連情報に対して、形態素解析を実施し、語句(キーワード)を抽出する。このとき、道路更新に関連しない用語の影響による機械学習の精度低下を抑制するため、「名詞」および「サ変名詞」の語句のみを抽出する(但し、地名などの「固有名詞」は除外する)。
(手順3)抽出した語句(キーワード)と道路更新の有無の情報を学習用データセットとして、任意の機械学習法(例えばサポートベクターマシン、ニューラルネットワーク、ブースティング、ディープラーニングなど)により判別器7を学習させる。
以上のような手順で学習生成された判別器7を用いて、情報抽出装置1は、各道路について、道路更新の有無を判別し、道路更新を伴う道路を特定する。
そして、情報抽出装置1は、道路工事関連情報20を更にテキスト解析し、特定された道路更新を伴う道路について、道路更新が生ずる場所に関する情報(「住所」等の情報)、道路更新の日時に関する情報(「工事完了日」等の情報)、道路更新の種別に関する情報(例えば「新設工事」「改良工事」など)などを道路更新情報30として抽出する。これらの情報は、予め定められた各道路更新情報の記載ルール(例えば、「住所」や「日付」等の記載ルール)と整合する道路工事関連情報20中のテキスト部分を特定することで、抽出される。
(情報の提供)
そして、情報抽出装置1は、ステップS2において抽出した道路更新情報30に基づいて、利用者端末3に情報提供を行う(ステップS3)。例えば、道路更新「有り」と判別された道路の住所一覧や道路更新の場所を明示した地図データを提供する。
そして、情報抽出装置1は、ステップS2において抽出した道路更新情報30に基づいて、利用者端末3に情報提供を行う(ステップS3)。例えば、道路更新「有り」と判別された道路の住所一覧や道路更新の場所を明示した地図データを提供する。
このとき、情報抽出装置1は、道路更新「有り」と判別された道路に関する付随情報50を記憶部12から取得し、この付随情報50を併せて提供することが望ましい。
以上、本実施形態によれば、情報抽出装置1が、Web上のリソースから道路工事関連情報20を収集し(ステップS1)、収集した道路関連情報20を解析して、道路更新情報30を抽出する(ステップS2)。そして、抽出した道路更新情報30に基づいて、利用者端末3に情報提供を行う(ステップS3)。これにより、従来のように、道路管理者への問合せ、現地調査、調査車両等を用いた計測など、人海戦術に頼った手法と比べ、効率的に道路更新情報を抽出し提供することができる。
また、道路工事関連情報20として、道路工事の工事入札公告に関する情報(工事入札情報20A)を採用すれば、行政主体で行われる全ての道路工事を把握でき、また、工事着工前または工事実施中の早い段階から、将来の道路更新について把握することができる。また、道路工事関連情報20として、任意のソーシャルメディア(Twitter、ブログ、Facebookなど)の投稿記事やコメントなどから収集される道路工事に関する情報(ソーシャル情報20B)を採用すれば、民間機関が実施する道路工事について道路更新に関する情報を得ることができる。加えて、付随情報50を更に収集することで、道路更新に関する内容をより詳細に把握することができる。
なお、上記した工事入札情報20A、ソーシャル情報20B、付随情報50は、それぞれ独立に管理されるのではなく、道路を識別する道路識別情報と紐づけて統合的に管理される。これにより、特定の道路に関する道路更新情報30を、工事入札情報20Aおよびソーシャル情報20Bの双方に含まれる情報から抽出することができ、また、当該道路に紐づく付随情報50を道路更新情報30と併せて利用者に提供することができる。
なお、上記した工事入札情報20A、ソーシャル情報20B、付随情報50は、それぞれ独立に管理されるのではなく、道路を識別する道路識別情報と紐づけて統合的に管理される。これにより、特定の道路に関する道路更新情報30を、工事入札情報20Aおよびソーシャル情報20Bの双方に含まれる情報から抽出することができ、また、当該道路に紐づく付随情報50を道路更新情報30と併せて利用者に提供することができる。
以上、添付図面を参照しながら、本発明に係る好適な実施形態について説明したが、本発明はかかる例に限定されない。当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
1 :情報抽出装置
3 :利用者端末
5 :ネットワーク
7 :判別器
20 :道路工事関連情報
20A :工事入札情報
20B :ソーシャル情報
30 :道路更新情報
50 :付随情報
100 :情報提供システム
3 :利用者端末
5 :ネットワーク
7 :判別器
20 :道路工事関連情報
20A :工事入札情報
20B :ソーシャル情報
30 :道路更新情報
50 :付随情報
100 :情報提供システム
Claims (12)
- 道路工事に関する情報を収集する収集手段と、
収集した前記情報を解析して、道路更新に関する情報を抽出する抽出手段と、
を備えることを特徴とする情報抽出装置。 - 前記収集手段は、道路工事の入札に関する情報を収集し、
前記抽出手段は、前記情報を解析して、道路更新に関する情報を抽出する
ことを特徴とする請求項1に記載の情報抽出装置。 - 前記収集手段は、任意のソーシャルメディアから道路工事に関する情報を収集し、
前記抽出手段は、前記情報を解析して、道路更新に関する情報を抽出する
ことを特徴とする請求項1に記載の情報抽出装置。 - 道路更新の有無を既知とする道路工事に関する情報に基づいて学習生成された、道路更新の有無を判別する判別器を有し、
前記抽出手段は、前記判別器を用いて、道路更新を伴う道路工事を特定し、当該道路工事についての道路更新に関する情報を抽出する
ことを特徴とする請求項1から請求項3のいずれかに記載の情報抽出装置。 - 前記道路更新に関する情報は、道路更新が生ずる場所に関する情報、道路更新の日時に関する情報、道路更新の種別に関する情報、の少なくともいずれかである
ことを特徴とする請求項1から請求項4のいずれかに記載の情報抽出装置。 - 前記抽出手段により抽出した道路更新に関する情報に基づいて、情報抽出装置とネットワーク接続された利用者端末に情報提供を行う情報提供手段
を更に備えることを特徴とする請求項1から請求項5のいずれかに記載の情報抽出装置。 - 前記収集手段は、道路工事に関する情報に付随する付随情報を更に収集し、
前記情報提供手段は、前記付随情報を併せて提供する
ことを特徴とする請求項6に記載の情報抽出装置。 - 前記収集手段は、収集対象であるリソースに対して、テキスト解析を行い、道路工事に関連するキーワードを含み、かつ、道路工事に関連しないキーワードを含まない、前記リソースを道路工事に関する情報として収集する
ことを特徴とする請求項1から請求項7のいずれかに記載の情報抽出装置。 - 道路工事に関する情報を収集する収集ステップと、
収集した前記情報を解析して、道路更新に関する情報を抽出する抽出ステップと、
を含むことを特徴とする情報抽出方法。 - 前記収集ステップは、道路工事の入札に関する情報を収集し、
前記抽出ステップは、前記情報を解析して、道路更新に関する情報を抽出する
ことを特徴とする請求項9に記載の情報抽出方法。 - 前記収集ステップは、任意のソーシャルメディアから道路工事に関する情報を収集し、
前記抽出ステップは、前記情報を解析して、道路更新に関する情報を抽出する
ことを特徴とする請求項9に記載の情報抽出方法。 - 請求項1から請求項8のいずれかに記載の情報抽出装置として機能させることを特徴とするプログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016070380A JP6097429B1 (ja) | 2016-03-31 | 2016-03-31 | 情報抽出装置、情報抽出方法、およびプログラム |
| JP2016-070380 | 2016-03-31 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2017168779A1 true WO2017168779A1 (ja) | 2017-10-05 |
Family
ID=58281141
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2016/074595 Ceased WO2017168779A1 (ja) | 2016-03-31 | 2016-08-24 | 情報抽出装置、情報抽出方法、およびプログラム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP6097429B1 (ja) |
| WO (1) | WO2017168779A1 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6956133B2 (ja) * | 2017-09-20 | 2021-10-27 | ヤフー株式会社 | モデル |
| JP6541737B2 (ja) | 2017-09-20 | 2019-07-10 | ヤフー株式会社 | 選択装置、選択方法、選択プログラム、モデルおよび学習データ |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002092084A (ja) * | 2000-09-14 | 2002-03-29 | Pasuko:Kk | 道路工事情報収集、開示システム及び道路工事情報収集開示方法 |
| JP2004227304A (ja) * | 2003-01-23 | 2004-08-12 | Taiheiyo Cement Corp | コンクリートソリューションシステム |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000163435A (ja) * | 1998-11-27 | 2000-06-16 | Hokuriku Kensetsu Kosaikai | 土木工事画像管理方法及び土木工事画像管理装置 |
| JP2007249584A (ja) * | 2006-03-15 | 2007-09-27 | Softec:Kk | クライアントデータベース構築方法、データ検索方法、データ検索システム、データ検索フィルタリングシステム、クライアントデータベース構築プログラム、データ検索プログラム、データ検索フィルタリングプログラム及びプログラムを格納したコンピュータで読み取り可能な記録媒体並びに記録した機器 |
| US20090132673A1 (en) * | 2007-11-18 | 2009-05-21 | Sprigg Stephen A | System and method for transmitting alert locations to navigational devices |
| US8331958B2 (en) * | 2007-12-13 | 2012-12-11 | Garmin Switzerland Gmbh | Automatically identifying location information in text data |
-
2016
- 2016-03-31 JP JP2016070380A patent/JP6097429B1/ja active Active
- 2016-08-24 WO PCT/JP2016/074595 patent/WO2017168779A1/ja not_active Ceased
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002092084A (ja) * | 2000-09-14 | 2002-03-29 | Pasuko:Kk | 道路工事情報収集、開示システム及び道路工事情報収集開示方法 |
| JP2004227304A (ja) * | 2003-01-23 | 2004-08-12 | Taiheiyo Cement Corp | コンクリートソリューションシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017182544A (ja) | 2017-10-05 |
| JP6097429B1 (ja) | 2017-03-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8682882B2 (en) | System and method for automatically identifying classified websites | |
| CN111949834B (zh) | 选址方法和选址平台系统 | |
| CN111522901B (zh) | 文本中地址信息的处理方法及装置 | |
| KR101191172B1 (ko) | 이미지 데이터베이스의 이미지들을 관리하는 방법, 장치 및 컴퓨터 판독 가능한 기록 매체 | |
| EP3842963A1 (en) | Method and device for acquiring poi state information, apparatus, and computer storage medium | |
| CN107168991B (zh) | 一种搜索结果展示方法和装置 | |
| CN110019616B (zh) | 一种poi现势状态获取方法及其设备、存储介质、服务器 | |
| US9535978B2 (en) | Semantic mapping of topic map meta-models identifying assets and events to include weights | |
| EP3244166B1 (en) | System and method for identifying socially relevant landmarks | |
| CN110674360A (zh) | 一种用于数据关联图谱的构建和数据的溯源方法和系统 | |
| US9123004B2 (en) | Predicting an effect of events on assets | |
| KR20210038496A (ko) | 키워드 관계 구조를 이용한 동의어 추출 방법 및 시스템 | |
| KR102592561B1 (ko) | 인공지능 학습용 데이터 구축 시스템 | |
| CN103092855B (zh) | 探测地址更新的方法及装置 | |
| JP6097429B1 (ja) | 情報抽出装置、情報抽出方法、およびプログラム | |
| CN105138708A (zh) | 一种兴趣点名称的识别方法和装置 | |
| TW202146850A (zh) | 確定路名之處理裝置及方法 | |
| CN111125272B (zh) | 一种区域特征获取方法、装置、计算机设备及介质 | |
| CN110188207B (zh) | 知识图谱构建方法及装置、可读存储介质、电子设备 | |
| KR101747532B1 (ko) | 여행성 질의에 대응하는 검색 결과로 코스를 추천하는 방법 및 시스템 | |
| US11308280B2 (en) | Capture and search of virtual machine application properties using log analysis techniques | |
| CN110895587A (zh) | 用于确定目标用户的方法和装置 | |
| CN105279249A (zh) | 一种网站中兴趣点数据的置信度的判定方法和装置 | |
| CN114861062B (zh) | 信息过滤方法和装置 | |
| CN110688995A (zh) | 地图查询的处理方法,计算机可读存储介质和移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16896996 Country of ref document: EP Kind code of ref document: A1 |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 16896996 Country of ref document: EP Kind code of ref document: A1 |