WO2018105122A1 - 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法 - Google Patents

教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法 Download PDF

Info

Publication number
WO2018105122A1
WO2018105122A1 PCT/JP2016/086806 JP2016086806W WO2018105122A1 WO 2018105122 A1 WO2018105122 A1 WO 2018105122A1 JP 2016086806 W JP2016086806 W JP 2016086806W WO 2018105122 A1 WO2018105122 A1 WO 2018105122A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
teacher data
movement information
image
candidate extraction
Prior art date
Application number
PCT/JP2016/086806
Other languages
English (en)
French (fr)
Inventor
孝司 島田
武親 鶴谷
佐々木　博
雅博 肥塚
Original Assignee
富士通株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士通株式会社 filed Critical 富士通株式会社
Priority to PCT/JP2016/086806 priority Critical patent/WO2018105122A1/ja
Priority to JP2018555432A priority patent/JP6721846B2/ja
Publication of WO2018105122A1 publication Critical patent/WO2018105122A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N99/00—Subject matter not provided for in other groups of this subclass
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis

Definitions

  • the present invention relates to a teacher data candidate extraction program, a teacher data candidate extraction apparatus, and a teacher data candidate extraction method for extracting teacher data candidates used for machine learning of artificial intelligence.
  • An object of the present invention is to provide a teacher data candidate extraction program, a teacher data candidate extraction device, and a teacher data candidate extraction method capable of efficiently extracting teacher data candidates from a data group based on the characteristics of related information of teacher data.
  • the teacher data candidate extraction program is a program that extracts teacher data candidates used for machine learning of artificial intelligence, and associates related information associated with the data for each data of the data group. And causing the computer to execute a process of extracting, from the data group, data having the characteristics of the related information that match or similar to the characteristics of the related information included in the necessary teacher data as teacher data candidates.
  • FIG. 1 is an explanatory diagram showing the configuration of a system including a teacher data candidate extraction device according to an embodiment of the present invention.
  • FIG. 2 is an explanatory diagram showing an example of a road periphery image including a branch guidance sign.
  • FIG. 3 is an explanatory diagram illustrating an example of a functional configuration of the movement information management server.
  • FIG. 4 is an explanatory diagram illustrating an example of movement information.
  • FIG. 5 is an explanatory diagram illustrating an example of a hardware configuration of the movement information management server.
  • FIG. 6 is an explanatory diagram illustrating an example of a functional configuration of the teacher data candidate extraction apparatus.
  • FIG. 7 is an explanatory diagram showing an example of a road section where a branch guidance sign is installed.
  • FIG. 1 is an explanatory diagram showing the configuration of a system including a teacher data candidate extraction device according to an embodiment of the present invention.
  • FIG. 2 is an explanatory diagram showing an example of a road periphery image including a branch
  • FIG. 8 is an explanatory diagram showing an example of a table used for selecting “features of movement information”.
  • FIG. 9 is an explanatory diagram illustrating an image in which the extraction unit extracts continuous sections based on the “features of movement information” selected in FIG.
  • FIG. 10 is an explanatory diagram showing a method for determining similarity of target data based on “features of movement information” selected in FIG.
  • FIG. 11 is an explanatory diagram illustrating an example of a plurality of “features of movement information”.
  • FIG. 12 is an explanatory diagram illustrating an example of a hardware configuration of the teacher data candidate extraction device.
  • FIG. 13 is a flowchart illustrating an example of a flow in which the teacher data candidate extraction apparatus collects movement information and performs control until “feature of movement information” is selected.
  • FIG. 14 is a flowchart showing an example of a flow for performing control until a teacher data candidate is extracted based on the selected “features of movement information”.
  • FIG. 15 is an explanatory diagram showing an example of a road section in which a road information bulletin board is installed.
  • FIG. 16 is an explanatory diagram showing another example of a table used for selecting “features of movement information”.
  • the control performed by each part of the control means in the teacher data candidate extraction apparatus of the present invention is synonymous with the execution of the teacher data candidate extraction method of the present invention.
  • the details of the teacher data candidate extraction method of the invention will also be clarified.
  • the teacher data candidate extraction program of the present invention is realized as a teacher data candidate extraction device by using a computer such as a teacher data candidate extraction device as a hardware resource, through the description of the teacher data candidate extraction device of the present invention.
  • the details of the teacher data candidate extraction program of the present invention will also be clarified.
  • the teacher data is data used for “supervised learning” in which artificial intelligence machine learning is given inputs and outputs in advance and the correlation is learned by the artificial intelligence.
  • FIG. 1 is an explanatory diagram showing the configuration of a system including a teacher data candidate extraction device 100 according to an embodiment of the present invention.
  • the teacher data candidate extraction apparatus 100 has a built-in teacher data candidate extraction program.
  • a teacher data candidate extraction method is executed.
  • a guide sign hereinafter referred to as “branch guide sign”
  • FIG. 2 a guide sign indicating that a road has a branch from among countless road peripheral images photographed by a camera provided in a vehicle as a moving body.
  • the teacher data in this embodiment is a road peripheral image including a branch guide sign image.
  • the teacher data candidate is information of an image extracted by the teacher data candidate extraction device, and is the previous stage of the teacher data that has not been confirmed by the user.
  • the system including the teacher data candidate extraction device 100 includes a teacher data candidate extraction device 100 and a movement information management server 200.
  • the teacher data candidate extraction apparatus 100 and the movement information management server 200 are connected to each other via a network 300 so as to communicate with each other.
  • the teacher data candidate extraction apparatus 100 collects image information and movement information acquired by the movement information management server 200 via the network 300, and corresponds to the movement information when the image information is acquired for each image information.
  • the attached image data group is generated.
  • the image information is information on a road periphery image, for example, information on an image acquired by a camera mounted on a vehicle.
  • the movement information is information including position, time, and speed information in the vehicle, and is so-called probe data, for example, information acquired by the digital tachograph mounted on the truck every second.
  • the teacher data candidate extraction device 100 When the teacher data candidate extraction device 100 receives the designation of the installation position where the branch guidance sign is installed, the teacher data candidate extraction device 100 shows the movement information of the road section including the installation position where the designation is received to the user, and displays the “feature of the movement information” most.
  • the user selects a road section to be provided, and extracts all images taken in the road section having a “feature of movement information” that is the same as or similar to the selected “feature of movement information” from the image data group as teacher data candidates. .
  • “Characteristics of movement information” are changes in movement information that cause the existence of teacher data, not teacher data itself. Specifically, in the case where the teacher data is a road peripheral image including a branch guidance sign, the amount of traffic changes due to the branch near the installation position of the branch guidance sign. Changes in traffic volume near the installation location. In addition, when the teacher data indicates that the image of the road information bulletin board indicating that attention is paid to slip is image information included in the road peripheral image, the vehicle tends to slow down after the driver visually recognizes the road information bulletin board. Therefore, the “feature of the movement information” is defined as a change in speed before and after the installation position of the road information bulletin board.
  • the amount of traffic due to branching is based on “characteristics of movement information”. It is easy to obtain teacher data by obtaining road sections with features that change and extracting road peripheral images taken in the obtained road sections as teacher data candidates, and using a lot of the obtained teacher data for a short period of time Thus, the identification rate of road sign images can be improved.
  • FIG. 3 is an explanatory diagram illustrating an example of a functional configuration of the movement information management server 200.
  • the movement information management server 200 includes a communication unit 210, a control unit 220, and a storage unit 230.
  • the movement information management server 200 is an apparatus that receives image information and movement information every day from movement information acquisition terminals mounted on vehicles 400a, 400b, and 400c as moving bodies.
  • the control unit 220 transmits the received movement information of each vehicle to the teacher data candidate extraction apparatus 100 through the communication unit 210.
  • the moving body is described as a vehicle, but the present invention is not limited to this and may be a bicycle or the like.
  • a digital tachograph as a movement information acquisition terminal mounted on each of the vehicles 400a, 400b, and 400c includes a GPS (Global Positioning System) unit, a speed sensor mounted on the axle of the vehicle, and an acceleration sensor installed on the vehicle. Have.
  • the movement information acquisition terminal associates the information on the position, speed, and acceleration acquired by synchronizing the GPS unit, the speed sensor, and the acceleration sensor with the information on the synchronized time.
  • the mobile information acquisition terminal is a digital tachograph.
  • the present invention is not limited to this, and a car navigation system having the same function as that of the digital tachograph may be used.
  • FIG. 4 is an explanatory diagram showing an example of movement information. As shown in FIG. 4, in the present embodiment, items of “terminal ID, time information, position information, speed information, acceleration information” are stored in association with each other as movement information.
  • Terminal ID is a code used to identify a mobile information acquisition terminal.
  • Time information is time information when the position information and the speed information are acquired by synchronizing the GPS unit and the speed sensor.
  • Position information is information on longitude and latitude measured by the GPS unit.
  • Speed information is a measurement result of the speed measured by a speed sensor installed on the axle.
  • Accelerration information is a measurement result of a speed measured by an acceleration sensor installed in the vehicle.
  • FIG. 5 is an explanatory diagram illustrating an example of a hardware configuration of the movement information management server 200.
  • the movement information management server 200 includes a communication unit 210, a control unit 220, a storage unit 230, an input unit 240, an output unit 250, a ROM (Read Only Memory) 260, a RAM ( Random Access Memory) 270.
  • Each means of the movement information management server 200 is connected to be communicable via the bus 280.
  • the communication unit 210 receives movement information from a movement information acquisition terminal mounted on each vehicle by radio or the like based on an instruction from the control unit 220. Further, the communication unit 210 transmits the movement information to the teacher data candidate extraction apparatus 100 via the network 300 based on an instruction from the control unit 220.
  • the control unit 220 executes various programs stored in the storage unit 230 and controls the entire movement information management server 200.
  • An example of the control means 220 is a CPU (Central Processing Unit).
  • the storage unit 230 stores various programs installed in the movement information management server 200, data generated by executing the programs, and the like based on instructions from the control unit 220.
  • the storage unit 230 is not particularly limited and can be appropriately selected according to the purpose. For example, in addition to a solid state drive, a hard disk drive, etc., a CD (Compact Disc) drive, a DVD (Digital Versatile Disc) drive, a BD (You may have portable storage devices, such as a Blu-ray (registered trademark) Disc) drive.
  • the storage unit 230 may be a part of a cloud that is a computer group on the network.
  • the input unit 240 is, for example, a keyboard, a mouse, a touch panel, etc., and accepts various instructions to the movement information management server 200 based on instructions from the control unit 220.
  • the output unit 250 is, for example, a display or a speaker, and displays the internal state of the movement information management server 200 based on an instruction from the control unit 220.
  • the ROM 260 stores various programs and data necessary for the control unit 220 to execute the various programs stored in the storage unit 230. Specifically, a boot program such as BIOS (Basic Input / Output System) or EFI (Extensible Firmware Interface) is stored.
  • BIOS Basic Input / Output System
  • EFI Extensible Firmware Interface
  • the RAM 270 is a main storage device, and functions as a work area that is expanded when various programs stored in the storage unit 230 are executed by the control unit 220.
  • Examples of the RAM 270 include a DRAM (Dynamic Random Access Memory), an SRAM (Static Random Access Memory), and the like.
  • FIG. 6 is an explanatory diagram illustrating an example of a functional configuration of the teacher data candidate extraction device 100.
  • the teacher data candidate extraction apparatus 100 includes a communication unit 110, a storage unit 120, a control unit 130, an input unit 140, and an output unit 150.
  • the communication unit 110 outputs an instruction to transmit the movement information to the control unit 220 of the movement information management server 200 based on the instruction of the control unit 130, and receives the movement information from the movement information management server 200.
  • the communication unit 110 may receive the movement information as needed, or may be manually collected from the movement information acquisition terminal and / or the movement information management server 200 by the user.
  • the storage unit 120 includes a collection information database 121 (hereinafter, the database is referred to as a DB), a calculation result DB 122, and a teacher data candidate DB 123. Information stored in each DB will be described in the description of the control means 130. Further, the storage unit 120 stores various programs installed in the teacher data candidate extraction apparatus 100, data generated by executing the programs, and the like based on instructions from the control unit 130.
  • the control unit 130 includes a collection unit 131, a generation unit 132, and an extraction unit 133. Further, the control unit 130 executes various programs stored in the storage unit 120 and controls the entire teacher data candidate extraction apparatus 100.
  • the collection unit 131 transmits an instruction to the control unit of the movement information management server 200, and transmits and collects image information and movement information from the movement information management server 200.
  • the collection unit 131 temporarily stores the collected image information and movement information in the collection information DB.
  • the collection unit 131 divides the target road into sections of 100 m in advance, and allocates movement information for each section based on position information. Next, the collection unit 131 calculates the average and standard deviation in speed and acceleration, and the amount of traffic for each road section, and stores the calculated result in the calculation result DB 122.
  • the collection unit 131 outputs an instruction to the control unit 220 of the movement information management server 200 so that the movement information is transmitted from the movement information management server 200 via the network 300.
  • the movement information management server 200 may transmit movement information even if the collection unit 131 does not output an instruction, and a plurality of movement information management servers 200 may exist. Further, the collection unit 131 may directly collect movement information including image information and position, time, and speed information from the vehicle.
  • the generation unit 132 generates, for each image information, an image data group in which movement information when the image information is acquired is associated with each other.
  • an image data group in which movement information when the image information is acquired is associated with each other.
  • limiting in particular as a method of matching movement information for every image information It can select suitably according to the objective, For example, it is made to include the information of the image
  • the extraction unit 133 includes, in four road sections including the installation position of the branch guidance sign, a feature of the movement information that matches or is similar to the feature of the movement information whose traffic amount changes due to the branch of the road indicated by the branch guidance sign 4.
  • Image information associated with the position of one road section is extracted from the image data group as a teacher data candidate. That is, the extraction unit 133 includes movement information having a time or speed feature that matches or is similar to or similar to the time or speed feature included in the movement information having a predetermined range of positions including the received position in the image data group. Are extracted as teacher data candidates from the image data group.
  • FIG. 7 is an explanatory diagram showing an example of a road section where a branch guidance sign is installed.
  • the function of the extraction unit 133 will be described in detail by taking as an example a road section where a branch guide sign as shown in FIG. 7 is installed.
  • the control means 130 instructs the output means 150 based on the calculation result of the movement information stored in the calculation result DB 122, as shown in FIG. Display a table like
  • the designation of the installation position of the branch guide sign may be received from the user based on the road sign installation standard.
  • FIG. 8 is an explanatory diagram showing an example of a table used for selecting “features of movement information”.
  • the output means 150 provides a table showing movement information of four consecutive road sections (hereinafter sometimes referred to as “continuous sections”) including the installation position of the branch guide sign to the user. indicate.
  • the user selects, as the “movement information feature”, the continuous section in which the feature that changes the amount of traffic due to a branch on the road appears most.
  • the road section including the installation position of the branch guide sign is at the head because the road on the near side of the branch guide sign is not branched and the traffic volume is unlikely to change.
  • the number of “features of movement information” is not particularly limited and can be appropriately selected according to the purpose, but is preferably 50 or more. Further, in this embodiment, the designation of the installation position of a known branch guide sign is accepted from the user. However, the present invention is not limited to this, and the “features of movement information” included in the necessary teacher data is known. For example, the designation of “features of movement information” may be accepted without accepting designation of the installation position of the branch guide sign.
  • FIG. 9 is an explanatory diagram showing an image in which the extraction unit 133 extracts continuous sections based on the “features of movement information” selected in FIG.
  • the target data of the continuous section existing in the range enclosed in a rectangular shape on the map displayed on the screen is compared with the “features of movement information”, and is identical or similar to the “features of movement information”
  • the image information associated with the continuous section having the feature of the movement information to be extracted is extracted as a teacher data candidate from the image data group.
  • FIG. 10 is an explanatory diagram showing a method for determining similarity of target data based on “features of movement information” selected in FIG.
  • the error rate based on the value of each item of “movement information feature” is within ⁇ 10%, it is determined as a similar item, and the number of similar items is five. If it is above, it will determine with "the feature of movement information" and target data being similar, and the target data determined to be similar will be extracted as a teacher data candidate.
  • the extraction unit 133 stores the extracted teacher data candidates in the teacher data candidate DB 123.
  • image information associated with the G′-0 road section in the extracted target data that is, an image photographed in the G′-0 road section may be a road peripheral image including a branch guide sign. Since it is high, an image taken in the road section of G′-0 is extracted as a teacher data candidate. Thereafter, the extracted teacher data candidates may be used as teacher data after the user visually confirms them.
  • a plurality of “features of movement information” may be selected. As a result, it is possible to more efficiently and efficiently extract image information that is highly likely to be a road peripheral image including a branching guide sign as a teacher data candidate.
  • the input unit 140 receives designation of an installation position where the branch guide sign is installed from the user. Further, the input unit 140 receives an input for designating a region and a period for which image information is to be extracted.
  • the installation location where the branch guide sign is installed, the area and period for which image information is to be extracted may be specified by numerical values such as latitude and longitude, and may be displayed on a road map displayed on a screen such as a display. , The installation position where the branching guide sign is installed may be designated, or the area where the image information is to be extracted may be designated.
  • the input unit 140 can accept designation of the installation position where the branch guide sign is installed, the area and period for which image information is to be extracted, and other various information.
  • the output means 150 is a display or the like in this embodiment, and can display a road periphery image and the like.
  • the output unit 150 displays the internal state of the teacher data candidate extraction apparatus 100.
  • FIG. 12 is an explanatory diagram illustrating an example of a hardware configuration of the teacher data candidate extraction apparatus 100.
  • the teacher data candidate extraction apparatus 100 includes a communication unit 110, a storage unit 120, a control unit 130, an input unit 140, an output unit 150, a ROM 160, and a RAM 170.
  • Each means of the teacher data candidate extraction apparatus 100 is connected to be communicable via the bus 180.
  • the communication unit 110 receives movement information from the movement information management server 200 illustrated in FIG. 1 based on an instruction from the control unit 130. In this embodiment, the communication unit 110 receives the movement information based on an instruction from the control unit 130. However, the communication unit 110 may output an instruction to transmit the movement information from the movement information management server 200 via the network 300.
  • the storage unit 120 is not particularly limited and can be appropriately selected according to the purpose.
  • the storage unit 120 may include a portable storage device such as a CD drive, a DVD drive, and a BD drive in addition to a solid state drive and a hard disk drive. Good.
  • the storage unit 120 may be a part of a cloud that is a group of computers on the network.
  • control means 130 for example, a processor such as a CPU can be cited, and the entire processing of the teacher data candidate extraction apparatus 100 is executed.
  • the processor that executes the software is hardware.
  • the input unit 140 is not particularly limited and can be appropriately selected according to the purpose. Examples thereof include a keyboard, a mouse, and a touch panel.
  • the output means 150 is not particularly limited and can be appropriately selected according to the purpose. Examples thereof include a display and a speaker.
  • the ROM 160 stores various programs, data, and the like necessary for the control unit 130 to execute the various programs stored in the storage unit 120.
  • the RAM 170 is a main storage device, and functions as a work area that is developed when various programs stored in the storage unit 120 are executed by the control unit 130. Examples of the RAM 170 include a DRAM and an SRAM.
  • FIG. 13 is a flowchart illustrating an example of a flow in which the teacher data candidate extraction apparatus 100 collects movement information and performs control until “feature of movement information” is selected. Control until the teacher data candidate extraction apparatus 100 collects movement information and selects “features of movement information” will be described with reference to FIG. 6 according to the flowchart shown in FIG.
  • step S101 when the collection unit 131 collects the image information and the movement information, the process proceeds to S102.
  • step S102 when the collection unit 131 allocates image information and movement information for each road segment divided in advance, the process proceeds to S103.
  • step S103 the collection unit 131 shifts the process to S104 after calculating the traffic amount or the like based on the movement information for each road section.
  • step S104 when the control unit 130 receives designation of the installation position of a known branch guide sign from the user by the input unit 140, the control unit 130 shifts the process to S105.
  • step S105 the control unit 130 causes the output unit 150 to display the amount of traffic in a continuous section including the road section at the specified installation position, and the process proceeds to S106.
  • step S106 based on the display in step S105, when the user selects, as the “movement information feature”, a continuous section in which the feature that changes the traffic amount due to the road branching is selected, the process is terminated.
  • FIG. 14 is a continuation of the flowchart shown in FIG. 13, in which the teacher data candidate extraction apparatus 100 continues based on the selected “features of movement information” among the continuous sections in the region and period designated by the user. It is a flowchart which shows an example of the flow which performs control until it extracts a teacher data candidate from the characteristic of the movement information in an area. Control until the teacher data candidate extraction apparatus 100 extracts teacher data candidates will be described with reference to FIG. 6 according to the flowchart shown in FIG.
  • step S201 the control unit 130 shifts the process to S202 when the input unit 140 receives an area and period from which a teacher data candidate is to be extracted from the user.
  • step S202 the control means 130 will transfer a process to S203, if the continuous area in the designated area and period is set. If the process proceeds from step S203, a new continuous section different from the previously set continuous section is set, and the process proceeds to S203.
  • step S203 the extraction unit 133 determines whether or not the continuous section set in S202 is similar to the “features of movement information”. If the extraction unit 133 determines that the continuous section set in S202 is similar to the “features of movement information”, the extraction unit 133 shifts the process to S204, and determines that the continuous section is not similar to shifts the process to S202.
  • step S204 the extraction unit 133 ends the process when the image information associated with the set continuous section is extracted as a teacher data candidate.
  • the branch guidance sign is described as an example, but it may be another road sign, a road sign, and / or a road information bulletin board.
  • FIG. 15 is an explanatory diagram showing an example of a road section where a road information bulletin board is installed. Below, the case where the road section where the road information bulletin board as shown in FIG. 15 is installed is taken as an example will be described in detail.
  • the control unit 130 instructs the output unit 150 based on the calculation result stored in the calculation result DB 122 to display a table as shown in FIG. Is displayed.
  • FIG. 16 is an explanatory diagram showing another example of a table used for selecting “features of movement information”.
  • the output unit 150 outputs the movement information of four consecutive road sections (hereinafter sometimes referred to as “continuous sections”) including the installation position of the road information bulletin board indicating that attention should be paid to slipping.
  • the table shown is displayed to the user.
  • the user refers to the table shown in FIG. 16 and selects, as the “characteristics of the movement information”, the continuous section in which the feature that is alerted to the slip and the speed changes most appears.
  • the road section before the installation position of the road information bulletin board is headed, and the road section before the installation position of the road information bulletin board is It is preferable to include it.
  • a road section having a feature whose traffic volume changes due to a branch is obtained, and a road periphery image captured in the obtained road section is obtained as teacher data.
  • teacher data can be easily obtained, and the identification rate of road sign images can be improved in a short period of time.

Abstract

人工知能の機械学習に用いる教師データの候補を抽出するプログラムであって、データ群のデータごとに、前記データと関連する関連情報をそれぞれ対応付けし、必要とする教師データが備える前記関連情報の特徴と、一致又は類似する前記関連情報の特徴を備えるデータを、前記データ群から教師データ候補として抽出する、処理をコンピュータに実行させること特徴とする教師データ候補抽出プログラムである。

Description

教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法
　本発明は、人工知能の機械学習に用いる教師データの候補を抽出する、教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法に関する。
　近年、人工知能のうち、特に深層学習技術を用いた人工知能が広く利用され始めており、様々な分野で具体的な活用を検討している。
　例えば、道路や交通に関わる分野では、深層学習技術を用いた人工知能を用いて、道路周辺画像から道路標識や白線などの特定の画像を識別することにより、地図製作や自動運転などへの活用を検討している（例えば、特許文献１参照）。
特開２０１４－２２８３００号公報
　道路周辺画像から道路標識の画像を識別するための深層学習では、道路標識の画像が含まれる道路周辺画像である「教師データ」を見本として学習する場合、一つの道路標識の画像を識別するためには１，０００枚程度の教師データが必要となり、短期間で道路標識の画像の識別率を向上させるには更に多くの教師データが必要となる。
　しかしながら、１，０００枚程度の教師データを得るために、数万枚単位の道路周辺画像から人間が目視で選定する場合もあるため、多くの教師データを準備することは困難であるという問題がある。
　本発明は、教師データの関連情報の特徴に基づき、データ群から教師データ候補を効率的に抽出できる教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法を提供することを目的とする。
　一つの態様では、教師データ候補抽出プログラムは、人工知能の機械学習に用いる教師データの候補を抽出するプログラムであって、データ群のデータごとに、前記データと関連する関連情報をそれぞれ対応付けし、必要とする教師データが備える前記関連情報の特徴と、一致又は類似する前記関連情報の特徴を備えるデータを、前記データ群から教師データ候補として抽出する、処理をコンピュータに実行させる。
　データ群から教師データ候補を効率的に抽出できる。
図１は、本発明の一実施例に係る教師データ候補抽出装置を含むシステムの構成を示す説明図である。 図２は、分岐案内標識を含む道路周辺画像の一例を示す説明図である。 図３は、移動情報管理サーバの機能構成の一例を示す説明図である。 図４は、移動情報の一例を示す説明図である。 図５は、移動情報管理サーバのハードウェア構成の一例を示す説明図である。 図６は、教師データ候補抽出装置の機能構成の一例を示す説明図である。 図７は、分岐案内標識が設置されている道路区間の一例を示す説明図である。 図８は、「移動情報の特徴」を選定するために用いる表の一例を示す説明図である。 図９は、図８で選定した「移動情報の特徴」に基づき、抽出部が連続区間を抽出するイメージを示す説明図である。 図１０は、図８で選定した「移動情報の特徴」に基づき、対象データを類似判定する方法を示す説明図である。 図１１は、複数の「移動情報の特徴」の一例を示す説明図である。 図１２は、教師データ候補抽出装置のハードウェア構成の一例を示す説明図である。 図１３は、教師データ候補抽出装置が移動情報を収集し、「移動情報の特徴」が選定されるまでの制御を行う流れの一例を示すフローチャートである。 図１４は、選定された「移動情報の特徴」に基づき、教師データ候補を抽出するまでの制御を行う流れの一例を示すフローチャートである。 図１５は、道路情報掲示板が設置されている道路区間の一例を示す説明図である。 図１６は、「移動情報の特徴」を選定するために用いる表の他の一例を示す説明図である。
　以下、本発明の一実施例を説明するが、本発明は、この実施例に何ら限定されるものではない。
　なお、本発明の教師データ候補抽出装置における制御手段の各部が行う制御は、本発明の教師データ候補抽出方法を実施することと同義であるので、本発明の教師データ候補抽出装置の説明を通して本発明の教師データ候補抽出方法の詳細についても明らかにする。また、本発明の教師データ候補抽出プログラムは、ハードウェア資源として教師データ候補抽出装置などのコンピュータを用いることにより教師データ候補抽出装置として実現させることから、本発明の教師データ候補抽出装置の説明を通して本発明の教師データ候補抽出プログラムの詳細についても明らかにする。
　教師データとは、人工知能の機械学習のうち、入力と出力を事前に与えられ、その相関性を人工知能が学習するための「教師あり学習（Ｓｕｐｅｒｖｉｓｅｄ　Ｌｅａｒｎｉｎｇ）」に用いるデータである。
　図１は、本発明の一実施例に係る教師データ候補抽出装置１００を含むシステムの構成を示す説明図である。なお、教師データ候補抽出装置１００には教師データ候補抽出プログラムが内蔵されており、教師データ候補抽出装置１００を実施すると教師データ候補抽出方法が実施される。
　本実施例では、図２に示すような、移動体としての車両に備え付けたカメラにより撮影した無数の道路周辺画像の中から、道路に分岐があることを示す案内標識（以下、「分岐案内標識」と称することもある）の画像を、深層学習技術を用いた人工知能により識別させるための教師データの候補を抽出する例を説明する。
　なお、本実施例における教師データとは、分岐案内標識の画像を含む道路周辺画像である。また、教師データ候補とは、教師データ候補抽出装置が抽出する画像の情報であり、ユーザによる確認がなされていない教師データの前段階のものである。
　図１に戻り、教師データ候補抽出装置１００を含むシステムは、教師データ候補抽出装置１００と、移動情報管理サーバ２００とを有する。教師データ候補抽出装置１００と移動情報管理サーバ２００は、それぞれネットワーク３００を介して通信可能に接続されている。
　教師データ候補抽出装置１００は、まず、移動情報管理サーバ２００が取得した画像情報及び移動情報を、ネットワーク３００を介して収集し、画像情報ごとに、画像情報を取得した際の移動情報をそれぞれ対応付けした画像データ群を生成する。
　画像情報とは、道路周辺画像の情報であり、例えば、車両に搭載したカメラが取得した画像の情報である。また、移動情報は、車両における、位置、時刻、及び速度の情報を含む情報であり、いわゆるプローブデータであって、例えば、トラックが搭載するデジタルタコグラフが１秒ごとに取得する情報である。
　教師データ候補抽出装置１００は、分岐案内標識が設置されている設置位置の指定を受け付けると、指定を受け付けた設置位置を含む道路区間の移動情報をユーザに示し、「移動情報の特徴」を最も備える道路区間をユーザに選択させ、選択させた「移動情報の特徴」と一致又は類似する「移動情報の特徴」を備える道路区間で撮影した画像を、画像データ群から教師データ候補としてすべて抽出する。
　「移動情報の特徴」は、教師データそのものではなく、教師データの存在を推測させる移動情報の変化である。具体的には、教師データが、分岐案内標識を含む道路周辺画像である場合では、分岐案内標識の設置位置近傍の分岐により通行量が変化するため、「移動情報の特徴」を分岐案内標識の設置位置近傍の通行量の変化などとする。また、教師データが、スリップに注意する旨を表示する道路情報掲示板の画像が道路周辺画像に含まれている画像情報である場合では、道路情報掲示板をドライバーが視認した後に車両が速度を落とす傾向にあることから、「移動情報の特徴」を道路情報掲示板の設置位置の前後における速度の変化などとする。
　本実施例では、無数にある道路周辺画像から、分岐案内標識を含む道路周辺画像を無作為に得ようとすると時間がかかってしまうことから、「移動情報の特徴」に基づき、分岐により通行量が変化する特徴を備える道路区間を求め、求めた道路区間で撮影した道路周辺画像を教師データ候補として抽出することにより、教師データを得やすくなり、得られた多くの教師データを用いて短期間で道路標識の画像の識別率を向上させることができる。
　次に、本実施例の教師データ候補抽出装置１００と、移動情報管理サーバ２００とを含むシステムの構成についての詳細を説明する。
＜＜移動情報管理サーバの機能構成＞＞
　図３は、移動情報管理サーバ２００の機能構成の一例を示す説明図である。図３に示すように、移動情報管理サーバ２００は、通信手段２１０と、制御手段２２０と、記憶手段２３０とを有する。
　移動情報管理サーバ２００は、移動体としての車両４００ａ、４００ｂ、４００ｃにそれぞれ搭載される移動情報取得端末から画像情報及び移動情報を日々受信する装置である。
　制御手段２２０は、通信手段２１０により、受信した各車両の移動情報を教師データ候補抽出装置１００に送信する。
　本実施例では、移動体を車両として説明するが、これに限定することなく、自転車などであってもよい。
　車両４００ａ、４００ｂ、４００ｃにそれぞれ搭載される移動情報取得端末としてのデジタルタコグラフは、ＧＰＳ（Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）ユニットと、車両の車軸に搭載された速度センサと、車両に設置された加速度センサとを有する。移動情報取得端末は、ＧＰＳユニット、速度センサ、及び加速度センサを同期させて取得した位置、速度、及び加速度の情報を、同期させた時刻の情報と対応付けする。
　本実施例では、移動情報取得端末をデジタルタコグラフとしたが、これに限定することなく、デジタルタコグラフの機能と同様の機能を有するカーナビゲーションシステムなどでもよい。
　図４は、移動情報の一例を示す説明図である。図４に示すように、本実施例では、移動情報として「端末ＩＤ、時刻の情報、位置の情報、速度の情報、加速度の情報」の項目を対応付けて格納する。
　「端末ＩＤ」は、移動情報取得端末を識別するために用いられる符号である。
　「時刻の情報」は、ＧＰＳユニット及び速度センサを同期させて位置の情報及び速度の情報を取得した時刻の情報である。
　「位置の情報」は、ＧＰＳユニットにより測定された経度緯度の情報である。
　「速度の情報」は、車軸に設置された速度センサにより測定された速度の測定結果である。
　「加速度の情報」は、車両に設置された加速度センサにより測定された速度の測定結果である。
　なお、本実施例では、５種の移動情報、即ち、端末ＩＤ、時刻の情報、位置の情報、速度の情報、及び加速度の情報を用いる例で説明したが、これに限定するものではない。
＜＜移動情報管理サーバのハードウェア構成＞＞
　図５は、移動情報管理サーバ２００のハードウェア構成の一例を示す説明図である。図５に示すように、移動情報管理サーバ２００は、通信手段２１０と、制御手段２２０と、記憶手段２３０と、入力手段２４０と、出力手段２５０と、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）２６０と、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）２７０とを有する。なお、移動情報管理サーバ２００の各手段は、バス２８０を介してそれぞれ通信可能に接続されている。
　通信手段２１０は、制御手段２２０の指示に基づき、各車両に搭載されている移動情報取得端末から無線などにより移動情報を受信する。また、通信手段２１０は、制御手段２２０の指示に基づき、ネットワーク３００を介して教師データ候補抽出装置１００に移動情報を送信する。
　制御手段２２０は、記憶手段２３０に記憶された各種プログラムを実行し、移動情報管理サーバ２００全体を制御する。
　制御手段２２０としては、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）などが挙げられる。
　記憶手段２３０は、制御手段２２０の指示に基づき、移動情報管理サーバ２００にインストールされた各種プログラムや、プログラムを実行することにより生成されるデータ等を記憶する。
　記憶手段２３０は、特に制限はなく、目的に応じて適宜選択することができ、例えば、ソリッドステートドライブ、ハードディスクドライブなどのほか、ＣＤ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ）ドライブ、ＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｃ）ドライブ、ＢＤ（Ｂｌｕ－ｒａｙ（登録商標）　Ｄｉｓｃ）ドライブなどの可搬記憶装置を有してもよい。また、記憶手段２３０は、ネットワーク上のコンピュータ群であるクラウドの一部であってもよい。
　入力手段２４０は、例えば、キーボード、マウス、タッチパネルなどであり、制御手段２２０の指示に基づき、移動情報管理サーバ２００に対する各種指示を受け付ける。
　出力手段２５０は、例えば、ディスプレイ、スピーカーなどであり、制御手段２２０の指示に基づき、移動情報管理サーバ２００の内部状態の表示を行う。
　ＲＯＭ２６０は、記憶手段２３０に記憶された各種プログラムを制御手段２２０が実行するために必要な各種プログラム、データ等を記憶する。具体的には、ＢＩＯＳ（Ｂａｓｉｃ　Ｉｎｐｕｔ／Ｏｕｔｐｕｔ　Ｓｙｓｔｅｍ）やＥＦＩ（Ｅｘｔｅｎｓｉｂｌｅ　Ｆｉｒｍｗａｒｅ　Ｉｎｔｅｒｆａｃｅ）等のブートプログラムなどを記憶する。
　ＲＡＭ２７０は、主記憶装置であり、記憶手段２３０に記憶された各種プログラムが制御手段２２０によって実行される際に展開される作業領域として機能する。ＲＡＭ２７０としては、例えば、ＤＲＡＭ（Ｄｙｎａｍｉｃ　Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、ＳＲＡＭ（Ｓｔａｔｉｃ　Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）などが挙げられる。
（教師データ候補抽出装置）
＜教師データ候補抽出装置の機能構成＞
　図６は、教師データ候補抽出装置１００の機能構成の一例を示す説明図である。図６に示すように、教師データ候補抽出装置１００は、通信手段１１０と、記憶手段１２０と、制御手段１３０と、入力手段１４０と、出力手段１５０とを有する。
＜＜通信手段＞＞
　通信手段１１０は、制御手段１３０の指示に基づき、移動情報管理サーバ２００の制御手段２２０に移動情報を送信するように指示を出力し、移動情報管理サーバ２００から移動情報を受信する。
　移動情報を受信する際に、発生源を特定するため、受信する際に公知の電子署名技術等を用いて、正しい情報作成者であること、及び情報の改ざんが行われていないことの少なくともいずれかを確認することが好ましく、情報の授受期限についても管理し、所定の期限経過後の情報は受け付けないことが更に好ましい。
　なお、通信手段１１０は、移動情報を随時受信してもよく、ユーザが手動で移動情報取得端末、及び／又は移動情報管理サーバ２００から収集してもよい。
＜＜記憶手段＞＞
　記憶手段１２０は、収集情報データベース１２１（以下、データベースをＤＢと称する）と、算出結果ＤＢ１２２と、教師データ候補ＤＢ１２３とを有する。各ＤＢに格納される情報などについては、制御手段１３０の説明で述べる。
　また、記憶手段１２０は、制御手段１３０の指示に基づき、教師データ候補抽出装置１００にインストールされた各種プログラムや、プログラムを実行することにより生成されるデータ等を記憶する。
＜＜制御手段＞＞
　制御手段１３０は、収集部１３１と、生成部１３２と、抽出部１３３とを有する。
　また、制御手段１３０は、記憶手段１２０に記憶された各種プログラムを実行し、教師データ候補抽出装置１００全体を制御する。
－収集部－
　収集部１３１は、移動情報管理サーバ２００の制御手段に指示を送信し、移動情報管理サーバ２００から画像情報及び移動情報を送信させて収集する。収集部１３１は、収集した画像情報及び移動情報を収集情報ＤＢに一旦格納する。
　また、収集部１３１は、対象とする道路を１００ｍごとの区間に予め分割しておき、位置の情報に基づいて移動情報を区間ごとに割り振る。次に、収集部１３１は、道路区間ごとに速度及び加速度における平均及び標準偏差、並びに、通行量をそれぞれ算出し、算出した結果を算出結果ＤＢ１２２に格納する。
　なお、本実施例では、収集部１３１が移動情報管理サーバ２００の制御手段２２０に指示を出力して、移動情報管理サーバ２００からネットワーク３００を介して移動情報を送信させるようにしたが、これに限定することなく、収集部１３１が指示を出力しなくても移動情報管理サーバ２００が移動情報を送信するようにしてもよく、移動情報管理サーバ２００は、複数存在してもよい。また、収集部１３１は、車両から画像情報、並びに、位置、時刻、及び速度の情報を含む移動情報を直接収集するようにしてもよい。
－生成部－
　生成部１３２は、画像情報ごとに、画像情報を取得した際の移動情報をそれぞれ対応付けした画像データ群を生成する。
　なお、画像情報ごとに移動情報を対応付ける方法としては、特に制限はなく、目的に応じて適宜選択することができ、例えば、画像情報に撮影した位置の情報を含むようにし、撮影した位置に近い移動情報を画像情報に対応付ける方法などが挙げられる。
－抽出部－
　抽出部１３３は、分岐案内標識の設置位置を含む４つの道路区間において、分岐案内標識が示す道路の分岐により通行量が変化する移動情報の特徴と、一致又は類似する移動情報の特徴を備える４つの道路区間の位置に対応付けられた画像情報を、画像データ群から教師データ候補として抽出する。即ち、抽出部１３３は、画像データ群のうち、受け付けた位置を含む所定の範囲の位置を有する移動情報に含まれる時刻又は速度の特徴と、一致又は類似する時刻又は速度の特徴を備える移動情報と対応付けられた１以上の画像情報を、画像データ群から教師データ候補として抽出する。
　図７は、分岐案内標識が設置されている道路区間の一例を示す説明図である。図７に示すような分岐案内標識が設置されている道路区間を例として、以下、抽出部１３３の機能について詳細に説明する。
　まず、既知の分岐案内標識の設置位置の指定をユーザから受け付けると、制御手段１３０は、算出結果ＤＢ１２２に格納された移動情報の算出結果に基づき、出力手段１５０に指示して、図８に示すような表を表示する。
　なお、分岐案内標識の設置位置の指定は、道路標識設置基準に基づいてユーザから受け付けるようにしてもよい。
　図８は、「移動情報の特徴」を選定するために用いる表の一例を示す説明図である。出力手段１５０は、図８に示すように、分岐案内標識の設置位置を含む４つの連続した道路区間（以下、「連続区間」と称することがある）の移動情報を示す表をユーザに対して表示する。ユーザは、図８に示す表を参照しながら、道路に分岐があることにより通行量が変化する特徴が最も表れている連続区間を「移動情報の特徴」として選定する。
　なお、本実施例では、分岐案内標識より手前側の道路では道路に分岐がなく、通行量は変化しにくいことから、分岐案内標識の設置位置を含む道路区間を先頭にすることが好ましい。
　また、「移動情報の特徴」のデータ数としては、特に制限はなく、目的に応じて適宜選択することができるが、５０以上が好ましい。
　更に、本実施例では、既知の分岐案内標識の設置位置の指定をユーザから受け付けるようにしたが、これに限定することなく、必要とする教師データが備える「移動情報の特徴」が既知であれば、分岐案内標識の設置位置の指定を受け付けずに、「移動情報の特徴」の指定を受け付けるようにしてもよい。
　図９は、図８で選定した「移動情報の特徴」に基づき、抽出部１３３が連続区間を抽出するイメージを示す説明図である。図９に示すように、画面に表示した地図上で矩形状に囲んだ範囲に存在する連続区間の対象データと「移動情報の特徴」とを比較し、「移動情報の特徴」と一致又は類似する移動情報の特徴を備える連続区間に対応付けられた画像情報を、画像データ群から教師データ候補として抽出する。
　図１０は、図８で選定した「移動情報の特徴」に基づき、対象データを類似判定する方法を示す説明図である。図１０に示すように、各評価項目において「移動情報の特徴」の各項目の値を基準とした誤差率が±１０％以内であれば類似する項目として判定し、類似する項目数が５個以上であれば、「移動情報の特徴」と対象データとは類似すると判定して、類似すると判定した対象データを教師データ候補として抽出する。抽出部１３３は、抽出した教師データ候補を教師データ候補ＤＢ１２３に格納する。
　なお、誤差率は、次式、誤差率＝（（対象データの値）－（「移動情報の特徴」の値））×１００）／「移動情報の特徴」の値、により算出することができる。
　また、抽出した対象データのうちＧ’－０の道路区間に対応付けた画像情報、即ち、Ｇ’－０の道路区間で撮影した画像が、分岐案内標識を含む道路周辺画像である可能性が高いことから、Ｇ’－０の道路区間で撮影した画像を教師データ候補として抽出する。その後、抽出した教師データ候補は、ユーザが目視により確認した後、教師データとして用いるようにしてもよい。
　また、図１１に示すように、複数の「移動情報の特徴」を選定してもよい。これにより、分岐案内標識を含む道路周辺画像である可能性が高い画像情報を教師データ候補としてより多く、かつ効率的に抽出することができる。
　入力手段１４０は、分岐案内標識が設置されている設置位置の指定をユーザから受け付ける。また、入力手段１４０は、画像情報を抽出したい地域及び期間を指定する入力を受け付ける。
　なお、分岐案内標識が設置されている設置位置、画像情報を抽出したい地域及び期間の指定は、緯度経度などの数値による入力であってもよく、ディスプレイなどの画面上に表示された道路地図上において、分岐案内標識が設置されている設置位置を指定したり、画像情報を抽出したい地域を指定したりしてもよい。
　また、入力手段１４０は、分岐案内標識が設置されている設置位置、画像情報を抽出したい地域及び期間の指定を受け付けるほか、その他の各種情報を入力することができる。
　出力手段１５０は、本実施例ではディスプレイなどであり、道路周辺画像などを表示することができる。また、出力手段１５０は、教師データ候補抽出装置１００の内部状態の表示を行う。
＜教師データ候補抽出装置のハードウェア構成＞
　図１２は、教師データ候補抽出装置１００のハードウェア構成の一例を示す説明図である。図１２に示すように、教師データ候補抽出装置１００は、通信手段１１０と、記憶手段１２０と、制御手段１３０と、入力手段１４０と、出力手段１５０と、ＲＯＭ１６０と、ＲＡＭ１７０とを有する。なお、教師データ候補抽出装置１００の各手段は、バス１８０を介してそれぞれ通信可能に接続されている。
　通信手段１１０は、制御手段１３０の指示に基づき、図１に示した移動情報管理サーバ２００から移動情報を受信する。
　なお、本実施例では、通信手段１１０は制御手段１３０の指示に基づき移動情報を受信するとしたが、ネットワーク３００を介して移動情報管理サーバ２００から移動情報を送信する指示を出力してもよい。
　記憶手段１２０は、特に制限はなく、目的に応じて適宜選択することができ、例えば、ソリッドステートドライブ、ハードディスクドライブなどのほか、ＣＤドライブ、ＤＶＤドライブ、ＢＤドライブなどの可搬記憶装置を含んでもよい。また、記憶手段１２０は、ネットワーク上のコンピュータ群であるクラウドの一部であってもよい。
　制御手段１３０としては、例えば、ＣＰＵなどのプロセッサが挙げられ、教師データ候補抽出装置１００全体の処理を実行する。ソフトウェアを実行するプロセッサはハードウェアである。
　入力手段１４０は、特に制限はなく、目的に応じて適宜選択することができ、例えば、キーボード、マウス、タッチパネルなどが挙げられる。
　出力手段１５０は、特に制限はなく、目的に応じて適宜選択することができ、例えば、ディスプレイ、スピーカーなどが挙げられる。
　ＲＯＭ１６０は、記憶手段１２０に記憶された各種プログラムを制御手段１３０が実行するために必要な各種プログラム、データ等を記憶する。
　ＲＡＭ１７０は、主記憶装置であり、記憶手段１２０に記憶された各種プログラムが制御手段１３０によって実行される際に展開される作業領域として機能する。ＲＡＭ１７０としては、例えば、ＤＲＡＭ、ＳＲＡＭなどが挙げられる。
　図１３は、教師データ候補抽出装置１００が移動情報を収集し、「移動情報の特徴」が選定されるまでの制御を行う流れの一例を示すフローチャートである。
　教師データ候補抽出装置１００が移動情報を収集し、「移動情報の特徴」が選定されるまでの制御について、図１３に示すフローチャートにしたがい、図６を参照しながら説明する。
　ステップＳ１０１では、収集部１３１は、画像情報及び移動情報を収集すると処理をＳ１０２に移行させる。
　ステップＳ１０２では、収集部１３１は、予め分割した道路区間ごとに画像情報及び移動情報を割り振ると処理をＳ１０３に移行させる。
　ステップＳ１０３では、収集部１３１は、道路区間ごとに、移動情報に基づき通行量などを算出すると処理をＳ１０４に移行させる。
　ステップＳ１０４では、制御手段１３０は、入力手段１４０により、既知の分岐案内標識の設置位置の指定をユーザから受け付けると処理をＳ１０５に移行させる。
　ステップＳ１０５では、制御手段１３０は、出力手段１５０により、指定された設置位置の道路区間を含む連続区間の通行量などを表示すると処理をＳ１０６に移行させる。
　ステップＳ１０６では、ステップＳ１０５の表示に基づき、道路の分岐で通行量が変化する特徴が最も表れている連続区間を「移動情報の特徴」としてユーザが選定すると本処理を終了させる。
　図１４は、図１３で示したフローチャートの続きであって、教師データ候補抽出装置１００がユーザから指定された地域及び期間における連続区間のうち、選定された「移動情報の特徴」に基づき、連続区間における移動情報の特徴から、教師データ候補を抽出するまでの制御を行う流れの一例を示すフローチャートである。
　教師データ候補抽出装置１００が教師データ候補を抽出するまでの制御について、図１４に示すフローチャートにしたがい、図６を参照しながら説明する。
　ステップＳ２０１では、制御手段１３０は、入力手段１４０により、教師データ候補を抽出したい地域及び期間をユーザから受け付けると処理をＳ２０２に移行させる。
　ステップＳ２０２では、制御手段１３０は、指定された地域及び期間における連続区間を設定すると処理をＳ２０３に移行させる。
　なお、ステップＳ２０３から移行した場合は、以前設定した連続区間とは異なる新たに連続区間を設定すると処理をＳ２０３に移行させる。
　ステップＳ２０３では、抽出部１３３は、Ｓ２０２で設定した連続区間が「移動情報の特徴」と類似しているか否かを判定する。抽出部１３３は、Ｓ２０２で設定した連続区間が「移動情報の特徴」と類似していると判定すると処理をＳ２０４に移行させ、類似していないと判定すると処理をＳ２０２に移行させる。
　ステップＳ２０４では、抽出部１３３は、設定した連続区間に対応付けした画像情報を教師データ候補として抽出すると本処理を終了させる。
　このように、「移動情報の特徴」に基づき、教師データ候補を効率よく抽出することにより、学習当初から教師データ候補を多く準備することができるため、深層学習による人工知能の識別率を向上させることができる。
　なお、本実施例では、分岐案内標識を例として説明したが、他の道路標識、道路標示、及び道路情報掲示板の少なくともいずれかの表示物であってもよい。
　そこで、道路周辺画像から分岐案内標識の画像を識別するための教師データ候補を抽出する例を示したが、次に、道路周辺画像から道路情報掲示板の画像を識別するための教師データ候補を抽出する例を示す。
　図１５は、道路情報掲示板が設置されている道路区間の一例を示す説明図である。以下では、図１５に示すような道路情報掲示板が設置されている道路区間を例とした場合について詳細に説明する。
　まず、既知の道路情報掲示板の設置位置の指定をユーザから受け付けると、制御手段１３０は、算出結果ＤＢ１２２に格納された算出結果に基づき、出力手段１５０に指示して、図１６に示すような表を表示する。
　図１６は、「移動情報の特徴」を選定するために用いる表の他の一例を示す説明図である。出力手段１５０は、図１６に示すように、スリップに注意する旨を示す道路情報掲示板の設置位置を含む４つの連続した道路区間（以下、「連続区間」と称することがある）の移動情報を示す表をユーザに対して表示する。ユーザは、図１６に示す表を参照しながら、スリップに対して注意喚起されて速度が変化する特徴が最も表れている連続区間を「移動情報の特徴」として選定する。
　なお、本実施例では、道路情報掲示板を視認した前後の速度変化が重要であるため、道路情報掲示板の設置位置より前の道路区間を先頭にし、道路情報掲示板の設置位置より前の道路区間を含むようにすることが好ましい。
　このように、分岐案内標識の例と同様に、「移動情報の特徴」に基づき、分岐により通行量が変化する特徴を備える道路区間を求め、求めた道路区間で撮影した道路周辺画像を教師データ候補として抽出することにより、教師データを容易に得やすくなり、短期間で道路標識の画像の識別率を向上させることができる。
　　１００　　教師データ候補抽出装置
　　１１０　　通信手段
　　１２０　　記憶手段
　　１３０　　制御手段
　　１３１　　収集部
　　１３２　　生成部
　　１３３　　抽出部
　　１４０　　入力手段
　　１５０　　出力手段

 

Claims (7)

  1. 　人工知能の機械学習に用いる教師データの候補を抽出するプログラムであって、
    　移動体が移動して取得した、画像情報、並びに、位置、時刻、及び速度の情報を含む移動情報を収集し、
    　前記画像情報ごとに、前記画像情報を取得した際の前記移動情報をそれぞれ対応付けした画像データ群を生成し、
    　位置の指定を受け付けると、
    　前記画像データ群のうち、受け付けた前記位置を含む所定の範囲の位置を有する移動情報に含まれる時刻又は速度の特徴と、一致又は類似する時刻又は速度の特徴を備える移動情報と対応付けられた１以上の前記画像情報を、前記画像データ群から教師データ候補として抽出する、
    　処理をコンピュータに実行させること特徴とする教師データ候補抽出プログラム。
  2. 　前記移動体が、車両であり、
    　受け付けた前記位置が、道路標識、道路標示、及び道路情報掲示板の少なくともいずれかの表示物が設置されている位置であり、
    　前記移動情報の特徴が、前記表示物の表示内容に応じた前記移動情報に含まれる速度の変化である請求項１に記載の教師データ候補抽出プログラム。
  3. 　前記教師データ候補として抽出する前記画像情報が、前記表示物を撮影した画像の情報である請求項２に記載の教師データ候補抽出プログラム。
  4. 　人工知能の機械学習に用いる教師データの候補を抽出するプログラムであって、
    　移動体が移動して取得した、画像情報、並びに、位置、時刻、及び速度の情報を含む移動情報を収集し、
    　前記画像情報ごとに、前記画像情報を取得した際の前記移動情報をそれぞれ対応付けした画像データ群を生成し、
    　必要とする教師データが備える前記移動情報に含まれる時刻又は速度の特徴と、一致又は類似する時刻又は速度の特徴を備える移動情報と対応付けられた１以上の前記画像情報を、前記画像データ群から教師データ候補として抽出する、
    　処理をコンピュータに実行させること特徴とする教師データ候補抽出プログラム。
  5. 　人工知能の機械学習に用いる教師データの候補を抽出する装置であって、
    　移動体が移動して取得した、画像情報、並びに、位置、時刻、及び速度の情報を含む移動情報を収集する収集部と、
    　前記画像情報ごとに、前記画像情報を取得した際の前記移動情報をそれぞれ対応付けした画像データ群を生成する生成部と、
    　位置の指定を受け付ける入力手段と、
    　前記画像データ群のうち、受け付けた前記位置を含む所定の範囲の位置を有する移動情報に含まれる時刻又は速度の特徴と、一致又は類似する時刻又は速度の特徴を備える移動情報と対応付けられた１以上の前記画像情報を、前記画像データ群から教師データ候補として抽出する抽出部と、
    　を有すること特徴とする教師データ候補抽出装置。
  6. 　人工知能の機械学習に用いる教師データの候補を抽出する方法であって、
    　移動体が移動して取得した、画像情報、並びに、位置、時刻、及び速度の情報を含む移動情報を収集する収集工程と、
    　前記画像情報ごとに、前記画像情報を取得した際の前記移動情報をそれぞれ対応付けした画像データ群を生成する生成工程と、
    　位置の指定を受け付ける入力工程と、
    　前記画像データ群のうち、受け付けた前記位置を含む所定の範囲の位置を有する移動情報に含まれる時刻又は速度の特徴と、一致又は類似する時刻又は速度の特徴を備える移動情報と対応付けられた１以上の前記画像情報を、前記画像データ群から教師データ候補として抽出する抽出工程と、
    　を含むこと特徴とする教師データ候補抽出方法。
  7. 　人工知能の機械学習に用いる教師データの候補を抽出するプログラムであって、
    　データ群のデータごとに、前記データと関連する関連情報をそれぞれ対応付けし、
    　必要とする教師データが備える前記関連情報の特徴と、一致又は類似する前記関連情報の特徴を備えるデータを、前記データ群から教師データ候補として抽出する、
    　処理をコンピュータに実行させること特徴とする教師データ候補抽出プログラム。

     
PCT/JP2016/086806 2016-12-09 2016-12-09 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法 WO2018105122A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2016/086806 WO2018105122A1 (ja) 2016-12-09 2016-12-09 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法
JP2018555432A JP6721846B2 (ja) 2016-12-09 2016-12-09 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/086806 WO2018105122A1 (ja) 2016-12-09 2016-12-09 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法

Publications (1)

Publication Number Publication Date
WO2018105122A1 true WO2018105122A1 (ja) 2018-06-14

Family

ID=62491796

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/086806 WO2018105122A1 (ja) 2016-12-09 2016-12-09 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法

Country Status (2)

Country Link
JP (1) JP6721846B2 (ja)
WO (1) WO2018105122A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020049634A1 (ja) * 2018-09-04 2020-03-12 三菱電機株式会社 教師データ生成装置、教師データ生成方法、および、教師データ生成システム
JP2022522375A (ja) * 2019-06-28 2022-04-18 商▲湯▼集▲團▼有限公司 画像収集制御方法、装置、電子デバイス、記憶媒体及びコンピュータプログラム
WO2022168223A1 (ja) * 2021-02-04 2022-08-11 日本電気株式会社 教師データ生成装置、状態判定装置、状態判定システム、教師データ生成方法、状態判定方法、及び、記録媒体

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019179372A (ja) * 2018-03-30 2019-10-17 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 学習データ作成方法、学習方法、危険予測方法、学習データ作成装置、学習装置、危険予測装置、及び、プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011145791A (ja) * 2010-01-13 2011-07-28 Hitachi Ltd 識別器学習画像生成プログラム、方法、及びシステム
JP2013250881A (ja) * 2012-06-01 2013-12-12 Nippon Telegr & Teleph Corp <Ntt> 学習画像選択方法、コンピュータプログラム及び学習画像選択装置
JP2014059729A (ja) * 2012-09-18 2014-04-03 Toshiba Corp 物体検出・識別装置及びその方法とその物体検出・識別に用いられる辞書データ生成方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011145791A (ja) * 2010-01-13 2011-07-28 Hitachi Ltd 識別器学習画像生成プログラム、方法、及びシステム
JP2013250881A (ja) * 2012-06-01 2013-12-12 Nippon Telegr & Teleph Corp <Ntt> 学習画像選択方法、コンピュータプログラム及び学習画像選択装置
JP2014059729A (ja) * 2012-09-18 2014-04-03 Toshiba Corp 物体検出・識別装置及びその方法とその物体検出・識別に用いられる辞書データ生成方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
NAOYUKI ABE ET AL.: "Improvement image annotation using geo information and image composition", IEICE TECHNICAL REPORT, vol. 111, no. 194, 29 August 2011 (2011-08-29), pages 195 - 200, ISSN: 0913-5685 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020049634A1 (ja) * 2018-09-04 2020-03-12 三菱電機株式会社 教師データ生成装置、教師データ生成方法、および、教師データ生成システム
JPWO2020049634A1 (ja) * 2018-09-04 2020-12-17 三菱電機株式会社 教師データ生成装置、教師データ生成方法、および、教師データ生成システム
JP2022522375A (ja) * 2019-06-28 2022-04-18 商▲湯▼集▲團▼有限公司 画像収集制御方法、装置、電子デバイス、記憶媒体及びコンピュータプログラム
WO2022168223A1 (ja) * 2021-02-04 2022-08-11 日本電気株式会社 教師データ生成装置、状態判定装置、状態判定システム、教師データ生成方法、状態判定方法、及び、記録媒体
JP7468711B2 (ja) 2021-02-04 2024-04-16 日本電気株式会社 教師データ生成装置、教師データ生成方法、及び、プログラム

Also Published As

Publication number Publication date
JPWO2018105122A1 (ja) 2019-10-24
JP6721846B2 (ja) 2020-07-15

Similar Documents

Publication Publication Date Title
US10268926B2 (en) Method and apparatus for processing point cloud data
EP2975555B1 (en) Method and apparatus for displaying a point of interest
WO2018105122A1 (ja) 教師データ候補抽出プログラム、教師データ候補抽出装置、及び教師データ候補抽出方法
JP2020061146A (ja) 畳み込みニューラルネットワークを利用してｐｏｉ変化を検出するためのシステムおよび方法
US11403766B2 (en) Method and device for labeling point of interest
WO2014194804A1 (zh) 在电子地图界面上显示关联标注点的方法和装置
CN110633381A (zh) 一种识别虚假房源的方法、装置、存储介质及电子设备
US20180148898A1 (en) Road state management apparatus and method
JP2017102672A (ja) 地理位置情報特定システム及び地理位置情報特定方法
CN111340015B (zh) 定位方法和装置
JP2016045678A (ja) 価格表示システム、価格判定装置、表示装置、価格判定方法、および、価格判定プログラム
CN108286973B (zh) 一种行驶数据校验方法及装置、及混合导航系统
CN112748453B (zh) 道路侧定位方法、装置、设备及存储介质
KR20140064424A (ko) 차량의 위치 인식 장치 및 방법
CN107084728B (zh) 用于检测数字地图的方法和装置
CN112016387A (zh) 适用于毫米波安检仪的违禁品识别方法和装置
Stephens et al. Development of a smartphone application serving pavement management engineers
CN111383271A (zh) 一种基于图片的方向标注方法及装置
CN115393619A (zh) 一种自动驾驶中模拟场景的推荐方法、装置及电子设备
CN111369624B (zh) 定位方法和装置
CN114674328A (zh) 地图生成方法、装置、电子设备、存储介质、及车辆
JP2005222485A (ja) 交通標識識別装置および交通標識識別方法
CN108875770B (zh) 行人检测误报数据的标注方法、装置、系统和存储介质
CN112464832A (zh) 一种基于建筑识图和人工智能的数据处理方法及智能设备
CN113256715B (zh) 机器人的定位方法和装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16923363

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018555432

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16923363

Country of ref document: EP

Kind code of ref document: A1