WO2021075278A1 - 情報処理装置および方法、並びに、プログラム - Google Patents

情報処理装置および方法、並びに、プログラム Download PDF

Info

Publication number
WO2021075278A1
WO2021075278A1 PCT/JP2020/037529 JP2020037529W WO2021075278A1 WO 2021075278 A1 WO2021075278 A1 WO 2021075278A1 JP 2020037529 W JP2020037529 W JP 2020037529W WO 2021075278 A1 WO2021075278 A1 WO 2021075278A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
vehicle
unit
processing
license plate
Prior art date
Application number
PCT/JP2020/037529
Other languages
English (en)
French (fr)
Inventor
重紀 立枩
迪郎 平井
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US17/754,611 priority Critical patent/US20220371512A1/en
Publication of WO2021075278A1 publication Critical patent/WO2021075278A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/96Management of image or video recognition tasks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/19Recognition using electronic means
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07BTICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
    • G07B15/00Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
    • G07B15/02Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems
    • G07B15/04Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems comprising devices to free a barrier, turnstile, or the like
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07BTICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
    • G07B15/00Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
    • G07B15/06Arrangements for road pricing or congestion charging of vehicles or vehicle users, e.g. automatic toll systems
    • G07B15/063Arrangements for road pricing or congestion charging of vehicles or vehicle users, e.g. automatic toll systems using wireless information transmission between the vehicle and a fixed station
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/142Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces external to the vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/149Traffic control systems for road vehicles indicating individual free spaces in parking areas coupled to means for restricting the access to the parking space, e.g. authorization, access barriers, indicative lights
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/146Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas where the parking area is a limited parking space, e.g. parking garage, restricted space

Definitions

  • Patent Document 1 and Patent Document 2 only describe that when the vehicle registration number written on the license plate can be recognized, the subsequent processing is performed using the vehicle registration number.
  • the processing according to the case where the vehicle registration number could not be recognized was not disclosed. Therefore, it has been required to perform more appropriate processing on the recognition result for the license plate of the vehicle.
  • the information processing device of one aspect of the present technology is extracted by the feature extraction unit that extracts the feature information of the vehicle from the captured image and the feature extraction unit based on the recognition result of the vehicle license plate in the captured image. It is an information processing device including a processing execution unit that performs processing according to the characteristic information of the vehicle.
  • the information processing method of one aspect of the present technology extracts the characteristic information of the vehicle from the captured image based on the recognition result of the license plate of the vehicle in the captured image, and processes according to the extracted characteristic information of the vehicle. It is an information processing method to perform.
  • the characteristic information of the vehicle is extracted from the captured image based on the recognition result of the license plate of the vehicle in the captured image, and the extracted vehicle is used. Processing is performed according to the feature information of.
  • First Embodiment> ⁇ License plate character recognition and a system that uses the results>
  • Patent Document 1 a method of recognizing a vehicle registration number written on a license plate attached to the vehicle has been considered from a captured image of the vehicle.
  • Patent Document 2 a method of recognizing the vehicle registration number in a parking lot or the like and managing the entry / exit of the vehicle by using the recognized vehicle registration number has been considered.
  • Patent Document 1 and Patent Document 2 only describe that when the vehicle registration number written on the license plate can be recognized, the subsequent processing is performed using the vehicle registration number. Met. That is, these documents did not disclose the processing according to the case where the vehicle registration number could not be recognized.
  • Patent Document 1 when the system described in Patent Document 1 can recognize the vehicle registration number of the license plate included in the captured image, the recognized vehicle registration number is registered in the database. On the other hand, if the vehicle registration number could not be recognized, the system only deleted the captured image. That is, in this case, the process related to registration in the database was not performed.
  • the system described in Patent Document 2 reads the vehicle registration number on the license plate, and the vehicle entry / exit management is performed using the read vehicle registration number. For example, this system performs matching between the read vehicle registration number and the vehicle registration number read at the time of vehicle warehousing, and if matching is performed, processing such as clearing processing and opening the warehousing gate is performed. On the other hand, the process when the vehicle registration number cannot be read is not described in Patent Document 2.
  • the characteristic information of the vehicle is extracted from the captured image, and the processing is performed according to the extracted characteristic information of the vehicle.
  • a computer uses a feature extraction unit that extracts feature information of the vehicle from the captured image based on the recognition result of the vehicle license plate in the captured image, and a vehicle feature extracted by the feature extraction unit. It functions as a processing execution unit that performs processing according to information.
  • FIG. 1 is a block diagram showing an example of a main configuration of a traffic control system, which is an aspect of an information processing system to which the present technology is applied.
  • the traffic control system 100 shown in FIG. 1 is a system that controls the traffic of a vehicle by opening and closing a gate.
  • the traffic control system 100 includes an image pickup device 101, a control device 102, and a gate device 103.
  • the automobile 110 is a vehicle whose passage is controlled by the gate device 103 (traffic control system 100).
  • the automobile 110 has license plates installed at predetermined positions (for example, front and rear) of the vehicle body.
  • the automobile 110 is shown as an example of the object whose passage is controlled, but the object whose passage is controlled by the traffic control system 100 is not limited to this, and any vehicle having a license plate installed is not limited to this. Anything is fine.
  • the image pickup device 101 takes an image of the automobile 110 and generates an captured image thereof.
  • the image pickup device 101 and the control device 102 are communicably connected by wire communication or wireless communication.
  • the image pickup device 101 supplies the generated captured image to the control device 102.
  • the captured image may be a single or a plurality of still images, or may be a moving image.
  • the image pickup device 101 when the image pickup device 101 constantly captures an area in which the gate device 103 controls the passage of the automobile 110 and detects the automobile 110 that has entered the angle of view from the captured image, a still image or a still image showing the automobile 110 or the automobile 110.
  • the captured image of the moving image may be transmitted to the control device 102.
  • the image pickup image (moving image) generated by the image pickup device 101 constantly capturing the image may be transmitted to the control device 102, and the control device 102 may detect the automobile 110 that has entered the angle of view from the captured image. ..
  • the focal length of the imaging device 101 may be variable.
  • the image pickup apparatus 101 may have an autofocus function for automatically focusing on the subject, or may have a so-called zoom function.
  • the imaging device 101 may be capable of changing the direction of imaging.
  • the image pickup apparatus 101 may have a pan / tilt function.
  • the control device 102 controls the gate device 103 based on the captured image supplied from the image pickup device 101. For example, the control device 102 analyzes the captured image to detect the license plate of the automobile 110, recognize characters such as the vehicle registration number, and extract the features of the automobile 110. Then, the control device 102 determines the process to be performed by the gate device 103 based on the image analysis results.
  • the gate device 103 is provided with a monitor (display device) for displaying an image, a speaker (audio output device) for outputting audio, and the like, and notifies the passengers of the automobile 110 (output of images, audio, etc.). May be possible.
  • This traffic control system 100 is installed in, for example, a parking lot of an apartment, a parking lot of a company, a parking lot of a commercial facility such as a supermarket or a department store, a parking lot of a hotel, a tollhouse of a toll road, or the like.
  • the vehicles that can be parked are limited to vehicles owned by residents of the condominium, entry / exit traders, guests invited by the residents, etc. (for example, automobile 110). Information can be registered in advance for these vehicles.
  • the image pickup device 101 and the gate device 103 are installed at the entrance and exit of the parking lot, and the control device 102 is installed in the management room and the like in the condominium site. Based on the captured image and the information registered in advance, the traffic control system 100 allows only the entry and exit of the vehicle owned by the resident of the condominium, the entry / exit trader, the guest invited by the resident, etc. Control traffic.
  • the vehicles that can be parked are limited to vehicles owned by the company, employees of the company, entry / exit traders, customers invited by the company, etc. (for example, automobile 110). Information can be registered in advance for these vehicles.
  • the image pickup device 101 and the gate device 103 are installed at the entrance and exit of the parking lot, and the control device 102 is installed in the management room and the like on the premises of the company.
  • the traffic control system 100 permits only the warehousing and warehousing of vehicles owned by the company, employees of the company, entry / exit traders, customers invited by the company, etc., based on the captured image and the information registered in advance. As such, control the passage of vehicles.
  • an area where a company-owned vehicle can be parked an area where an employee-owned vehicle can be parked, an area where a vehicle owned by an entry / exit trader can be parked, an area where a customer-owned vehicle can be parked, and the like. It may be divided. In that case, the image pickup device 101 and the gate device 103 are installed at the boundaries (entrances and exits) of each area, and the traffic control system 100 can enter only the area where each vehicle can park. Control the passage of.
  • a vehicle for example, a car 110 owned by a customer of the commercial facility can be parked. That is, basically any vehicle can be parked.
  • the image pickup device 101 and the gate device 103 are installed at the entrance and exit of the parking lot, and the control device 102 is installed in the management room and the like in the commercial facility.
  • the traffic control system 100 controls the traffic of vehicles so as to allow only the vehicles that have entered the garage to leave the garage.
  • vehicles owned by the company of the commercial facility, its employees, the entry / exit trader, etc. may be parkable.
  • Information can be registered in advance for these vehicles.
  • the traffic control system 100 can identify these vehicles based on the captured image and the information registered in advance, and control the traffic.
  • vehicles for example, automobile 110 owned by the hotel, its employees, entry / exit traders, guests, non-guests (users of facilities in the hotel, etc.) can be parked.
  • Information can be registered in advance for vehicles owned by hotels, their employees, and entry / exit traders.
  • information may or may not be registered in advance.
  • the image pickup device 101 and the gate device 103 are installed at the entrance and exit of the parking lot, and the control device 102 is installed in the management room and the like in the hotel.
  • the traffic control system 100 controls the traffic of a vehicle whose information is registered in advance based on the captured image and the information registered in advance. In addition, the traffic control system 100 controls the passage of vehicles so that only the vehicles that have entered the garage are allowed to leave the garage for vehicles for which information has not been registered in advance.
  • an area where vehicles owned by the hotel can be parked an area where vehicles owned by employees can be parked, an area where vehicles owned by an entry / exit trader can be parked, and an area where vehicles owned by guests can be parked.
  • the area where vehicles owned by non-guests can park may be divided.
  • the image pickup device 101 and the gate device 103 are installed at the boundaries (entrances and exits) of each area, and the traffic control system 100 can enter only the area where each vehicle can park. Control the passage of.
  • the image pickup device 101 to the gate device 103 are installed at the entrance or exit of the toll road (tollhouse, etc.).
  • the toll road tollhouse, etc.
  • any vehicle (for example, automobile 110) passing through the toll road can pass.
  • the traffic control system 100 controls the traffic of vehicles so as to allow the outflow of only vehicles that have flowed into the toll road and have settled a regular toll, for example.
  • FIG. 1 one image pickup device 101 and one gate device 103 are shown, but the number of these devices is arbitrary.
  • an image pickup device 101 for detecting a license plate attached to the front of the automobile 110 and an image pickup device 101 for detecting a license plate attached to the rear of the automobile 110 may be provided.
  • the control device 102 detects the license plate in front of the automobile 110 and the license plate in the rear from the captured images supplied from both the imaging devices 101, performs character recognition, and compares the character recognition results of both.
  • the character recognition result may be derived by. By doing so, a more accurate character recognition result can be obtained.
  • one control device 102 may control a plurality of combinations of the image pickup device 101 and the gate device 103.
  • the image pickup device 101 and the gate device 103 may be installed at a plurality of places such as the entrance and the exit of the parking lot, and one control device 102 may control them.
  • the control device 102 can share the information obtained at a plurality of places to perform control.
  • the control device 102 can use the information obtained from the captured image of the automobile 110 generated by the image pickup device 101 installed at the entrance of the parking lot to control the gate device 103 installed at the exit. ..
  • the image pickup device 101, the control device 102, and the gate device 103 may be integrated with each other.
  • the image pickup device 101 and the control device 102 may be integrated, and the image pickup, the analysis of the captured image, and the opening / closing of the gate may be performed in one device.
  • the image pickup device 101 and the gate device 103 may be integrated, and the image pickup and the opening / closing of the gate may be performed in one device.
  • the control device 102 and the gate device 103 may be integrated, and image analysis of the captured image and gate opening / closing may be performed in one device.
  • the image pickup device 101, the control device 102, and the gate device 103 may be integrated, and all of these processes may be performed in one device.
  • FIG. 2 is a block diagram showing an example of a main configuration of an image pickup apparatus 101, which is an aspect of an information processing apparatus to which the present technology is applied.
  • the image pickup apparatus 101 includes a control unit 121, an image pickup unit 122, a communication unit 123, and a drive unit 124.
  • the imaging unit 122 has an optical system and a light receiving element, and performs processing related to imaging the subject.
  • the imaging unit 122 can be controlled by the control unit 121 to take an image of a subject (for example, an automobile 110) and generate an captured image including the subject (for example, an captured image including the automobile 110).
  • the imaging unit 122 may generate a single still image, a plurality of still images, or a moving image as the captured image including the automobile 110.
  • the imaging unit 122 may generate both the captured image of the moving image and the captured image of the still image.
  • the imaging unit 122 can supply the captured image (still image, moving image, or both) to the control unit 121.
  • the imaging unit 122 can be controlled by the control unit 121 to set the imaging parameters. Further, the image pickup unit 122 can be driven by, for example, a drive unit 124 to set an image pickup direction, a zoom position, focus (so-called autofocus), aperture adjustment, and the like.
  • the imaging unit 122 may have an arbitrary configuration in addition to the above-mentioned optical system, light receiving element, and the like.
  • the image pickup unit 122 may be configured by a logic circuit that realizes the above-mentioned processing by using an optical system or a light receiving element.
  • the imaging unit 122 may have, for example, a CPU, ROM, RAM, or the like, and execute a program using them to realize the above-mentioned processing by using an optical system or a light receiving element.
  • the imaging unit 122 may have both configurations, and a part of the above-mentioned processing may be realized by a logic circuit, and the other may be realized by executing a program.
  • the communication unit 123 has a communication interface and communicates with other devices via the communication interface.
  • This communication method (standard) is arbitrary, and may be wireless communication, wired communication, or both.
  • the drive unit 124 has an actuator or the like and drives a movable unit of the image pickup unit 122.
  • the drive unit 124 is controlled by the control unit 121 to drive the movable unit of the image pickup unit 122 to set the image pickup direction, set the zoom position, focus (so-called autofocus), adjust the aperture, and the like. it can.
  • the drive unit 124 may have an arbitrary configuration in addition to the actuator and the like described above.
  • the drive unit 124 may be configured by a logic circuit that realizes the above-mentioned processing by using an actuator or the like.
  • the drive unit 124 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize the above-mentioned processing by using an actuator or the like.
  • the drive unit 124 may have both configurations, and a part of the above-mentioned processing may be realized by a logic circuit, and the other may be realized by executing a program.
  • the control unit 131 controls the communication unit 132, the image analysis unit 133, and the gate processing unit 134 to perform various processes.
  • the processing control unit 143 performs processing related to the control of the image pickup device 101 and the gate device 103.
  • the processing control unit 143 can acquire the control information supplied from the gate processing unit 134 and supply it to the gate device 103 via the communication unit 132. That is, the process control unit 143 can cause the gate device 103 to execute the process corresponding to the control information.
  • the processing control unit 143 can supply control information for controlling the image pickup device 101 (imaging unit 122 and drive unit 124) to the gate device 103 via the communication unit 132. That is, the processing control unit 143 can cause the image pickup apparatus 101 to execute the processing corresponding to the control information.
  • This control unit 131 can have any configuration.
  • the control unit 131 may be configured by a logic circuit that realizes the processing of each of the above-mentioned functional blocks.
  • the control unit 131 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize processing of each functional block.
  • the control unit 131 may have both configurations, and a part of the processing of each functional block may be realized by a logic circuit, and the other may be realized by executing a program.
  • the communication unit 132 has a communication interface and communicates with other devices via the communication interface.
  • This communication method (standard) is arbitrary, and may be wireless communication, wired communication, or both.
  • the communication unit 132 may have an arbitrary configuration in addition to the communication interface described above.
  • the communication unit 132 may be configured by a logic circuit that realizes the above-mentioned processing by using the communication interface.
  • the communication unit 323 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize the above-mentioned processing by using the communication interface.
  • the communication unit 132 may have both configurations, and a part of the above-mentioned processing may be realized by a logic circuit, and the other may be realized by executing a program.
  • the image analysis unit 133 performs processing related to image analysis.
  • the image analysis unit 133 has a plate detection unit 144, a character recognition unit 145, and a feature extraction unit 146 as functional blocks.
  • the plate detection unit 144 performs processing related to license plate detection. For example, the plate detection unit 144 can acquire a captured image (captured image including the automobile 110) supplied from the image acquisition unit 141. In addition, the plate detection unit 144 can analyze the captured image and detect the license plate. Further, the plate detection unit 144 can supply the character recognition unit 145 with information indicating the detection result and the captured image.
  • the plate detection unit 144 acquires a captured image as shown in A of FIG. 4, and detects the license plate of the automobile 110 with respect to the captured image. That is, the partial region 161 including the license plate of the automobile 110 is specified.
  • the plate detection unit 144 cuts out the partial region 161 including the detected license plate from the captured image. As shown in B of FIG. 4, when the license plate is successfully detected, the image of the partial region 161 includes the image of the license plate 162 of the automobile 110.
  • the plate detection unit 144 supplies the image of the partial region 161 to the character recognition unit 145 as the plate detection result. Further, the plate detection unit 144 supplies the captured image (overall image) to be processed to the character recognition unit 145.
  • the character recognition unit 145 performs processing related to character recognition for the characters written on the license plate detected by the plate detection unit 144.
  • the character recognition unit 145 can acquire an image (image of the partial region 161) or a captured image (overall image) of the license plate 162 of the automobile 110 supplied from the plate detection unit 144. Further, when the plate detection unit 144 succeeds in detecting the license plate, the character recognition unit 145 can perform character recognition on the characters described on the detected license plate. Further, the character recognition unit 145 can supply information indicating the character recognition result to the control unit 131 (processing determination unit 142). Further, the character recognition unit 145 can supply the captured image (overall image) and the image of the license plate 162 of the automobile 110 to the control unit 131 (processing determination unit 142). Further, the character recognition unit 145 can supply the information indicating the character recognition result, the captured image (overall image), and the image of the license plate 162 of the automobile 110 to the feature extraction unit 146.
  • the character recognition unit 145 recognizes each character described on the license plate 162 included in the image of the partial region 161 as shown in C of FIG. In the case of C in FIG. 4, each character of "X”, “Y”, “Z”, “0”, “1”, “2”, and “3” described on the license plate 162 is recognized. Therefore, the character recognition unit 145 can recognize the vehicle registration number 163 (XYZ0123) described on the license plate 162 as shown in D of FIG.
  • the character recognition unit 145 When the character recognition unit 145 succeeds in recognizing the vehicle registration number 163, the character recognition unit 145 supplies the information indicating the recognized vehicle registration number 163 to the processing determination unit 142 as information indicating the character recognition result. Further, the character recognition unit 145 supplies the captured image (overall image) and the image of the license plate 162 of the automobile 110 to the processing determination unit 142.
  • the character recognition unit 145 When the recognition of the vehicle registration number 163 fails (for example, when the character recognition of a part or all of the characters described on the license plate 162 fails), the character recognition unit 145 provides information indicating the characters whose character recognition is successful. Is supplied to the processing determination unit 142 as information indicating the character recognition result. For example, when some characters in the vehicle registration number 163 are recognized, the character recognition unit 145 supplies information indicating the recognized characters as information indicating the character recognition result. When all the character recognition fails, the character recognition unit 145 supplies information indicating that fact as information indicating the character recognition result. Further, the character recognition unit 145 supplies the captured image (overall image) and the image of the license plate 162 of the automobile 110 to the processing determination unit 142.
  • the character recognition unit 145 supplies the captured image (overall image) to the feature extraction unit 146.
  • the feature extraction unit 146 analyzes the captured image and extracts the features (also referred to as feature information) of the automobile 110 (vehicle) included in the captured image. That is, the feature extraction unit 146 extracts the feature information from the captured image when the character recognition unit 145 cannot recognize at least a part of the vehicle registration number written on the license plate.
  • the feature information to be extracted may be any kind. For example, at least one of the vehicle name, vehicle type, model, and vehicle color of the vehicle 110 may be specified and extracted. Of course, other feature information may be extracted.
  • the feature extraction unit 146 supplies the extracted feature information to the processing determination unit 142 as an image analysis result.
  • the image analysis unit 133 can have an arbitrary configuration.
  • the image analysis unit 133 may be configured by a logic circuit that realizes the processing of each of the above-mentioned functional blocks.
  • the image analysis unit 133 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize processing of each functional block.
  • the image analysis unit 133 may have both configurations, and a part of the processing of each functional block may be realized by a logic circuit, and the other may be realized by executing a program.
  • the image analysis unit 133 can perform image analysis (number plate detection) more accurately than processing based on simple image feature extraction. , Character recognition, vehicle feature extraction, etc.).
  • the gate processing unit 134 performs processing related to control of the gate device 103.
  • the gate processing unit 134 has a recognition success processing unit 147, a recognition failure processing unit 148, and a detection failure processing unit 149 as functional blocks.
  • any processing unit among the recognition success processing unit 147, the recognition failure processing unit 148, and the detection failure processing unit 149 can be used according to the image analysis result supplied from the image analysis unit 133. Control whether to perform processing.
  • the recognition successful processing unit 147 is controlled by the processing determination unit 142, and performs processing when the license plate is successfully detected and the character recognition is successful. That is, when the license plate detection is successful and the character recognition is successful, the processing determination unit 142 controls the recognition success processing unit 147 to execute the processing.
  • the processing performed by the processing unit 147 at the time of successful recognition may be any content.
  • the recognition success processing unit 147 acquires the information indicating the vehicle registration number 163 via the processing determination unit 142, and inquires the vehicle registration number 163 to the registered vehicle database 135.
  • the recognition success processing unit 147 generates the control information for opening the gate 103A
  • the processing control unit 147 generates the control information to open the gate 103A. It is supplied to the gate device 103 via 143.
  • the detection failure processing unit 149 is controlled by the processing determination unit 142, and performs processing when the license plate detection fails. That is, when the license plate detection fails (for example, when the license plate is not installed in the automobile 110), the processing determination unit 142 controls the detection failure processing unit 149 to execute the processing.
  • the gate processing unit 134 can have an arbitrary configuration.
  • the gate processing unit 134 may be configured by a logic circuit that realizes the processing of each of the above-mentioned functional blocks.
  • the gate processing unit 134 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize processing of each functional block.
  • the gate processing unit 134 may have both configurations, and a part of the processing of each functional block may be realized by a logic circuit, and the other may be realized by executing a program.
  • character recognition may fail due to various factors. For example, character recognition may fail due to the angle of the license plate, reflected light, dirt, and the like. Further, for example, as shown in A of FIG. 6, character recognition fails because a translucent plate 165 for protection and suppression by an infrared sensor is attached to the surface of the license plate 162. It is conceivable that
  • the surroundings may be too dark, or the resolution of the license plate 162 in the captured image may be too low, as shown in FIG. 6, and character recognition may fail.
  • character recognition may fail due to blurring of the characters described on the license plate 162 in the captured image.
  • some object 166 is installed in front of the license plate 162, and a part or all of the license plate 162 (characters described in) is hidden. Therefore, it is possible that character recognition fails. Of course, there may be cases where character recognition fails due to factors other than these examples.
  • the gate 103A is unconditionally opened as in the case where the detection of the license plate 162 fails (that is, when it is determined that the license plate is not installed). It was controlled so that it would not be damaged (closed if it was already open).
  • the registered vehicle database 135 is a database in which information about the vehicle is registered in advance, and is formed in, for example, a storage unit.
  • the vehicle registered in the registered vehicle database 135 is referred to as a registered vehicle. That is, the registered vehicle database 135 is a database that stores information about registered vehicles.
  • a vehicle owned by the company a vehicle owned by an employee of the company, a vehicle owned by an entry / exit trader, a vehicle owned by a customer invited by the company (vehicle reserved for warehousing). Etc. can be registered in the registered vehicle database 135.
  • information on vehicles owned by the hotel, vehicles owned by its employees, vehicles owned by entry / exit traders, etc. can be registered in the registered vehicle database 135.
  • the registered vehicle database 135 compares the vehicle registration number, vehicle characteristics, etc. inquired by the gate processing unit 134 (recognition success processing unit 147 and recognition failure processing unit 148) with the information of each registered vehicle, and matches or matches. Returns a discrepancy. If they match, information about the registered vehicle is also returned.
  • FIG. 7 shows an example of information registered in the registered vehicle database 135.
  • the registration information 170 shown in FIG. 7 is information about the registered vehicle.
  • the registration information 170 may include, for example, owner information 171, vehicle registration information 172, vehicle feature information 173, and other information 174.
  • Owner information 171 is information about the owner of the registered vehicle. For example, information such as the owner's name, address, contact information, etc. may be included in the owner information 171. Of course, the owner information 171 may include any information other than these.
  • Vehicle registration information 172 is information registered with the national government, local governments, etc. regarding registered vehicles. For example, the vehicle registration number and the like may be included in the vehicle registration information 172. Of course, the vehicle registration information 172 may include any information other than these.
  • Vehicle feature information 173 is information related to the features of the registered vehicle. For example, information such as a vehicle name, a vehicle type, a model, and a vehicle color may be included in the vehicle feature information 173. Further, the captured image of the registered vehicle may be included in the vehicle feature information 173. Of course, the vehicle feature information 173 may include any information other than these.
  • Other information 174 is other information about the registered vehicle.
  • the other information 174 may include qualification information indicating an area where the registered vehicle can enter and payment information which is information regarding payment regarding parking of the registered vehicle and the like.
  • the other information 174 may include any information other than these.
  • FIG. 8 is a block diagram showing an example of a main configuration of a gate device 103, which is an aspect of an information processing device to which the present technology is applied.
  • the gate device 103 includes, for example, a control unit 181, a communication unit 182, a gate opening / closing unit 183, and an output unit 184, in addition to the above-mentioned gate 103A.
  • the control unit 181 controls the communication unit 182, the gate opening / closing unit 183, and the output unit 184 to perform processing related to opening / closing the gate.
  • the control unit 181 can acquire the control information supplied from the control device 102 via the communication unit 182. Further, the control unit 181 can control the gate opening / closing unit 183 and the output unit 184 according to the control information.
  • the communication unit 182 can have an arbitrary configuration in addition to the communication interface described above.
  • the communication unit 182 may be configured by a logic circuit that realizes the above-mentioned processing by using the communication interface.
  • the communication unit 182 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize the above-mentioned processing by using the communication interface.
  • the communication unit 182 may have both configurations, and a part of the above-mentioned processing may be realized by a logic circuit, and the other may be realized by executing a program.
  • the gate opening / closing unit 183 has an actuator or the like, and opens / closes the gate 103A according to the control of the control unit 121.
  • the output unit 184 has, for example, a display device (for example, a monitor) for displaying an image or the like and an audio output device (for example, a speaker) for outputting audio, and outputs an image or audio using those devices.
  • the output unit 184 can be controlled by the control unit 181 to display a message or the like for the passengers of the automobile 110 or output a voice.
  • the output unit 184 can provide guidance on a traveling route, a parking space for empty vehicles, guidance on clearing, guidance on processing contents, and the like as the message.
  • the output unit 184 can output arbitrary information other than these examples.
  • the output unit 184 can have an arbitrary configuration in addition to the above-mentioned display device, audio output device, and the like.
  • the output unit 184 may be configured by a logic circuit that realizes the above processing by using a display device, an audio output device, or the like.
  • the output unit 184 may have, for example, a CPU, ROM, RAM, etc., and execute a program using them to realize the above-mentioned processing using a display device, an audio output device, or the like. ..
  • the output unit 184 may have both configurations, and a part of the above-mentioned processing may be realized by a logic circuit, and the other may be realized by executing a program.
  • the traffic control system 100 having the above configuration performs the above-described processing by executing the traffic control processing.
  • An example of the flow of this traffic control process will be described with reference to the flowchart of FIG.
  • step S141 the plate detection unit 144 detects the license plate from the captured image of the automobile 110.
  • step S144 the character recognition unit 145 determines whether or not the character recognition is successful. If it is determined that character recognition has failed for at least a part of the characters described on the license plate, the process proceeds to step S145.
  • the feature extraction unit 146 performs image analysis of the captured image and extracts features of the automobile 110 (vehicle). For example, the feature extraction unit 146 extracts a portion showing a feature as an image of the automobile 110 from the captured image, and based on the partial image, the feature of the automobile 110 (for example, a vehicle name, a vehicle type, a model, a vehicle color, etc.). Is derived.
  • step S145 the image analysis process is completed.
  • step S144 when it is determined that the character recognition is successful for all the characters described on the license plate, that is, the license plate is detected, and the vehicle registration number 163 described on the detected license plate is recognized. If it is determined that the image analysis process is completed.
  • step S142 If it is determined in step S142 that the license plate detection has failed, the image analysis process ends.
  • step S161 the processing determination unit 142 determines whether or not the license plate has been successfully detected based on the result of the image analysis processing (FIG. 10). If it is determined that the plate can be detected, the process proceeds to step S162.
  • step S162 the processing determination unit 142 determines whether or not all the characters described on the license plate can be recognized based on the result of the image analysis processing (FIG. 10). If it is determined that the character recognition is successful for all the characters described on the license plate, the process proceeds to step S163.
  • the recognition success processing unit 147 performs processing when the license plate is successfully detected and all the characters described on the license plate are successfully recognized. For example, the recognition success processing unit 147 queries the registered vehicle database 135 for the character recognition result (recognized registered vehicle number). When there is registration information having vehicle registration information 172 including a registered vehicle number that matches the character recognition result, the recognition success processing unit 147 generates control information that controls the gate device 103 so as to open the gate 103A. The processing control unit 143 supplies the control information to the gate device 103 via the communication unit 132.
  • the recognition success processing unit 147 queries the registered vehicle database 135 for the character recognition result (recognized registered vehicle number) so that the owner of the automobile 110 can use the condominium. It determines whether it is a resident, an entry / exit trader, or a guest invited by the resident, and if so, controls to open the gate.
  • the recognition success processing unit 147 queries the registered vehicle database 135 for the character recognition result (recognized registered vehicle number), so that the owner of the automobile 110 can use the hotel. , The employee, or an entry / exit trader, etc., and if so, control to open the gate.
  • step S163 When the process of step S163 is completed, the control process is completed.
  • step S162 If it is determined in step S162 that character recognition has failed for some or all of the characters described on the license plate, the process proceeds to step S164.
  • the recognition failure processing unit 148 performs processing when the license plate is successfully detected and character recognition for some or all of the characters described on the license plate fails. For example, the recognition failure processing unit 148 queries the registered vehicle database 135 for the characteristics of the extracted automobile 110. When there is registration information having vehicle feature information 173 including information matching the feature of the inquired automobile 110, the recognition failure processing unit 148 determines the gate opening / closing permission by a predetermined method, and when permitting, step. Similar to the case of S163, the control information for controlling the gate device 103 so as to open the gate 103A is generated. The processing control unit 143 supplies the control information to the gate device 103 via the communication unit 132.
  • the recognition failure processing unit 148 can perform processing other than opening the gate 103A.
  • the recognition failure processing unit 148 may call a manager to process it.
  • the recognition failure processing unit 148 may notify the passenger of the automobile 110 regarding the coping method, such as having the passenger of the automobile 110 present a certificate, an employee ID card, or the like.
  • the recognition failure processing unit 148 may control the execution of payment processing related to the passage (or parking) of the vehicle. For example, when the recognition failure processing unit 148 inquires the extracted characteristics of the automobile 110 to the registered vehicle database 135, and based on the introduction result, there is registration information matching the characteristics (that is, the automobile 110 is registered). If it is determined that the vehicle is a vehicle), the settlement process may be performed, and if the features do not match, the settlement process may be performed.
  • the recognition failure processing unit 148 may determine the permission to open / close the gate 103A according to the qualification information included in the other information 174 of the registration information 170. For example, if it is determined in the qualification information that the automobile 110 can enter the area on the other side of the gate 103A, the recognition failure processing unit 148 may allow the gate 103A to be opened. That is, the recognition failure processing unit 148 may generate control information for controlling the gate device 103 so as to open the gate 103A.
  • the recognition failure processing unit 148 may determine the opening / closing permission of the gate 103A according to not only the characteristics of the vehicle but also the security level. For example, when the security level changes depending on the date and time, such as night and day, weekdays and holidays, and security depending on the situation, such as whether the vehicle is full or whether a person is attending. It is possible that the level changes. It is possible to perform processing more according to the situation.
  • step S164 When the process of step S164 is completed, the control process is completed.
  • step S161 If it is determined in step S161 that the license plate detection has failed, the process proceeds to step S165.
  • step S165 the detection failure processing unit 149 performs processing when the license plate detection fails.
  • the detection failure processing unit 149 generates control information for controlling the gate device 103 so as not to open the gate 103A (to close the gate 103A if it is already open).
  • the processing control unit 143 supplies the control information to the gate device 103 via the communication unit 132.
  • step S164 When the process of step S164 is completed, the control process is completed.
  • the traffic control system 100 succeeds in detecting the license plate and fails in character recognition for some or all the characters described on the license plate. For example, it is possible to perform a process other than simply preventing the gate 103A from being opened, such as opening the gate 103A, and it is possible to perform a process more according to the situation.
  • Second Embodiment> ⁇ Traffic control system>
  • the example in which the registered vehicle database 135 registered in advance is used in the traffic control system 100 has been described, but further, a database in which information is sequentially updated may be used.
  • FIG. 12 is a block diagram showing a main configuration example of the control device 102 in that case. As shown in FIG. 12, the control device 102 in this case further has a traffic management database 201 in addition to the configuration shown in FIG.
  • the recognition failure processing unit 148 queries the traffic management database 201 for the recognized vehicle registration number, the characteristics of the vehicle 110, and the like, as in the case of the registered vehicle database 135.
  • the traffic management database 201 compares the vehicle registration number, vehicle characteristics, etc. inquired by the recognition failure processing unit 148 with each registration information (traffic history information), and returns a match or a mismatch. If they match, the registration information (traffic history information) is also returned.
  • the gate processing unit 134 registers information about the vehicle (vehicle 110) that has passed through the area where the gate device 103 controls the passage in the traffic management database 201.
  • FIG. 13 shows an example of information registered in the traffic management database 201.
  • the registration information 220 shown in FIG. 13 is information about an arbitrary vehicle (vehicle 110) that has passed through the area where the gate device 103 controls the passage.
  • the registration information 220 may include, for example, time information 221, vehicle registration information 222, vehicle feature information 223, owner information 224, and other information 225.
  • the time information 221 is information indicating the time (for example, year, month, day, hour, minute, second, etc.) when the registration information is registered in the traffic management database 201.
  • the time information 221 is also information indicating the time when the automobile 110 has passed through the area where the gate device 103 controls the passage.
  • the vehicle registration information 222 is the same information as the vehicle registration information 172.
  • the vehicle registration information 222 is registered when information such as a vehicle registration number is obtained for the automobile 110 that has passed through the area where the gate device 103 controls the passage.
  • the vehicle feature information 223 is the same information as the vehicle feature information 173.
  • the vehicle feature information 223 is information indicating the features of the automobile 110 that has passed through the region where the gate device 103 controls the passage, and is generated by the feature extraction unit 146 analyzing the captured image.
  • the owner information 224 is the same information as the owner information 171.
  • the owner information 224 is registered when information such as the owner is obtained for the automobile 110 that has passed through the area where the gate device 103 controls the passage.
  • Other information 225 is other information about the registered vehicle. For example, it may include information such as the past behavior history of this vehicle and the analysis result (for example, whether or not the selected processing was appropriate) about the processing performed on this vehicle in the past. Further, the information that can be included in the other information 174 can also be included in the other information 225.
  • the traffic control system 100 basically performs the same processing as in the case of the first embodiment, but the control processing in this case is performed in the following flow, for example.
  • An example of the flow of control processing in this case will be described with reference to the flowchart of FIG.
  • steps S201 to S203 and steps S205 are executed in the same manner as the processes of steps S101 to S103 and step S165 of FIG.
  • step S204 the recognition failure processing unit 148 performs processing when the license plate is successfully detected and character recognition for some or all of the characters described on the license plate fails.
  • the recognition failure processing unit 148 inquires the extracted characteristics of the automobile 110 to the registered vehicle database 135. In addition, the recognition failure processing unit 148 queries the traffic management database 201 for the extracted characteristics of the automobile 110.
  • the recognition failure processing unit 148 determines the gate opening / closing permission based on the inquiry results. For example, the recognition failure processing unit 148 prohibits the passage when the passage of the automobile 110 determined to match the registered vehicle based on the characteristics of the vehicle conflicts with the past passage history (for example, the history of warehousing / delivery). Then, the gate 103A is controlled so as not to be opened. By doing so, even vehicles having similar characteristics can be identified based on their behavior history. Therefore, it is possible to more accurately determine whether or not the features match.
  • the recognition failure processing unit 148 When allowing passage, the recognition failure processing unit 148 generates control information for controlling the gate device 103 so as to open the gate 103A, as in the case of step S164.
  • the processing control unit 143 supplies the control information to the gate device 103 via the communication unit 132.
  • the recognition failure processing unit 148 can perform processing other than opening the gate 103A as in the case of the first embodiment.
  • step S203 When the process of step S203 is completed, the process proceeds to step S206.
  • step S204 When the process of step S204 is completed, the process proceeds to step S206.
  • step S205 When the process of step S205 is completed, the process proceeds to step S206.
  • the gate processing unit 134 (recognition success processing unit 147, recognition failure processing unit 148, or detection failure processing unit 149) is a vehicle (vehicle 110) that has passed through an area where the gate device 103 controls the passage. Information about the above is registered in the traffic management database 201.
  • step S206 When the process of step S206 is completed, the control process is completed.
  • the traffic control system 100 can perform the process more according to the situation.
  • control device 102 supplies the information related to the notification to the in-vehicle device instead of supplying the information to the gate device 103, and outputs the information as an image, sound, or the like. By doing so, it is possible to give a clearer notification to the automobile 110 to be notified.
  • the notification may be given by the terminal device 311 owned by the passenger 301 of the automobile 110.
  • control device 102 supplies the information related to the notification to the terminal device 311 instead of supplying the information to the gate device 103, and outputs the information as an image, sound, or the like. By doing so, it is possible to more clearly notify the passenger 301 to be notified.
  • ⁇ Mechanical parking lot control system> the system for controlling the gate device 103 has been described, but the control target may be other than the gate device 103.
  • the control target may be other than the gate device 103.
  • a mechanical parking device having a variable parking space may be controlled.
  • the mechanical parking lot control system 400 shown in FIG. 16 is a system that controls the mechanical parking lot device 410 by the same method as in the case of the above-mentioned traffic control system 100.
  • control device 102 performs image analysis such as license plate detection, character recognition, and feature extraction on the captured image of the automobile 110 captured by the image pickup device 101, and is mechanically operated according to the processing result.
  • image analysis such as license plate detection, character recognition, and feature extraction on the captured image of the automobile 110 captured by the image pickup device 101, and is mechanically operated according to the processing result.
  • the control device 102 sets the mechanical parking device 410 in a state where it can be parked in the parking space of the vehicle 110. Drive.
  • a guidance system for guiding the automobile 110 may be a control target.
  • the guidance control system 500 shown in FIG. 17 is a system that controls the guidance system 510 that guides the automobile 110 by the same method as in the case of the traffic control system 100 described above.
  • the guidance system 510 displays a traffic signal 512 that lights colors such as red, blue (green), and yellow depending on the situation, and a display indicating the course such as an arrow. It is provided with a controlled device such as a course display device 513, a guidance display device 514 that displays an image such as a guide message about the course, and a sound output device 515 such as a so-called speaker that outputs sound related to the course. These controlled devices are controlled and driven by the control device 511.
  • the control device 102 controls the control device 511 to drive these controlled devices and guide the automobile 110 to a desired place.
  • the control device 102 performs such control in the same manner as in the case of the traffic control system 100.
  • the recognition failure processing unit 148 of the control device 102 performs processing corresponding to the case where the license plate is successfully detected and the character recognition fails for some or all the characters described on the license plate.
  • the content of this process is the same as that of the traffic control system 100, except that the control target is the guidance system 510.
  • the guidance control system 500 can control the guidance system 510 more according to the situation.
  • a notification system that notifies the passengers of the automobile 110 may be controlled.
  • the notification control system 600 shown in FIG. 18 is a system that controls the notification system 610 that notifies the passengers of the automobile 110 by the same method as in the case of the traffic control system 100 described above.
  • the notification system 610 is a system that notifies the passengers of the automobile 110 of arbitrary information such as information on products and events. As shown in FIG. 18, in addition to the control device 611, the notification system 610 is controlled by a display device 612 that displays an image such as a message, a voice output device 613 such as a so-called speaker that outputs voice related to notification, and the like. Equipped with a device. These controlled devices are controlled and driven by the control device 611.
  • the control device 102 controls the control device 611 to drive these controlled devices and notify the passengers of the automobile 110.
  • the control device 102 performs such control in the same manner as in the case of the traffic control system 100.
  • the recognition failure processing unit 148 of the control device 102 performs processing corresponding to the case where the license plate is successfully detected and the character recognition fails for some or all the characters described on the license plate.
  • the content of this process is the same as that of the traffic control system 100, except that the control target is the notification system 610.
  • the notification control system 600 can control the notification system 610 more according to the situation.
  • control target of the control device 102 is arbitrary and is not limited to the above example.
  • FIG. 19 is a block diagram showing a configuration example of computer hardware that executes the above-mentioned series of processes programmatically.
  • the input unit 911 includes, for example, a keyboard, a mouse, a microphone, a touch panel, an input terminal, and the like.
  • the output unit 912 includes, for example, a display, a speaker, an output terminal, and the like.
  • the storage unit 913 is composed of, for example, a hard disk, a RAM disk, a non-volatile memory, or the like.
  • the communication unit 914 includes, for example, a network interface.
  • the drive 915 drives a removable recording medium 921 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory.
  • the CPU 901 loads the program stored in the storage unit 913 into the RAM 903 via the input / output interface 910 and the bus 904 and executes the above-described series. Is processed.
  • the RAM 903 also appropriately stores data and the like necessary for the CPU 901 to execute various processes.
  • the program executed by the computer can be recorded and applied to, for example, a removable recording medium 921 as a package medium or the like.
  • the program can be installed in the storage unit 913 via the input / output interface 910 by mounting the removable recording medium 921 in the drive 915.
  • this program can be installed in advance in ROM 902 or storage unit 913.
  • the present technology can be applied to any configuration.
  • the present technology includes a processor as a system LSI (Large Scale Integration) or the like (for example, a video processor), a module using a plurality of processors (for example, a video module), a unit using a plurality of modules (for example, a video unit), or , A set in which other functions are added to the unit (for example, a video set), etc., can be implemented as a partial configuration of the device.
  • LSI Large Scale Integration
  • this technology can be applied to a network system composed of a plurality of devices.
  • the present technology may be implemented as cloud computing that is shared and jointly processed by a plurality of devices via a network.
  • this technology is implemented in a cloud service that provides services related to images (moving images) to arbitrary terminals such as computers, AV (AudioVisual) devices, portable information processing terminals, and IoT (Internet of Things) devices. You may try to do it.
  • the system means a set of a plurality of components (devices, modules (parts), etc.), and it does not matter whether all the components are in the same housing. Therefore, a plurality of devices housed in separate housings and connected via a network, and a device in which a plurality of modules are housed in one housing are both systems. ..
  • the configuration described as one device (or processing unit) may be divided and configured as a plurality of devices (or processing units).
  • the configurations described above as a plurality of devices (or processing units) may be collectively configured as one device (or processing unit).
  • a configuration other than the above may be added to the configuration of each device (or each processing unit).
  • a part of the configuration of one device (or processing unit) may be included in the configuration of another device (or other processing unit). ..
  • the above-mentioned program may be executed in any device.
  • the device may have necessary functions (functional blocks, etc.) so that necessary information can be obtained.
  • the image pickup device 101 may include a part or all of the functions included in the control device 102.
  • the image pickup apparatus 101 may include a part or all of the functions of the image analysis unit 133.
  • the image pickup device 101 may detect the license plate on the captured image. Then, when the image pickup device 101 can detect the license plate, a partial area including the detected license plate is cut out from the captured image, and the image of the cut out partial area is transmitted to the control device 102. May be good.
  • the communication unit 132 of the control device 102 receives an image of a partial region supplied from the image pickup device 101.
  • the image acquisition unit 141 acquires an image of the partial region received by the communication unit 132.
  • the image acquisition unit 141 supplies an image of the partial region to the character recognition unit 145.
  • the character recognition unit 145 performs character recognition on the characters written on the license plate included in the image of the supplied partial area.
  • the processing determination unit 142 uses the character recognition result (vehicle registration number, etc.) for the processing unit 147 when the recognition is successful. Let the process be executed.
  • the control unit 121 of the imaging device 101 captures the captured image (image including the vehicle). , Supply to the communication unit 123 and transmit to the control device 102.
  • the communication unit 123 transmits the captured image to the control device 102.
  • the communication unit 132 of the control device 102 receives the captured image supplied from the image pickup device 101.
  • the image acquisition unit 141 acquires the captured image received by the communication unit 132.
  • the image acquisition unit 141 supplies the captured image to the feature extraction unit 146.
  • the feature extraction unit 146 extracts the feature information of the vehicle included in the captured image.
  • the processing determination unit 142 causes the processing unit 148 at the time of recognition failure to execute processing using the feature information.
  • the plate detection unit 144 supplies the communication unit 123 with control information indicating that fact. , To the control device 102.
  • the communication unit 123 transmits the control information to the control device 102.
  • the communication unit 132 of the control device 102 receives the control information supplied from the image pickup device 101.
  • the processing determination unit 142 acquires the control information from the communication unit 132.
  • the processing determination unit 142 causes the processing unit 149 at the time of detection failure to execute the processing based on the acquired control information.
  • the license plate detection process can be performed in the image pickup apparatus 101.
  • the image pickup device 101 may detect the license plate and perform character recognition on the generated captured image.
  • the control unit 121 of the image pickup apparatus 101 includes a plate detection unit 144 and a character recognition unit 145.
  • the plate detection unit 144 detects the license plate in the captured image as in the case of the example of FIG. 3 and the like.
  • the character recognition unit 145 recognizes the characters written on the license plate using the image of the partial region including the license plate, as in the case of the example of FIG.
  • the character recognition unit 145 will perform the character recognition unit 145.
  • Text information (for example, the recognized vehicle registration number, etc.) indicating the result is supplied to the communication unit 123.
  • the communication unit 123 transmits the text information to the control device 102.
  • the communication unit 132 of the control device 102 receives the text information.
  • the processing determination unit 142 acquires this text information from the communication unit 132.
  • the processing determination unit 142 causes the processing unit 147 at the time of successful recognition to execute processing using the text information (vehicle registration number, etc.).
  • the control unit 121 Supply the captured image (image including the vehicle) to the communication unit 123 and causes the control device 102 to transmit the captured image (image including the vehicle).
  • the communication unit 123 transmits the captured image to the control device 102.
  • the communication unit 132 of the control device 102 receives the captured image transmitted from the image pickup device 101.
  • the image acquisition unit 141 acquires the captured image received by the communication unit 132.
  • the image acquisition unit 141 supplies the captured image to the feature extraction unit 146.
  • the feature extraction unit 146 extracts the feature information of the vehicle included in the captured image.
  • the processing determination unit 142 causes the processing unit 148 at the time of recognition failure to execute processing using the feature information.
  • the control device 102 may perform character recognition again.
  • the plate detection unit 144 cuts out a partial region including the detected license plate from the captured image, supplies the image of the cut out partial region to the communication unit 123, and transmits the image to the control device 102.
  • the communication unit 123 transmits an image of the partial region supplied from the plate detection unit 144 to the control device 102.
  • the communication unit 132 of the control device 102 receives an image of the partial area.
  • the image acquisition unit 141 acquires an image of the partial region from the communication unit 132 and supplies the image to the character recognition unit 145.
  • the character recognition unit 145 performs character recognition on the characters written on the license plate included in the image of the supplied partial area.
  • the processing determination unit 142 uses the character recognition result (vehicle registration number, etc.) for the processing unit 147 when the recognition is successful. Let the process be executed.
  • the license plate detection process and the recognition of the characters written on the license plate can be performed by the image pickup apparatus 101.
  • the image pickup device 101 may perform license plate detection, character recognition, and feature extraction on the generated captured image.
  • the control unit 121 of the image pickup apparatus 101 includes an image analysis unit 133 (plate detection unit 144, character recognition unit 145, and feature extraction unit 146).
  • the plate detection unit 144 detects the license plate in the captured image as in the case of the example of FIG. 3 and the like.
  • the character recognition unit 145 recognizes the characters written on the license plate using the image of the partial region including the license plate, as in the case of the example of FIG.
  • the feature extraction unit 146 extracts the features of the vehicle from the captured image as in the case of the example of FIG. 3 and the like.
  • the communication unit 123 of the image pickup apparatus 101 uses text information (text information indicating the result). For example, the recognized vehicle registration number, etc.) is transmitted to the control device 102.
  • the processing determination unit 142 of the control device 102 causes the processing unit 147 at the time of successful recognition to execute processing using this text information (vehicle registration number, etc.).
  • the feature extraction unit The 146 extracts the feature information of the vehicle from the captured image.
  • the feature extraction unit 146 supplies the feature information to the communication unit 123 and transmits the feature information to the image pickup apparatus 101.
  • the communication unit 123 transmits the feature information to the image pickup apparatus.
  • the communication unit 132 of the control device 102 receives the feature information transmitted from the image pickup device 101.
  • the processing determination unit 142 causes the processing unit 148 at the time of recognition failure to execute processing using the feature information.
  • the plate detection unit 144 supplies the communication unit 123 with control information indicating that fact. , To the control device 102.
  • the communication unit 123 transmits the control information to the control device 102.
  • the communication unit 132 of the control device 102 receives the control information transmitted from the image pickup device 101.
  • the processing determination unit 142 acquires the control information from the communication unit 132.
  • the processing determination unit 142 causes the processing unit 149 at the time of detection failure to execute the processing based on the acquired control information.
  • the license plate detection process the recognition of the characters written on the license plate, and the extraction of the characteristic information of the vehicle can be performed by the image pickup apparatus 101.
  • each step of one flowchart may be executed by one device, or may be shared and executed by a plurality of devices.
  • the plurality of processes may be executed by one device, or may be shared and executed by a plurality of devices.
  • a plurality of processes included in one step can be executed as processes of a plurality of steps.
  • the processes described as a plurality of steps can be collectively executed as one step.
  • the processing of the steps for writing the program may be executed in chronological order in the order described in the present specification, and may be executed in parallel or in calls. It may be executed individually at the required timing such as when it is broken. That is, as long as there is no contradiction, the processing of each step may be executed in an order different from the above-mentioned order. Further, the processing of the step for writing this program may be executed in parallel with the processing of another program, or may be executed in combination with the processing of another program.
  • a plurality of technologies related to this technology can be independently implemented independently as long as there is no contradiction.
  • any plurality of the present technologies can be used in combination.
  • some or all of the techniques described in any of the embodiments may be combined with some or all of the techniques described in other embodiments. It is also possible to carry out a part or all of any of the above-mentioned techniques in combination with other techniques not described above.
  • the present technology can also have the following configurations.
  • a feature extraction unit that extracts feature information of the vehicle from the captured image based on the recognition result of the vehicle license plate in the captured image.
  • An information processing device including a processing execution unit that performs processing according to the characteristic information of the vehicle extracted by the feature extraction unit.
  • the feature extraction unit extracts the feature information from the captured image when at least a part of the vehicle registration number of the license plate cannot be recognized as the recognition result. apparatus.
  • the feature extraction unit specifies at least one of the vehicle name, vehicle type, model, and vehicle color of the vehicle as the feature information.
  • the information processing apparatus queries the registered vehicle database in which the characteristics of the registered vehicle are registered in advance, and performs processing according to the inquiry result.
  • the qualification information of the registered vehicle is registered in the registered vehicle database.
  • the information processing apparatus according to (4), wherein the processing execution unit performs processing according to the qualification information of the registered vehicle corresponding to the feature information.
  • the processing execution unit inquires the characteristic information to a traffic management database that manages traffic history information regarding a vehicle that has passed a predetermined place, and performs processing according to the inquiry result (1). Processing equipment.
  • the information processing apparatus wherein the processing execution unit performs processing related to control of opening / closing of a gate according to the feature information.
  • the information processing device wherein the processing execution unit performs processing related to control of a notification system that notifies the passengers of the vehicle in accordance with the feature information.
  • the information processing device further including a character recognition unit that recognizes characters written on the license plate of the vehicle.
  • the information processing apparatus further comprising a plate detection unit that detects the license plate from the captured image.
  • the information processing apparatus further including a character recognition unit that recognizes characters written on the license plate when the license plate is detected from the captured image.
  • the information processing apparatus further comprising an imaging unit that images a vehicle and generates the captured image.
  • 100 traffic control system 101 imaging device, 102 control device, 103 gate device, 110 automobile, 121 control unit, 122 imaging unit, 123 communication unit, 124 drive unit, 131 control unit, 132 communication unit, 133 image analysis unit, 134 Gate processing unit, 135 registered vehicle database, 141 image acquisition unit, 142 processing judgment unit, 143 processing control unit, 144 plate detection unit, 145 character recognition unit, 146 feature extraction unit, 147 successful recognition processing unit, 148 when recognition fails Processing unit, 149 detection failure processing unit, 170 registration information, 171 owner information, 172 vehicle registration information, 173 vehicle feature information, 174 other information, 181 control unit, 182 communication unit, 183 gate opening / closing unit, 184 output unit, 201 Traffic management database, 220 registration information, 221 time information, 222 vehicle registration information, 223 vehicle feature information, 224 owner information, 225 other information, 301 passengers, 311 terminal device, 400 mechanical parking control system, 410 machines Type parking device, 500 guidance control system, 510 guidance system, 511 control device,

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Finance (AREA)
  • Business, Economics & Management (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Traffic Control Systems (AREA)

Abstract

本開示は、車両のナンバープレートに対する認識結果に応じた処理を行うことができるようにする情報処理装置および方法、並びに、プログラムに関する。 撮像画像における車両のナンバープレートに対する認識結果に基づいて、その撮像画像からその車両の特徴情報を抽出し、その抽出された車両の特徴情報に応じた処理を行う。本開示は、例えば、情報処理装置、画像処理装置、通信装置、電子機器、情報処理方法、またはプログラム等に適用することができる。

Description

情報処理装置および方法、並びに、プログラム
 本開示は、情報処理装置および方法、並びに、プログラムに関し、特に、車両のナンバープレートに対する認識結果に応じた処理を行うことができるようにした情報処理装置および方法、並びに、プログラムに関する。
 近年、車両の撮像画像から、その車両に取り付けられているナンバープレートに表記されている車両登録番号を認識する方法が考えられた(例えば、特許文献1参照)。また、駐車場等において、その車両登録番号を認識し、認識した車両登録番号を用いて車両の入出庫を管理する方法が考えられた(例えば、特許文献2参照)。
特許第4973341号 特開2008-176472号公報
 しかしながら、特許文献1や特許文献2には、ナンバープレートに表記された車両登録番号の認識できた場合にその車両登録番号を用いてその後の処理が行われることが記載されているのみであり、車両登録番号を認識できなかった場合に応じた処理について開示されていなかった。そのため、車両のナンバープレートに対する認識結果に対してより適切な処理を行うことが求められていた。
 本開示は、このような状況に鑑みてなされたものであり、より車両のナンバープレートに対する認識結果に応じた処理を行うことができるようにするものである。
 本技術の一側面の情報処理装置は、撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出する特徴抽出部と、前記特徴抽出部により抽出された前記車両の特徴情報に応じた処理を行う処理実行部とを備える情報処理装置である。
 本技術の一側面の情報処理方法は、撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出し、抽出された前記車両の特徴情報に応じた処理を行う情報処理方法である。
 本技術の一側面のプログラムは、コンピュータを、撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出する特徴抽出部と、前記特徴抽出部により抽出された前記車両の特徴情報に応じた処理を行う処理実行部として機能させるプログラムである。
 本技術の一側面の情報処理装置および方法、並びに、プログラムにおいては、撮像画像における車両のナンバープレートに対する認識結果に基づいて、その撮像画像からその車両の特徴情報が抽出され、その抽出された車両の特徴情報に応じた処理が行われる。
通行制御システムの主な構成例を示す図である。 撮像装置の主な構成例を示すブロック図である。 制御装置の主な構成例を示すブロック図である。 プレート検出および文字認識の概要を説明する図である。 ナンバープレートの例を説明する図である。 文字認識に失敗する原因の例を説明する図である。 登録車両データベースの登録情報の主な構成例を示す図である。 ゲート装置の主な構成例を示すブロック図である。 通行制御処理の流れの例を説明するフローチャートである。 画像解析処理の流れの例を説明するフローチャートである。 制御処理の流れの例を説明するフローチャートである。 制御装置の主な構成例を示すブロック図である。 通行管理データベースの登録情報の主な構成例を示す図である。 制御処理の流れの例を説明するフローチャートである。 通行制御システムの主な構成例を示す図である。 機械式駐車場制御システムの主な構成例を示す図である。 誘導制御システムの主な構成例を示す図である。 通知制御システムの主な構成例を示す図である。 コンピュータの主な構成例を示すブロック図である。
 以下、本開示を実施するための形態(以下実施の形態とする)について説明する。なお、説明は以下の順序で行う。
 1.第1の実施の形態(通行制御システム)
 2.第2の実施の形態(通行制御システム)
 3.第3の実施の形態(その他のシステム)
 4.付記
 <1.第1の実施の形態>
  <ナンバープレートの文字認識と、その結果を利用するシステム>
 近年、例えば特許文献1に記載のように、車両の撮像画像から、その車両に取り付けられているナンバープレートに表記されている車両登録番号を認識する方法が考えられた。また、特許文献2に記載のように、駐車場等において、その車両登録番号を認識し、認識した車両登録番号を用いて車両の入出庫を管理する方法が考えられた。
 しかしながら、特許文献1や特許文献2には、ナンバープレートに表記された車両登録番号を認識することができた場合にその車両登録番号を用いてその後の処理が行われることが記載されているのみであった。つまり、これらの文献には、車両登録番号を認識することができなかった場合に応じた処理について開示されていなかった。
 例えば、特許文献1に記載のシステムは、撮像画像に含まれるナンバープレートの車両登録番号を認識することができた場合、その認識された車両登録番号をデータベースに登録する。これに対して、車両登録番号を認識することができなかった場合、このシステムは、撮像画像を削除するのみであった。つまり、この場合、データベースへの登録に関する処理は行われなかった。
 また、特許文献2に記載のシステムは、ナンバープレートの車両登録番号を読み取り、その読み取った車両登録番号を用いて、車両の入出庫管理が行われる。例えば、このシステムは、読み取った車両登録番号と、車両入庫時に読み取った車両登録番号とでマッチングを行ったり、マッチングできた場合、清算処理や出庫ゲートを開く等の処理を行ったりする。これに対して、車両登録番号を読み取れなかった場合の処理については、特許文献2には記載されていない。
 このように、これらのシステムでは、車両登録番号を認識することができなかった場合、「処理を行わない」ことが選択されるため、そのような場合に適した処理を行うことができなかった。例えば、特許文献2に記載の方法の場合、車両登録番号が認識できないと、必ず出庫ゲートが開かれない。そのため、不要に出庫ゲートが開かないケースが増大し、システムとして利便性が低減するおそれがあった。
 そのため、車両のナンバープレートに対する認識結果に対してより適切な処理を行うことが求められていた。
 そこで、撮像画像における車両のナンバープレートに対する認識結果に基づいて、その撮像画像から車両の特徴情報を抽出し、その抽出された車両の特徴情報に応じた処理を行うようにする。
 例えば、情報処理装置において、撮像画像における車両のナンバープレートに対する認識結果に基づいて、その撮像画像からその車両の特徴情報を抽出する特徴抽出部と、その特徴抽出部により抽出された車両の特徴情報に応じた処理を行う処理実行部とを備える。
 例えば、プログラムにおいて、コンピュータを、撮像画像における車両のナンバープレートに対する認識結果に基づいて、その撮像画像からその車両の特徴情報を抽出する特徴抽出部と、その特徴抽出部により抽出された車両の特徴情報に応じた処理を行う処理実行部として機能させる。
 このようにすることにより、より撮像画像における車両のナンバープレートに対する認識結果に応じた処理を行うことができる。したがって、より状況に応じた処理を行うことができる。例えば、ナンバープレートの車両登録番号を認識することができない場合も、その場合に応じた処理を行うことができる。
  <通行制御システム>
 図1は、本技術を適用した情報処理システムの一態様である通行制御システムの主な構成の一例を示すブロック図である。図1に示される通行制御システム100は、車両の通行をゲートの開閉で制御するシステムである。図1に示されるように、通行制御システム100は、撮像装置101、制御装置102、およびゲート装置103を備える。
 自動車110は、ゲート装置103(通行制御システム100)により通行が制御される車両である。自動車110は、その車体の所定の位置(例えば前方および後方)にナンバープレートが設置されている。
 なお、図1においては、通行を制御される対象として自動車110を例に示したが、通行制御システム100が通行を制御する対象は、これに限らず、ナンバープレートが設置された車両であれば何でもよい。
 また、本明細書において、ナンバープレートとは、国や自治体等に登録される車両を管理するための識別番号等を表記するためのプレートである。このナンバープレートは、例えば日本の、自動車登録番号を表示するための自動車登録番号標、車両番号を表示するための車両番号標や標識等を含む。また、このナンバープレートは、アメリカ合衆国等におけるライセンスプレートを含む。
 なお、実際には、ナンバープレートには、数字だけでなく文字や記号等も表記される。以下においては、特に言及しない限り、ナンバープレートに記載の数字、文字、記号等を互いに区別せずに「文字」として説明する。また、自動車登録番号や車両番号等の、ナンバープレートに記載の「文字列(文字・数字・記号を含み得る)」のことを「車両登録番号」とも称する。
 撮像装置101は、所謂監視カメラのように、ゲート装置103付近に設置され、ゲート装置103の近傍を通行する自動車110を撮像する。撮像装置101の設置場所は任意である。例えば、撮像装置101が、自動車110の後方に設置されるナンバープレートを撮像することができる位置に設置されるようにしてもよい。または、撮像装置101が、自動車110の前方に設置されるナンバープレートを撮像することができる位置に設置されるようにしてもよい。
 撮像装置101は、自動車110を撮像し、その撮像画像を生成する。撮像装置101および制御装置102は、有線通信または無線通信により通信可能に接続されている。撮像装置101は、生成した撮像画像を制御装置102に供給する。なお、この撮像画像は単数または複数の静止画像であってもよいし、動画像であってもよい。
 例えば、撮像装置101が、ゲート装置103が自動車110の通行を制御する領域を常時撮像し、その撮像画像から画角内に進入した自動車110を検出すると、その自動車110が写っている静止画像または動画像の撮像画像を制御装置102に送信するようにしてもよい。また、撮像装置101が常時撮像して生成する撮像画像(動画像)を制御装置102に送信し、制御装置102がその撮像画像から、画角に進入した自動車110を検出するようにしてもよい。
 なお、撮像装置101は、焦点距離が可変であってもよい。例えば、撮像装置101が自動で被写体に合焦させるオートフォーカス機能を有していてもよいし、所謂ズーム機能を有していてもよい。また、撮像装置101は、撮像の向きを変えることができるようにしてもよい。例えば、撮像装置101がパン・チルト機能を有するようにしてもよい。
 制御装置102は、撮像装置101より供給される撮像画像に基づいて、ゲート装置103の制御を行う。例えば、制御装置102は、撮像画像を画像解析して、自動車110のナンバープレートの検出や車両登録番号等の文字認識や自動車110の特徴抽出等を行う。そして、制御装置102は、それらの画像解析結果に基づいてゲート装置103に行わせる処理を決定する。
 制御装置102は、有線通信または無線通信により、ゲート装置103と通信可能に接続されている。制御装置102は、制御情報をゲート装置103に供給することにより、ゲート装置103に、制御装置102が決定した処理を実行させる。
 なお、制御装置102が撮像装置101の撮像を制御することができるようにしてもよい。例えば、制御装置102が、撮像装置101に対して、撮像方向やズーム倍率を指定してもよいし、静止画像のキャプチャタイミング(つまり撮像タイミング)を指定してもよい。また、制御装置102が、撮像装置101に対して、再撮像を指示してもよい。
 ゲート装置103は、開閉可能なゲート103Aを有している。ゲート装置103は、制御装置102の制御に従って、このゲート103Aを開いたり閉じたりすることにより、例えば駐車場の入り口や出口等の、所定の領域の自動車110の通行を制御する。なお、このゲート103Aの代わりに、例えばシャッタを用いてもよい。つまり、ゲート装置103が、そのシャッタを開閉することにより、自動車110の通行を制御するようにしてもよい。
 また、ゲート装置103が、画像を表示するモニタ(表示装置)や、音声を出力するスピーカ(音声出力装置)等を備え、自動車110の搭乗者に対する通知(画像や音声等の出力)を行うことができるようにしてもよい。
 以上のように、この通行制御システム100においては、自動車110のナンバープレートの検出、そのナンバープレートに記載の車両登録番号等の文字認識、自動車110の特徴抽出等が行われ、それらの処理結果に基づいてゲートの開閉等が制御される。
 この通行制御システム100は、例えば、マンションの駐車場、企業の駐車場、スーパーやデパート等の商業施設の駐車場、ホテルの駐車場、または、有料道路の料金所等に設置される。
 例えば、マンションの駐車場の場合、駐車可能な車両が、マンションの住人、出入り業者、住人が招待した客等が所有する車両(例えば自動車110)に限定される。これらの車両については事前に情報を登録することができる。撮像装置101やゲート装置103は、駐車場の入り口や出口等に設置され、制御装置102は、マンション敷地内の管理室等に設置される。通行制御システム100は、撮像画像と事前に登録された情報とに基づいて、マンションの住人、出入り業者、住人が招待した客等が所有する車両の入庫や出庫のみを許可するように、車両の通行を制御する。
 また、例えば、住人が所有する車両が駐車可能なエリア、出入り業者が所有する車両が駐車可能なエリア、客が所有する車両が駐車可能なエリア等を区分けするようにしてもよい。その場合、撮像装置101やゲート装置103は、各エリアの境界(入口や出口)等に設置され、通行制御システム100は、各車両が駐車可能なエリアにのみ進入することができるように、車両の通行を制御する。
 例えば、企業の駐車場の場合、駐車可能な車両が、その企業、その企業の社員、出入り業者、その企業が招待した客等が所有する車両(例えば自動車110)に限定される。これらの車両については事前に情報を登録することができる。撮像装置101やゲート装置103は、駐車場の入り口や出口等に設置され、制御装置102は、企業の敷地内の管理室等に設置される。通行制御システム100は、撮像画像と事前に登録された情報とに基づいて、その企業、その企業の社員、出入り業者、その企業が招待した客等が所有する車両の入庫や出庫のみを許可するように、車両の通行を制御する。
 また、例えば、企業が所有する車両が駐車可能なエリア、社員が所有する車両が駐車可能なエリア、出入り業者が所有する車両が駐車可能なエリア、客が所有する車両が駐車可能なエリア等を区分けするようにしてもよい。その場合、撮像装置101やゲート装置103は、各エリアの境界(入口や出口)等に設置され、通行制御システム100は、各車両が駐車可能なエリアにのみ進入することができるように、車両の通行を制御する。
 例えば、スーパーやデパート等の商業施設の駐車場の場合、その商業施設の客等が所有する車両(例えば自動車110)が駐車可能である。すなわち、基本的に任意の車両が駐車可能である。撮像装置101やゲート装置103は、その駐車場の入り口や出口等に設置され、制御装置102は、その商業施設内の管理室等に設置される。通行制御システム100は、入庫した車両のみの出庫を許可するように、車両の通行を制御する。
 また、例えば、その商業施設の企業、その従業員、出入り業者等が所有する車両も駐車可能としてもよい。これらの車両については事前に情報を登録することができる。通行制御システム100は、撮像画像と事前に登録された情報とに基づいてこれらの車両を識別し、通行を制御することができる。
 また、例えば、企業が所有する車両が駐車可能なエリア、社員が所有する車両が駐車可能なエリア、出入り業者が所有する車両が駐車可能なエリア、客が所有する車両が駐車可能なエリア等を区分けするようにしてもよい。その場合、撮像装置101やゲート装置103は、各エリアの境界(入口や出口)等に設置され、通行制御システム100は、各車両が駐車可能なエリアにのみ進入することができるように、車両の通行を制御する。
 例えば、ホテルの駐車場の場合、ホテル、その従業員、出入り業者、宿泊客、非宿泊客(ホテル内施設の利用客等)等が所有する車両(例えば自動車110)が駐車可能である。ホテル、その従業員、出入り業者が所有する車両については、事前に情報を登録することができる。宿泊客や非宿泊客が所有する車両については、事前に情報を登録することができる場合とできない場合とがある。撮像装置101やゲート装置103は、その駐車場の入り口や出口等に設置され、制御装置102は、そのホテル内の管理室等に設置される。通行制御システム100は、事前に情報が登録されている車両については、撮像画像と事前に登録された情報とに基づいて通行を制御する。また、通行制御システム100は、事前に情報が登録されていない車両については、入庫した車両のみの出庫を許可するように、車両の通行を制御する。
 また、例えば、ホテルが所有する車両が駐車可能なエリア、従業員が所有する車両が駐車可能なエリア、出入り業者が所有する車両が駐車可能なエリア、宿泊客が所有する車両が駐車可能なエリア、非宿泊客が所有する車両が駐車可能なエリア等を区分けするようにしてもよい。その場合、撮像装置101やゲート装置103は、各エリアの境界(入口や出口)等に設置され、通行制御システム100は、各車両が駐車可能なエリアにのみ進入することができるように、車両の通行を制御する。
 例えば、有料道路の料金所の場合、撮像装置101乃至ゲート装置103は、その有料道路の入り口や出口等(料金所等)に設置される。この場合、基本的に、その有料道路を通行する任意の車両(例えば自動車110)が通行可能である。通行制御システム100は、例えば、その有料道路に流入し、正規の料金を精算した車両のみの流出を許可するように、車両の通行を制御する。
 なお、図1においては、撮像装置101乃至ゲート装置103を各1台ずつ示しているが、これらの台数はそれぞれ任意である。
 例えば、撮像装置101が複数台であってもよい。例えば、自動車110の前方に取り付けられたナンバープレートを検出するための撮像装置101と、自動車110の後方に取り付けられたナンバープレートを検出するための撮像装置101とを備えるようにしてもよい。その場合、制御装置102が、両撮像装置101から供給された撮像画像から自動車110前方のナンバープレートと後方のナンバープレートとを検出して文字認識を行い、その両方の文字認識結果を比較することにより文字認識結果を導出するようにしてもよい。このようにすることにより、より正確な文字認識結果を得ることができる。
 また、例えば、1台の制御装置102が、撮像装置101およびゲート装置103の組み合わせを複数制御するようにしてもよい。例えば、駐車場の入口や出口等の複数個所に撮像装置101およびゲート装置103を設置し、それらを1台の制御装置102が制御するようにしてもよい。このようにすることにより、制御装置102は、複数の場所で得られた情報を共有して制御を行うことができる。例えば、制御装置102は、駐車場の入口に設置された撮像装置101において生成された自動車110の撮像画像から得られた情報を、出口に設置されたゲート装置103の制御に利用することができる。
 また、複数の制御装置102が情報を共有し、協働して制御を行うようにしてもよい。また、制御装置102の設置場所は任意であり、撮像装置101やゲート装置103の設置場所と異なる場所であってもよい。例えば、それらが設置される駐車場や施設の外であってもよい。例えば、複数の通行制御システム100を中央管理サーバ等において制御するようにしてもよい。その場合、各通行制御システム100の制御装置102は、その中央管理サーバと通信を行い、情報を共有し、協働して制御に関する処理を行うようにしてもよい。このようにすることにより、各通行制御システム100の制御装置102は、複数の通行制御システム100において得られた情報を共有して制御を行うことができる。
 また、撮像装置101、制御装置102、ゲート装置103を互いに一体化してもよい。例えば、撮像装置101と制御装置102とを一体化し、撮像と撮像画像の解析とゲート開閉とを1つの装置において行うようにしてもよい。また、例えば、撮像装置101とゲート装置103とを一体化し、撮像とゲートの開閉を、1つの装置において行うようにしてもよい。さらに、例えば、制御装置102とゲート装置103とを一体化し、撮像画像の画像解析とゲート開閉を1つの装置において行うようにしてもよい。もちろん、撮像装置101、制御装置102、およびゲート装置103を一体化し、それらの処理を全て1つの装置において行うようにしてもよい。
  <撮像装置>
 次に、各装置の構成について説明する。図2は、本技術を適用した情報処理装置の一態様である撮像装置101の主な構成の一例を示すブロック図である。図2に示されるように、撮像装置101は、制御部121、撮像部122、通信部123、および駆動部124を有する。
 制御部121は、撮像部122、通信部123、および駆動部124を制御し、撮像に関する処理を行わせる。例えば、制御部121は、撮像部122に被写体の撮像を行わせ、その撮像画像を取得することができる。また、制御部121は、その撮像画像を通信部123に供給し、制御装置102宛てに送信させることができる。さらに、制御部121は、通信部123を介して制御装置102から供給される制御情報を取得することができる。また、制御部121は、その制御情報に従って撮像部122や駆動部124を制御することができる。
 この制御部121は、任意の構成を有することができる。例えば、制御部121が、上述の処理を実現する論理回路により構成されるようにしてもよい。また、制御部121が、例えばCPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等を有し、それらを用いてプログラムを実行することにより、上述の処理を実現するようにしてもよい。もちろん、制御部121が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 撮像部122は、光学系や受光素子を有し、被写体の撮像に関する処理を行う。例えば、撮像部122は、制御部121により制御され、被写体(例えば自動車110)を撮像し、その被写体を含む撮像画像(例えば自動車110を含む撮像画像)を生成することができる。その際、撮像部122は、この自動車110を含む撮像画像として単数の静止画像を生成してもよいし、複数の静止画像を生成してもよいし、動画像を生成してもよい。もちろん、撮像部122が、動画像の撮像画像と静止画像の撮像画像との両方を生成してもよい。また、撮像部122は、その撮像画像(静止画像若しくは動画像、またはその両方)を制御部121に供給することができる。
 なお、撮像部122は、制御部121により制御されて撮像パラメータ設定を行うことができる。また、撮像部122は、例えば駆動部124により可動部を駆動され、撮像の向きの設定、ズーム位置の設定、合焦(所謂オートフォーカス)、絞り調整等を行うことができる。
 この撮像部122は、上述の光学系や受光素子等に加え、任意の構成を有することができる。例えば、撮像部122が、光学系や受光素子を用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、撮像部122が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、光学系や受光素子を用いて上述の処理を実現するようにしてもよい。もちろん、撮像部122が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 通信部123は、通信インタフェースを有し、その通信インタフェースを介して他の装と通信を行う。この通信の方式(規格)は任意であり、無線通信であってもよいし、有線通信であってもよいし、その両方であってもよい。
 例えば、通信部123は、制御装置102と通信を行い、制御部121から供給される撮像画像を制御装置102に供給することができる。また、通信部123は、制御装置102と通信を行い、制御装置102から供給される制御情報を取得し、それを制御部121に供給することができる。
 この通信部123は、上述した通信インタフェースに加え、任意の構成を有することができる。例えば、通信部123が、通信インタフェースを用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、通信部123が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、通信インタフェースを用いて上述の処理を実現するようにしてもよい。もちろん、通信部123が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 駆動部124は、アクチュエータ等を有し、撮像部122の可動部を駆動させる。例えば、駆動部124は、制御部121により制御され、撮像部122の可動部を駆動し、撮像の向きの設定、ズーム位置の設定、合焦(所謂オートフォーカス)、絞り調整等を行うことができる。
 この駆動部124は、上述したアクチュエータ等に加え、任意の構成を有することができる。例えば、駆動部124が、アクチュエータ等を用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、駆動部124が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、アクチュエータ等を用いて上述の処理を実現するようにしてもよい。もちろん、駆動部124が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
  <制御装置>
 図3は、本技術を適用した情報処理装置の一態様である制御装置102の主な構成の一例を示すブロック図である。図2に示されるように、制御装置102は、制御部131、通信部132、画像解析部133、ゲート処理部134、および登録車両データベース135を有する。
 制御部131は、通信部132、画像解析部133、およびゲート処理部134を制御し、各種処理を行わせる。
 制御部131は、機能ブロックとして、例えば、画像取得部141、処理判定部142、および処理制御部143を有する。
 画像取得部141は、撮像画像の取得に関する処理を行う。例えば、画像取得部141は、通信部132を介して撮像装置101から供給される撮像画像を取得することができる。また、画像取得部141は、取得した撮像画像を画像解析部133(プレート検出部144)に供給することができる。
 処理判定部142は、画像解析部133による画像解析結果に基づいて実行する処理を判定する。例えば、処理判定部142は、画像解析部133から供給される撮像画像の解析結果(文字認識部145から供給される文字認識結果等や、特徴抽出部146から供給される自動車110の特徴に関する情報等)に基づいて、どのような処理を行うかを判定することができる。また、処理判定部142は、その判定結果に基づいて、ゲート処理部134(認識成功時処理部147、認識失敗時処理部148、または検出失敗時処理部149)に、処理を実行させることができる。
 処理制御部143は、撮像装置101やゲート装置103の制御に関する処理を行う。例えば、処理制御部143は、ゲート処理部134から供給される制御情報を取得し、それを、通信部132を介してゲート装置103に供給することができる。つまり、処理制御部143は、その制御情報に対応する処理をゲート装置103に実行させることができる。また、処理制御部143は、撮像装置101(撮像部122や駆動部124)を制御する制御情報を、通信部132を介してゲート装置103に供給することができる。つまり、処理制御部143は、その制御情報に対応する処理を撮像装置101に実行させることができる。
 この制御部131は、任意の構成を有することができる。例えば、制御部131が、上述の各機能ブロックの処理を実現する論理回路により構成されるようにしてもよい。また、制御部131が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、各機能ブロックの処理を実現するようにしてもよい。もちろん、制御部131が、その両方の構成を有し、各機能ブロックの処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 通信部132は、通信インタフェースを有し、その通信インタフェースを介して他の装と通信を行う。この通信の方式(規格)は任意であり、無線通信であってもよいし、有線通信であってもよいし、その両方であってもよい。
 例えば、通信部132は、撮像装置101と通信を行い、撮像装置101から供給される撮像画像を受信し、それを制御部131(画像取得部141)に供給することができる。また、通信部132は、撮像装置101やゲート装置103と通信を行い、制御部131(処理制御部143)から供給される制御情報を取得し、それを撮像装置101やゲート装置103に供給することができる。
 この通信部132は、上述した通信インタフェースに加え、任意の構成を有することができる。例えば、通信部132が、通信インタフェースを用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、通信部323が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、通信インタフェースを用いて上述の処理を実現するようにしてもよい。もちろん、通信部132が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 画像解析部133は、画像解析に関する処理を行う。画像解析部133は、機能ブロックとして、プレート検出部144、文字認識部145、および特徴抽出部146を有する。
 プレート検出部144は、ナンバープレートの検出に関する処理を行う。例えば、プレート検出部144は、画像取得部141から供給される撮像画像(自動車110を含む撮像画像)を取得することができる。また、プレート検出部144は、その撮像画像を画像解析し、ナンバープレートの検出を行うことができる。さらに、プレート検出部144は、その検出結果を示す情報と撮像画像とを文字認識部145に供給することができる。
 例えば、プレート検出部144は、図4のAに示されるような撮像画像を取得し、その撮像画像に対して、自動車110のナンバープレートの検出を行う。つまり、自動車110のナンバープレートを含む部分領域161を特定する。
 その検出に成功した場合(部分領域161を特定できた場合)、プレート検出部144は、その検出したナンバープレートを含む部分領域161を撮像画像から切り出す。図4のBに示されるように、ナンバープレートの検出に成功した場合、部分領域161の画像には、自動車110のナンバープレート162の画像が含まれる。
 プレート検出部144は、その部分領域161の画像をプレート検出結果として文字認識部145に供給する。また、プレート検出部144は、処理対象の撮像画像(全体画像)を文字認識部145に供給する。
 文字認識部145は、プレート検出部144が検出したナンバープレートに記載された文字についての文字認識に関する処理を行う。例えば、文字認識部145は、プレート検出部144から供給される自動車110のナンバープレート162の画像(部分領域161の画像)や撮像画像(全体画像)を取得することができる。また、文字認識部145は、プレート検出部144がナンバープレートの検出に成功した場合、検出されたナンバープレートに記載の文字について文字認識を行うことができる。さらに、文字認識部145は、その文字認識結果を示す情報を制御部131(処理判定部142)に供給することができる。また、文字認識部145は、撮像画像(全体画像)や自動車110のナンバープレート162の画像を制御部131(処理判定部142)に供給することができる。さらに、文字認識部145は、文字認識結果を示す情報、撮像画像(全体画像)、および自動車110のナンバープレート162の画像を特徴抽出部146に供給することができる。
 例えば、文字認識部145は、図4のCに示されるように、部分領域161の画像に含まれるナンバープレート162に記載の各文字について文字認識を行う。図4のCの場合、ナンバープレート162に記載された「X」、「Y」、「Z」、「0」、「1」、「2」、「3」の各文字が認識されている。したがって、文字認識部145は、図4のDに示されるように、ナンバープレート162に記載された車両登録番号163(XYZ0123)を認識することができる。
 文字認識部145は、車両登録番号163の認識に成功した場合、その認識した車両登録番号163を示す情報を、文字認識結果を示す情報として、処理判定部142に供給する。また、文字認識部145は、撮像画像(全体画像)や自動車110のナンバープレート162の画像を処理判定部142に供給する。
 車両登録番号163の認識に失敗した場合(例えば、ナンバープレート162に記載の文字の一部または全部についての文字認識を失敗した場合)、文字認識部145は、文字認識に成功した文字を示す情報を、文字認識結果を示す情報として処理判定部142に供給する。例えば、車両登録番号163の内の一部の文字を認識で来た場合、文字認識部145は、その認識できた文字を示す情報を、文字認識結果を示す情報として供給する。全ての文字認識に失敗した場合、文字認識部145は、その旨を示す情報を、文字認識結果を示す情報として供給する。また、文字認識部145は、撮像画像(全体画像)や自動車110のナンバープレート162の画像を処理判定部142に供給する。
 さらに、車両登録番号163の認識に失敗した場合、文字認識部145は、撮像画像(全体画像)を特徴抽出部146に供給する。
 特徴抽出部146は、撮像画像を画像解析し、撮像画像に含まれる自動車110(車両)の特徴(特徴情報とも称する)を抽出する。つまり、特徴抽出部146は、文字認識部145が、ナンバープレートに表記されている車両登録番号の少なくとも一部を認識することができなかった場合、撮像画像から特徴情報を抽出する。この抽出する特徴情報はどのようなものであってもよい。例えば、自動車110の車名、車種、形式、および車色の内の少なくともいずれか1つを特定し、抽出するようにしてもよい。もちろん、これ以外の特徴情報を抽出するようにしてもよい。特徴抽出部146は、抽出した特徴情報を、画像解析結果として処理判定部142に供給する。
 この画像解析部133は、任意の構成を有することができる。例えば、画像解析部133が、上述の各機能ブロックの処理を実現する論理回路により構成されるようにしてもよい。また、画像解析部133が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、各機能ブロックの処理を実現するようにしてもよい。もちろん、画像解析部133が、その両方の構成を有し、各機能ブロックの処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 これらの画像解析(ナンバープレートの検出、文字認識、車両の特徴抽出)の方法は、任意である。例えば、画像解析部133が、学習(所謂機械学習やディープラーニング等)を用いて生成した評価器を用いて、これらの画像解析を行うようにしてもよい。例えば、画像解析部133が、撮像画像(全体画像)、自動車110のナンバープレート162の画像、車両登録番号163を示す情報、車両の特徴を示す情報等を学習データとして所定の計算モデル(例えば、多層ニューラルネットワークに基づいた計算モデル)に入力して学習を行うことで評価器を生成し、その評価器を用いて上述の画像解析を行うようにしてもよい。
 例えば、図5に示されるナンバープレート162-1乃至ナンバープレート162-4のように、ナンバープレート(やそこに記載された文字等)のデザインとして、多様なデザインが認められた国も存在する。そのような場合、上述のような学習結果を用いて画像解析を行うことにより、画像解析部133は、単純な画像の特徴抽出に基づく処理に比べて、より正確に画像解析(ナンバープレートの検出、文字認識、車両特徴抽出等)を行うことができる。
 図3に戻り、ゲート処理部134は、ゲート装置103の制御に関する処理を行う。ゲート処理部134は、機能ブロックとして、認識成功時処理部147、認識失敗時処理部148、および検出失敗時処理部149を有する。
 処理判定部142は、画像解析部133から供給される画像解析結果に応じて、認識成功時処理部147、認識失敗時処理部148、および検出失敗時処理部149の内、いずれの処理部が処理を行うかを制御する。
 認識成功時処理部147は、処理判定部142に制御され、ナンバープレートの検出に成功し、かつ、文字認識に成功した場合に処理を行う。つまり、処理判定部142は、ナンバープレートの検出に成功し、かつ、文字認識に成功した場合に、認識成功時処理部147を制御し、処理を実行させる。
 認識成功時処理部147が行う処理はどのような内容であってもよい。例えば、認識成功時処理部147は、処理判定部142を介して、車両登録番号163を示す情報を取得し、その車両登録番号163を登録車両データベース135に照会する。その車両登録番号163と一致する車両登録番号を含む登録情報が登録車両データベース135に存在する場合、認識成功時処理部147は、ゲート103Aを開かせる制御情報を生成し、それを、処理制御部143を介してゲート装置103に供給する。
 認識失敗時処理部148は、処理判定部142に制御され、ナンバープレートの検出に成功し、かつ、文字認識に失敗した場合に処理を行う。つまり、処理判定部142は、ナンバープレートの検出に成功し、かつ、そのナンバープレートに記載の文字の一部または全部について文字認識に失敗した場合に、認識失敗時処理部148を制御し、処理を実行させる。
 認識失敗時処理部148が行う処理はどのような内容であってもよい。例えば、認識失敗時処理部148は、処理判定部142を介して、認識できた文字を示す情報または全ての文字認識に失敗した旨を示す情報、並びに、自動車110の特徴を示す情報を取得する。また、認識失敗時処理部148は、それらの情報を登録車両データベース135に照会する。それらの情報と一致する情報を含む登録情報が登録車両データベース135に存在する場合、認識失敗時処理部148は、例えば、ゲート開閉の判断を行い、問題なければ、ゲート103Aを開かせる制御情報を生成し、それを、処理制御部143を介してゲート装置103に供給する。ゲート開閉の判断方法は任意である。また、認識失敗時処理部148は、ゲートを開く制御を行う代わりに、その他の任意の処理を行うこともできる。
 検出失敗時処理部149は、処理判定部142に制御され、ナンバープレートの検出に失敗した場合に処理を行う。つまり、処理判定部142は、ナンバープレートの検出に失敗した場合(例えば、自動車110にナンバープレートが設置されていない場合等)に、検出失敗時処理部149を制御し、処理を実行させる。
 検出失敗時処理部149が行う処理はどのような内容であってもよい。例えば、検出失敗時処理部149は、ゲート103Aを開かせない制御情報(または開いているゲート103Aを閉じさせる制御情報)を生成し、それを、処理制御部143を介してゲート装置103に供給する。
 このゲート処理部134は、任意の構成を有することができる。例えば、ゲート処理部134が、上述の各機能ブロックの処理を実現する論理回路により構成されるようにしてもよい。また、ゲート処理部134が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、各機能ブロックの処理を実現するようにしてもよい。もちろん、ゲート処理部134が、その両方の構成を有し、各機能ブロックの処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 実際の環境下では、ナンバープレートを検出できたとしても、様々な要因により、そのナンバープレートに記載の文字についての文字認識に失敗する場合がある。例えば、ナンバープレートの角度、反射光、汚れ等により、文字認識に失敗する場合が考えられる。また、例えば、図6のAに示されるように、ナンバープレート162の表面に、保護や赤外線センサによる検出を抑制するための半透明のプレート165が貼り付けられていることにより、文字認識に失敗する場合が考えられる。
 さらに、例えば、周囲が暗すぎたり、図6のBに示されるように、撮像画像においてナンバープレート162の解像度が低すぎたりして、文字認識に失敗する場合が考えられる。また、例えば、図6のCに示されるように、撮像画像において、そのナンバープレート162に記載の文字にブレが生じていることにより、文字認識に失敗する場合が考えられる。
 さらに、例えば、図6のDに示されるように、ナンバープレート162の前面に何らかの物体166が設置される等して、ナンバープレート162(に記載の文字)の一部または全部が隠れてしまっていることにより、文字認識に失敗する場合が考えられる。もちろん、これらの例以外の要因により文字認識に失敗する場合も考えられる。
 このような場合であっても、従来の方法では、ナンバープレート162の検出に失敗した場合(すなわち、ナンバープレートが設置されていないと判定された場合)と同様に、無条件でゲート103Aが開かれないように(既に開いている場合は閉じるように)、制御された。
 しかしながら、実環境においては、上述のように文字認識に失敗する要因は多く、常に正確に文字認識を成功することは困難であった。そのため、このような方法では、本来通過が可能な自動車110であっても、ゲート103Aが開かれないケースが増大するおそれがあり、システムとしての利便性が低減するおそれがあった。
 そこで、認識失敗時処理部148が、ナンバープレートの検出に成功し、かつ、文字認識に失敗した場合に処理を行う。例えば、ゲート103Aを開いたり、その他の処理を行ったりする。このようにすることにより、より状況に応じた処理を行うことができる。特に、特徴抽出部146が車両の特徴を解析し、認識失敗時処理部148がその解析結果(つまり車両の特徴)に基づいて処理を行うことにより、より状況に応じた処理を行うことができる。
 登録車両データベース135は、車両に関する情報が予め登録されたデータベースであり、例えば記憶部等に形成される。この登録車両データベース135に登録された車両を登録車両と称する。つまり、登録車両データベース135は登録車両に関する情報を記憶するデータベースである。
 例えば、マンションの駐車場の場合、マンションの住人が所有する車両、出入り業者が所有する車両、住人が招待した客が所有する車両(入庫を予約された車両)等に関する情報が登録車両データベース135に登録され得る。
 例えば、企業の駐車場の場合、その企業が所有する車両、その企業の社員が所有する車両、出入り業者が所有する車両、その企業が招待した客が所有する車両(入庫を予約された車両)等に関する情報が登録車両データベース135に登録され得る。
 例えば、スーパーやデパート等の商業施設の駐車場の場合、その商業施設の企業が所有する車両、その従業員が所有する車両、出入り業者等が所有する車両等に関する情報が登録車両データベース135に登録され得る。
 例えば、ホテルの駐車場の場合、ホテルが所有する車両、その従業員が所有する車両、出入り業者が所有する車両等に関する情報が登録車両データベース135に登録され得る。
 登録車両データベース135は、ゲート処理部134(認識成功時処理部147や認識失敗時処理部148)により照会された車両登録番号や車両の特徴等を、各登録車両の情報と比較し、一致または不一致を返す。一致する場合は、その登録車両に関する情報も返す。
  <登録車両データベースの登録情報>
 図7に、登録車両データベース135に登録される情報の例を示す。図7に示される登録情報170は、登録車両に関する情報である。登録情報170は、例えば、所有者情報171、車両登録情報172、車両特徴情報173、およびその他情報174を含み得る。
 所有者情報171は、登録車両の所有者に関する情報である。例えば、その所有者の氏名、住所、連絡先等の情報がこの所有者情報171に含まれ得る。もちろん、所有者情報171は、これら以外の任意の情報を含み得る。
 車両登録情報172は、登録車両に関する、国や自治体等に登録された情報である。例えば、車両登録番号等がこの車両登録情報172に含まれ得る。もちろん、車両登録情報172は、これら以外の任意の情報を含み得る。
 車両特徴情報173は、登録車両の特徴に関する情報である。例えば、車名、車種、形式、車色等の情報がこの車両特徴情報173に含まれ得る。また、登録車両の撮像画像がこの車両特徴情報173に含まれていてもよい。もちろん、車両特徴情報173は、これら以外の任意の情報を含み得る。
 その他情報174は、登録車両に関するその他の情報である。例えば、登録車両が進入可能なエリア等を示す資格情報や、登録車両の駐車等に関する決済に関する情報である決済情報がこのその他情報174に含まれ得る。もちろん、その他情報174は、これら以外の任意の情報を含み得る。
 また、決済情報には、例えば、決済方法を示す情報が含まれていてもよい。また、決済情報には、決済処理(決済が済んでいるか否か)を示す情報が含まれていてもよい。もちろん、決済情報は、その他の任意の情報を含み得る。
  <ゲート装置>
 図8は、本技術を適用した情報処理装置の一態様であるゲート装置103の主な構成の一例を示すブロック図である。図8に示されるように、ゲート装置103は、上述のゲート103Aの他に、例えば、制御部181、通信部182、ゲート開閉部183、および出力部184を有する。
 制御部181は、通信部182、ゲート開閉部183、および出力部184を制御し、ゲートの開閉等に関する処理を行わせる。例えば、制御部181は、通信部182を介して制御装置102から供給される制御情報を取得することができる。また、制御部181は、その制御情報に従ってゲート開閉部183や出力部184を制御することができる。
 この制御部181は、任意の構成を有することができる。例えば、制御部181が、上述の処理を実現する論理回路により構成されるようにしてもよい。また、制御部181が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、上述の処理を実現するようにしてもよい。もちろん、制御部181が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 通信部182は、通信インタフェースを有し、その通信インタフェースを介して他の装と通信を行う。この通信の方式(規格)は任意であり、無線通信であってもよいし、有線通信であってもよいし、その両方であってもよい。例えば、通信部182は、制御装置102と通信を行い、制御装置102から供給される制御情報を取得し、それを制御部181に供給することができる。
 この通信部182は、上述した通信インタフェースに加え、任意の構成を有することができる。例えば、通信部182が、通信インタフェースを用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、通信部182が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、通信インタフェースを用いて上述の処理を実現するようにしてもよい。もちろん、通信部182が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 ゲート開閉部183は、アクチュエータ等を有し、制御部121の制御に従って、ゲート103Aを開閉する。
 このゲート開閉部183は、上述したアクチュエータ等に加え、任意の構成を有することができる。例えば、ゲート開閉部183が、アクチュエータ等を用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、ゲート開閉部183が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、アクチュエータ等を用いて上述の処理を実現するようにしてもよい。もちろん、ゲート開閉部183が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
 出力部184は、例えば、画像等を表示する表示デバイス(例えばモニタ)や音声を出力する音声出力デバイス(例えばスピーカ)を有し、それらのデバイスを用いて画像や音声を出力する。例えば、出力部184は、制御部181に制御されて、自動車110の搭乗者に対するメッセージ等を表示したり音声出力したりすることができる。例えば、出力部184は、そのメッセージとして、進行経路や空車の駐車スペースの案内、清算に関する案内、処理内容の案内等を行うことができる。もちろん、出力部184は、これらの例以外の任意の情報を出力することができる。
 この出力部184は、上述した表示デバイスや音声出力デバイス等に加え、任意の構成を有することができる。例えば、出力部184が、表示デバイスや音声出力デバイス等を用いて上述の処理を実現する論理回路により構成されるようにしてもよい。また、出力部184が、例えばCPU、ROM、RAM等を有し、それらを用いてプログラムを実行することにより、表示デバイスや音声出力デバイス等を用いて上述の処理を実現するようにしてもよい。もちろん、出力部184が、その両方の構成を有し、上述の処理の一部を論理回路により実現し、他を、プログラムを実行することにより実現するようにしてもよい。
  <通行制御処理の流れ>
 以上のような構成の通行制御システム100は、通行制御処理を実行することにより、上述した処理を行う。この通行制御処理の流れの例を、図9のフローチャートを参照して説明する。
 ステップS101において、撮像装置101の撮像部122は、画角内に進入した(ゲート装置103近傍の)自動車110を撮像し、撮像画像を生成する。
 ステップS102において、制御部121は、ステップS101において生成された撮像画像を、通信部123を介して制御装置102に供給する。ステップS111において、制御装置102の画像取得部141は、通信部132を介してその撮像画像を取得し、画像解析部133に供給する。
 ステップS112において、画像解析部133は、その撮像画像について、画像解析処理を行う。この画像解析処理の詳細については後述する。
 画像解析処理が終了すると、ステップS113において、処理判定部142およびゲート処理部134は、制御処理を実行し、ステップS112の解析結果に応じた処理を行う。
 処理制御部143は、この制御処理により生成された制御情報を、通信部132を介してゲート装置103に供給する。ステップS121において、ゲート装置103の制御部181は、通信部182を介してその制御情報を取得する。制御部181は、その制御情報に基づいて、必要に応じてゲート開閉部183や出力部184を制御する。
 ステップS122において、ゲート開閉部183は、その制御に従って、ゲート103Aを開いたり、閉じたりする。また、出力部184は、その制御に従って、画像を表示したり、音声を出力したりする。
  <画像解析処理の流れ>
 次に、図10のフローチャートを参照して、図9のステップS112において実行される画像解析処理の流れの例を説明する。
 ステップS141において、プレート検出部144は、自動車110の撮像画像よりナンバープレートの検出を行う。
 ステップS142において、プレート検出部144は、ナンバープレートの検出に成功したか否かを判定する。成功したと判定された場合、処理はステップS143に進む。
 ステップS143において、文字認識部145は、ステップS141において検出されたナンバープレートに記載の文字について文字認識を行う。
 ステップS144において、文字認識部145は、文字認識を成功したか否かを判定する。ナンバープレートに記載の文字の少なくとも一部について文字認識に失敗したと判定された場合、処理はステップS145に進む。
 ステップS145において、特徴抽出部146は、撮像画像の画像解析を行い、自動車110(車両)について特徴を抽出する。例えば、特徴抽出部146は、撮像画像より自動車110の画像としての特徴を示す部分を抽出し、その部分画像に基づいて、自動車110の特徴(例えば、車名、車種、形式、車色等)を導出する。
 ステップS145の処理が終了すると、画像解析処理が終了する。
 また、ステップS144において、ナンバープレートに記載の全ての文字について文字認識が成功したと判定された場合、つまり、ナンバープレートが検出され、その検出されたナンバープレートに記載の車両登録番号163が認識されたと判定された場合、画像解析処理が終了する。
 また、ステップS142において、ナンバープレートの検出に失敗したと判定された場合、画像解析処理が終了する。
  <制御処理の流れ>
 次に、図9のステップS113において実行される制御処理の流れの例を、図11のフローチャートを参照して説明する。
 ステップS161において、処理判定部142は、画像解析処理(図10)の結果に基づいて、ナンバープレートの検出に成功したか否かを判定する。プレートを検出できたと判定された場合、処理はステップS162に進む。
 ステップS162において、処理判定部142は、画像解析処理(図10)の結果に基づいて、そのナンバープレートに記載の文字を全て認識できたか否かを判定する。そのナンバープレートに記載の全ての文字について文字認識が成功したと判定された場合、処理はステップS163に進む。
 ステップS163において、認識成功時処理部147は、ナンバープレートの検出に成功し、かつ、そのナンバープレートに記載の全ての文字についての文字認識に成功した場合の処理を行う。例えば、認識成功時処理部147は、文字認識結果(認識された登録車両番号)を登録車両データベース135に照会する。文字認識結果と一致する登録車両番号を含む車両登録情報172を有する登録情報が存在する場合、認識成功時処理部147は、ゲート103Aを開くようにゲート装置103を制御する制御情報を生成する。処理制御部143は、その制御情報を、通信部132を介してゲート装置103に供給する。
 つまり、例えば、マンションの駐車場の場合、認識成功時処理部147は、文字認識結果(認識された登録車両番号)を登録車両データベース135に照会することにより、自動車110の所有者が、マンションの住人、出入り業者、または住人が招待した客等であるか否かを判定し、そうである場合、ゲートを開くように制御する。
 また、例えば、企業の駐車場の場合、認識成功時処理部147は、文字認識結果(認識された登録車両番号)を登録車両データベース135に照会することにより、自動車110の所有者が、その企業、その企業の社員、出入り業者、または、その企業が招待した客等であるか否かを判定し、そうである場合、ゲートを開くように制御する。
 また、例えば、スーパーやデパート等の商業施設の駐車場の場合、認識成功時処理部147は、文字認識結果(認識された登録車両番号)を登録車両データベース135に照会することにより、自動車110の所有者が、その商業施設の企業、その従業員、または出入り業者等であるか否かを判定し、そうである場合、ゲートを開くように制御する。
 また、例えば、ホテルの駐車場の場合、認識成功時処理部147は、文字認識結果(認識された登録車両番号)を登録車両データベース135に照会することにより、自動車110の所有者が、そのホテル、その従業員、または出入り業者等であるか否かを判定し、そうである場合、ゲートを開くように制御する。
 ステップS163の処理が終了すると、制御処理が終了する。
 また、ステップS162において、そのナンバープレートに記載の一部または全部の文字について文字認識が失敗したと判定された場合、処理はステップS164に進む。
 ステップS164において、認識失敗時処理部148は、ナンバープレートの検出に成功し、かつ、そのナンバープレートに記載の一部または全ての文字についての文字認識に失敗した場合の処理を行う。例えば、認識失敗時処理部148は、抽出された自動車110の特徴を登録車両データベース135に照会する。照会された自動車110の特徴と一致する情報を含む車両特徴情報173を有する登録情報が存在する場合、認識失敗時処理部148は、所定の方法によりゲート開閉許可を判断し、許可する場合、ステップS163の場合と同様に、ゲート103Aを開くようにゲート装置103を制御する制御情報を生成する。処理制御部143は、その制御情報を、通信部132を介してゲート装置103に供給する。
 なお、この場合、認識失敗時処理部148は、ゲート103Aを開く以外の処理を行うこともできる。例えば、認識失敗時処理部148が、管理人を呼び出して処理させてもよい。また、例えば、認識失敗時処理部148が、自動車110の搭乗者に証明書や社員証等を提示させる等、対処法に関する通知を自動車110の搭乗者に対して行ってもよい。
 さらに、例えば、認識失敗時処理部148が、車両の通行(または駐車)に関する決済処理の実行を制御するようにしてもよい。例えば、認識失敗時処理部148が、抽出された自動車110の特徴を登録車両データベース135に照会し、その紹介結果に基づいて、特徴が一致する登録情報が存在する場合(つまり、自動車110が登録車両であると判定された場合)、決済処理を行わないようにし、特徴が一致しなかった場合、決済処理を行うようにしてもよい。
 また、例えば、認識失敗時処理部148が、車両の通行(または駐車)に関する決済の方法の設定を制御するようにしてもよい。例えば、認識失敗時処理部148が、抽出された自動車110の特徴を登録車両データベース135に照会し、その紹介結果に基づいて、特徴が一致する登録情報が存在する場合(つまり、自動車110が登録車両であると判定された場合)、自動引き落としによる決済処理が行われるように制御し、特徴が一致しなかった場合、その場で現金等による決済処理が行われるように制御してもよい。
 さらに、例えば、認識失敗時処理部148が、登録情報170のその他情報174に含まれる資格情報に応じて、ゲート103Aの開閉許可を判断するようにしてもよい。例えば、その資格情報において、自動車110がゲート103Aの向こう側のエリアに進入可能であると判定された場合、認識失敗時処理部148が、ゲート103Aを開くことを許可するようにしてもよい。つまり、認識失敗時処理部148が、ゲート103Aを開くようにゲート装置103を制御する制御情報を生成してもよい。
 また、例えば、認識失敗時処理部148が、車両の特徴だけでなく、セキュリティレベルにも応じて、ゲート103Aの開閉許可を判断するようにしてもよい。例えば夜間と昼間、平日と休日等のように、日時に応じてセキュリティレベルが変化する場合や、例えば満車か否か、要人が来場しているか否か等のように、状況に応じてセキュリティレベルが変化する場合等が考えられる。より状況に応じた処理を行うことができる。
 認識失敗時処理部148が、このようなセキュリティレベルを考慮し、そのセキュリティレベルに応じてゲート103Aの開閉許可を判断することにより、通行制御システム100は、例えば、同じ自動車110であっても、昼間は通行を許可し、ゲートを開くように制御し、夜間は通行を禁止し、ゲート103Aを開かないように制御するといった、より状況に応じた処理を行うことができる。
 ステップS164の処理が終了すると、制御処理が終了する。
 また、ステップS161において、ナンバープレートの検出に失敗したと判定された場合、処理はステップS165に進む。
 ステップS165において、検出失敗時処理部149は、ナンバープレートの検出に失敗した場合の処理を行う。例えば、検出失敗時処理部149は、ゲート103Aを開かないように(既に開いている場合はゲート103Aを閉じるように)ゲート装置103を制御する制御情報を生成する。処理制御部143は、その制御情報を、通信部132を介してゲート装置103に供給する。
 ステップS164の処理が終了すると、制御処理が終了する。
 以上のように各処理を実行することにより、通行制御システム100は、ナンバープレートの検出に成功し、かつ、そのナンバープレートに記載の一部または全ての文字についての文字認識に失敗した場合においても、例えばゲート103Aを開く等、単にゲート103Aを開かないようにする以外の処理を行うことができ、より状況に応じた処理を行うことができる。
 したがって、従来の場合よりも、本来通過が可能な自動車110を通過させることができ、システムとしての利便性の低減を抑制することができる。
 <2.第2の実施の形態>
  <通行制御システム>
 以上においては、通行制御システム100において、事前に登録される登録車両データベース135が利用される例について説明したが、さらに、逐次情報が更新されるデータベースが利用されるようにしてもよい。
  <制御装置>
 図12は、その場合の、制御装置102の主な構成例を示すブロック図である。図12に示されるように、この場合の制御装置102は、図3に示される構成に加え、さらに通行管理データベース201を有する。
 通行管理データベース201は、ゲート装置103が通行を制御する領域を通行した任意の車両(自動車110)に関する情報を通行履歴情報として登録し、管理するデータベースであり、例えば記憶部等に形成される。
 認識失敗時処理部148は、登録車両データベース135の場合と同様に、認識された車両登録番号や自動車110の特徴等を、この通行管理データベース201に照会する。
 通行管理データベース201は、認識失敗時処理部148により照会された車両登録番号や車両の特徴等を、各登録情報(通行履歴情報)と比較し、一致または不一致を返す。一致する場合は、その登録情報(通行履歴情報)も返す。
 なお、ゲート処理部134は、ゲート装置103が通行を制御する領域を通行した車両(自動車110)に関する情報を、通行管理データベース201に登録する。
  <通行管理データベースの登録情報>
 図13に、通行管理データベース201に登録される情報の例を示す。図13に示される登録情報220は、ゲート装置103が通行を制御する領域を通行した任意の車両(自動車110)に関する情報である。登録情報220は、例えば、時刻情報221、車両登録情報222、車両特徴情報223、所有者情報224、およびその他情報225を含み得る。
 時刻情報221は、通行管理データベース201にその登録情報が登録された時刻(例えば、年、月、日、時、分、秒等)を示す情報である。ゲート装置103が通行を制御する領域を自動車110が通行すると、その自動車110に関する情報が、即時的に通行管理データベース201に登録される。つまり、この時刻情報221は、自動車110が、ゲート装置103が通行を制御する領域を通行した時刻を示す情報でもある。
 車両登録情報222は、車両登録情報172と同様の情報である。この車両登録情報222は、ゲート装置103が通行を制御する領域を通行した自動車110について、車両登録番号等の情報が得られた場合に登録される。
 車両特徴情報223は、車両特徴情報173と同様の情報である。この車両特徴情報223は、ゲート装置103が通行を制御する領域を通行した自動車110の特徴を示す情報であり、特徴抽出部146が撮像画像を画像解析することにより生成される。
 所有者情報224は、所有者情報171と同様の情報である。この所有者情報224は、ゲート装置103が通行を制御する領域を通行した自動車110について、所有者等の情報が得られた場合に登録される。
 その他情報225は、登録車両に関するその他の情報である。例えば、この車両の過去の行動履歴や、この車両に対する過去に行われた処理についての分析結果(例えば、選択した処理が適切であったか否か等)等の情報が含まれ得る。また、その他情報174に含まれ得る情報は、その他情報225にも含まれ得る。
  <制御処理の流れ>
 この場合も通行制御システム100は、基本的に第1の実施の形態の場合と同様の処理を行うが、この場合の制御処理は、例えば以下のような流れで行われる。この場合の制御処理の流れの例を、図14のフローチャートを参照して説明する。
 ステップS201乃至ステップS203、並びに、ステップS205の各処理は、図11のステップS101乃至ステップS103、並びに、ステップS165の各処理と同様に実行される。
 ステップS204において、認識失敗時処理部148は、ナンバープレートの検出に成功し、かつ、そのナンバープレートに記載の一部または全ての文字についての文字認識に失敗した場合の処理を行う。
 この場合、認識失敗時処理部148は、抽出された自動車110の特徴を登録車両データベース135に照会する。また、認識失敗時処理部148は、抽出された自動車110の特徴を通行管理データベース201に照会する。
 認識失敗時処理部148は、それらの照会結果に基づいて、ゲート開閉許可を判断する。例えば、認識失敗時処理部148は、車両の特徴に基づいて登録車両と一致すると判定された自動車110の通行が、過去の通行履歴(例えば入庫・出庫の履歴)と矛盾する場合、通行を禁止し、ゲート103Aが開かれないように制御する。このようにすることにより、特徴が類似する車両であっても、その行動履歴に基づいて識別することができる。したがって、特徴の一致・不一致の判定をより正確に行うことができる。
 なお、通行を許可する場合、認識失敗時処理部148は、ステップS164の場合と同様に、ゲート103Aを開くようにゲート装置103を制御する制御情報を生成する。処理制御部143は、その制御情報を、通信部132を介してゲート装置103に供給する。
 なお、この場合も、認識失敗時処理部148は、第1の実施の形態の場合と同様に、ゲート103Aを開く以外の処理を行うこともできる。
 ステップS203の処理が終了すると、処理はステップS206に進む。ステップS204の処理が終了すると、処理はステップS206に進む。ステップS205の処理が終了すると、処理はステップS206に進む。
 ステップS206において、ゲート処理部134(認識成功時処理部147、認識失敗時処理部148、または検出失敗時処理部149)は、ゲート装置103が通行を制御する領域を通行した車両(自動車110)に関する情報を、通行管理データベース201に登録する。
 ステップS206の処理が終了すると、制御処理が終了する。
 以上のように、通行管理データベース201を用いて、各処理を実行することにより、通行制御システム100は、より状況に応じた処理を行うことができる。
 <3.第3の実施の形態>
  <その他の構成>
 以上においては、ゲート装置103が出力部184を有し、自動車110の搭乗者に対する通知を行うように説明したが、この通知は、例えば図15に示されるように、自動車110の車載装置(例えば、カーオーディオやカーナビゲーションシステムの端末装置等)において行うようにしてもよい。
 その場合、制御装置102が、通知に関する情報を、ゲート装置103に供給する代わりに、その車載装置に供給し、画像や音声等として出力させる。このようにすることにより、通知対象の自動車110に対してより明確に通知を行うことができる。
 また、図15に示されるように、自動車110の搭乗者301が所有する端末装置311においてその通知を行うようにしてもよい。
 その場合、制御装置102が、通知に関する情報を、ゲート装置103に供給する代わりに、その端末装置311に供給し、画像や音声等として出力させる。このようにすることにより、通知対象の搭乗者301に対してより明確に通知を行うことができる。
  <機械式駐車場制御システム>
 以上においては、ゲート装置103を制御するシステムについて説明したが、制御対象は、ゲート装置103以外であってもよい。例えば、駐車スペースが可変な機械式駐車装置を制御対象としてもよい。
 図16に示される機械式駐車場制御システム400は、上述の通行制御システム100の場合と同様の方法により、機械式駐車装置410を制御するシステムである。
 つまり、制御装置102は、撮像装置101において撮像された自動車110の撮像画像に対して、ナンバープレートの検出、文字認識、および特徴抽出等の画像解析を行い、その処理結果に応じて、機械式駐車装置410を駆動させる。
 例えば、所定の位置についた自動車110が、登録車両データベース135の登録車両であると判定された場合、制御装置102は、その自動車110の駐車スペースに駐車できるような状態に機械式駐車装置410を駆動させる。
 このような制御処理において、制御装置102の認識失敗時処理部148は、ナンバープレートの検出に成功し、そのナンバープレートに記載の一部または全ての文字について文字認識に失敗した場合に対応する処理を行う。この処理の内容は、制御対象が機械式駐車装置410であること以外、通行制御システム100の場合と同様である。
 このようにすることにより、機械式駐車場制御システム400は、より状況に応じて機械式駐車装置410を制御することができる。
  <誘導制御システム>
 また、例えば、自動車110を誘導する誘導システムを制御対象としてもよい。図17に示される誘導制御システム500は、上述の通行制御システム100の場合と同様の方法により、自動車110を誘導する誘導システム510を制御するシステムである。
 図15に示されるように、誘導システム510は、制御装置511の他に、状況に応じて赤、青(緑)、黄等の色を点灯する交通信号機512、矢印等の進路を示す表示を行う進路表示装置513、進路に関する案内メッセージ等の画像を表示する案内表示装置514、進路に関する音声を出力する所謂スピーカ等の音声出力装置515等の被制御装置を備える。これらの被制御装置は、制御装置511により制御されて駆動する。
 制御装置102は、制御装置511を制御することにより、これらの被制御装置を駆動させ、自動車110を所望の場所に誘導させる。制御装置102は、このような制御を、通行制御システム100の場合と同様に行う。
 例えば、制御装置102の認識失敗時処理部148は、ナンバープレートの検出に成功し、そのナンバープレートに記載の一部または全ての文字について文字認識に失敗した場合に対応する処理を行う。この処理の内容は、制御対象が誘導システム510であること以外、通行制御システム100の場合と同様である。
 このようにすることにより、誘導制御システム500は、より状況に応じて誘導システム510を制御することができる。
  <通知制御システム>
 また、例えば、自動車110の搭乗者に対して通知を行う通知システムを制御対象としてもよい。図18に示される通知制御システム600は、上述の通行制御システム100の場合と同様の方法により、自動車110の搭乗者に対する通知を行う通知システム610を制御するシステムである。
 通知システム610は、自動車110の搭乗者に対して、例えば、商品やイベントの案内等、任意の情報の通知を行うシステムである。図18に示されるように、通知システム610は、制御装置611の他に、メッセージ等の画像を表示する表示装置612や、通知に関する音声を出力する所謂スピーカ等の音声出力装置613等の被制御装置を備える。これらの被制御装置は、制御装置611により制御されて駆動する。
 制御装置102は、制御装置611を制御することにより、これらの被制御装置を駆動させ、自動車110の搭乗者に対する通知を行わせる。制御装置102は、このような制御を、通行制御システム100の場合と同様に行う。
 例えば、制御装置102の認識失敗時処理部148は、ナンバープレートの検出に成功し、そのナンバープレートに記載の一部または全ての文字について文字認識に失敗した場合に対応する処理を行う。この処理の内容は、制御対象が通知システム610であること以外、通行制御システム100の場合と同様である。
 このようにすることにより、通知制御システム600は、より状況に応じて通知システム610を制御することができる。
 もちろん、制御装置102の制御対象は任意であり、上述の例に限定されない。
 <4.付記>
  <コンピュータ>
 上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここでコンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータ等が含まれる。
 図19は、上述した一連の処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。
 図19に示されるコンピュータ900において、CPU(Central Processing Unit)901、ROM(Read Only Memory)902、RAM(Random Access Memory)903は、バス904を介して相互に接続されている。
 バス904にはまた、入出力インタフェース910も接続されている。入出力インタフェース910には、入力部911、出力部912、記憶部913、通信部914、およびドライブ915が接続されている。
 入力部911は、例えば、キーボード、マウス、マイクロホン、タッチパネル、入力端子などよりなる。出力部912は、例えば、ディスプレイ、スピーカ、出力端子などよりなる。記憶部913は、例えば、ハードディスク、RAMディスク、不揮発性のメモリなどよりなる。通信部914は、例えば、ネットワークインタフェースよりなる。ドライブ915は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブル記録媒体921を駆動する。
 以上のように構成されるコンピュータでは、CPU901が、例えば、記憶部913に記憶されているプログラムを、入出力インタフェース910およびバス904を介して、RAM903にロードして実行することにより、上述した一連の処理が行われる。RAM903にはまた、CPU901が各種の処理を実行する上において必要なデータなども適宜記憶される。
 コンピュータが実行するプログラムは、例えば、パッケージメディア等としてのリムーバブル記録媒体921に記録して適用することができる。その場合、プログラムは、リムーバブル記録媒体921をドライブ915に装着することにより、入出力インタフェース910を介して、記憶部913にインストールすることができる。
 また、このプログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することもできる。その場合、プログラムは、通信部914で受信し、記憶部913にインストールすることができる。
 その他、このプログラムは、ROM902や記憶部913に、あらかじめインストールしておくこともできる。
  <本技術の適用対象>
 また、本技術は、任意の構成に適用することができる。例えば、本技術は、システムLSI(Large Scale Integration)等としてのプロセッサ(例えばビデオプロセッサ)、複数のプロセッサ等を用いるモジュール(例えばビデオモジュール)、複数のモジュール等を用いるユニット(例えばビデオユニット)、または、ユニットにさらにその他の機能を付加したセット(例えばビデオセット)等、装置の一部の構成として実施することもできる。
 また、例えば、本技術は、複数の装置により構成されるネットワークシステムにも適用することもできる。例えば、本技術を、ネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングとして実施するようにしてもよい。例えば、コンピュータ、AV(Audio Visual)機器、携帯型情報処理端末、IoT(Internet of Things)デバイス等の任意の端末に対して、画像(動画像)に関するサービスを提供するクラウドサービスにおいて本技術を実施するようにしてもよい。
 なお、本明細書において、システムとは、複数の構成要素(装置、モジュール(部品)等)の集合を意味し、全ての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、および、1つの筐体の中に複数のモジュールが収納されている1つの装置は、いずれも、システムである。
  <その他>
 本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
 例えば、1つの装置(または処理部)として説明した構成を分割し、複数の装置(または処理部)として構成するようにしてもよい。逆に、以上において複数の装置(または処理部)として説明した構成をまとめて1つの装置(または処理部)として構成されるようにしてもよい。また、各装置(または各処理部)の構成に上述した以外の構成を付加するようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置(または処理部)の構成の一部を他の装置(または他の処理部)の構成に含めるようにしてもよい。
 また、例えば、上述したプログラムは、任意の装置において実行されるようにしてもよい。その場合、その装置が、必要な機能(機能ブロック等)を有し、必要な情報を得ることができるようにすればよい。
 例えば、通行制御システム100(図1および図15)において、撮像装置101が、制御装置102が備える機能の一部または全部を備えるようにしてもよい。例えば、撮像装置101が、画像解析部133が有する機能の一部または全部を備えるようにしてもよい。
 例えば、撮像装置101が、撮像画像に対してナンバープレートの検出を行うようにしてもよい。そして、撮像装置101が、ナンバープレートを検出することができた場合、撮像画像からその検出したナンバープレートを含む部分領域を切り出し、その切り出した部分領域の画像を制御装置102へ送信するようにしてもよい。
 その場合、撮像装置101の制御部121は、プレート検出部144を備える。プレート検出部144は、図3等の例の場合と同様に、撮像画像についてナンバープレートの検出を行う。
 ナンバープレートを検出することができた(ナンバープレートの検出に成功した)場合、プレート検出部144は、撮像画像からその検出したナンバープレートを含む部分領域を切り出し、その切り出した部分領域の画像を通信部123に供給し、制御装置102へ送信させる。通信部123は、プレート検出部144から供給された部分領域の画像を、制御装置102へ送信する。
 制御装置102の通信部132は、その撮像装置101から供給される部分領域の画像を受信する。画像取得部141は、その通信部132が受信した部分領域の画像を取得する。画像取得部141は、その部分領域の画像を文字認識部145へ供給する。文字認識部145は、その供給された部分領域の画像に含まれるナンバープレートに表記されている文字について文字認識を行う。ナンバープレートに表記されている文字の認識が十分である(文字認識に成功した)場合、処理判定部142は、認識成功時処理部147に、その文字認識結果(車両登録番号等)を用いた処理を実行させる。
 また、上述の文字認識において、ナンバープレートに表記されている文字の認識が不十分である(文字認識に失敗した)場合、撮像装置101の制御部121は、撮像画像(車両を含む画像)を、通信部123に供給し、制御装置102へ送信させる。通信部123は、その撮像画像を制御装置102へ送信する。制御装置102の通信部132は、その撮像装置101から供給される撮像画像を受信する。画像取得部141は、その通信部132が受信した撮像画像を取得する。画像取得部141は、その撮像画像を特徴抽出部146へ供給する。特徴抽出部146は、その撮像画像に含まれる車両の特徴情報を抽出する。処理判定部142は、認識失敗時処理部148に、その特徴情報を用いた処理を実行させる。
 また、上述のナンバープレートの検出において、ナンバープレートを検出することができなかった(ナンバープレートの検出に失敗した)場合、プレート検出部144は、その旨を示す制御情報を通信部123に供給し、制御装置102へ送信させる。通信部123は、その制御情報を制御装置102へ送信する。制御装置102の通信部132は、その撮像装置101から供給される制御情報を受信する。処理判定部142は、その制御情報を通信部132から取得する。処理判定部142は、取得した制御情報に基づいて、検出失敗時処理部149に処理を実行させる。
 このようにすることにより、ナンバープレートの検出処理を撮像装置101において行うことができる。
 また、例えば、撮像装置101が、生成した撮像画像に対して、ナンバープレートの検出および文字認識を行うようにしてもよい。
 その場合、撮像装置101の制御部121は、プレート検出部144および文字認識部145を備える。プレート検出部144は、図3等の例の場合と同様に、撮像画像においてナンバープレートの検出を行う。文字認識部145は、図3等の例の場合と同様に、ナンバープレートを含む部分領域の画像を用いてナンバープレートに表記されている文字の認識を行う。
 ナンバープレートを検出することができ(ナンバープレートの検出に成功し)、かつ、そのナンバープレートに表記されている文字の認識が十分である(文字認識に成功した)場合、文字認識部145は、その結果を示すテキスト情報(例えば認識した車両登録番号等)を通信部123に供給する。通信部123は、そのテキスト情報を制御装置102へ送信する。制御装置102の通信部132は、そのテキスト情報を受信する。処理判定部142は、通信部132からこのテキスト情報を取得する。処理判定部142は、認識成功時処理部147に、そのテキスト情報(車両登録番号等)を用いた処理を実行させる。
 また、ナンバープレートを検出することができ(ナンバープレートの検出に成功し)、かつ、そのナンバープレートに表記されている文字の認識が不十分である(文字認識に失敗した)場合、制御部121は、撮像画像(車両を含む画像)を、通信部123に供給し、制御装置102へ送信させる。通信部123は、その撮像画像を制御装置102へ送信する。制御装置102の通信部132は、その撮像装置101から送信された撮像画像を受信する。画像取得部141は、その通信部132が受信した撮像画像を取得する。画像取得部141は、その撮像画像を特徴抽出部146へ供給する。特徴抽出部146は、その撮像画像に含まれる車両の特徴情報を抽出する。処理判定部142は、認識失敗時処理部148に、その特徴情報を用いた処理を実行させる。
 なお、この場合、制御装置102において再度文字認識が行われるようにしてもよい。例えば、プレート検出部144は、撮像画像からその検出したナンバープレートを含む部分領域を切り出し、その切り出した部分領域の画像を通信部123に供給し、制御装置102へ送信させる。通信部123は、プレート検出部144から供給された部分領域の画像を、制御装置102へ送信する。制御装置102の通信部132は、その部分領域の画像を受信する。画像取得部141は、その部分領域の画像を通信部132から取得し、文字認識部145に供給する。文字認識部145は、その供給された部分領域の画像に含まれるナンバープレートに表記されている文字について文字認識を行う。ナンバープレートに表記されている文字の認識が十分である(文字認識に成功した)場合、処理判定部142は、認識成功時処理部147に、その文字認識結果(車両登録番号等)を用いた処理を実行させる。
 また、上述の文字認識において、ナンバープレートに表記されている文字の認識が不十分である(文字認識に失敗した)場合、撮像装置101の制御部121は、撮像画像(車両を含む画像)を、通信部123に供給し、制御装置102へ送信させる。通信部123は、その撮像画像を制御装置102へ送信する。制御装置102の通信部132は、その撮像装置101から供給される撮像画像を受信する。画像取得部141は、その通信部132が受信した撮像画像を取得する。画像取得部141は、その撮像画像を特徴抽出部146へ供給する。特徴抽出部146は、その撮像画像に含まれる車両の特徴情報を抽出する。処理判定部142は、認識失敗時処理部148に、その特徴情報を用いた処理を実行させる。
 また、上述のナンバープレートの検出において、ナンバープレートを検出することができなかった(ナンバープレートの検出に失敗した)場合、プレート検出部144は、その旨を示す制御情報を通信部123に供給し、制御装置102へ送信させる。通信部123は、その制御情報を制御装置102へ送信する。制御装置102の通信部132は、その撮像装置101から送信された制御情報を受信する。処理判定部142は、その制御情報を通信部132から取得する。処理判定部142は、取得した制御情報に基づいて、検出失敗時処理部149に処理を実行させる。
 このようにすることにより、ナンバープレートの検出処理、および、ナンバープレートに表記されている文字の認識を、撮像装置101において行うことができる。
 さらに、例えば、撮像装置101が、生成した撮像画像に対して、ナンバープレートの検出、文字認識、および特徴抽出を行うようにしてもよい。その場合、撮像装置101の制御部121は、画像解析部133(プレート検出部144、文字認識部145、および特徴抽出部146)を備える。
 プレート検出部144は、図3等の例の場合と同様に、撮像画像においてナンバープレートの検出を行う。文字認識部145は、図3等の例の場合と同様に、ナンバープレートを含む部分領域の画像を用いてナンバープレートに表記されている文字の認識を行う。特徴抽出部146は、図3等の例の場合と同様に、撮像画像から車両の特徴を抽出する。
 例えば、ナンバープレートを検出し、さらに、そのナンバープレートに表記されている文字の認識が十分である(文字認識に成功した)場合、撮像装置101の通信部123は、その結果を示すテキスト情報(例えば認識した車両登録番号等)を制御装置102へ送信する。制御装置102の処理判定部142は、認識成功時処理部147に、このテキスト情報(車両登録番号等)を用いた処理を実行させる。
 また、ナンバープレートを検出することができ(ナンバープレートの検出に成功し)、かつ、そのナンバープレートに表記されている文字の認識が不十分である(文字認識に失敗した)場合、特徴抽出部146は、その撮像画像から車両の特徴情報を抽出する。特徴抽出部146は、その特徴情報を通信部123に供給し、撮像装置101へ送信させる。通信部123は、その特徴情報を撮像装置へ送信する。制御装置102の通信部132は、その撮像装置101から送信された特徴情報を受信する。処理判定部142は、認識失敗時処理部148に、その特徴情報を用いた処理を実行させる。
 また、上述のナンバープレートの検出において、ナンバープレートを検出することができなかった(ナンバープレートの検出に失敗した)場合、プレート検出部144は、その旨を示す制御情報を通信部123に供給し、制御装置102へ送信させる。通信部123は、その制御情報を制御装置102へ送信する。制御装置102の通信部132は、その撮像装置101から送信された制御情報を受信する。処理判定部142は、その制御情報を通信部132から取得する。処理判定部142は、取得した制御情報に基づいて、検出失敗時処理部149に処理を実行させる。
 このようにすることにより、ナンバープレートの検出処理、ナンバープレートに表記されている文字の認識、および車両の特徴情報の抽出を、撮像装置101において行うことができる。
 また、例えば、1つのフローチャートの各ステップを、1つの装置が実行するようにしてもよいし、複数の装置が分担して実行するようにしてもよい。さらに、1つのステップに複数の処理が含まれる場合、その複数の処理を、1つの装置が実行するようにしてもよいし、複数の装置が分担して実行するようにしてもよい。換言するに、1つのステップに含まれる複数の処理を、複数のステップの処理として実行することもできる。逆に、複数のステップとして説明した処理を1つのステップとしてまとめて実行することもできる。
 また、例えば、コンピュータが実行するプログラムは、プログラムを記述するステップの処理が、本明細書で説明する順序に沿って時系列に実行されるようにしても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで個別に実行されるようにしても良い。つまり、矛盾が生じない限り、各ステップの処理が上述した順序と異なる順序で実行されるようにしてもよい。さらに、このプログラムを記述するステップの処理が、他のプログラムの処理と並列に実行されるようにしても良いし、他のプログラムの処理と組み合わせて実行されるようにしても良い。
 また、例えば、本技術に関する複数の技術は、矛盾が生じない限り、それぞれ独立に単体で実施することができる。もちろん、任意の複数の本技術を併用して実施することもできる。例えば、いずれかの実施の形態において説明した本技術の一部または全部を、他の実施の形態において説明した本技術の一部または全部と組み合わせて実施することもできる。また、上述した任意の本技術の一部または全部を、上述していない他の技術と併用して実施することもできる。
 なお、本技術は以下のような構成も取ることができる。
 (1) 撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出する特徴抽出部と、
 前記特徴抽出部により抽出された前記車両の特徴情報に応じた処理を行う処理実行部と
 を備える情報処理装置。
 (2) 前記特徴抽出部は、前記認識結果として、前記ナンバープレートの車両登録番号の少なくとも一部を認識できなかった場合、前記撮像画像から前記特徴情報を抽出する
 (1)に記載の情報処理装置。
 (3) 前記特徴抽出部は、前記特徴情報として、前記車両の車名、車種、形式、および車色の内の少なくともいずれか1つを特定する
 (1)に記載の情報処理装置。
 (4) 前記処理実行部は、前記特徴情報を、登録車両の特徴を予め登録している登録車両データベースに照会し、照会結果に応じた処理を行う
 (1)に記載の情報処理装置。
 (5) 前記登録車両データベースには、前記登録車両の資格情報が登録されており、
 前記処理実行部は、前記特徴情報に対応する前記登録車両の前記資格情報に応じた処理を行う
 (4)に記載の情報処理装置。
 (6) 前記処理実行部は、前記特徴情報を、所定の場所を通行した車両に関する通行履歴情報を管理する通行管理データベースに照会し、照会結果に応じた処理を行う
 (1)に記載の情報処理装置。
 (7) 前記処理実行部は、ゲートの開閉の制御に関する処理を、前記特徴情報に応じて行う
 (1)に記載の情報処理装置。
 (8) 前記処理実行部は、さらに決済処理の実行を、前記特徴情報に応じて制御する
 (7)に記載の情報処理装置。
 (9) 前記処理実行部は、さらに決済方法の設定を、前記特徴情報に応じて制御する
 (7)に記載の情報処理装置。
 (10) 前記ゲートを開閉するゲート開閉部をさらに備え、
 前記処理実行部は、前記ゲート開閉部の制御を、前記特徴情報に応じて行う
 (7)に記載の情報処理装置。
 (11) 前記処理実行部は、機械式駐車装置の制御に関する処理を、前記特徴情報に応じて行う
 (1)に記載の情報処理装置。
 (12) 前記処理実行部は、車両の誘導を行う誘導システムの制御に関する処理を、前記特徴情報に応じて行う
 (1)に記載の情報処理装置。
 (13) 前記処理実行部は、車両の搭乗者に対する通知を行う通知システムの制御に関する処理を、前記特徴情報に応じて行う
 (1)に記載の情報処理装置。
 (14) 前記車両のナンバープレートに表記された文字を認識する文字認識部をさらに備える
 (1)に記載の情報処理装置。
 (15) 前記撮像画像から前記ナンバープレートの検出を行うプレート検出部をさらに備える
 (1)に記載の情報処理装置。
 (16) 前記撮像画像から前記ナンバープレートの検出がされた場合に、前記ナンバープレ―トに表記された文字を認識する文字認識部をさらに備える
 (15)に記載の情報処理装置。
 (17) 車両を撮像し、前記撮像画像を生成する撮像部をさらに備える
 (1)に記載の情報処理装置。
 (18) 通信を行う通信部をさらに備え、
 前記処理実行部は、前記通信部を介して、他の装置の制御に関する処理を、前記特徴情報に応じて行う
 (1)に記載の情報処理装置。
 (19) 撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出し、
 抽出された前記車両の特徴情報に応じた処理を行う
 情報処理方法。
 (20) コンピュータを、
 撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出する特徴抽出部と、
 前記特徴抽出部により抽出された前記車両の特徴情報に応じた処理を行う処理実行部
 として機能させるプログラム。
 100 通行制御システム, 101 撮像装置, 102 制御装置, 103 ゲート装置, 110 自動車, 121 制御部, 122 撮像部, 123 通信部, 124 駆動部, 131 制御部, 132 通信部, 133 画像解析部, 134 ゲート処理部, 135 登録車両データベース, 141 画像取得部, 142 処理判定部, 143 処理制御部, 144 プレート検出部, 145 文字認識部, 146 特徴抽出部, 147 認識成功時処理部, 148 認識失敗時処理部, 149 検出失敗時処理部, 170 登録情報, 171 所有者情報, 172 車両登録情報, 173 車両特徴情報, 174 その他情報, 181 制御部, 182 通信部, 183 ゲート開閉部, 184 出力部, 201 通行管理データベース, 220 登録情報, 221 時刻情報, 222 車両登録情報, 223 車両特徴情報, 224 所有者情報, 225 その他情報, 301 搭乗者, 311 端末装置, 400 機械式駐車場制御システム, 410 機械式駐車装置, 500 誘導制御システム, 510 誘導システム, 511 制御装置, 512 交通信号機, 513 進路表示装置、 514 案内表示装置, 515 音声出力装置, 600 通知制御システム, 610 通知システム, 611 制御装置, 612 表示装置, 613 音声出力装置

Claims (20)

  1.  撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出する特徴抽出部と、
     前記特徴抽出部により抽出された前記車両の特徴情報に応じた処理を行う処理実行部と
     を備える情報処理装置。
  2.  前記特徴抽出部は、前記認識結果として、前記ナンバープレートの車両登録番号の少なくとも一部を認識できなかった場合、前記撮像画像から前記特徴情報を抽出する
     請求項1に記載の情報処理装置。
  3.  前記特徴抽出部は、前記特徴情報として、前記車両の車名、車種、形式、および車色の内の少なくともいずれか1つを特定する
     請求項1に記載の情報処理装置。
  4.  前記処理実行部は、前記特徴情報を、登録車両の特徴を予め登録している登録車両データベースに照会し、照会結果に応じた処理を行う
     請求項1に記載の情報処理装置。
  5.  前記登録車両データベースには、前記登録車両の資格情報が登録されており、
     前記処理実行部は、前記特徴情報に対応する前記登録車両の前記資格情報に応じた処理を行う
     請求項4に記載の情報処理装置。
  6.  前記処理実行部は、前記特徴情報を、所定の場所を通行した車両に関する通行履歴情報を管理する通行管理データベースに照会し、照会結果に応じた処理を行う
     請求項1に記載の情報処理装置。
  7.  前記処理実行部は、ゲートの開閉の制御に関する処理を、前記特徴情報に応じて行う
     請求項1に記載の情報処理装置。
  8.  前記処理実行部は、さらに決済処理の実行を、前記特徴情報に応じて制御する
     請求項7に記載の情報処理装置。
  9.  前記処理実行部は、さらに決済方法の設定を、前記特徴情報に応じて制御する
     請求項7に記載の情報処理装置。
  10.  前記ゲートを開閉するゲート開閉部をさらに備え、
     前記処理実行部は、前記ゲート開閉部の制御を、前記特徴情報に応じて行う
     請求項7に記載の情報処理装置。
  11.  前記処理実行部は、機械式駐車装置の制御に関する処理を、前記特徴情報に応じて行う
     請求項1に記載の情報処理装置。
  12.  前記処理実行部は、車両の誘導を行う誘導システムの制御に関する処理を、前記特徴情報に応じて行う
     請求項1に記載の情報処理装置。
  13.  前記処理実行部は、車両の搭乗者に対する通知を行う通知システムの制御に関する処理を、前記特徴情報に応じて行う
     請求項1に記載の情報処理装置。
  14.  前記車両のナンバープレートに表記された文字を認識する文字認識部をさらに備える
     請求項1に記載の情報処理装置。
  15.  前記撮像画像から前記ナンバープレートの検出を行うプレート検出部をさらに備える
     請求項1に記載の情報処理装置。
  16.  前記撮像画像から前記ナンバープレートの検出がされた場合に、前記ナンバープレートに表記された文字を認識する文字認識部をさらに備える
     請求項15に記載の情報処理装置。
  17.  車両を撮像し、前記撮像画像を生成する撮像部をさらに備える
     請求項1に記載の情報処理装置。
  18.  通信を行う通信部をさらに備え、
     前記処理実行部は、前記通信部を介して、他の装置の制御に関する処理を、前記特徴情報に応じて行う
     請求項1に記載の情報処理装置。
  19.  撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出し、
     抽出された前記車両の特徴情報に応じた処理を行う
     情報処理方法。
  20.  コンピュータを、
     撮像画像における車両のナンバープレートに対する認識結果に基づいて、前記撮像画像から前記車両の特徴情報を抽出する特徴抽出部と、
     前記特徴抽出部により抽出された前記車両の特徴情報に応じた処理を行う処理実行部
     として機能させるプログラム。
PCT/JP2020/037529 2019-10-16 2020-10-02 情報処理装置および方法、並びに、プログラム WO2021075278A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/754,611 US20220371512A1 (en) 2019-10-16 2020-10-02 Information processing device and method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019189082 2019-10-16
JP2019-189082 2019-10-16

Publications (1)

Publication Number Publication Date
WO2021075278A1 true WO2021075278A1 (ja) 2021-04-22

Family

ID=75537971

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/037529 WO2021075278A1 (ja) 2019-10-16 2020-10-02 情報処理装置および方法、並びに、プログラム

Country Status (2)

Country Link
US (1) US20220371512A1 (ja)
WO (1) WO2021075278A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220108474A1 (en) * 2020-10-05 2022-04-07 Pied Parker, Inc. Dynamic image-based parking management systems and methods of operation thereof
WO2024123322A1 (en) * 2022-12-06 2024-06-13 Metropolis Technologies, Inc. Machine learning and computer vision solutions to seamless vehicle identification and environmental tracking therefor

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004206441A (ja) * 2002-12-25 2004-07-22 Mitsubishi Electric Corp ナンバープレート読み取り装置
JP2012003493A (ja) * 2010-06-16 2012-01-05 Fujitsu Ltd 監視装置、監視システム及び監視方法
JP2012208833A (ja) * 2011-03-30 2012-10-25 Amano Corp 駐車スペース誘導システム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6477140B2 (ja) * 2015-03-27 2019-03-06 富士通株式会社 車両認識装置、車両認識システム、車両認識プログラム、及び車両認識方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004206441A (ja) * 2002-12-25 2004-07-22 Mitsubishi Electric Corp ナンバープレート読み取り装置
JP2012003493A (ja) * 2010-06-16 2012-01-05 Fujitsu Ltd 監視装置、監視システム及び監視方法
JP2012208833A (ja) * 2011-03-30 2012-10-25 Amano Corp 駐車スペース誘導システム

Also Published As

Publication number Publication date
US20220371512A1 (en) 2022-11-24

Similar Documents

Publication Publication Date Title
US10145071B2 (en) Vehicle barrier system
Logeshwaran et al. SBML algorithm for intelligent fuel filling (IFF) and smart vehicle identification system (SVIS)
US8502698B2 (en) Parking lot management system
US10037690B2 (en) Method and system for access control
KR101888390B1 (ko) 클라우드 기반의 무인 주차 관리 시스템 및 방법
JP7186818B2 (ja) 情報処理装置、情報処理方法、プログラム、及び情報処理システム
WO2021075278A1 (ja) 情報処理装置および方法、並びに、プログラム
KR101400765B1 (ko) 음성인식 주차관리시스템
KR20200109154A (ko) 이미지 인식 장치를 이용한 주차면 관리 시스템
KR20210048132A (ko) 인공지능 기반 영상분석을 통한 차량인식기를 구비한 주차 차단기 및 그 구성 방법
JP5324185B2 (ja) 駐車場管理システム
KR20090021859A (ko) 주차 유도 관리 시스템 및 그 방법
KR100768465B1 (ko) 차량의 출입관리방법
JP2017004132A (ja) 料金収受設備、料金収受方法及びプログラム
KR101881321B1 (ko) 다중 이진화 영상인식 기반 주차위치확인 및 주차유도 관제시스템
KR100397302B1 (ko) 주차장의 입출고 차량 관리시스템
KR20240028777A (ko) 주차장 내의 전기차 주차와 충전소 관리 시스템 및 방법
KR102528989B1 (ko) 지능형 주차 관제 시스템 및 그 방법
JP5613299B2 (ja) 駐車場管理システム
KR102562860B1 (ko) 차량정보와 생체정보를 융합한 주차관제시스템
WO2023119504A1 (ja) 駐車場管理システム、駐車場管理方法、及び、駐車場管理プログラムが格納された非一時的なコンピュータ可読媒体
JPH11312260A (ja) 無人駐車場管理システム
KR102677706B1 (ko) 인공지능과 메타버스를 이용한 지능형 주차장 관제 시스템 및 그 방법
Shah et al. Cloud-Based smart parking system with ALPR algorithm and APP integration
KR20220168521A (ko) 주거지용 주차 관리 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20877397

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20877397

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP