WO2021186712A1 - 捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体 - Google Patents

捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体 Download PDF

Info

Publication number
WO2021186712A1
WO2021186712A1 PCT/JP2020/012441 JP2020012441W WO2021186712A1 WO 2021186712 A1 WO2021186712 A1 WO 2021186712A1 JP 2020012441 W JP2020012441 W JP 2020012441W WO 2021186712 A1 WO2021186712 A1 WO 2021186712A1
Authority
WO
WIPO (PCT)
Prior art keywords
fingerprint
person
image
information providing
search
Prior art date
Application number
PCT/JP2020/012441
Other languages
English (en)
French (fr)
Inventor
和希 世古
健史 小島
片岡 誠
稔郎 山本
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US17/802,391 priority Critical patent/US11900714B2/en
Priority to PCT/JP2020/012441 priority patent/WO2021186712A1/ja
Priority to JP2022507997A priority patent/JP7375912B2/ja
Publication of WO2021186712A1 publication Critical patent/WO2021186712A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1318Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B23/00Component parts of escalators or moving walkways
    • B66B23/22Balustrades
    • B66B23/24Handrails
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B31/00Accessories for escalators, or moving walkways, e.g. for sterilising or cleaning
    • B66B31/02Accessories for escalators, or moving walkways, e.g. for sterilising or cleaning for handrails
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification

Definitions

  • the present invention relates to a technique for providing information effective for searching for a person.
  • Patent Document 1 discloses a technique for detecting a wanted criminal by using face data of a person photographed by a camera that photographs the inside of an elevator car or the entrance / exit of a car on the floor where the car stops. Has been done.
  • the biometric information of the occupants is read by a biometric information sensor installed in the circulation type transport device for transporting the occupants, and the read biometric information is used to provide the biometric information at the entrance of a building or the like.
  • a technique for controlling the opening and closing of a gate is disclosed.
  • the search target person passes within the shooting range of the surveillance camera, if the passaged part is a blind spot of the surveillance camera such as a shadow of a pillar, the search target person is reflected in the image of the surveillance camera. There is a problem that there is no.
  • a main object of the present invention is to provide a technique capable of presenting information that is different from the image of a surveillance camera and is effective for searching for a person.
  • the search information providing device is, as one form thereof.
  • a forward portion that assists the person while moving along with the movement of the transport member that transports the person by moving from the entrance to the exit, and a return portion that moves in the direction from the outlet toward the entrance.
  • a collation unit that collates the fingerprint image of the person in the photographed image of the fingerprint mark of the person on the handrail member that circulates in the circulation path with the fingerprint image of the search target person given in advance.
  • the search information providing system is, as one form thereof.
  • the handrail member is provided with a fingerprint photographing device that captures a fingerprint mark of the person on the handrail member at the return portion of the circulation path and supplies an image of the fingerprint of the person to the search information providing device.
  • the search information providing method is, as one form thereof.
  • the image of the fingerprint of the person in the photographed image in which the fingerprint mark of the person on the handrail member circulating in the circulation path is photographed is collated with the image of the fingerprint of the search target person given in advance.
  • information indicating that the person to be searched is detected is output to a predetermined report destination.
  • the program storage medium according to the present invention is, as one form thereof.
  • a forward portion that assists the person while moving along with the movement of the transport member that transports the person by moving from the entrance to the exit, and a return portion that moves in the direction from the outlet toward the entrance.
  • the image of the fingerprint of the person on the handrail member matches the image of the fingerprint of the search target person, a process of outputting information indicating that the search target person has been detected to a predetermined report destination is performed.
  • the present invention it is possible to provide a technique capable of presenting information that is different from the image of a surveillance camera and is effective for searching for a person.
  • FIG. 1 is a diagram showing a configuration of a search information providing system according to a first embodiment of the present invention.
  • the search information providing system 1 of the first embodiment is a system that provides effective information for searching a search target person by using a fingerprint mark of a person attached to the handrail member 16 of the escalator 14.
  • the escalator 14 includes a transport member 15 and a handrail member 16.
  • the transport member 15 has a configuration in which the person 17 on the transport member 15 can be transported from the inlet side to the exit side by moving in the direction from the inlet on which the person 17 to be transported is placed toward the exit.
  • the handrail member 16 is a member that assists a person 17 who is riding on the transport member 15 while moving along with the movement of the transport member 15.
  • the handrail member 16 circulates in a circulation path passing through a forward portion that moves in the direction from the entrance to the exit and a return portion that moves in the direction from the exit to the entrance.
  • the escalator 14 transports a person in the ascending direction, but the escalator 14 may transport a person in the descending direction.
  • the moving direction (circulation direction) of the handrail member 16 is opposite to that in FIG.
  • the search information providing system 1 of the first embodiment includes a fingerprint acquisition device 3, a search information providing device 4, and a database 5.
  • the fingerprint acquisition device 3 has a configuration in which a trace of a person's fingerprint attached to the handrail member 16 is photographed and a photographed image in which the person's fingerprint is photographed is output.
  • the configuration of the fingerprint acquisition device 3 is not limited as long as it can photograph a trace of a person's fingerprint on the handrail member 16 and output a photographed image in which the person's fingerprint is photographed.
  • the fingerprint acquisition device 3 includes an attachment device 31, an irradiation device 32, a fingerprint photographing device 33, and a removal device 34.
  • the fingerprint photographing device 33 is, for example, a video camera that captures a moving image.
  • the fingerprint photographing device 33 faces the handrail member 16 passing through the return portion from the exit to the entrance in the circulation path of the handrail member 16 and is capable of photographing a fingerprint mark of a person on the surface of the handrail member 16. It is installed in. That is, when the handrail member 16 passes through the going portion from the entrance to the exit of the escalator 14, the handrail member 16 is gripped by the person 17 riding on the transport member 15, so that the fingerprint mark of the person 17 is left on the surface thereof. It is expected to be attached.
  • the part of the handrail member 16 (that is, the part with the fingerprint mark) that the person 17 who reached the exit of the escalator 14 took off by getting off the transport member 15 moves in the direction from the exit to the entrance. Change direction. Then, the portion of the handrail member 16 moves inside a cover member (not shown) that covers the portion of the handrail member 16 passing through the return portion, for example. By covering the portion of the handrail member 16 passing through the return portion with the cover member in this way, it is possible to prevent the handrail member 16 from being newly imprinted with a human fingerprint at the return portion.
  • the fingerprint photographing device 33 photographs a fingerprint mark made by being gripped by a person 17 while the handrail member 16 is passing through the going portion at the returning portion of the handrail member 16.
  • the portion of the handrail member 16 photographed by the fingerprint photographing device 33 is irradiated with the light emitted from the irradiating device 32.
  • the fingerprint imaging device 33 is an imaging device capable of photographing light having a wavelength of light emitted from the irradiation device 32.
  • the fingerprint photographing device 33 is connected to the search information providing device 4, and outputs the photographed image to the search information providing device 4.
  • the fingerprint photographing device 33 has a function of associating, for example, time information representing a shooting time with information representing a shooting location in the captured image output to the search information providing device 4.
  • the information indicating the shooting location includes, for example, information for identifying the fingerprint photographing device 33 that has been photographed, information indicating the installation location of the photographed escalator 14 (handrail member 16), and the like.
  • the handrail member 16 often includes a strip-shaped upper surface portion and side surface portions on both sides thereof. Further, it is assumed that the fingers of the hand holding the handrail member 16 often press the side surface portion of the handrail member 16. From these facts, the fingerprint photographing apparatus 33 is on the right side when facing the moving direction of the handrail member 16 at least one side surface portion of such a handrail member 16 (in the case where it is assumed that the handrail member 16 is gripped by the right hand). Take a picture of the side surface, and if you hold it with your left hand, the side surface on the opposite side to the left and right). Further, for example, the fingerprint acquisition device 3 may be provided with a configuration capable of acquiring captured images of the upper surface portion of the handrail member 16 and the side surface portions on both sides thereof by providing a plurality of fingerprint photographing devices 33.
  • the imaging range of the fingerprint imaging device 33 is, for example, a size based on the standard size of a human hand. Such a shooting range suppresses the fingerprints of a plurality of people from being captured in the captured image captured by the fingerprint imaging device 33.
  • the adhesion device 31 is photographed by the fingerprint photographing device 33 with a luminescent agent that emits light of a person's fingerprint mark attached to the handrail member 16 so that the fingerprint photographing device 33 can clearly photograph the fingerprint mark of the person. It has a configuration in which it adheres to the handrail member 16 at a portion on the front side of the circulation path portion.
  • a luminescent agent for example, a fluorescent reagent that emits light when irradiated with light of a specific wavelength in ultraviolet rays, infrared rays, or visible light by reacting with a secretion secreted from the finger and adhering to the surface of the finger is used. ..
  • the irradiation device 32 is a device that irradiates a portion of the handrail member 16 imaged by the fingerprint photographing device 33 with light.
  • the light emitted from the irradiation device 32 is light having a wavelength that is attached to the handrail member 16 by the attachment device 31 and emits a luminescent agent that reacts with fingerprint marks caused by secretions from the finger.
  • a clear fingerprint image by the fingerprint photographing device 33 can be obtained as compared with the case where the surface of the handrail member 16 is simply photographed by visible light. can get.
  • the removing device 34 is a device for removing luminescent agents and fingerprint marks adhering to the surface of the handrail member 16 in the circulation path portion behind the circulation path portion of the handrail member 16 photographed by the fingerprint photographing device 33. be.
  • the removing device 34 has a configuration in which a cloth containing a detergent is pressed against the surface of a moving handrail member 16 to wipe off luminescent agents and fingerprint marks with the cloth.
  • the portion of the handrail member 16 from which the luminescent agent and fingerprint marks have been removed by the removing device 34 is directed toward the outgoing portion from the entrance to the exit. For this reason, the fingerprint mark of the person who got off the escalator 14 does not overlap with the fingerprint mark of the person who newly got on the escalator 14, and the fingerprint cannot be discriminated due to the overlap of the fingerprint marks. Is suppressed.
  • the attachment device 31, the irradiation device 32, the fingerprint photographing device 33, and the removing device 34 constituting the fingerprint acquisition device 3 as described above are housed in the same housing 35.
  • This configuration has the effect of improving the work efficiency of the work for installing the fingerprint acquisition device 3 as compared with the case where the attachment device 31, the irradiation device 32, the fingerprint photographing device 33, and the removal device 34 are independent of each other. Is obtained.
  • Database 5 is a storage device, and an image of a fingerprint is stored in association with information for identifying a person having the fingerprint (hereinafter, also referred to as personal identification information).
  • the database 5 stores in advance images of fingerprints of a plurality of people including the search target person.
  • the database 5 in which the fingerprint image, which is such personal information, is stored is held by, for example, the police.
  • the search information providing device 4 is composed of, for example, a computer device (server), and when a photographed image of a fingerprint is received from the fingerprint acquisition device 3, the photographed image is used to generate information effective for searching the search target person. It has a function to output. That is, the search information providing device 4 includes an arithmetic unit 10 and a storage device 11.
  • the storage device 11 is a storage medium for storing data and a computer program (hereinafter, also referred to as a program) 12. There are various types of storage media, and the storage device 11 may be composed of any storage medium. Further, the search information providing device 4 may be provided with a plurality of types of storage media, and in this case, the plurality of types of storage media are collectively represented as the storage device 11. The description of the configuration and operation of the storage device 11 will be omitted.
  • the arithmetic unit 10 includes, for example, a processor such as a CPU (Central Processing Unit) or a GPU (Graphics Processing Unit). By reading and executing a program stored in the storage device 11, the processor can have various functions based on the program.
  • the arithmetic unit 10 has a collating unit 20 and a functional unit called an output unit 21.
  • the collation unit 20 has a function of determining whether or not a fingerprint is captured in the captured image received from the fingerprint imaging device 33 of the fingerprint acquisition device 3, for example, by using a fingerprint pattern for fingerprint detection given in advance. ..
  • the collating unit 20 does not determine the presence or absence of fingerprints for all the frame images constituting the captured image received from the fingerprint photographing device 33, but when the frame images are arranged in chronological order, a predetermined number of sheets are used.
  • the presence or absence of fingerprints is determined for each frame image to be processed. For example, when the handrail members 16 photographed in the frame image to be processed selected for determining the presence or absence of fingerprints are arranged in the order of photography, the overlapping photographed portion has a size within the allowable range.
  • the frame image to be processed is selected. That is, when the frame images are arranged in chronological order, the interval (number of sheets) between the frame images selected as the processing target is described above based on the moving speed of the handrail member 16 and the imaging range of the fingerprint imaging device 33. It is decided as it was done.
  • the collation unit 20 has a function of extracting an image portion in which the fingerprint is photographed from the photographed image when the fingerprint is photographed in the photographed image (frame image to be processed).
  • the extracted image portion is associated with the same information as the information associated with the captured image (time information representing the shooting time and information representing the shooting location).
  • the collation unit 20 extracts a plurality of image portions in which the fingerprints are captured from the captured image.
  • the same information (time information indicating the shooting time and information indicating the shooting location) associated with the captured image (frame image) of the extraction source is associated with the extracted plurality of image portions.
  • the image portion extracted by the collation unit 20 is in a state in which the time information representing the shooting time and the information representing the shooting location are associated with each other, for example, the database 5 or a database separate from the database 5 ( (Not shown).
  • the collation unit 20 collates the extracted image portion (hereinafter, also referred to as a received fingerprint image) with the fingerprint image (hereinafter, also referred to as a stored fingerprint image) stored in the database 5 to obtain the received fingerprint image. It has a function to determine whether or not there is a matching stored fingerprint image.
  • the collation unit 20 does not collate all the stored fingerprint images stored in the database 5 with the received fingerprint images, but personal identification information of a person designated in advance as a search target person. Matches the stored fingerprint image associated with with the received fingerprint image.
  • Information of a person designated in advance as a search target person is input to and held in the search information providing device 4 by, for example, a user operating an input device (not shown) for inputting information.
  • collation unit 20 uses the information of the database 5 (that is, personal information that cannot be provided to the outside), the search information providing device 4 is held by the police as in the database 5. Be managed.
  • the collating unit 20 determines that the output unit 21 has a stored fingerprint image of the search target person that matches the received fingerprint image (in other words, the received fingerprint image matches the stored fingerprint image of the search target person), It has a function of outputting the detection information of the search target person to the reporting destination device 7.
  • the search target person's detection information is information indicating that the search target person has been detected, and in the first embodiment, the time information indicating the shooting time at which the received fingerprint image was taken and the information indicating the shooting location are provided. include. Further, the detection information of the search target person also includes personal identification information (that is, personal identification information for identifying the search target person) associated with the stored fingerprint image matching the received fingerprint image. The detection information of such a search target person is output to the reporting destination device 7 and stored in the storage device 11.
  • the report destination device 7 which is the report destination to which the output unit 21 outputs the detection information of the search target person is predetermined.
  • the reporting destination device 7 there is, for example, a computer device owned and used by a police officer.
  • the report destination device 7 receives the detection information of the search target person, the inside of the facility is monitored visually by the display device and audibly by the speaker that the search target person is detected. Notify the observer who is present.
  • personal information (information that identifies an individual) such as the name of the search target person associated with the personal identification information of the search target person is given to the report destination device 7 in advance.
  • the report destination device 7 may not only notify that the search target person has been detected, but also notify the name and the like of the detected search target person. .. That is, the reporting destination device 7 notifies (provides), for example, police personnel, for example, information useful for searching the search target person.
  • a plurality of escalators 14 are installed in different places in the same facility.
  • a fingerprint acquisition device 3 corresponding to each of the escalators 14 is installed, and further, a search information providing device connected to each of the fingerprint acquisition devices 3 or commonly connected to the fingerprint acquisition device 3. 4 may be provided.
  • the person to be searched uses a plurality of escalators 14 in the facility between entering the facility and leaving the facility. In such a case, a plurality of detection information of the search target person due to the use of the plurality of escalators 14 by the search target person is transmitted to the report destination device 7.
  • the reporting destination device 7 can trace the trajectory of the search target person from entering the facility to leaving the facility by using the plurality of detection information of the search target person.
  • the fact that the search target person entered the facility and that the search target person left the facility means, for example, that the face image of the search target person given in advance and the face image of the person entering and exiting the facility entrance / exit are taken. It can be detected by using the captured image.
  • the report destination device 7 is used for each or in common with a plurality of fingerprint acquisition devices 3 installed corresponding to each of a plurality of escalators 14 provided in the city, a building, a station yard, or the like. It may be connected to the connected search information providing device 4.
  • the reporting destination device 7 utilizes a plurality of detection information of the search target person transmitted from the search information providing device 4, and is not limited to the facility, but the trajectory of the search target person in a wider range. It becomes possible to follow.
  • the location of the search information providing device 4, the database 5, and the reporting destination device 7 is not limited to the police facility, and may be, for example, a police branch office provided in the facility where the escalator 14 is installed. ..
  • FIG. 2 is a flowchart illustrating an example of an operation (search information providing method) executed by the arithmetic unit 10 of the search information providing device 4.
  • the search information providing device 4 receives a photographed image from the fingerprint photographing device 33 of the fingerprint acquiring device 3 (step S101), and the collating unit 20 of the arithmetic unit 10 fingerprints the frame image to be processed in the received photographed image. Determine if is being filmed. In this determination process, for example, a pattern matching method using an image pattern of a fingerprint is used.
  • the collation unit 20 When a fingerprint is captured in the frame image to be processed, the collation unit 20 extracts the image portion in which the fingerprint is captured as a received fingerprint image, and extracts the received fingerprint image of the search target person in the database 5. It is collated with the stored fingerprint image (step S102). Then, the collation unit 20 determines whether or not the received fingerprint image matches the collated stored fingerprint image (step S103). When the collating unit 20 determines that the received fingerprint image matches the collated stored fingerprint image, the output unit 21 outputs detection information indicating that the search target person has been detected to the reporting destination device 7. (Step S104).
  • the detection information includes personal identification information of the search target person associated with the stored fingerprint image matching the received fingerprint image, time information indicating the shooting time when the received fingerprint image was taken, and the received fingerprint image. Includes information about the location.
  • the search information providing system 1 and the search information providing device 4 of the first embodiment are configured as described above, and can provide information related to a search target person using fingerprint marks on the handrail member 16 of the escalator 14. It has. That is, the search information providing system 1 and the search information providing device 4 of the first embodiment can obtain the effect that information different from the image of the surveillance camera and effective for searching a person can be presented. ..
  • the fingerprint acquisition device 3 since the fingerprint acquisition device 3 is a device separate from the escalator 14, it can be installed corresponding to the existing escalator 14. That is, the search information providing system 1 of the first embodiment can be constructed by using the existing escalator 14.
  • the search information providing system 1 and the search information providing device 4 in the second embodiment have the same configuration as the search information providing system 1 and the search information providing device 4 in the first embodiment.
  • the arithmetic unit 10 of the search information providing device 4 includes a generation unit 22 which is a functional unit as shown in FIG. In FIG. 3, the storage device 11 in the search information providing device 4 is not shown.
  • the search information providing device 4 is connected to the fingerprint photographing device 33 of the plurality of fingerprint acquisition devices 3 installed corresponding to the plurality of escalators 14 installed at different places. ..
  • the generation unit 22 has a function of generating trajectory information representing the trajectory of the search target person by using the fingerprint images taken by the fingerprint imaging devices 33 of the plurality of fingerprint acquisition devices 3.
  • the generation unit 22 includes a plurality of detection information of the same search target person in the detection information of the plurality of search target persons output to the reporting destination device 7 within a predetermined length of time. May be.
  • the generation unit 22 searches by using the time information indicating the shooting time of the received fingerprint image included in the plurality of detection information of the same search target person and the information indicating the shooting location.
  • the trajectory information is generated by tracing the trajectory of the target person.
  • the locus information generated by the generation unit 22 is associated with the personal identification information of the search target person, and the locus information is output to the report destination device 7 by, for example, the output unit 21. Further, the locus information associated with the personal identification information of the search target person is stored in the storage device 11 of the search information providing device 4.
  • the configurations of the search information providing system 1 and the search information providing device 4 in the second embodiment other than the above-described configurations are the same as those in the first embodiment.
  • the search information providing system 1 and the search information providing device 4 of the second embodiment have the same configurations as those of the first embodiment, the same effects as those of the first embodiment can be obtained. Further, since the search information providing system 1 and the search information providing device 4 of the second embodiment can also provide the locus information of the search target person to the user, it is possible to provide effective information by searching the search target person. Become.
  • the search information providing system 1 and the search information providing device 4 in the third embodiment are configured to provide information that can be used for searching a search target person by using not only a fingerprint image but also a human face image. Be prepared.
  • the search information providing system 1 and the search information providing device 4 in the third embodiment include the person photographing device 36 as shown in FIG. 4 in addition to the configuration of the first or second embodiment.
  • the person photographing device 36 is, for example, a video camera for photographing a moving image, and is installed so as to photograph a person 17 riding on a transport member 15.
  • the installation location of the portrait photographing device 36 is on the exit side of the escalator 14. That is, the person photographing device 36 considers the photographing range of the camera so that the face of the person descending from the escalator 14 and the last step portion moving in the ascending direction of the transport member 15 are photographed in the same photographed image. It is installed on the exit side of 14.
  • the person photographing device 36 is connected to the search information providing device 4, and outputs the photographed image to the search information providing device 4.
  • the captured image output from the person photographing device 36 to the search information providing device 4 is associated with time information indicating the time when the image was taken and information indicating the place where the image was taken.
  • the arithmetic unit 10 of the search information providing device 4 includes a linking unit 23 in addition to the functional unit described in the first or second embodiment.
  • the linking unit 23 is a received fingerprint image extracted by the collating unit 20 from an image captured by the fingerprint photographing device 33, and a face photographed by a person photographing device 36 of a person who is assumed to have a fingerprint of the received fingerprint image. It has a function to associate with an image. That is, the length between the portion of the handrail member 16 that is assumed to be released by the person getting off the escalator 14 and the portion of the handrail portion 16 imaged by the fingerprint photographing device 33 can be obtained in advance.
  • the moving speed of the handrail member 16 can be acquired based on, for example, information acquired from a rotation driving device (not shown) rotating the handrail member 16.
  • a rotation driving device not shown
  • the person who is assumed to have the fingerprint of the received fingerprint image to be processed is a person.
  • the time taken by the photographing device 36 can be calculated.
  • the linking unit 23 calculates the shooting time of the captured image by the person photographing device 36 associated with the received fingerprint image to be processed, and extracts the photographed image photographed by the person photographing device 36 at the calculated shooting time. Then, the linking unit 23 associates the extracted image captured by the person photographing device 36 with the received fingerprint image to be processed.
  • the linking unit 23 uses the stored fingerprint of the database 5 that matches the received fingerprint image to be processed.
  • the image may also be associated with the image captured by the portrait photographing device 36.
  • the output unit 21 when the output unit 21 outputs the detection information of the search target person to the report destination device 7, the output unit 21 also includes an image taken by the person photographing device 36 associated with the received fingerprint image related to the detection information. Let me.
  • the search information providing system 1 and the search information providing device 4 of the third embodiment have the same configurations as those of the first or second embodiment, they have the same effects as those of the first or second embodiment. Obtainable. Further, since the search information providing system 1 and the search information providing device 4 of the third embodiment can output the face image of the person who is assumed to be the search target person to the reporting destination device 7, it is effective for searching the search target person. Information can be provided.
  • search information is provided that provides effective information for searching the search target person by using a photographed image of a person's fingerprint mark attached to the handrail member 16 of the escalator 14.
  • the system 1 and the search information providing device 4 are described.
  • the search information providing system 1 and the search information providing device 4 of the first to third embodiments are used for searching for a search target person by using a photographed image of a person's fingerprint mark attached to a handrail member of a moving walkway. It can also be applied as a system that provides valid information.
  • the search information providing system 1 and the search information providing device 4 in the first to third embodiments search for the prospective boarding person in the airport if the fingerprint image of the planned boarding person of the airplane can be acquired in advance. It can also be applied as a system that provides information on the occasion.
  • the database 5 stores, for example, the fingerprint images of the prospective passengers of the airplane acquired by the airport management company, the airliner operating company, and the like. That is, in such a case, the search information providing device 4, the database 5, and the reporting destination device 7 are not owned and managed by the police, but are acquired and owned by the airport management company or passenger aircraft. It is owned and managed by the operating company of. That is, the administrator (including an organization such as a management company) that manages the search information providing device 4, the database 5, and the reporting destination device 7, and the installation location are appropriately set according to the purpose for which the search information providing system is constructed. Will be done.
  • the search information providing device 4 sends the received fingerprint image based on the image captured by the fingerprint photographing device 33 to a predetermined output destination for a purpose other than the generation of information used for searching the search target person. You may output it.
  • the search information providing system 1 and the search information providing device 4 in the first to third embodiments are, for example, an authentication system for admission to, for example, the entrance of a room at the end of a passage leading to the exit side of the escalator 14. It can be applied. However, in this case, it is preferable to match it with a configuration for enhancing security.
  • the database 5 stores, for example, the fingerprint image of the person who is permitted to enter the room, which is acquired by a company that manages the entrance and exit of the room. That is, in such a case, the search information providing device 4, the database 5, and the reporting destination device 7 are not owned and managed by the police, but are owned by a company or the like that acquires and holds a fingerprint image. Be managed.
  • the search information providing device 4 in the first to third embodiments may have a function of suspending the operation of the collating unit 20 of the arithmetic unit 10 in order to reduce the processing load, for example.
  • the collating unit 20 responds to the stop and operation of the handrail member 16. Pause and operation may be controlled.
  • the portion of the handrail member 16 that is gripped by a human hand may be made of a material having a tactile sensation that a person wants to grip, or may have a design or a color. Further, the portion of the handrail member 16 that is gripped by a human hand may be made of a material that easily has fingerprint marks.
  • FIG. 5 is a block diagram showing the configuration of the search information providing system of the fourth embodiment.
  • the search information providing system 40 includes a fingerprint photographing device 41 and a search information providing device 42.
  • the fingerprint photographing device 41 is a device that captures an image of a person's fingerprint attached to the handrail member. That is, the handrail member moves along with the movement of the transport member that transports the person by moving from the entrance to the exit, and assists the person while moving, and the return portion that moves in the direction from the exit to the entrance. It circulates in a circulation path that passes through the part.
  • the fingerprint photographing device 41 captures an image of a human fingerprint at a return portion in the circulation path of the handrail member.
  • the search information providing device 42 has a function of generating and outputting information used for searching a search target person by using an image of a fingerprint obtained by the fingerprint photographing device 41.
  • FIG. 6 is a block diagram showing the configuration of the search information providing device 42.
  • the search information providing device 42 is composed of, for example, a computer device.
  • the search information providing device 42 includes a collating unit 44 and an output unit 45 as functional units.
  • the collation unit 44 has a function of collating the fingerprint image of the fingerprint photographing device 41 with the fingerprint image of the search target person given in advance.
  • the output unit 45 has a function of outputting information indicating that the search target person has been detected to a predetermined report destination. Be prepared.
  • the search information providing system 40 and the search information providing device 42 of the fourth embodiment are configured as described above. Next, an example of the operation of the search information providing device 42 will be described with reference to FIG. 7.
  • the collating unit 44 sets the received fingerprint image as the fingerprint image of the search target person given in advance. (Step S302). After that, when the fingerprint image matches the fingerprint image of the search target person, the output unit 45 outputs information indicating that the search target person has been detected to a predetermined reporting destination (step S303). ).
  • the search information providing system 40 and the search information providing device 42 of the fourth embodiment can provide information related to the search target person using the fingerprint marks on the handrail member, as in the first to third embodiments. It has a various configurations. That is, the search information providing system 40 and the search information providing device 42 of the fourth embodiment can obtain the effect that information different from the image of the surveillance camera and effective for searching a person can be presented. ..

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Collating Specific Patterns (AREA)
  • Alarm Systems (AREA)

Abstract

監視カメラの映像とは異なる情報であって人の捜索に有効な情報を提示可能な技術を提供するために、捜索情報提供装置42は、機能部として、照合部44と、出力部45とを備えている。照合部44は、指紋撮影装置41による指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する。出力部45は、手すり部材における指紋の画像が捜索対象者の指紋の画像に合致した場合には、捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する。

Description

捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体
 本発明は、人の捜索に有効な情報を提供する技術に関する。
 人を捜索する際に、監視カメラの映像を利用する場合がある。特許文献1には、エレベータのかごの内部、あるいは、かごが停止する階のかごの乗降口を撮影するカメラにより撮影された人物の顔データを利用して、指名手配犯を検知する技術が開示されている。
 なお、特許文献2には、入室者を搬送する循環型搬送装置に設置された生体情報センサーによって入室者の生体情報を読み取り、当該読み取った生体情報を利用して建物などの入り口部分に設けられたゲートの開閉を制御する技術が開示されている。
国際公開第2009/090724号 特開2003-184381号公報
 人を捜索する際に、特許文献1に示されているようなエレベータのかごの内部、あるいは、かごの乗降口を撮影するカメラだけでなく、街中に設置されている監視カメラや、駅の構内に設置されている監視カメラなどの撮影画像をも利用することが考えられる。
 しかしながら、捜索対象者が監視カメラの撮影範囲内を通過したとしても、その通過した部分が柱の影になる部分というような監視カメラの死角であると、監視カメラの映像に捜索対象者が映らないという問題がある。
 本発明の主な目的は、監視カメラの映像とは異なる情報であって人の捜索に有効な情報を提示可能な技術を提供することにある。
 上記目的を達成するために、本発明に係る捜索情報提供装置は、その一形態として、
 入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら前記人を補助する往き部分と、前記出口から前記入口に向かう方向に移動している戻り部分とを通る循環経路で循環する手すり部材に付いた前記人の指紋の痕が撮影されている撮影画像における前記人の指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する照合部と、
 前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する出力部と
を備える。
 本発明に係る捜索情報提供システムは、その一形態として、
 上述したような捜索情報提供装置と、
 前記手すり部材に付いた前記人の指紋の痕を前記循環経路の前記戻り部分で撮影し前記捜索情報提供装置に前記人の指紋の画像を供給する指紋撮影装置と
を備える。
 本発明に係る捜索情報提供方法は、その一形態として、
 入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら前記人を補助する往き部分と、前記出口から前記入口に向かう方向に移動している戻り部分とを通る循環経路で循環する手すり部材に付いた前記人の指紋の痕が撮影されている撮影画像における前記人の指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合し、
 前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者を検知したことを表す情報を予め指定された報告先に出力する。
 本発明に係るプログラム記憶媒体は、その一形態として、
 入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら前記人を補助する往き部分と、前記出口から前記入口に向かう方向に移動している戻り部分とを通る循環経路で循環する手すり部材に付いた前記人の指紋の痕が撮影されている撮影画像における前記人の指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する処理と、
 前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者を検知したことを表す情報を予め指定された報告先に出力する処理と
をコンピュータに実行させるコンピュータプログラムを記憶する。
 本発明によれば、監視カメラの映像とは異なる情報であって人の捜索に有効な情報を提示可能な技術を提供できる。
本発明に係る第1実施形態の捜索情報提供システムおよび捜索情報提供装置の構成を表す図である。 第1実施形態の捜索情報提供装置の動作例を説明するフローチャートである。 第2実施形態の捜索情報提供装置の構成を説明する図である。 第3実施形態の捜索情報提供装置の構成を説明する図である。 第4実施形態の捜索情報提供システムの構成を表す図である。 第4実施形態の捜索情報提供装置の構成を表す図である。 第4実施形態の捜索情報提供装置の動作例を説明するフローチャートである。
 以下に、本発明に係る実施形態を図面を参照しつつ説明する。
 <第1実施形態>
 図1は、本発明に係る第1実施形態の捜索情報提供システムの構成を表す図である。第1実施形態の捜索情報提供システム1は、エスカレータ14の手すり部材16に付いた人の指紋の痕を利用して、捜索対象者の捜索に有効な情報を提供するシステムである。エスカレータ14は、搬送部材15と、手すり部材16とを備えている。搬送部材15は、搬送対象である人17を乗せる入口から出口に向かう方向に移動することによって、搬送部材15に乗っている人17を入口側から出口側に搬送可能な構成を備えている。手すり部材16は、搬送部材15の移動に伴って移動しながら搬送部材15に乗っている人17を補助する部材である。手すり部材16は、入口から出口に向かう方向に移動する往き部分と、出口から入口に向かう方向に移動する戻り部分とを通る循環経路で循環する。なお、図1では、エスカレータ14は昇り方向に人を搬送しているが、エスカレータ14は、降り方向に人を搬送する場合も有る。降り方向に人を搬送する場合には、手すり部材16の移動方向(循環方向)は、図1とは逆向きになる。
 第1実施形態の捜索情報提供システム1は、指紋取得装置3と、捜索情報提供装置4と、データベース5とを備えている。指紋取得装置3は、手すり部材16に付いた人の指紋の痕を撮影し、人の指紋が撮影されている撮影画像を出力する構成を備えている。指紋取得装置3の構成は、手すり部材16に付いた人の指紋の痕を撮影し、人の指紋が撮影されている撮影画像を出力できれば、限定されるものではないが、その一例を次に説明する。例えば、指紋取得装置3は、付着装置31と、照射装置32と、指紋撮影装置33と、除去装置34とを備えている。
 指紋撮影装置33は、例えば動画を撮影するビデオカメラである。指紋撮影装置33は、手すり部材16の循環経路における出口から入口に向かう戻り部分を通っている手すり部材16に向き合って当該手すり部材16の表面に付いている人の指紋の痕を撮影可能な位置に設置されている。つまり、手すり部材16は、エスカレータ14の入口から出口に向かう往き部分を通っている際に、搬送部材15に乗っている人17により把持されることによって、その表面に人17の指紋の痕が付くことが想定される。エスカレータ14の出口に達した人17が搬送部材15から降りることにより手を外した手すり部材16の部分(つまり、指紋の痕が付いている部分)は、その移動の向きを出口から入口に向かう方向に変える。そして、この手すり部材16の部分は、例えば戻り部分を通っている手すり部材16の部位などを覆うカバー部材(図示せず)の内部を移動していく。このように、戻り部分を通っている手すり部材16の部位がカバー部材により覆われることにより、当該戻り部分で手すり部材16に新たに人の指紋が付くことが回避される。
 指紋撮影装置33は、手すり部材16が往き部分を通っている際に人17によって把持されることにより付いた指紋の痕を、手すり部材16の戻り部分で撮影する。指紋撮影装置33により撮影される手すり部材16の部分は、照射装置32から放射された光によって照射される。指紋撮影装置33は、その照射装置32から放射される光の波長を持つ光を撮影可能な撮影装置である。
 指紋撮影装置33は、捜索情報提供装置4と接続しており、撮影画像を捜索情報提供装置4に出力する。指紋撮影装置33は、捜索情報提供装置4に出力する撮影画像に、例えば、撮影時刻を表す時間情報と、撮影した場所を表す情報とを関連付ける機能を備えている。撮影した場所を表す情報としては、例えば、撮影した指紋撮影装置33を識別する情報や、撮影したエスカレータ14(手すり部材16)の設置場所を表す情報などがある。
 なお、手すり部材16は、帯状の上面部分と、その両側の側面部分とを備えていることが多い。また、手すり部材16を把持している手の指は、手すり部材16の側面部分を押圧することが多いと想定される。これらのことから、指紋撮影装置33は、そのような手すり部材16の少なくとも一方の側面部分(右手で把持されると想定される場合には、手すり部材16の移動方向を向いた場合に右側の側面部分、左手で把持する場合にはその左右反対側の側面部分)を撮影する。さらに、例えば複数の指紋撮影装置33を設けることにより、手すり部材16の上面部分およびその両側の側面部分の撮影画像を取得可能な構成が指紋取得装置3に設けられてもよい。
 さらにまた、指紋撮影装置33の撮影範囲は、例えば人の手の標準的な大きさとされる大きさに基づいた大きさと成している。このような撮影範囲は、指紋撮影装置33により撮影された撮影画像に、複数人の指紋が撮影されることを抑制する。
 付着装置31は、指紋撮影装置33によって人の指紋の痕が明瞭に撮影されるように、手すり部材16に付いた人の指紋の痕を発光させる発光薬を、指紋撮影装置33により撮影される循環経路部分よりも手前側の部分で手すり部材16に付着する構成を備えている。発光薬は、例えば、指から分泌され指の表面に付着している分泌物と反応することにより、紫外線や赤外線や可視光における特定の波長の光を照射した際に発光する蛍光試薬が用いられる。
 照射装置32は、前述したように、指紋撮影装置33により撮影される手すり部材16の部分に光を照射する装置である。照射装置32から放射される光は、付着装置31によって手すり部材16に付着され、かつ、指からの分泌物による指紋の痕に反応している発光薬を発光させる波長を持つ光である。
 上述したような付着装置31による発光薬と、照射装置32による光の照射とによって、単に可視光によって手すり部材16の表面を撮影する場合に比べて、指紋撮影装置33による明瞭な指紋の画像が得られる。
 除去装置34は、指紋撮影装置33により撮影される手すり部材16の循環経路部分よりも後ろの循環経路部分で、手すり部材16の表面に付着している発光薬および指紋の痕を除去する装置である。例えば、除去装置34は、動いている手すり部材16の表面に、洗剤が含まれている布を押し付けることにより、その布によって発光薬や指紋の痕を拭き取る構成を備える。除去装置34により、発光薬や指紋の痕が除去された手すり部材16の部分が、入口から出口に向かう往き部分に向かうことになる。このため、エスカレータ14から降りた人の指紋の痕に、新たにエスカレータ14に乗ってきた人の指紋の痕が重なって付いてしまうことがなくなり、指紋の痕の重なりにより指紋を判別できないという事態が抑制される。
 第1実施形態では、上述したような指紋取得装置3を構成する付着装置31と照射装置32と指紋撮影装置33と除去装置34とは同じ筐体35の内部に収納されている。この構成は、付着装置31と、照射装置32と、指紋撮影装置33と、除去装置34とが別個独立である場合に比べて、指紋取得装置3を設置する工事の作業効率を向上させるという効果が得られる。
 データベース5は、記憶装置であり、指紋の画像が当該指紋を持つ人を識別する情報(以下、個人識別情報とも称する)と関連付けられて格納されている。第1実施形態では、データベース5には、捜索対象者を含む複数人の指紋の画像が予め格納されている。このような個人情報である指紋の画像が格納されているデータベース5は、例えば、警察により保有されている。
 捜索情報提供装置4は、例えばコンピュータ装置(サーバ)により構成され、指紋取得装置3から指紋の撮影画像を受信すると、当該撮影画像を利用して、捜索対象者の捜索に有効な情報を生成して出力する機能を備える。すなわち、捜索情報提供装置4は、演算装置10と、記憶装置11とを備えている。記憶装置11は、データやコンピュータプログラム(以下、プログラムとも称する)12を記憶する記憶媒体である。記憶媒体には様々な種類があり、記憶装置11は、何れの記憶媒体により構成されてもよい。また、捜索情報提供装置4には、複数種の記憶媒体が備えられていてもよく、この場合には、複数種の記憶媒体をまとめて記憶装置11として表すこととする。記憶装置11の構成および動作の説明は省略する。
 演算装置10は、例えば、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)などのプロセッサを備えている。プロセッサは、記憶装置11に記憶されているプログラムを読み出して実行することにより、当該プログラムに基づいた様々な機能を持つことができる。例えば、第1実施形態では、演算装置10は、照合部20と、出力部21という機能部を有している。
 照合部20は、指紋取得装置3の指紋撮影装置33から受信した撮影画像に指紋が撮影されているか否かを例えば予め与えられている指紋検知用の指紋パターンを利用して判断する機能を備える。ここでは、照合部20は、指紋撮影装置33から受信した撮影画像を構成する全てのフレーム画像について指紋の有無を判断するのではなく、フレーム画像を時系列で並べた場合に、予め定めた枚数毎の処理対象のフレーム画像について指紋の有無を判断する。例えば、指紋の有無を判断するために選択された処理対象のフレーム画像に撮影されている手すり部材16を撮影順に並べた場合に、重複撮影されている部分が許容範囲内の大きさとなるように、処理対象のフレーム画像が選択される。つまり、フレーム画像を時系列で並べた場合に、処理対象として選択されるフレーム画像間の間隔(枚数)は、手すり部材16の移動速度と、指紋撮影装置33の撮影範囲とに基づいて、上述したように決定される。
 さらに、照合部20は、撮影画像(処理対象のフレーム画像)に指紋が撮影されている場合には、撮影画像から、指紋が撮影されている画像部分を抽出する機能を備える。抽出した画像部分には、撮影画像に関連付けられている情報(撮影時刻を表す時間情報と、撮影した場所を表す情報)と同じ情報が関連付けられる。
 なお、撮影画像に複数の指紋が撮影されている場合には、照合部20は、撮影画像から、指紋がそれぞれ撮影されている複数の画像部分を抽出する。抽出した複数の画像部分には、抽出元の撮影画像(フレーム画像)に関連付けられている同じ情報(撮影時刻を表す時間情報と、撮影した場所を表す情報)が関連付けられる。また、照合部20により抽出された画像部分は、撮影時刻を表す時間情報と、撮影した場所を表す情報とが関連付けられた状態で、例えば、データベース5、あるいは、データベース5とは別個のデータベース(図示せず)に格納される。
 さらにまた、照合部20は、抽出した画像部分(以下、受信指紋画像とも称する)を、データベース5に格納されている指紋の画像(以下、格納指紋画像とも称する)と照合し、受信指紋画像に合致する格納指紋画像が有るか否かを判断する機能を備える。第1実施形態では、照合部20は、データベース5に格納されている全ての格納指紋画像と、受信指紋画像とを照合するのではなく、捜索対象者として予め指定されている人の個人識別情報に関連付けられている格納指紋画像と、受信指紋画像とを照合する。捜索対象者として予め指定される人の情報は、例えばユーザが、情報を入力する入力装置(図示せず)を操作することにより、捜索情報提供装置4に入力され保持される。なお、画像を照合して合致する画像が有るか否かを判断する手法には、指紋認証の分野で利用される手法を含めて様々な手法があり、ここでは、その手法は限定されず、当該手法の説明は省略される。また、上述したように、照合部20は、データベース5の情報(つまり、外部への提供ができない個人情報)を利用することから、捜索情報提供装置4は、データベース5と同様に、警察により保有されて管理される。
 出力部21は、照合部20によって受信指紋画像に合致する捜索対象者の格納指紋画像がある(換言すれば、受信指紋画像が捜索対象者の格納指紋画像に合致する)と判断されると、捜索対象者の検知情報を報告先装置7に向けて出力する機能を備える。捜索対象者の検知情報とは、捜索対象者を検知したことを表す情報であり、第1実施形態では、受信指紋画像が撮影された撮影時刻を表す時間情報および撮影された場所を表す情報を含む。さらに、捜索対象者の検知情報は、受信指紋画像に合致する格納指紋画像に関連付けられている個人識別情報(つまり、捜索対象者を識別する個人識別情報)をも含む。このような捜索対象者の検知情報は、報告先装置7に向けて出力され、また、記憶装置11に格納される。
 出力部21が捜索対象者の検知情報を出力する報告先である報告先装置7は、予め定められている。報告先装置7の具体例としては、例えば、警察関係者が保有して利用するコンピュータ装置がある。このような報告先装置7において、捜索対象者の検知情報を受信すると、捜索対象者が検知されたことを、ディスプレイ装置により視覚的に、また、スピーカにより聴覚的に、施設内を監視している監視者に向けて報知する。また、報告先装置7には、捜索対象者の個人識別情報に関連付けられている捜索対象者の氏名などの個人情報(個人を特定する情報)が予め与えられている。報告先装置7は、捜索対象者の検知情報を受信した場合には、捜索対象者が検知されたことを報知するだけでなく、検知された捜索対象者の氏名などをも報知してもよい。すなわち、報告先装置7によって、捜索対象者の捜索に有効な情報が例えば警察関係者に報知(提供)される。
 ところで、同じ施設内の別々の場所に、それぞれ、複数のエスカレータ14が設置されているとする。このような場合に、それらエスカレータ14のそれぞれに対応する指紋取得装置3が設置され、さらに、それら指紋取得装置3にそれぞれ接続する、あるいは、それら指紋取得装置3に共通に接続する捜索情報提供装置4が設けられてもよい。さらにまた、捜索対象者が、施設内に入ってから出るまでの間に、当該施設内における複数のエスカレータ14を利用したとする。このような場合には、報告先装置7には、捜索対象者による複数のエスカレータ14の利用に起因した捜索対象者の複数の検知情報が送信されてくることになる。これにより、報告先装置7では、それら捜索対象者の複数の検知情報を利用して、施設内に入ってから出るまでの捜索対象者の軌跡をたどることが可能である。なお、捜索対象者が施設に入ったことと、施設から出たこととは、例えば、捜索対象者の予め与えられている顔画像と、施設の出入り口を出入りする人の顔画像が撮影されている撮影画像とを利用して検知可能である。
 さらにまた、報告先装置7は、街中や建物や駅の構内などに設けられている複数のエスカレータ14のそれぞれに対応させて設置されている複数の指紋取得装置3に、それぞれ、あるいは、共通に接続されている捜索情報提供装置4と接続されていてもよい。この場合には、報告先装置7は、捜索情報提供装置4から送信されてくる捜索対象者の複数の検知情報を利用して、施設内に限定されず、より広範囲において、捜索対象者の軌跡をたどることが可能になる。なお、捜索情報提供装置4とデータベース5と報告先装置7の設置場所は、警察の施設に限定されず、例えば、エスカレータ14が設置されている施設に設けられている警察分室であってもよい。
 以下に、第1実施形態における捜索情報提供装置4における情報提供に係る動作の一例を図2を利用して説明する。なお、図2は、捜索情報提供装置4の演算装置10が実行する動作(捜索情報提供手法)の一例を説明するフローチャートである。
 例えば、捜索情報提供装置4は、指紋取得装置3の指紋撮影装置33から撮影画像を受信し(ステップS101)、演算装置10の照合部20が、受信した撮影画像における処理対象のフレーム画像に指紋が撮影されているか否かを判断する。この判断処理では、例えば指紋の画像パターンを利用したパターンマッチング手法が用いられる。
 処理対象のフレーム画像に指紋が撮影されている場合には、照合部20は、その指紋が撮影されている画像部分を受信指紋画像として抽出し、当該受信指紋画像をデータベース5における捜索対象者の格納指紋画像と照合する(ステップS102)。そして、照合部20は、受信指紋画像が、照合した格納指紋画像に合致するか否かを判断する(ステップS103)。受信指紋画像が、照合した格納指紋画像に合致していると照合部20が判断した場合には、出力部21は、捜索対象者を検知したことを表す検知情報を報告先装置7に出力する(ステップS104)。その検知情報には、受信指紋画像と合致する格納指紋画像に関連付けられている捜索対象者の個人識別情報と、受信指紋画像が撮影された撮影時刻を表す時間情報と、受信指紋画像が撮影された場所の情報とが含まれる。
 一方、処理対象のフレーム画像から抽出した全て(一つも含む)の受信指紋画像、および、全て(一人も含む)の捜索対象者の格納指紋画像に関する照合処理(ステップS102)と判断処理(ステップS103)が終了するまでそれらの処理は繰り返し実行される。これらの処理の結果、受信指紋画像に合致する格納指紋画像は無いと照合部20により判断された場合には、演算装置10における処理対象のフレーム画像について情報提供に係る動作は終了し、次の処理対象のフレーム画像に係る動作(処理)に備える。
 第1実施形態の捜索情報提供システム1および捜索情報提供装置4は上記のように構成されており、エスカレータ14の手すり部材16について指紋の痕を利用した捜索対象者に関わる情報を提供可能な構成を備えている。すなわち、第1実施形態の捜索情報提供システム1および捜索情報提供装置4は、監視カメラの映像とは異なる情報であって人の捜索に有効な情報を提示可能であるという効果を得ることができる。
 また、第1実施形態では、指紋取得装置3は、エスカレータ14とは別個の装置であることから、既存のエスカレータ14に対応させて設置することができる。つまり、第1実施形態の捜索情報提供システム1は、既存のエスカレータ14を利用して構築することができる。
 <第2実施形態>
 以下に、本発明に係る第2実施形態を説明する。この第2実施形態の説明において、第1実施形態の捜索情報提供システムおよび捜索情報提供装置を構成する構成部分と同一名称部分には同一符号を付し、その共通部分の重複説明は省略する。
 第2実施形態における捜索情報提供システム1および捜索情報提供装置4は、第1実施形態の捜索情報提供システム1および捜索情報提供装置4の構成と同様な構成を備えている。第2実施形態では、それに加えて、捜索情報提供装置4の演算装置10は、図3に表されるような機能部である生成部22を備えている。なお、図3では、捜索情報提供装置4における記憶装置11の図示が省略されている。
 第2実施形態では、捜索情報提供装置4は、別々の場所に設置されている複数のエスカレータ14にそれぞれ対応させて設置されている複数の指紋取得装置3の指紋撮影装置33と接続している。
 生成部22は、複数の指紋取得装置3の指紋撮影装置33により撮影された指紋の画像を利用して、捜索対象者が移動した軌跡を表す軌跡情報を生成する機能を備えている。例えば、生成部22は、予め定められた長さの時間内に、報告先装置7に向けて出力された複数の捜索対象者の検知情報のなかに、同じ捜索対象者の検知情報が複数含まれている場合がある。このような場合に、生成部22は、同じ捜索対象者の複数の検知情報にそれぞれ含まれている受信指紋画像の撮影時刻を表す時間情報と、撮影場所を表す情報とを利用して、捜索対象者の軌跡を辿って軌跡情報を生成する。
 生成部22により生成された軌跡情報には、捜索対象者の個人識別情報が関連付けられ、当該軌跡情報は、例えば、出力部21により報告先装置7に向けて出力される。また、捜索対象者の個人識別情報が関連付けられた軌跡情報は、捜索情報提供装置4の記憶装置11に格納される。
 第2実施形態における捜索情報提供システム1および捜索情報提供装置4の上述した構成以外の構成は、第1実施形態と同様である。
 第2実施形態の捜索情報提供システム1および捜索情報提供装置4は、第1実施形態と同様の構成を備えていることから、第1実施形態と同様の効果を得ることができる。さらに、第2実施形態の捜索情報提供システム1および捜索情報提供装置4は、捜索対象者の軌跡情報をもユーザに提供可能であることから、捜索対象者の捜索により有効な情報を提供できることとなる。
 <第3実施形態>
 以下に、本発明に係る第3実施形態を説明する。この第3実施形態の説明において、第1又は第2の実施形態の捜索情報提供システムおよび捜索情報提供装置を構成する構成部分と同一名称部分には同一符号を付し、その共通部分の重複説明は省略する。
 第3実施形態における捜索情報提供システム1および捜索情報提供装置4は、指紋の画像だけでなく、人の顔画像をも利用して、捜索対象者の捜索に利用可能な情報を提供する構成を備える。
 すなわち、第3実施形態における捜索情報提供システム1および捜索情報提供装置4は、第1あるいは第2の実施形態の構成に加えて、図4に表されているような人物撮影装置36を備えている。人物撮影装置36は、例えば動画を撮影するビデオカメラであり、搬送部材15に乗っている人17を撮影するように設置される。第3実施形態では、人物撮影装置36の設置場所は、エスカレータ14の出口側である。すなわち、人物撮影装置36は、エスカレータ14から降りる人の顔および搬送部材15の昇り方向に移動する最後のステップ部分が同じ撮影画像に撮影されるように、カメラの撮影範囲を考慮して、エスカレータ14の出口側に設置される。
 人物撮影装置36は、捜索情報提供装置4に接続されており、撮影画像を捜索情報提供装置4に出力する。人物撮影装置36から捜索情報提供装置4に出力される撮影画像には、撮影された時刻を表す時間情報と、撮影された場所を表す情報とが関連付けられる。
 第3実施形態では、捜索情報提供装置4の演算装置10は、第1あるいは第2の実施形態で説明した機能部に加えて、紐付け部23を備えている。紐付け部23は、指紋撮影装置33による撮影画像から照合部20により抽出された受信指紋画像と、当該受信指紋画像の指紋を持つ人と想定される人の人物撮影装置36により撮影された顔画像とを関連付ける機能を備えている。すなわち、エスカレータ14から降りる人が把持を解消すると想定される手すり部材16の部分と、指紋撮影装置33により撮影される手すり部分16の部分との間の長さは予め求まる。また、手すり部材16の移動速度は、例えば、手すり部材16を回転させている回転駆動装置(図示せず)から取得する情報に基づいて取得可能である。それら長さと移動速度の情報と、指紋撮影装置33による処理対象の受信指紋画像が撮影された時刻の情報とに基づいて、処理対象の受信指紋画像の指紋を持つ人と想定される人が人物撮影装置36により撮影された時刻は算出可能である。これにより、紐付け部23は、処理対象の受信指紋画像に関連付ける人物撮影装置36による撮影画像の撮影時刻を算出し、算出した撮影時刻に人物撮影装置36によって撮影された撮影画像を抽出する。そして、紐付け部23は、抽出した人物撮影装置36による撮影画像と、処理対象の受信指紋画像とを関連付ける。
 処理対象の受信指紋画像に合致する格納指紋画像があることが照合部20の処理結果により検知した場合には、紐付け部23は、その処理対象の受信指紋画像に合致するデータベース5の格納指紋画像にも、人物撮影装置36による撮影画像を関連付けてもよい。
 また、出力部21は、捜索対象者の検知情報を報告先装置7に向けて出力する際に、その検知情報に関係する受信指紋画像に関連付けられている人物撮影装置36による撮影画像をも含ませる。
 第3実施形態の捜索情報提供システム1および捜索情報提供装置4は、第1又は第2の実施形態と同様の構成を備えていることから、第1又は第2の実施形態と同様の効果を得ることができる。さらに、第3実施形態の捜索情報提供システム1および捜索情報提供装置4は、捜索対象者と想定される人の顔画像を報告先装置7に向けて出力できるから、捜索対象者の捜索により有効な情報を提供できることとなる。
 なお、第1~第3の実施形態では、エスカレータ14の手すり部材16に付いた人の指紋の痕を撮影した撮影画像を利用して捜索対象者の捜索に有効な情報を提供する捜索情報提供システム1および捜索情報提供装置4について説明している。第1~第3の実施形態の捜索情報提供システム1および捜索情報提供装置4は、動く歩道の手すり部材に付いた人の指紋の痕を撮影した撮影画像を利用して捜索対象者の捜索に有効な情報を提供するシステムとしても適用可能である。
 さらに、第1~第3の実施形態における捜索情報提供システム1および捜索情報提供装置4は、飛行機の搭乗予定者の指紋画像を予め取得することができれば、空港内において、搭乗予定者を捜索する際の情報を提供するシステムとして適用することもできる。このような場合には、データベース5には、例えば、空港の管理会社や旅客機の運航会社などが取得した飛行機の搭乗予定者の指紋画像が格納されることとなる。つまり、このような場合には、捜索情報提供装置4とデータベース5と報告先装置7は、警察により保有されて管理されるのではなく、指紋画像を取得して保有する空港の管理会社や旅客機の運航会社などにより保有されて管理される。すなわち、捜索情報提供装置4とデータベース5と報告先装置7を管理する管理者(管理会社などの組織も含む)や、設置場所は、捜索情報提供システムが構築される目的に応じて、適宜設定される。
 さらに、指紋撮影装置33により撮影された指紋の画像から得られる指紋の大きさの情報により、例えば、エスカレータ14の利用者が大人であるか子供であるかを推定することは可能である。このようなことから、指紋撮影装置33による撮影画像に基づいた受信指紋画像を、捜索対象者の捜索に用いる情報の生成以外の目的で、捜索情報提供装置4は、予め定められた出力先に出力してもよい。
 さらに、第1~第3の実施形態における捜索情報提供システム1および捜索情報提供装置4は、例えば、エスカレータ14の出口側に繋がる通路の先にある例えば部屋の入り口に入場のための認証システムに応用することが可能である。ただ、この場合には、セキュリティを高めるための構成と合わせることが好ましい。なお、このような場合には、データベース5には、例えば、部屋の入出を管理している会社などが取得した入室許可者の指紋画像が格納されることとなる。つまり、このような場合には、捜索情報提供装置4とデータベース5と報告先装置7は、警察により保有されて管理されるのではなく、指紋画像を取得して保有する会社などにより保有されて管理される。
 さらに、第1~第3の実施形態における捜索情報提供装置4は、例えば、処理負荷の軽減を図るために、演算装置10の照合部20の動作を休止する機能を備えていてもよい。例えば、指紋取得装置3の指紋撮影装置33により撮影される手すり部材16が、エスカレータ14に利用者が居ないときに停止する場合には、その手すり部材16の停止と稼動に応じて照合部20の休止と稼動が制御されてもよい。
 さらに、手すり部材16における人の手により把持される部分が、人が把持したくなるような触感の材料により構成されたり、デザインであったり、色であったりしてもよい。さらに、手すり部材16における人の手により把持される部分が、指紋の痕が付きやすい材料により構成されてもよい。
 <第4実施形態>
 以下に、本発明に係る第4実施形態を説明する。
 図5は、第4実施形態の捜索情報提供システムの構成を表すブロック図である。捜索情報提供システム40は、指紋撮影装置41と、捜索情報提供装置42とを備えている。
 指紋撮影装置41は、手すり部材に付いた人の指紋の画像を撮影する装置である。すなわち、手すり部材は、入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら人を補助する往き部分と、出口から入口に向かう方向に移動している戻り部分とを通る循環経路で循環する。指紋撮影装置41は、その手すり部材の循環経路における戻り部分で人の指紋の画像を撮影する。
 捜索情報提供装置42は、指紋撮影装置41による指紋の画像を利用して捜索対象者の捜索に利用する情報を生成して出力する機能を備える。図6は、捜索情報提供装置42の構成を表すブロック図である。捜索情報提供装置42は、例えば、コンピュータ装置により構成される。捜索情報提供装置42は、機能部として、照合部44と、出力部45とを備えている。
 照合部44は、指紋撮影装置41による指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する機能を備えている。
 出力部45は、手すり部材における指紋の画像が捜索対象者の指紋の画像に合致した場合には、捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する機能を備える。
 第4実施形態の捜索情報提供システム40および捜索情報提供装置42は上述したように構成されている。次に、捜索情報提供装置42における動作の一例を図7を利用して説明する。
 例えば、捜索情報提供装置42は、指紋撮影装置41から指紋の画像を受信すると(ステップS301)と、照合部44は、受信した指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する(ステップS302)。その後、出力部45は、指紋の画像が捜索対象者の指紋の画像に合致した場合には、捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する(ステップS303)。
 第4実施形態の捜索情報提供システム40および捜索情報提供装置42は、第1~第3の実施形態と同様に、手すり部材に付いた指紋の痕を利用した捜索対象者に関わる情報を提供可能な構成を備えている。すなわち、第4実施形態の捜索情報提供システム40および捜索情報提供装置42は、監視カメラの映像とは異なる情報であって人の捜索に有効な情報を提示可能であるという効果を得ることができる。
 以上、上述した実施形態を模範的な例として本発明を説明した。しかしながら、本発明は、上述した実施形態には限定されない。即ち、本発明は、本発明のスコープ内において、当業者が理解し得る様々な態様を適用することができる。
 1,40 捜索情報提供システム
 4,42 捜索情報提供装置
 16 手すり部材
 20,44 照合部
 21,45 出力部
 33,41 指紋撮影装置

Claims (8)

  1.  入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら前記人を補助する往き部分と、前記出口から前記入口に向かう方向に移動している戻り部分とを通る循環経路で循環する手すり部材に付いた前記人の指紋の痕が撮影されている撮影画像における前記人の指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する照合手段と、
     前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する出力手段と
    を備える捜索情報提供装置。
  2.  前記出力手段は、前記捜索対象者を検知したことを表す情報として、前記捜索対象者を識別する情報と、前記人の指紋の画像が撮影された撮影時刻を表す時間情報と、撮影された場所を表す情報とを出力する請求項1に記載の捜索情報提供装置。
  3.  請求項1又は請求項2に記載の捜索情報提供装置と、
     前記手すり部材に付いた前記人の指紋の痕を前記循環経路の前記戻り部分で撮影し前記捜索情報提供装置に前記人の指紋の画像を供給する指紋撮影装置と
    を備える捜索情報提供システム。
  4.  前記手すり部材における前記人の指紋の痕を発光させる発光薬を、前記指紋撮影装置により撮影される前記循環経路の部分よりも手前側の部分で前記手すり部材に付着する付着装置と、
     前記手すり部材における前記指紋撮影装置により撮影される部分に向けて、前記発光薬を発光させる光を照射する照射装置と、
     前記手すり部材に付いている前記人の指紋の痕および前記発光薬を、前記指紋撮影装置により撮影される前記循環経路の部分を通った後の部分で取り除く除去装置と
    をさらに備える請求項3に記載の捜索情報提供システム。
  5.  前記付着装置と前記照射装置と前記指紋撮影装置と前記除去装置は、同じ筐体内に収納されている請求項4に記載の捜索情報提供システム。
  6.  前記搬送部材で搬送されている人を撮影する人物撮影装置をさらに備え、
     前記捜索情報提供装置は、
     前記指紋撮影装置により撮影された前記指紋の画像と、当該画像に撮影されている指紋を持つ人の前記人物撮影装置により撮影された画像とを関連付ける紐付け手段
    をさらに備え、
     前記出力手段は、前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者の指紋の画像と一致した前記人の指紋の画像に、前記紐付け手段によって関連付けられている前記人の画像を前記報告先に出力する機能をさらに備える
    請求項3乃至請求項5の何れか一項に記載の捜索情報提供システム。
  7.  入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら前記人を補助する往き部分と、前記出口から前記入口に向かう方向に移動している戻り部分とを通る循環経路で循環する手すり部材に付いた前記人の指紋の痕が撮影されている撮影画像における前記人の指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合し、
     前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する
    捜索情報提供方法。
  8.  入口から出口に向かって移動することによって人を搬送する搬送部材の移動に伴って移動しながら前記人を補助する往き部分と、前記出口から前記入口に向かう方向に移動している戻り部分とを通る循環経路で循環する手すり部材に付いた前記人の指紋の痕が撮影されている撮影画像における前記人の指紋の画像を、予め与えられている捜索対象者の指紋の画像に照合する処理と、
     前記手すり部材における前記人の指紋の画像が前記捜索対象者の指紋の画像に合致した場合には、前記捜索対象者を検知したことを表す情報を予め定められた報告先に向けて出力する処理と
    をコンピュータに実行させるコンピュータプログラムを記憶するプログラム記憶媒体。
PCT/JP2020/012441 2020-03-19 2020-03-19 捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体 WO2021186712A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US17/802,391 US11900714B2 (en) 2020-03-19 2020-03-19 Search information providing device, search information providing system, search information providing method, and program recording medium
PCT/JP2020/012441 WO2021186712A1 (ja) 2020-03-19 2020-03-19 捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体
JP2022507997A JP7375912B2 (ja) 2020-03-19 2020-03-19 捜索情報提供システムおよび捜索情報提供方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/012441 WO2021186712A1 (ja) 2020-03-19 2020-03-19 捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体

Publications (1)

Publication Number Publication Date
WO2021186712A1 true WO2021186712A1 (ja) 2021-09-23

Family

ID=77768156

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/012441 WO2021186712A1 (ja) 2020-03-19 2020-03-19 捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体

Country Status (3)

Country Link
US (1) US11900714B2 (ja)
JP (1) JP7375912B2 (ja)
WO (1) WO2021186712A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7145564B1 (ja) * 2021-09-09 2022-10-03 東芝エレベータ株式会社 エレベータの操作ボタン装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10275211A (ja) * 1997-03-28 1998-10-13 Sony Corp 画像の特徴データ作成装置及び方法並びに画像データの検索装置及び方法
JP2003184381A (ja) * 2001-12-17 2003-07-03 Hitachi Ltd 入室管理方法及びその実施システム並びにその処理プログラム
JP2005128634A (ja) * 2003-10-21 2005-05-19 Hitachi Kokusai Electric Inc 捜索人検知システム
WO2009090724A1 (ja) * 2008-01-15 2009-07-23 Mitsubishi Electric Corporation エレベータ制御システム及びエレベータ制御装置
WO2012063708A1 (ja) * 2010-11-08 2012-05-18 日本電気株式会社 画像照合装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10268166B2 (en) * 2016-09-15 2019-04-23 Otis Elevator Company Intelligent surface systems for building solutions

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10275211A (ja) * 1997-03-28 1998-10-13 Sony Corp 画像の特徴データ作成装置及び方法並びに画像データの検索装置及び方法
JP2003184381A (ja) * 2001-12-17 2003-07-03 Hitachi Ltd 入室管理方法及びその実施システム並びにその処理プログラム
JP2005128634A (ja) * 2003-10-21 2005-05-19 Hitachi Kokusai Electric Inc 捜索人検知システム
WO2009090724A1 (ja) * 2008-01-15 2009-07-23 Mitsubishi Electric Corporation エレベータ制御システム及びエレベータ制御装置
WO2012063708A1 (ja) * 2010-11-08 2012-05-18 日本電気株式会社 画像照合装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7145564B1 (ja) * 2021-09-09 2022-10-03 東芝エレベータ株式会社 エレベータの操作ボタン装置

Also Published As

Publication number Publication date
US11900714B2 (en) 2024-02-13
US20230106798A1 (en) 2023-04-06
JPWO2021186712A1 (ja) 2021-09-23
JP7375912B2 (ja) 2023-11-08

Similar Documents

Publication Publication Date Title
KR101171032B1 (ko) 목적지 입력 급송 작동들에서의 보안 추적을 위한 익명 승객 인덱싱 시스템
JP6859364B2 (ja) 未搭乗者捜索装置、未搭乗者捜索方法、及びプログラム
US10259681B2 (en) Elevator dispatch using fingerprint recognition
WO2021186712A1 (ja) 捜索情報提供装置、捜索情報提供システム、捜索情報提供方法およびプログラム記憶媒体
EP1479033A2 (en) Personalized boarding pass
JP2024003090A (ja) 情報処理装置、情報処理方法及びプログラム
WO2020004134A1 (ja) ゲート装置及びシステム
JP7070749B2 (ja) エレベータ制御装置
WO2021241587A1 (ja) 乗降者数計数システム及び乗降者数計数装置
CN113661140B (zh) 乘客引导装置以及乘客引导方法
JP2022136702A (ja) 顔認証システムおよび顔認証方法
CN114746893A (zh) 信息处理装置及方法、引导系统及方法
JP7135032B2 (ja) エレベータの群管理制御システム
JP2022104636A (ja) 入退場管理システム、ユニットパネル、およびユニットハウス
CN213042337U (zh) 一种辅助疫情防控的排队机及排队处理系统
WO2017048148A1 (en) Monitoring a flow of objects by a sim card detector
JP2014152031A (ja) エレベータの保守システムおよび保守方法
WO2021130871A1 (ja) ゲート装置、その制御方法、およびプログラム
JP2004128615A (ja) 人物監視システム
KR20160047645A (ko) 공항 수하물 자동 처리 시스템 및 방법
US11642085B2 (en) Automated health check device and methods
WO2021070255A1 (ja) エレベータの表示システム
JP2008063050A (ja) エレベータのセキュリティシステム
CN113570644B (zh) 一种机场旅客定位方法、装置、电子设备及介质
US20230360805A1 (en) Information processing apparatus, information processing method, and storage medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20925026

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022507997

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20925026

Country of ref document: EP

Kind code of ref document: A1